.jpg/500px-Samsung_Galaxy_Note_10_(S_Pen).jpg)
ペン コンピューティングとは、キーボードやマウスなどの入力デバイス上で、 ペンまたはスタイラスとタブレットを使用するコンピューター ユーザー インターフェイスを指します。
ペンコンピューティングは、タブレットコンピュータ、PDA、GPS受信機などのモバイルデバイスの使用を指す場合にも使用されます。この用語は、モバイル通信を可能にするあらゆる製品の使用を指すために使用されています。このようなデバイスの指標は、スタイラスまたはデジタルペンであり、キーボード、キーパッド、マウス、タッチパッドなどの従来のインターフェイスを使用するのではなく、グラフィックタブレットまたはタッチスクリーンを押すのに 一般的に使用されます。
歴史的に、ペンコンピューティング(ポインティングデバイスを使用したユーザーインターフェイスと手書き認識を主な対話型ユーザー入力手段として採用したコンピュータシステムとして定義)は、マウスとグラフィカルディスプレイの使用よりも少なくとも20年は前に存在し、1950年代から1960年代初頭のStylator [1]とRAND Tablet [2] システムに始まります。
一般的なテクニック
ペンコンピューティングのユーザーインターフェースはいくつかの方法で実装できます。[3]現在のシステムでは、一般的にこれらの技術を組み合わせて採用しています。
ポインティング/ロケータ入力
タブレットとスタイラスは、マウスの代わりに使用されるポインティング デバイスとして使用されます。マウスは相対的なポインティング デバイス (マウスを使用して画面上でカーソルを動かす) ですが、タブレットは絶対的なポインティング デバイス (カーソルを表示する場所にスタイラスを置きます) です。
実際にマウスの代わりにスタイラスとタブレットを使用する場合、考慮すべき人的要因がいくつかあります。たとえば、スタイラスでまったく同じ位置を 2 回ターゲットしたりタップしたりすることは非常に難しいため、システムがマウスからの「ダブルクリック」入力を期待している場合、スタイラスによる「ダブルタップ」操作は実行が難しくなります。
タッチスクリーンなどのタッチ感度の高いタブレット表面では、指をスタイラスとして使用できます。
手書き認識
タブレットとスタイラスを2 つのモードで使用することで、キーボードの代わりに使用したり、マウスとキーボードの両方の代わりに使用したりできます。
- ポインティングモード: 上記のようにスタイラスをポインティングデバイスとして使用します。
- オンライン手書き認識モード: スタイラスで書かれたストロークは、ソフトウェアによって「電子インク」として分析され、ストロークまたはマークの形状が手書き文字として認識されます。その後、文字はキーボードから入力したのと同じようにテキストとして入力されます。
異なるシステムでは、異なる手段でモード(ポインティングと手書き認識)を切り替えます。例:
- ポインティング モードと手書き認識モードでタブレットの別々の領域に書き込みます。
- スタイラスの側面にある特別なボタンを押してモードを変更します。
- テキストとして認識されないマークをポインティング入力として扱うなど、コンテキストに応じて異なります。
- 特別なジェスチャーマークを認識することによって。
「オンライン手書き認識」という用語は、入力にリアルタイムのデジタル化タブレットを使用して手書きを認識することと、紙からの静的な手書き記号の光学文字認識である「オフライン手書き認識」を区別するために使用されます。
直接操作
スタイラスは、シミュレートされたオブジェクトに直接触れたり、押したり、ドラッグしたりするために使用されます。Wang Freestyle システム[4]はその一例です。Freestyle は、手書きのメモを追加するための電子「インク」を追加しただけで、完全に直接操作によって動作しました。
ジェスチャー認識
これは、特定の特殊な形状を手書き入力としてではなく、特殊なコマンドの指標として認識する技術です。
たとえば、「豚のしっぽ」の形 (校正者のマークとしてよく使用される) は、「削除」操作を示します。実装によっては、マークが付けられたオブジェクトまたはテキストが削除される場合もあれば、スタイラスをポインティング デバイスとして使用して削除対象を選択することもできます。Apple のNewton OSでは、テキストの上をジグザグに引っかくことでテキストを削除できます。
最近のシステムでは、一度に複数の「スタイラス」(通常は指)を認識し、マルチタッチジェスチャを利用できるデジタイザーが使用されています。
PenPoint OSは、ジェスチャ認識と手書き入力をオペレーティングシステムのすべてのレベルで組み込んだ特別なオペレーティングシステムでした。ジェスチャ認識を採用していた以前のシステムは、CAD/CAMアプリケーション[5] [6]やテキスト処理[7]などの特別なアプリケーション内でのみジェスチャ認識を採用していました。
歴史
ペンコンピューティングには非常に深い歴史的ルーツがあります。
手書きに使われる電子機器であるテレオートグラフの最初の特許は1888年に取得されました。[8] 手書きの動きを分析して手書き文字を認識するシステムの最初の特許は1915年に取得されました。[9] 1954年頃、MITのWhirlwindコンピュータに取り組んでいたダグラス・T・ロスは、「コンピュータへの最初の手描きグラフィック入力プログラム」を執筆しました。[10] 現代のデジタルコンピュータを操作するためにキーボードの代わりにタブレットと手書きテキスト認識を使用する最初の公開されたシステムは1956年にさかのぼります。[11]
1980年代には、多くの学術研究システムに加えて、商用製品を提供する企業もいくつかありました。Pencept 、Communications Intelligence Corporation、Linusは、競争の激しいこの分野で最もよく知られた企業でした。その後、GO CorporationはタブレットPC製品用のPenPoint OSオペレーティングシステムを発表しました。GOの特許の1つは、2008年にMicrosoftのタブレットPCオペレーティングシステムに関する特許侵害訴訟の対象となりました。 [12]
次のタイムライン リストには、この歴史のハイライトの一部が示されています。
- 1950年以前
- 1888年:手書き文字をキャプチャするための電気スタイラス装置に関する米国特許がエリシャ・グレイに付与された。 [8] [13]
- 1915年:スタイラスペンによる手書き認識ユーザーインターフェースに関する米国特許。[9] [14]
- 1942年:手書き入力用タッチスクリーンに関する米国特許。[15] [16]
- 1945年:ヴァネヴァー・ブッシュが「 As We May Think」と題するエッセイの中で、手書き入力を含むデータアーカイブ装置であるMemexを提案した。[17]
- 1950年代
- トム・ダイモンドは、コンピュータ入力と手書き認識のためのペンを備えたStyalator電子タブレットを実演している。[11]
- 1960年代初頭
- RANDタブレットが発明された。[18] [19]
- 1960年代後半
- Xerox PARC のAlan Kayは、ペン入力を使用するDynabookと呼ばれるノートブックのアイデアを提案しました。しかし、物理的なデバイスは作成されませんでした。
- 1971
- SLACで開発されたタッチスクリーンインターフェース。[20]
- 1979
- 初期の商用デジタルサンプリングワークステーションであるフェアライトCMI
- 1982
- マサチューセッツ州ウォルサムのペンセプトは、キーボードとマウスの代わりにタブレットと手書き認識機能を搭載した汎用コンピュータ端末を販売している。[21]
- Cadre Systemは、手書き認識と小型電子タブレットとペンを使用したInforite POS端末を販売しています。[22]
- 1985年:
- 1989
- 最初の市販のタブレット型ポータブルコンピュータは、9月に発売されたGRiD SystemsのGRiDPad 1900 [26]でした。このコンピュータは、MS-DOS上で動作するペン入力と手書き認識機能を備えたグラフィックシステムであるGRiDPen(後にPenRightとして発売)を搭載していました。
- ワング研究所がフリースタイルを発表。フリースタイルはMS-DOSアプリケーションからスクリーンキャプチャを行い、ユーザーが音声や手書きの注釈を追加できるアプリケーションだった。これは、タブレットPCなどのシステム用の後のメモ作成アプリケーションの洗練された先駆けだった。オペレーティングシステムはMS-DOSだった。[27]
- 1991
- Momentaペントップが発売された。[28] [29]
- GO社は、手書きのジェスチャ形状を介してオペレーティングシステムデスクトップを制御することを特徴とした、 PenPoint OSと呼ばれる専用のオペレーティングシステムを発表しました。 [30] [31]ジェスチャには、さまざまな方向への「フリック」ジェスチャ、チェックマーク、取り消し線、ピグテール、円形などが含まれていました。
- Future Computing の Portia Isaacsen 氏は、 PenPoint OSを実行するペン コンピュータの年間市場規模は 5 億ドル程度になると見積もっています。
- NCRは、MS-DOS、Penpoint、またはPen Windowsを実行するモデル3125ペンコンピュータをリリースしました。[32]
- Apple Newton の開発が開始されました。最終的にはPDAになりましたが、当初のコンセプト (より大きな画面と優れたスケッチ機能を求めるもの) はタブレット PC に似ていました。
- Atari 社の Sam Tramiel は、ドイツのハノーバーで開催されたCeBIT '91で「ST-Pad」(コードネーム「STylus」)を発表しました。このコンピュータは結局生産されませんでした。
- 1992
- GO社はペンポイントを出荷し、IBMは4月にIBM 2521/700Tペンコンピュータ(「ThinkPad」と名付けられた最初のIBMモデル)を発表しました。[33]
- Microsoft は、 PenPoint OS への対応として、Windows for Pen Computing をリリースしました。
- 1993
- IBMは、IBM初の市販ポータブルタブレットコンピュータ製品であるThinkPadをIBM ThinkPad 750Pおよび360Pとして発売した[34]
- Apple Computer は、スタイラスによる手書き認識機能を備えた Newton PDA (Apple MessagePad とも呼ばれる) を発表しました。
- アムストラッドは同様のペンベースのデバイスである「ペンパッド」またはPDA600をリリースしたが、商業的には成功しなかった。[35]
- AT&T は、 PenPoint と無線通信を組み合わせたEO パーソナル コミュニケーターを発表しました。
- BellSouth は、タッチスクリーンとディスプレイを使用したアナログ携帯電話であるIBM Simon Personal Communicator をリリースしました。手書き認識機能は搭載されていませんでしたが、アナログ携帯電話ネットワーク上でメッセージを書いてファックスとして送信することができ、PDA と電子メールの機能も搭載されていました。
- 1999
- Aqcess Technologies社が開発したペン型コンピュータ「QBE」がComdex Best of Showを受賞。[36]
- 2000
- Aqcess Technologies 社が開発したペン型コンピュータ「QBE Vivo」がComdex Best of Show で同率受賞。
- 2001
- マイクロソフトのビル・ゲイツが、 ComdexでタブレットPC(マイクロソフトが考案したハードウェア仕様に準拠し、 Windows XP Tablet PC Editionのライセンスコピーを実行するペン対応コンピュータとマイクロソフトが定義)の最初の公開プロトタイプを披露しました[37]。
- ワコムはプロのアーティスト向けにCintiqペンベースタブレットプラットフォームを発表しました。[38]
- 2003
- FingerWorks [39]は、後にApple iPhone [40]で使用されるタッチ技術とタッチジェスチャを開発しました。
- 2005
- LeapFrog EnterprisesがFlyペントップを発売。[41]
- 2006
- Windows Vista が一般向けにリリースされました。Vista には、Windows XP の特別な Tablet PC エディションの機能が含まれていました。
- 2008
- 2008年4月、連邦裁判所のより大規模な訴訟の一環として、Windows/タブレットPCオペレーティングシステムとハードウェアのジェスチャー機能が、GO Corp.のペンコンピュータオペレーティングシステムのユーザーインターフェイスに関する特許を侵害していることが判明しました。[12] Microsoftによるこの技術の買収は、別の訴訟の対象となっています。[42] [43]
- HPは2番目のマルチタッチ対応タブレット、HP TouchSmart tx2zをリリースしました。[44]
- 2011
- サムスンが、スタイラスを搭載したハイブリッドスマートフォン/タブレット(「ファブレット」) Samsung Galaxy Noteをリリースしました。
- 2012
- Microsoft は、オプションのSurface ペンを備えたMicrosoft Surface Pro ハイブリッド タブレット/ラップトップをリリースしました。
- 2013
- Lenovo は、Wacomスタイラスを搭載したThinkPad Helixハイブリッド タブレット/ラップトップを発表しました。
- 2015
- 2021
- Samsung は、 Samsung Galaxy Note シリーズで採用されている S ペンのサポートを備えた最初の Samsung Galaxy S スマートフォンである Samsung Galaxy S21 Ultraをリリースするとともに、S ペンをサポートするスマートフォン、タブレット、PC と互換性のある独立した高級スタイラスである S Pen Pro もリリースしました。
- 2021年8月、SamsungはSamsung Galaxy Noteシリーズ全体の生産終了に伴い、Sペンをサポートする最初のGalaxy Z Fold折りたたみ式携帯電話であるSamsung Galaxy Z Fold 3をリリースしました。これと同時に、Z Foldと互換性のない他のスタイラスペンやSペンProを使用するのではなく、画面の損傷を避けるためにGalaxy Z Fold 3以降に排他的に互換性のある独立したスタイラスとしてSペンフォールドエディションがリリースされました。
参照
- スタイラス(コンピューティング)
- ジェスチャー認識
- 筆跡の動きの分析
- 手書き認識
- インタラクティブホワイトボード
- レーザーポインター(例:ハイライト)
- ライトペン
- スケッチ認識
- タブレットコンピュータ
参考文献
- ^ Dimond, TL (1957-12-01)、手書き文字を読み取るためのデバイス、Eastern Joint Computer Conference Proceedings、pp. 232–237
- ^ Groner, GF (1966 年 8 月)、手書きテキストのリアルタイム認識、覚書 RM-5016-ARPA、RAND Corporation
- ^ Signer, B. (2024)、ペンベースのインタラクション(PDF)、ヒューマンコンピュータインタラクションハンドブック、主要参考文献、Springer Nature
- ^ WANG Freestyle デモ、Wang Laboratories、1989年、 2008年9月22日閲覧
- ^ コンピュータグラフィックス処理システム: システムユーザーズマニュアル、Applicon Incorporated、1973-09-01
- ^ ニューマン、WM (1973-09-01)、レディーン文字認識装置、インタラクティブコンピュータグラフィックスの原理、マグロウヒル、pp. 575–582
- ^ Coleman, Michael L. (1969)、「手書きの校正記号を使用したグラフィック ディスプレイ デバイスでのテキスト編集」、Pertinent Concepts in Computer Graphics: Proceedings of the 2nd University of Illinois Conference on Computer Graphics、University of Illinois Press より
- ^ ab Gray, Elisha (1888-07-31)、テレオートグラフ(PDF)、米国特許 386,815 (フル画像)
- ^ ab Goldberg, HE (1915-12-28)、管理者(PDF)、米国特許 1,117,184 (フルイメージ)
- ^ ロス、ダグ (1989)、回顧録 1: コンピュータグラフィックスの黎明期(PDF)、SIGGRAPH 89 Proceedings、pp. 27–28
- ^ ab ダイモンド、トム (1957-12-01)、手書き文字を読み取るためのデバイス、イースタンジョイントコンピュータカンファレンスの議事録、pp. 232–237、2008-08-23取得
- ^ ab Mintz, Jessica (2008-04-04). 「Microsoft、3億6,700万ドルの特許判決を控訴へ」。Associated Press。2008年12月12日時点のオリジナルよりアーカイブ。2008年9月4日閲覧。
- ^ グレイ (1888-07-31)、テレオートグラフ、米国特許 386,815
- ^ ゴールドバーグ、HE(1915-12-28)、管理者、米国特許1,117,184
- ^ Moodey, HC (1942-12-27)、テレオートグラフシステム、米国特許 2,269,599
- ^ Moodey, HC (1942-12-27)、テレオートグラフ システム(PDF)、米国特許 2,269,599 (フル画像)
- ^ ブッシュ、ヴァネヴァー(1945-07-15)、As We May Think、The Atlantic Monthly
- ^ RAND Tablet、1961-09-01
- ^ 50 Years of Looking Forward、RAND Corporation、1998-09-01、2009-05-07 にオリジナルからアーカイブ
- ^ フライバーガー、D.(1972年3月)、大規模コンピュータ制御システム用制御パネルの革新、第4回IEEE粒子加速器会議議事録、米国イリノイ州シカゴ、1971年3月1日~3日、pp.414~417
- ^ Pencept Penpad (TM) 200 製品資料、Pencept, Inc.、1982-08-15
- ^ Inforite 手書き文字認識端末、Cadre Systems Limited、イギリス、1982-08-15
- ^ Penpad 320 ユーザーズマニュアル、Pencept, Inc.、1984-06-15
- ^ ペンの一筆によるソフトウェア制御、Pencept, Inc.、1985年、 2009年5月21日取得
- ^ ハンドライター (R) GrafText (TM) システム モデル GT-5000、コミュニケーション インテリジェンス コーポレーション、1985-01-15
- ^ BYTE アワード: GRiD System の GRiDPad、BYTE マガジン、第 15 巻第 1 号、1990 年 1 月 12 日、p. 285
- ^ ワング研究所 (1989)、ワングフリースタイルシステム、ワング研究所
- ^ ビル・レンプシス(1990 年 5 月)、ラップトップとペンコンピューティングの最新情報、フラットパネルディスプレイニュース
- ^ 「Momenta Corporation 1/40 ペントップコンピュータ - RICM」。sites.google.com 。 2020年6月4日閲覧。
- ^ Agulnick, Todd (1994-09-13)、位置感知スタイラスによるコンピュータの制御、米国特許 5,347,295
- ^ Agulnick, Todd (1994-09-13)、位置感知スタイラスによるコンピュータの制御(PDF)、米国特許 5,347,295 (フル画像)
- ^ Shapiro, Eben (1991-06-24). 「NCRがペンベースのコンピュータを提供」.ニューヨークタイムズ. 2024年9月12日閲覧。
- ^ Rohrbough, Linda (1992-04-17)、Penpoint OS 出荷、製品紹介 - Go Technology Corp のペンベース オペレーティング システム - 製品発表、Newsbytes News Network、2007-08-30 にオリジナルからアーカイブ、 2007-04-20取得
- ^ 「ThinkPadの歴史」。2007年4月29日時点のオリジナルよりアーカイブ。
- ^ Amstrad PenPad PDA600. Computing History (2011-10-21). 2013-12-09 に取得。
- ^ COMDEX イベント 1999 のトレンド、 2008 年 8 月 11 日取得
- ^ Microsoft (2005)、Windows XP Tablet PC Edition 2005 ハードウェア要件、www.microsoft.com 、 2009 年 3 月 14 日取得
- ^ 「2009 年度年次報告書」(PDF)。ワコム。
- ^ Fingerworks, Inc. (2003)、iGesture ゲームモードガイド、www.fingerworks.com 、 2009 年 4 月 30 日取得
- ^ MacEssentials (2007-08-02)、Rubrik Apple: Das Lexikon der Fingersprache、www.mac-essentials.de 、 2009-05-16取得
- ^ Druin, Allison (2009-03-16). 子どものためのモバイルテクノロジー: インタラクションと学習のためのデザイン。Morgan Kaufmann。p. 177。ISBN 978-0-08-095409-7。
- ^ Fried, Ina (2005 年 7 月 6 日)。「Go が Microsoft に対して反トラスト訴訟を起こす」CNET。
- ^ 新たな反トラスト訴訟 - Go Corp. v. Microsoft。Groklaw (2005-07-04)。2013-12-09 に閲覧。
- ^ HP TouchSmart tx2z、HP 、 2008年11月28日閲覧
外部リンク
- 『ペン コンピューティングの知られざる歴史』には、タッチおよびジェスチャ テクノロジを含む、1917 年から 1992 年頃までのペン コンピューティングの歴史が収められています。
- 手書き認識とペンコンピューティングに関する参考文献の注釈付き書誌
- ペンコンピューティング リソースへのリンクが多数あります。
- タブレット PC の画期的な技術であるデジタル インクが、ペンのパワーをデスクトップにもたらす
- ペンベースのコンピューティングの歴史に関するメモ (Youtube)
