JP3704777B2 - ペン入力型情報処理装置及びコマンド入力方法 - Google Patents

ペン入力型情報処理装置及びコマンド入力方法 Download PDF

Info

Publication number
JP3704777B2
JP3704777B2 JP250396A JP250396A JP3704777B2 JP 3704777 B2 JP3704777 B2 JP 3704777B2 JP 250396 A JP250396 A JP 250396A JP 250396 A JP250396 A JP 250396A JP 3704777 B2 JP3704777 B2 JP 3704777B2
Authority
JP
Japan
Prior art keywords
input
gesture
command
pen
type information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP250396A
Other languages
English (en)
Other versions
JPH09190280A (ja
Inventor
浩司 荻野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP250396A priority Critical patent/JP3704777B2/ja
Publication of JPH09190280A publication Critical patent/JPH09190280A/ja
Application granted granted Critical
Publication of JP3704777B2 publication Critical patent/JP3704777B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Digital Computer Display Output (AREA)
  • Position Input By Displaying (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、ペン入力装置を用いてジェスチャと呼ばれる所定の記号を入力することによりコマンドを入力することが可能なペン入力型情報処理装置及びコマンド入力方法に関する。
【0002】
【従来の技術】
ペン入力型情報処理装置は、ペン入力装置を備えた情報処理装置であり、一般にペンコンピュータと呼ばれている。ここで、ペン入力装置は、例えば、ペンとタブレットが対となった入力装置であり、タブレット上においてペンによって指示された点の座標データや、タブレット上においてペンによって描画された文字や図形等の座標データ等が入力されるようになっている。このようなペン入力装置において、タブレットは、通常、透明な部材によって形成され、コンピュータによって処理された結果が表示される液晶ディスプレイ等の表示装置上に配されている。すなわち、通常、ペン入力型情報処理装置では、表示装置に表示された情報を見ながら、表示装置上においてペンによって点を指示したり、文字や図形等を描画することにより、それらの点、文字又は図形等に対応した座標データ等が入力されるようになっている。
【0003】
このようなペン入力型情報処理装置において、所定の処理を指示するコマンドの入力方法として、ペン入力型情報処理装置の特徴を生かしたジェスチャ入力が知られている。
【0004】
ジェスチャ入力とは、予め、校正記号等のような所定の記号をジェスチャとして登録しておくとともに、それらのジェスチャに対応したコマンドを登録しておき、ペンによってタブレット上にジェスチャが描画されたときに、そのジェスチャに対応したコマンドが入力されるようにする方法である。
【0005】
具体的には、例えば、表示装置上に「このファイルは・・・」という文章が表示されているときに、「ファイル」という文字の上に消去を指示するジェスチャが描画されると、「ファイル」という文字の消去を指示するコマンドが入力され、その結果、「ファイル」という文字が消去されて、表示装置上に「このは・・・」という文章が表示される。
【0006】
このようなジェスチャ入力では、コマンドの入力と、そのコマンドの処理の対象の指定とが同時に行われるので、所望する処理の指示を少ない操作によって入力することができる。例えば、上述の例では、「ファイル」という文字の上に消去を指示するジェスチャを描画するだけで、コマンドの処理の対象として「ファイル」という文字が指定されるとともに、これらの文字の消去を指示するコマンドが入力される。
【0007】
このように、ジェスチャ入力では、コマンドとその処理対象とを少ない操作によって指定することができるので、利用頻度の高いコマンドの入力にジェスチャ入力を用いることにより、それらのコマンドを手早く入力することが可能となり、作業効率が向上する。
【0008】
しかし、ジェスチャ入力に使用されるジェスチャの形状は、通常、対応するコマンドの抽象的表現に基づいて定義されるため、ユーザにとって覚えにくいものとなっている。したがって、従来のジェスチャ入力では、ジェスチャを覚えるという負担が、ユーザにかかってしまうという問題があった。
【0009】
また、ジェスチャの形状が覚えにくいため、通常、ジェスチャは、全てのコマンドに対して定義されるのではなく、使用頻度が高いと思われる限られた少数のコマンドに対してだけ定義される。そして、その他のコマンドについては、後述するような、ジェスチャ入力以外の入力方法である非ジェスチャ入力によって入力するようにされている。したがって、従来のジェスチャ入力では、ジェスチャ入力の利点が、ジェスチャが定義された少数のコマンドに対してだけ生かされ、ジェスチャが定義されていないその他の多くのコマンドに対しては生かされないこととなる。
【0010】
一方、非ジェスチャ入力としては、例えば、タブレット上の所定の点がペンによって指示されたときに、その点の座標データに対応して登録されているコマンドが入力されるようにする方法がある。すなわち、この方法では、例えば、表示装置上に表示されたアイコンやメニュー等にコマンドを登録しておき、アイコンやメニュー等に登録されたコマンドをペンで押さえることにより、そのコマンドがコンピュータに入力される。
【0011】
このようなコマンドの入力方法を用いて、例えば、表示装置上に表示されている「このファイルは・・・」という文章から「ファイル」という文字を消去したいときには、先ず、「ファイル」という文字を指定し、その後、指定された文字を消去するコマンドをアイコンやメニュー等から選択して指示する。これにより、「ファイル」という文字が消去されて、表示装置上に「このは・・・」という文章が表示される。
【0012】
このような入力方法では、表示装置上に表示されたアイコンやメニュー等を選択してペンで押さえることによってコマンドが入力されるので、アイコンやメニュー等からコマンドを推測できるようにしておけば、ユーザが操作に慣れていなくても、所望する処理の指示方法を推測できるという利点がある。
【0013】
また、このような入力方法では、アイコンやメニュー等からコマンドを推測できるようにしてあれば、アイコンやメニューに登録されているコマンドを完全に覚える必要がないため、アイコンやメニュー等に多くのコマンドを登録しておいても、ユーザに負担がかかるようなことはない。したがって、このような入力方法では、ジェスチャ入力に比べて、より多くのコマンドを登録しておくことができるという利点もある。
【0014】
しかし、このような入力方法では、処理の対象を指定した上でコマンドを入力しなければならないため、ジェスチャ入力よりも、所望する処理の指示を入力するのに、より多くの操作を必要とする。例えば、上述の例では、「ファイル」という文字を消去するために、「ファイル」という文字を指定する操作と、指定された文字を消去するコマンドを入力する操作とが必要となっている。このように、非ジェスチャ入力では、所望する処理の指示を入力するのに必要な操作が多いため、ジェスチャ入力に比べて操作が煩わしいという問題がある。特に、メニューが階層構造となっている場合には、所望するコマンドがメニュー上に現れるまで、メニューの選択を繰り返さなければならず、非常に操作が煩わしいものとなってしまう。
【0015】
【発明が解決しようとする課題】
以上のように、ジェスチャ入力では、ジェスチャを覚えなければならないという負担がユーザにかかってしまうという問題があり、一方、非ジェスチャ入力では、コマンドの入力に多くの操作が必要であり、操作が煩わしいという問題がある。
【0016】
そこで本発明は、このような従来の実情に鑑みて提案されたものであり、コマンドを少ない操作で入力できるジェスチャ入力が可能で、しかも、ジェスチャ入力に必要なジェスチャを覚えることが可能なペン入力型情報処理装置及びコマンド入力方法を提供することを目的としている。
【0017】
【課題を解決するための手段】
上述の目的を達成するために完成された本発明に係るペン入力型情報処理装置は、所定の処理を指示するコマンドの入力方法として、所定の記号であるジェスチャを入力することによってコマンドを入力するジェスチャ入力と、ジェスチャ入力以外の入力方法によってコマンドを入力する非ジェスチャ入力とを有するペン入力型情報処理装置であって、入力がジェスチャ入力によるものか非ジェスチャ入力によるものかを判別する入力判別手段と、入力が非ジェスチャ入力によるものであると入力判別手段によって判別されたとき、入力されたコマンドに対応したジェスチャを表示装置に表示するジェスチャ処理手段と、入力が非ジェスチャ入力によるものであると入力判別手段によって判別されたときには、入力されたコマンドに対応したジェスチャが表示装置に表示された後にコマンドを実行し、入力されたコマンドがジェスチャ入力によるものであると入力判別手段によって判別されたときには、直ぐにコマンドを実行するコマンド処理手段とを備えることを特徴とするものである。
【0018】
ここで、ジェスチャ処理手段は、例えば、入力が非ジェスチャ入力によるものであると入力判別手段によって判別されたとき、入力されたコマンドに対応したジェスチャの名称を検索するジェスチャ検索手段と、ジェスチャ検索手段で検索されたジェスチャの名称に対応したジェスチャを表示するための情報を検索するジェスチャ生成手段と、ジェスチャ生成手段で検索された情報に基づいて、ジェスチャを表示装置に表示させるジェスチャ表示手段とを備える。
【0019】
このペン入力型情報処理装置では、非ジェスチャ入力によってコマンドが入力されたときに、ジェスチャ処理手段によって、当該コマンドに対応したジェスチャが表示装置に表示される。したがって、ユーザは、非ジェスチャ入力によってコマンドを入力する毎に、そのコマンドに対応したジェスチャを視認でき、ジェスチャを容易に覚えることができる。
【0020】
なお、このペン入力型情報処理装置は、コマンドが非ジェスチャ入力によって入力されたときに、コマンドに対応したジェスチャを表示装置に表示することなく、直ぐにコマンドを実行するように、設定を変更できるようになっていることが好ましい。
【0021】
このように設定を変更できるようになっていれば、例えば、ユーザにとってジェスチャの表示が不要となったときに、ジェスチャの表示を行わないようにすることができる。そして、このようにジェスチャを表示しないように設定を変更したときには、ジェスチャの表示を行わない分だけ、処理が高速に行われることとなる。
【0022】
【発明の実施の形態】
以下、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。なお、本発明は以下の例に限定されるものではなく、本発明の要旨を逸脱しない範囲で任意に変更可能であることは言うまでもない。
【0023】
本実施の形態に係るペン入力型情報処理装置は、所定の処理を指示するコマンドの入力方法として、所定の記号であるジェスチャを入力することによってコマンドを入力するジェスチャ入力と、ジェスチャ入力以外の入力方法によってコマンドを入力する非ジェスチャ入力とを有している。そして、図1に示すように、このペン入力型情報処理装置1は、主に、演算処理を行う中央演算処理装置(以下、CPUと称する。)2を備えた演算処理部3と、プログラムやデータ等が保存される記憶部4と、入力を受け付ける入力部5と、CPU2による処理の結果が出力される出力部6とから構成される。
【0024】
上記記憶部4は、ハードディスク装置やフレキシブルディスク装置等のような外部記録装置7と、内部記憶装置(以下、メモリと称する。)8とを備えており、これらの外部記録装置7及びメモリ8は、それぞれシステムバス9を介してCPU2に接続されている。ここで、外部記憶装置7には、カナ漢字変換プログラムや手書き文字認識プログラム等のプログラムや、それらのプログラムの実行に必要なデータ等が保存されており、一方、メモリ8には、CPU2による処理の実行時に、処理対象のプログラムやデータ等が保持される。すなわち、CPU2による処理は、必要なプログラムやデータ等が外部記憶装置7から読み出されてメモリ8上に展開された上で行われる。
【0025】
そして、CPU2による処理の結果は出力部6に出力される。ここで、出力部6は、表示装置として液晶ディスプレイ10を備えており、この液晶ディスプレイ10は、ディスプレイドライバ11及び画像データ用メモリ(以下、VRAMと称する。)12を介して、CPU2からのシステムバス9に接続されている。ここで、VRAM12は、CPU2から出力された画像データを一旦保存するためのものであり、ディスプレイドライバ11は、VRAM12から画像データを読み出して、その画像データに対応した画像を表示するように液晶ディスプレイ10を駆動する。
【0026】
なお、本実施の形態では、表示装置として、小型化及び省電力化に適したディスプレイである液晶ディスプレイ10を使用するが、CRTディスプレイやプラズマディスプレイ等を表示装置として使用しても良いことは言うまでもない。
【0027】
一方、入力を受け付ける入力部5は、入力装置として、ペン13とタブレット14が対となったペン入力装置を備えており、これらのペン13及びタブレット14は、タブレットドライバ15を介して、CPU2からのシステムバス9に接続されている。ここで、タブレット14は、透明な部材によって形成され、液晶ディスプレイ10上に配されている。そして、このタブレット14は、例えば、X軸方向に配された複数の電極と、Y軸方向に配された複数の電極とを有しており、これにより、複数の画素に対応した座標データを検出することが可能となっている。そして、タブレットドライバ15は、タブレット14のX軸方向の各電極に対して所定のクロックにて順次所定の電圧を印加してX軸方向のスキャンニングを行うとともに、タブレット14のY軸方向の各電極に対して所定のクロックにて順次所定の電圧を印加してY軸方向のスキャンニングを行う。
【0028】
このようなペン入力装置において、タブレット14上の任意の位置にペン13が接触すると、タブレット14の電極とペン13との間に電荷が生じる。このとき、タブレットドライバ15によってX軸方向及びY軸方向のスキャンニングが行われているので、タブレット14の電極とペン13との間に生じた電荷が検出され、これにより、ペン13が接触したタブレット14上の画素に対応した座標データが検出される。そして、このように検出された座標データは、タブレットドライバ15からシステムバス9を介してCPU2に入力される。
【0029】
このような入力部5から、ジェスチャ入力によってコマンドを入力する際は、液晶ディスプレイ10上に配された透明なタブレット14に、ペン13でジェスチャを描画する。これにより、ジェスチャを示す複数の座標データが入力されるとともに、ジェスチャの下に表示されていた文字等が処理の対象として入力され、そのジェスチャに対応したコマンドが演算処理部3のCPU2によって実行される。
【0030】
また、非ジェスチャ入力によってコマンドを入力する際は、例えば、コマンドによる処理の対象を指定した後、コマンドが登録されたタブレット14上の特定の領域をペンで指示する。これにより、その点の座標データが入力され、その座標データに対応したコマンドが演算処理部3のCPU2によって実行される。
【0031】
なお、入力部5は、以上のようなペン入力装置の他に、マウス等のポインティングデバイスやキーボード等の入力装置を備えていてもよいことは言うまでもない。
【0032】
以上のようなペン入力型情報処理装置1の構成について、図2を参照しながら更に詳細に説明する。
【0033】
上記ペン入力型情報処理装置1の演算処理部3は、入力処理手段21と、イベント監視手段22と、イベント処理手段23とを備えている。
【0034】
上記入力処理手段21は、入力部5からの入力を受け付けて処理する手段であり、例えば、入力部5から処理対象を指示する入力があったときには、指示された対象をイベントオブジェクトとして、記憶部4内に設けられた一時的な記憶領域であるグローバルエリア31に保存する。すなわち、例えば、入力部5から文字列の選択を指示する入力があったとき、入力処理手段21は、当該文字列をイベントオブジェクトとしてグローバルエリア31に保存する。
【0035】
また、入力処理手段21は、非ジェスチャ入力によってコマンドの入力があったときには、記憶部4内に保存されているイベントテーブル32を参照して、その入力に対応したイベントを生成する。ここで、イベントとは、特定の出来事に対応して生成される特定のデータであり、イベントテーブル32には、特定の出来事とイベントとの対応関係が記録されている。
【0036】
また、入力処理手段21は、ジェスチャ入力によってコマンドの入力があったときには、予め記憶部4内に保存されているジェスチャテーブル33を参照して、その入力に対応したイベントを生成する。ここで、ジェスチャテーブル33には、ジェスチャが記録されており、入力処理手段21は、このジェスチャテーブル33を参照して、ユーザによって入力された複数の座標データ、すなわちタブレット14上におけるペン13の軌跡を示す座標データからジェスチャを識別し、そのジェスチャに対応したイベントを生成する。
【0037】
そして、このように入力処理手段21によって生成されたイベントは、イベントオブジェクトと共に、イベント監視手段22に渡される。
【0038】
イベント監視手段22は、イベントの生成を監視する手段であり、ペン入力型情報処理装置1のオペレーティングシステムの基本となるカーネルプログラムによって駆動される。そして、このイベント監視手段22は、ペン入力型情報処理装置1が起動された後、図3のステップS1に示すように、イベントの生成を検出するルーチンを繰り返し行う。そして、例えば、入力処理手段21によってイベントが生成され、イベント監視手段22にイベントが渡されたときに、このイベント監視手段22は、図3のステップS2に示すように、イベント処理手段23を起動する。
【0039】
このようにイベント監視手段22によって起動されるイベント処理手段23は、イベントとイベントオブジェクトに基づいて所定の処理を実行する手段であり、入力判別手段24と、ジェスチャ処理手段25と、コマンド処理手段26とを備えている。
【0040】
上記入力判別手段24は、入力がジェスチャ入力によるものか非ジェスチャ入力によるものかを判別する手段であり、この入力判別手段24は、入力が非ジェスチャ入力によるものであるときには、ジェスチャ処理手段25を起動し、入力がジェスチャ入力によるものであるときには、コマンド処理手段26を起動する。ただし、入力判別手段24は、入力が非ジェスチャ入力によるものであっても、その入力に対応するジェスチャが登録されていないときには、直ぐにコマンド処理手段26を起動する。
【0041】
そして、入力が非ジェスチャ入力のときに起動されるジェスチャ処理手段25は、入力されたコマンドに対応したジェスチャを出力部6の液晶ディスプレイ10に表示させるものであり、ジェスチャ検索手段25aと、ジェスチャ生成手段25bと、ジェスチャ表示手段25cとを備えている。
【0042】
上記ジェスチャ検索手段25aは、入力が非ジェスチャ入力によるものであると入力判別手段24によって判別されたときに起動され、記憶部4内のイベントジェスチャテーブル34を参照して、入力処理手段21で生成されたイベントに対応したジェスチャの名称を検索する。すなわち、このジェスチャ検索手段25aでは、入力されたコマンドに対応したジェスチャの名称が検索されることとなる。ここで、イベントジェスチャテーブル34は、予め記憶部4内に保存されているデータであり、イベントとジェスチャの対応が記録されている。
【0043】
そして、ジェスチャ生成手段25bは、ジェスチャテーブル33を参照して、ジェスチャ検索手段25aで検索されたジェスチャの名称に対応したジェスチャを表示するための情報を検索する。なお、ジェスチャを表示するための情報には、ジェスチャを表示する際の手順等の情報が含まれており、以下の説明では、このような情報のことを「手続き」と呼ぶ。
【0044】
このようにジェスチャ生成手段25bで検索された手続きは、ジェスチャ表示手段25cに渡され、ジェスチャ表示手段25cは、この手続きに基づいて、ジェスチャを出力部6の液晶ディスプレイ10に表示させる。これにより、入力されたコマンドに対応したジェスチャが液晶ディスプレイ10に表示されることとなる。そして、ジェスチャ表示手段25cによるジェスチャの表示処理の完了後、コマンド処理手段26が起動される。
【0045】
コマンド処理手段26は、コマンドを実行する手段であり、上述したように、入力が非ジェスチャ入力によるものであると入力判別手段24によって判別されたときには、入力されたコマンドに対応したジェスチャが液晶ディスプレイ10に表示された後に起動され、入力がジェスチャ入力によるものであると入力判別手段24によって判別されたときには、直ぐに起動される。
【0046】
そして、このコマンド処理手段26は、コマンド検索手段26aと、コマンド実行手段26bとを備えており、コマンド検索手段26aは、記憶部4内のコマンドアドレステーブル35を参照して、イベントに対応したコマンドを実行するためのプログラムのアドレスを検索する。ここで、コマンドアドレステーブル35は、予め記憶部4内に保存されているデータであり、コマンドを実行するためのプログラムのアドレスとイベントとの対応が記録されている。そして、コマンド実行手段26bは、コマンド検索手段26aで検索されたプログラムのアドレスを受け取り、そのプログラムを起動して、イベントオブジェクトに対してコマンドを実行し、その結果を出力部6に出力する。
【0047】
以上のようなペン入力型情報処理装置1による情報処理方法について、図4に示すフローチャートを用いて説明する。なお、図4のフローチャートは、入力部5からの入力に対応したイベントが入力処理手段21によって生成され、このイベントを受け取ったイベント監視手段22によって入力判別手段24が起動された段階から開始している。
【0048】
先ず、ステップST1において、入力判別手段24は、イベント監視手段22から受け取ったイベントに基づいて、入力部5からの入力がジェスチャ入力によるものであったか否かを判別する。そして、入力が非ジェスチャ入力によるものであるときは、ステップST2に進み、入力がジェスチャ入力によるものであるときは、ステップST5に進む。
【0049】
ステップST2では、ジェスチャ処理手段25内のジェスチャ検索手段25aが起動され、このジェスチャ検索手段25aは、イベントジェスチャテーブル34を参照して、入力判別手段24から受け取ったイベントに対応したジェスチャの名称を検索する。そして、ジェスチャ検索手段25aによってジェスチャの名称が検索されたら、ステップST3に進む。
【0050】
ステップST3では、ジェスチャ生成手段25bが起動され、このジェスチャ生成手段25bは、ジェスチャテーブル33を参照して、ステップST2で検索されたジェスチャの名称に対応したジェスチャを表示するための手続きを検索する。そして、ジェスチャ生成手段25bによって手続きが検索されたら、ステップST4に進む。
【0051】
ステップST4では、ジェスチャ表示手段25cが起動され、このジェスチャ表示手段25cは、ステップST3で検索された手続きを実行し、ジェスチャを液晶ディスプレイ10に表示する。そして、ジェスチャ表示手段25cによってジェスチャが表示されたら、ステップST5に進む。
【0052】
ステップST5では、コマンド処理手段26が起動され、このコマンド処理手段26は、入力処理手段21で生成されたイベントに対応した処理を実行する。そして、以上の処理により、処理が完了する。
【0053】
つぎに、以上のようなペン入力型情報処理装置1による情報処理方法について、具体的な例を挙げて更に詳細に説明する。なお、以下に説明する情報処理では、図5に示すように、液晶ディスプレイ10に「そのファイルは・・・」という文章40が表示されているときに、非ジェスチャ入力によってコマンドを入力して文章40から「ファイル」という文字を消去し、液晶ディスプレイ10に「このは・・・」という文章が表示されるようにする。
【0054】
上述の処理を行う際、ユーザは、先ず、図6に示すように、文字列「ファイル」41を処理の対象とする指示を入力部5から入力する。
【0055】
このとき、演算処理部3の入力処理手段21は、入力部5からの入力を受け付け、文字列「ファイル」41をイベントオブジェクトとしてグローバルエリア31に保存する。
【0056】
次に、ユーザは、液晶ディスプレイ10に予め表示されているメニュー42内の文字列「編集」が表示されている領域43をペンで押さえる。これにより、ペンによって押さえられた点の座標データが入力部5から入力される。
【0057】
このとき、演算処理部3の入力処理手段21は、入力部5からの入力を受け付け、イベントテーブル32を参照して、入力部5から入力された座標データに対応するイベントを生成し、このイベントをイベント監視手段22に渡す。そして、このイベントを受け取ったイベント監視手段22は、イベント処理手段23内の入力判別手段24を起動するとともに、このイベントを入力判別手段24に渡す。ここで、入力は非イベント入力によるものであるが、この入力に対応するジェスチャは登録されていないので、入力判別手段24は、直ぐにコマンド処理手段26を起動し、イベントをコマンド処理手段26に渡す。そして、コマンド処理手段26内のコマンド検索手段26aは、コマンドアドレステーブル35を参照して、イベントに対応したコマンドを実行するためのプログラムのアドレスを検索し、コマンド実行手段26bは、そのプログラムを実行する。その結果、図7に示すように、文字列「編集」が表示されている領域43の下部に、「編集」のサブメニューとして、文字列に対する編集操作コマンドを列挙したアイテムのリスト44が表示される。
【0058】
次に、ユーザは、所望する処理である文字列消去のコマンドを入力するために、「編集」のサブメニュー内の文字列「カット」が表示されている領域45をペンで押さえる。これにより、ペンによって押さえられた点の座標データ、すなわち文字列消去のコマンドに対応した座標データが入力部5から入力される。
【0059】
このとき、演算処理部3の入力処理手段21は、入力部5からの入力を受け付け、イベントテーブル32を参照して、入力部5から入力された座標データに対応するイベント、すなわち文字列消去のコマンドに対応したイベント「menu-item-cut 」を生成し、このイベント「menu-item-cut 」と、グローバルエリア31に保存されていたイベントオブジェクト「ファイル」とをイベント監視手段22に渡す。そして、このイベント「menu-item-cut 」及びイベントオブジェクト「ファイル」を受け取ったイベント監視手段22は、イベント処理手段23内の入力判別手段24を起動するとともに、このイベント「menu-item-cut 」及びイベントオブジェクト「ファイル」を入力判別手段24に渡す。ここで、入力は非イベント入力によるものであり、この入力に対応するジェスチャは登録されているので、入力判別手段24は、ジェスチャ処理手段25を起動し、ジェスチャ処理手段25にイベント「menu-item-cut 」及びイベントオブジェクト「ファイル」を渡す。
【0060】
そして、ジェスチャ処理手段25内のジェスチャ検索手段25aは、イベントジェスチャテーブル34を参照して、イベント「menu-item-cut 」に対応したジェスチャの名称であるジェスチャ名「gesture-jaggy 」を検索する。その後、ジェスチャ生成手段25bは、ジェスチャテーブル33を参照して、ジェスチャ検索手段25aによって検索されたジェスチャ名「gesture-jaggy 」に対応したジェスチャを表示するための手続きを検索する。そして、ジェスチャ表示手段25cは、ジェスチャ生成手段25bによって検索された手続きを実行し、ジェスチャを液晶ディスプレイ10に表示する。その結果、図8に示すように、文字列「ファイル」の上に、文字列消去を指示するジェスチャ46が表示される。
【0061】
以上のようなジェスチャ処理手段25による処理の完了後、コマンド処理手段26が起動される。このとき、コマンド処理手段26は、イベント「menu-item-cut 」及びイベントオブジェクト「ファイル」を受け取る。そして、コマンド処理手段26内のコマンド検索手段26aは、コマンドアドレステーブル35を参照して、イベント「menu-item-cut 」に対応したコマンドを実行するためのプログラムのアドレスを検索し、コマンド実行手段26bは、そのプログラムを実行する。その結果、図9に示すように、文字列「ファイル」が消去され、液晶ディスプレイ10に「このは・・・」という文章47が表示される。
【0062】
つぎに、上述のように、ジェスチャ生成手段25bによって検索され、ジェスチャ表示手段25cによって実行される手続きについて具体的に説明する。
【0063】
予め、ジェスチャテーブル33には、図10に示すように、「gesture_name」というフィールドに「jaggy 」というジェスチャ名が記述されており、「description 」というフィールドに、ジェスチャの描画方法が記述されている。ここで、フィールド「description 」に記述されている関数「makeBox」は、イベントオブジェクトを含む最小の長方形を求める関数であり、関数「h_or_v」は、長方形の長い方の辺をX軸、短い方の辺をY軸とした相対座標を求める関数である。
【0064】
そして、このようにジェスチャテーブル33に記述された内容が、ジェスチャを表示するための手続きとして、ジェスチャ生成手段25bによって検索され、ジェスチャ表示手段25cによって実行されることとなる。
【0065】
この手続きでは、具体的には、図11に示すように、先ず、関数「makeBox」により、イベントオブジェクト「ファイル」を含む最小の長方形50が求められ、次に、関数「h_or_v」により、その長方形50の長い方の辺をx1軸、短い方の辺をy1軸とした相対座標が求められる。その後、長方形50のX軸方向の辺の長さをX、Y軸方向の辺の長さをYとして、相対座標におけるジェスチャを示す座標リストL1が生成される。ここで、座標リストL1は、例えば、[(0,0),(X/4,Y),(X/4,0),(X/2,Y),(X/2,0),(3X/4,Y)]とされる。その後、生成された座標リストL1が絶対座標に変換され、絶対座標に変換された座標リストL2に示された座標点を順次結ぶように線が描かれ、その結果、「ファイル」という文字列消去を指示するジェスチャ51が描画されることとなる。
【0066】
なお、以上の説明では、コマンドが非ジェスチャ入力によって入力されたときに、当該コマンドに対するジェスチャが液晶ディスプレイに表示されるものとして説明してきたが、このペン入力型情報処理装置1は、コマンドが非ジェスチャ入力によって入力されても、当該コマンドに対するジェスチャを液晶ディスプレイ10に表示することなく、直ぐに当該コマンドを実行するように、設定が変更できるようになっていてもよい。
【0067】
このように設定を変更できるようになっていれば、例えば、ユーザにとってジェスチャの表示が不要となったときに、ジェスチャの表示を行わないようにすることができる。そして、このようにジェスチャを表示しないように設定を変更したときには、ジェスチャの表示を行わない分だけ、処理を高速に行うことが可能となる。
【0068】
【発明の効果】
本発明に係るペン入力型情報処理装置及びコマンド入力方法では、非ジェスチャ入力とジェスチャ入力の両方が可能とされているので、非ジェスチャ入力とジェスチャ入力の両方の長所を生かすことができる。すなわち、ユーザが操作に慣れていない段階では、ユーザが操作方法を推測しやすい非ジェスチャ入力を用いることができ、ユーザが操作に慣れた段階で、手早く入力することができるジェスチャ入力を用いることができる。
【0069】
そして、このペン入力型情報処理装置及びコマンド入力方法では、非ジェスチャ入力によってコマンドを入力する毎に、そのコマンドに対応したジェスチャが表示されるので、ユーザは、非ジェスチャ入力を繰り返すうちに、自然にジェスチャを覚えることができる。しかも、このペン入力型情報処理装置では、非ジェスチャ入力によってコマンドを入力する毎に、そのコマンドに対応したジェスチャが表示されるので、ユーザは、利用頻度が高いコマンドほど、そのコマンドに対するジェスチャを覚えやすく、非常に効率良くジェスチャを覚えることできる。
【0070】
このように、本発明によれば、作業効率に優れたジェスチャ入力に必要なジェスチャが容易に習得可能なペン入力型情報処理装置及びコマンド入力方法を提供することができる。
【0071】
また、本発明に係るペン入力型情報処理装置及びコマンド入力方法では、非ジェスチャ入力とジェスチャ入力とを併用しており、しかも、ジェスチャ入力に用いるジェスチャが覚えやすいため、より多くのコマンドに対してジェスチャを定義してもユーザに負担がかかるようなことはない。したがって、定義するジェスチャの数を制限する必要がなく、より多くのコマンドに対してジェスチャを定義することが可能となる。そして、より多くのコマンドに対してジェスチャを定義できるので、手早く入力できるというジェスチャ入力の利点を、より多くのコマンドに対して生かすことが可能となる。
【図面の簡単な説明】
【図1】本発明を適用したペン入力型情報処理装置の一構成例を示すブロック図である。
【図2】図1に示したペン入力型情報処理装置について、演算処理部及び記憶部の構成を詳細に示したブロック図である。
【図3】イベント監視手段によるイベント監視のフローチャートである。
【図4】図1に示したペン入力型情報処理装置による情報処理方法のフローチャートである。
【図5】本発明を適用したペン入力型情報処理装置の表示画面の例であり、「そのファイルは・・・」という文章が表示されている状態を示す図である。
【図6】本発明を適用したペン入力型情報処理装置の表示画面の例であり、文字列「ファイル」が処理対象として選択されたときの状態を示す図である。
【図7】本発明を適用したペン入力型情報処理装置の表示画面の例であり、「編集」のサブメニューが表示された状態を示す図である。
【図8】本発明を適用したペン入力型情報処理装置の表示画面の例であり、文字列「ファイル」の消去を指示するジェスチャが表示された状態を示す図である。
【図9】本発明を適用したペン入力型情報処理装置の表示画面の例であり、文字列「ファイル」が消去された状態を示す図である。
【図10】ジェスチャテーブルの記述内容の一例を示す図である。
【図11】文字列「ファイル」の消去を指示するジェスチャを表示する様子を示す模式図である。
【符号の説明】
1 ペン入力型情報処理装置
2 CPU
3 演算処理部
4 記憶部
5 入力部
6 出力部
7 外部記憶装置
8 メモリ
9 システムバス
10 液晶ディスプレイ
11 ディスプレイドライバ
12 VRAM
13 ペン
14 タブレット
15 タブレットドライバ
21 入力処理手段
22 イベント監視手段
23 イベント処理手段
24 入力判別手段
25 ジェスチャ処理手段
25a ジェスチャ検索手段
25b ジェスチャ生成手段
25c ジェスチャ表示手段
26 コマンド処理手段
26a コマンド検索手段
26b コマンド実行手段
31 グローバルエリア
32 イベントテーブル
33 ジェスチャテーブル
34 イベントジェスチャテーブル
35 コマンドアドレステーブル

Claims (6)

  1. 所定の処理を指示するコマンドの入力方法として、所定の記号であるジェスチャを入力することによってコマンドを入力するジェスチャ入力と、ジェスチャ入力以外の入力方法によってコマンドを入力する非ジェスチャ入力とを有するペン入力型情報処理装置であって、
    入力がジェスチャ入力によるものか非ジェスチャ入力によるものかを判別する入力判別手段と、
    入力が非ジェスチャ入力によるものであると入力判別手段によって判別されたとき、入力されたコマンドに対応したジェスチャを表示装置に表示するジェスチャ処理手段と、
    入力が非ジェスチャ入力によるものであると入力判別手段によって判別されたときには、入力されたコマンドに対応したジェスチャが表示装置に表示された後にコマンドを実行し、入力されたコマンドがジェスチャ入力によるものであると入力判別手段によって判別されたときには、直ぐにコマンドを実行するコマンド処理手段と、
    を備えることを特徴とするペン入力型情報処理装置。
  2. 前記ジェスチャ処理手段
    入力が非ジェスチャ入力によるものであると入力判別手段によって判別されたとき、入力されたコマンドに対応したジェスチャの名称を検索するジェスチャ検索手段と、
    ジェスチャ検索手段で検索されたジェスチャの名称に対応したジェスチャを表示するための情報を検索するジェスチャ生成手段と、
    ジェスチャ生成手段で検索された情報に基づいて、ジェスチャを表示装置に表示させるジェスチャ表示手段と、
    を備えることを特徴とする請求項1記載のペン入力型情報処理装置。
  3. コマンド処理手段は、入力が非ジェスチャ入力によるものであると入力判別手段によって判別されたときには入力されたコマンドに対応したジェスチャを表示装置に表示することなく、直ぐにコマンドを実行することを特徴とする請求項1記載のペン入力型情報処理装置。
  4. 前記入力判定手段は、入力が非ジェスチャ入力によるものと判別した場合であっても、その入力に対応するジェスチャが登録されていないときには、直ぐに上記コマンド処理手段を起動することを特徴とする請求項1記載のペン入力型情報処理装置。
  5. 所定の記号であるジェスチャを入力することによってコマンドを入力するジェスチャ入力と、ジェスチャ入力以外の入力方法によってコマンドを入力する非ジェスチャ入力とを有するペン入力型情報処理装置におけるコマンド入力方法であって、
    入力がジェスチャ入力によるものか非ジェスチャ入力によるものかを判別する入力判別工程と、
    入力が非ジェスチャ入力によるものであると入力判別工程において判別されたとき、入力されたコマンドに対応したジェスチャを表示装置に表示するジェスチャ処理工程と、
    入力が非ジェスチャ入力によるものであると入力判別工程において判別されたときには、入力されたコマンドに対応したジェスチャが表示装置に表示された後にコマンドを実行し、入力されたコマンドがジェスチャ入力によるものであると入力判別工程において判別されたときには、直ぐにコマンドを実行するコマンド処理工程と、
    を有することを特徴とするコマンド入力方法。
  6. 前記ジェスチャ処理工程は、
    入力が非ジェスチャ入力によるものであると入力判別工程によって判別されたとき、入力されたコマンドに対応したジェスチャの名称を検索するジェスチャ検索工程と、
    ジェスチャ検索工程で検索されたジェスチャの名称に対応したジェスチャを表示するための情報を検索するジェスチャ生成工程と、
    ジェスチャ生成工程で検索された情報に基づいて、ジェスチャを表示装置に表示させるジェスチャ表示工程と、
    を含むことを特徴とする請求項5記載のコマンド入力方法。
JP250396A 1996-01-10 1996-01-10 ペン入力型情報処理装置及びコマンド入力方法 Expired - Fee Related JP3704777B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP250396A JP3704777B2 (ja) 1996-01-10 1996-01-10 ペン入力型情報処理装置及びコマンド入力方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP250396A JP3704777B2 (ja) 1996-01-10 1996-01-10 ペン入力型情報処理装置及びコマンド入力方法

Publications (2)

Publication Number Publication Date
JPH09190280A JPH09190280A (ja) 1997-07-22
JP3704777B2 true JP3704777B2 (ja) 2005-10-12

Family

ID=11531173

Family Applications (1)

Application Number Title Priority Date Filing Date
JP250396A Expired - Fee Related JP3704777B2 (ja) 1996-01-10 1996-01-10 ペン入力型情報処理装置及びコマンド入力方法

Country Status (1)

Country Link
JP (1) JP3704777B2 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4081056B2 (ja) * 2004-08-30 2008-04-23 株式会社東芝 情報処理装置、情報処理方法及びプログラム
JP5178484B2 (ja) * 2008-12-08 2013-04-10 キヤノン株式会社 情報処理装置及び情報処理方法
JP5118719B2 (ja) * 2010-03-31 2013-01-16 株式会社エヌ・ティ・ティ・ドコモ 情報端末及び文書編集方法

Also Published As

Publication number Publication date
JPH09190280A (ja) 1997-07-22

Similar Documents

Publication Publication Date Title
KR100382100B1 (ko) 근접포인터를갖는컴퓨터디스플레이상에서다수의그래픽사용자인터페이스구성요소를조작하는컴퓨터시스템및방법
JP2003303047A (ja) 画像入力及び表示システム、ユーザインタフェースの利用方法並びにコンピュータで使用可能な媒体を含む製品
JPH06242885A (ja) 文書編集方法
US20150146986A1 (en) Electronic apparatus, method and storage medium
JP2011081778A (ja) ディスプレイ非依存のコンピュータによるガイダンス方法および装置
JPH07104959A (ja) マルチメディア情報付加システム
US7742095B2 (en) Information processing apparatus, method and storage medium
JP3075882B2 (ja) 文書作成編集装置
JP3704777B2 (ja) ペン入力型情報処理装置及びコマンド入力方法
JPH0721007A (ja) 情報処理装置及びメニュー選択方式
JPH06332611A (ja) 手書き入力装置
JPH11306369A (ja) 画像データ編集装置
JPS6316325A (ja) メニユ−表示方法
JPH06301472A (ja) 手書き入力装置
JP3508446B2 (ja) 機能指示方式
JPH04273322A (ja) 階層メニュー選択装置
JP2915654B2 (ja) 手書文字入力領域設定装置
JPH086962A (ja) データ検索装置及び検索データの表示方法
JP3146079B2 (ja) 文字・図形編集装置
JPH05119947A (ja) メニユー管理方法およびその装置
JPH04148370A (ja) 文書処理装置
JPH08147407A (ja) 文字認識方法及びその装置
JPH0498414A (ja) 手書文字入力装置
JP2000293631A (ja) 手書き文字入力装置及び手書き文字入力方法
CN113050845A (zh) 一种处理方法和处理装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20050623

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050705

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050718

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080805

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090805

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100805

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110805

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110805

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120805

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees