JP2000137555A - 情報処理装置及び方法並びに記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 ユーザが好みのジェスチャについて任意かつ
自由に拡張できるようにする。 【解決手段】 ユーザの手書入力操作に伴う手書図形を
ポインティングデバイスで入力し、ポインティングデバ
イスに入力された手書図形をジェスチャ認識部でジェス
チャとして認識し、ユーザによって予め登録されたジェ
スチャとアクションとの対応関係をジェスチャコード対
応テーブルに保持し、ジェスチャコード対応テーブルを
参照してジェスチャ認識部で認識されたジェスチャに対
応するアクションを検索し、その検索された動作を実行
するように制御するものである。従って、本発明におい
ては、ユーザがジェスチャコード対応テーブルにジェス
チャとアクションとの対応関係を登録することにより、
ユーザが容易に拡張することができる。このように、本
発明は、個々のユーザが好みのジェスチャについて任意
かつ自由に拡張できるような柔軟性、拡張性を有するも
のである。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、情報を処理する情
報処理装置および方法ならびに情報処理プログラムが記
録されてなる記録媒体に関し、詳しくは手書図形情報に
よる入力を受け付ける情報処理装置および方法ならびに
手書図形情報による入力を受け付けるような情報処理プ
ログラムが記録されてなる記録媒体に関する。

【０００２】

【従来の技術】近年、携帯型の電子機器が多く開発され
ており、中央処理装置（centoral processing unit;CP
U）を搭載した高度な電子機器が出現している。携帯型
の電子機器において、例えば携帯型のコンピュータは、
本体とその液晶表示装置等の表示部を備えている。この
ような携帯型のコンピュータとしては、例えば、表示装
置とキーボードを折り畳むことができるノート型コンピ
ュータや、入力にペンを用いるペンコンピュータが知ら
れている。

【０００３】ペンコンピュータは、ペンとタブレットが
対となったペン入力装置を備え、タブレット上において
ペンによって指示された点の座標データや、タブレット
上においてペンによって描画された文字や手書図形等の
座標データ等が入力されるようになっているコンピュー
タである。このようなペン入力装置において、タブレッ
トは、通常、透明な部材によって形成され、コンピュー
タによって処理された結果が表示される液晶ディスプレ
イ等の表示装置上に配されている。すなわち、通常、ペ
ンコンピュータでは、表示装置に表示された情報を見な
がら、表示装置上においてペンによって点を指示した
り、手書文字や手書図形等を描画することにより、それ
らの点、手書文字又は手書図形等に対応した座標データ
等が入力されるようになっている。

【０００４】このようなペンコンピュータにおいて、所
定の処理を指示するコマンドの入力方法として、ペンコ
ンピュータの特徴を生かした手書図形情報による入力、
いわゆるジェスチャ（gesture:身振り）入力が知られて
いる。

【０００５】ジェスチャ入力とは、予め、校正記号等の
ような所定の記号を手書図形情報すなわちジェスチャと
して登録しておくとともに、それらのジェスチャに対応
したコマンドを登録しておき、ペンによってタブレット
上にジェスチャが描画されたときに、そのジェスチャに
対応したコマンドが入力されるようにする方法である。

【０００６】このように、ジェスチャ入力では、コマン
ドとその処理対象とを少ない操作によって指定すること
ができるので、利用頻度の高いコマンドの入力にジェス
チャ入力を用いることにより、それらのコマンドを手早
く入力することが可能となり、作業効率が向上する。

【０００７】このようなジェスチャ入力、すなわち手書
図形情報による入力については、特開昭６０−７５９８
０号公報において、画面上に表示されている種々の図形
の中から編集対象の図形セグメントを選択するために、
前記図形セグメントの一部と交差する閉図形を、ペンに
よって手書で入力し、さらに編集種別を指定するための
編集コマンド図形を、同様に、ペンによって手書で入力
し、これら２種の手書入力図形を判別して、指定された
図形セグメントに、指定された種別の編集を施すように
構成した発明が開示されている。

【０００８】また、ジェスチャ入力については、特開平
９−１９０２８０号公報において、コマンドの入力方法
として、所定の記号であるジェスチャを入力することに
よって入力するジェスチャ入力と、ジェスチャ入力以外
の入力方法によって入力する非ジェスチャ入力とを有す
るペン入力型情報処理装置が開示されている。このペン
入力型情報処理装置では、入力があったときに、入力が
ジェスチャ入力であるものか非ジェスチャ入力であるも
のかを判別し、非ジェスチャ入力のときには、その入力
に対応したジェスチャを表示装置に表示した上でコマン
ドを発行し、ジェスチャ入力のときには直ぐにコマンド
を実行する発明が開示されている。

【０００９】

【発明が解決しようとする課題】ところで、上述した従
来のジェスチャ入力においては、表示画面上に設けられ
た透明なポインティングデバイスに対して例えばペンを
用いて入力していた。このため、従来のジェスチャ入力
を用いる装置は、高価なものとなっていた。

【００１０】また、従来のジェスチャ入力は、装置の出
荷前に製造者側で予め登録設定された所定のジェスチャ
形状のみを認識するものであって、個々のユーザが好み
のジェスチャについて任意にかつ自由に拡張できるよう
な柔軟性、拡張性を有していなかった。

【００１１】本発明は、上述の課題に鑑みて提案される
ものであって、ジェスチャ入力の際の負担を軽減し、ユ
ーザがジェスチャ入力について容易に拡張できるような
情報処理装置および方法ならびに記録媒体を提供するこ
とを目的とする。

【００１２】

【課題を解決するための手段】上述の課題を解決するた
めに、本発明に係る情報処理装置は、ユーザの手書入力
操作に伴う手書図形を入力する手書図形入力手段と、上
記手書図形入力手段に入力された手書図形を手書図形情
報として認識する認識手段と、ユーザによって予め登録
された手書図形情報と動作との対応関係を保持する対応
表保持手段と、上記対応表保持手段に保持されている対
応表を参照して手書図形情報に対応する動作を検索する
検索手段と、上記認識手段で認識された手書図形情報に
対応する動作を上記検索手段で検索し、その検索された
動作を実行するように制御する制御手段と備えるもので
ある。

【００１３】本発明に係る情報処理方法は、ユーザの手
書入力操作に伴う手書図形を手書入力する手書図形入力
ステップと、上記手書図形入力ステップにおいて手書入
力された手書図形を手書図形情報として認識する認識ス
テップと、ユーザによって予め登録された手書図形情報
に対応する動作を、手書図形情報と動作との対応関係を
保持する対応表保持手段を参照して検索する検索ステッ
プと、上記認識ステップで認識された手書図形情報に対
応する動作を上記検索ステップで検索し、その検索され
た動作を実行するように制御する制御ステップとを含む
ものである。

【００１４】本発明に係る記録媒体は、情報が記録され
た記録媒体であって、ユーザの手書入力操作に伴う手書
図形を手書入力する手書図形入力ステップと、上記手書
図形入力ステップにおいて入力された手書図形を手書図
形情報として認識する認識ステップと、ユーザによって
予め登録された手書図形情報に対応する動作を、手書図
形情報と動作との対応関係を保持する対応表保持手段を
参照して検索する検索ステップと、上記認識ステップで
認識された手書図形情報に対応する動作を上記検索ステ
ップで検索し、その検索された動作を実行するように制
御する制御ステップとの各ステップからなる情報処理方
法のプログラムが記録されてなるものである。

【００１５】

【発明の実施の形態】以下、本発明の好適な実施の形態
として、本発明に係る実施の形態として本発明を適用し
たノート型の携帯用コンピュータについて添付図面に基
づいて詳細に説明する。

【００１６】このノート型の携帯用コンピュータは、マ
ウス、タブレット等のようにポインティングデバイスを
入力装置として有し、ポインティングデバイスによって
入力されたポイントの軌跡の図形を手書図形情報、いわ
ゆるジェスチャ(gesture:身振り)として認識し、そのポ
イントの軌跡に対応した何らかの動作（action）を実行
するものである。

【００１７】なお、以下に述べる実施の形態は、本発明
の好適な具体例であるから、技術的に好ましい種々の限
定が付されているが、本発明の範囲は、以下の説明にお
いて特に本発明を限定する旨の記載がない限り、これら
の形態に限られるものではない。

【００１８】まず、コンピュータにおいて、ジェスチャ
入力に対する処理を行う要部（以下ではジェスチャ処理
部という）について、図１を参照して説明する。なお、
この図１における構成は、コンピュータにおけるジェス
チャ入力の説明の便宜に供するために、機能的な部分を
も含めてその構成を示すものである。

【００１９】ジェスチャ処理部は、手書図形をポイント
の軌跡として入力するポインティングデバイス１１０
と、ポインティングデバイス１１０にて検知されたポイ
ントの軌跡をジェスチャとして認識するジェスチャ認識
部１２０と、認識部１２０にて認識したジェスチャ情報
と対応したアクションをジェスチャコード対応テーブル
から検索して実行する出力部１３０とを有している。

【００２０】ポインティングデバイス１１０は、例えば
表示装置に表示され入力操作に応じて移動される指標に
ついて、その指標の移動軌跡の図形を入力する手書図形
入力手段である。このポインティングデバイスとして
は、例えばタブレット、マウス、タッチパッド等の手書
図形情報を入力することができるような装置を利用する
ことができる。ポインティングデバイス１１０は、手書
き入力に応じてこの手書き入力による指標の移動軌跡と
してポイントの移動する軌跡１１１を、ジェスチャ認識
部１２０に出力する。なお、このポインティングデバイ
ス１１０は、必ずしも表示画面上に構成する必要はな
い。

【００２１】ジェスチャ認識部１２０は、ポインティン
グデバイス１１０から入力されたポイントの軌跡をジェ
スチャとして認識し、ジェスチャコード化部１２１にて
符号化して出力する。すなわち、ジェスチャ認識部１２
０は、ポインティング１１０から入力されたポイントの
軌跡の内でジェスチャとして有効な部分を取り出し、さ
らにこのジェスチャとして有効な軌跡について、ジェス
チャコード化部１２１にて所定の変換を施して符号化し
たジェスチャコード１２２，１６１を出力する。ポイン
ティングデバイス１１０から入力されるポイントの軌跡
は、補助入力部１４０からの入力や後述する特定の手書
図形の入力により有効なジェスチャに対応する図形であ
ると判別される。ジェスチャコード１２２，１６１と
は、ジェスチャ認識部１２０で有効なジェスチャとして
認識された手書図形についてその認識の結果を符号化し
たものである。具体的には、このジェスチャコード化部
１２１においては、ジェスチャ認識部１２０での認識動
作の少なくとも一部として、例えば手書入力の軌跡や回
数あるいは入力順序等の入力パターンに対する分析や解
析等の処理が行われ、このような分析あるいは解析処理
の結果として情報が得られる。この手書入力パターンの
分析結果情報としては、例えばその手書図形を特徴づけ
る特徴点、ＤＣＴ係数、入力図形に対する方向パターン
などが挙げられ、このような分析結果情報をコード化す
ることによりジェスチャコード１２２，１６１が生成さ
れる。このジェスチャ認識部１２０は、例えば後述する
ＣＰＵにおける機能ブロックして実現される。

【００２２】出力部１３０は、ジェスチャ判別部１２０
から送られたジェスチャコード１２２に対応するアクシ
ョンをジェスチャコード対応テーブル１３１にて検索
し、検索されたアクション１７０を出力する。出力部１
３０は、例えば後述するＣＰＵにおける機能ブロックと
して実現される。

【００２３】また、ジェスチャ処理部は、ポインティン
グデバイス１１０以外の入力装置であって補助的な入力
を受け付ける補助入力部１４０と、ジェスチャコード１
２１をジェスチャコード対応テーブル１３１に登録する
ジェスチャコード対応テーブル登録部１６０と、ジェス
チャについての操作をフィードバックするフィードバッ
ク部１５０とを有している。

【００２４】補助入力部１４０は、ポインティングデバ
イス１１０に対する補助的な入力部であって、例えば、
メカニカルなスイッチやソフトウェアの画面上に表示さ
れるボタン等として構成される。この補助入力部１４０
では、ポインティングデバイス１１０におけるポイント
の軌跡の始まりと終わり１４１，１４２を示したり、出
力部１３０からのフィードバック１３２を確認した後、
アクションを実行するかどうかの確認１４３のために使
用される。

【００２５】フィードバック部１５０は、ポインティン
グデバイス１１０や補助入力部１４０からの入力に対す
るフィードバックを行う部分である。すなわち、フィー
ドバック部１５０は、ポインティングデバイス１１０に
入力されたポイントの軌跡や、ポイントの軌跡かどうか
を認識した結果１２３のジェスチャを表示したり、出力
部１３０からによる出力される検索結果１３２を表示し
たり、実際に行うアクション１７０を示す。フィードバ
ック部１５０は、例えば後述する液晶表示装置３Ａとし
て実現することができる。

【００２６】ジェスチャコード対応テーブル登録部１６
０は、新しいジェスチャコード１６１をアクションと関
連づけ、その対応するアクション１６２をジェスチャコ
ード対応テーブル１３１に登録する。このようなジェス
チャコード対応テーブル登録部１６０により、ユーザの
必要に応じて所望のジェスチャに対応する所望のアクシ
ョンを登録することができる。すなわち、ジェスチャコ
ード対応テーブル登録部１６０は、入力された手書図形
をジェスチャコード１６１として登録するとともに、こ
のジェスチャ１６１とアクション１６２との対応関係を
ジェスチャコード対応テーブル１３１に登録するもので
ある。このことにより、このコンピュータは、ユーザの
利用に快適なジェスチャ入力環境を有するようにカスタ
マイズされる。ジェスチャコード対応テーブル１３１
は、例えば後述するハードディスクドライブ（hard dis
k drive;HDD）上に構築される。

【００２７】続いて、図２を参照して、上記図１の実施
の形態が適用される具体的なコンピュータの回路構成に
ついて説明する。この図２は、図１に示したジェスチャ
入力を処理する要部であるジェスチャ処理部を含むコン
ピュータの回路構成の全体を示すものである。コンピュ
ータ１００は、回路の主要部を格納する本体２と、液晶
表示装置３Ａ等を有する表示部３とから構成されてい
る。

【００２８】本体２は、情報の処理を集中して行うＣＰ
Ｕ５２と、所定の機能を備えたいわゆるＰＣＭＣＩＡ
（Personal Computer Memory Carol International Ass
ociation）カードすなわちいわゆるＰＣカード５３と、
揮発性のメモリであるＲＡＭ５４とを有している。これ
らＣＰＵ５２、ＰＣカード５３およびＲＡＭ５４は、内
部バス（ＰＣＩ ＢＵＳ）５１にそれぞれ接続されてい
る。

【００２９】ＣＰＵ５２は、各機能を統括するコントロ
ーラであり、ＰＣカード５３は、内部バス５１に対して
オプションの機能を付加するためのものである。このＣ
ＰＵ５２は、図１に示したジェスチャ処理部について、
ソフトウェアで実現される機能ブロックとして、ジェス
チャ認識部１２０、出力部１３０を有している。ＣＰＵ
５２には、さらにジェスチャコード対応テーブル登録部
１６０が含まれることがある。

【００３０】ＲＡＭ５４の中には、本体２の起動が完了
した時点において、アプリケーション・プログラム、オ
ートパイロットプログラム、そして基本プログラム（op
erating system; OS）等が記憶される。

【００３１】オートパイロットプログラムは、予め設定
された複数の処理（またはプログラム）等を、予め設定
された順序で順次起動して、処理するプログラムのこと
である。ＯＳは、コンピュータ１００を制御するもので
あり、例えば市販のマルチタスクＯＳを用いることがで
きる。

【００３２】また、本体２は、データの入出力を制御す
る入出力（in-out;I/O）コントローラ６１と、情報を記
録する記録部であるＨＤＤ５６と、実時間時計（real t
imeclock; RTC）４２Ａと、メッセージランプＭＬと、
バッテリランプＢＬと、電源ランプＰＬと、電源スイッ
チ４０と、操作キー４１と、バッテリバックアップ６７
とを有している。

【００３３】これらＩ／Ｏコントローラ６１と、ＨＤＤ
５６と、ＲＴＣ４２Ａと、メッセージランプＭＬと、バ
ッテリランプＢＬと、電源ランプＰＬと、電源スイッチ
４０と、操作キー４１と、バッテリバックアップ６７と
は外部バス（ＩＳＡ ＢＵＳ）５５にそれぞれ接続され
ている。外部バス５５は、内部バス５１に接続されてい
る。

【００３４】Ｉ／Ｏコントローラ５７は、マイクロコン
トローラ６１を有し、このマイクロコントローラ６１は
ＣＰＵ６２Ａ、ＲＡＭ６３、ＲＯＭ６８が相互に接続さ
れて構成されている。このＲＡＭ６３は、キー入力ステ
イタスレジスタ６４、ＬＥＤ制御レジスタ６５、設定時
刻レジスタ６６、操作キー／プログラム対応関係レジス
タ６６Ａを有している。設定時刻レジスタ６６は、起動
条件格納部であり、ユーザが予め時刻（起動条件）を設
定し、予め設定された時刻になると所定のプログラムを
起動する一連の処理である起動シーケンスの動作を開始
させる際に利用される。操作キー／プログラム対応関係
レジスタ６６Ａは、予め設定された操作キーの組合せ
（起動条件）と、起動すべきアプリケーションプログラ
ムの対応を記憶するもので、予め設定された操作キーの
組合せがユーザにより押されると、起動しようとするア
プリケーション・プログラムを起動できる。

【００３５】キー入力ステイタスレジスタ６４は、後で
説明するワンタッチ操作用のスイッチ手段である操作キ
ー４１が押されると、操作キーフラグが格納されるよう
になっている。ＬＥＤ制御レジスタ６５は、操作キー４
１が押されて、所定のアプリケーションの瞬時の立ち上
げ状態を表示するメッセージランプＭＬの点灯を制御す
るものである。設定時刻レジスタ６６は、ある時刻を任
意に設定することができるものである。

【００３６】なお、このマイクロコントローラ６１には
バックアップ用のバッテリ６７が設けられており、各レ
ジスタ６４，６５，６６の値は、本体２の電源がオフと
されている状態においても保持されるようになってい
る。

【００３７】マイクロコントローラ６１内のＲＯＭ６８
の中には、ウェイクアッププログラム６９、キー入力監
視プログラム７０、ＬＥＤ制御プログラム７１が予め格
納されている。このＲＯＭ６８は、例えばフラッシュメ
モリとも呼ばれる電気消去可能プログラマブル読出し専
用メモリ（electrically erasable programmable read-
only memory;EEPROM）で構成されている。さらにマイク
ロコントローラ６１には、常時現在時刻をカウントする
ＲＴＣ４２Ａが接続されている。

【００３８】ＲＯＭ６８の中のウェイクアッププログラ
ム６９は、ＲＴＣ４２から供給される現在時刻データに
基づいて予め設定時刻レジスタ６６に設定された時刻に
なったかどうかをチェックして、設定された時刻になる
と、所定の処理（又はプログラム）等の起動をするプロ
グラムである。キー入力監視プログラム７０は、操作キ
ー４１が利用者により押されるかどうかを常時監視する
プログラムである。ＬＥＤ制御プログラム７１は、メッ
セージランプＭＬの点灯の制御をするプログラムであ
る。

【００３９】ＲＯＭ６８には、さらに基本入出力システ
ム（basic input/output system ）７２が書き込まれて
いる。このＢＩＯＳとは、ＯＳやアプリケーションプロ
グラムとディスプレイ、キーボード、ハードディスクド
ライブ等の周辺機器の間でのデータの受け渡し（入出
力）を制御するソフトウェアプログラムである。

【００４０】ＨＤＤ５６には、アプリケーションプログ
ラム、オートパイロットプログラム５６Ｂ、ＯＳ等が記
憶されている。ＨＤＤ５６内のＯＳ、オートパイロット
プログラムおよびアプリケーションプログラムは、本体
２のブートアップ（boot up:起動）処理の過程で、ＲＡ
Ｍ５４内に順次格納される。

【００４１】さらに、本体２は、表示部３の液晶表示装
置（liquid crystal display;LCD）３Ａを制御するＬＣ
Ｄコントローラ８１と、外部ネットワークと接続するた
めにデータを変換するモデム５０と、キーボード４を制
御するキーボードコントローラ５８と、タブレット５を
制御するタブレットコントローラ５９と、マイク６０Ａ
およびスピーカ６０Ｂに接続して信号を変換するインタ
ーフェース６０とを有している。これらＬＣＤコントロ
ーラ８１と、モデム５０と、キーボードコントローラ５
８と、タブレットコントローラ５９と、インターフェー
ス６０とは上記外部バス５５にそれぞれ接続されてい
る。

【００４２】外部バス５５に接続されているキーボード
コントローラ５８は、キーボード４からの入力をコント
ロールする。タブレットコントローラ５９は、タブレッ
ト５の入力を制御するものである。

【００４３】インターフェース６０は、内部マイク６０
Ａからの入力を取り込み、あるいは内蔵スピーカ６０Ｂ
に対して音声信号を供給するものである。

【００４４】モデム５０は、本体２と外部のネットワー
ク８２とを接続して、通信を行うために情報信号の形式
の所定の変換を行うものである。

【００４５】そして、本体２は、キーボードコントロー
ラ５８に接続されるキーボード４と、タブレットコント
ローラ５９に接続されるタブレット５と、インターフェ
ース６０に接続されるマイク６０Ａおよびスピーカ６０
Ｂとを有している。

【００４６】タブレット５は、後述するように、キーボ
ードの手前側に配設され、液晶表示装置３Ａの画面上の
位置を特定するポインティングデバイスとして用いるこ
とにより、ポイントの軌跡の入力を行うものである。す
なわち、ポインティングデバイスは、液晶表示装置３Ａ
のような表示画面に表示され入力操作に応じて移動され
る指標について、その指標の移動軌跡を入力される手書
図形入力手段である。なお、本実施の形態においては、
ポインティングデバイスはタブレットに限定されず、例
えばタッチパッド、ジョイスティック等を用いることも
できる。また、タブレット５には、点の位置のみならず
押圧された強さをも同時に検出することができる感圧式
のタブレットも利用することができる。タブレット５
は、従来と異なり液晶表示装置３Ａ上に配設される必要
は必ずしもない。

【００４７】表示部３は、文字、手書図形等を表示する
液晶表示装置３Ａと、この液晶表示装置３Ａを照明する
バックライト３Ｂとを有している。表示部３における液
晶表示部３Ａは、図１に示したジェスチャ処理部におい
て、ジェスチャ認識部１２０で認識されたジェスチャ、
出力部１３０で検索された対応するアクション等をフィ
ードバックするフィードバック部１５０に対応してい
る。

【００４８】ここで、図１に示したジェスチャ入力につ
いて処理を行う要部であるジェスチャ処理部は、コンピ
ュータ１００に対して、ポインティングデバイス１１１
はタブレット５に、ジェスチャ認識部１２０、出力部１
３０およびジェスチャコード対応テーブル登録部１６０
はＣＰＵ５２における機能ブロックとして、補助入力部
は操作キー４１またはキーボード４に、フィードバック
部１５０は液晶表示装置３Ａまたはスピーカ６０Ｂにそ
れぞれ対応している。そして、ジェスチャコード対応テ
ーブル１３１は、通常はＨＤＤ５６に構築されるが、Ｒ
ＡＭ５４に読み込んでもよい。

【００４９】以上説明したように、本実施の形態は、手
書図形を入力するポインティングデバイス１１０である
タブレット５について、ＣＰＵ５２における機能ブロッ
クとしての認識手段であるジェスチャ認識部１２０によ
りジェスチャとして認識し、例えばＨＤＤ５６，ＲＡＭ
５４等に構築されたジェスチャとアクションの対応表
を、ＣＰＵ５２上に機能ブロックとして実現された検索
手段である出力部１０により検索して対応するアクショ
ンを求め、さらにＣＰＵ５２にてこのアクションを実行
するように制御するものである。

【００５０】続いて、コンピュータ１００の外観につい
て、図３、図４および図５を参照して説明する。

【００５１】図３に示すように、携帯型コンピュータ１
００は、本体２、表示部３、キーボード４、バッテリパ
ック２００等を備えている。

【００５２】本体２は、キーボード４やポインティング
ディバイスとしてタブレット５を有しており、表示部３
は、例えば液晶表示装置を採用することができる。表示
部３は、本体２に対して開閉（折り畳み）可能に取り付
けられている。また、図においては示していないが、本
体２に対しては、外部のポインティング手段であるマウ
ス等を外付けすることもできる。本体２には電源ランプ
ＰＬ、電池ランプＢＬ、そしてメッセージランプＭＬを
有し、電池ランプＢＬはバッテリパック２００の電池残
量の程度を示す。これらのランプの内の特にメッセージ
ランプＭＬは、表示部３を本体２に対して閉じた状態で
も外部に表出している。これにより表示部３を閉じてい
ても所定のプログラムの動作は、メッセージランプＭＬ
の点灯により利用者に報知することができる。

【００５３】図４は、コンピュータ１００の表示部３を
本体２に対して折り畳んだ状態でしかも矢印ＳＤから見
た図である。図において、本体２の側面２Ｓには、電源
スイッチ４０、操作キー４１、スイッチ４２等が配置さ
れている。また側面２ＳにはいわゆるＰＣカードを挿入
するためのスロット４３が設けられている。この操作キ
ー４１は電源スイッチ４０とは別個のものである。操作
キー４１は上述した起動シーケンス制御部２Ａを起動す
るスイッチであり、電源スイッチ４０はＯＳを起動する
スイッチである。

【００５４】図５は、携帯型コンピュータの表示部３を
本体２に対して折り畳んだ状態で表示部３の方向から見
た図である。本体２および表示部３はほぼ矩形の形状で
あって、本体２および表示部３が折り畳み可能に結合さ
れるヒンジ部分の間にバッテリパック２００が配設され
ている。

【００５５】続いて、上述した携帯用のコンピュータ１
００におけるジェスチャ入力による処理について、図６
に示すフローチャートを参照して説明する。

【００５６】最初のステップＳ５００においては、コン
ピュータ１００のポインティングデバイス１１０である
タブレット５にジェスチャを手書入力する。すなわち、
コンピュータ１００の本体のキーボード４の手前に配設
されたタブレット５の表面に、例えば指先にて所望の形
状を描くことにより手書図形を入力する。なお、コンピ
ュータ１００へのジェスチャの入力はタッチパッド５に
限定されず、例えば図示しないマウスやタッチパッドに
て行うこともできる。手書図形の具体例については後述
する。

【００５７】ステップＳ５１０では、コンピュータ１０
０のポインティングデバイス１１０に入力された手書図
形は、ポインティングデバイス１１０からポイントの軌
跡のデータとしてジェスチャ認識部１２０に送られ、ジ
ェスチャとして認識される。そして、ステップＳ５２０
では、ジェスチャ認識部１２０では、そのジェスチャコ
ードが有効であるかどうかの判別が行われる。有効なジ
ェスチャコードのとき、すなわち認識が行われたときに
はには“ＹＥＳ”として次のステップＳ５３０に進み、
そうでないときには“ＮＯ”としてこの工程を終了す
る。

【００５８】ステップＳ５３０では、出力部１３０にお
いて、ジェスチャコードとアクションとの対応表を保持
するジェスチャコード対応テーブル１３１に対して、ス
テップＳ５１０で認識されたジェスチャについて検索が
行われる。具体的には、例えばＲＡＭ５４、ＨＤＤ５６
等に保持されたジェスチャコード対応テーブル１３１に
対して、ＣＰＵ５２の制御により検索が行われる。

【００５９】ステップＳ５１０では、Ｓ５３０でのジェ
スチャコード対応テーブル検索でジェスチャに対応する
アクションが存在するかどうか、すなわちそのジェスチ
ャコードとアクションが関連づけられているかどうかを
判断する。そして、そのジェスチャコードにアクション
が関連づけられているときには“ＹＥＳ”としてステッ
プＳ５５０に進み、そうでないときには“ＮＯ”として
この工程を終了する。

【００６０】ステップＳ５５０では、ステップＳ５００
で入力されたジェスチャと、ステップＳ５３０で検索さ
れたそのジェスチャコードに対応するアクションが表示
部３の液晶表示装置３Ａに表示される。ステップＳ５６
０では、これらのジェスチャコードおよびアクションに
ついて、ユーザの確認を求める。ユーザの確認は、例え
ばキーボード４や操作キー４１を押圧することによって
行うことができる。また、ユーザによる確認は、後述す
るような手書図形によるものであってもよい。そして、
ユーザの確認が得られると“ＹＥＳ”として次のステッ
プＳ５７０に進み、確認が得られないときには“ＮＯ”
としてこの工程を終了する。

【００６１】ステップＳ５７０では、ステップＳ５６０
においてユーザにより確認を受けたアクションを実行す
る。そして、このジェスチャ処理の一連の工程を終了す
る。

【００６２】このようなジェスチャ処理の一連の手順
は、例えば、コンピュータ１００のＨＤＤ５６からＲＡ
Ｍ５４に読み込まれた一連のプログラムに従って実行さ
れる。

【００６３】続いて、コンピュータ１００に対する入力
方法について説明する。本実施の形態のコンピュータ１
００におけるように、入力に用いるポインティングデバ
イスがジェスチャ入力専用でない場合がある。すなわ
ち、コンピュータ１００においては、ポインティングデ
バイスであるタブレット５は、ジェスチャによる入力以
外にも、ＯＳや他のソフトウェアにより使用されている
場合がある。

【００６４】このように、入力デバイスがジェスチャ入
力専用でない場合には、ジェスチャ入力の開始と終了と
を明示的にシステムに通知する必要がある。すなわち、
ジェスチャの入力の終了は、入力が一定時間ないと終了
したと判断するのが普通であるが、入力後に直ちに判断
したい場合には、何らかの方法によってジェスチャの入
力の終了をコンピュータ１００に明示的に通知すること
が必要である。また、ジェスチャ入力の開始を通知した
い場合もある。

【００６５】このように、ポインティングデバイスにジ
ェスチャを入力することにより、入力の開始／終了をコ
ンピュータ１００に通知するには、以下のような方法が
考えられる。

【００６６】コンピュータ１００に対するジェスチャ入
力にタブレット５やタッチパッドを用いる場合には、ジ
ェスチャとして特殊図形の手書入力、特殊操作による手
書入力、領域を指定した手書入力により手書図形を入力
することにより、入力の開始／終了を通知することがで
きる。

【００６７】図７に示すように、特殊形状の手書入力と
は、ほぼ矩形状であるタブレット５やタッチパッドの形
状を利用した特殊な形状の手書入力である。このような
特殊形状の手書図形としては、例えば、図中のＡに示す
ような矩形の左辺および底辺にそれぞれほぼ平行で近接
した軌跡、図中のＢに示すような矩形の左辺、底辺、お
よび右辺にそれぞれ平行で近接した軌跡、図中のＣに示
すような矩形の上辺および底辺にそれぞれ平行で近接し
た軌跡ならびに右上および左下頂点近くの上記軌跡を結
ぶほぼ対角線の軌跡からなる軌跡がある。

【００６８】図８に示すように、特殊操作による手書入
力とは、例えば、図中のＡに示すように複数の指による
押圧（タップ）による入力、図中のＢに示すようにＤ
１，Ｄ２，Ｄ３の順序での押圧による入力、図中のＣに
示すように複数の指によるドラッグ操作による入力があ
る。

【００６９】図９に示すように、領域指定による手書入
力とは、例えば、図中のＡに示すようにほぼ矩形状のタ
ブレット５やタッチパッドの四隅への入力、図中のＢに
示すように境界から所定距離内について、これらの領域
内にポインタを置くことにより通知が行われるような入
力がある。また、図中のＣに示すように、最初に左下隅
Ａ１、続いて右下隅Ａ２を順番に指し示して入力するこ
とにより通知が行われる。

【００７０】コンピュータ１００におけるポインティン
グデバイスとして、押圧された圧力に応じた出力が得ら
れる感圧式のタブレットやタッチパッドが用いられる場
合がある。このような場合には、一定以上の圧力を一定
時間加える手書入力、一定以上の圧力を連続して複数回
加える手書入力、予め特定しておいた一定領域に圧力を
加える手書入力を行うことにより、ジェスチャ入力の開
始／終了をコンピュータ１００に通知することができ
る。

【００７１】また、図１０に示すように、一般の操作で
は使用しないポイントの動きによりジェスチャ入力の開
始／終了をコンピュータ１００に通知することができ
る。例えば、図１０中のＡのようなほぼ“Ｅ”形状、図
中のＢのようなほぼ“２”形状、図中のＣのようなほぼ
“ω”形状、図中のＤのようなほぼ“μ”形状の手書図
形のようなポイントの動きは一般の操作で使用すること
は少ないので、このようなポイントの動きによりジェス
チャ入力の開始／終了をコンピュータ１００に通知する
ことができる。

【００７２】このように、所定のジェスチャの手書入力
によるジェスチャ入力の開始／終了をコンピュータ１０
０に通知することを実現するためには、タブレット５の
ようなポインティングデバイスからの入力を常に監視す
ることが必要になる。すなわち、コンピュータ１００
は、上述のような特定のジェスチャが入力され次第、対
応する処理を実行するために入力を監視して待機してい
ることが要求される。

【００７３】このためは、図１１に示すように、タブレ
ット５のようなポインティングデバイス４１０からデバ
イスドライバまでの間や、デバイスドライバ４２０内
部、デバイスドライバ４２０からＯＳ／アプリケーショ
ン４４０までの間のどこかでポイントの軌跡を監視す
る。そして、ポイントの軌跡による手書図形がジェスチ
ャとして認識できる軌跡であればジェスチャに対応した
処理を行う。

【００７４】なお、図１１は、コンピュータ１００の構
成を示した図２からジェスチャを監視する要部を取り出
したものであり、例えば、ポインティングデバイス５１
０はタブレット５に、デバイスドライバはタブレットコ
ントローラ５９に、ジェスチャ認識システム４３０およ
びＯＳ／アプリケーション４４０はＣＰＵ５２における
機能ブロックに対応している。ジェスチャ認識システム
４３０は、図１におけるジェスチャ認識部１２０、出力
部１３０およびフィードバック部１５０を含み、ジェス
チャ認識を行う部分を総称したものである。

【００７５】さらに、コンピュータ１００に対するジェ
スチャ入力の開始／終了の通知には、補助的なデバイス
を使用する方法がある。

【００７６】例えば、専用の通知ボタンを用い、コンピ
ュータ１００に対してジェスチャ入力の開始／終了を通
知することができる。これには、例えば操作キー４１を
利用することができる。

【００７７】また、ジェスチャ入力に用いるポインティ
ングデバイス以外の他の入力デバイスと併用することに
より、コンピュータ１００に対してジェスチャ入力の開
始／終了を通知することができる。例えば、キーボード
４の特定のキーを押圧しながらポインティングデバイス
においてポイントを移動することにより、上記通知を行
うことができる。

【００７８】さらに、ポインティングデバイスを２つ使
用することにより、コンピュータ１００に対してジェス
チャ入力の開始／終了を通知することができる。例え
ば、一つはジェスチャ入力に用い、他の一つは開始／終
了の通知に用いる。

【００７９】そして、ポインティングデバイスにジェス
チャ入力をするとき専用のソフトウェアを起動すること
により、コンピュータ１００に対してジェスチャ入力の
開始／終了を通知することができる。

【００８０】また、液晶表示装置３ＡやＣＲＴの四隅、
特定のアイコンの上、特定のソフトウェアのウインドウ
上にポイントが来たときに、コンピュータ１００に対し
てジェスチャ入力の開始／終了を通知することができ
る。

【００８１】さらに、文字認識ソフトウェア上で特定の
軌跡が入力されたときに、コンピュータ１００に対して
ジェスチャ入力の開始／終了を通知することができる。
例えば文字認識ソフトウェア上に特定の軌跡が手書入力
されたときにジェスチャの認識を開始し、次に手書入力
される一文字をジェスチャとして認識する。

【００８２】そして、文字認識ソフトウェア上で手書入
力された軌跡を文字として学習させておくことにより、
コンピュータ１００に対してジェスチャ入力の開始／終
了を通知することができる。例えば、文字認識ソフトウ
ェア上で手書入力された軌跡を文字として学習させてお
き、その文字が手書入力されたときに処理を実行する。

【００８３】上述のようなジェスチャ入力、すなわち手
書きによる図形入力操作は、片手、指一本による入力、
手書図形による直感的な入力が可能であって、コンピュ
ータに入力を行う際のユーザの負担を軽減する。また、
特にパーソナルコンピュータに適用するときには、 キ
ーボードを全く使用しないで操作が可能であり、片手操
作なのでノート型コンピュータ等で室外等の作業が便利
である。そして、装置に実装する場合には、スイッチ等
のような入出力デバイスの数が少ないので設置場所を低
減することができ、また、認識するジェスチャを増やす
だけで命令の数を増やすことができるので装置設置後の
機能拡張時に入力デバイスの増設が不要となる。

【００８４】続いて、ＧＵＩを用いてコンピュータ１０
０に対するジェスチャによる手書入力を行う具体例につ
いて説明する。

【００８５】図１２中のＡに示すように、ジェスチャの
登録は、表示部３の液晶表示装置３Ａの画面に表示され
た登録画面のウインドウにおいて、マウス、タッチパッ
ド等のポインティングデバイスを使用して手書図形を入
力する。そして、登録画面に入力した手書図形をジェス
チャとして登録する。このとき、そのジェスチャに対応
させるアクションも登録しておく。図中では、ほぼ
“ｐ”形状のジェスチャに対してアクション“印刷”が
対応している。

【００８６】図１２中のＢに示される、液晶表示装置３
の画面に表示されたジェスチャコード対応テーブルの登
録一覧のウインドウのように、ジェスチャコード対応テ
ーブルにはジェスチャコードとアクションとの対応表が
保持されている。図中では、ほぼ“ｐ”形状のジェスチ
ャに対してアクション“印刷”が、ほぼ“ω”形状のジ
ェスチャコに対してアクション“ワードプロセッサ”
が、ほぼ“Ｚ”形状のジェスチャに対してアクション
“ズームイン”がそれぞれ対応している。

【００８７】ジェスチャコード対応テーブルへの登録
は、上述したジェスチャによりジェスチャ入力の開始／
収録をコンピュータ１００に通知する方法を用い、図１
に示したジェスチャコード対応テーブル登録部１６０に
よりジェスチャとアクションとを関連づけることにより
行う。図１２中のＣに示すような基本画面を有するシス
テムについては、以下のような入力例が考えられる。こ
こで、上記基本画面には、アイコン１およびアイコン２
が表示されている。

【００８８】すなわち、図１における入力補助部１４０
を用いたり、上述した方法により、ジェスチャ入力の開
始を明示的に示すことができる場合には、ジェスチャ入
力の開始時からポインティングデバイスの軌跡を液晶表
示部３Ａの表示画面に何らかの形で表示することができ
る。ただし、例えば、文字のみを表示する表示装置の用
に、装置の性質によってジェスチャ入力の軌跡を全く表
示しない場合もある。なお、ポインティングデバイスの
軌跡の表示は、ジェスチャ認識部１２０からの認識の結
果１２３に従ってフィードバック部１５０が行う。

【００８９】図１２中のＤに示すように、液晶表示装置
３Ａの画面上に表示されるアイコン上でジェスチャ入力
を行うことによって、そのアイコンで表される対象に対
して何らかのアクションを行う。ジェスチャ用のポイン
トの軌跡は基本画面上に直接描画される。すなわち、ア
イコン２で表されるドキュメントのアイコンに対してジ
ェスチャ入力を行うことによってそのドキュメントを開
き、プリントアウトをする例を示している。

【００９０】図１３中のＡに示す画面は、操作の対象が
必要ない場合であり、画面上の任意の場所でジェスチャ
を手書入力することによりワードプロセッサを起動する
例を示している。

【００９１】また、コンピュータ１００の表示部３の液
晶表示装置３Ａの現在操作中の画面またはウインドウに
対してジェスチャ入力を行うことによって、その操作中
の画面に対して何らかのアクションを行うことができ
る。図１３中のＢの例では現在操作中のドキュメントに
対してジェスチャ入力を行うことによってそのドキュメ
ントをプリントアウトする例を示している。ジェスチャ
入力のポイントの軌跡は基本画面上に直接表示される。

【００９２】さらに、ジェスチャ入力のための特別な画
面またはウインドウを用意する場合がある。ジェスチャ
入力が開始されると同時にジェスチャ入力のポイントの
軌跡を表示するための画面を開く。図１３中のＣは入力
画面用にジェスチャ入力を行っている例を示している。
ジェスチャ入力の対象が存在する場合は、その存在を予
め示して置くこともできる。図１３中のＣでは予めアイ
コンを選択しておいてからジェスチャ入力を行ってお
り、アイコン２で表されるドキュメントのアイコンに対
してほぼ“ｐ”形状のジェスチャ入力を行うことによっ
てそのドキュメントを開き、プリントアウトする例を示
している。

【００９３】ジェスチャ入力が終了するとそのジェスチ
ャが有効なものであるかどうかの確認が行われ、有効で
あれば発生したジェスチャコードをキーとしてジェスチ
ャコード対応テーブル検索が行われる。すなわち、ポイ
ンティングデバイスに入力されたポイントの軌跡は、図
１に示したジェスチャ認識部１２０にて有効なジェスチ
ャはジェスチャコード化部１２１で符号化され、出力部
１３０でジェスチャコード対応テーブル１３１を参照し
て対応するアクションが検索される。ジェスチャが有効
でなかった場合や、ジェスチャコード対応テーブル１３
１にアクションがなかった場合には処理を終了する。終
了時には画面上に終了の理由を示すメッセージを表示す
る場合もある。

【００９４】出力部１３０にてジェスチャコード対応テ
ーブル１３１を参照した結果、ジェスチャに対応するア
クションが存在した場合には、図１３中のＤに示すよう
なアクションの実行確認の画面を表示する場合がある。
すなわち、図中に示される確認のウインドウにおいて
は、ほぼ“ｐ”形状のジェスチャとそれに対応するアク
ション“印刷”が表示され、ボタン“はい”またはボタ
ン“いいえ”のいずれかを選択することを求めている。
ジェスチャの入力時の軌跡が表示されないシステムの場
合でも、入力が終了した段階で図１３中のＤのような確
認の画面を表示することで誤ったアクションの実行を回
避することができる。このような確認は、出力部１３０
から出力されたアクション１７０に応じて、フィードバ
ック部１５０が行う。そして、ユーザによる確認を受け
ると、出力部１３１からの出力に従い、ＣＰＵ５２はア
クションを実行するように制御する。

【００９５】続いて、本発明を記録媒体に適用した具体
例について説明する。この記録媒体は、情報が記録され
た記録媒体であって、ユーザの手書入力操作に伴う手書
図形を手書入力する手書図形入力ステップと、上記手書
図形入力ステップにおいて入力された手書図形を手書図
形情報として認識する認識ステップと、ユーザによって
予め登録された手書図形情報に対応する動作を、手書図
形情報と動作との対応関係を保持する対応表保持手段を
参照して検索する検索ステップと、上記認識ステップで
認識された手書図形情報に対応する動作を上記検索ステ
ップで検索し、その検索された動作を実行するように制
御する制御ステップとの各ステップからなる情報処理方
法のプログラムが記録されてなるものである。

【００９６】なお、本明細書中において、上述した一連
の処理を実行するコンピュータプログラムをユーザに対
して提供する記録媒体とは、例えば、フロッピーディス
ク（ＦＤ）やいわゆるＣＤ−ＲＯＭなどのリムーバブル
な可搬型情報記録媒体は勿論のこと、パーソナルコンピ
ュータに内蔵されるＨＤＤに対して、予め出荷時にイン
ストールしてユーザに提供するような場合の内蔵型情報
記録媒体をも含み、さらにインターネットやディジタル
衛星などのネットワークを介してパーソナルコンピュー
タにダウンロードする場合のネットワーク伝送媒体をも
含む概念である。

【００９７】続いて、本実施の形態の適用の具体例につ
いて説明する。この具体例は、上述のように、コンピュ
ータ１００に特定のジェスチャを入力することにより、
ジェスチャ入力の開始／終了を通知する方法を利用した
ものである。

【００９８】このようなジェスチャの入力に応じて、対
応するソフトウェアを実行することができる。これはジ
ェスチャコード対応テーブルの保持する対応表におい
て、ジェスチャに対するアクションとしてソフトウェア
を対応づけにより行うことができる。例えば、特定のジ
ェスチャを入力すると、特定のアプリケーションが立ち
上がるように設定することができる。

【００９９】また、予めマクロ操作を登録しておき、ジ
ェスチャコード対応テーブルにおけるジェスチャとアク
ションとの対応表において、そのマクロ操作とジェスチ
ャとを結びつけておくことにより、ジェスチャの入力に
よりマクロ操作を実行することができる。このようなマ
クロ操作により、ジェスチャ入力のような簡単な操作に
より複雑な処理を行うマクロ操作を実行することができ
る。例えば、マウスでテキスト等を選択した後ジェスチ
ャによりコマンドを入力すると、選択されているテキス
ト等をコピーし、あらかじめ決められたジェスチャコー
ド対応テーブル、メイル等の場所に自動的に張り付ける
ことができる。また、テキスト文書等のアイコンの上で
ジェスチャを入力するとその文書を開いたあとで自動的
にプリントアウトすることができる。さらに、ジェスチ
ャ入力をするとダイヤルアップ接続を行ってメールを取
り込むことができる。そして、ジェスチャ入力をすると
あらかじめ登録されている複数のソフトウェアを起動
し、ウインドウの位置や大きさを自動的に整えることが
できる。

【０１００】さらに、本実施の形態は、障害者用の入力
インターフェイスとして適用することができる。すなわ
ち、本実施の形態によると、タッチパッドのようなポイ
ンティングデバイスを用いて指一本の動作範囲で入力で
きるため、指一本しか自由に動かすことができない障害
者にも操作することができるので、障害者用のインター
フェイスとしての応用が考えられる。

【０１０１】そして、本実施の形態は、幼児用の入力イ
ンターフェイスに適用することができる。すなわち、
丸、三角、四角等の手書図形の入力によってアウトプッ
トが得られ、幼児にも容易に理解することができるの
で、幼児用の教育用ソフトや装置等への応用が考えられ
る。

【０１０２】また、本実施の形態は、電子的なロック機
構において認証キーとしてジェスチャを使用する認証ロ
ックにも適用することができる。すなわち、任意の文字
を登録できるため数字の組合わせよりも覚えやすく、第
三者による解読も困難である。そして、文字認識部で筆
跡の癖や筆圧を判別することによりさらに正確な認証キ
ーの判別が可能である。さらに、個人の認証とコマンド
の入力を一つの操作で行うことが可能。従って、キャッ
シュディスペンサー（cash dispenser）やドアロックへ
の応用が考えられる。

【０１０３】なお、上述の実施の形態を手書文字認識シ
ステムへのコマンド入力に利用する場合には、文字入力
時には、文字の入力以外にも候補の選択や入力した文字
やストロークの取り消しなどの制御用のコマンドの入力
が必要となるが、このコマンド入力にジェスチャ機能を
使用することにより入力時のコマンドボタン等へのポイ
ンタ移動が不要になる。

【０１０４】なお、上述の実施の形態においては、ＧＵ
Ｉを有するコンピュータ１００上にポインティングデバ
イス１１０、ジェスチャ認識部１２０、出力部１３０等
の全てを含むシステムをソフトウェアとして構築した。
しかし、コンピュータ上に限らず、任意の装置の上記各
部をデバイスとして組み込むこともできる。この場合に
は、ポインティングデバイス１１０、ジェスチャ認識部
１２０、出力部１３０が必須構成要素であり、補助入力
部１４０、フィードバック部１５０、ジェスチャコード
対応テーブル登録部１６０はオプションである。フィー
ドバック部１５０は、装置に組み込む場合には、ＬＥＤ
の表示になったりブザーになる場合がある。

【０１０５】

【発明の効果】上述のように、本発明は、ユーザの手書
入力操作に伴う手書図形をポインティングデバイスで入
力し、ポインティングデバイスに入力された手書図形を
ジェスチャ認識部でジェスチャとして認識し、ユーザに
よって予め登録されたジェスチャとアクションとの対応
関係をジェスチャコード対応テーブルに保持し、ジェス
チャコード対応テーブルを参照してジェスチャ認識部で
認識されたジェスチャに対応するアクションを検索し、
その検索された動作を実行するように制御するものであ
る。従って、本発明においては、ユーザがジェスチャコ
ード対応テーブルにジェスチャとアクションとの対応関
係を登録することにより、ユーザが容易に拡張すること
ができる。このように、本発明は、個々のユーザが好み
のジェスチャについて任意かつ自由に拡張できるような
柔軟性、拡張性を有するものである。

【０１０６】また、本発明は、ジェスチャ認識部で認識
されたジェスチャ情報に対応するアクション、実行した
アクションの結果の少なくとも一方を表示する液晶表示
装置を有し、ユーザはアクションについての操作を確認
しつつ行うことができ、ユーザの負担を軽減する。

【０１０７】さらに、本発明においては、ジェスチャ認
識部で手書図形による入力の開始または終了を示す特定
の手書図形の入力により、手書図形による入力の開始ま
たは終了を認識する。このため、手書図形の入力の開始
または終了について入力する特別の入力装置を備える必
要がないので、情報処理装置の小型化、低価格化を図る
ことができる。

【０１０８】そして、本発明においては、入力の開始ま
たは終了を知らせる特定の手書図形の入力とは、特定の
形状の手書図形の手書入力、特殊操作による手書入力、
特定の領域への手書入力である。従って、このような手
書入力は、例えば、片手、指一本により、直感的に手書
入力をすることができ、ユーザの負担を軽減する。

【図面の簡単な説明】

【図１】コンピュータの図形認識に関する要部を示すブ
ロック図である。

【図２】コンピュータの概略的な構成を示すブロック図
である。

【図３】表示部を開いた携帯型コンピュータの斜視図で
ある。

【図４】表示部を閉じた携帯型コンピュータの右側面図
である。

【図５】表示部を閉じた携帯型コンピュータの平面図で
ある。

【図６】ジェスチャ入力による処理を示すフローチャー
トである。

【図７】特殊図形によるジェスチャ入力の具体例を示す
図である。

【図８】特殊操作によるジェスチャ入力の具体例を示す
図である。

【図９】領域指定によるジェスチャ入力の具体例を示す
図である。

【図１０】特殊図形の入力によるジェスチャ入力を示す
図である。

【図１１】ジェスチャ認識のための回路の具体例を示す
ブロック図である。

【図１２】ジェスチャ入力を行う画面の具体例を示す図
である。

【図１３】ジェスチャ入力を行う画面の具体例を示す図
である。

【符号の説明】

２ 本体、３ 表示部、５ タブレット、５２ ＣＰ
Ｕ、５３ ＰＣカード、５４ ＲＡＭ、５６ ＨＤＤ、
６１ マイクロコントローラ、１００ コンピュータ、
１１０ ポインティングデバイス、１２０ ジェスチャ
判別部、１３０出力部、１３１ ジェスチャコード対応
テーブル、１６０ ジェスチャコード対応テーブル登録
部

───────────────────────────────────────────────────── フロントページの続き (72)発明者 村瀬 功 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 Ｆターム(参考） 5B087 AA10 BB00 DD17 5E501 AA03 AC37 BA05 BA11 CA04 CB03 CB05 CB06 CB09 DA11 EA02 EA10 EA11 EB01 FA03 FA04 FA14 FB43

Claims (10)

【特許請求の範囲】
1. 【請求項１】 ユーザの手書入力操作に伴う手書図形を
   入力する手書図形入力手段と、 上記手書図形入力手段に入力された手書図形を手書図形
   情報として認識する認識手段と、 ユーザによって予め登録された手書図形情報と動作との
   対応関係を保持する対応表保持手段と、 上記対応表保持手段に保持されている対応表を参照して
   手書図形情報に対応する動作を検索する検索手段と、 上記認識手段で認識された手書図形情報に対応する動作
   を上記検索手段で検索し、その検索された動作を実行す
   るように制御する制御手段とを備えることを特徴とする
   情報処理装置。
2. 【請求項２】 上記認識手段で認識された手書図形情報
   に対応する動作、実行した動作の結果の少なくともいず
   れか一方を表示する表示手段を有することを特徴とする
   請求項１記載の情報処理装置。
3. 【請求項３】 上記手書図形入力手段においては、上記
   表示装置に表示され入力操作に応じて移動される指標に
   ついて、その指標の移動軌跡が入力されることを特徴と
   する請求項１記載の情報処理装置。
4. 【請求項４】 ユーザの手書入力操作により入力された
   手書図形を手書図形情報として登録するとともに、この
   手書図形情報と動作との対応関係を上記対応表として表
   示手段に一覧表示して上記対応表保持手段に登録する登
   録手段を有することを特徴とする請求項１記載の情報処
   理装置。
5. 【請求項５】 上記認識手段は、手書図形による入力の
   開始または終了を示す特定の手書図形の入力により、手
   書図形による入力の開始または終了を認識することを特
   徴とする請求項１記載の情報処理装置。
6. 【請求項６】 上記特定の手書図形の入力とは、特定の
   形状の手書図形の手書入力、特殊操作による手書入力、
   特定の領域への手書入力の少なくとも一つであることを
   特徴とする請求項５記載の情報処理装置。
7. 【請求項７】 上記特殊操作は、複数回のタップ操作、
   予め設定された回数繰り返すタップ操作、同時に行う複
   数のドラッグ操作、複数の特定の領域への特定の順序で
   の入力操作の少なくとも一つを含むことを特徴とする請
   求項６記載の情報処理装置。
8. 【請求項８】 上記入力手段は感圧式であり、上記特定
   の手書図形の手書入力とは、特定の圧力の特定の時間の
   手書入力、特定の圧力の予め設定された回数繰り返す手
   書入力、特定の圧力の特定の領域への手書入力の少なく
   とも一つを含むことを特徴とする請求項５記載の情報処
   理装置。
9. 【請求項９】 ユーザの手書入力操作に伴う手書図形を
   手書入力する手書図形入力ステップと、 上記手書図形入力ステップにおいて手書入力された手書
   図形を手書図形情報として認識する認識ステップと、 ユーザによって予め登録された手書図形情報に対応する
   動作を、手書図形情報と動作との対応関係を保持する対
   応表保持手段を参照して検索する検索ステップと、 上記認識ステップで認識された手書図形情報に対応する
   動作を上記検索ステップで検索し、その検索された動作
   を実行するように制御する制御ステップとを含むことを
   特徴とする情報処理方法。
10. 【請求項１０】 情報が記録された記録媒体であって、 ユーザの手書入力操作に伴う手書図形を手書入力する手
    書図形入力ステップと、 上記手書図形入力ステップにおいて入力された手書図形
    を手書図形情報として認識する認識ステップと、 ユーザによって予め登録された手書図形情報に対応する
    動作を、手書図形情報と動作との対応関係を保持する対
    応表保持手段を参照して検索する検索ステップと、 上記認識ステップで認識された手書図形情報に対応する
    動作を上記検索ステップで検索し、その検索された動作
    を実行するように制御する制御ステップとの各ステップ
    からなる情報処理方法のプログラムが記録されてなるこ
    とを特徴とする記録媒体。