JPH06202800A - ペン入力方式の情報処理装置 - Google Patents

Abstract

(57)【要約】 【目的】 ペン入力方式の情報処理装置において、ジェ
スチャの入力により、画面を迅速、且つ的確に指定位置
に移動できるようにする。 【構成】 画面をスクロールする場合、ペン１１を用い
て移動元となる画面位置にスクロールのジェスチャを入
力する。ＣＰＵ１は、ジェスチャが入力された位置の座
標を透明タブレット１０からの情報により求め、更に、
スクロール指示内容を辞書３に設けられているジェスチ
ャ認識用辞書を参照して認識する。この認識結果が例え
ば画面を中央に移動する指示であれば、ジェスチャが入
力された点の座標、現在表示領域の中央の座標、現在表
示領域の始点の座標等から、新表示領域の始点の座標を
求める。そして、この計算結果に従って移動処理、即
ち、ＲＡＭ４に保持されている文書情報をＶＲＡＭ６に
書き込む際に、その書き込み位置を移動し、その結果を
ＬＣＤパネル９に表示する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、ジェスチャ入力による
処理機能を備えたペン入力方式の情報処理装置に関す
る。

【０００２】

【従来の技術】近年、ペン入力方式を用いたワードプロ
セッサ、パーソナルコンピュータ等の情報処理装置が実
用化されている。このペン入力方式を用いた情報処理装
置における画面スクロール機能は、画面の機能表示領域
に上下及び左右の方向を示すスクロールキーを表示し、
このスクロールキーをペンでタッチすることにより、そ
のスクロールキーの示す上下あるいは左右の方向に画面
が移動するようになっている。

【０００３】また、最近では、スクロールキーに対応す
る上下及び左右方向を示すジェスチャ（予め設定した文
字、記号等）をペン入力、つまり、ペンで画面上に書く
ことにより、画面をその指定方向にスクロールするよう
にしたジェスチャによる方法も考えられている。

【０００４】

【発明が解決しようとする課題】しかし、上記従来のス
クロールキー及びジェスチャによる方法では、上下、左
右の何れかの方向にしか画面を移動できないので、ユー
ザーが画面上で見たいと思う場所に的確に画面移動させ
ることが困難である。

【０００５】例えば、画面上のある場所を中央に持って
いきたいといった場合に、上下の移動及び左右の移動の
組み合わせで移動させなければならず、画面を所望の位
置に移動させるのに非常に時間がかかるという問題があ
った。

【０００６】本発明は上記の点を考慮してなされたもの
で、ジェスチャの入力により、画面を迅速、且つ的確に
指定位置に移動し得るペン入力方式の情報処理装置を提
供することを目的とする。

【０００７】

【課題を解決するための手段】本発明は、表示画面上に
座標入力装置が対応して設けられ、この座標入力装置に
よりペン入力を行なうペン入力方式の情報処理装置にお
いて、画面の移動先を指示するジェスチャを移動元とな
る画面位置にペン入力するジェスチャ入力手段と、この
手段により入力されたジェスチャの移動先を認識する認
識手段と、上記ジェスチャが入力された点を上記認識手
段により認識された移動先に移動するための移動量を求
める手段と、この手段により求められた移動量に応じて
上記ジェスチャが入力された点を指示位置に移動して画
面表示する表示手段とを備したことを特徴とする。

【０００８】

【作用】表示画面をスクロールする場合、ペンにより例
えば「右上」、「右下」、「中央」、「左上」、「左
下」等のスクロールを指示するジェスチャを入力する。
この場合、ジェスチャは移動元となる画面位置に入力す
る。このスクロールのためのジェスチャが入力される
と、入力された位置の座標が透明タブレット等の座標入
力装置からの情報により求められると共に、スクロール
の指示内容がジェスチャ認識用辞書を参照して認識され
る。ジェスチャ内容が認識されると、上記ジェスチャ入
力点からジェスチャにより指示された位置までの移動量
が求められる。そして、この移動量に従ってジェスチャ
入力点がジェスチャにより指示された位置まで移動さ
れ、画面上に表示される。

【０００９】従って、スクロールを指示するジェスチャ
をペン入力するのみで、画面を所望の位置にスクロール
することができる。

【００１０】

【実施例】以下、図面を参照して本発明の一実施例を説
明する。

【００１１】図１は、本発明の一実施例に係るペン入力
方式の情報処理装置の構成を示すブロック図である。図
１において、１は全体の制御を司るＣＰＵで、このＣＰ
Ｕ１にはバスラインＢＵＳを介してＲＯＭ２、各種辞書
３、ＲＡＭ４、表示コントローラ５、ＶＲＡＭ６、タブ
レットコントローラ７、外部インタフェース８が接続さ
れる。

【００１２】上記ＲＯＭ２は、ＣＰＵ１を制御するため
のプログラムや各種データを格納する読出し専用の不揮
発性メモリである。また、このＲＯＭ２には、手書き文
字の認識、ジェスチャの認識・実行処理等のプログラム
も格納される。

【００１３】辞書３としては、手書き文字を認識するた
めの辞書、入力されたジェスチャを認識するための辞
書、認識したジェスチャに対する処理を実行するための
辞書等、各種辞書が設けられている。上記ジェスチャ認
識用辞書には、各種ジェスチャと共に、スクロール用の
ジェスチャ、例えばペン１１により指定した位置より

【００１４】

【外１】

【００１５】等のジェスチャを認識するためのデータが
登録される。即ち、ジェスチャ認識用辞書には、ジェス
チャの形から認識に必要なデータが抽出して登録され
る。また、ジェスチャ処理用辞書には、認識したジェス
チャに対する処理を実行するためのデータが登録され
る。

【００１６】ＲＡＭ４は、ＣＰＵ１が各種データを一時
保存するために使用する読み書き可能なメモリである。
このＲＡＭ４には、ジェスチャ登録用のバッファも設け
られている。

【００１７】表示コントローラ５は、ＣＰＵ１の制御の
下にＶＲＡＭ６の内容を表示パネル例えばＬＣＤパネル
９に表示させる。ＶＲＡＭ６は、ＬＣＤパネル９に表示
する内容を保存している読み書き可能なメモリであり、
ＣＰＵ１により制御される。

【００１８】上記ＬＣＤパネル９の前面には、座標入力
装置例えば透明タブレット１０が重ねて設けられる。こ
の透明タブレット１０は、データ入力用のペン１１と共
にタブレットコントローラ７に接続される。上記透明タ
ブレット１０は、ペン１１で押された位置を検出し、そ
の検出した位置（座標）情報をタブレットコントローラ
７に入力する。上記ペン１１は、ペン先にスイッチを備
えており、ペン先をＬＣＤパネル９にタッチした際にス
イッチオン、離した時にスイッチオフするようになって
おり、そのスイッチのオン／オフ情報がタブレットコン
トローラ７に送られる。

【００１９】このタブレットコントローラ７は、透明タ
ブレット１０及びペン１１を制御し、透明タブレット１
０が検出したペンの位置情報やペン１１からのスイッチ
情報をＣＰＵ１に伝達する。このＣＰＵ１は、タブレッ
トコントローラ７から送られてくる透明タブレット１０
やペン１１の情報を得て、表示コントローラ５やＶＲＡ
Ｍ６を制御してＬＣＤパネル９に必要な情報を表示す
る。

【００２０】図２は、ＬＣＤパネル９の表示される文書
作成画面の例を示したものである。図２に示すように、
画面の上部及び中央部が作成した文書の表示領域２１、
下部が編集領域２２となっている。上記文書表示領域２
１は、ジェスチャの入力領域を兼ねており、この領域に
ペン１１により記号、文字等が書かれると、ジェスチャ
として認識処理される。

【００２１】一方、編集領域２２には、例えば「単漢
字」、「選択／実行」、「スペース」等の各種の機能を
示すキーが表示されていると共に、文字入力枠２３及び
認識文字の次候補を示す認識次候補領域２４が表示され
る。上記文字入力枠２３内にペン１１により文字が入力
された場合にのみ、文字として認識処理される。上記文
字入力枠２３に入力された文字が確定すると、つまり、
「選択／実行」キーがペンにより指定されると、その入
力文字が文書表示領域２１のカーソル２５により指定さ
れている位置に表示される。

【００２２】また、上記編集領域２２の最下行には、そ
のときの入力モード、書式設定内容等が表示される。

【００２３】次に上記実施例の動作を説明する。

【００２４】文字入力により文書を作成する場合は、図
２における文字入力枠２３内にペン１１により文字を入
力する。この文字入力枠２３内に文字が入力されると、
ＣＰＵ１は、文字入力が行なわれたものと判断し、辞書
３を参照して文字に対する認識処理を実行する。

【００２５】そして、上記文書の作成途中において、画
面をジェスチャ入力によりスクロールする場合は、ペン
１１を用いて文書表示領域２１にスクロールのジェスチ
ャを入力する。文書表示領域２１にペン１１による入力
が行なわれると、ＣＰＵ１はジェスチャ入力が行なわれ
たものと判断し、辞書３に設けられているジェスチャ認
識用辞書を参照してジェスチャの内容を認識し、その認
識内容に応じて対応する処理を実行する。

【００２６】今、例えば図３（ａ）に示すように文書表
示領域２１の右下の位置を画面中央に移動したい場合に
は、画面右下の位置に、中央への移動を指示するジェス
チャ「＋」を入力する。ＣＰＵ１は、文書表示領域２１
にペン１１による入力が行なわれると、まず、図４のス
テップＡ1 に示すようにジェスチャを認識して、スクロ
ールのためのジェスチャが入力されたか否かを判断し、
スクロールの指示でなければ、その指示に応じた他の処
理を実行する。

【００２７】スクロールのためのジェスチャが入力され
た場合、ＣＰＵ１は、入力された位置の座標をペン１１
および透明タブレット１０からの情報により求め（ステ
ップＡ2 ）、更に、スクロールの指示内容が例えば「右
上」、「右下」、「中央」、「左上」、「左下」の何れ
であるかを判断する（ステップＡ3 ）。

【００２８】スクロールの指示内容が「右上」であれ
ば、設定された書式と、作成された文書との関係から、
指定された位置を右上に移動する余裕が有るかか否かの
判断を行ない（ステップＡ4 ）、指示内容が「右下であ
れば」、右下への移動が可能か否かの判断を行なう（ス
テップＡ5 ）。同様にして、他のスクロール指示が行な
われた場合でも、指示された位置に画面を移動できるか
否かの判断を行なう（ステップＡ6 〜Ａ8 ）。

【００２９】スクロール指示された位置に文書情報を移
動できる場合は、移動するための計算を行ない（ステッ
プＡ9 〜Ａ13）、その計算結果に従って移動処理、即
ち、ＲＡＭ４に保持されている文書情報をＶＲＡＭ６に
書き込む際に、その書き込み位置を移動し、その結果を
画面表示する（ステップＡ14）。なお、上記ステップＡ
4 〜Ａ8 で、指示された位置に移動できないと判断され
た場合は、現在の表示状態を維持するか、あるいは可能
な位置まで画面を移動する。

【００３０】上記図３（ａ）に示すように文書表示領域
２１の右下の位置を画面中央に移動するジェスチャ
「＋」が入力された場合は、このジェスチャ「＋」がス
テップＡ3 で認識され、ステップＡ6 において中央への
移動が可能か否か判断される。そして、ステップＡ11で
中央へ移動するための計算が行なわれ、その計算結果に
従って画面が移動処理され、ステップＡ14で図３（ｂ）
に示すように移動後の画面が表示される。

【００３１】以下、ペン１１で指定した位置を画面中央
に移動する場合の具体的な処理を説明する。図５は、全
文章の領域３１と、現在表示されている領域３２及び移
動処理により新しく表示される領域３３との関係を示
し、図６は画面中央への移動処理を行なうフローチャー
トを示している。

【００３２】図５に示すように全文章の領域３１の左側
の上端の座標を（０，０）、現在表示領域３２の中央Ａ
の座標を（ｘ1 ，ｙ1 ）、画面中央への移動を指示する
ジェスチャ「＋」が入力された点Ｂの座標を（ｘ2 ，ｙ
2 ）、現在表示領域３２の始点Ｃ（左側上端）の座標を
（ｘ3 ，ｙ3 ）、求める新表示領域３３の始点Ｄの座標
を（ｘ4 ，ｙ4 ）とする。

【００３３】ペン１１により画面中央への移動を指示す
るジェスチャ「＋」が入力されると、ＣＰＵ１は、ま
ず、ステップＢ1 に示すようにペン１１及び透明タブレ
ット１０からの情報により、ジェスチャ「＋」が入力さ
れた点Ｂの座標（ｘ2 ，ｙ2 ）を求める。次いで、入力
点Ｂの座標（ｘ2 ，ｙ2 ）と中央Ａの座標（ｘ1 ，ｙ
1）との差、つまり、ｘ座標における差ａ及びｙ座標に
おける差ｂを次式 ａ＝ｘ2 −ｘ1 ｂ＝ｙ2 −ｙ1 により求める（ステップＢ2 ）。

【００３４】次に新表示領域３３の始点Ｄの座標（ｘ4
，ｙ4 ）となるｃ（ｘ座標）及びｄ（ｙ座標）を現在
表示領域３２の始点Ｃの座標を（ｘ3 ，ｙ3 ）及び上記
ステップＢ2 で求めたａ，ｂの値を用いて次式 ｃ＝ｘ3 −ａ ｄ＝ｙ3 −ｂ により求める（ステップＢ3 ）。

【００３５】そして、上記のようにして求めたｃ，ｄの
値が全文章の領域３１の中に入っているか否かをチェッ
クする。まず、ｘ座標の値ｃが「０」より大きいか否か
を判断し（ステップＢ4 ）、「０」より大きければ領域
３１内であるので、ｃの値を座標ｘ4 として設定し（ス
テップＢ5 ）、「０」より小さければ領域３１外である
ので、座標ｘ4 には「０」を設定する（ステップＢ6
）。次にｙ座標の値ｄが「０」より大きいか否かを判
断し（ステップＢ7 ）、「０」より大きければ領域３１
内であるので、ｄの値を座標ｙ4 として設定し（ステッ
プＢ8 ）、「０」より小さければ領域３１外であるの
で、座標ｙ4 には「０」を設定する（ステップＢ9 ）。

【００３６】上記のようにして新表示領域３３の始点Ｄ
の座標（ｘ4 ，ｙ4 ）が求められるので、現在表示され
ている領域３２を新しい表示領域３３に移動する。これ
により、ペン１１で指定されたＢ点が新表示領域３３の
中央に位置するようになる。なお、ステップＢ4 あるい
はステップＢ7 でｃ，ｄの値が全文章の領域３１を越え
ていると判断された場合は、可能な範囲で現在表示領域
３２が新表示領域３３に移動する。

【００３７】以上は、指定した点を画面の中央に移動す
る場合について説明したが、その他、中央以外の位置を
指定した場合においても、同様にして移動することがで
きる。

【００３８】なお、指示するスクロールの種類は、上記
実施例に限定されるものではなく、その他、任意のスク
ロール指示を設定することができる。

【００３９】また、上記実施例では、ジェスチャにより
画面の移動先を設定する場合について示したが、任意の
２点間を指定してスクロールすることもできる。

【００４０】以下、この任意の２点間を指定してスクロ
ールする場合の処理を、２点間スクロールのジェスチャ
を入力して行なう場合と、スクロールモードのジェスチ
ャを入力して行なう場合について説明する。

【００４１】図７は、ペン１１により２点間スクロール
のジェスチャを入力してスクロールする場合の処理例を
示すフローチャートである。この２点間スクロールを行
なう場合は、まず、２点間スクロールのジェスチャを入
力し、その後、移動したい位置をペン１１によりタップ
する。

【００４２】ペン１１によりジェスチャが入力される
と、まず、ステップＣ1 で２点間スクロールのジェスチ
ャか否かを判断し、２点間スクロールのジェスチャでな
ければ、そのジェスチャに対する他の処理を実行する。
２点間スクロールのジェスチャであれば、ペン入力され
た位置の座標を求める（ステップＣ2 ）。

【００４３】そして、ペン１１により移動先がタップさ
れるまで待機し（ステップＣ3 ）、移動先がタップされ
ると、タップされた位置の座標を求め（ステップＣ4
）、その位置に移動できるか否かを判断する（ステッ
プＣ5 ）。移動が不可能であればそのまま処理を終了す
るが、移動が可能であれば、ステップＣ2 で得た移動元
の座標及びステップＣ4 で得た移動先の座標に基づい
て、上記図６で説明したような移動のための処理を実行
する（ステップＣ6 ）。この移動処理を行なった後、そ
の結果を画面上に表示する（ステップＣ7 ）。

【００４４】以上の処理により任意の２点間をスクロー
ルすることができる。

【００４５】次にペン１１によりスクロールモードのジ
ェスチャを入力してスクロールする場合の処理を、図８
のフローチャートに従って説明する。このスクロールモ
ードを指定して２点間のスクロールを行なう場合は、ま
ず、ペン１１によりスクロールモードのジェスチャを入
力し、その後、移動元の位置をタップし、次いで移動先
の位置をタップする。

【００４６】ペン１１によりジェスチャが入力される
と、まず、ステップＤ1 でスクロールモードのジェスチ
ャか否かを判断し、２点間スクロールのジェスチャでな
ければ、そのジェスチャに対する他の処理を実行する。
２点間スクロールのジェスチャであれば、次に移動元と
なる位置がペン１１によりタップされるまで待機する
（ステップＤ2 ）。この待機している間に、スクロール
モードを終了するためのジェスチャが入力された場合
は、そのジェスチャを認識してスクロールモードを終了
する（ステップＤ3 ）。ステップＤ2 で移動元の位置が
タップされたこと検出すると、タップされた位置の座標
を求める（ステップＤ4 ）。

【００４７】更に、この状態で移動先がペン１１により
タップされるまで待機する（ステップＤ5 ）。この待機
している間に、スクロールモードを終了するためのジェ
スチャが入力された場合は、そのジェスチャを認識して
スクロールモードを終了する（ステップＤ6 ）。

【００４８】そして、上記ステップＤ5 で移動先がタッ
プされたことを検出すると、タップされた位置の座標を
求め（ステップＤ7 ）、その位置に移動できるか否かを
判断する（ステップＤ8 ）。移動が不可能であればステ
ップＤ2 に戻り、再度、移動元がタップされるまで待機
する。上記ステップＤ8 で移動が可能であると判断され
た場合は、ステップＤ4 で得た移動元の座標及びステッ
プＤ7 で得た移動先の座標に基づいて、上記図６で説明
したような移動のための処理を実行する（ステップＤ9
）。この移動処理を行なった後、その結果を画面上に
表示する（ステップＤ10）。

【００４９】上記のようにスクロールモードにおいて、
任意の２点間を指定してスクロールすることができる。

【００５０】

【発明の効果】以上詳記したように本発明によれば、ス
クロール用のジェスチャが入力されると、そのジェスチ
ャにより指定される位置、あるいはペンのタップにより
指示された位置に画面を移動するようにしたので、ジェ
スチャの入力により画面を迅速、且つ的確に指定位置に
移動することができ、文書の作成、編集処理等を効率的
に行なうことができる。

【図面の簡単な説明】

【図１】本発明の一実施例によるペン入力方式の情報処
理装置の構成を示すブロック図。

【図２】同実施例における表示画面の機能表示例を示す
図。

【図３】ジェスチャ入力による画面の移動例を示す図。

【図４】ジェスチャ入力によるスクロール処理を示すフ
ローチャート。

【図５】画面上の指定位置を中央に移動する場合の全文
章領域に対する現在表示領域及び新表示領域との関係を
示す図。

【図６】画面上の指定位置を中央に移動する場合の処理
例を示すフローチャート。

【図７】２点間スクロールのジェスチャを入力した場合
のスクロール処理例を示すフローチャート。

【図８】スクロールモードのジェスチャを入力した場合
のスクロール処理例を示すフローチャート。

【符号の説明】

１…ＣＰＵ、 ２…ＲＯＭ、 ３…辞書、 ４…
ＲＡＭ、 ５…表示コントローラ、 ６…ＶＲＡ
Ｍ、 ７…タブレットコントローラ、 ８…外部イ
ンタフェース、 ９…ＬＣＤパネル、 １０…透明
タブレット、１１…ペン、 ２１…文書表示領域、
２２…編集領域、 ２３…文字入力枠， ２４…
認識次候補領域、 ２５…カーソル、 ３１…全文
章の領域、 ３２…現在表示領域、 ３３…新表示
領域。

Claims (6)

【特許請求の範囲】
1. 【請求項１】 表示画面上に座標入力装置が対応して設
   けられ、この座標入力装置によりペン入力を行なうペン
   入力方式の情報処理装置において、表示情報を画面中央
   へ移動するための指示をするジェスチャを移動元となる
   画面位置にペン入力するジェスチャ入力手段と、この手
   段により画面移動を指示するジェスチャが入力された
   際、そのジェスチャの入力点を画面中央に移動するため
   の移動量を求める手段と、この手段により得られた移動
   量に応じて上記ジェスチャが入力された点を画面中央に
   移動して表示する表示手段とを具備したことを特徴とす
   るペン入力方式の情報処理装置。
2. 【請求項２】 表示画面上に座標入力装置が対応して設
   けられ、この座標入力装置によりペン入力を行なうペン
   入力方式の情報処理装置において、画面の移動先を指示
   するジェスチャを移動元となる画面位置にペン入力する
   ジェスチャ入力手段と、この手段により入力されたジェ
   スチャの移動先を認識する認識手段と、上記ジェスチャ
   が入力された点を上記認識手段により認識された移動先
   に移動するための移動量を求める手段と、この手段によ
   り求められた移動量に応じて上記ジェスチャが入力され
   た点を指示位置に移動して画面表示する表示手段とを具
   備したことを特徴とするペン入力方式の情報処理装置。
3. 【請求項３】 表示画面上に座標入力装置が対応して設
   けられ、この座標入力装置によりペン入力を行なうペン
   入力方式の情報処理装置において、２点間スクロールの
   ジェスチャを移動元となる画面位置にペン入力するジェ
   スチャ入力手段と、この手段によりジェスチャが入力さ
   れた点をペンタップされた位置まで移動するための移動
   量を求める手段と、この手段により求められた移動量に
   応じて上記ジェスチャが入力された点を上記ペンタップ
   位置に移動して画面表示する表示手段とを具備したこと
   を特徴とするペン入力方式の情報処理装置。
4. 【請求項４】 表示画面上に座標入力装置が対応して設
   けられ、この座標入力装置によりペン入力を行なうペン
   入力方式の情報処理装置において、スクロールモードの
   ジェスチャをペン入力するジェスチャ入力手段と、この
   手段によりジェスチャが入力された際、ペンタップによ
   り指示される移動元及び移動先間の移動量を求める手段
   と、この手段により求められた移動量に応じて画面を移
   動して表示する表示手段とを具備したことを特徴とする
   ペン入力方式の情報処理装置。
5. 【請求項５】 ペン入力方式の情報処理方法であって、
   表示画面のスクロールを指示するジェスチャをジェスチ
   ャ入力手段より入力し、入力されたジェスチャの種類を
   認識手段により認識した後、この認識された結果に従っ
   て表示画面をスクロールすることを特徴とした表示画面
   スクロール方法。
6. 【請求項６】 ペン入力方式の情報処理方法であって、
   表示画面のスクロールを指示するジェスチャをジェスチ
   ャ入力手段より入力し、入力されたジェスチャの種類が
   中央表示の場合、中央表示する表示情報の位置の移動量
   を計算し、前記ジェスチャが入力された位置が表示画面
   の中央になるように表示画面をスクロールすことを特徴
   とした表示画面スクロール方法。