JP3466363B2

JP3466363B2 - 情報処理装置

Info

Publication number: JP3466363B2
Application number: JP02964796A
Authority: JP
Inventors: 和弘上原
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 1996-02-16
Filing date: 1996-02-16
Publication date: 2003-11-10
Anticipated expiration: 2016-02-16
Also published as: JPH09222955A

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、表示画面中の枠内
でデータを表示するウインドウを表示する表示部を備え
た情報処理装置に関するものである。

【０００２】

【従来の技術】表示画面中にウインドウが表示できる情
報処理装置としては、例えばパーソナルコンピュータ、
ワードプロセッサ、電子手帳等がある。従来のこれらの
情報処理装置において、ウインドウ内にデータを表示し
ているとき、例えば、データをもう少し広範囲に見たい
場合には、ウインドウの辺の一部をウインドウの外側へ
向かって移動させてウインドウを大きくする。逆に、あ
るウインドウを開いていて、例えばその横に別のウイン
ドウを開きたい場合には、はじめのウインドウの辺をウ
インドウの内側へ向かって移動させてウインドウを小さ
くする。

【０００３】このようにウインドウの辺の一辺を移動さ
せる場合の操作を図１１を用いて説明する。同図に示す
ように、表示画面８２上にウインドウ８３が表示されて
いる。このウインドウ８３の境界を示す枠８３ａは、４
辺、すなわち辺Ｈ１、Ｈ２、Ｈ３、Ｈ４からなってい
る。ポインティングデバイスとしてのペン８１をこの４
辺のうちの一辺Ｈ１の上に持ってきてクリックすること
により、辺Ｈ１を直接選択する。そして、ペン８１をそ
のまま表示画面８２上で移動させることにより、選択し
た辺Ｈ１をペン８１の動きに従って移動させている。図
では、選択された辺Ｈ１が、ペン８１の位置Ｐ１から位
置Ｐ２への移動に従ってＨ１’へ移動する。ポインティ
ングデバイスとしては上記ペン８１の他にマウスやトラ
ックボール等がある。

【０００４】なお、特開平６−２０２８００号公報に開
示された情報処理装置においては、図１２に示すよう
に、ウインドウの枠の一辺の移動ではなく、全文章領域
９２に対する表示領域のスクロールを行っている。表示
領域９３、表示領域９４はそれぞれ、スクロール前、ス
クロール後の表示領域である。表示領域９３の右下の点
９５を表示領域の真ん中に移動したい場合には、ペン９
１により、点９５上に『＋』という形のジェスチャ９６
を入力する。このジェスチャの入力により、表示領域９
３は表示領域９４まで移動する。この表示領域９４で
は、点９５が表示領域の中央に位置している。表示領域
９３と表示領域９４とは同じ形・面積である。

【０００５】

【発明が解決しようとする課題】しかしながら、上記従
来の情報処理装置では、ウインドウ枠の一辺を選択した
り、選択したウインドウ辺を移動させたりする場合に、
ポインティングデバイスのマーカーを、該当する枠すな
わち辺の位置に正確に持ってくる必要がある。このた
め、ポインティングデバイスの細かな操作が必要になる
という問題点がある。

【０００６】

【課題を解決するための手段】上記の課題を解決するた
め、本発明の情報処理装置は、表示画面上でジェスチャ
を入力するジェスチャ入力手段と、上記ジェスチャか
ら、ジェスチャの入力開始位置から始まる第１の線分を
検出する第１検出手段と、第１検出手段が検出した上記
第１の線分と平行になるウインドウ辺のうちで第１の線
分ともっとも近いウインドウ辺を選択する辺選択手段
と、上記ジェスチャから、上記第１の線分に引き続く第
２の線分の進行方向と第１および第２の線分同士の交差
角度とを検出する第２検出手段と、上記交差角度からウ
インドウ辺の移動動作を認識して、選択された上記ウイ
ンドウ辺を上記第２の線分の進行方向へ移動する辺移動
手段とを備えていることを特徴としている。

【０００７】上記の構成により、ウインドウの辺を選択
したい場合、操作者の操作によって例えばポインティン
グデバイス等のジェスチャ入力手段からジェスチャが入
力される。すると、第１検出手段が上記ジェスチャか
ら、ジェスチャの入力開始位置から始まる第１の線分を
検出する。そして辺選択手段が、上記第１の線分と平行
でもっとも近いウインドウ辺を選択する。

【０００８】したがって、該当する辺の位置にポインテ
ィングデバイスのマーカーを正確に持ってくる必要や、
その辺の位置でクリックする必要がない。すなわち、大
まかなポインティングデバイスの操作で入力したジェス
チャによる曖昧な位置情報を利用してウインドウ枠の一
辺を選択することができる。それによって、ポインティ
ングデバイスを細かく操作することなく、所望のウイン
ドウ枠の一辺を選択することができる。

【０００９】また、ウインドウ辺から離れた場所でジェ
スチャを入力すればよいので、操作者の視界をペン等の
ポインティングデバイス本体で妨げる不具合を減少させ
ることができる。例えば、選択したい辺の右側に今見た
い情報があり、右手で表示部上でペンを操作する場合、
従来のようにペンを辺に直接当てると、操作者自身の右
手によって、上記の見たい情報が隠されてしまう。しか
しながら、上記本願の構成では、表示画面内において該
当辺の例えば上側や下側で上記ジェスチャを入力しても
よいので、上記の見たい情報を手で遮ってしまうことが
ない。

【００１０】また、ジェスチャのうち、第１の線分を縦
すなわち垂直方向に引けば、縦枠の辺のうち第１の線分
に近いいずれか一方を選択できる。同様に、ジェスチャ
のうち、第１の線分を横すなわち水平方向に引けば、横
枠の辺のうち第１の線分に近いいずれか一方を選択でき
る。それによって、ジェスチャの向きを変えるという簡
単な操作上の違いだけで、ウインドウの４辺のうちの任
意の辺を選択することができる。

【００１１】また、ウインドウ辺から離れた場所でジェ
スチャを入力すればよいので、画面からはみ出している
ウインドウ枠の辺をも選択することができる。したがっ
て、辺の選択のためにウインドウ全体をあらかじめ移動
して選択対象の辺を画面に表示させる手間を省くことが
できる。それによって、画面に表示されていない辺の選
択を簡単な操作で行うことができる。

【００１２】また、上記の構成により、上記のようにし
てウインドウ辺が選択されたときに、第２検出手段が、
上記ジェスチャから、例えば第１の線分の終端から始ま
る第２の線分の進行方向と上記両線分の交差角度とを検
出する。すると、辺移動手段が、上記交差角度が所定の
角度、例えば直角に近い場合に、上記ジェスチャがウイ
ンドウ辺の移動を指示するものと判断し、選択した上記
ウインドウ辺を上記第２の線分の進行方向へ移動する。

【００１３】したがって、該当する辺の位置にポインテ
ィングデバイスのマーカーを正確に持ってくる必要や、
その辺の位置でクリックする必要や、クリックした辺を
移動させるようにポインティングデバイスを動かす必要
がない。すなわち、大まかなポインティングデバイスの
操作で入力したジェスチャによる曖昧な位置情報を利用
してウインドウ枠の一辺を選択し、選択したウインドウ
辺を移動することができる。それによって、上記の構成
による効果に加え、ポインティングデバイスを細かく操
作することなく、所望のウインドウ枠の一辺を選択して
移動させることができる。

【００１４】また、従来はウインドウ辺移動にはマーカ
ーの移動、クリック、移動という３つの挙動が必要であ
るが、上記構成では１挙動で処理が完了するため、辺移
動を迅速に行うことができる。

【００１５】また、第２の線分をどちらの方向に引くか
によって辺の移動方向が決まる。それによって、ジェス
チャの向きを１８０°変えるという簡単な操作上の違い
だけで、辺の移動方向を、垂直の辺は左右方向に、水平
の辺は上下方向に設定でき、操作が容易である。

【００１６】本発明の情報処理装置は、上記の構成に加
えて、上記第２検出手段が第２の線分の長さを検出し、
上記辺移動手段が上記ウインドウ辺を上記第２の線分の
進行方向へ第２の線分の長さの分だけ移動することを特
徴としている。

【００１７】上記の構成により、上記と同様にしてウイ
ンドウ辺が選択されたときに、第２検出手段が、上記ジ
ェスチャから、第２の線分の進行方向や上記両線分の交
差角度とともに、長さを検出する。すると、辺移動手段
が、上記交差角度が所定の角度、例えば直角に近い場合
に上記ジェスチャがウインドウ辺の移動を指示するもの
と判断し、選択した上記ウインドウ辺を上記第２の線分
の進行方向へ第２の線分の長さの分だけ移動する。

【００１８】したがって、上記第２の線分の長さを操作
者が所望の長さ分だけ引きさえすれば、辺を移動させた
い位置に正確にポインティングデバイスを移動させる必
要がない。このため、例えば、辺の左４ｃｍの位置でジ
ェスチャ入力を開始して辺を右へ３ｃｍ移動させたい場
合、第２の線分を７ｃｍ引く必要はなく、３ｃｍでよ
い。すなわち、辺とジェスチャとが比較的離れている場
合でも、長いジェスチャを入力する必要がない。それに
よって、上記の構成による効果に加え、簡単なジェスチ
ャ入力操作で所望のウインドウ枠の一辺を選択して希望
する距離だけ移動させることができる。

【００１９】本発明の情報処理装置は、上記の構成に加
えて、上記第２検出手段が第２の線分の終端位置を検出
し、上記辺移動手段が上記ウインドウ辺を上記第２の線
分の進行方向へ第２の線分の上記終端位置まで移動する
ことを特徴としている。

【００２０】上記の構成により、上記と同様にしてウイ
ンドウ辺が選択されたときに、第２検出手段が、上記ジ
ェスチャから、第２の線分の進行方向や上記両線分の交
差角度とともに、終端位置を検出する。すると、辺移動
手段が、上記交差角度が所定の角度、例えば直角に近い
場合に上記ジェスチャがウインドウ辺の移動を指示する
ものと判断し、選択した上記ウインドウ辺を上記第２の
線分の進行方向へ、上記終端位置まで移動する。

【００２１】したがって、辺移動にあたり、操作者が正
確な移動距離を分かっていなくても、終端位置にさえジ
ェスチャを運べばよい。それによって、上記の構成によ
る効果に加え、簡単なジェスチャ入力操作で所望のウイ
ンドウ枠の一辺を選択して希望する位置にまで移動させ
ることができる。

【００２２】本発明の情報処理装置は、上記の構成に加
えて、上記ジェスチャから、第３の線分の有無を検出す
る第３検出手段と、第３の線分の有無に応じて、ウイン
ドウ辺が選択されたときにウインドウも同時に選択する
か否かを切り替えるウインドウ選択切り替え手段を備え
ていることを特徴としている。

【００２３】上記の構成により、上記と同様にしてウイ
ンドウ辺が選択されたときに、第３検出手段が、上記ジ
ェスチャから、例えば第２の線分の終端から始まる第３
の線分の有無を検出する。すると、ウインドウ選択切り
替え手段が、第３の線分の有無に応じて、ウインドウの
選択・非選択を切り替える。

【００２４】したがって、ウインドウ枠の辺を選択して
もウインドウ自体は選択せずにおくことができる。この
ため、複数のウインドウが表示されているときに、今選
択しているウインドウＡとは別のウインドウＢの辺を選
択しても、意図しないウインドウＢ自体が選択されてし
まう不具合を防ぐことができる。それによって、自動的
に選択される意図外のウインドウから所望のウインドウ
に選択しなおす手間を省くことができるので、作業効率
を高めることができる。

【００２５】

【発明の実施の形態】本発明の実施の一形態について図
１ないし図１０に基づいて説明すれば、以下の通りであ
る。

【００２６】本情報端末装置（情報処理装置）のハード
ウエア構成の概略を図１に示す。同図において、ＣＰＵ
（中央演算処理部）１は本装置の中央処理部であって、
装置全体の情報加工処理や入出力部制御等を行う演算処
理部分である。ＲＯＭ（リードオンリーメモリ）２は読
み出し専用のメモリであって、この装置の制御プログラ
ム、出力用活字等のフォント情報等を記憶している部分
である。第１検出手段、第２検出手段、第３検出手段、
辺選択手段、辺移動手段、およびウインドウ選択切り替
え手段は、上記ＣＰＵ１および制御プログラムによって
実現される機能モジュールである。ＲＡＭ（ランダムア
クセスメモリ）３は読み書き可能なメモリであって、こ
の装置にて処理される文章情報、および装置管理に必要
な情報を記憶する部分である。ＫＥＹ（キーボード）４
は、この装置の入力部の一つである。イメージスキャナ
５は、用紙上に記載されているイメージをこの装置に取
り込む入力部である。

【００２７】通信装置６は、他の装置と処理情報の送受
を行う情報入力および情報出力装置である。マウス入力
部７は、ポインティングデバイスの代表的なマウス１２
を本装置に接続するための入力部である。記憶装置８
は、フロッピーディスクやハードディスク等に代表され
る記憶部である。ＲＯＭ２やＲＡＭ３がＣＰＵ１の制御
空間のなかで管理されているのに対し、記憶装置８は特
定空間の中で外部記憶装置としての位置付けで管理され
る拡張メモリ部である。

【００２８】印刷部９は本装置の情報を用紙に印刷出力
する部分である。タブレット制御部１０は、タブレット
１４とペン１３とを制御の上、ＣＰＵ１に接続する機能
部分である。表示部１１は本装置の情報をＣＲＴ（陰極
線表示部）またはＬＣＤ（液晶表示部）に表示出力する
部分である。マウス１２は操作者が操作できるポインテ
ィングデバイスの一つである。上記ペン１３は、上記タ
ブレット１４の特定座標を指定する座標入力指示棒であ
って、その入力情報がタブレット制御部１０で解読され
るようになっている。タブレット１４はペン１３と組み
合わせて利用され、タブレット制御部１０で管理され
る。近年は、タブレット１４は表示部１１に重ね合わせ
て機能するものが多く、本実施の形態でもそのように構
成されている。したがって、表示部１１の表示画面上で
後述のようにペン１３等で図形を描くことにより、タブ
レット制御部１０を通じて種々のデータを入力すること
ができるようになっている。

【００２９】この情報端末装置としては、パーソナルコ
ンピュータ、ワードプロセッサ、電子手帳等色々あり、
装置の形態としては機能の一部が省かれたり、他の入出
力仕様で代用されたりして構成される。

【００３０】本実施の形態では、マウス入力部７とマウ
ス１２とでマウス関連の入力指示部が構成され、タブレ
ット制御部１０、ペン１３、およびタブレット１４でタ
ブレット関連の入力指示機能部が構成されている。ＣＰ
Ｕ１、ＲＡＭ３、マウス関連の入力指示部、タブレット
関連の入力指示機能部、および表示部１１を用いる基本
的動作について以下に説明する。

【００３１】本実施の形態で用いるコンピュータプログ
ラム（以下、プログラムと称する）はＲＯＭ２の中、あ
るいは記憶装置８から、ＲＡＭ３へロードされて格納さ
れ、そして実行される。この実行は、マウス１２やペン
１３からの入力に基づいて処理されるものである。な
お、文章情報とジェスチャ入力情報との重ね合わせ表示
方法は従来通りであり説明は省略するが、これは表示部
にかかわるＶＲＡＭ（ビデオＲＡＭ）管理技術の中で制
御・実現されている。

【００３２】このような構成の本情報端末装置におい
て、ウインドウの一辺を選択・移動させるためのジェス
チャが後述のように表示部１１上に入力されると、ウイ
ンドウと上記ジェスチャとが表示部１１上で重ねて表示
される。このため、常に、どの辺を選択したか、辺をど
のくらい移動するかを把握しながら辺の選択・移動が可
能になっている。

【００３３】本情報端末装置の構成を図２に示し、ウイ
ンドウの辺の選択・移動動作の実行時の表示画面の表示
内容を図９に示す。

【００３４】図２に示すように、操作者２１は、図９
（ａ）に示す表示画面にジェスチャを入力する手段すな
わちペン３１やマウスによって、ウインドウの辺の選択
・移動のジェスチャを入力する。すると、その情報がジ
ェスチャ情報格納手段２３すなわちＲＡＭ３に記憶され
る。そして、表示手段２４すなわち表示部１１にて、ジ
ェスチャとウインドウおよび文章を重ね合わせた表示
が、図９（ｂ）に示す表示画面のように表示される。操
作者２１はこの表示画面を確認する。ジェスチャ記憶手
段２６すなわちＲＯＭ２には、あらかじめジェスチャ情
報が記憶されている。ジェスチャは一筆書きの構成を取
っているため、ペン１３を画面上から離した瞬間がジェ
スチャ入力の終了時であり、そのときの点が最終描画点
となる。

【００３５】ジェスチャの入力が終わると、入力された
ジェスチャを解読する手段２５が、上記ジェスチャ情報
格納手段２３内のジェスチャ情報と、上記ジェスチャ記
憶手段２６にあるジェスチャ情報とを比較する。比較し
た結果が辺移動のジェスチャであった場合には、解読し
た内容により辺を選択する手段２７と、解読した内容に
より辺を移動する手段２８を起動する。そして、指定さ
れた１辺を、後述のように指定された距離だけ移動させ
る。なお、上記手段２５、２７および２８はいずれもＣ
ＰＵ１と前記プログラムによって実現されている。

【００３６】ジェスチャにより指令された辺移動がこの
ようにして実行されると、移動後の辺（枠）は、表示手
段２４すなわち表示部１１に表示され、ジェスチャは画
面から消去される（図９（ｃ））。なお、ここでは、ペ
ン３１の最終描画点へ辺を移動させている。

【００３７】本実施の形態で使用するジェスチャ編集記
号を図３および図４に示す。

【００３８】図３では、４辺に対応した４種類のジェス
チャ編集記号を示している。同図（ａ）では、ペン等を
用い、図に示す矢印の向きに従い、位置Ｐ５１からＰ５
２へ向けての軌跡（第１の線分）およびＰ５２からＰ５
３へ向けての軌跡（第２の線分）を引くことにより、ジ
ェスチャＪ１を入力する。同図（ａ）では、表示画面中
に２つのウインドウＷｌ、Ｗｒが表示されている。

【００３９】ジェスチャＪ１により、ＣＰＵ１は次のよ
うなことを認識する。

【００４０】まず、位置Ｐ５１とＰ５２とを結ぶ軌跡が
４辺のうちのいずれかと平行で、その軌跡とＰ５２とＰ
５３とを結ぶ軌跡とが直角になっていることにより、こ
のジェスチャが辺移動のジェスチャであることが認識さ
れる。次に、Ｐ５１からＰ５２への軌跡と平行になる辺
のうちでもっとも近い辺が認識される。同図でＰ５１か
らＰ５２への軌跡に平行な辺は、ウインドウＷｌの辺Ｌ
１、Ｌ２、ウインドウＷｒの辺Ｒ１、Ｒ２の４つがある
が、上記軌跡にもっとも近い辺Ｒ１が認識される。この
ように、１画面上に複数のウインドウが表示されている
ときにも、Ｐ５１からＰ５２への軌跡と平行になってい
るウインドウの辺のなかでもっとも近い辺が選ばれるよ
うになっているため、ただ一つの辺を認識することがで
きる。

【００４１】なお、ジェスチャの軌跡の直角度、および
ウインドウとの平行度は、ジェスチャを認識するプログ
ラムにおいて設定する。例えば直角度は、プログラムで
８０°から１００°までの間と設定すると、Ｐ５１から
Ｐ５２への軌跡の線分とＰ５２からＰ５３への軌跡の線
分とのなす角度が８０°から１００°までの間にある限
り、このジェスチャが辺移動のジェスチャであると認識
される。したがって、操作者は上記角度が直角かどうか
はあまり厳密に考えなくてよいので、作業効率が向上す
る。また平行度は、同じプログラムで０°から１０°ま
での間と設定すると、Ｐ５１からＰ５２への軌跡の線分
とウインドウの枠の１辺とのなす角度が０°から１０°
までの間にある限り、このジェスチャがその辺と平行で
あると認識される。したがって、上記同様、操作者は平
行かどうかはあまり厳密に考えなくてよいので作業効率
が向上する。

【００４２】同図（ｂ）では、同じくペン等を用い、図
に示す矢印の向きに従い、逆Ｌ字型の軌跡を引いてジェ
スチャＪ２を入力する。すなわちまず縦線を上から下へ
引き、引き続き横線を右から左へ引く。これによって、
垂直方向の１辺が左に移動する。つまり同図（ａ）とは
移動方向が１８０°異なっている。同図（ｃ）では、同
じくペン等を用い、図に示す矢印の向きに従い、Ｌ字型
の軌跡を引いてジェスチャＪ３を入力する。すなわちま
ず横線を左から右へ引き、引き続き縦線を下から上へ引
く。これによって、水平方向の１辺が上に移動する。同
図（ｄ）では、同じくペン等を用い、図に示す矢印の向
きに従い、逆Ｌ字型の軌跡を引いてジェスチャＪ４を入
力する。すなわちまず横線を左から右へ引き、引き続き
縦線を上から下へ引く。これによって、水平方向の１辺
が下に移動する。つまり同図（ｃ）とは移動方向が１８
０°異なっている。

【００４３】なお、第１の線分（Ｐ５１からＰ５２まで
の軌跡）は、縦の線であれば、上から下へ引いてもよい
し、下から上へ引いてもよい。同様に、横の線であれ
ば、左から右へ引いてもよいし、右から左へ引いてもよ
い。

【００４４】以上の事項は、Ｐ５３でペン先が表示画面
上から離れた瞬間に認識・設定され、実行される。

【００４５】認識された辺の移動距離は以下のように２
種類の方法（モード）によって設定される。すなわち、
一つは、図４（ａ）に示すように、ジェスチャのＰ５２
からＰ５３へかけての軌跡すなわち第２の線分の長さと
同じ距離（図中、ｌで示す）を設定するモードである。
もう一つは、同図（ｂ）に示すように、ジェスチャの第
２の線分の終端であるＰ５３を辺移動の移動先の点とす
るモードである。これら２つのモードは、以下に述べる
ようにこれらのモードのうちの一つを操作者が設定する
ことにより選択できる。

【００４６】このモード設定を行うための一つの方法と
しては、ジェスチャの形を少し変える。図５に示すよう
に、第２の線分（Ｐ５２からＰ５３までの軌跡）に続け
て、Ｐ５３からＰ５４への軌跡を追加するか否かによっ
てこのモードを変更するのである。すなわち、Ｐ５３か
らＰ５４への軌跡は、Ｐ５１からＰ５２への軌跡と平行
で向きが逆である。

【００４７】もう一つの方法としては、このモード設定
専用のアイコンを画面に設ける。

【００４８】また、図６に示すように、ウインドウＷの
うち、表示画面３２に表示されていない辺Ｈの移動は、
従来であれば、辺移動操作に先立ち、一旦その辺Ｈを表
示させる操作を行わなければならない。これにはまず、
辺ではなくウインドウＷ全体を、全体が表示される方向
すなわち図中左方向へ移動させるスクロール操作が必要
になる。しかしながら本実施の形態では、辺移動は、辺
の位置にジェスチャを入力する必要はなく、その辺の近
傍、正確にはすべての辺のうちでその辺がもっとも近く
なる位置にジェスチャを入力すればよいようになってい
る。このため、辺Ｈをあらかじめ表示させておくための
操作は必要なく、例えばその辺Ｈが隠れている表示境界
３２ａに沿って、ジェスチャＪ５の第１の線分すなわち
軌跡Ｐ５１−Ｐ５２を入力すればよい。したがって、作
業効率が向上する。

【００４９】また、一般に、ウインドウを入力可能なア
クティブ状態にするにはウインドウ自体を選択するので
あるが、作業の状態により、辺は選択・移動したいがウ
インドウ自体は選択したくない場合もある。ここでは、
上記ジェスチャを以下のように入力することにより、辺
は選択・移動するがウインドウ自体は選択しないように
設定することができる。すなわち、図７に示すように、
上記同様Ｐ５３まで入力し、そこからさらに、Ｐ５３か
ら直角に交差してＰ５１からＰ５２への軌跡と平行で向
きが同じである、Ｐ５３からＰ５５までの軌跡（第３の
線分）をジェスチャ入力する。このようにジェスチャを
入力したときは、辺は選択・移動するがウインドウ自体
は選択しないように設定されるようになっている。これ
によって、操作者が、ウインドウ自体は選択することな
く辺を選択・移動することができるので、作業効率が向
上する。

【００５０】このウインドウ自体の選択・非選択の設定
は、上記の方法とは異なる方法として、画面上に、ウイ
ンドウ選択・非選択の設定専用のアイコン（ウインドウ
選択切り替え手段）を設けてもよい。この場合は、この
アイコンで設定を完了した後に、ジェスチャを通常通り
例えば図３（ａ）のＰ５１ないしＰ５３の形の通りに入
力すればよい。この場合、アイコンの設定通りに、ウイ
ンドウの選択・非選択が動作する。すなわち、ウインド
ウを選択しないようにアイコンであらかじめ設定してお
けば、辺を選択してもウインドウは選択されない。

【００５１】図８に、本実施の形態のジェスチャによる
ウインドウ枠（辺）移動の処理過程のフローチャートを
示す。またこのときの表示例は前記図９の通りである。

【００５２】図９（ａ）に示すように、表示画面３２上
にウインドウ３３が表示されている。まず、辺の移動距
離を指定するモードは前述のように２種類あり、あらか
じめこのモード設定を行っておく。次に、いくつかある
辺のうちで移動したい辺がもっとも近くなるような場所
に操作者がジェスチャを入力する（Ｓ１）。このジェス
チャ入力の軌跡は、図９（ｂ）に示すように、枠や文章
等と同様、表示画面３２に表示される（Ｓ２）。ジェス
チャ入力が正常に終了し、このジェスチャを認識部とし
てのＣＰＵ１がジェスチャと認識する（Ｓ３）と、Ｓ４
に移る。ジェスチャと認識しなかった場合、すなわちジ
ェスチャ入力が正常に終了しなかった場合には、ペン入
力エラー処理に移行して警告音を発し（Ｓ８）、ジェス
チャの表示を消去して（Ｓ１５）終了する。

【００５３】Ｓ４にてジェスチャが辺移動のジェスチャ
と認識された場合は、Ｓ６へ移行する。認識されなかっ
た場合は他のジェスチャ処理に移行する（Ｓ５）。

【００５４】Ｓ６にて、ＣＰＵ１が、ジェスチャのＰ７
１からＰ７２までの軌跡に平行な辺のなかでもっとも近
い辺を認識する。図９（ｂ）中の辺Ｈ１がそれに当た
る。そして、軌跡Ｐ７２−Ｐ７３の向きにより、辺の移
動方向を認識する（Ｓ７）。

【００５５】次に、あらかじめ設定しておいた、辺の移
動距離のモードを確認する（Ｓ９）。Ｐ７２からＰ７３
までの軌跡の長さで行うモードであれば、Ｐ７２とＰ７
３との間の距離分だけ、上記の認識した辺を移動する
（Ｓ１０）。Ｓ９で、ジェスチャの最終点まで移動させ
るモードであれば、上記の認識した辺を、Ｐ７３まで移
動する（Ｓ１１）。

【００５６】次に、ジェスチャ中に、Ｐ７３から軌跡Ｐ
７１−Ｐ７２の進行方向と同じ向きに引かれた軌跡Ｐ７
３−Ｐ７４があるかどうかを調べる（Ｓ１２）。この軌
跡が認識された場合は、上記の辺選択と同時のウインド
ウ選択は行わない（Ｓ１３）。この軌跡が認識されない
場合は、上記の辺選択と同時のウインドウ選択を行う
（Ｓ１４）。ただし、前述したように、ウインドウは辺
選択と同時には選択しないことをアイコンで操作者が設
定してある場合は、軌跡Ｐ７３−Ｐ７４の有無にかかわ
らずウインドウはここでは選択されない。なお、図９
（ｂ）には軌跡Ｐ７３−Ｐ７４を仮想的に図示してあ
る。このあと、ジェスチャの表示を消去して（Ｓ１５）
終了する。この結果、図９（ｃ）に示すように、ウイン
ドウ３３に代わってウインドウ３４が表示される。

【００５７】次に、本実施の形態を、図１０に示す表示
座標を用いて説明する。ウインドウＷ１の４隅の表示座
標が左上から左回りにそれぞれ（ｘ１，ｙ１），（ｘ
１，ｙ２），（ｘ２，ｙ２），（ｘ２，ｙ１）であると
する。ウインドウ枠の上記座標（ｘ２，ｙ１）と座標
（ｘ２，ｙ２）とを結ぶ線分で表される辺をＨ１とし、
同じく上記座標（ｘ１，ｙ１）と座標（ｘ１，ｙ２）と
を結ぶ線分で表される辺をＨ２とする。

【００５８】この表示画面上に、ジェスチャＪ１を入力
する。ジェスチャＪ１を構成する各点の座標はそれぞ
れ、入力順に（ｘ３，ｙ３），（ｘ３，ｙ４），（ｘ
４，ｙ４）とする。ジェスチャＪ１の座標（ｘ３，ｙ
３）から座標（ｘ３，ｙ４）へ向かう第１の線分をＡと
する。同じく、座標（ｘ３，ｙ４）から座標（ｘ４，ｙ
４）へ向かう第２の線分をＢとする。線分Ｂの入力方向
は、辺Ｈ２から辺Ｈ１に向かう向きと同じである。な
お、ここでは、第２の線分Ｂの終端まで辺を移動するも
のとする。

【００５９】前述のように、ジェスチャ認識部としての
ＣＰＵ１は、線分Ａと辺Ｈ１とが互いに平行であること
を認識する。かつ、線分Ａと辺Ｈ１との距離のほうが線
分Ａと辺Ｈ２との距離よりも近いことを認識する。また
線分Ｂの向きから、このジェスチャＪ１が辺を右へ移動
させるものであることを認識する。その結果、ジェスチ
ャＪ１が、辺Ｈ１をウインドウＷ１の外側へ移動させる
ジェスチャであることを認識する。また、移動先の点の
ｘ座標がｘ４であることを認識する。

【００６０】このジェスチャにより、ＣＰＵ１は、辺Ｈ
１を右側すなわちウインドウＷ１の外側へ、辺Ｈ１のｘ
座標がｘ４になるまで移動する。この結果、同図（ｂ）
に示すように、ウインドウＷ１は、４隅の座標が左上か
ら左回りにそれぞれ（ｘ１，ｙ１），（ｘ１，ｙ２），
（ｘ４，ｙ２），（ｘ４，ｙ１）となって再表示される
（図中、Ｗ２で示す）。

【００６１】あるいは、同図（ａ）に示すように、ジェ
スチャＪ１ではなく、ジェスチャＪ２を入力する。ジェ
スチャＪ２を構成する各点の座標はそれぞれ、入力順に
（ｘ５，ｙ５），（ｘ５，ｙ６），（ｘ６，ｙ６）とす
る。ジェスチャＪ２の座標（ｘ５，ｙ５）から座標（ｘ
５，ｙ６）へ向かう第１の線分をＣとする。同じく、座
標（ｘ５，ｙ６）から座標（ｘ６，ｙ６）へ向かう第２
の線分をＤとする。線分Ｄの入力方向は、辺Ｈ１から辺
Ｈ２に向かう向きと同じである。なお、上記同様、第２
の線分Ｄの終端まで辺を移動するものとする。

【００６２】上記同様に、ＣＰＵ１が、線分Ｃと辺Ｈ１
とが互いに平行であることを認識する。かつ、線分Ｃと
辺Ｈ１との距離のほうが線分Ｃと辺Ｈ２との距離よりも
近いことを認識する。また線分Ｄの向きから、このジェ
スチャＪ２が辺を左へ移動させるものであることを認識
する。その結果、ジェスチャＪ２が、辺Ｈ１をウインド
ウＷ１の内側へ移動させるジェスチャであることを認識
する。また、移動先の点のｘ座標がｘ６であることを認
識する。

【００６３】このジェスチャにより、ＣＰＵ１は、辺Ｈ
１を左側すなわちウインドウＷ１の内側へ、辺Ｈ１のｘ
座標がｘ６になるまで移動する。この結果、同図（ｃ）
に示すように、ウインドウＷ１は、４隅の座標が左上か
ら左回りにそれぞれ（ｘ１，ｙ１），（ｘ１，ｙ２），
（ｘ６，ｙ２），（ｘ６，ｙ１）となって再表示される
（図中、Ｗ３で示す）。

【００６４】

【発明の効果】以上のように、本発明の情報処理装置
は、表示画面上でジェスチャを入力するジェスチャ入力
手段と、上記ジェスチャから、ジェスチャの入力開始位
置から始まる第１の線分を検出する第１検出手段と、第
１検出手段が検出した上記第１の線分と平行になるウイ
ンドウ辺のうちで第１の線分ともっとも近いウインドウ
辺を選択する辺選択手段と、上記ジェスチャから、上記
第１の線分に引き続く第２の線分の進行方向と第１およ
び第２の線分同士の交差角度とを検出する第２検出手段
と、上記交差角度からウインドウ辺の移動動作を認識し
て、選択された上記ウインドウ辺を上記第２の線分の進
行方向へ移動する辺移動手段とを備えている構成であ
る。

【００６５】それゆえ、ポインティングデバイスを細か
く操作することなく、所望のウインドウ枠の一辺を選択
することができるという効果を奏する。

【００６６】また、操作者の視界をペン等のポインティ
ングデバイス本体で妨げる不具合を減少させることがで
きるという効果を奏する。

【００６７】また、ジェスチャの向きを変えるという簡
単な操作上の違いだけで、ウインドウの４辺のうちの任
意の辺を選択することができるという効果を奏する。

【００６８】また、画面に表示されていない辺の選択を
簡単な操作で行うことができるという効果を奏する。

【００６９】また、上記の構成による効果に加えて、ポ
インティングデバイスを細かく操作することなく、所望
のウインドウ枠の一辺を選択して移動させることができ
るという効果を奏する。

【００７０】また、辺移動を迅速に行うことができると
いう効果を奏する。

【００７１】また、ジェスチャの向きを１８０°変える
という簡単な操作上の違いだけで、辺の移動方向を、垂
直の辺は左右方向に、水平の辺は上下方向に設定でき、
操作が容易であるという効果を奏する。

【００７２】本発明の情報処理装置は、上記の構成に加
えて、上記第２検出手段が第２の線分の長さを検出し、
上記辺移動手段が上記ウインドウ辺を上記第２の線分の
進行方向へ第２の線分の長さの分だけ移動する構成であ
る。

【００７３】それゆえ、上記の構成による効果に加え
て、簡単なジェスチャ入力操作で所望のウインドウ枠の
一辺を選択して希望する距離だけ移動させることができ
るという効果を奏する。

【００７４】本発明の情報処理装置は、上記の構成に加
えて、上記第２検出手段が第２の線分の終端位置を検出
し、上記辺移動手段が上記ウインドウ辺を上記第２の線
分の進行方向へ第２の線分の上記終端位置まで移動する
構成である。

【００７５】それゆえ、上記の構成による効果に加え
て、簡単なジェスチャ入力操作で所望のウインドウ枠の
一辺を選択して希望する位置にまで移動させることがで
きるという効果を奏する。

【００７６】本発明の情報処理装置は、上記の構成に加
えて、上記ジェスチャから、第３の線分の有無を検出す
る第３検出手段と、第３の線分の有無に応じて、ウイン
ドウ辺が選択されたときにウインドウも同時に選択する
か否かを切り替えるウインドウ選択切り替え手段を備え
ている構成である。

【００７７】それゆえ、上記の構成による効果に加え、
自動的に選択される意図外のウインドウから所望のウイ
ンドウに選択しなおす手間を省くことができ、作業効率
を高めることができる。

【図面の簡単な説明】

【図１】本発明に係る情報処理装置の一構成例を示すブ
ロック図である。

【図２】上記情報処理装置の内部の機能上の関係を示す
ブロック図である。

【図３】表示画面の表示状態を示す説明図であり、同図
（ａ）はウインドウとジェスチャとを示し、同図（ｂ）
ないし（ｄ）はジェスチャを示すものである。

【図４】辺移動の様子を示す説明図である。

【図５】辺の移動モードを設定するジェスチャの様子を
示す説明図である。

【図６】表示画面外にある辺をジェスチャで選択する様
子を示す説明図である。

【図７】ウインドウの選択モードを設定するジェスチャ
の様子を示す説明図である。

【図８】辺移動処理手順を示すフローチャートである。

【図９】ウインドウ辺を移動する様子を示す説明図であ
る。

【図１０】ウインドウ辺を移動する様子を示す説明図で
ある。

【図１１】従来のウインドウ辺を移動する様子を示す説
明図である。

【図１２】ウインドウをスクロールさせる様子を示す説
明図である。

【符号の説明】

１ＣＰＵ（第１検出手段、第２検出手段、第３検出
手段、辺選択手段、辺移動手段、ウインドウ選択切り替
え手段）２ＲＯＭ（第１検出手段、第２検出手段、第３検出
手段、辺選択手段、辺移動手段、ウインドウ選択切り替
え手段）３ＲＡＭ４ＫＥＹ５イメージスキャナ６通信装置７マウス入力部（ジェスチャ入力手段）８記憶装置９印刷部１０タブレット制御部（ジェスチャ入力手段）１１表示部１２マウス（ジェスチャ入力手段）１３ペン（ジェスチャ入力手段）１４タブレット（ジェスチャ入力手段）３１ペン（ジェスチャ入力手段）３２表示画面３３ウインドウ３４ウインドウＡ、Ｂ、Ｃ、Ｄ線分Ｈ、Ｈ’、Ｈ”、Ｈ１、Ｈ２、Ｈ３、Ｈ４辺Ｊ１、Ｊ２、Ｊ３、Ｊ４、Ｊ５、Ｊ６、Ｊ７ジェス
チャＬ１、Ｌ２辺Ｐ５１、Ｐ５２、Ｐ５３、Ｐ５３’、Ｐ５４、Ｐ５５
位置Ｐ７１、Ｐ７２、Ｐ７３、Ｐ７４位置Ｒ１、Ｒ２辺Ｗ、Ｗｌ、Ｗｒ、Ｗ１、Ｗ２、Ｗ３ウインドウ

───────────────────────────────────────────────────── フロントページの続き (58)調査した分野(Int.Cl.⁷，ＤＢ名) G06F 3/00 G06F 3/033 - 3/037 G06F 3/14

Claims

(57)【特許請求の範囲】

【請求項１】表示画面中の枠内でデータを表示するウイ
ンドウを表示する表示部を備えた情報処理装置におい
て、表示画面上でジェスチャを入力するジェスチャ入力手段
と、上記ジェスチャから、ジェスチャの入力開始位置から始
まる第１の線分を検出する第１検出手段と、第１検出手段が検出した上記第１の線分と平行になるウ
インドウ辺のうちで第１の線分ともっとも近いウインド
ウ辺を選択する辺選択手段と、上記ジェスチャから、上記第１の線分に引き続く第２の
線分の進行方向と第１および第２の線分同士の交差角度
とを検出する第２検出手段と、上記交差角度からウインドウ辺の移動動作を認識して、
選択された上記ウインドウ辺を上記第２の線分の進行方
向へ移動する辺移動手段とを備えていることを特徴とす
る情報処理装置。
【請求項２】上記第２検出手段が第２の線分の長さを検
出し、上記辺移動手段が上記ウインドウ辺を上記第２の線分の
進行方向へ第２の線分の長さの分だけ移動することを特
徴とする請求項１記載の情報処理装置。
【請求項３】上記第２検出手段が第２の線分の終端位置
を検出し、上記辺移動手段が上記ウインドウ辺を上記第２の線分の
進行方向へ第２の線分の上記終端位置まで移動すること
を特徴とする請求項１記載の情報処理装置。
【請求項４】上記ジェスチャから、第３の線分の有無を
検出する第３検出手段と、第３の線分の有無に応じて、ウインドウ辺が選択された
ときにウインドウも同時に選択するか否かを切り替える
ウインドウ選択切り替え手段を備えていることを特徴と
する請求項１ないし３のいずれかに記載の情報処理装
置。