JPH113177A - マウスドラッグ装置 - Google Patents

Abstract

(57)【要約】 【課題】 ＧＵｌシステムおけるマウス操作において、
ドラッグ操作をマウスのボタンを押し続けなくてもで
き、また、マウスの移動操作についても、マウスを移動
させることなく、マウスポインタを移動させる。 【構成】 ジェスチャ監視部１０３にて、マウス押下操
作を示すジェスチャが検出されると、ジェスチャ監視部
１０３のマウスボタン押下フラグをＯＮにし、これ以降
のマウス入力については、マウスボタン押下フラグに従
って、ジェスチャ監視部１０３にてマウスボタン押下操
作を生成し、ＧＵＩシステム１０２に通知する。マウス
移動についても同様にマウス移動操作を示すジェスチャ
を検出し、マウス移動を示すフラグをＯＮにし、以降は
マウス操作が行われなくても、マウス移動を示すフラグ
に従って、ジェスチャ監視部１０３にてマウス移動操作
を生成しＧＵＩシステム１０２に通知する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、グラフィカルユー
ザーインターフェイスＧＵＩをもつＯＳの操作に関し、
特に、マウスを使用したドラッグ操作を簡易化するマウ
スドラッグ装置に関する。

【０００２】

【従来の技術】従来、このようなマウスドラッグ装置
は、グラフィカルユーザーインターフェイスをもつコン
ピュータの画面において、アイコンやウィンドウを操作
する場合に用いられている。

【０００３】この従来例として、特開平８−３６４６４
号公報に記載されたポインティングデータ制御装置があ
る。この装置は、ポインティング装置（通常はマウス）
上のボタンを一定時間押し続ける場合、または、ポイン
ティング装置上のボタンを押しながらポインティング装
置を一定距離移動した場合、またはポインティング装置
上のボタンを押す時に同時にキーボードの特定のキーを
押すことにより、ボタンが押された状態を作り出す装置
である。この公報に記載されているポインティングデー
タ制御装置は、ポインティングデータ制御装置上のボタ
ン押下を検知する検知手段と、条件が満たされた場合に
ボタン押下状態保持モードを設定するボタン押下状態保
持モード設定手段と、ボタン押下状態保持モードを解除
するボタン押下状態保持モード解除手段と、ボタン押下
状態保持モードの場合に、ボタン押下検知されているよ
うに処理する手段とから構成されている。

【０００４】

【発明が解決しようとする課題】上述した従来例では、
ボタン押下状態を生成するために、一定時間ボタンを押
し続けたり、ボタンを押したまま一定距離移動したり、
ポインティングデータ装置上のボタンとキーボードの特
定のボタンとを同時に押す操作が必要となる。従って、
ドラッグを行うためのポインティング装置上のボタン押
下状態を生成する操作に時間がかかったり簡単ではない
という問題を有する。

【０００５】また、従来例では、ボタン押下状態は生成
されるが、ポインティング装置の移動状態は生成されな
いため、操作員が必要に応じてポインティング装置を操
作して移動させる必要がある。従って、画面の解像度が
高いＧＵＩシステムにおいては、特にマウスなどのポイ
ンティング装置の移動量が大きくなるという問題を有す
る。

【０００６】そこで、本発明の目的は、上記問題を解消
すべく、ジェスチャパターンとマウス操作とを組み合わ
せ、ジェスチャの検出により、マウスボタンの押下状態
及び移動状態などのマウス操作を生成し、簡単にドラッ
グ操作が行えるマウスドラッグ装置を提供することにあ
る。

【０００７】

【課題を解決するための手段】上記目的を達成するため
に、本発明のマウスドラッグ装置は、グラフィカルユー
ザーインターフェイスを操作するマウスと、マウスの入
力データを座標データに変換するマウス制御部と、マウ
スの特定の動きをジェスチャパターンとして予め登録し
ているジェスチャ登録部と、マウス制御部からのマウス
の動きが、ジェスチャ監視部からのマウスのジェスチャ
と一致するか判断し、一致する場合にマウスの操作を生
成するジェスチャ監視部と、ジェスチャ監視部により生
成されるマウスの操作に応じてマウスカーソル，アプリ
ケーション，アイコンの表示を制御するＧＵＩシステム
と、ＧＵＩシステムにより作成されたマウスカーソル，
アプリケーション，アイコンを表示する画面を有するデ
ィスプレイとを備え、ジェスチャ登録部に登録されたマ
ウス操作を検出し、検出結果に応じてドラッグ，移動を
含むマウス操作を生成したことを特徴とする。

【０００８】また、ジェスチャ監視部が、マウス制御部
からのマウスの入力データと、ジェスチャ登録部に予め
登録されているマウスボタンが押された状態を示すジェ
スチャパターンとを比較し、動作が一致する場合に、マ
ウスボタンが押された状態を生成し、ＧＵＩシステムに
通知するのが好ましい。

【０００９】さらに、ジェスチャ監視部が、マウス制御
部からのマウスの入力データと、ジェスチャ登録部に予
め登録されているマウスボタンが離された状態を示すジ
ェスチャパターンとを比較し、動作が一致する場合に、
マウスボタンが離された状態を生成し、ＧＵＩシステム
に通知するのが好ましい。

【００１０】またさらに、ジェスチャ監視部が、マウス
制御部からのマウスの入力データと、ジェスチャ登録部
に予め登録されているマウスの移動を示すジェスチャパ
ターンとを比較し、動作が一致する場合に、マウスが移
動する状態を生成し、ＧＵＩシステムに通知するのが好
ましい。

【００１１】また、ジェスチャ監視部が、マウスが移動
する状態を生成処理中に、マウスボタンの押下を受け取
ると、マウスが移動する状態の生成処理を中断するのが
好ましい。

【００１２】本発明のマウスドラッグ装置では、特に、
ジェスチャとして登録されているマウス操作を検出し、
検出結果に応じてドラッグや移動などのマウス操作を生
成する。より具体的には、ジェスチャのパターンとそれ
に対応する動作の情報を有するジェスチャ登録部と、ジ
ェスチャを検出し処理を決定するジェスチャ監視部とを
備える。

【００１３】上記構成により、マウスにより入力された
データを、ジェスチャ監視部により監視する。ジェスチ
ャ監視部では、ジェスチャ登録部に登録されているジェ
スチャと一致する操作を検出すると、ジェスチャ登録部
より、検出されたジェスチャに対応するマウス操作を読
み出し実行する。これにより、従来人間が行う必要があ
るマウス操作の一部が削減されるため、マウス操作が簡
単になる。

【００１４】

【発明の実施の形態】次に、本発明の実施例について図
面を参照して詳細に説明する。

【００１５】図１は、本発明のマウスドラッグ装置の構
成を示すブロック図である。この装置は、グラフィカル
ユーザーインターフェイスＧＵＩを操作するマウス１０
６と、マウスカーソル，アイコン，ウィンドウを表示す
るディスプレイ１０１と、ディスプレイ１０１の表示を
制御するＧＵＩシステム１０２と、マウスを制御するマ
ウス制御部１０４と、ジェスチャパターン及び各ジェス
チャパターンに対応するマウス操作の生成処理を管理す
るジェスチャ登録部１０５と、入力されたマウスデータ
がジェスチャと一致するか監視し、一致した場合の処理
を決定するジェスチャ監視部１０３とを備える。

【００１６】図２は、本発明のマウスドラッグ装置のジ
ェスチャ登録部における各ジェスチャパターンと、その
ジェスチャパターンに対応するマウス操作の生成処理を
示すジェスチャ管理テーブル２０１とを示す。ジェスチ
ャパターンは、線の太い方から矢印へ向かって動くマウ
ス移動操作パターンを示している。このジェスチャパタ
ーンに対応するマウス操作の生成処理として、マウスボ
タンが押された状態，マウスが上に移動する処理，マウ
スが下に移動する処理，マウスが右に移動する処理，マ
ウスが左に移動する処理を生成する。ここで、上下左右
方向というのは、マウスの使用者を基準とし、例えば、
上方向は、通常にマウスを操作したとき、使用者から離
れる方向を意味する。以下の説明においても同様であ
る。

【００１７】次に、本発明の第１の実施例の動作につい
て、図３〜図６を主に参照して詳細に説明する。

【００１８】図３は、本発明のマウスドラッグ装置のジ
ェスチャ検出後の処理を示すブロック図である。本発明
では、ジェスチャを利用したマウス操作の生成処理が目
的であるため、ジェスチャ検出方法については既存の検
出方法を利用するものとして説明する。まず、図１のマ
ウス１０６から入力されるデータは、Ｘ方向の移動量を
示すＸ座標，Ｙ方向の移動量を示すＹ座標，マウスボタ
ンが押された状態（ＯＮ）及びマウスボタンが押されて
いない状態（ＯＦＦ）を示すマウスボタン押下状態の３
つである。マウス１０６のこの３つの入力データは、マ
ウス制御部１０４を経由してジェスチャ監視部１０３に
通知される。ジェスチャ監視部１０３では、この入力デ
ータを監視し、図２に示すジェスチャ登録部１０５に登
録されているジェスチャパターン２０１と一致するデー
タが入力されたかを、ジェスチャパターン比較部３０１
で検出し、検出したジェスチャに対応する各フラグ（３
０２，３０４，３０５，３０７，３０８）をＯＮにする
ことにより、各マウス操作生成部（３０３，３０６，３
０９）が動作しマウス操作を生成する。フラグとして
は、マウスボタン押下フラグ３０２，マウス移動（左）
フラグ３０４，マウス移動（右）フラグ３０５，マウス
移動（上）フラグ３０７，マウス移動（下）フラグ３０
８があり、マウスボタン押下フラグ３０２に対応してマ
ウスボタン押下生成部３０３が、マウス移動（左）
（右）フラグ３０４，３０５に対応してＸ座標データ生
成部３０６が、マウス移動（上）（下）フラグ３０７，
３０８に対応してＹ座標データ生成部３０９がある。

【００１９】図４〜図６は、本発明のマウスドラッグ装
置の第１の実施例の処理動作を示すフローチャートであ
る。

【００２０】まず、図４においてマウスの入力データ、
すなわち、Ｘ座標データ，Ｙ座標データ，マウスボタン
押下状態を受け取り（ステップ４０１）、マウスボタン
押下を示すジェスチャであるか判断し（ステップ４０
２）、マウスボタン押下を示すジェスチャを検出する
と、「マウスボタン押下フラグ」をＯＮにする（ステッ
プ４０３）。

【００２１】図５では、マウスデータの入力があり（ス
テップ５０１）、「マウスボタン押下フラグ」をチェッ
クし（ステップ５０２）、このフラグがＯＮの場合に
は、実際にマウスから入力されたマウスボタン押下状態
が、ＯＦＦであっても、ＯＮに変更し（ステップ５０
３）、ＧＵＩシステムに通知する（ステップ５０４）。
この処理により、一度「マウスボタン押下フラグ」がＯ
Ｎになると、以降はマウスボタンを押し続けなくても、
マウスボタンを押し続けている状態を生成することがで
きる。この状態を解除にするには、マウスボタンを離す
ジェスチャを入力する必要がある。

【００２２】図６では、マウスデータの入力後（ステッ
プ６０１）、マウスボタンを離すジェスチャであるか判
断し（ステップ６０２）、離すジェスチャを検出する
と、「マウスボタン押下フラグ」がＯＦＦに変更される
（ステップ６０３）。以降はマウスボタン押下の生成処
理は停止される。

【００２３】次に本発明の第２の実施例について図７〜
図９を参照して詳細に説明する。

【００２４】図７〜図９は本発明のマウスドラッグの第
２の実施例の処理動作を示すフローチャートである。本
実施例は、マウス移動（上下左右方向への移動）の生成
処理についての動作を示すが、特に、その一例として上
方向への移動の生成処理について説明する。

【００２５】まず、図７において、マウスデータの入力
後（ステップ７０１）、マウス移動（上）を示すジェス
チャであるか判断し（ステップ７０２）、マウス移動
（上）を示すジェスチャを検出すると、「マウス移動
（上）フラグ」をＯＮにする（ステップ７０３）。同時
に、最後に入力されたＸ座標及びＹ座標をそれぞれＸ
Ｏ，ＹＯとして保存する（ステップ７０４，７０５）。
次に、単位時間Ｔの経過毎に図８で示されるマウス移動
（上）処理を呼び出す（ステップ７０８）。

【００２６】図８では、「マウス移動（上）フラグ」を
チェックし（ステップ８０１）、このフラグがＯＮの場
合に、先に保存したＹＯの値から単位時間当たりの移動
量として定義されているＬの量を削減し、新たにＹＯと
して保存する（ステップ８０２）。また、本発明の策１
の実施例で使用されている「マウスボタン押下フラグ」
をチェックし（ステップ８０４）、フラグがＯＮの場合
には、マウスから入力されたマウスボタン押下状態がＯ
ＦＦであっても、ＯＮに変更する（ステップ８０４）。
最後に、Ｘ座標データとしてのＸＯと、Ｙ座標データと
してのＹＯと、マウスボタン押下状態とをＧＵＩシステ
ムに通知する（ステップ８０５）。これにより、操作員
のマウス操作なしに、マウスカーソルの上方への移動が
行える。また、「マウスボタン押下フラグ」がＯＮであ
れば、ドラッグ状態も同時に生成される。マウス移動
（上）を解除するには、マウスボタンを押下する必要が
ある。

【００２７】図９では、マウスデータの入力後（ステッ
プ９０１）、マウスボタン押下状態をチェックし（ステ
ップ９０２）、マウス移動フラグ（上）をチェックし
（ステップ９０３）、マウスボタン押下が入力され、か
つ「マウス移動（上）フラグ」がＯＮの場合に、「マウ
ス移動（上）フラグ」がＯＦＦにされ（ステップ９０
４）、同時に、図８のマウス移動（上）処理の呼び出し
が停止され（ステップ９０５）、マウス（上）移動状態
が解除となる。

【００２８】このようにして、単位時間を示すＴ及び単
位時間当たりの移動量を示すＬの値を調整することで、
マウスの移動速度を調整することができる。

【００２９】

【発明の効果】本発明のマウスドラッグ装置では、マウ
スドラッグ操作への移行を、ジェスチャを検出すること
により生成し、またマウスドラッグ操作からの復帰もジ
ェスチャ検出により実現するため、マウス操作のみでド
ラッグ操作への移行及び復帰ができる。従って、マウス
ドラッグ操作の生成中は、マウスボタンを押下しつづけ
なくてもよいためマウス操作が簡易化されるという効果
を奏する。

【００３０】また、マウス移動操作への移行を、ジェス
チャを検出することにより生成し、またマウス移動操作
からの復帰もマウスボタンの押下で実現できるため、マ
ウス操作のみでマウス移動操作への移行及び復帰ができ
る。従って、マウス移動操作の生成中はマウスを移動さ
せなくてもマウスポインタが移動するため、マウス操作
が簡易化されるという効果を奏する。

【図面の簡単な説明】

【図１】本発明のマウスドラッグ装置の構成を示すブロ
ック図である。

【図２】本発明のジェスチャ管理テーブルを示す図であ
る。

【図３】本発明のマウスドラッグ装置の処理の概略を示
すブロック図である。

【図４】本発明の第１の実施例の動作を示すフローチャ
ートである。

【図５】本発明の第１の実施例の動作を示すフローチャ
ートである。

【図６】本発明の第１の実施例の動作を示すフローチャ
ートである。

【図７】本発明の第２の実施例の動作を示すフローチャ
ートである。

【図８】本発明の第２の実施例の動作を示すフローチャ
ートである。

【図９】本発明の第２の実施例の動作を示すフローチャ
ートである。

【符号の説明】

１０１ ディスプレイ １０２ ＧＵＩシステム １０３ ジェスチャ監視部 １０４ マウス制御部 １０５ ジェスチャ登録部 １０６ マウス

Claims (5)

【特許請求の範囲】
1. 【請求項１】グラフィカルユーザーインターフェイスを
   操作するマウスと、 前記マウスの入力データを座標データに変換するマウス
   制御部と、 前記マウスの特定の動きをジェスチャパターンとして予
   め登録しているジェスチャ登録部と、 前記マウス制御部からのマウスの動きが、前記ジェスチ
   ャ監視部からのマウスのジェスチャと一致するか判断
   し、一致する場合に前記マウスの操作を生成するジェス
   チャ監視部と、 前記ジェスチャ監視部により生成される前記マウスの操
   作に応じてマウスカーソル，アプリケーション，アイコ
   ンの表示を制御するＧＵＩシステムと、 前記ＧＵＩシステムにより作成されたマウスカーソル，
   アプリケーション，アイコンを表示する画面を有するデ
   ィスプレイと、 を備え、前記ジェスチャ登録部に登録されたマウス操作
   を検出し、検出結果に応じてドラッグ，移動を含むマウ
   ス操作を生成したことを特徴とするマウスドラッグ装
   置。
2. 【請求項２】前記ジェスチャ監視部が、前記マウス制御
   部からの前記マウスの入力データと、前記ジェスチャ登
   録部に予め登録されているマウスボタンが押された状態
   を示すジェスチャパターンとを比較し、動作が一致する
   場合に、前記マウスボタンが押された状態を生成し、前
   記ＧＵＩシステムに通知することを特徴とする、請求項
   １に記載のマウスドラッグ装置。
3. 【請求項３】前記ジェスチャ監視部が、前記マウス制御
   部からの前記マウスの入力データと、前記ジェスチャ登
   録部に予め登録されているマウスボタンが離された状態
   を示すジェスチャパターンとを比較し、動作が一致する
   場合に、前記マウスボタンが離された状態を生成し、前
   記ＧＵＩシステムに通知することを特徴とする、請求項
   １に記載のマウスドラッグ装置。
4. 【請求項４】前記ジェスチャ監視部が、前記マウス制御
   部からの前記マウスの入力データと、前記ジェスチャ登
   録部に予め登録されているマウスの移動を示すジェスチ
   ャパターンとを比較し、動作が一致する場合に、前記マ
   ウスが移動する状態を生成し、前記ＧＵＩシステムに通
   知することを特徴とする、請求項１〜３のいずれかに記
   載のマウスドラッグ装置。
5. 【請求項５】前記ジェスチャ監視部が、前記マウスが移
   動する状態を生成処理中に、前記マウスボタンの押下を
   受け取ると、前記マウスが移動する状態の生成処理を中
   断することをを特徴とする、請求項４に記載のマウスド
   ラッグ装置。