JPH09231393A - 命令入力装置 - Google Patents

Abstract

(57)【要約】 （修正有） 【課題】 オブシェクトの種別に対応したコマンドを選
択できるジェスチャ―方式の命令入力装置において、そ
の形状から容易に処理内容が推測できるコマンドを割当
てる。 【解決手段】 表示画面上の任意の位置に様々な種別
（文字、図形、イメ―ジ、動画、音声等）のオブジェク
トを表示するオブジェクト表示手段１と、前記各種オブ
シェクトの種別に対応して所定の軌跡形状と命令情報と
の対応関係を記憶する命令対応関係記憶手段６と、ポイ
ンティングデバイスの操作により描かれたカ―ソルの軌
跡形状とその入力位置を検出する軌跡形状検出手段３
と、検出された軌跡形状の入力位置から処理の対象とな
る１つ又は複数のオブジェクトを選択する選択手段１０
と、選択されたジェクトに対応する命令情報を検索する
命令情報検索手段９と、選択されたオブジェクトに対し
て処理する命令情報処理手段１１とを具備する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、コンピュ―タシス
テム等において表示画面上から各種命令情報（コマン
ド）を入力する命令入力装置に関し、特にマウスやスタ
イラスペン等のポインティングデバイスの操作により描
いたカ―ソルの軌跡形状から各種コマンドを入力する命
令入力装置に関する。

【０００２】

【従来の技術】従来、表示画面を用いて対話的に各種の
処理を行うコンピュ―タシステムでは、表示画面上の表
示内容（例えば、文字、図形、イメ―ジ、動画、音声な
どのオブジェクト）やコマンド、あるいは表示画面上の
任意の位置を指示するために、マウスやスタイラスペン
のようなポインティングデバイスが用いられている。

【０００３】このような対話的に処理を行うコンピュ―
タシステムでは、表示画面上に各種コマンドの選択を行
うためのメニュ―やコマンドボタンが表示されるように
なっている。

【０００４】しかし、選択するためのコマンドの数が多
くなると、メニュ―やコマンドボタンの構成が複雑にな
り操作が複雑になるという問題点が生じたり、有限な表
示画面の大きさに占めるメニュ―やコマンドボタンの表
示領域が増大してアプリケ―ションの作業領域が減少
し、表示画面を有効に利用することができないという問
題点が生じていた。

【０００５】これらの問題点を解決するために、ポイン
ティングデバイスの軌跡形状と予め登録させておいた軌
跡形状を比較し、登録された軌跡形状と合致する軌跡が
入力された時、この軌跡形状に対応して定義されたコマ
ンドを選択する方式が提案されている。（以下この方式
をジェスチャ―と呼ぶ）。

【０００６】ジェスチャ―を用いれば、コマンドを選択
するためのメニュ―やコマンドボタを表示する必要がな
くなり、上記の問題点は解消されるが、コマンドを指定
するための軌跡形状を利用者は覚えておかなければなら
ず、コマンド数が増えると全てのコマンドに対応する軌
跡形状を覚えておくことが困難になるという新たな問題
点が生じていた。

【０００７】この問題点を解決するための先行技術とし
て、特開平３−１５０６２５号には、同じ軌跡形状に、
軌跡形状を入力した順序や方向に応じて別の命令を割当
てることで登録する軌跡形状の個数を減らす方式が開示
されている。

【０００８】例えば、複数のペ―ジからなる文書を編集
するアプリケ―ションにおいて、Ｙ軸方向に垂直な軌跡
形状に上から下へ入力した場合は、改行命令を、下か
ら、上へ入力した場合は、改頁を行うようにする。

【０００９】また、別の先行技術として、特開平６−３
２４７９８号には、同一軌跡形状に対して軌跡形状を入
力した領域に応じて別の命令を割当てることで特開平３
−１５０６２５号と同様の効果を得ようとする構成が開
示されている。

【００１０】例えば、文書編集アプリケ―ションにおい
て、文書を編集する文書領域と現在の動作モ―ド等を表
示するガイダンス領域に画面を分割し、Ｘ軸方向に並行
な形状が文書領域で入力された場合は該当する文字に下
線を付加し、ガイダンス領域で入力された場合は文字カ
―ソルを文頭に移動する。

【００１１】

【発明が解決しようとする課題】しかしながら、上述の
ジェスチャ―を用いた命令入力は処理の対象となる各種
オブジェクト（文字、図形、イメ―ジ、動画、音声等）
の種別について考慮されておらず、また、ジェスチャ―
の持つ本来の特徴（すなわち、軌跡形状から連想される
命令を選択することで、自然な操作性を実現するという
特徴）を活かしていない。

【００１２】そこで、本発明は同一の軌跡形状にオブシ
ェクトの種別に応じてコマンドを選択できるジェスチャ
―方式の命令入力装置を提供することが第１の目的であ
る。さらに、ジェスチャ―方式の特徴を活かし、その形
状から容易に処理内容が推測できるコマンドを割当てる
ことができる命令入力装置を提供することが第２の目的
である。

【００１３】

【課題を解決するための手段】本発明は、表示画面上か
ら各種命令を入力する命令入力装置において、前記表示
画面上に所定の軌跡形状を入力する軌跡形状入力手段
（図１の２）と、前記表示画面上の任意の位置に様々な
種別（例えば、文字、図形、イメ―ジ、動画、音声等）
のオブジェクトを表示するオブジェクト表示手段（図１
の１０）と、前記各種オブジェクトの種別に対応して所
定の軌跡形状と命令情報との対応関係を記憶する命令対
応関係記憶手段（図１の６）と、前記軌跡形状入力手段
により入力された軌跡形状とその入力位置を検出する軌
跡形状検出手段（図１の３）と、前記軌跡形状検出手段
で検出された軌跡形状の入力位置から前記オブジェクト
表示手段で表示された複数のオブジェクトから処理の対
象となる１つ又は複数のオブジェクトを選択するオブジ
ェクト選択手段（図１の１０）と、前記軌跡形状検出手
段で検出された軌跡形状に基づき前記命令対応関係記憶
手段から前記オブジェクト選択手段で選択された１つ又
は複数のオブジェクトの種別に対応する命令情報を検索
する命令情報検索手段（図１の９）と、前記命令情報検
索手段で検索された命令情報を前記オブジェクト選択手
段で選択された１つ又は複数のオブジェクトに対して処
理する命令情報処理手段（図１の１１）とを具備したこ
とを特徴とする。

【００１４】ここで、前記軌跡形状入力手段は、前記表
示画面上に表示されたカ―ソルの位置を移動制御するポ
インティングデバイス（図１の２）を具備して構成する
ことができる。

【００１５】また、前記命令対応関係記憶手段（図１の
６）は、対応するオブジェクトがない場合も命令情報を
記憶し、前記オブジェクト選択手段（図１の１０）は、
対象となるオブジェクトがないことを検出し、前記命令
情報検索手段（図１の９）は、前記オブジェクト選択手
段で対象となるオブジェクトがないことを検出した場合
は、前記命令対応関係記憶手段から対応するオブジェク
トがない場合の命令を検索し、前記命令情報処理手段
（図１の１１）は、前記命令情報検索手段で検索された
命令情報を処理するように構成することができる。

【００１６】また、前記命令対応関係記憶手段（図１の
６）は、登録する軌跡形状に応じて命令が無効であるこ
とをオブジェクト種別毎に指定し、前記命令情報処理手
段（図１の１１）は、命令が無効である時は命令情報を
処理しないように構成することができる。

【００１７】また、前記命令情報処理手段（図１の１
１）は、命令が無効であると認識した時に命令が無効で
あることを利用者に通知する命令無効通知手段（図１の
３）を更に具備して構成することができる。

【００１８】

【発明の実施の形態】本発明では、軌跡形状検出手段
が、ポインティングデバイス等の軌跡形状入力手段の操
作により移動指示されたカ―ソル等の軌跡形状とその座
標位置を検出する。オブジェクト選択手段は、その座標
位置にあるオブジェクトを選択する。

【００１９】命令情報検索手段は、この軌跡形状に基づ
いて記憶手段から選択されたオブジェクトの種別に対応
する命令情報を検索する。命令情報処理手段は、命令情
報検索手段で検索された命令情報を基に選択されたオブ
ジェクトに対して命令を処理する。

【００２０】これにより、表示画面にコマンドを選択す
るためのメニュ―やコマンドボタンを表示する必要がな
くなり、表示画面に有効に利用することができ、さら
に、同一軌跡形状の入力であっても、オブジェクトの種
別毎に命令情報を設定できるので、数少ない軌跡形状で
多くの命令情報が定義されることから、操作者にかかる
負担が軽減される。

【００２１】また、オブジェクト選択手段において、対
象オブジェクトが選択されなかった時には、記憶手段に
あらかじめ対象オブジェクトが選択されなかった場合に
検索される命令情報を登録することができる。また、そ
の命令情報に基づいて命令を処理する。

【００２２】これにより、同一軌跡形状に対象オブジェ
クトに無関係な命令を割当てることが可能となり、数少
ない軌跡形状にさらに多くの命令情報を定義されること
から、操作者にかかる負担がさらに軽減される。

【００２３】また、記憶手段において、軌跡形状にオブ
ジェクト種別毎に命令を定義する際、命令が無効である
ことを指定できる。命令情報処理手段は、命令情報にこ
の命令が無効であることが定義されている場合は、その
命令を処理しない。

【００２４】これにより、オブジェクトの種別によって
は、その軌跡形状から命令が連想し難い場合に無理に予
期せぬ命令を処理しなくてもよくなるので、操作者は軌
跡形状から連想する命令を予期することが可能となる。

【００２５】また、命令情報処理手段が、命令情報にこ
の命令が無効であることが定義されていると認識した場
合、その命令を処理しない。さらにこの場合、命令無効
通知手段が命令が無効であることを通知する。

【００２６】これにより、オブジェクトによって命令が
処理されない場合の原因が明白となり、操作者にかかる
負担が軽減される。

【００２７】以下、図面を参照して本発明の一実施例に
ついて説明する。

【００２８】図１は、本発明の一実施例である命令入力
装置の構成を示す機能ブロック図であり、表示部１、ポ
インティングデバイス２、検出部３、設定部４、記憶部
５、処理部７から構成される。

【００２９】表示部１は、表示画面ＤＰを有するビット
マップディスプレイ等で構成される。

【００３０】ポインティングデバイス２は、マウス、ス
タイラスペン等で構成される。ポインティングデバイス
２には、少なくとも１つのボタンを有する。ボタンは、
カ―ソルの軌跡形状を入力する際に押下する。ポインテ
ィングデバイス２からは、所定の単位時間毎に表示画面
ＤＰ上のカ―ソルＣの座標位置を指示する入力座標情報
やボタンの押下状態等のポイント情報が出力される。

【００３１】検出部３は、ポインティングデバイス２か
ら出力されるポイント情報のうち、ボタンの押下状態情
報を受信した状態での入力座標情報（以下、入力ポイン
トという）を検出する。尚、入力ポイントに従った表示
画面ＤＰ上を移動するカ―ソルＣの軌跡の形状をカ―ソ
ルの軌跡形状という。

【００３２】設定部４は、記憶部５内の記憶内容の設
定、変更処理を行う。

【００３３】記憶部５は、予め設定されている所定の複
数の軌跡形状情報５ａ、その各々の軌跡形状情報に対応
するコマンドとの対応関係が格納されているコマンド情
報５ｂ、命令の対象となるオブジェクトの情報が格納さ
れているオブジェクト情報５ｃが記憶される。

【００３４】処理部７は、表示処理部８とコマンド処理
部１１を有し、表示処理部８は、軌跡形状抽出部８ａ、
比較判定部８ｂ、コマンド選択部８ｃ、オブジェクト選
択部８ｄ、オブジェクト表示８ｅを有する。軌跡形状抽
出部８ａは、検出部３が検出した入力ポイント情報（図
１０）から軌跡形状を抽出する。比較判定部８ｂは、こ
の抽出された軌跡形状と予め設定されている軌跡形状情
報５ａとを比較して一致するかどうかを判定する。ま
た、オブジェクト選択部８ｄは、検出部３が検出した入
力ポイント情報（図１０）の座標位置から処理するオブ
ジェクトを選択する。コマンド選択部８ｃは、一致した
軌跡形状の軌跡形状情報５ａに対応するコマンド情報５
ｂと選択されたオブジェクトのオブジェクト情報５ｃと
から処理するコマンドを選択する。オブジェクト表示部
８ｅは、オブジェクト情報５ｃを基にオブシェクトを表
示部１の表示画面上ＤＰ上に表示する。また、オブジェ
クト表示部８ｃはコマンド選択部８ｄの情報を基にオブ
ジェクトが選択されたことを利用者に通知するために表
示画面ＤＰ上にオブジェクト選択状態を表示する。コマ
ンド処理部１１は、コマンド選択部８ｃで選択されたコ
マンドをオブジェクト選択部８ｄで選択されたオブジェ
クトに対して実施する。

【００３５】図２は、図１に示す命令入力装置を含むコ
ンピュ―タシステムのハ―ドウェア構成を示す図であ
り、このコンピュ―タシステムは、システム全体を制御
するＣＰＵ２１、ＣＰＵ２１の制御処理に係わるプログ
ラムを格納している領域や各種処理における作業領域を
有する主記憶装置２２、マウスやスタイラスペンのよう
なポインティングデバイスで構成される指示装置２３、
ビットマップディスプレイ等で構成される表示装置２
４、主記憶装置２２に記憶されるプログラムや各種処理
に利用されるデ―タ等が格納される磁気ディスクや光デ
ィスク等で構成される補助記憶装置２５、ＣＰＵ２１、
主記憶装置２２、指示装置２３、表示装置２４、補助記
憶装置２５を電気的に接続するバス２６から構成されて
いる。

【００３６】図１に示す命令入力装置と図２に示すコン
ピュ―タシステムとは、表示部１が表示装置２４に、ポ
インティングデバイス２が指示装置２３に、検出部３、
設定部４及び処理部７がＣＰＵ２１及び主記憶装置２２
に、記憶部５が補助記憶装置２５及び主記憶装置２２に
それぞれ対応している。

【００３７】ここで、補助記憶装置２５は、図３に示す
ようなデ―タ構成を取っている。デ―タ構成は大きく、
プログラム領域２５ａ、軌跡形状ファイル２５ｂ、オブ
ジェクト情報ファイル２５ｃ、コマンド情報ファイル２
５ｄから構成される。

【００３８】プログラム領域２５ａには、コンピュ―タ
システム上で動作するプログラムの支援を行うシステム
プログラム２５ａ１、コマンド選択を制御するコマンド
選択プログラム２５ａ２、及びシステムプログラム２５
ａ１とコマンド選択プログラム２５ａ２との支援を受け
て動作するアプリケ―ションプログラム２５ａ３が格納
されている。

【００３９】アプリケ―ションプログラム２５ａ３に
は、オブジェクト情報ファイル２５ｃ内のオブジェクト
を新規登録したり、オブジェクト属性の変更や削除等の
編集処理を行うアプリケ―ションプログラムの他に、軌
跡形状ファイル２５ｂやコマンド情報ファイル２５ｄに
予め所定の内容を設定、あるいは設定を変更するアプリ
ケ―ションプログラムも含まれる。

【００４０】軌跡形状ファイル２５ｂは、指示装置２３
であるポインティングデバイスにより入力された情報か
ら、意味のある軌跡形状を識別するために予め登録され
た図１の軌跡形状５ａに相当する登録形状が格納され
る。

【００４１】オブジェクト情報ファイル２５ｃは、アプ
リケ―ションプログラムで処理される図１のオブジェク
ト情報５ｃに相当するオブジェクト情報が格納される。

【００４２】コマンド情報ファイル２５ｄは、軌跡形状
ファイル２５ｂに格納された登録形状に対応してオブジ
ェクト種別毎に処理されるべき図１のコマンド情報５ｂ
に相当するコマンド情報が格納される。

【００４３】尚、軌跡形状ファイル２５ｂとコマンド情
報ファイル２５ｄは、通常アプリケ―ションプログラム
毎に用意されており、所定のアプリケ―ションが起動さ
れた時に対応するファイルから、記憶部５の軌跡形状情
報５ａとコマンド情報５ｂに呼び出されることになる。

【００４４】また、オブジェクト情報ファイルは、通常
アプリケ―ションを利用するものがその作業の単位で複
数個用意されるもので、所定のアプリケ―ションが起動
され、作業者の指定により任意のオブジェクト情報ファ
イルが、記憶部５のオブジェクト情報５ｃに呼び出され
ることになる。

【００４５】従って、図１に示す命令入力装置の構成で
は、所定のアプリケ―ションが起動された後、このアプ
リケ―ションプログラムに対応する軌跡形状ファイル２
５ｂ、及びコマンド情報ファイル２５ｄが記憶部５に格
納され、作業者の指定で特定されたオブジェクト情報フ
ァイル２５ｃが同じく記憶部５に格納された状態を示し
ている。

【００４６】次に、本実施例における記憶部５内の各情
報のデ―タ構造を説明する。尚、軌跡形状から任意の形
状を抽出する方式は様々あり同業他者には自明である
が、ここでは、図５に示すような方向パタ―ンを使用し
たものを例示する。

【００４７】まず、図４は軌跡形状情報５ａのデ―タ構
造を示したものである。最初にこのデ―タ構造に記憶さ
れた登録形状の個数をＭとして配置する。以下のデ―タ
がＭ個繰り返して配置される。軌跡形状識別子は、登録
されている軌跡形状を特定するユニ―クな任意の値であ
る。方向パタ―ンｍは以下に続く方向パタ―ンの数を示
すものであり、この値の数だけ以下に方向パタ―ンが続
く。

【００４８】ここで、図５を用いて方向パタ―ンについ
て説明する。この図は全方向３６０度を４５度単位に８
方向に分割したものである。２つの点を接続すればその
接続方向にベクトルが生成される。そのベクトルは三角
法を用いれば簡単に角度が求まる。その角度が図５に最
も近いものに設定する。（丁度中間にくる場合はどちら
かに、例えば方向パタ―ン番号が小さい方に設定する）
例えば、上から下へ入力した”＜”の形状は、方向パタ
―ン列６，８（方向パタ―ン数は２）として登録され
る。逆に下から上に入力した同一形状の”＜”は、方向
パタ―ン列４，２（方向パタ―ン数は２）として登録さ
れる。この時、この２つの登録形状に同じ軌跡形状識別
子を定義すれば同じ形状として認識され、逆に異なる軌
跡形状識別子を定義すれば別の形状として認識される。
つまり、入力順序に応じて同一形状に別のコマンドを定
義することも容易に実現することができる。

【００４９】図６は、オブジェクト情報５ｃのデ―タ構
造を示したものである。最初にこのデ―タ構造に記憶さ
れたオブジェクトの個数をＮとして配置する。以下のデ
―タがＮ個繰り返して配置される。オブジェクト識別番
号は各登録オブジェクトを特定するためのユニ−クな番
号である。オブジェクト種別識別子は、オブジェクトの
種別を定義するもので、例えば、文字／図形／イメ―ジ
／表／図表／動画／音声／アニメ―ション等のデ―タ構
造の異なるオブジェクト毎に設定される。オブジェクト
存在エリアは様々な種類のオブジェクトを画面上で選択
操作するための情報である。

【００５０】本実施例ではＸ軸、Ｙ軸にそれぞれ並行
で、かつオブジェクトを囲う最小の四角形と定義する。
具体的には、対角の２点で表すことができる。尚、音声
のように表示できないオブジェクトは、通常アイコンと
呼ばれる絵文字でその存在を表すことがある。

【００５１】このように目に見えないオブジェクト種別
の場合は、アイコンを囲う最小の四角形を存在エリアと
して登録する。オブジェクト属性は、オブジェクト種別
毎にデ―タ構造が異なる。例えば、文字の場合、フォン
トの大きさ／種類や色等がある。

【００５２】また、図形の場合、線種／線幅／色等があ
る。つまり、オブジェクト属性とは、このように同じオ
ブジェクト種別でも設定が任意に変更できるデ―タであ
る。コンテンツはオブジェクトそのもののデ―タで、や
はりオブジェクト種別に応じてそのデ―タ構造が異な
る。例えば、文字の場合、文字列を表す文字コ―ド列、
図形の場合は、各頂点の座標列となる。

【００５３】図７は、前述のオブジェクト存在エリアの
定義例である。

【００５４】図８は、コマンド情報５ｂのデ―タ構造を
示したものである。最初にこのデ―タ構造に記憶された
コマンドのテ―ブルの個数をＬとして配置する。次にコ
マンドを割当てるオブシェクトの種別の個数とその個数
分のオブジェクト種別識別子を配置する。例えば、文字
／図形／イメ―ジ／非オブジェクトの４つの種別のオブ
ジェクトを対象とする場合、オブジェクト種別個数は４
になり、それぞれのオブジェクト種別識別子がこの順序
で定義される。

【００５５】尚、この非オブジェクト種別とは、対象と
なるオブジェクトが指定されなかった時に選択されるコ
マンドの為に、特別に定義するものである。非オブジェ
クト種別の詳細な説明は後述にて行う。軌跡形状識別子
以下のデ―タが、テ―ブル個数Ｌ個分繰り返し配置され
る。軌跡形状識別子は、図４の軌跡形状情報５ａのデ―
タと同じものである。つまり、この軌跡形状識別子で軌
跡形状情報５ａとコマンド情報５ｂを対応させることが
できる。

【００５６】軌跡形状情報以下に、オブジェクト種別数
ｌ個分各種別に対応させてコマンドの内容を識別するコ
マンド識別子を配置する。尚、コマンド識別子にはコマ
ンドが無効であることを示す特殊な識別（以下、コマン
ド無効識別子と呼ぶ）を設定する。このコマンド無効識
別子の詳細な説明は後述にて行う。

【００５７】次に、本命令入力装置による命令入力制御
手順の動作を図９のフロ―チャ―トを参照して説明す
る。尚、ここでは複数のアプリケ―ションが並列して動
作可能なマルチウインドウシステム上での動作として説
明する。

【００５８】まず、アプリケ―ションが起動されると、
所定の初期化が行われる（ステップ１０１）。この初期
化では、アプリケ―ションの為のウィンドウが表示さ
れ、起動されたアプリケ―ションに対応する軌跡形状フ
ァイル２５ｂ、及びコマンド情報ファイル２５ｄを読み
出して、それぞれ軌跡形状情報５ａ、コマンド情報５ｂ
に設定する。

【００５９】また、利用者がこれから処理するオブジェ
クト情報ファイル２５ｃを呼び出して、オブジェクト情
報５ｃ設定し、その情報を基にオブジェクト表示部８ｃ
を介して表示画面ＤＰ上のこのアプリケ―ションの為に
表示されたウインドウ上にオブジェクトＯを表示する。

【００６０】初期化後、表示処理部８は、ポインティン
グデバイス２からのポインタ情報を受信し、この受信し
た情報に基づいてカ―ソルＣを移動させる（ステツプ１
０２）。

【００６１】このカ―ソルＣがアプリケ―ションウイン
ドウ内にあるかどうかを判断する（ステップ１０３）。
この判断の結果、カ―ソルＣがウインドウ範囲外にある
場合は、他のアプリケ―ション、又はシステムへの指示
と見なしステップ１０４に進みシステム処理を行う（ス
テップ１０４）。その後、ステップ１０２に戻って処理
を繰り返す。

【００６２】一方、カ―ソルＣがウインドウ範囲内にあ
る場合は、ポインティングデバイス２のボタンが押下さ
れているか否かを判断する（ステップ１０５）。この判
断の結果、ボタンは押下されていない場合、ステップ１
０２に戻って処理を繰り返す。 ステップ１０５で、ボ
タンは押下されている場合、検出部３において入力ポイ
ントの検出処理を行う（ステップ１０６）。

【００６３】ステップ１０６で検出された入力ポイント
デ―タから軌跡形状の抽出処理を行う（ステップ１０
７）。

【００６４】ステップ１０７の軌跡形状抽出処理で形状
が抽出されたか否かを判断する（ステップ１０８）。こ
の判断で抽出できなかったと判断した時は、ステップ１
０９に進み、入力された形状は登録された形状として認
識できなかったことを利用者に通知する形状無効通知処
理を行い（ステップ１０９）、ステップ１０２戻る。
尚、形状無効通知は、具体的には、警告音を鳴らした
り、表示画面ＤＰ上に一時的にウインドウを表示しその
中に「入力された形状は認識できませんでした」等の警
告メッセ―ジを挿入する。

【００６５】ステップ１０８で、形状が抽出できたと判
断した時は、処理の対象となるオブジェクトの選択処理
を行い（ステップ１１０）、ステップ１１１に進む。

【００６６】形状抽出処理（ステップ１０７）で抽出さ
れた形状とオブジェクト選択処理（ステップ１１０）で
選択されたオブジェクトを基にコマンドが選択されたか
否かを判断する（ステップ１１１）。この判断で、コマ
ンドは選択されなかったと判定した場合はステップ１０
９に進み形状無効通知処理を行い、ステップ１０２に戻
る。

【００６７】ステップ１１１の判断で、コマンドが選択
されたと判定したら、選択されたオブジェクトと選択さ
れたコマンドをアプリケ―ションに通知して命令を実行
する（ステップ１１２）。

【００６８】ステップ１１２の命令の実行の結果、アプ
リケ―ションが終了することになったかどうかを判断す
る（ステップ１１３）。この判断結果、アプリケ―ショ
ンの動作を継続すると判定した場合は、ステップ１０２
に戻って処理を繰り返す。

【００６９】一方、アプリケ―ションを終了すると判定
した場合は、アプリケ―ションの終了処理を行って全て
の処理を終了する（ステップ１１４）。アプリケ―ショ
ンの終了処理とは、例えば、アプリケ―ション動作のた
めに使用した主記憶装置１２内のデ―タを削除したり、
ウインドウを閉じたりする。

【００７０】次に、図９のステップ１０６で述べた入力
ポイント検出処理を図１０、及び図１１を使って詳細に
説明する。

【００７１】図１０は、入力ポイントのデ―タ構造であ
る。入力ポイント数ｐの個数分各ポイントのｘ，ｙ座標
値を保持する。

【００７２】図１１は、入力ポイントデ―タの収集手順
を示したものである。まず、入力ポイントを計数するカ
ウンタ―ｐを０に初期化する（ステップ２０１）。次
に、カウンタ―ｐを１つだけ可算する（ステップ２０
２）。この時に検出部で検出された座標を図１０の入力
ポイントデ―タに記憶し、その座標にカ―ソルＣを移動
させる（ステップ２０３）。最後にボタンが押下されて
いるかどうか判断する（ステップ２０４）。ここで、ボ
タンが押下されている判断した時は、ステップ２０２に
戻り処理を繰り返す。また、ボタンが押下されていない
と判断した時は、入力ポイント数ｐを記憶し処理を終了
する。

【００７３】これでポインティングデバイス２の動きを
図１０の入力ポインタ―デ―タとして検出することがで
きる。

【００７４】次に、図９のステップ１０７で述べた形状
抽出処理を図１２、及び図１３を使って詳細に説明す
る。

【００７５】図１２は、入力ポインタ―デ―タ（図１
０）から抽出した軌跡形状のデ―タ構造である。軌跡形
状の存在エリアＡＲＥＡは、軌跡形状をｐ点からなる図
形と見なせば、図７の図形オブジェクトと同様にその存
在エリアを定義することができる。

【００７６】軌跡形状の抽出方向パタ―ン数Ｐ以下のデ
―タ構造は、登録形状のデ―タ構造（図４）の方向パタ
―ン数ｍと全く同じである。つまり、Ｍ個の登録形状の
デ―タ（図４）から全く同じ値のものを検索すれば、登
録形状に定義されたコマンドが選択されたことになる。

【００７７】図１３は、形状抽出手順を示したものであ
る。まず、抽出方向パタ―ン数を計数するカウンタ―Ｐ
を０に初期化する（ステップ３０１）。

【００７８】次に、軌跡形状の存在エリアを算出しＡＲ
ＥＡとして図１２のデ―タ構造に記憶する（ステップ３
０２）。具体的には、入力ポイントデ―タ列からＸ座標
の最大値、最小値、Ｙ座標の最大値、最小値、を求めて
得られる２点（Ｘ最小値、Ｙ最小値）、（Ｘ最大値、Ｙ
最大値）により存在エリアを求めることができる。

【００７９】また、ｐ個の入力ポイント数から、となり
合う２点からｐ−１本のベクトルを求める（ステップ３
０３）。さらに、このベクトルの角度を求め、各ベクト
ルの方向パタ―ン（図５）を決定する。

【００８０】連続する方向パタ―ンを持つベクトル群を
抽出し（ステップ３０４）、それを１本のベクトルとみ
なし、長さを算出する（ステップ３０５）。実際には、
ベクトルの角度が極端に変わる場合、その前後のベクト
ルの向きが同一の場合は、手ぶれによる誤差とみなし角
度が極端に変わったベクトルデ―タを削除するような補
正処理を行う。

【００８１】このような処理で抽出したベクトルのベク
トル長が規定の長さより長いか短いかを判断する（ステ
ップ３０６）。規定により短い場合、手ぶれなどによる
誤差とみなし、ステップ３０９に飛ぶ。

【００８２】一方、十分な長さがあると判定した場合、
抽出方向パタ―ン数Ｐを１つ可算し（ステップ３０
７）、その抽出方向パタ―ンを記憶する（ステップ３０
８）。

【００８３】最後に、抽出処理を完了したかどうかを判
断し、処理を終了する（ステップ３０９）。この判定
は、ステップ３０３で作成したｐ−１本のベクトルをす
べて処理したかどうかで判定する。この判定でまだ処理
していないベクトルがある場合、ステップ３０４に戻っ
て処理を繰り返す。

【００８４】次に、図９のステップ１１０で述べた複数
オブジェクト選択処理を図１４、及び図１５を使用して
詳細に説明する。

【００８５】図１４は選択オブジェクトのデ―タを保持
するテ―ブルの構造である。選択オブジェクト数０個
分、以下のデ―タが繰り返し配置される。オブシェクト
の識別番号とオブジェクト種別識別子は、選択されたオ
ブジェクトのオブジェクト情報（図６）を基に設定され
る。

【００８６】また、コマンド識別子はポインティングデ
バイス２で入力された軌跡形状によって選択されたオブ
ジェクトとそのオブジェクト種別によって決められたコ
マンド情報（図８）に基づいて設定される。尚、この値
は、図９のステップ１１１にて実際に設定される。

【００８７】図１５は、複数のオブジェクトの選択手順
を示すものである。まず、選択オブジェクトの個数を係
数カウンタ―Ｏを０に初期化する（ステップ４０１）。

【００８８】また、登録されているオブジェクトを計数
するカウンタ―ｉを１に初期化する（ステップ４０
２）。

【００８９】まず、ｉ番目のオブジェクトの存在エリア
（図６）と軌跡形状の存在エリアＡＲＥＡ（図１２）の
重なりを判断する。この判断は簡単な算術演算にて容易
に行うことができる。重なっていないと判定した場合、
このオブシェクトは選択されていないと見なし、ステッ
プ４０６に飛ぶ。

【００９０】一方、重なっていると判定した場合、選択
オブジェクト個数Ｏに１を可算し（ステップ４０４）。
ｉ番目のオブジェクト情報（図６）からＯ番目のエリア
（図１４）にオブジェクト識別番号子とオブジェクト種
別識別子をコピ―する（ステップ４０５）。

【００９１】次に、オブジェクトを計数するカウンタ―
ｉに１を可算し（ステップ４０６）、全てのオブジェク
トをチャックしたかどうかを判断する（ステップ４０
７）。この判断は、オブジェクト個数Ｎ（図６）とカウ
ンタ―ｉを比較することで行える。もし、まだチェック
が終了していないと判定したら、ステップ４０８に戻っ
て処理を繰り返す。

【００９２】チェックが完了していると判定したら、オ
ブジェクトが選択されたかどうかを判断する（ステップ
４０８）。この判断は選択オブジェクト数Ｏが０かどう
かで判定できる。Ｏが０でなければ、オブジェクトは選
択されたとみなされ処理は終了される。

【００９３】一方、Ｏが０の場合、１つもオブジェクト
が選択されなかったとみなし、選択オブジェクト数Ｏを
１に設定し（ステップ４０９）、オブジェクト種別を非
オブジェクト（選択されたオブジェクトがないことを意
味する特殊なオブジェクト識別子）に設定する（ステッ
プ４１０）。尚、この場合、オブジェクト識別番号は使
用されない。

【００９４】また、オブジェクトを１つのみ選択する手
順を図１６を使って詳細に説明する。 まず、ステップ
５０１とステップ５０２は図１５のステップ４０１とス
テップ４０２と同じである。次に、存在エリアの重なり
具合を比較するための変数ａｒｅａを０に初期化する
（ステップ５０３）。

【００９５】図１５のステップ４０３と同様にエリアの
重なり判断を行い（ステップ５０４）、重ならない場合
はステップ５０９に飛ぶ。

【００９６】エリアが重なる場合は、重なり面積を求
め、以前の重なり面積ａｒｅａと大きさを比較する（ス
テップ５０５）。尚、この重なりは簡単な算術演算で容
易に求まる。この判断で、前の重なり面積より小さいと
判断した時は、このオブジェクトが選択されたのではな
いとみなし、ステップ５０９に飛ぶ。

【００９７】前の重なり面積より大きい場合は、選択オ
ブジェクト数Ｏを１に設定し（ステップ５０６）、図１
５のステップ４０４と同様に選択オブジェクト情報を記
憶する（ステップ５０７）。また、新たな重なり面積を
ａｒｅａに設定する（ステップ５０８）。

【００９８】ステップ５０９、５１０で、図１５のステ
ップ４０６、４０７と同様にチェック終了を判断し、ま
だ全てを処理していないと判定した時は、ステップ５０
４に戻って処理を繰り返す。

【００９９】全てを処理したと判定した場合は、ステッ
プ５１１、５１２、５１３で図１５のステップ４０８、
４０９、４１０と同様なオブジェクトが１つも選択され
なかった場合の処理を行う。

【０１００】次に、図９のステップ１１１で述べたコマ
ンド選択判定処理を図１７を使って詳細に説明する。

【０１０１】まず、登録形状の個数を係数するカウンタ
―ｉを１に初期化する（ステップ６０１）。

【０１０２】ｉ番目の登録形状（図４）と抽出形状（図
１２）を比較し（ステップ６０２）、形状が等しいかど
うか判断する（ステップ６０３）。この判断は２つの形
状デ―タが全く等しいかどうかで判定することができ
る。等しくないと判定した時は、カウンタ―ｉに１を可
算し（ステップ６０４）、全てのチェックを終えたかど
うかを判定し（ステップ６０５）、この判定はｉと登録
形状個数Ｍ（図４）を比較すれば容易に判定できる）、
終了していない場合はステップ６０２に戻って処理を繰
り返す。終了している場合は、一致する形状がなかった
とみなし、選択オブジェクト個数Ｏ（図１４）を０にし
て処理を終了する（ステップ６０６）。

【０１０３】一方、ステップ６０６の判定で形状が等し
いと判定された時は、ｉ番目の形状識別子（図４）を変
数ＩＤに記憶し（ステップ６０７）、コマンド情報（図
８）からＩＤと同じ軌跡形状識別子をもつコマンドテ―
ブルを抽出する（ステップ６０８）。

【０１０４】次に、選択オブジェクト数を計数するカウ
ンタ―ｊを１に初期化し（ステップ６０９）、ステップ
６０８で抽出したコマンドテ―ブルから、ｊ番目の選択
オブジェクトのオブジェクト識別子に対応するコマンド
識別子を抽出し、選択オブジェクトのコマンド識別子
（図１４）に記憶する（ステップ６１０）。

【０１０５】選択オブジェクト数を計数するカウンタ―
ｊに１を可算し（ステップ６１１）、すべての選択オブ
ジェクトにおいて処理が完了したかどうかを判断する
（ステップ６１２）。これは、カウンタ―ｊと選択オブ
ジェクト数Ｏを比較することで容易に行うことができ
る。尚、図９のステップ１１１のコマンドが選択された
かどうかの判断はこの選択オブジェクト数Ｏが０かどう
かで判定することができる。

【０１０６】すなわち、Ｏが０の時コマンドは選択され
なかったと判定する。また、Ｏが０でなかった場合はコ
マンドが選択されたと見なす。

【０１０７】最後に、図９のステップ１１２で述べたコ
マンド処理を図１８を使用して詳細に説明する。

【０１０８】まず、選択オブジェクトを計数するカウン
タ―ｉを１に初期化する（ステップ７０１）。

【０１０９】次に、ｉ番目の選択オブジェクトのコマン
ド識別子（図１４）を獲得し（ステップ７０２）、この
コマンド識別子が前述のコマンド無効識別子かどうかを
判定し（ステップ７０３）、もし無効である場合、無効
通知処理を行ってステップ７０７に飛ぶ（ステップ７０
４）。ここで無効通知は、具体的には、警告音を鳴らし
たり、一時的なウインドウを表示させ、その中に「入力
された形状は指定のオブジェクトに対して無効です」と
いうような警告メッセ―ジを表示する。

【０１１０】一方ステップ７０３でコマンドが有効に判
定された場合、ｉ番目の選択オブシェクト情報（図１
４）をアプリケ―ションに通知する（ステップ７０
５）。ここでアプリケ―ションは、この情報を基に対象
となるオブジェクトに対して処理を行い、その結果、ア
プリケ―ションの処理を継続するか終了するかを通知さ
せるように構成し、その通知を判断する（ステップ７０
６）。この判断でアプリケ―ションを終了すると判定し
た場合はただちに処理を終了する。尚、図９のステップ
１１３の判断もこれと同じように判定する。

【０１１１】ステップ７０６でアプリケ―ションを終了
しないと判定した時は、選択オブジェクトを計数するカ
ウンタ―ｉに１を可算し（ステップ７０７）。全てのオ
ブジェクトを処理したかどうかを判断する（ステップ７
０８）。まだ、終了していないと判定した時は、ステッ
プ７０２に戻って処理を繰り返す。また、終了したと判
定した時は、この処理を終了する。

【０１１２】次に、本発明の具体的な適用例を図１９と
図２０で説明する。

【０１１３】図１９は、コマンド情報（図８）の設定例
である。この例では、４つの軌跡形状に対して、それぞ
れ文字／図形／動画の３つのオブジェクト種別毎に命令
を割当てている。また、オブジェクトを選択しなかった
場合は、対象なし（非オブジェクト種別識別子）として
オブジェクトに依存しない命令を割当てている。さら
に、対象オブジェクト種別にとって、形状から命令を連
想し難いものについては、未定義（コマンド無効識別
子）を設定している。例えば、文字に対して、＞は右揃
え、＜は左揃え、Ｖはその部分にスペ―スをいれる命令
をそれぞれ設定しているが、Λについては命令を連想し
難いので未定義に設定されている。

【０１１４】図２０は、図１９のコマンド情報を使っ
て、同一軌跡形状の入力に対するオブジェクト種別処理
の一例を示すものである。この例では、複数頁のそれぞ
れの任意の場所に各種オブジェクトを配置できるアプリ
ケ―ションであるとする。ここで、破線の矩形が各オブ
ジェクトの存在エリアを表している。また、破線の形状
＞が入力形状を表す。文字に対して＞を指定した場合、
文字の右揃え処理が行われる。図形に対して同じ形状の
＞を指定した場合、右回転処理が行われる。さらに、同
じ形状の＞を対象となるオブジェクトがない部分で指定
された場合、頁変更処理が行われて次の頁が表示され
る。

【０１１５】

【発明の効果】以上説明したように、本発明では、ポイ
ンティングデバイス等の軌跡形状入力手段により移動指
示されたカ―ソル等の軌跡形状から、処理の対象となる
１つあるいは複数のオブジェクトを選択すると同時に処
理内容を選択することができるので、簡単な操作でアプ
リケ―ションに指示を行うことができる。

【０１１６】また、コマンドを選択するためのメニュ―
やコマンドボタンを表示する必要がなく、表示画面を有
効に利用することができ、さらに、同一軌跡形状の入力
であってもオブジェクト毎に命令情報を設定できるの
で、数少ない軌跡形状で多くの命令情報が定義されるこ
とから、操作者にかかる負担が軽減される。

【０１１７】また、同一軌跡形状に対象オブジェクトに
無関係な命令を割当てる構成をとることで、数少ない軌
跡形状にさらに多くの命令情報を定義されることから、
操作者にかかる負担がさらに軽減される。

【０１１８】また、オブジェクトの種別によっては、そ
の軌跡形状から命令が連想し難い場合に無理に予期せぬ
命令を定義しなくてもよく構成でき、この構成による
と、操作者は軌跡形状から連想する命令を予期すること
が容易となる。

【０１１９】また、オブジェクトによっては命令が処理
されない場合の原因を明白にすることができ、操作者に
かかる負担が軽減される。

【図面の簡単な説明】

【図１】 本発明の一実施例である命令入力装置の構成
を示す機能ブロック図、

【図２】 図１に示す命令入力装置を含むコンピュ―タ
システムのハ―ドウェア構成を示す図。

【図３】 補助記憶装置のデ―タ構成を示す図。

【図４】 軌跡形状情報のデ―タ構成を示す図。

【図５】 方向パタ―ンの定義例を示す図。

【図６】 オブジェクト情報のデ―タ構成を示す図。

【図７】 オブジェクトの存在エリアの定義例を示す
図。

【図８】 コマンド情報のデ―タ構成を示す図。

【図９】 本実施例の命令入力制御の動作手順を示す全
体フロ―チャ―ト。

【図１０】 検出部で検出される軌跡形状のデ―タ構成
を示す図。

【図１１】 検出部の軌跡形状検出手順を示すフロ―チ
ャ―ト。

【図１２】 軌跡形状抽出部で抽出される情報のデ―タ
構成を示す図。

【図１３】 軌跡形状抽出部の軌跡形状抽出手順を示す
フロ―チャ―ト。

【図１４】 オブジェクト選択部で選択されるオブジェ
クト情報のデ―タ構成を示す図。

【図１５】 オブジェクト選択部の複数のオブジェクト
の選択手順を示すフロ―チャ―ト。

【図１６】 オブジェクト選択部の１つのオブジェクト
の選択手順を示すフロ―チャ―ト。

【図１７】 比較判定部及びコマンド選択部の形状の比
較及びコマンドの選択手順を示すフロ―チャ―ト。

【図１８】 コマンド処理部のコマンド処理手順を示す
フロ―チャ―ト。

【図１９】 コマンド情報の具体的な定義例を示す図。

【図２０】 同一軌跡形状の入力に対するオブジェクト
種別毎処理の一例を示す図。

【符号の説明】

１…表示部、２…ポインティングデバイス、３…検出
部、４…設定部、５…記憶部、５ａ…軌跡形状情報、５
ｂ…コマンド情報、５ｃ…オブジェクト情報、６…命令
対応関係テ―ブル、７…処理部、８…表示処理部、８ａ
…軌跡形状抽出部、８ｂ…比較判定部、８ｃ…コマンド
選択部、８ｄ…オブジェクト選択部、８ｅ…オブジェク
ト表示部、９…命令情報選択部、１０…オブジェクト処
理部、１１…コマンド処理部、ＤＰ…表示画面、Ｃ…カ
―ソル、Ｏ…表示オブジェクト

Claims (5)

【特許請求の範囲】
1. 【請求項１】 表示画面上から各種命令を入力する命令
   入力装置において、 前記表示画面上に所定の軌跡形状を入力する軌跡形状入
   力手段と、 前記表示画面上の任意の位置に様々な種別のオブジェク
   トを表示するオブジェクト表示手段と、 前記各種オブジェクトの種別に対応して所定の軌跡形状
   と命令情報との対応関係を記憶する命令対応関係記憶手
   段と、 前記軌跡形状入力手段により入力された軌跡形状とその
   入力位置を検出する軌跡形状検出手段と、 前記軌跡形状検出手段で検出された軌跡形状の入力位置
   から前記オブジェクト表示手段で表示された複数のオブ
   ジェクトから処理の対象となる１つ又は複数のオブジェ
   クトを選択するオブジェクト選択手段と、 前記軌跡形状検出手段で検出された軌跡形状に基づき前
   記命令対応関係記憶手段から前記オブジェクト選択手段
   で選択された１つ又は複数のオブジェクトの種別に対応
   する命令情報を検索する命令情報検索手段と、 前記命令情報検索手段で検索された命令情報を前記オブ
   ジェクト選択手段で選択された１つ又は複数のオブジェ
   クトに対して処理する命令情報処理手段とを具備したこ
   とを特徴とする命令入力装置。
2. 【請求項２】 前記軌跡形状入力手段は、 前記表示画面上に表示されたカ―ソルの位置を移動制御
   するポインティングデバイスを具備することを特徴とす
   る請求項１記載の命令入力装置。
3. 【請求項３】 前記命令対応関係記憶手段は、 対応するオブジェクトがない場合も命令情報を記憶し、 前記オブジェクト選択手段は、 対象となるオブジェクトがないことを検出し、 前記命令情報検索手段は、 前記オブジェクト選択手段で対象となるオブジェクトが
   ないことを検出した場合は、前記命令対応関係記憶手段
   から対応するオブジェクトがない場合の命令を検索し、 前記命令情報処理手段は、 前記命令情報検索手段で検索された命令情報を処理する
   ことを特徴とする請求項１記載の命令入力装置。
4. 【請求項４】 前記命令対応関係記憶手段は、 登録する軌跡形状に応じて命令が無効であることをオブ
   ジェクト種別毎に指定し、 前記命令情報処理手段は、 命令が無効である時は命令情報を処理しないことを特徴
   とする請求項１または３記載の命令入力装置。
5. 【請求項５】 前記命令情報処理手段は、 命令が無効であると認識した時に命令が無効であること
   を利用者に通知する命令無効通知手段を更に具備するこ
   とを特徴とする請求項４記載の命令入力装置。