JPH11507455A - メニューの作成、制御、表示のための方法及び装置 - Google Patents

Abstract

(57)【要約】 一つのメニューディスプレイ部（７０）に角度マーキングメニュー（６２）と直線メニュー部（６４）を組み合わせたシステム。直線メニュー部（６４）ではポインティング装置を使用して位置を選択（７２）することにより、アイテム選択が行われる。角度マーキングメニュー部（７４）では、ポインティング装置によってストローク（８２、８４）のパターンを作成して、アイテム選択を判別する。このシステムでは、ストローク（８０、８２）が直線メニューのアイテム（６４）を完全に横切るとそのアイテムを無視する。

Description

【発明の詳細な説明】 メニューの作成、制御、表示のための方法及び装置 本発明の背景 技術の分野 本発明は、角度マーキングメニュー及び直線メニューを組み合わせたメニュー を作成、制御、表示するための方法及び装置に関するものである。特に、パター ン選択可能なメニューと位置選択可能なメニューを一つの画面で組み合わせるシ ステムに関するものである。 関連技術の説明 近年のユーザインタフェースにおいて、メニュー選択は、基本的な頻度の高い 操作のひとつである。一般的に、メニューからの選択するために要する時間は短 い(秒単位または 0.1 秒単位)。しかし、どのタイプのアプリケーションにおい ても、メニュー選択は頻度の高い操作である。そのため、メニューから選択を行 うための時間を短縮することは、比較的大きな仕事を完成するために要する大切 な時間を節約することにつながる。これは、「ホットキー」のようなメニュー選択 の高速度化技術及びマーキングメニューが一般的だということから明らかである 。 各高速度化技術には、各々に長所と短所がある。例えば、ホットキーは、多数 のメニューアイテムから選ぶことができる。例えば、キーボードのすべてのキー をホットキーとして使用することができる。しかし、ユーザにとって、メニュー アイテムとキーの関係を覚えておくことは非常に大変なことである。キーボード が別装備されているシステムで、ユーザが作業を行う場合、又はインタフェース を操作している間、ユーザがキーボードと他の装置の間を移動しなければならな い場合には、ホットキーは有効ではない。例えば、ユーザは、マウスからキーボ ードへ、またはキーボードからマウスへ、同じ手を移動させなければならない。 マーキングメニューとは、ポップアップメニューの手法の一つである。標準の メニュー（直線メニュー）において、メニューアイテムを直線状に（例えば、上 から下へ）表示するのに対して、マーキングメニューでは、カーソルを囲んだ一 つの円の中にメニューアイテムを表示する。この違いにより、直線メニューで行 うよりもマーキングメニューで行う方が、より早くアイテム選択することができ る。例えば、ユーザは、必要なメニューアイテムの方向に「フリック(動かす)」、 又はカーソルのストロークを生成することによって、マーキングメニューから選 択を行うことができる。このように、ユーザは必要なメニューアイテムを選択す るために、メニューが表示されるのを待つ必要がない。しかし、マーキングメニ ューではアイテム数が増えるにつれて、メニューをポップアップせずにすばやく メニューアイテムを選択することは難しくなる。これは、メニューアイテム同士 の角度差が小さくなり、ユーザがこれを調整することが難しくなるからである。 この問題を解決するために、一般的にマーキングメニューに含まれるアイテムの 数は、８つ以下に限られている。 ここで、同一画面でマーキングメニューと直線メニューを組み合わたものが必 要になる。例えば、これは、位置決め方法を使用した直線メニューのアイテム選 択を使用して、マーキング又はストロークパターンを利用するマーキングメニュ ーからすばやくアイテムの選択を行うことが可能であると共に、メニューのアイ テム数を８アイテム以上にすることができるようなメニューである。 本発明の概略 本発明の目的は、同一画面で角度マーキングメニューと直線メニューを組み合 わせることにある。 本発明の他の目的は、角度マーキングメニュー選択技術と位置選択技術を組み 合わせることにある。 本発明の更なる目的は、複数のアイテムの選択の高速化を行うメニューディス プレイを提供することにある。 本発明の更なる他の目的は、直線(又は位置)を基にしたメニュー選択方法とパ ターンを基にしたメニュー選択方法を区別するプロセスを提供することにある。 上記の目的は、カーソルマークでメニューアイテムをマークすることによって アイテム選択を行う角度マーキングメニューと、特定の位置で選択することによ ってアイテム選択を行う直線メニューを組み合わせるシステムによって達成する 。このシステムは、直線メニューが位置するディスプレイの部分と、角度マーキ ングメニューが位置するディスプレイの部分とを区別する。 次に明らかになる本発明の更なる他の目的及び効果は、以下の詳細な説明及び クレームによりその構成及び操作が明らかになる。以下の説明において、同一の もの又は類似の部分には同一の記号または番号を付して説明する。 図面の簡単な説明 図１は、本発明の一般的なハードウエア（の構成）を示す。 図２は、直線メニューまたは位置選択のメニューを示す。 図３は、角度マーキングメニューを示す。 図４は、角度マーキングメニューを使用するサブメニューの選択方法を示す。 図５は、画面を作成せずに角度のマークパターンを使用して行う選択方法を示 す。 図６は、本発明に従う角度マーキングメニューと直線メニューを組み合わせた メニューを示す。 図７は、本発明の選択操作について示す。 図８から図１１は、本発明の操作過程のフローチャートを示す。 図１２及び図１３は、アイコンメニュー及びツールパレットから拡大されたア イコンメニューを示す。 好適な実施例の説明 本発明は、図１に示されるように、一般的にハードウエア構成を有する。この 構成には、ディスプレイ２２でメニューを生成し、表示するコンピュータ２０が 含まれる。ユーザは、キーボード２４等のインタフェース装置及び、マウス等の ポインティング装置２６を使用して、コンピュータシステム２０を通してディス プレイ２２と相互作用する。コンピュータ２０は、動作検知装置及びボタン押下 検知回路等のポインティング装置２６と相互作用するために必要な従来のハード ウエア、及び以下に説明するプロセスを記憶するためのハードウエア及びフロッ ピーディスク等の適切な記憶媒体とを有する。コンピュータ２０には、パーソナ ル又はポータブルコンピュータから、ワークステーションタイプのコンピュータ になる一般的なコンピュータを有する中央処理装置型のコンピュータ、例えば、 ユーザが行う操作の中で、メニュー選択が重要な部分を占める、ＣＡＤ／ＣＡＭ 及び動画処理操作等の量産業務で使用されるコンピュータまで、どのタイプのコ ンピュータを使用してもよい。ディスプレイ２２は、例えば、ＣＲＴ画面や、液 晶画面など、メニューを表示できるものであればどのタイプのものでもよい。ポ インティング装置２６は、ペン、マウス、トラックボール、トラックポイント又 はジョイスティック等を含む、どのタイプのポインティング装置でもよく、また 、キーボード２４とは別装備でも一体型でもよい。例えば、接触感知式パネル( タッチセンシティブパネル)等のように、一つの装置にディスプレイ２２とポイ ンティング装置２６を組み合わせることもできる。 本発明において、角度マーキングメニューと直線メニューを一つの画面で組み 合わせ、この組み合わせたメニューにおいて、角度マーク部及び直線部を互いに 関連させ、同時に表示する。本発明では、この二つのタイプのメニューのパター ン選択技術及び位置選択技術を使用して、メニューを選択することができる。こ の組み合わせたメニューについて説明する前に、直線メニュー及び角度マーキン グメニューの選択及び画面配列を説明する。 図２に示すように、直線メニュー３０は、一般的に直線の配列でメニューアイ テムを配列する。図２において１４のメニューアイテム（１〜１４）が示される が、図示される配列は一次元配列である。もちろん、アイテム数は１４以下また は以上でもよく、アイテムは二次元以上の配列、又は仮の配列で並べることもで きる。直線メニューの主な特徴は、所望のアイテムを選択するために使用される 方法にある。典型的に、図示される矢印のようなポインター（又はカーソル）３ ２を、ポインティング装置２６を操作して選択するメニューアイテムで定義され た位置及び領域に移動させ、通常はポインティング装置２６と関連するが、キー ボード２４等の別のインタフェース装置内にあるボタンを押下する(又は開放す る)ことによってメニュー選択を行う。ボタンを押下した（または開放した）時 に、コンピュータ２０は、ポインター３２の位置を判別する。ポインターがある メニューアイテムで定義された領域内にある場合は、そのアイテムが選択される 。ポインターが、メニューアイテムで定義されたどの領域内にもない場合は、何 も選択されない。つまり、直線メニューでは、ポインター３２の位置を使用して 、選択されるアイテムを判別する。図２に示されるように、ポインター３２がメ ニューアイテム１上にある時に、ユーザが選択ボタンを押下する(開放する)と、 メ ニューアイテム１が選択される。直線メニューを使用すると、ユーザは、選択さ れるアイテムで定義されるディスプレイの領域内にポインター３２を置かなけれ ばならない。これは、ユーザにとって相当な時間がかかり、そして正確な位置決 めが必要となる。アイテムが最小化可能なアイコンである場合、正確な位置決め はより重大な問題である。 角度マーキングメニューには、パイ型メニューと角度マーキングメニューの二 種類がある。一般的に、上記した直線メニューの位置選択原理を使用してアイテ ム選択を行う場合に、パイ型メニューを使用する。アイテム選択の基本である、 カーソル又はポインターの移動方向による選択原理を使用してアイテム選択を行 う場合に、角度マーキングメニューを使用する。マーキングとは、以下のように 操作してメニュー選択を行う作業である。ユーザは、例えば、ペンで画面を押下 する、又はマウスのボタンを押下したまま、ポインティング装置２６の選択イン ディケータを活性化させ、しばらくの間（約１／３秒間）待つ。この時、図３に 示すような、角度マーキングメニュー４０が、ペン５２の先端に直接現れる(「ポ ップアップ」する)。そして、ユーザはペンを押下したまま、目指すアイテムの方 向にストローク４２を生成することによって、そのアイテムを高輝度化させる。 メニュー４０の中央部４４とポインターの現在位置の間に絶えず直線を書き直す ことによって、コンピュータはストローク４２を作る（つまり、ストローク４２ はメニューの中央部とポインターを結ぶ「ゴムバンド線」のような役割をする。 ）そのメニューアイテムのある一定角度内(例えば、図３に示すメニューアイテ ム１のある角度範囲４６内)にポインターが動くと、コンピュータ２０は特定の アイテムを高輝度化する。そのアイテムにサブメニューがない場合は、ペンを持 ち上げることによって、高輝度化されたアイテムを選択することができる。その アイテムにサブメニューがあり、ユーザがポインターを動かすのをやめると、ペ ン５２の下に新しいメニューの中央部４８が位置するように、サブメニューが表 示される(図４参照)。この時に、新しいメニューの中央部４８からペン５２で他 のストローク５０を描くことによって、ユーザは新しく表示されるサブメニュー を選択し続けることができる。ペン５２を持ち上げることによって、現在選択さ れている一連の高輝度化されたアイテムを選択することができる。図４の例に おいて、メインメニュー５４の“Ｇｒｏｃｅｒｉｅｓ(八百屋)”アイテムと、サ ブメニュー５６の“Ｆｒｕｉｔ＆Ｖｅｇ(果物と野菜)”アイテムを選択している 。この時、メニューは表示画面から取り除かれる。ユーザがペンを持ち上げる前 にサブメニューの中央部４８にペンを戻すことによって、いつでもサブメニュー の「選択なし」という表示をすることができる。又、ペンを持ち上げる前にペンを 移動して他のアイテムを高輝度化させることによって、選択を変更することがで きる。つまり、ユーザはその中央部４４をポイントすることによって前のメニュ ーに「バックアップ」することができる。 図５に示すように、マーク５８を引くことによって、メニューをポップアップ しないでより速く選択を行うもう一つの方法がある。ペンを下に押し、すばやく 移動することによって、マークを引くことができる。マーク５８の方向はメニュ ーから選択される特定のアイテムを示す。本発明において、後で詳細に説明する ように、マークを引き、メニューがポップアップしないようにした場合、システ ムは本発明にしたがう直線部が存在しないとしてそのマークを解釈する。後で詳 細に説明する角度マーキングメニューと直線メニューを組み合わせたメニューを 表示する場合、これを「メニュ」モードに対して、「マーキング」モードと呼ぶ。 このように角度マーキングメニューでは、アイテムを二つの異なる方法で選択 することができる。図４の方法を使用すると、角度マーキングメニューを次々表 示することができ、選択を行う。図５の方法では、同じ選択を行うためにメニュ ー表示をしないで、マーキングを使用して選択を行う。最初の方法は、ユーザが メニューをよく知らない場合に適している。二番目の方法は、ユーザがメニュー をよく知っていて、メニュー表示を待ちたくない場合に適している。 角度マーキングメニューで、ホットキーのいくつかの問題点を解決することが できる。ユーザはキーとメニューアイテムの関係を覚える必要がない。ユーザは メニューアイテムの空間的なレイアウトを覚えればよいだけである。一般的に、 ユーザは、メニューアイテムの空間的なレイアウト、特によく使うコマンドの位 置については、簡単に覚えることができる。角度マーキングメニューでは更に操 作のためにキーボードを使う必要がない。しかし、角度を正確に描く人間の能力 には限度があるので、角度マーキングメニューのアイテム数は、一般的に８つ に制限されている。 多くの場合、近年のユーザインターフェースは、８以上のアイテムを有するメ ニューを使用している。例えば、ＡＬＩＡＳ Ｖ６パッケージのポップアップメ ニューのアイテム数は、８〜１５であり、ポップアップメニュー毎に、平均１２ ．７５アイテム有する。メニューの階層を作ることによって、角度マーキングメ ニューで数多くのアイテムを使用することができる。この場合、高速なメニュー 選択を行うには、簡単なストロークよりもむしろ区切りのあるジグザク線が必要 になる。例えば、６４のアイテムメニューは、各アイテムがもう８個のアイテム のサブメニューを導く８つのアイテムメニューで作ることができる。このように 、ユーザインタフェースの設計者が直線メニューを使用するアプリケーションを 角度マーキングメニューを使用するアプリケーションに変換したい場合、設計者 は８以上のアイテムを有するメニューはすべて階層メニューに変換しなければな らない。この変換プロセスを行うには、もうひと作業必要になり、直線メニュー アイテムを階層的なカテゴリに自然に分解することはできないかもしれない。 図６に示すように、本発明において、角度マーキングメニューと直線メニュー を一のメニューに組み合わせる。例えば、直線メニューを角度マーキングメニュ ーに変換すると、メニューアイテムを複数のカテゴリに分解する必要はなくなる 。本発明では、頻繁に選択される一般的な直線メニューの最初の８アイテムまで を直接角度マーキングメニュー部６２にマップする。他の（「オーバフロー」）ア イテムは、角度マーキングメニュー部６２が表示されると同時に表示される直線 メニュー部６４にマップされる。図では、直線メニュー部６４は角度マーキング メニュー部６２の下に示されるが、同じ画面で同時にメニューを表示すれば、直 線メニュー部の位置は必要に応じて変更することができる。 図６に示すように、本発明には次の長所がある。一つは、前述したように、直 線メニューからこのフォーマットへの変換が簡単だということである。階層的な カテゴリへ分ける必要はなく、各メニューに８以上のアイテムを使用することが できる。二番目に、最初の８つのアイテムで高速な選択を行うことができ、従来 の直線メニューより時間の節約ができる。三番目に、メニュー６０にある複数の アイテムを上下ではなく左右に並べるので、メニュー６０の高さを低くすること ができる。つまり、このタイプのメニュー６０は、従来の直線メニューとほぼ同 じ画面空間をとる。このため、この新しいメニュー６０は従来の直線メニューと 同じ位置で表示することができる(例えば、メニューをポップアップ又はポップ ダウンすることができる等)。 本発明には、従来の直線メニューとは異なるいくつかの性質がある。一つは、 ユーザはメニューの直線部６４から一つのアイテムを選択する前に、メニューの 表示をするために停止しなければならない。これは、これらのアイテムは、定義 によれば頻度の高くないコマンドであり、重大な短所ではない。表示画面の端の ぎりぎりの所でメニューがポップアップすると、フリックを使用してメニューの 角度マーキングメニュー部６２から複数のアイテムを選択する空間が十分に確保 できない。例えば、仮にユーザが表示画面の左上部角でマウスボタンを押下した ときにメニュー６０がポップアップしたとする。この部分では、カーソルを上に または左に「フリック」し、複数のメニューアイテムを選択する場所がない。表 示画面のちょうど端でメニューをポップアップするときにたまに起こる状態なの で、実際にはこれは重大な問題ではない。更にフリックするのに要する空間の大 きさを非常に小さくすることができる。つまり、メニュー６０の角度マーキング メニュー６２は、メニュー選択の頻度に応じてメニューをグループ化して表わす 。直線メニューでは、通常、機能を基にしてアイテムをグループ化する。このた め、新しいメニューへの変換時に、システムはメニューのアイテムを再配列しな ければならない。幸いにも、一度ユーザがそのメニューのレイアウトに慣れると 、メニューアイテムの特定のグループ化はほとんど値がない。そのため、長い目 で見ると、これは重大な問題ではない。 このような（直線メニューと角度マーキングメニュー）を組み合わせたメニュ ーを作るには、図７に示すように、表示されるメニュー７０を異なる領域に分け る必要がある。個々のメニューアイテムの領域ごとに定義される直線領域で、「 表示ボタン」または選択領域７２を定義する。表示ボタン７２及び７３以外のす べての画面表示を指す角度マーキング領域において、選択領域を角度範囲７４で 定義する。操作中、ストローク７６等のストローク又はマークが直線選択領域７ ２またはラベル７３内に最終地点７８を有する場合(及びペンがその地点で 持ち上がった場合)、その最終地点７８のアイテムが選択される(この例では、ア イテム５)。ストローク８０が角度マーキングメニュー部の領域内にある場合、 対応する範囲内またはそのＶ字型の範囲内にあるアイテム、図に示す例でいうと アイテム４、が選択される。一つ以上の直線領域を横切った後に、ストロークが 角度マーキング領域７４で終わる場合、対応するＶ字型の範囲内又は角度マーキ ング領域にあるアイテム、図に示す例でいうとアイテム３、が選択される。つま り、ストロークの最終地点が直線領域７２（またはラベル７３）内にない場合、 合致する又は対応する角度マーキング領域のアイテムを選択する。角度マーキン グメニューのラベルはそのラベルと対応する角度範囲外に出すことはできるが、 メニューアイテムへのポインティングはその角度範囲の選択に優先する。例えば 、図６に示すメニューアイテム２の一部（アイテム２のラベル領域）は、各アイ テムの角度範囲がどのように定義されるかによって、位置づけすることができる 。しかし、メニューアイテム２のラベルに直接ポインティングすると、ポインタ ーがメニューアイテム３の角度範囲にあっても、そのアイテムを輝度することが できる。図７に示す７２のような直線メニューアイテムには「角度範囲」の特徴 がなく、ユーザは選択されるアイテムのラベルを直接ポインティングしなければ ならない。 本発明は、ユーザがメニューを表示せずにマークを描くときに上記の説明とは 異なる役割をする。この場合、直線メニューアイテムが存在しないかのようにマ ークを解釈される。例えば、７６のようなマークが描かれた場合、これは直線メ ニューのアイテム５ではなく、角度マーキングメニューのアイテム３を選択した ことになる。この機能には、ユーザは間違って直線メニューのアイテムを選択す ることなく、クイックマークで（フリックで）角度マーキングメニューのアイテ ムを短時間で選択することができるという長所がある。 本発明において、同じ画面で角度マーキングメニューと直線メニューを組み合 わせることを目的としている。本発明が、従来の技術におけるメニュー選択の一 般的な規則にしたがっているものだとしたら、（メニューを表示することによっ て、またはマークを描くことによって行われる）すべてのメニュー選択がストロ ークの先のカーソル位置を基にしたものであることを意味する。これはユーザが 本発明のメニューからすばやくメニュー選択をしようとするときに、選択間違い を起こす原因となる。このように、本発明の効果または相違点は明らかである。 選択を判別するプロセス動作を、図８から図１１のフローチャートに示す。一 般的にこのようなプロセスは、割込みタイマー又は、例えば、マウスボタンを押 下する／開放する、又はマウスの移動の検知などのイベントを基に起こる割込み で割込みを行う。図８〜図１１の図面から明らかなように、待機状態１２０から 抜け出ることによって、このプロセスの動作は始まり、この状態１２０に戻る。 待機状態から抜け出ることはイベントによって発生する。これは、後で詳細に示 すように、イベントのタイプの判別するためにイベントをチェックするためのも のである。各操作は、一般的に、図８に示すペン置き、図９に示すペンドラッグ 、図１１に示すペン静止及び図１１に示すペン引き上げで行うことができる。 図８に示すペン置き操作では、まずマウスボタンの押下イベントが発生したか どうかを判別する第一のチェックを行う(１２２)。マウスボタンの押下イベント が発生していない場合、システムは待機状態１２０に戻る。マウスボタンの押下 イベントが発生している場合、モードを角度マーキングメニューモードに設定し (１２４)、メニュー選択を起動メニューまたは最上階層のメニューに設定する( １２６)。この時、システムがペン又はマウスがもう動かないか又は静止してい るかを検出するために、システムタイマーを設定する(１２８)。そして、現在の カーソル位置及び時刻を記録する(１３０)。 ペンドラッグ操作において、行われる最初のチェックは、図９に示すように、 ボタンが押下されている時にマウス移動のイベントが発生したかどうかを判別す ることである(１４０)。マウス移動のイベントが発生していない場合は、システ ムは再び待機状態１２０に戻る。イベントが発生している場合は、移動のしきい 値に対してカーソルまたはポインターの移動距離を調べる(１４２)。しきい値を 超えると、タイマーをリセットする(１４４)。どちらの場合でも、次にモードに 関する判定を行う(１４６)。現在のモードが、角度マーキングメニューモードで はない場合、カーソルまたはポインターの特定の位置にあるアイテムを高輝度化 し(１４８)、そのアイテムを現在選択されているものとして記録する(１５０)。 現在のモードが角度マーキングメニューモードである場合、現在の カーソル位置と時刻を記録する(１５２)。 ペン静止操作(図１０参照)において、タイマー満了イベントが発生しているか どうかを判別する第一のチェック（１６０）が行われ、タイマー満了イベントが 発生していない場合、システムは待機状態１２０に入る。この操作において、シ ステムは更にモードのチェック（１６２）を行う。角度マーキングメニューモー ドにおいて、現在のモードをメニューモードに設定し(１６４)、前述したように 、そのマークを適切なメニューに置き換える(１６６)。この時、タイマーを設定 し(１６８)、システムは待機状態１２０に入る。角度マーキングメニューモード ではない場合、システムはタイマーを設定し(１７０)、カーソルが親メニューの 中央部あるかどうかを判別する(１７２)。カーソルが親メニューの中央部にある 場合、子メニューをディスプレイから削除する(１７４)。カーソルが親メニュー の中央部にない場合、カーソル位置がラベルメニューのアイテム上にあるかどう かの判別を行う(１７６)。カーソル位置がラベルメニュー上にない場合、カーソ ルが角度マーキングメニューの端を超えているかどうかを判別する(１７８)。カ ーソルがその端を超えている場合、そのアイテムにサブメニューがあるかどうか を判別する(１８０)。そのアイテムにサブメニューが有る場合、サブメニューを 表示して(１８２)、そのサブメニューを現在のメニューにする(１８４)。 図１１に示すペン上げ操作において、アイテム選択の判別を行う。システムは マウスボタンの解放イベントが発生しているかどうかを判別し(１９０)、マウス ボタンが解放されている場合、タイマーを停止する(１９２)。現在のモードが角 度マーキングメニューモードではないことを判別すると(１９４)、メニューはす べて消去され(１９６)、記録されたメニュー選択を基に選択が行われる(１９８) 。現在のモードが、角度マーキングメニューモードである場合、現在のカーソル 位置と時刻を記録する(２００)。そして、前のカーソル位置から現在のカーソル 位置に線を引く(２０２)。この時、マークが消され(２０４)、保存された位置と 時刻を使って、そのマークからメニューの選択を判別し(２０６)、その選択を実 行する(１９８)。 本発明が典型的に使用されるウインドウズ型のオペレーティングシステムのあ る特性をインプリメンテーションにおいて考慮に入れることは、そのようなオペ レーティングシステムがアプリケーションとどのように関係しているかを考慮に 入れることと同様に重要なことである。ポインティング装置で移動するカーソル またはポインターが動きを止め、その速度がゼロになったときに、多くのオペレ ーティングシステムがイベントを発生しないことが一つの問題である。もう一つ の問題は、割込みが発生していないければ制御を止めないシステムがあるという ことである。そのため、上記に説明したさまざまな過程を正確に作動させるため に、ポインティング装置（カーソル）の位置を定期的にサンプリングするための 機能、例えばタイマーの割込みを組み入れることによって行われる機能がインプ リメンテーションに含まれなければならない。本発明におけるメニューのような メニューを「ポップアップ」する画面の一部を保存する機能のないオペレーティ ングシステムもある。そのようなシステムでは、インプリメンテーションは、ユ ーザによって特定の選択が行われる時または行われた後に、ポップアップメニュ ーで書き直された画面の一部を保存し復元するための機能を備える必要がある。 この問題により、本発明はシリコングラフィックス．インクから提供されるＸＷ ＩＮＤＯＷＳシステムに実現（インプリメンテーション）されることが望ましい 。 図８乃至図１１に示される方法の好ましいインプリメンテーションについての 詳細は、末尾に記載する擬似コードで説明する。ここで説明した方法は、Ｃ言語 などで実現することが望ましい。しかし、ポインティング装置でユーザのインタ フェース画面を生成及び処理できる言語であれば、どの言語を使ってもよい。 本発明は、テキストラベルを有するメニューを示す例について説明してきたが 、多くの場合、ディスプレイの好ましいモードは、アイコンを使うことである。 ３列の配列で並べられる直線メニューのアイテムと角度マーキングメニューのア イテムを有するアイコンメニューの例を図１２に示す。この例において、８つの アイコン２１０〜２２４は、ポインターが位置する中央部２２６の周囲に並べら れた角度マーキングメニュー部６２に図示される。直線または位置選択部６４に は６つのアイコン２２８〜２３８がある。ユーザはアイコンの意味を理解するこ とを要求されるが、前述したように、テキストラベルメニューと同じ方法でこの メニューを選択する。図１２に示すように直線メニューは二次元配列で並べるこ と ができ、直線メニューは、角度マーキングメニューが実際にポップアップする場 所によって必要となる角度マーキングメニューの周囲であればどの位置において もよい。一般的にはメニューの元のデザインによって決定される。 図１３は、ツールボックス２６６のアイコンセット２５０〜２６４、及び、選 択された一つのツールセット２５２の拡大されたツールパレット２６８を示す。 拡大された時にパレットの中央部にポインターが位置することで、パレット中央 部から続けてマーキング又は位置による選択が可能である。この図において、パ レットは小さく一般的に解読困難なアイコン表示画像から拡大される。アイコン がポップアップしていなくても、又は、フルサイズに拡大していなくても、従っ てそれらのアイコンが判別できなくても、ユーザがどのアイコンがどの選択を示 すかを覚えていれば、マーキング選択処理を使用して、この図の左側に示すアイ コンの縮小画像からアイコンを選択することができる。 本明細書で表示し説明したメニューアイテムは、テキストラベル及びアイコン を有するが、画像や記号や音声等の他の種類のメニューアイテムを代わりに使う こともできる。更に、ツールパケット、プルダウンメニュー及びオブジェクトホ ットスポット等のいかなるタイプのメニューで本発明を使用することができる。 ストローク、「インクテール」、又は「ゴムバンド線」を表示する必要もない。メニ ューの各部分のアイテム数は、変更することができ、アイテムをいかなる望まし い配列で並べてもよい。 本発明の多数の特徴または効果は、詳細な説明により明らかになる。そのため 、本発明の真の精神及び範囲内に存在するすべての特徴及び効果は、すべて特許 請求の範囲に含まれるものである。更に、本発明において多数の変形及び変更が 容易に実施できるため、図示及び説明された構成及び操作そのものに本発明を限 定するものではない。したがって、特許請求の範囲の均等範囲に属する変形、変 更はすべて本発明の範囲内のものである。 追記 オーバフローアイテムを有するマークメニューの翻訳コードのアルゴリズム システム構成を仮定： イベントを基にした入力システムがあると仮定する。アプリケーションには、３ 種類のイベントが報告される： １） マウスボタンの押下。 ２） マウスボタン押下時に変化するマウスボタンの位置。 ３） マウスボタンの解放。 少なくとも１／１０秒の頻度で、タイマー割込みをスケジュールすることができ るシステムがあると仮定する。 １)、２)、３)のタイプのイベントが発生する時、手順ＭＭpendown、ＭＭpendrag、 ＭＭpenup が呼び出される。マウスの現在のＸ及びＹ軸の位置が各手順に渡され る。タイマー割込みが発生すると、ＭＭpenstill と呼ばれる手順が呼び出され る。 擬似コードの変換についての注意： サブルーチンが多数回使用される場合、擬似コード内でのサブルーチンの最初の 登場は、括弧内の手順名が続く英語表記からなる。次にそのサブルーチンを使用 する時はその名前を使用する。 一部の擬似コード行には高度な記述をするより複雑なサブルーチンがある場合も ある。これらの擬似コード行は、括弧内のルーチンの名前が続くかもしれない。 ルーチンの擬似コードの表記についての詳細は後で記載する。 変数についての注意： ＰＡＵＳＥＴＩＭＥ は、メニュー画面を獲得するまでユーザがマウスを静止し た状態にしておかなければならない時間の長さを示す。ＰＡＵＳＥＴＩＭＥ は 、実際は、約１／３秒である。ＪＩＴＴＥＲＯＴＥＲＡＮＣＥ は、このアルゴ リズムでマウスがもう静止していないと確認する前にピクセル単位でマウスを動 かすことができる範囲を示す。ＪＩＴＴＥＲＯＴＨＲＡＮＣＥは、実際は、約５ ピクセルである。 ［ ］内に説明用のコメントを記載する。 ＭＭpendown(x,y) 現在のモードをＭＡＲＫＩＮＧ(角度マーキングメニューモード)に設定する 。 現在のメニューを原点又は始動メニューに設定する。 ＰＡＵＳＥＴＩＭＥにタイマー割込みをスケジュールする(Ｓtarttimer)。 マークの開始位置のＸ及びＹ位置と、その位置づけをした時刻を記録す る。 ＭＭpendrag(x,y) （Ｉｆ）Ｘ及びＹの位置が前の位置から「所定量」移動する (Ｃursor Ｍoved?)。 タイマー割込みをスケジュールしない(Ｓtoptimer) Ｓtarttimer （Ｉｆ）現在のモードがＭＡＲＫＩＮＧ(角度マーキングメニューモード)の 場合、 Ｘ、Ｙの位置とこの位置づけが発生した時刻を保存する。 前のＸ、Ｙ位置から現在のＸ、Ｙ位置へ線分を引く。 （ｅｌｓｅ） Ｘ、Ｙ位置にあるメニューアイテムを輝度する(ＭenuＣhoice)。 このメニューアイテムを現在のメニューで選択されたものとして記録 する。 ＭＭpenstill （Ｉｆ）現在のモードがＭＡＲＫＩＮＧ（角度マーキングメニューモード） の場合、 Ｓtoptimer 現在のモードをＭＥＮＵＩＮＧ（メニューモード）に設定する。 マークをメニューに置き換える(ＲeplaceＭark)。 Ｓtarttimer （ｅｌｓｅ） Ｓtoptimer Ｓtarttimer （Ｉｆ）現在の位置が親メニューの中央部にある場合、 その中央部が指す親メニューに到達するまでサブメニュー を表示しない。 （ｅｌｓｅ）(ｉｆ)現在のＸ、Ｙの位置がメニューのラベルを超え ている場合又は、現在のメニュー領域の端を超えていて、現在選択 されたメニューアイテムにサブメニューがある場合、 現在選択されたメニューアイテムのサブメニューを表示する。 サブメニューを現在のメニューにする。 ＭＭpenup(x，y) Ｓtoptimer （Ｉｆ）現在のモードがＭＡＲＫＩＮＧ（角度マーキングメニューモード） である場合、 Ｘ、Ｙ位置を保存する。 前のＸ、Ｙ位置から現在のＸ、Ｙ位置へ線分を引く。 引かれたすべての線分を表示画面から取り除く。 保存されたＸ、Ｙ位置を使用して、マークに対応するメニューを選択 する。 （ｅｌｓｅ） 表示画面から表示されているメニューをすべて取り除く。 メニュー選択を実行する。 ＭenuＣhoice （Ｉｆ）カーソルを一つのメニューアイテムのラベル上に直接置く場合[メ ニューの角度部やオーバフロー部をチェックする]、 [この過程はこのアルゴリズムにおいて重要である。メニューが表示され ている時に選択を行うと、マークを引くことによって行われる選択とは 異なる。マークによる選択がどのように判別されるかについては、下記の コメント^***を参照する]。 （ｔｈｅｎ）そのメニューアイテムがこのメニューで選択されたものであ る。 （ｅｌｓｅ）(ｉｆ)カーソルが角度マーキングメニューの中央部にある場 合、 （ｔｈｅｎ）メニューの選択はないことを示す。 （ｅｌｓｅ）カーソルがあるＶ字型の範囲にある対応するメニューアイテ ムであることを示す。 ＳelectionＦromＭark （Ｉｆ）マークが非常に小さい場合(長さ＜中央の図形のサイズ)、 （ｔｈｅｎ）選択は行われない。 （Ｉｆ）メニューの構成が、一階層しかない場合、 （ｔｈｅｎ）マークの開始位置と終了位置を使用して、どのＶ字型の角度 範囲に終了地点があるかを判別する。そのＶ字型の範囲に対応するアイテ ムが選択されたアイテムである。 （ｅｌｓｅ）メニューの構成が、複数階層である場合、 メニュー選択からサブメニュー選択への移行の可能性に対応するマー ク折点と休止点を判別する(ＧetＡrticulationＰoints)。 この一連の位置からＶ字型の角度範囲のみを基にして、一連のメニュ ーアイテムの選択を判別する。[^***これは、このアルゴリズムの鍵と なる。オーバフローアイテムがこのメニューにないように、マークは 分析される。] ＧetＡrticulationＰoints マークが生成されたときに記録された位置と時刻のリストを使用して、ユ ーザが少なくとも１／２秒間静止した位置を見つける。 （Ｉｆ）静止した位置の数がメニュー構造の最大深さよりも多い場合、メ ニュー構成はマークを無効とみなし、どの接点も返さない。 （Ｉｆ）静止した位置の数がメニューの最大深さ＋１よりも少ない場合、 ２２．５度よりも大きいマークでの角度変化を見つける(２２．５ 度は４ ５度の１／２で、これは各Ｖ字ゾーンの角度差を示す。そのため、行方向 に少なくとも２２．５度変化すると、ユーザがサブメニューの異なるＶ字 型範囲から選択することを示す)。 この最初のメニューの最大深さ−１を接続点として使用する。 ＲeplaceＭark ＧetＡrticulationＰoints 各接点に対してＶ字型の角度範囲だけを基に一連のメニューアイテ ムの選択を判別する。 対応する接点を中心にこれらのメニューをそれぞれ表示する。 ＣursorＭoved? ＡＢＳ（前のＸの位置現在のＸの位置）＋ＡＢＳ（前 のｙの位置現在のｙの位置）＞ＪＩＴＴＥＲＴＯＬＥＲＡＮＣＥ の場合、ＴＲＵＥ(真)を返す。

───────────────────────────────────────────────────── フロントページの続き (81)指定国 ＥＰ(ＡＴ，ＢＥ，ＣＨ，ＤＥ， ＤＫ，ＥＳ，ＦＩ，ＦＲ，ＧＢ，ＧＲ，ＩＥ，ＩＴ，Ｌ Ｕ，ＭＣ，ＮＬ，ＰＴ，ＳＥ)，ＯＡ(ＢＦ，ＢＪ，ＣＦ ，ＣＧ，ＣＩ，ＣＭ，ＧＡ，ＧＮ，ＭＬ，ＭＲ，ＮＥ， ＳＮ，ＴＤ，ＴＧ)，ＡＰ(ＫＥ，ＬＳ，ＭＷ，ＳＤ，Ｓ Ｚ，ＵＧ)，ＵＡ(ＡＭ，ＡＺ，ＢＹ，ＫＧ，ＫＺ，ＭＤ ，ＲＵ，ＴＪ，ＴＭ)，ＡＬ，ＡＭ，ＡＴ，ＡＵ，ＡＺ ，ＢＢ，ＢＧ，ＢＲ，ＢＹ，ＣＡ，ＣＨ，ＣＮ，ＣＺ， ＤＥ，ＤＫ，ＥＥ，ＥＳ，ＦＩ，ＧＢ，ＧＥ，ＨＵ，Ｉ Ｓ，ＪＰ，ＫＥ，ＫＧ，ＫＰ，ＫＲ，ＫＺ，ＬＫ，ＬＲ ，ＬＳ，ＬＴ，ＬＵ，ＬＶ，ＭＤ，ＭＧ，ＭＫ，ＭＮ， ＭＷ，ＭＸ，ＮＯ，ＮＺ，ＰＬ，ＰＴ，ＲＯ，ＲＵ，Ｓ Ｄ，ＳＥ，ＳＧ，ＳＩ，ＳＫ，ＴＪ，ＴＭ，ＴＲ，ＴＴ ，ＵＡ，ＵＧ，ＵＺ，ＶＮ

Claims (1)

1. 【特許請求の範囲】 １．角度マーキングメニュー部及び直線メニュー部を有するメニューを表示する ディスプレイと、 ストロークを生成するか及び位置を指定するかの一方によって選択の種類を 示すポインティング装置及び、 該ディスプレイ及び該ポインティング装置に接続し、前記選択のタイプを判 別し、前記ストローク又は位置の一方からメニューアイテムの選択を判別するコ ンピュータを有するメニュー選択システム。 ２．請求項１において、 メニューには、少なくとも９つの選択可能なメニューアイテムが含まれるメ ニュー選択システム。 ３．請求項１において、 メニューには、位置をひとつだけ指定することによって選択されるメニュー アイテムが少なくとも一つ含まれるメニュー選択システム。 ４．角度マーキングメニュー部及び直線位置メニュー部を有するメニューを表示 し、 ポインティング装置によるストロークの最終地点が、直線位置選択領域内に あって、該直線ロケーション選択領域に対応する直線位置メニューのアイテムの 選択を示しているかどうかを判別し、 前記ストロークの最終地点が直線ロケーション選択領域内になく、パターン 選択領域に対応する角度マーキングメニューのアイテムの選択を示している時に 、当該対応するパターン選択領域を判別する画面表示方法。 ５．請求項４において、 メニューには、少なくとも一つの選択可能な直線位置メニューのアイテムが 含まれる画面表示方法。 ６．メニューが表示されているかどうかを判別し、 メニューが表示されていない場合にストロークの方向に応じてメニュー選択 を判別し、 メニューが表示されている時に、メニューアイテムラベル内にストロークの 最終地点が有って、該メニューアイテムラベルに対応するメニューアイテムの選 択を示しているかどうかを判断し、 メニューが表示され、ストロークの最終地点がメニューアイテムラベル内に なく、パターン選択領域に対応する角度マーキングメニューアイテムの選択を示 している時に、当該対応するパターン選択領域を決定する画面表示方法。 ７．ディスプレイと、 最終地点を有するストロークを生成するポインティング装置及び、 該ディスプレイと該ポインティング装置に接続され、メニューが前記ディス プレイ上に表示されているか否か及び前記ストロークの最終地点がメニューラベ ル内にある場合の当該ストロークの最終地点に応じて、メニューアイテム選択を 判別するメニュー選択システム。 ８．ポインティング装置で作成されたストロークのパターンが選択されたメニュ ーのアイテムを表示する領域を有する、メニューパターン選択部及び、 前記パターン選択部と空間的に関連し、同時に表示され、ポインティグ装置 で指定された位置が選択されたメニューのアイテムを表示するメニューロケーシ ョン選択部を有するディスプレイ。 ９．請求項８において、 ロケーション選択領域を完全に横切るストロークのパターンは前記ストロー クのパターンで選択されたメニューアイテムのみを選択するディスプレイ。 １０．請求項８において、 該パターン選択部は、前記領域の放射線状の空間的配置を有し、該位置選択 部は、前記領域の直線状の空間的配置を有するディスプレイ。 １１．請求項８において、 該メニューパターン選択部は、８つのメニューアイテムを含み、該メニュー ロケーション選択部は、少なくとも一つのメニューアイテムを含むディスプレイ 。