JP5035150B2 - ユーザインターフェース装置 - Google Patents

Description

本発明は、ユーザインターフェース装置に関するものである。

従来、スティック部材等の操作部材をユーザが操作したときに、その操作に対応して、表示画面中のポインタを移動させ、所定の決定操作をユーザが行ったときに、当該ポインタの位置に該当するオブジェクト（例えばボタン画像）に割り当てられた処理を実行するユーザインターフェース装置が知られている。
特開２００８―６５４５１号公報

しかし、従来のユーザインターフェース装置においては、操作部材の可動範囲全体が、表示画面全体に割り当てられるようになっている。すなわち、操作部材を動かすことで、ポインタは、表示画面のどの位置にも移動することができるようになっている。

このようになっている場合、オブジェクト自体が表示画面全体に占める領域が小さい場合でも、ポインタの位置は、表示画面のどの位置にも移動することができてしまう。したがって、ユーザにとっては、ポインタが小さいオブジェクトの領域に入るように操作部材を操作するために、細かい位置の調整を行わなければならないので、操作が不便となってしまう。

本発明は上記点に鑑み、操作部材を操作して表示画面中のオブジェクトに位置を合わせて決定することで、当該オブジェクトに割り当てられた処理を実行する技術において、ユーザがオブジェクトに位置を合わせるために不必要に細かい位置調整を強いられないようにすることを目的とする。

上記目的を達成するための請求項１に記載の発明は、あらかじめ定められた可動範囲内
で、ユーザの操作を受けて位置を変える操作部材（４１）と、ユーザによって個々に選択
可能な複数のオブジェクトを、表示画面中に並べて表示するディスプレイ（２）とを備え
、当該操作部材（４１）の当該可動範囲内の位置（以下、操作位置という）のそれぞれを
、当該表示画面内の位置（以下、画面位置という）に割り当て、この割り当てと、可動範囲内の操作位置に基づいて、対応するオブジェクトに割り当てられた処理を実行するユーザインターフェース装置に関するものである。

このユーザインターフェース装置は、当該複数のオブジェクトについての複数の選択領域を、当該操作部材（４１）の当該可動範囲の全体に割り当てるようになっている。このようになっていることで、ユーザが操作部材（４１）を操作しても、操作位置に対応する位置が当該複数のオブジェクトの複数の選択領域を外れることがない。

したがって、表示画面に比べて当該複数のオブジェクトについての複数の選択領域が小さい範囲であったとしても、ユーザは、操作部材（４１）の可動範囲すべてを有効活用して、それら複数の選択領域を指定できるので、ユーザがオブジェクトに位置を合わせるために不必要に細かい位置調整を強いられることがない。

また、請求項１に更に記載のように、ユーザインターフェース装置は、操作位置と画面位置との割り当てによれば、現在の操作位置が、複数のオブジェクトのうちいずれか１つのオブジェクトの選択領域内の画面位置に対応するとき、当該選択領域の中央部の画面位置に対応する操作位置に現在の操作位置を移動させるよう、操作部材（４１）に付勢力を及ぼすようになっていてもよい。

このようになっていることで、各オブジェクトの選択領域内において、当該選択領域内の中央部に引き込まれるように、操作部材（４１）が付勢力を受ける。オブジェクトの選択領域の中心に引き込むような力を操作部材（４１）に及ぼす技術は、上記特許文献１にも記載されている。

しかし、このような技術を、請求項１に記載の発明の他の特徴と組み合わせることで、以下に示すような顕著な効果が発揮される。操作部材（４１）の可動範囲の全体を、複数のオブジェクトの複数の選択領域のみに割り当てられない場合、１つのオブジェクトの選択領域内に割り当てられる操作位置の範囲が狭くなってしまう。

操作部材（４１）の操作位置を検出するためのセンサには、操作位置を検出する分解能に限界があるので、上記の場合、このような狭い範囲内で滑らかに変化する付勢力を発生させることは困難である。なぜなら、ユーザインターフェース装置は、付勢力を算出するときには、現時点における操作部材（４１）の操作位置を検出し、その検出した位置に応じて付勢力を算出するので、１つのオブジェクトの選択領域内における検出位置の数が少ないほど、当該選択領域内において与える付勢力のバリエーションも少なくなってしまうからである。したがって、画面位置の変化に対して滑らかに変化する付勢力を発生させることができない場合、操作位置の変化と共に付勢力が階段状に急激に変化してしまうので、ユーザは、付勢力によって操作部材（４１）ががたついてしまうような感覚を覚えてしまう。

一方、操作部材（４１）の可動範囲の全体を、複数のオブジェクトの複数の選択領域のみに割り当てる場合、そうでない場合に比べ、１つのオブジェクトの選択領域内に割り当てられる操作位置の範囲が広くなるので、その分だけ付勢力の変化を滑らかにすることができ、ひいては、操作部材（４１）のがたつきを抑えることができる。

また、請求項１に更に記載のように、ディスプレイ（２）は、表示画面を互いに隣接する複数の部分表示画面（ｅ１０、ｅ２０、ｅ３０）に区分けし、区分けされた複数の部分表示画面（ｅ１０、ｅ２０、ｅ３０）のそれぞれの内部の表示画面よりも狭い領域において、個々に選択可能な複数のオブジェクトを並べて表示するようになっていてもよい。

その場合、ユーザインターフェース装置は、当該複数の部分表示画面のうちいずれか１つの部分表示画面に対して所定の決定操作がユーザによって行われたとき、前記操作部材（４１）の前記可動範囲内の操作位置のそれぞれを前記決定操作の対象となった前記部分表示画面内の画面位置に割り当てるようになっていてもよい。

このようになっていれば、多数のオブジェクトを１つの画面に表示しても、それらオブジェクトが複数の部分表示画面の区分けによってグループ分けされ、各グループ内でのみ、複数のオブジェクトの複数の選択領域が操作部材（４１）の可動範囲全体に割り当てられる。したがって、多数のオブジェクトを１つの画面に表示しても、そのためにオブジェクトを指定するための操作が細かくなってしまうことがない。

したがって、例えば、ユーザの利便性を損なうことなく、多数のオブジェクトを１つの画面に表示することで、オブジェクトの一覧性を高めることができる。

また、請求項２に記載の発明は、前記複数の対象選択領域の並び方向は横方向であり、前記複数の対象選択領域の各々は横方向に隣り合う対象選択領域と接触することで、前記複数の対象選択領域の総和となる領域は、１つの横長の総和の矩形領域となり、操作位置の横方向をＸ軸方向とし縦方向をＹ軸方向とし、操作位置（Ｘ、Ｙ）の取り得る範囲をＸ _Ｌ ≦Ｘ≦Ｘ _Ｒ 、Ｙ _Ｂ ≦Ｙ≦Ｙ _Ｔ であるとし、前記表示画面内の横方向をＰ軸方向とし縦方向をＱ軸方向とし、前記総和の矩形領域内に相当する画面位置（Ｐ、Ｑ）の範囲を、Ｐ _Ｌ１ ≦Ｐ≦Ｐ _Ｒ１ 、Ｑ _Ｂ１ ≦Ｑ≦Ｑ _Ｔ１ とした場合、前記割り当て手段（２２０、４０５）は、前記操作位置（Ｘ、Ｙ）から前記画面位置（Ｐ、Ｑ）への変換は、
（Ｐ−Ｐ _Ｌ１ ）／（Ｐ _Ｒ１ −Ｐ _Ｌ１ ）＝（Ｘ−Ｘ _Ｌ ）／（Ｘ _Ｒ −Ｘ _Ｌ ）
（Ｑ−Ｑ _Ｂ１ ）／（Ｑ _Ｔ１ −Ｑ _Ｂ１ ）＝（Ｙ−Ｙ _Ｂ ）／（Ｙ _Ｔ −Ｙ _Ｂ ）
という２つの一次式を用いて変換するようになっていることを特徴とする請求項１に記載のユーザインターフェース装置である。
また、請求項３に記載の発明は、前記複数の対象選択領域の並び方向は縦方向かつ横方向であり、前記複数の対象選択領域の各々は縦方向に隣り合う対象選択領域と接触していると共に横方向に隣り合う対象選択領域と接触することで、前記複数の対象選択領域の総和となる領域は、１つの総和の矩形領域となり、
操作位置の横方向をＸ軸方向とし縦方向をＹ軸方向とし、操作位置（Ｘ、Ｙ）の取り得る範囲をＸ _Ｌ ≦Ｘ≦Ｘ _Ｒ 、Ｙ _Ｂ ≦Ｙ≦Ｙ _Ｔ であるとし、前記表示画面内の横方向をＰ軸方向とし縦方向をＱ軸方向とし、前記総和の矩形領域内に相当する画面位置（Ｐ、Ｑ）の範囲を、Ｐ _Ｌ２ ≦Ｐ≦Ｐ _Ｒ２ 、Ｑ _Ｂ２ ≦Ｑ≦Ｑ _Ｔ２ とした場合、前記割り当て手段（２２０、４０５）は、前記操作位置（Ｘ、Ｙ）から前記画面位置（Ｐ、Ｑ）への変換は、
（Ｐ−Ｐ _Ｌ２ ）／（Ｐ _Ｒ２ −Ｐ _Ｌ２ ）＝（Ｘ−Ｘ _Ｌ ）／（Ｘ _Ｒ −Ｘ _Ｌ ）
（Ｑ−Ｑ _Ｂ２ ）／（Ｑ _Ｔ２ −Ｑ _Ｂ２ ）＝（Ｙ−Ｙ _Ｂ ）／（Ｙ _Ｔ −Ｙ _Ｂ ）
という２つの一次式を用いて変換するようになっていることを特徴とする請求項１に記載のユーザインターフェース装置である。
また、請求項４に記載の発明は、前記複数の対象選択領域の並び方向は縦方向であり、前記複数の対象選択領域の各々は縦方向に隣り合う対象選択領域と接触せず隙間によって隔てられており、当該複数の対象選択領域を、並びを維持したまま隙間を排して繋ぎ合わせた結果の総和となる領域は、１つの総和の矩形領域となり、
操作位置の横方向をＸ軸方向とし縦方向をＹ軸方向とし、操作位置（Ｘ、Ｙ）の取り得る範囲をＸ _Ｌ ≦Ｘ≦Ｘ _Ｒ 、Ｙ _Ｂ ≦Ｙ≦Ｙ _Ｔ であるとし、前記表示画面内の横方向をＰ軸方向とし縦方向をＱ軸方向とし、前記総和の矩形領域内に相当する画面位置（Ｐ、Ｑ）の範囲を、Ｐ _Ｌ３ ≦Ｐ≦Ｐ _Ｒ３ 、Ｑ _Ｂ３ ≦Ｑ≦Ｑ _Ｔ３ とした場合、前記割り当て手段（２２０、４０５）は、前記操作位置（Ｘ、Ｙ）から前記画面位置（Ｐ、Ｑ）への変換は、
（Ｐ−Ｐ _Ｌ３ ）／（Ｐ _Ｒ３ −Ｐ _Ｌ３ ）＝（Ｘ−Ｘ _Ｌ ）／（Ｘ _Ｒ −Ｘ _Ｌ ）
（Ｑ−Ｑ _Ｂ３ ）／（Ｑ _Ｔ３ −Ｑ _Ｂ３ ）＝（Ｙ−Ｙ _Ｂ ）／（Ｙ _Ｔ −Ｙ _Ｂ ）
という２つの一次式を用いて変換するようになっていることを特徴とする請求項１に記載のユーザインターフェース装置である。
なお、上記および特許請求の範囲における括弧内の符号（ただし、請求項２〜４における操作位置（Ｘ、Ｙ）の括弧、画面位置（Ｐ、Ｑ）の括弧、および、変換の一次式に用いる括弧は除く）は、特許請求の範囲に記載された用語と後述の実施形態に記載される当該用語を例示する具体物等との対応関係を示すものである。

以下、本発明の一実施形態について説明する。図１に、本実施形態に係る操作表示制御システム１（ユーザインターフェース装置の一例に相当する）の構成を示す。操作表示制御システム１は車両に搭載され、ディスプレイ２、車載装置３、ユーザの操作を受け付けるための遠隔デバイス部４、および、オーディオ装置５を有している。

ディスプレイ２は、表示画面中に画像を表示させることで、車内の乗員に当該画像を見せるための装置である。

オーディオ装置５は、車内の複数の位置に搭載された複数のスピーカを有し、表示制御部３からオーディオ装置５に出力された楽曲の音声信号をそれら複数のスピーカに出力させる装置である。なお、オーディオ装置５は、各スピーカが出力する音の大きさを、表示制御部３から受けた音量制御の信号に基づいて調節することができる。

車載装置３は、演算部３１および記憶部３２を有している。演算部３１は、車内ＬＡＮ等を介して車両内の各種センサ（ＧＰＳ受信機、車速センサ）およびアクチュエータ（車室内空調装置、オーディオ装置５等）と信号の授受を行い、それらセンサから受けた信号に基づいた処理を行い、その処理において必要に応じてアクチュエータまたはディスプレイ２を制御する。また演算部３１は、各種処理において、遠隔デバイス部４から受けたユーザ操作に関する情報に基づいて、アクチュエータまたはディスプレイ２を制御する。

例えば、演算部３１は、オーディオ装置５による音楽再生のための各種設定を行うためのオーディオ設定処理において、メニュー画像をディスプレイ２に表示させる。そして、このメニュー画像には、遠隔デバイス部４の操作によってユーザが選択および決定可能なオブジェクト（例えばボタン画像）を複数含める。そして演算部３１は、ユーザがこれらオブジェクトのうち１つを選択する操作を行い、さらに当該オブジェクトに対して所定の決定操作を行うと、当該オブジェクトに対応付けられた処理を実行する。

また演算部３１は、ディスプレイ２の表示画面中にポインタを重畳させる。ポインタとは、表示画面中の特定の位置を視覚的に強調するための画像（例えば、十字マーク）である。演算部３１は、遠隔デバイス部４から受けた画面位置の情報に合致するよう、表示画面中のポインタの位置を変化させる。画面位置とは、ディスプレイ２の表示画面上の位置をいう。本実施形態においては、ディスプレイ２の表示画面上の横方向位置Ｐと縦方向位置Ｑの組からなる座標値（Ｐ、Ｑ）を、画面位置として用いる。

また演算部３１は、現在ディスプレイ２の表示画面全体に表示させている画像（例えばメニュー画像）のオブジェクト情報を、遠隔デバイス部４に出力するようになっている。画像のオブジェクト情報とは、当該画像中の複数のオブジェクトの位置範囲の情報を含んでいる。オブジェクトとは、当該画像を構成する部分画像のうち、ユーザが遠隔デバイス部４を操作して選択操作および決定操作を行う対象となり得る画像（例えばボタン画像）をいう。

オブジェクトの決定操作とは、そのオブジェクトに割り当てられた機能を実行させるための操作をいう。これに対して選択操作とは、そのオブジェクトを決定操作の対象とするための操作をいう。選択操作としては、例えば、ポインタを当該オブジェクトの表示範囲内に移動させるための操作がある。

記憶部３２は、ＲＯＭ、フラッシュメモリ、ＨＤＤ等の、不揮発性記憶媒体を備えた記憶装置である。この記憶部３２には、演算部３１が実行するためのプログラム、および、オブジェクトテーブル３２ａが記憶されている。オブジェクトテーブル３２ａは、演算部３１がディスプレイ２に表示させる複数種類の画像のそれぞれについてのオブジェクト情報をあらかじめ含むテーブルである。演算部３１は、これらプログラムおよびオブジェクトテーブル３２ａを記憶部３２から読み出すことで、上記の作動および後述する作動を実現する。

また、記憶部３２には、オーディオ装置５に出力するための複数の楽曲のデータが、当該楽曲の詳細情報（例えば、当該楽曲の名称の情報）と共に記録されている。

次に、遠隔デバイス部４の構成について、図１〜図３を用いて説明する。なお、図２は、遠隔デバイス部４の平面図であり、図３は、図２のＡ−Ａ断面図である。遠隔デバイス部４は、例えば、車両のインストゥルメントパネル等の、乗員よりも前側の位置に搭載される。

図１〜３に示すように、遠隔デバイス部４は、筐体１０を有し、更に、筐体１０内の決定スイッチ４０ａ、キャンセルスイッチ４０ｂ、操作ノブ４１、位置センサ４２、反力アクチュエータ４３、通信部４４、およびデバイス制御部４５を有している。なお、通信部４４およびデバイス制御部４５は、筐体１０の外部にあってもよい。

筐体１０は、遠隔デバイス部４の外形を成し、その内部の部材を保護する樹脂製のケースである。

決定スイッチ４０ａおよびキャンセルスイッチ４０ｂのそれぞれは、筐体１０の内部から外部に露出すると共に、ユーザによって押下されることで、その押下操作を検出し、検出した旨の信号をデバイス制御部４５に出力する。なお、決定スイッチ４０ａは、上述の決定操作のためにユーザが押下するボタンである。

操作ノブ４１は、上述のポインタを移動させる等のためのユーザの操作を受け付ける器具である。本実施形態においては、操作ノブ４１の具体例として、スティックを任意の方向に倒す操作が可能なスティックタイプのものを採用する。

具体的には、図２および図３に示すように、接触部４１ａおよびスティック部４１ｂを有している。接触部４１ａは、操作ノブ４１の操作のためにユーザが直接触れる部分であり、スティッ筐体１０の内部から外部に露出している。

スティック部４１ｂは、棒状の部材であり、その一端が接触部４１ａに固定され、他端が筐体１０に取り付けられている。スティック部４１ｂの筐体１０への取り付けは、スティック部４１ｂが筐体１０に対して前、後、左、右（それぞれ図２の紙面上の左、右、下、上に相当する）を含む２次元面内の任意の方向に傾斜可能となるような方法で実現されている。

このようになっていることで、ユーザは、接触部４１ａに触れて接触部４１ａを移動させることで、上述の所定の範囲内で、スティック部４１ｂの筐体１０に対する傾斜角を調節することができる。

ただし、スティック部４１ｂが傾斜可能な範囲は、所定の範囲に制限されている。この制限は、機械的に実現されていてもよい。例えば、接触部４１ａの各方向への傾斜可能な角度範囲の限界は、接触部４１ａが筐体１０に当接したときの角度となっていてもよい。あるいは、筐体１０の内部に、スティック部４１ｂの傾斜可能な範囲を制限する図示しない機構が設けられていてもよい。

接触部４１ａは、筐体１０の内部から外部に露出すると共に、ユーザからの接触力を受けて、前、後、左、右（それぞれ図２の紙面上の左、右、下、上に相当する）を含む２次元球面上を移動する樹脂製の部材である。スティック部４１ｂは、接触部４１ａの中心位置からの移動量に応じた角度で傾く。

位置センサ４２は、操作ノブ４１の操作位置を逐次検出してデバイス制御部４５に出力する装置である。操作ノブ４１の操作位置とは、スティック部４１ｂの傾き方向と傾き角を一意に特定できる位置情報をいう。例えば、スティック部４１ｂが筐体１０の底面に対して図３のように垂直に延びている状態を基準状態とし、この基準状態に対するスティック部４１ｂの傾き角度をθとし、スティック部４１ｂの傾き方向が、所定の前方向（図２中のＹ方向に相当する）に対して成す（図２における時計回り方向の）角度をαとした場合、Ｘ＝θｓｉｎα、Ｙ＝θｃｏｓαとする座標値（Ｘ、Ｙ）を、操作ノブ４１の操作位置としてデバイス制御部４５に出力するようになっていてもよい。この値Ｘは、スティック部４１ｂのＸ方向（右方向）の傾き量に相当し、値Ｙは、スティック部４１ｂのＹ方向（前方向）の傾き量に相当する。

反力アクチュエータ４３は、スティック部４１ｂに対して力（付勢力）を加える装置である。反力アクチュエータ４３がスティック部４１ｂに加えることのできる付勢力の強さおよび方向は、デバイス制御部４５の制御に従って変化するようになっている。操作ノブ４１に対して付勢力が加えられると、その付勢力の方向が操作ノブ４１を持つユーザの手にも伝わる。

反力アクチュエータ４３としては、例えば、スティック部４１ｂに機械的に接続され、それぞれスティック部４１ｂのＸ方向およびＹ方向に、デバイス制御部４５からの制御に従った大きさの付勢力を与えるステッピングモータ等を用いてもよい。

通信部４４は、車載装置３のインターフェース部３２と情報の授受を行うための通信インターフェースである。デバイス制御部４５は、このインターフェースを介して車載装置３と通信することができる。

デバイス制御部４５は、ＣＰＵ、ＲＡＭ、ＲＯＭを備えたマイコンであって、ＲＯＭに記憶されたプログラムをＣＰＵがＲＡＭに展開して実行することで、種々の処理を実現する。そして、その処理の際には、決定スイッチ４０ａ、キャンセルスイッチ４０ｂ、位置センサ４２等から信号を取得し、必要に応じて反力アクチュエータ４３を制御し、また、通信部４４を介して表示制御部３と通信を行う。

以下、上記のような構成の操作表示制御システム１の作動について説明する。演算部３１は、図４に示すような、オーディオ設定用の画像５０をディスプレイ２の表示画面いっぱいに表示させている。

なお、演算部３１がこのようなオーディオ設定用画像５０を表示する契機は、どのようなものであってもよい。例えば、操作ノブ４１または図示しない操作装置（例えばタッチパネル、キーボード）等に対してユーザが所定の操作（具体的には、オーディオ設定開始操作）を行うことであってもよい。

演算部３１は、このオーディオ設定用画像５０をディスプレイ２に表示させ始めるときに、このオーディオ設定用画像５０のオブジェクト情報を、遠隔デバイス部４に送信する。そして、遠隔デバイス部４においては、デバイス制御部４５が通信部４４を介してこのオブジェクト情報を受信する。

このオブジェクト情報には、オーディオ設定用画像５０に含まれる第１階層のオブジェクトとして、オブジェクトｅ１０、ｅ２０、およびｅ３０についてのオーディオ設定用画像５０中の配置の情報が含まれている。これら３つの第１階層オブジェクトｅ１０〜ｅ３０は、遠隔デバイス部４の操作によってユーザが選択および決定可能なオブジェクトである。

具体的には、音量設定選択用オブジェクトｅ１０は、オーディオ設定用画像５０中の上部にあり、横方向（図４中のＰ軸方向に相当する）に０から５０まで並ぶ複数の目盛りの画像を含む矩形領域の画像である。また、音場設定選択用オブジェクトｅ２０は、オーディオ設定用画像５０中の左下部にあり、縦方向（図４中のＰ軸方向に直交するＱ軸方向に相当する）および横方向に方形の画像を複数並べた画像を含む矩形領域の画像である。また、楽曲設定選択用オブジェクトｅ３０は、オーディオ設定用画像５０中の右下部にあり、間隔を開けて縦方向に並ぶ短冊状の画像を含む矩形領域の画像である。

なお、これら第１階層オブジェクトｅ１０〜ｅ３０の選択領域は、それぞれの画像の矩形領域に等しい。なお、後述するように、遠隔デバイス部４の操作位置が、あるオブジェクトの選択領域に対応する位置にあるときは、演算部３１および当該オブジェクトが選択されていることになり、その時点において所定の決定操作が行われると、当該オブジェクトに対応した処理が車載装置３において実行される。

また、このオブジェクト情報には、各第１階層オブジェクトｅ１０〜ｅ３０について、当該第１階層オブジェクトに含まれる複数の第２階層オブジェクトの、当該第１階層オブジェクト中の配置の情報が含まれている。

音量設定選択用オブジェクトｅ１０に含まれる第２階層オブジェクトは、０から５０までの５１個の目盛りの画像のそれぞれである。これら目盛り画像のそれぞれの選択領域は、自身の目盛り画像を含み、自身の目盛り画像と同じ縦方向の長さであり、かつ、横方向は、自身の目盛り画像と、隣の目盛り画像とから等距離にある位置まで延びている。したがって、０から５０までの目盛り画像の選択領域は、横方向に隙間なく並んでいる。

音場設定選択用オブジェクトｅ２０に含まれる第２階層オブジェクトは、縦に１０個および横に１０個に並ぶ１０×１０＝１００個の方形画像のそれぞれである。なお、音場設定選択用オブジェクトｅ２０中のこれら第２階層オブジェクトの選択領域は、それぞれの方形画像の領域に等しい。

楽曲設定選択用オブジェクトｅ３０に含まれる第２階層オブジェクトは、隙間を開けて縦に１１個並ぶ横長短冊状の矩形画像のそれぞれである。なお、楽曲設定選択用オブジェクトｅ３０中のこれら第２階層オブジェクトの選択領域は、それぞれの画像の矩形領域に等しい。

このようなオーディオ設定用画像５０を演算部３１が表示している場合、操作表示制御システム１は、全体モードおよび部分領域モードのいずれかにあり、ユーザの遠隔デバイス部４に対する操作に応じてこれら２つのモード間を遷移するようになっている。ただし、デバイス制御部４５に関しては、部分領域モードは、音量設定選択用オブジェクトｅ１０に対応した部分領域モード、音場設定選択用オブジェクトｅ２０に対応した部分領域モード、および楽曲設定選択用オブジェクトｅ３０に対応した部分領域モード、という、３つの部分領域モードに更に分かれる。

図５および図６に、それぞれ演算部３１およびデバイス制御部４５が全体モード時に実行するプログラム１００および２００のフローチャートを示す。また、図６および図７に、それぞれ演算部３１およびデバイス制御部４５が部分領域モード時に実行するプログラム３００および４００のフローチャートを示す。

演算部３１がオーディオ設定用画像５０をディスプレイ２に表示させた直後は、操作表示制御システム１は全体モードにある。この全体モードにおいて、デバイス制御部４５は、まずプログラム２００のステップ２１０で、操作ノブ４１の操作位置（Ｘ、Ｙ）を示す信号を位置センサ４２から取得することで、操作ノブ４１の操作位置（Ｘ、Ｙ）を特定する。

続いてステップ２２０では、特定した操作位置（Ｘ、Ｙ）を変換して、当該操作位置（Ｘ、Ｙ）に対応する画面位置（Ｐ、Ｑ）を算出する。

ここで、全体モードにおいては、操作位置（Ｘ、Ｙ）から画面位置（Ｐ、Ｑ）への変換は、操作位置（Ｘ、Ｙ）の取り得る範囲（すなわち、操作ノブ４１の可動範囲）の全体を、画面位置（Ｐ、Ｑ）の全体に移す写像（例えば線形写像）である。

例えば、操作位置（Ｘ、Ｙ）の取り得る範囲を、Ｘ_Ｌ≦Ｘ≦Ｘ_Ｒ、Ｙ_Ｂ≦Ｙ≦Ｙ_Ｔとする。ここで、Ｘ_Ｌは、操作ノブ４１をユーザから見て左側に最大限傾けた状態における操作位置のＸ座標値であり、Ｘ_Ｒは、操作ノブ４１をユーザから見て右側に最大限傾けた状態における操作位置のＸ座標値である。また、Ｙ_Ｂは、操作ノブ４１を後方（すなわち、ユーザに近づく方向）に最大限傾けた状態における操作位置のＹ座標値であり、Ｙ_Ｔは、操作ノブ４１を前方（すなわち、ユーザから遠ざかる側）に最大限傾けた状態における操作位置のＹ座標値である。

また、画面位置の取り得る範囲を、Ｐ_Ｌ≦Ｐ≦Ｐ_Ｒ、Ｑ_Ｂ≦Ｑ≦Ｑ_Ｔとする。ここで、Ｐ_Ｌは、ディスプレイ２の表示画面中の（ユーザから見て）最も左側のＰ座標値であり、Ｐ_Ｒは、表示画面中の（ユーザから見て）最も右側のＰ座標値であり、Ｑ_Ｂは、表示画面中の（車両の上下を基準として）最も下側のＱ座標値であり、Ｑ_Ｔは、表示画面中の（車両の上下を基準として）最も上側のＱ座標値である。

このような場合においては、操作位置（Ｘ、Ｙ）から画面位置（Ｐ、Ｑ）への変換は、例えば、
（Ｐ−Ｐ_Ｌ）／（Ｐ_Ｒ−Ｐ_Ｌ）＝（Ｘ−Ｘ_Ｌ）／（Ｘ_Ｒ−Ｘ_Ｌ）
（Ｑ−Ｑ_Ｂ）／（Ｑ_Ｔ−Ｑ_Ｂ）＝（Ｙ−Ｙ_Ｂ）／（Ｙ_Ｔ−Ｙ_Ｂ）
という２つの一次式を用いて変換するようになっていてもよい。なお、Ｐ_Ｌ、Ｐ_Ｒ、Ｑ_Ｂ、Ｑ_Ｔ、Ｘ_Ｌ、Ｘ_Ｒ、Ｙ_Ｂ、Ｙ_Ｔの値は、あらかじめデバイス制御部４５のＲＯＭに記録されていてもよい。図９に、このような変換の結果生じた、全体モードにおける、操作位置（Ｘ、Ｙ）とオーディオ設定用画像５０内の位置との対応関係を示す。

続いてステップ２２５では、ステップ２２０の変換結果の画面位置（Ｐ、Ｑ）を、通信部４４を用いて表示制御部３に送信する。続いてステップ２３０では、決定スイッチ４０ａが押下されたか否かを決定スイッチ４０ａからの信号に基づいて判定し、押下されていなければ再度ステップ２１０を実行し、押下されていれば、決定操作があった旨の信号を、通信部４４を介して表示制御部３に送信し、さらに、その押下の時点（決定操作があった時点）において選択されていた第１階層オブジェクトについての部分領域モードに移行して、プログラム１００の実行を終了する。なお、押下の時点において選択されていた第１階層オブジェクトとして、その押下の時点における画面位置（Ｐ、Ｑ）（すなわち、直前のステップ２２０で変換した結果の画面位置（Ｐ、Ｑ））が属する第１階層オブジェクトを採用する。

このように、デバイス制御部４５は、全体モードにおいては、決定スイッチ４０ａが押下されるまでは、繰り返し操作ノブ４１の操作位置（Ｘ、Ｙ）を画面位置（Ｐ、Ｑ）に変換して表示制御部３に送信し続ける。

この送信された画面位置（Ｐ、Ｑ）の情報は、演算部３１が受信する。この演算部３１は、全体モードにおいては、まずプログラム１００のステップ１１０で、この画面位置（Ｐ、Ｑ）を受信し、続いてステップ１２０で、この画面位置（Ｐ、Ｑ）に相当するディスプレイ２の表示画面上の位置に、ポインタ５１を表示させる。続いてステップ１３０で、決定操作があった旨の信号をデバイス制御部４５から受信したか否かを判定し、受信していなければ再度ステップ１１０を実行し、受信していれば、続いてステップ１４０で、部分領域モードに移行し、プログラム１００の実行を終了する。

このように、演算部３１は、全体モードにおいては、ユーザによる決定操作があるまでは、繰り返し受信した画面位置（Ｐ、Ｑ）の変化に応じて、すなわち、ユーザによる操作ノブ４１の操作に応じて、ポインタ５１を移動させる。

また、ユーザが決定スイッチ４０ａを押下すると、演算部３１は、部分領域モードに遷移し、デバイス制御部４５は、その押下の時点（決定操作があった時点）で選択されていた第１階層オブジェクトに対応する部分領域モードに遷移する。

部分領域モードにおいては、演算部３１は、プログラム３００のステップ３１０で、デバイス制御部４５から送信された画面位置（Ｐ、Ｑ）を受信する。続いてステップ３２０では、当該画面位置（Ｐ、Ｑ）がどの第２階層オブジェクトの選択領域に属しているかを特定し、特定した第２階層オブジェクトを、ディスプレイ２において強調表示させる。すなわち、ユーザによって選択されている第２階層オブジェクトを強調表示させる。

例えば、音量設定選択用オブジェクトｅ１０に含まれる第２階層オブジェクトの１つが選択されている場合は、当該選択されている第２階層オブジェクト（すなわち目盛り画像）に、当該オブジェクトよりも大きいスライドバー５２を重ねて、ディスプレイ２に表示させる。

また例えば、音場設定選択用オブジェクトｅ２０に含まれる第２階層オブジェクトの１つ５３が選択されている場合は、当該選択されている第２階層オブジェクト（方形画像）５３を、他のオブジェクトとは異なる色（例えば、他のオブジェクトよりも濃い色）で、ディスプレイ２に表示させる。

また例えば、楽曲設定選択用オブジェクトｅ３０に含まれる第２階層オブジェクトの１つ５４が選択されている場合は、当該選択されている第２階層オブジェクト（横長矩形画像）５４を、他のオブジェクトとは異なる色（例えば、他のオブジェクトよりも濃い色）で、ディスプレイ２に表示させる。

続いてステップ３３０では、キャンセル操作があった旨の信号をデバイス制御部４５から受信したか否かを判定し、受信していれば続いてステップ３６０で全体モードに移行し、受信していなければ続いてステップ３４０を実行する。

ステップ３４０では、決定操作があった旨の信号をデバイス制御部４５から受信したか否かを判定し、受信していれば続いてステップ３５０を実行し、受信していなければ再度ステップ３１０を実行する。

ステップ３５０では、決定操作が行われた対象となる第２階層オブジェクト（すなわち、決定操作があった時点において選択されていた第２階層オブジェクト）に対応したオーディオ設定処理を実行する。

例えば、音量設定選択用オブジェクトｅ１０に含まれる第２階層オブジェクト（すなわち、目盛り画像）の１つが決定操作の対象となった場合、同じ音量設定選択用オブジェクトｅ１０中のすべての第２階層オブジェクトにおける当該決定対象オブジェクトの相対位置に応じて、オーディオ装置５の各スピーカ全体に適用する基本音量を決定し、その決定に従ってオーディオ装置５を制御する。具体的には、左からＮ番目（ただしＮは自然数）のオブジェクトが選択された場合は、基本音量をＮ−１に設定する。

また例えば、音場設定選択用オブジェクトｅ２０に含まれる第２階層オブジェクト（すなわち、縦１０×横１０に並ぶ方形画像）の１つが決定操作の対象となった場合、音場設定選択用オブジェクトｅ２０に属するすべての第２階層オブジェクト中の当該決定対象オブジェクトの相対位置に基づいて、音場を設定する。

具体的には、当該相対位置に対応する車両中の位置において、最も良い品質の音が聞こえるように、オーディオ装置５の各スピーカ間の相対的な音量の差を決定し、その決定に従ってオーディオ装置５を制御する。このような各スピーカの音量の相対的な調整によって、音場が設定される。

例えば、当該相対位置が、右上方の位置であれば、右前方座席において最も良い音質の音が聞こえるように、オーディオ装置５の各スピーカ間の相対的な音量の差を決定し、その決定に従ってオーディオ装置５を制御する。

また例えば、楽曲設定選択用オブジェクトｅ３０に含まれる第２階層オブジェクト（すなわち、縦に１１個並ぶ横長矩形画像）の１つが決定操作の対象となった場合、当該オブジェクトにあらかじめ割り当てられた楽曲の音声信号をオーディオ装置５に出力することで、オーディオ装置５による当該楽曲の再生を開始させる。

ステップ３５０に続いては、ステップ３６０で、全体モードに移行する。ステップ３６０の後、プログラム３００の実行を終了する。

このようなプログラム３００を実行することで、演算部３１は、部分領域モードにおいて、受信した画面位置（Ｐ、Ｑ）を選択領域とする第２階層オブジェクト（すなわち、ユーザによって選択されたオブジェクト）を強調表示する。そして、ユーザが決定操作を行うと、当該選択されたオブジェクトに対応するオーディオ設定処理を実行し、全体モードに戻る。また、ユーザがキャンセル操作を行った場合も、全体モードに戻る。

また、第１階層オブジェクトｅ１０〜ｅ３０のそれぞれに対応する部分領域モードにおいて、デバイス制御部４５は、まず図８のプログラム４００のステップ４０５で、対応する第１階層オブジェクトに基づいて、操作ノブ４１の可動範囲の全体をディスプレイ２の表示画面の一部に割り当てる。

より具体的には、以下のようになる。なお、以下では、現在の部分領域モードに対応する第１階層オブジェクト中にあるすべての第２階層オブジェクトの選択領域のそれぞれを、対象選択領域という。この割り当ては、操作ノブ４１の可動範囲の全体を、すべての対象選択領域の総和の領域（の一部または全部）のみに割り当てる。すなわち、この割り当てによって、操作ノブ４１が取り得るすべての操作位置（Ｘ、Ｙ）のそれぞれは、当該選択領域のいずれかの内部の画面位置（Ｐ、Ｑ）に対応付けられる。なお、すべての対象選択領域の総和の領域は、ディスプレイ２の表示画面よりも狭い領域である。

更に具体的には、この割り当てによって、操作位置（Ｘ、Ｙ）のうち、対象選択領域の並びの方向に対応する範囲の全体は、対象選択領域の並びに沿った順で、対象選択領域のいずれかの内部に割り当てられる。そして、この割り当てによって、各選択領域中には、必ず操作位置（Ｘ、Ｙ）のいずれかが割り当てられることになる。

したがって、上記の割り当ては、操作位置（Ｘ、Ｙ）の取り得る範囲の全体を、すべての対象選択領域内の画面位置（Ｐ、Ｑ）のみに移す写像（例えば線形写像）であり、かつ、操作位置（Ｘ、Ｙ）の取り得る範囲のうち、対象選択領域の並びの方向に対応する全範囲を、対象選択領域の並びに沿った順で、対象選択領域のいずれかの内部にのみ割り当てる写像である。

以下、それぞれの部分領域モードにおける上記写像（換言すれば、操作位置（Ｘ、Ｙ）から画面位置（Ｐ、Ｑ）への変換）の具体例について説明する。なお、操作位置（Ｘ、Ｙ）の取り得る範囲は、既述の通り、Ｘ_Ｌ≦Ｘ≦Ｘ_Ｒ、Ｙ_Ｂ≦Ｙ≦Ｙ_Ｔであるとする。

（１）音量設定選択用オブジェクトｅ１０に対応する部分領域モードである場合：
この場合、図４を用いて説明した通り、対象選択領域は５１個あり、そのそれぞれは、目盛り画像を含む矩形領域であり、かつ、横方向（すなわちＰ軸方向）に並んでいる。したがってこの場合、対象選択領域の並び方向は、横方向である。

また、各対象選択領域は、横方向に隣り合う対象選択領域と接触している。したがって、これら５１個の対象選択領域の総和となる領域は、１つの横長の矩形領域となる。この総和の矩形領域内に相当する画面位置（Ｐ、Ｑ）の範囲を、Ｐ_Ｌ１≦Ｐ≦Ｐ_Ｒ１、Ｑ_Ｂ１≦Ｑ≦Ｑ_Ｔ１とする。ここで、Ｐ_Ｌ１は、総和の矩形領域中の（ユーザから見て）最も左側のＰ座標値であり、Ｐ_Ｒ１は、総和の矩形領域中の（ユーザから見て）最も右側のＰ座標値であり、Ｑ_Ｂ１は、総和の矩形領域中の（車両の上下を基準として）最も下側のＱ座標値であり、Ｑ_Ｔ１は、総和の矩形領域中の（車両の上下を基準として）最も上側のＱ座標値である。

このような場合においては、操作位置（Ｘ、Ｙ）から画面位置（Ｐ、Ｑ）への変換は、例えば、
（Ｐ−Ｐ_Ｌ１）／（Ｐ_Ｒ１−Ｐ_Ｌ１）＝（Ｘ−Ｘ_Ｌ）／（Ｘ_Ｒ−Ｘ_Ｌ）
（Ｑ−Ｑ_Ｂ１）／（Ｑ_Ｔ１−Ｑ_Ｂ１）＝（Ｙ−Ｙ_Ｂ）／（Ｙ_Ｔ−Ｙ_Ｂ）
という２つの一次式を用いて変換するよう設定してもよい。なお、Ｐ_Ｌ１、Ｐ_Ｒ１、Ｑ_Ｂ１、Ｑ_Ｔ１、Ｘ_Ｌ、Ｘ_Ｒ、Ｙ_Ｂ、Ｙ_Ｔの値は、あらかじめデバイス制御部４５のＲＯＭに記録されていてもよい。

なお、上記の第１式を採用する場合、操作位置（Ｘ、Ｙ）のうち、対象選択領域の並びの方向に対応する範囲の全体（すなわち、Ｘ方向についてのＸ_ＬからＸ_Ｒまでの範囲）は、対象選択領域の並びに沿った順で、均等に、すべての対象選択領域の横方向全体に、割り当てられる。

また、上記の第２式を採用する場合、操作位置（Ｘ、Ｙ）のうち、対象選択領域の並びに直交する方向に対応する範囲の全体（すなわち、Ｙ方向についてのＹ_ＢからＹ_Ｔまでの範囲）は、均等に、対象選択領域の縦向全体に、割り当てられる。

なお、上記の第２式に変えて、Ｑ＝Ｑ_１という式を採用してもよい。ここで、Ｑ_１は、Ｑ_Ｂ１≦Ｑ_１≦Ｑ_Ｔ１を満たすなら、どのような値でもよい。例えば、Ｑ_１は定数であってもよいし、Ｐに依存してＱ_Ｂ１≦Ｑ_１≦Ｑ_Ｔ１の範囲内で変化する値であってもよい。すなわち、音量設定選択用オブジェクトｅ１０に対応する部分領域モードにおいては、操作位置（Ｘ、Ｙ）のうち、対象選択領域が並んでいない方向に対応する範囲の全体（すなわち、Ｙ方向についてのＹ_ＢからＹ_Ｔまでの範囲）は、対象選択領域の縦向全体に割り当てられていなくともよい。

図１０に、このような変換の結果生じた、音量設定選択用オブジェクトｅ１０に対応する部分領域モードにおける、対象選択領域の並び方向の操作位置Ｘの範囲Ｘ_Ｌ≦Ｘ≦Ｘ_Ｒと、オーディオ設定用画像５０内の画面位置（Ｐ、Ｑ）との対応関係を示す。

（２）音場設定選択用オブジェクトｅ２０に対応する部分領域モードである場合：
この場合、図４を用いて説明した通り、対象選択領域は縦１０×横１０の１００個あり、そのそれぞれは、車内の位置を特定するための方形領域である。したがってこの場合、対象選択領域の並び方向は、縦方向（すなわちＱ軸方向）かつ横方向である。

また、各対象選択領域は、縦方向に隣り合う対象選択領域と接触していると共に、横方向に隣り合う対象選択領域と接触している。したがって、これら５１個の対象選択領域の総和となる領域は、１つの大きな矩形領域となる。この総和の矩形領域内に相当する画面位置（Ｐ、Ｑ）の範囲を、Ｐ_Ｌ２≦Ｐ≦Ｐ_Ｒ２、Ｑ_Ｂ２≦Ｑ≦Ｑ_Ｔ２とする。ここで、Ｐ_Ｌ２は、総和の矩形領域中の（ユーザから見て）最も左側のＰ座標値であり、Ｐ_Ｒ２は、総和の矩形領域中の（ユーザから見て）最も右側のＰ座標値であり、Ｑ_Ｂ２は、総和の矩形領域中の（車両の上下を基準として）最も下側のＱ座標値であり、Ｑ_Ｔ２は、総和の矩形領域中の（車両の上下を基準として）最も上側のＱ座標値である。

このような場合においては、操作位置（Ｘ、Ｙ）から画面位置（Ｐ、Ｑ）への変換は、例えば、
（Ｐ−Ｐ_Ｌ２）／（Ｐ_Ｒ２−Ｐ_Ｌ２）＝（Ｘ−Ｘ_Ｌ）／（Ｘ_Ｒ−Ｘ_Ｌ）
（Ｑ−Ｑ_Ｂ２）／（Ｑ_Ｔ２−Ｑ_Ｂ２）＝（Ｙ−Ｙ_Ｂ）／（Ｙ_Ｔ−Ｙ_Ｂ）
という２つの一次式を用いて変換するよう設定してもよい。なお、Ｐ_Ｌ２、Ｐ_Ｒ２、Ｑ_Ｂ２、Ｑ_Ｔ２、Ｘ_Ｌ、Ｘ_Ｒ、Ｙ_Ｂ、Ｙ_Ｔの値は、あらかじめデバイス制御部４５のＲＯＭに記録されていてもよい。

なお、上記の第１式を採用する場合、操作位置（Ｘ、Ｙ）のうち、対象選択領域の横の並びの方向に対応する範囲の全体（すなわち、Ｘ方向についてのＸ_ＬからＸ_Ｒまでの範囲）は、対象選択領域の並びに沿った順で、均等に、すべての対象選択領域の横方向全体に、割り当てられる。

また、上記の第２式を採用する場合、操作位置（Ｘ、Ｙ）のうち、対象選択領域の縦の並びに直交する方向に対応する範囲の全体（すなわち、Ｙ方向についてのＹ_ＢからＹ_Ｔまでの範囲）は、均等に、対象選択領域の縦向全体に、割り当てられる。

図１１に、このような変換の結果生じた、音場設定選択用オブジェクトｅ２０に対応する部分領域モードにおける、対象選択領域の縦横平面方向の操作位置（Ｘ、Ｙ）の範囲Ｘ_Ｌ≦Ｘ≦Ｘ_Ｒ、Ｙ_Ｂ≦Ｙ≦Ｙ_Ｔと、オーディオ設定用画像５０内の画面位置（Ｐ、Ｑ）との対応関係を示す。

（３）楽曲設定選択用オブジェクトｅ３０に対応する部分領域モードである場合：
この場合、図４を用いて説明した通り、対象選択領域は１１個あり、そのそれぞれは、楽曲名を示す横長の矩形領域であり、かつ、縦方向に並んでいる。したがってこの場合、対象選択領域の並び方向は、縦方向である。

また、各対象選択領域は、縦方向に隣り合う対象選択領域と接触せず、当該対象選択領域よりも縦方向に狭い隙間によって隔てられている。この場合においても、操作位置（Ｘ、Ｙ）は、隙間の領域に割り当てられない。

ここで、これら１１個の縦に並ぶ対象選択領域を、並びを維持したまま隙間を排して繋ぎ合わせた結果の総和となる領域（図１２参照）について考える。この操作領域は、１つの矩形領域となる。この総和の矩形領域内に相当する画面位置（Ｐ、Ｑ）の範囲を、Ｐ_Ｌ３≦Ｐ≦Ｐ_Ｒ３、Ｑ_Ｂ３≦Ｑ≦Ｑ_Ｔ３とする。ここで、Ｐ_Ｌ３は、総和の矩形領域中の（ユーザから見て）最も左側のＰ座標値であり、Ｐ_Ｒ３は、総和の矩形領域中の（ユーザから見て）最も右側のＰ座標値であり、Ｑ_Ｂ３は、総和の矩形領域中の（車両の上下を基準として）最も下側のＱ座標値であり、Ｑ_Ｔ３は、総和の矩形領域中の（車両の上下を基準として）最も上側のＱ座標値である。

このような場合においては、操作位置（Ｘ、Ｙ）から画面位置（Ｐ、Ｑ）への変換は、例えば、
（Ｐ−Ｐ_Ｌ３）／（Ｐ_Ｒ３−Ｐ_Ｌ３）＝（Ｘ−Ｘ_Ｌ）／（Ｘ_Ｒ−Ｘ_Ｌ）
（Ｑ−Ｑ_Ｂ３）／（Ｑ_Ｔ３−Ｑ_Ｂ３）＝（Ｙ−Ｙ_Ｂ）／（Ｙ_Ｔ−Ｙ_Ｂ）
という２つの一次式を用いて変換するよう設定してもよい。なお、Ｐ_Ｌ３、Ｐ_Ｒ３、Ｑ_Ｂ３、Ｑ_Ｔ３、Ｘ_Ｌ、Ｘ_Ｒ、Ｙ_Ｂ、Ｙ_Ｔの値は、あらかじめデバイス制御部４５のＲＯＭに記録されていてもよい。

なお、上記の第１式を採用する場合、操作位置（Ｘ、Ｙ）のうち、対象選択領域の並びに直交する方向に対応する範囲の全体（すなわち、Ｘ方向についてのＸ_ＬからＸ_Ｒまでの範囲）は、均等に、対象選択領域の横向全体に、割り当てられる。

また、上記の第２式を採用する場合、操作位置（Ｘ、Ｙ）のうち、対象選択領域の並びの方向に対応する範囲の全体（すなわち、Ｙ方向についてのＹ_ＢからＴ_Ｔまでの範囲）は、対象選択領域の並びに沿った順で、均等に、すべての対象選択領域の縦方向全体に、割り当てられる。

なお、上記の第１式に変えて、Ｐ＝Ｐ_３という式を採用してもよい。ここで、Ｐ_３は、Ｐ_Ｂ３≦Ｐ_３≦Ｐ_Ｔ３を満たすなら、どのような値でもよい。例えば、Ｐ_３は定数であってもよいし、Ｑに依存してＰ_Ｂ３≦Ｐ_３≦Ｐ_Ｔ３の範囲内で変化する値であってもよい。すなわち、楽曲設定選択用オブジェクトｅ３０に対応する部分領域モードにおいては、操作位置（Ｘ、Ｙ）のうち、対象選択領域が並んでいない方向に対応する範囲の全体（すなわち、Ｘ方向についてのＸ_ＬからＸ_Ｒまでの範囲）は、対象選択領域の縦向全体に割り当てられていなくともよい。

図１２は、このような変換の結果生じた、楽曲設定選択用オブジェクトｅ３０に対応する部分領域モードにおける、対象選択領域の並び方向の操作位置Ｙの範囲Ｙ_Ｂ≦Ｙ≦Ｙ_Ｔと、オーディオ設定用画像５０内の画面位置（Ｐ、Ｑ）との対応関係を示す図である。

ステップ４０５に続いてステップ４１０では、対象選択領域の配置に基づいて付勢力の設定を行う。付勢力の設定とは、具体的には操作位置（Ｘ、Ｙ）の全範囲のそれぞれに対して、付勢力の方向および大きさを割り当てることをいう。この付勢力は、対象選択領域の内部において、当該対象選択領域の（対象選択領域の並び方向における）中央部に、操作ノブ４１を引き込むような力となるよう設定する。

まず、音量設定選択用オブジェクトｅ１０に対応する部分領域モードにおける付勢力について、図１３の例を用いて説明する。図１３は、音量設定選択用オブジェクトｅ１０中の第２階層オブジェクトである目盛り画像の一部６１〜６３の拡大図と、それら第２階層オブジェクト６１〜６３のそれぞれについての選択領域６１ａ〜６３ａの内部において割り当てられる付勢力を示すグラフとを、共に表した図である。

なお、このグラフにおいては、操作位置（Ｘ、Ｙ）のＸ軸方向の位置と、選択領域６１ａ〜６３ａの内部の画面位置（Ｐ、Ｑ）のＰ軸方向の位置とが対応付けられているが、この対応関係は、直前のステップ４０５において割り当てられたものを用いる。

このグラフに示すように、各選択領域６１ａ〜６３ａの内部では、対応する目盛り画像６１〜６３の左側においては、操作ノブ４１を右方向に付勢する力が割り当てられ、対応する目盛り画像６１〜６３の右側においては、操作ノブ４１を左方向に付勢する力が割り当てられる。すなわち、各選択領域６１ａ〜６３ａの内部では、当該選択領域６１ａ〜６３ａの左右方向（すなわち並び方向、かつＸ軸方向）の中心にある目盛り画像６１〜６３に操作ノブ４１を引き込むような付勢力が割り当てられる。そして、選択領域６１ａ〜６３ａの左右方向中心に操作ノブ４１を引き込む力の強さは、操作ノブ４１の操作位置（Ｘ、Ｙ）に対応する画面位置（Ｐ、Ｑ）が当該中心から左右方向に離れるにつれて増大していくが、ある距離まで離れると、それ以降は低下する。

なお、この例においては、操作ノブ４１を上下方向（すなわち、Ｙ軸方向）に付勢する力は設定しない。また、この左右方向の付勢力の大きさは、操作ノブ４１の操作位置（Ｘ、Ｙ）のＹ軸方向の位置には依存しない。

次に、音場設定選択用オブジェクトｅ２０に対応する部分領域モードにおける付勢力について、図１４の例を用いて説明する。図１４は、音場設定選択用オブジェクトｅ２０中の第２階層オブジェクトである方形画像の一部８１〜８９の拡大図と、それら第２階層オブジェクト８１〜８９のそれぞれについての選択領域８１〜８９の内部において割り当てられる付勢力を示すグラフとを、共に表した図である。

なお、このグラフにおいては、操作位置（Ｘ、Ｙ）と、選択領域８１〜８９の内部の画面位置（Ｐ、Ｑ）とが対応付けられているが、この対応関係は、直前のステップ４０５において割り当てられたものを用いる。

このグラフに示すように、各選択領域８１〜８９の内部では、対応する選択領域８１〜８９の中心からの上下方向の距離に基づいて、操作ノブ４１を上下方向に付勢する力が設定され、対応する選択領域８１〜８９の中心からの左右方向の距離に基づいて、操作ノブ４１を左右方向に付勢する力が設定される。そして、その付勢力は、各選択領域８１〜８９の内部において、対応する選択領域８１〜８９の中心に操作ノブ４１を引き込むような付勢力となっている。

具体的には、選択領域８１〜８９の下側のグラフに示すように、各選択領域８１〜８９の内部では、その選択領域の中心の左側においては、操作ノブ４１を右方向に付勢する力が割り当てられ、その選択領域の中心の右側においては、操作ノブ４１を左方向に付勢する力が割り当てられる。

また、選択領域８１〜８９の左側のグラフに示すように、各選択領域８１〜８９の内部では、その選択領域の中心の上側においては、操作ノブ４１を下方向に付勢する力が割り当てられ、その選択領域の中心の下側においては、操作ノブ４１を上方向に付勢する力が割り当てられる。

そして、選択領域８１〜８９の中心に操作ノブ４１を引き込む力の強さは、操作ノブ４１の操作位置（Ｘ、Ｙ）に対応する画面位置（Ｐ、Ｑ）が当該中心から離れるにつれて増大していくが、ある距離まで離れると、それ以降は低下する。

次に、楽曲設定選択用オブジェクトｅ３０に対応する部分領域モードにおける付勢力について、図１５の例を用いて説明する。図１５は、楽曲設定選択用オブジェクトｅ３０中の第２階層オブジェクトである矩形画像７１〜７３の拡大図と、それら第２階層オブジェクト７１〜７３のそれぞれについての選択領域７１〜７３内部において割り当てられる付勢力を示すグラフとを、共に表した図である。なお、図１５においては、選択領域７１〜７３の間にある隙間には、付勢力を割り当てないので、それら隙間についての表示は省略している。

なお、このグラフにおいては、操作位置（Ｘ、Ｙ）のＹ軸方向の位置と、選択領域７１〜７３の内部の画面位置（Ｐ、Ｑ）のＱ軸方向の位置とが対応付けられているが、この対応関係は、直前のステップ４０５において割り当てられたものを用いる。

このグラフに示すように、各選択領域７１〜７３の内部では、対応する選択領域７１〜７３の上下方向中心の下側においては、操作ノブ４１を上方向に付勢する力が割り当てられ、当該上下方向中心の上側においては、操作ノブ４１を下方向に付勢する力が割り当てられる。すなわち、各選択領域７１〜７３の内部では、当該選択領域７１〜７３の上下方向（すなわち並び方向、かつＹ軸方向）の中心に操作ノブ４１を引き込むような付勢力が割り当てられる。そして、選択領域７１〜７３の上下方向中心に操作ノブ４１を引き込む力の強さは、操作ノブ４１の操作位置（Ｘ、Ｙ）に対応する画面位置（Ｐ、Ｑ）が当該中心から上下方向に離れるにつれて増大していくが、ある距離まで離れると、それ以降は低下する。

なお、この例においては、操作ノブ４１を左右方向（すなわち、Ｘ軸方向）に付勢する力は設定しない。また、この上下方向の付勢力の大きさは、操作ノブ４１の操作位置（Ｘ、Ｙ）のＸ軸方向の位置には依存しない。

ステップ４１０に続いてステップ４１５では、位置センサ４２からの信号に基づいて、操作ノブ４１の現在の操作位置（Ｘ、Ｙ）を特定する。続いてステップ４２０では、反力アクチュエータ４３を制御して、当該操作位置（Ｘ、Ｙ）に応じた付勢力を発生させる。操作位置（Ｘ、Ｙ）と付勢力との対応関係は、直前のステップ４１０で設定したものを用いる。

続いてステップ４２５では、ステップ４１５で特定した操作位置（Ｘ、Ｙ）を画面位置（Ｐ、Ｑ）に変換する。すなわち、当該操作位置（Ｘ、Ｙ）に対応する画面位置（Ｐ、Ｑ）を、ステップ４０５において設定した割り当てに基づいて算出する。

続いてステップ４３０では、通信部４４を用いて変換後の画面位置（Ｐ、Ｑ）を、演算部３１に送信する。すると、演算部３１は、上述の通り、当該画面位置（Ｐ、Ｑ）に対応する第２階層オブジェクトの選択領域をハイライト表示する。すなわち、当該オブジェクトが選択された状態にする。

続いてステップ４３５では、キャンセルスイッチ４０ｂが押下されたか否かを判定し、押下されていなければ続いてステップ４４０を実行し、押下されていれば、続いてステップ４４５を実行する。

ステップ４４０では、決定スイッチ４０ａが押下されたか否かを判定し、押下されていれば続いてステップ４５０を実行し、押下されていなければ再度ステップ４１５を実行する。

このようになっているので、決定スイッチ４０ａもキャンセルスイッチ４０ｂも押下されない状態においては、デバイス制御部４５は、ユーザの操作ノブ４１の操作に応じて、操作位置（Ｘ、Ｙ）に応じた付勢力を操作ノブ４１に及ぼし、また、操作位置（Ｘ、Ｙ）に対応した画面位置（Ｐ、Ｑ）を特定し、その位置を演算部３１に通知するという作動を、繰り返し継続的に実行する。

したがって、ユーザが操作ノブ４１を操作すると、画面位置（Ｐ、Ｑ）は対象選択領域の範囲内でのみ変化し、当該画面位置（Ｐ、Ｑ）を選択領域とする第２階層オブジェクトを選択状態とする。

キャンセルスイッチ４０ｂが押下された後のステップ４４５では、通信部４４を用いて、演算部３１に対して、ユーザのキャンセル操作があった旨の信号を送信し、続いてステップ４５５で、ステップ４０５で設定した操作ノブ４１の可動範囲の表示画面への割り当てを破棄し、全体モード時の割り当て（図６のステップ２２０参照）に戻す。続いてステップ４６０では、ステップ４１０で行った付勢力の設定を破棄する。続いてステップ４６５では、全体モードに移行し、その後プログラム４００の実行を終了する。

決定スイッチ４０ａが押下された後のステップ４５０では、通信部４４を用いて、演算部３１に対して、ユーザの決定操作があった旨の信号を演算部３１に送信する。すると、この信号を受信した演算部３１は、その決定操作の時点において選択されていた第２階層オブジェクトに対応するオーディオ設定処理を実行する（図７のステップ３４０、３５０参照）。ステップ４５０に続いては、ステップ４５５〜４６５を実行することで、操作ノブ４１の可動範囲の割り当ておよび付勢力の設定を解除して、全体モードに戻る。

以上説明した通り、操作表示制御システム１は、操作ノブ４１の可動範囲内の操作位置（Ｘ、Ｙ）のそれぞれを、ディスプレイ２の表示画面内の画面位置（Ｐ、Ｑ）に対応に割り当て（図６のステップ２２０、図８のステップ４２５参照）、当該割り当てによれば、現時点の操作位置（Ｘ、Ｙ）が、第２階層オブジェクトのうちいずれか１つのオブジェクトについての選択領域内の画面位置（Ｐ、Ｑ）に対応とき、所定の決定操作をユーザが行ったことに基づいて（ステップ３４０参照）、当該１つのオブジェクトに割り当てられた処理を実行する（ステップ３５０参照）。

そして、この操作表示制御システム１は、当該複数の第２階層オブジェクトについての複数の選択領域を、操作ノブ４１の当該可動範囲の全体のみに割り当てるようになっている。このようになっていることで、ユーザが操作ノブ４１を操作しても、操作位置に対応する位置が当該複数のオブジェクトの複数の選択領域を外れることがない。

したがって、表示画面に比べて当該複数の第２階層オブジェクトについての複数の選択領域が小さい範囲であったとしても、ユーザは、操作部材４１の可動範囲すべてを有効活用して、それら複数の選択領域を指定できるので、ユーザがオブジェクトに位置を合わせるために不必要に細かい位置調整を強いられることがない。

また、操作表示制御システム１は、操作位置（Ｘ、Ｙ）と画面位置（Ｐ、Ｑ）との割り当てによれば、現在の操作位置（Ｘ、Ｙ）が、当該複数のオブジェクトのうちいずれか１つのオブジェクトについての選択領域内の画面位置（Ｐ、Ｑ）に対応するとき、当該選択領域の中央部に対応する位置に操作位置（Ｘ、Ｙ）を移動させるよう、操作ノブ４１に付勢力を及ぼすようになっている（ステップ４２０参照）。

このように、目的のオブジェクトを選択しやすくなるように、オブジェクトの中心方向へ向けて操作ノブ４１を付勢することで、表示画面５０に表示された選択可能な第２階層オブジェクトを、表示画面５０に比して小さく、かつ多数表示した場合でも、それら選択可能なオブジェクトのうち、ユーザが選択したいと思うオブジェクトを素早く確実に選択させることができる。そして、１つの画面中に多くの選択可能なオブジェクトを表示させることで、画面切り替え等にかかるユーザの操作の手数を減らすことができる。

例えば、音量の設定において、細かく音量を設定するために、特定の音量の値を設定できるオブジェクトを小さくかつ多数表示しても、ユーザが選択したいと思うオブジェクトを素早く確実に選択させることができる。

また、音量や良い音が聞こえる位置を設定する音場設定において、値を細かく設定できるように選択可能なオブジェクトを数多くかつ小さく配置しても、ユーザが選択したいと思うオブジェクトを素早く確実に選択させることができる。

また、楽曲曲の選択では、曲リスト中の曲が多い場合でも、何度も表示画面をスクロールして所望の曲を選択させるのではなく、全曲分の選択可能なオブジェクトを１つの表示画面中に小さく配置しても、ユーザが選択したいと思うオブジェクトを素早く確実に選択させることができる。

また、操作ノブ４１に付勢力を発生させる技術を、上記のような、操作ノブ４１の可動範囲の全体を複数の選択領域の内部のみに割り当てる技術と組み合わせると、以下のような顕著な効果が発揮される。

操作ノブ４１の可動範囲の全体を、複数のオブジェクトの複数の選択領域に割り当てられない場合、１つのオブジェクトの選択領域内に割り当てられる操作位置（Ｘ、Ｙ）の範囲が不可避的に狭くなってしまう。

この場合、このような狭い画面位置（Ｐ、Ｑ）の範囲内で滑らかに変化する付勢力を発生させることは困難である。なぜなら、操作ノブ４１の操作位置（Ｘ、Ｙ）を検出するための位置センサ４２には、操作位置（Ｘ、Ｙ）を検出する分解能に限界があるからである。

つまり、デバイス制御部４５は、付勢力を算出するときには、現時点における操作ノブ４１の操作位置（Ｘ、Ｙ）を検出し、その検出した位置に応じて付勢力を算出するので、１つのオブジェクトの選択領域内における検出位置の数が少ないほど、当該選択領域内において与える付勢力のバリエーションも少なくなってしまうからである。このように、画面位置（Ｐ、Ｑ）の変化に対して滑らかに変化する付勢力を発生させることができない場合、操作位置（Ｘ、Ｙ）の変化と共に付勢力が階段状に急激に変化してしまうので、ユーザは、操作ノブ４１が、がたついてしまうような感覚を覚えてしまう。

一方、操作ノブ４１の可動範囲の全体を、複数のオブジェクトの複数の選択領域のみに割り当てる場合、そうでない場合に比べ、１つのオブジェクトの選択領域内に割り当てられる操作位置の範囲が広くなるので、その分だけ付勢力の変化を滑らかにすることができ、ひいては、操作ノブ４１のがたつきを抑えることができる。

また、操作表示制御システム１のディスプレイ２は、表示画面を、それぞれ第１階層オブジェクトｅ１０、ｅ２０、ｅ３０の選択領域から成る複数の部分表示画面に区分けし、区分けされた複数の部分表示画面のそれぞれの内部において、個々に選択可能な複数の第２階層オブジェクトを並べて表示するようになっている。

その場合、操作表示制御システム１は、当該複数の部分表示画面のうちいずれか１つの部分表示画面がユーザによって選択されたとき（図６のステップ２３０参照）、選択された部分表示画面内に表示されている複数の第２階層オブジェクトについての複数の選択領域を、操作ノブ４１の可動範囲の全体に、割り当てるようになっている（図８のステップ４０５参照）。

このようになっていれば、多数の第２階層オブジェクトを１つの画面に表示しても、それら第２階層オブジェクトが複数の部分表示画面の区分けによってグループ分けされ、各グループ内でのみ、複数の第２階層オブジェクトの複数の選択領域が操作ノブ４１の可動範囲全体に割り当てられる。したがって、多数の第２階層オブジェクトを１つの画面に表示しても、そのために第２階層オブジェクトを指定するための操作が細かくなってしまうことがない。

したがって、ユーザの利便性を損なうことなく、多数の第２階層オブジェクトを１つの画面に表示することで、第２階層オブジェクトの一覧性を高めることができる。

（他の実施形態）
以上、本発明の実施形態について説明したが、本発明の範囲は、上記実施形態のみに限定されるものではなく、本発明の各発明特定事項の機能を実現し得る種々の形態を包含するものである。

例えば、デバイス制御部４５は、全体モードにおいても、操作ノブ４１の操作位置（Ｘ、Ｙ）を、各第１階層オブジェクトの近傍において、当該第１階層オブジェクトの中央部に引き込むような付勢力を反力アクチュエータ４３に発生させるようになっていてもよい。

また、デバイス制御部４５は、全体モードにおいても、操作ノブ４１の可動範囲の全体を、３つの第１階層オブジェクトｅ１０〜ｅ３０の選択可能範囲内にのみ割り当てるようになっていてもよい。

また、上記の実施形態において、演算部３１およびデバイス制御部４５がプログラムを実行することで実現している各機能は、それらの機能を有するハードウェア（例えば回路構成をプログラムすることが可能なＦＰＧＡ）を用いて実現するようになっていてもよい。

また、操作表示制御システム１は、車両に搭載されない状態で用いられてもよい。また、操作表示制御システム１は、車両用ナビゲーションシステムであってもよい。

本発明の実施形態に係る操作表示制御システム１の構成を示すブロック図である。 遠隔デバイス部４の構成を示す図である。 図３のＡ−Ａ断面図である。 ディスプレイ２が表示画面に表示するオーディオ設定用画像５０である。 全体モード時に演算部３１が実行するプログラム１００のフローチャートである。 全体モード時にデバイス制御部４５が実行するプログラム２００のフローチャートである。 部分領域モード時に演算部３１が実行するプログラム３００のフローチャートである。 部分領域モード時にデバイス制御部４５が実行するプログラム４００のフローチャートである。 全体モードにおける、操作位置（Ｘ、Ｙ）とオーディオ設定用画像５０内の位置との対応関係を示す図である。 操作位置（Ｘ、Ｙ）のＸ方向の全範囲と、音量設定選択用オブジェクト中の第２階層オブジェクトの選択領域との対応関係を示す図である。 操作位置（Ｘ、Ｙ）のＸ、Ｙ方向の全範囲と、音場設定選択用オブジェクト中の第２階層オブジェクトの選択領域との対応関係を示す図である。 操作位置（Ｘ、Ｙ）のＹ方向の全範囲と、楽曲設定選択用オブジェクト中の第２階層オブジェクトの選択領域との対応関係を示す図である。 音量設定選択用オブジェクトに対応する部分領域モードにおいて設定される付勢力の一例を示すグラフである。 音場設定選択用オブジェクトに対応する部分領域モードにおいて設定される付勢力の一例を示すグラフである。 楽曲設定選択用オブジェクトに対応する部分領域モードにおいて設定される付勢力の一例を示すグラフである。

符号の説明

１ 操作表示制御システム
２ ディスプレイ
３ 表示制御部
４ 遠隔デバイス部
５ オーディオ装置
３１ 演算部
４０ａ 決定スイッチ
４０ｂ キャンセルスイッチ
４１ 操作ノブ
４１ａ 接触部
４１ｂ スティック部
４２ 位置センサ
４３ 反力アクチュエータ
４５ デバイス制御部
５０ オーディオ設定用画像
６１〜６３、７１〜７３、８１〜８９ 第２階層オブジェクト
６１ａ〜６３ａ、７１〜７３、８１〜８９ 選択領域
ｅ１０〜ｅ３０ 第１階層オブジェクト

Claims (4)

1. あらかじめ定められた可動範囲内で、ユーザの操作を受けて位置を変える操作部材（４１）と、
   表示画面を互いに隣接する複数の部分表示画面（ｅ１０、ｅ２０、ｅ３０）に区分けし、区分けされた前記複数の部分表示画面（ｅ１０、ｅ２０、ｅ３０）のそれぞれの内部において、ユーザによって個々に選択可能な複数のオブジェクトを並べて表示するディスプレイ（２）と、
   前記複数の部分表示画面のうちいずれか１つの部分表示画面に対して所定の決定操作がユーザによって行われたとき、前記操作部材（４１）の前記可動範囲内の操作位置のそれぞれを前記決定操作の対象となった前記部分表示画面内の画面位置に割り当てる割り当て手段（２２０、４０５）と、
   前記割り当て手段（２２０、４０５）の割り当てによれば、前記可動範囲内の現在の操作位置が、前記決定操作の対象となった前記部分表示画面内の前記複数のオブジェクトのうちいずれか１つのオブジェクトの選択領域内の画面位置に対応するとき、当該選択領域の中央部の画面位置に対応する前記可動範囲内の操作位置に前記現在の操作位置を移動させるよう、前記操作部材（４１）に付勢力を及ぼす付勢手段（４２０）と、
   前記割り当て手段（２２０、４０５）の割り当てと、前記可動範囲内の操作位置とに基づいて、対応するオブジェクトに割り当てられた処理を実行する決定処理手段（１４０、３５０）と、を備えたことを特徴とするユーザインターフェース装置。
2. 前記決定操作の対象となった前記部分表示画面内の前記複数のオブジェクトの選択領域の並び方向は横方向であり、前記決定操作の対象となった前記部分表示画面内の前記複数のオブジェクトの選択領域の各々は横方向に隣り合う選択領域と接触することで、前記決定操作の対象となった前記部分表示画面内の前記複数のオブジェクトの選択領域の総和となる領域は、１つの横長の総和の矩形領域となり、
   前記可動範囲内の操作位置の横方向をＸ軸方向とし縦方向をＹ軸方向とし、前記可動範囲内の操作位置（Ｘ、Ｙ）の取り得る範囲をＸ _Ｌ ≦Ｘ≦Ｘ _Ｒ 、Ｙ _Ｂ ≦Ｙ≦Ｙ _Ｔ であるとし、前記表示画面内の横方向をＰ軸方向とし縦方向をＱ軸方向とし、前記総和の矩形領域内に相当する画面位置（Ｐ、Ｑ）の範囲を、Ｐ _Ｌ１ ≦Ｐ≦Ｐ _Ｒ１ 、Ｑ _Ｂ１ ≦Ｑ≦Ｑ _Ｔ１ とした場合、前記割り当て手段（２２０、４０５）は、前記操作位置（Ｘ、Ｙ）から前記画面位置（Ｐ、Ｑ）への変換は、
   （Ｐ−Ｐ _Ｌ１ ）／（Ｐ _Ｒ１ −Ｐ _Ｌ１ ）＝（Ｘ−Ｘ _Ｌ ）／（Ｘ _Ｒ −Ｘ _Ｌ ）
   （Ｑ−Ｑ _Ｂ１ ）／（Ｑ _Ｔ１ −Ｑ _Ｂ１ ）＝（Ｙ−Ｙ _Ｂ ）／（Ｙ _Ｔ −Ｙ _Ｂ ）
   という２つの一次式を用いて変換するようになっていることを特徴とする請求項１に記載のユーザインターフェース装置。
3. 前記前記決定操作の対象となった前記部分表示画面内の前記複数のオブジェクトの選択領域の並び方向は縦方向かつ横方向であり、前記決定操作の対象となった前記部分表示画面内の前記複数のオブジェクトの選択領域の各々は縦方向に隣り合う選択領域と接触していると共に横方向に隣り合う選択領域と接触することで、前記決定操作の対象となった前記部分表示画面内の前記複数のオブジェクトの選択領域の総和となる領域は、１つの総和の矩形領域となり、
   前記可動範囲内の操作位置の横方向をＸ軸方向とし縦方向をＹ軸方向とし、前記可動範囲内の操作位置（Ｘ、Ｙ）の取り得る範囲をＸ _Ｌ ≦Ｘ≦Ｘ _Ｒ 、Ｙ _Ｂ ≦Ｙ≦Ｙ _Ｔ であるとし、前記表示画面内の横方向をＰ軸方向とし縦方向をＱ軸方向とし、前記総和の矩形領域内に相当する画面位置（Ｐ、Ｑ）の範囲を、Ｐ _Ｌ２ ≦Ｐ≦Ｐ _Ｒ２ 、Ｑ _Ｂ２ ≦Ｑ≦Ｑ _Ｔ２ とした場合、前記割り当て手段（２２０、４０５）は、前記操作位置（Ｘ、Ｙ）から前記画面位置（Ｐ、Ｑ）への変換は、
   （Ｐ−Ｐ _Ｌ２ ）／（Ｐ _Ｒ２ −Ｐ _Ｌ２ ）＝（Ｘ−Ｘ _Ｌ ）／（Ｘ _Ｒ −Ｘ _Ｌ ）
   （Ｑ−Ｑ _Ｂ２ ）／（Ｑ _Ｔ２ −Ｑ _Ｂ２ ）＝（Ｙ−Ｙ _Ｂ ）／（Ｙ _Ｔ −Ｙ _Ｂ ）
   という２つの一次式を用いて変換するようになっていることを特徴とする請求項１に記載のユーザインターフェース装置。
4. 前記決定操作の対象となった前記部分表示画面内の前記複数のオブジェクトの選択領域の並び方向は縦方向であり、前記決定操作の対象となった前記部分表示画面内の前記複数のオブジェクトの選択領域の各々は縦方向に隣り合う選択領域と接触せず隙間によって隔てられており、前記決定操作の対象となった前記部分表示画面内の前記複数のオブジェクトの選択領域を、並びを維持したまま隙間を排して繋ぎ合わせた結果の総和となる領域は、１つの総和の矩形領域となり、
   前記可動範囲内の操作位置の横方向をＸ軸方向とし縦方向をＹ軸方向とし、前記可動範囲内の操作位置（Ｘ、Ｙ）の取り得る範囲をＸ _Ｌ ≦Ｘ≦Ｘ _Ｒ 、Ｙ _Ｂ ≦Ｙ≦Ｙ _Ｔ であるとし、前記表示画面内の横方向をＰ軸方向とし縦方向をＱ軸方向とし、前記総和の矩形領域内に相当する画面位置（Ｐ、Ｑ）の範囲を、Ｐ _Ｌ３ ≦Ｐ≦Ｐ _Ｒ３ 、Ｑ _Ｂ３ ≦Ｑ≦Ｑ _Ｔ３ とした場合、前記割り当て手段（２２０、４０５）は、前記操作位置（Ｘ、Ｙ）から前記画面位置（Ｐ、Ｑ）への変換は、
   （Ｐ−Ｐ _Ｌ３ ）／（Ｐ _Ｒ３ −Ｐ _Ｌ３ ）＝（Ｘ−Ｘ _Ｌ ）／（Ｘ _Ｒ −Ｘ _Ｌ ）
   （Ｑ−Ｑ _Ｂ３ ）／（Ｑ _Ｔ３ −Ｑ _Ｂ３ ）＝（Ｙ−Ｙ _Ｂ ）／（Ｙ _Ｔ −Ｙ _Ｂ ）
   という２つの一次式を用いて変換するようになっていることを特徴とする請求項１に記載のユーザインターフェース装置。

Images