JP2016212769A - 表示装置、表示装置の制御方法、及び、プログラム - Google Patents

Abstract

【課題】操作面に対する操作を行うことが可能な表示装置において、操作面の大きさに起因する操作性の制約を緩和し、操作の終了位置を操作者が容易に制御できるようにする。【解決手段】ＨＭＤ１００は、使用者に画像を視認させるとともに外景を透過する画像表示部２０を備える。ＨＭＤ１００は、操作を検出するトラックパッド１４を有する操作部と、画像表示部２０に操作対象の表示オブジェクトを表示する制御部と、を備える。制御部は、トラックパッド１４に対する操作に対応して表示オブジェクトの表示位置を変化させる制御を行い、トラックパッド１４における操作位置に基づき表示オブジェクトの移動方向を求め、トラックパッド１４に対する操作が終了するまで移動方向に表示オブジェクトを移動させる。【選択図】図１

Description

本発明は、表示装置、表示装置の制御方法、及び、プログラムに関する。

従来、コンピューター等を操作する入力デバイスとして、接触操作を検出する操作面を備えたものが知られている（例えば、特許文献１参照）。特許文献１は、マウスを用いて操作することを前提としたコンピューターをタッチパネル端末によって操作する構成を開示する。操作面に対する操作を検出する入力デバイスでは、操作面の大きさにより操作性が制約を受ける。この制約を解消するため、特許文献１記載の構成では、タッチパネルが接触を検出する部位が移動した速度から移動距離を算出し、この移動距離にしたがってコンピューター上でマウスポインターを移動させる。

特開２０１３−１４３０７６号公報

しかしながら、特許文献１記載のように、操作に関する速度からマウスポインター等の操作の指標を移動させる場合、この指標が停止する位置、すなわち操作の終了位置を操作者（ユーザー）が制御することが困難であった。
本発明は上記事情に鑑みてなされたものであり、操作面に対する操作を行うことが可能な表示装置において、操作面の大きさに起因する操作性の制約を緩和し、操作の終了位置を操作者が容易に制御できるようにすることを目的とする。

上記目的を達成するため、本発明は、表示部と、操作を検出する操作面を有する操作部と、前記表示部に操作対象の表示オブジェクトを表示させ、前記操作面に対する操作に対応して前記表示オブジェクトの表示位置を変化させる制御部と、を備え、前記制御部は、前記操作面における操作位置に基づき前記表示オブジェクトの移動方向を求め、前記操作面に対する操作が終了するまで前記移動方向に前記表示オブジェクトを移動させること、を特徴とする。
本発明によれば、操作対象の表示オブジェクトを、操作面における操作位置の移動量よりも大きく移動させることができ、操作面の大きさに起因する操作性の制約を緩和できる。さらに、表示オブジェクトの移動を停止する位置を容易に制御でき、操作性の向上を図ることができる。

また、本発明は、上記表示装置において、前記制御部は、前記表示オブジェクトの移動方向を、前記操作面における操作位置の移動方向に対応する方向にすること、を特徴とする。
本発明によれば、操作者が、操作対象の表示オブジェクトを意図した通りに動かすことができ、操作性の向上を図ることができる。

また、本発明は、上記表示装置において、前記制御部は、前記操作面に対する操作を検出した後、前記表示オブジェクトの移動方向を求める処理を行ってから、前記表示オブジェクトを移動させること、を特徴とする。
本発明によれば、操作対象の表示オブジェクトを適切な方向に移動させることができる。

また、本発明は、上記表示装置において、前記制御部は、前記操作面に対する操作を検出した後、前記表示オブジェクトの移動方向を求める処理を行う間、前記操作面の操作位置に対応する表示位置に前記表示オブジェクトを移動させること、を特徴とする。
本発明によれば、表示オブジェクトの移動方向を求める処理を行う間においても表示オブジェクトを適切に移動させることで、操作者が違和感なく操作を行える。また、短時間または操作位置の移動量が小さい操作に対応して表示オブジェクトを移動させることができる。

また、本発明は、上記表示装置において、前記制御部は、前記操作面における操作に応じて前記表示オブジェクトの移動速度を求め、求めた移動速度で前記移動方向に前記表示オブジェクトを移動させること、を特徴とする。
本発明によれば、操作者が表示オブジェクトの移動速度を制御できるので、より一層の操作性の向上を図ることができる。

また、本発明は、上記表示装置において、前記制御部は、前記表示オブジェクトの移動中における前記操作面の操作位置の変化に応じて、前記表示オブジェクトの移動速度を変化させること、を特徴とする。
本発明によれば、操作者が表示オブジェクトの移動速度を、より細かく制御できる。

また、本発明は、上記表示装置において、前記操作部および前記制御部は、前記操作面に対して操作体が接触した場合に接触操作を検出し、前記操作面から前記操作体が離れて接触が解除された場合に、前記操作の終了を検出すること、を特徴とする。
本発明によれば、操作者による操作の終了を確実に検出できるので、より一層の操作性の向上を図ることができる。

また、本発明は、上記表示装置において、前記操作面において前記操作部が操作を検出する面積またはサイズは、前記表示部が画像を表示する表示領域の面積またはサイズよりも小さいこと、を特徴とする。
本発明によれば、表示領域よりも小さい操作面を利用して、表示オブジェクトを任意に移動させることができ、操作性の向上を図ることができる。また、装置構成の自由度が高まるという利点がある。

また、本発明は、上記表示装置において、前記操作面の形状は、前記表示部が画像を表示する表示領域とは異なる形状であること、を特徴とする。
本発明によれば、表示領域と異なる形状の操作面を利用して、表示オブジェクトを任意に移動させることができ、操作性の向上を図ることができる。また、装置構成の自由度が高まるという利点がある。

また、上記目的を達成するため、本発明の表示装置の制御方法は、表示部と、操作を検出する操作面を有する操作部と、を有する表示装置を制御して、前記操作面に対する操作に対応して、前記表示部に操作対象位置の表示オブジェクトを表示し、前記操作面における操作位置に基づき前記表示オブジェクトの移動方向を求め、前記操作面に対する操作が終了するまで前記移動方向に前記表示オブジェクトを移動させること、を特徴とする。
本発明によれば、操作対象位置の表示オブジェクトを、操作面における操作位置の移動量よりも大きく移動させることができ、操作面の大きさに起因する操作性の制約を緩和できる。さらに、表示オブジェクトの移動を停止する位置を容易に制御でき、操作性の向上を図ることができる。

また、上記目的を達成するため、本発明は、表示部と、操作を検出する操作面を有する操作部と、を有する表示装置を制御するコンピューターが実行可能なプログラムであって、前記コンピューターを、前記操作面に対する操作に対応して、前記表示部に操作対象位置の表示オブジェクトを表示し、前記操作面における操作位置に基づき前記表示オブジェクトの移動方向を求め、前記操作面に対する操作が終了するまで前記移動方向に前記表示オブジェクトを移動させる制御部として機能させるプログラムである。
本発明のプログラムをコンピューターが実行することにより、コンピューターが表示する操作対象位置の表示オブジェクトを、操作面における操作位置の移動量よりも大きく移動させることができ、操作面の大きさに起因する操作性の制約を緩和できる。さらに、表示オブジェクトの移動を停止する位置を容易に制御でき、操作性の向上を図ることができる。

第１の実施形態のＨＭＤの外観構成を示す説明図。 第１の実施形態のＨＭＤを構成する各部の機能ブロック図。 トラックパッドの操作に対応するＨＭＤの動作を示す説明図であり、（Ａ）はトラックパッドの操作例を示し、（Ｂ）はトラックパッドの操作に対応するポインターＰの移動の例を示し、（Ｃ）はトラックパッドの操作に対するポインターの移動の別の例を示し、（Ｄ）はトラックパッドの操作に対しリング型ＵＩの表示を遷移させる例を示す。 第１の実施形態のＨＭＤの動作を示すフローチャート。 第２の実施形態のＨＭＤの動作を示すフローチャート。 第３の実施形態におけるトラックパッドにおける操作領域の設定状態を示す図。 第３の実施形態のＨＭＤの動作を示すフローチャート。 第４の実施形態のＨＭＤの動作を示すフローチャート。 本発明の実施形態の変形例を示す図。

［第１の実施形態］
以下、図面を参照して本発明の実施形態について説明する。
図１は、本発明を適用した第１の実施形態に係るＨＭＤ１００の外観構成を示す説明図である。ＨＭＤ１００は、頭部に装着する表示装置であり、ヘッドマウントディスプレイ（Head Mounted Display：頭部装着型表示装置）とも呼ばれる。本実施形態のＨＭＤ１００は、使用者が、虚像を視認すると同時に外景も直接視認可能な光学透過型の表示装置である。なお、本明細書では、ＨＭＤ１００によって使用者が視認する虚像を便宜的に「表示画像」とも呼ぶ。また、画像データに基づいて生成された画像光を射出することを「画像を表示する」ともいう。

ＨＭＤ１００は、使用者の頭部に装着された状態において使用者に虚像を視認させる画像表示部２０（表示部）と、画像表示部２０を制御する制御装置１０と、を備えている。制御装置１０は、使用者がＨＭＤ１００を操作するためのコントローラーとしても機能する。

画像表示部２０は、使用者の頭部に装着される装着体であり、本実施形態では眼鏡形状を有している。画像表示部２０は、右保持部２１と、右表示駆動部２２と、左保持部２３と、左表示駆動部２４と、右光学像表示部２６と、左光学像表示部２８と、カメラ６１と、マイク６３とを備える。右光学像表示部２６及び左光学像表示部２８は、それぞれ、使用者が画像表示部２０を装着した際に使用者の右及び左の眼前に位置するように配置されている。右光学像表示部２６の一端と左光学像表示部２８の一端とは、使用者が画像表示部２０を装着した際の使用者の眉間に対応する位置で、互いに接続される。

右保持部２１は、右光学像表示部２６の他端である端部ＥＲから、使用者が画像表示部２０を装着した際の使用者の側頭部に対応する位置にかけて、延伸して設けられた部材である。同様に、左保持部２３は、左光学像表示部２８の他端である端部ＥＬから、使用者が画像表示部２０を装着した際の使用者の側頭部に対応する位置にかけて、延伸して設けられた部材である。右保持部２１及び左保持部２３は、眼鏡のテンプル（つる）のようにして、使用者の頭部に画像表示部２０を保持する。

右表示駆動部２２と左表示駆動部２４とは、使用者が画像表示部２０を装着した際の使用者の頭部に対向する側に配置されている。なお、右表示駆動部２２及び左表示駆動部２４を総称して単に「表示駆動部」とも呼び、右光学像表示部２６及び左光学像表示部２８を総称して単に「光学像表示部」とも呼ぶ。

表示駆動部２２，２４は、液晶ディスプレイ２４１，２４２（Liquid Crystal Display、以下「ＬＣＤ２４１，２４２」とも呼ぶ）や投写光学系２５１，２５２等を含む（図２参照）。表示駆動部２２，２４の構成の詳細は後述する。光学部材としての光学像表示部２６，２８は、導光板２６１，２６２（図２参照）を備える。導光板２６１，２６２は、光透過性の樹脂等によって形成され、表示駆動部２２，２４から出力された画像光を使用者の眼に導く。本実施形態では、少なくとも、ＨＭＤ１００を装着した使用者が外の景色を視認できる程度の光透過性を有する右光学像表示部２６及び左光学像表示部２８を用いる場合について説明する。

カメラ６１は、右光学像表示部２６の他端である端部ＥＲに配置される。カメラ６１は、使用者の眼の側とは反対側方向の外部の景色である外景を撮像し、外景画像を取得する。図１に示す本実施形態のカメラ６１は、単眼カメラであるが、ステレオカメラであってもよい。
カメラ６１の撮影方向すなわち画角は、ＨＭＤ１００の表側方向、換言すれば、ＨＭＤ１００を装着した状態における使用者の視界方向の少なくとも一部の外景を撮影する方向である。また、カメラ６１の画角の広さは適宜設定可能であるが、カメラ６１の撮像範囲が、使用者が右光学像表示部２６、左光学像表示部２８を通して視認する外界を含む範囲であることが好ましい。さらに、右光学像表示部２６及び左光学像表示部２８を通した使用者の視界の全体を撮影できるようにカメラ６１の撮像範囲が設定されているとより好ましい。

画像表示部２０は、さらに、画像表示部２０を制御装置１０に接続するための接続部４０を有している。接続部４０は、制御装置１０に接続される本体コード４８と、右コード４２と、左コード４４と、連結部材４６とを備える。右コード４２と左コード４４とは、本体コード４８が２本に分岐したコードである。右コード４２は、右保持部２１の延伸方向の先端部ＡＰから右保持部２１の筐体内に挿入され、右表示駆動部２２に接続されている。同様に、左コード４４は、左保持部２３の延伸方向の先端部ＡＰから左保持部２３の筐体内に挿入され、左表示駆動部２４に接続される。

連結部材４６は、本体コード４８と、右コード４２及び左コード４４との分岐点に設けられ、イヤホンプラグ３０を接続するためのジャックを有している。イヤホンプラグ３０からは、右イヤホン３２及び左イヤホン３４が延伸している。イヤホンプラグ３０の近傍にはマイク６３が設けられている。イヤホンプラグ３０からマイク６３までは一本のコードにまとめられ、マイク６３からコードが分岐して、右イヤホン３２と左イヤホン３４のそれぞれに繋がっている。

マイク６３は、例えば図１に示すように、マイク６３の集音部が使用者の視線方向を向くように配置され、音声を集音して、音声信号を音声処理部１９０に出力する。マイク６３は、例えばモノラルマイクであってもステレオマイクであってもよく、指向性を有するマイクであってもよいし、無指向性のマイクであってもよい。

また、右コード４２と左コード４４とを一本のコードにまとめることも可能である。具体的には、右コード４２の内部の導線を、画像表示部２０の本体内部を通して左保持部２３側に引き込み、左コード４４内部の導線とともに樹脂で被覆して、一本のコードにまとめてもよい。

画像表示部２０と制御装置１０とは、接続部４０を介して各種信号の伝送を行なう。本体コード４８における連結部材４６とは反対側の端部と、制御装置１０とのそれぞれには、互いに嵌合するコネクター（図示略）が設けられている。本体コード４８のコネクターと制御装置１０のコネクターとの嵌合／嵌合解除により、制御装置１０と画像表示部２０とが接続されたり切り離されたりする。右コード４２と、左コード４４と、本体コード４８とには、例えば、金属ケーブルや光ファイバーを採用できる。

制御装置１０は、ＨＭＤ１００を制御するための装置である。制御装置１０は、決定キー１１、点灯部１２、表示切替キー１３、輝度切替キー１５、方向キー１６、メニューキー１７、及び電源スイッチ１８を含むスイッチ類を備える。また、制御装置１０は、使用者が指等の操作体によりタッチ操作するトラックパッド１４（操作面）を備える。

決定キー１１は、押下操作を検出して、制御装置１０で操作された内容を決定する信号を出力する。点灯部１２は、ＨＭＤ１００の動作状態を、その発光状態によって通知する。ＨＭＤ１００の動作状態としては、例えば、電源のＯＮ／ＯＦＦ等がある。点灯部１２としては、例えば、ＬＥＤ（Light Emitting Diode）が用いられる。表示切替キー１３は、押下操作を検出して、例えば、コンテンツ動画の表示モードを３Ｄと２Ｄとに切り替える信号を出力する。

トラックパッド１４は、トラックパッド１４の操作面上での使用者の指の操作を検出して、検出内容に応じた信号を出力する。トラックパッド１４としては、静電容量検出式や圧力検出式、光学式といった種々のトラックパッドを採用できる。トラックパッド１４が圧力検出式や光学式の場合、トラックパッド１４を操作する操作体は、使用者の指、ペン、ペン型の専用の指示器など多種のものを使用できる。トラックパッド１４が静電容量検出式の場合、操作体としては、指等の人体の一部、及び、静電容量式スタイラスペン等を使用できる。

輝度切替キー１５は、押下操作を検出して、画像表示部２０の輝度を増減する信号を出力する。方向キー１６は、上下左右方向に対応するキーへの押下操作を検出して、検出内容に応じた信号を出力する。電源スイッチ１８は、ＨＭＤ１００の電源投入状態を切り替えるスイッチであり、例えばスライド操作が可能な構成となっている。

図２は、ＨＭＤ１００を構成する各部の機能ブロック図である。
図２に示すように、ＨＭＤ１００は、インターフェイス１２５を介して外部機器ＯＡに接続される。インターフェイス１２５は、制御装置１０に対して、コンテンツの供給元となる種々の外部機器ＯＡを接続するためのインターフェイスである。インターフェイス１２５としては、例えば、ＵＳＢインターフェイス、マイクロＵＳＢインターフェイス、メモリーカード用インターフェイス等の有線接続に対応したインターフェイスを用いることができる。
外部機器ＯＡは、ＨＭＤ１００に画像を供給する画像供給装置として用いられ、例えば、パーソナルコンピューター（ＰＣ）や携帯電話端末、ゲーム端末等が用いられる。

ＨＭＤ１００の制御装置１０は、制御部１４０と、操作部１１１と、入力情報取得部１１０と、記憶部１２０と、送信部（Ｔｘ）５１及び送信部（Ｔｘ）５２とを有している。

操作部１１１は、使用者による操作を検出する。操作部１１１は、図１に示した決定キー１１、表示切替キー１３、トラックパッド１４、輝度切替キー１５、方向キー１６、メニューキー１７及び電源スイッチ１８の各操作子を含む。

入力情報取得部１１０は、操作部１１１の各操作子の操作を検出し、操作内容を示す操作データを制御部１４０に出力する。この操作データは、具体的には、操作された操作子を特定するデータと、操作子の操作の種別を示すデータとを含む。例えば、決定キー１１、表示切替キー１３、輝度切り換えキー１５、メニューキー１７、または電源スイッチ１８が操作された場合、入力情報取得部１１０は、操作されたキーやスイッチを示すデータと操作「有」を示すデータとを含む操作データを制御部１４０に出力する。また、例えば方向キー１６は４方向に操作可能であるため、入力情報取得部１１０は、方向キー１６の操作を検出すると、方向キー１６を示すデータと操作方向を示すデータとを制御部１４０に出力する。

トラックパッド１４に対する操作を検出した場合、入力情報取得部１１０は、トラックパッド１４において接触操作された位置を検出する。入力情報取得部１１０は、操作位置を示すデータと、操作された操作子がトラックパッド１４であることを示すデータとを含む操作データを制御部１４０に出力する。この操作データは、例えば、操作位置を、トラックパッド１４の操作エリアにおける座標として示すデータを含む。

記憶部１２０は、不揮発性の記憶装置であって、種々のコンピュータープログラムを格納している。また、記憶部１２０には、ＨＭＤ１００の画像表示部２０に表示する画像データが格納されていても良い。例えば、記憶部１２０は、ＨＭＤ１００の動作に係る設定値等を含む設定データ１２１、及び、制御部１４０が画像表示部２０に表示させる文字や画像のデータを含むコンテンツデータ１２３を記憶する。

また、制御部１４０には、３軸センサー１１３、ＧＰＳ１１５、通信部１１７及び音声認識部１１４が接続される。３軸センサー１１３は３軸の加速度センサーであり、３軸センサー１１３の検出値を制御部１４０が取得可能である。ＧＰＳ１１５は、アンテナ（図示略）を備え、ＧＰＳ（Global Positioning System）信号を受信し、制御装置１０の現在位置を求める。ＧＰＳ１１５は、ＧＰＳ信号に基づいて求めた現在位置や現在時刻を制御部１４０に出力する。また、ＧＰＳ１１５はＧＰＳ信号に含まれる情報に基づいて現在時刻を取得し、制御装置１０の制御部１４０が計時する時刻を修正させる機能を備えていてもよい。

通信部１１７は、無線ＬＡＮ（ＷｉＦｉ（登録商標））や、Ｍｉｒａｃａｓｔ（登録商標）等の無線通信の規格に準じた無線データ通信を実行する。また、通信部１１７は、Ｂｌｕｅｔｏｏｔｈ（登録商標）や、Ｂｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙ、ＲＦＩＤ、Ｆｅｌｉｃａ（登録商標）等の近距離無線通信の規格に準じた無線データ通信を実行することも可能である。
外部機器ＯＡが、通信部１１７に無線接続された場合には、制御部１４０は、コンテンツデータを通信部１１７より取得して、画像表示部２０に画像を表示するための制御を行う。一方、外部機器ＯＡが、インターフェイス１２５に有線接続された場合には、制御部１４０は、コンテンツデータをインターフェイス１２５より取得して、画像表示部２０に画像を表示するための制御を行う。よって、通信部１１７及びインターフェイス１２５を、以下総称してデータ取得部ＤＡと呼ぶ。
データ取得部ＤＡは、外部機器ＯＡからコンテンツデータを取得する。データ取得部ＤＡは、ＨＭＤ１００が表示する画像のデータを、外部機器ＯＡから取得する。

音声認識部１１４は、マイク６３により集音され、後述する音声処理部１９０によりディジタルデータに変換されたディジタル音声データから特徴を抽出してモデル化する。音声認識部１１４は、音声の特徴を抽出してモデル化することで、複数の人の声を別々に認識して、声ごとに話している人を特定する話者認識や、音声をテキストに変換するテキスト変換を行う。また、音声認識部１１４は、音声認識の処理において、音声データの言語の種類を識別できる構成であってもよい。

制御部１４０は、ハードウェアとして、ＣＰＵ、ＲＯＭ、ＲＡＭ（図示略）等を備える。制御部１４０は、記憶部１２０に格納されているコンピュータープログラムを読み出して実行することにより、オペレーティングシステム（ＯＳ）１５０、画像処理部１６０、表示制御部１７０、操作検出部１８３、ＧＵＩ制御部１８５、及び音声処理部１９０として機能する。

画像処理部１６０は、コンテンツを表示するための垂直同期信号ＶＳｙｎｃ、水平同期信号ＨＳｙｎｃ、クロック信号ＰＣＬＫ等、表示する画像の画像データ（図中、Ｄａｔａ）を出力する。
画像処理部１６０の処理によって表示されるコンテンツの画像データは、インターフェイス１２５や通信部１１７を介して受信する他、制御部１４０の処理によって生成される画像データであってもよい。例えば、ゲームのアプリケーションプログラムの実行中に、操作部１１１の操作に対応して画像データを生成して表示することができる。
なお、画像処理部１６０は、必要に応じて、画像データに対して、解像度変換処理や、輝度、彩度の調整といった種々の色調補正処理、キーストーン補正処理等の画像処理を実行してもよい。

画像処理部１６０は、生成されたクロック信号ＰＣＬＫ、垂直同期信号ＶＳｙｎｃ、水平同期信号ＨＳｙｎｃ、記憶部１２０内のＤＲＡＭに格納された画像データＤａｔａのそれぞれを、送信部５１、５２を介して送信する。なお、送信部５１を介して送信される画像データＤａｔａを「右眼用画像データ」とも呼び、送信部５２を介して送信される画像データＤａｔａを「左眼用画像データ」とも呼ぶ。送信部５１、５２は、制御装置１０と画像表示部２０との間におけるシリアル伝送のためのトランシーバーとして機能する。

表示制御部１７０は、右表示駆動部２２及び左表示駆動部２４を制御する制御信号を生成する。具体的には、表示制御部１７０は、制御信号により、右ＬＣＤ制御部２１１による右ＬＣＤ２４１の駆動ＯＮ／ＯＦＦ、右バックライト制御部２０１による右バックライト２２１の駆動ＯＮ／ＯＦＦを個別に制御する。また、表示制御部１７０は、左ＬＣＤ制御部２１２による左ＬＣＤ２４２の駆動ＯＮ／ＯＦＦ、左バックライト制御部２０２による左バックライト２２２の駆動ＯＮ／ＯＦＦを個別に制御する。
これにより、表示制御部１７０は、右表示駆動部２２及び左表示駆動部２４のそれぞれによる画像光の生成および射出を制御する。例えば、表示制御部１７０は、右表示駆動部２２及び左表示駆動部２４の両方に画像光を生成させたり、一方のみに画像光を生成させたりする。また、表示制御部１７０は、右表示駆動部２２及び左表示駆動部２４の両方共に画像光を生成させないようにすることもできる。
また、表示制御部１７０は、右ＬＣＤ制御部２１１に対する制御信号と、左ＬＣＤ制御部２１２に対する制御信号とのそれぞれを、送信部５１と送信部５２とを介して送信する。また、表示制御部１７０は、右バックライト制御部２０１に対する制御信号を右バックライト制御部２０１に送信し、左バックライト制御部２０２に対する制御信号を左バックライト制御部２０２により送信する。

表示制御部１７０は、画像表示部２０によりＡＲコンテンツを表示する。ＡＲコンテンツは、使用者が画像表示部２０越しに対象物を見ている状態で、対象物が視認される位置に対応して表示される文字や画像を含む。例えば、画像表示部２０を透過して見える外景中の対象物、すなわち実空間に存在する対象物に重なって、或いは対象物を避けるように、ＡＲコンテンツが表示される。表示制御部１７０は、対象物に対応する位置に画像や文字等を表示するＡＲ表示を行うことで、対象物に関する情報を提供し、或いは、画像表示部２０越しに見える対象物の姿の見え方を変える。
ＡＲコンテンツの表示位置は対象物に重なる位置であっても対象物の周囲であってもよい。対象物は物体であればよく、建物の壁面など移動不可能なものであってもよいし、自然物であってもよい。

ＡＲコンテンツは、記憶部１２０に記憶されるコンテンツデータ１２３、または、制御部１４０の処理により生成されるデータに基づき表示される。これらのデータは画像データやテキストデータを含むことができる。

表示制御部１７０は、使用者が対象物を視認する位置を検出し、検出した位置に対応するようにＡＲコンテンツの表示位置を決定する。使用者が対象物を視認する位置を検出する方法は任意であるが、本実施形態では、表示制御部１７０がカメラ６１の撮像画像データから、使用者の視界に位置する対象物を検出する。撮像画像データを解析して対象物の画像を抽出あるいは検出する処理では、対象物の画像の形状、色、大きさ等に関する特徴量のデータが使用される。これらのデータは、コンテンツデータ１２３に含めることができる。表示制御部１７０は、カメラ６１の撮像画像データから対象物の画像を検出し、検出した対象物の画像と撮像画像全体との位置関係に基づき、カメラ６１の撮像範囲における対象物の位置を特定する。そして、表示制御部１７０は、カメラ６１の撮像範囲と、画像表示部２０の表示領域との位置関係に基づき、対象物の位置に対応するＡＲコンテンツの表示位置を決定する。

音声処理部１９０は、コンテンツに含まれる音声信号を取得し、取得した音声信号を増幅して、連結部材４６に接続された右イヤホン３２内のスピーカー（図示略）及び左イヤホン３４内のスピーカー（図示略）に対して供給する。なお、例えば、Ｄｏｌｂｙ（登録商標）システムを採用した場合、音声信号に対する処理がなされ、右イヤホン３２及び左イヤホン３４のそれぞれから、例えば周波数等が変えられた異なる音が出力される。

画像表示部２０は、インターフェイス２５と、右表示駆動部２２と、左表示駆動部２４と、右光学像表示部２６としての右導光板２６１と、左光学像表示部２８としての左導光板２６２と、カメラ６１と、振動センサー６５と、９軸センサー６６とを備えている。

振動センサー６５は、加速度センサーを利用して構成され、画像表示部２０の内部に配置される。振動センサー６５は、例えば、右保持部２１において右光学像表示部２６の端部ＥＲの近傍に内蔵される。振動センサー６５は、使用者が端部ＥＲを叩く操作（ノック操作）を行った場合に、この操作による振動を検出して、検出結果を制御部１４０に出力する。この振動センサー６５の検出結果により、制御部１４０は、使用者によるノック操作を検出する。

９軸センサー６６は、加速度（３軸）、角速度（３軸）、地磁気（３軸）を検出するモーションセンサーである。９軸センサー６６は、画像表示部２０に設けられているため、画像表示部２０が使用者の頭部に装着されているとき、制御部１４０は、９軸センサー６６の検出値に基づいて使用者の頭部の動きを検出できる。検出された使用者の頭部の動きから画像表示部２０の向きがわかるため、制御部１４０は、使用者の視線方向を推定できる。

インターフェイス２５は、右コード４２と左コード４４とが接続されるコネクターを備える。インターフェイス２５は、送信部５１から送信されるクロック信号ＰＣＬＫ、垂直同期信号ＶＳｙｎｃ、水平同期信号ＨＳｙｎｃ、画像データＤａｔａを、対応する受信部（Ｒｘ）５３、５４に出力する。また、インターフェイス２５は、表示制御部１７０から送信される制御信号を、対応する受信部５３、５４、右バックライト制御部２０１又は左バックライト制御部２０２に出力する。
また、インターフェイス２５は、カメラ６１、振動センサー６５及び９軸センサー６６のインターフェイスである。振動センサー６５による振動の検出結果や、９軸センサー６６による加速度（３軸）、角速度（３軸）、地磁気（３軸）の検出結果は、インターフェイス２５を介して制御装置１０の制御部１４０に送られる。

右表示駆動部２２は、受信部５３と、光源として機能する右バックライト（ＢＬ）制御部２０１及び右バックライト（ＢＬ）２２１と、表示素子として機能する右ＬＣＤ制御部２１１及び右ＬＣＤ２４１と、右投写光学系２５１とを備える。右バックライト制御部２０１と右バックライト２２１とは、光源として機能する。右ＬＣＤ制御部２１１と右ＬＣＤ２４１とは、表示素子として機能する。なお、右バックライト制御部２０１と、右ＬＣＤ制御部２１１と、右バックライト２２１と、右ＬＣＤ２４１とを総称して「画像光生成部」とも呼ぶ。

受信部５３は、制御装置１０と画像表示部２０との間におけるシリアル伝送のためのレシーバーとして機能する。右バックライト制御部２０１は、入力された制御信号に基づいて、右バックライト２２１を駆動する。右バックライト２２１は、例えば、ＬＥＤやエレクトロルミネセンス（ＥＬ）等の発光体である。右ＬＣＤ制御部２１１は、受信部５３を介して入力されたクロック信号ＰＣＬＫと、垂直同期信号ＶＳｙｎｃと、水平同期信号ＨＳｙｎｃと、右眼用画像データＤａｔａとに基づいて、右ＬＣＤ２４１を駆動する。右ＬＣＤ２４１は、複数の画素をマトリクス状に配置した透過型液晶パネルである。

右投写光学系２５１は、右ＬＣＤ２４１から射出された画像光を並行状態の光束にするコリメートレンズによって構成される。右光学像表示部２６としての右導光板２６１は、右投写光学系２５１から出力された画像光を、所定の光路に沿って反射させつつ使用者の右眼ＲＥに導く。

左表示駆動部２４は、右表示駆動部２２と同様の構成を有している。左表示駆動部２４は、受信部５４と、光源として機能する左バックライト（ＢＬ）制御部２０２及び左バックライト（ＢＬ）２２２と、表示素子として機能する左ＬＣＤ制御部２１２及び左ＬＣＤ２４２と、左投写光学系２５２と、を備える。左バックライト制御部２０２と左バックライト２２２とは、光源として機能する。左ＬＣＤ制御部２１２と左ＬＣＤ２４２とは、表示素子として機能する。また、左投写光学系２５２は、左ＬＣＤ２４２から射出された画像光を並行状態の光束にするコリメートレンズによって構成される。左光学像表示部２８としての左導光板２６２は、左投写光学系２５２から出力された画像光を、所定の光路に沿って反射させつつ使用者の左眼ＬＥに導く。

制御部１４０は、画像表示部２０により、ＡＲコンテンツの他、ＧＵＩ（Graphical User Interface）を表示できる。ＧＵＩ制御部１８５は、画像表示部２０によるＧＵＩの表示を制御し、ＧＵＩ操作用の指標（ＧＵＩ操作の操作位置の指標）であるマーカー、ポインター（いわゆるマウスポインターを含む）、アイコン等の画像や文字を含むＧＵＩオブジェクトを表示する。ＧＵＩオブジェクトは本発明の表示オブジェクトに相当する。
ＧＵＩ制御部１８５は、操作部１１１の操作に対応して、ＧＵＩオブジェクトの表示状態を更新する。本実施形態において、ＧＵＩ制御部１８５は、トラックパッド１４で操作された操作位置に対応してポインターを表示する。画像表示部２０の表示領域におけるポインターの表示位置と、トラックパッド１４における操作位置とは、予め対応付けられている。ＧＵＩ制御部１８５は、操作検出部１８３からトラックパッド１４の操作位置の座標が入力されると、入力された操作位置に対応する表示位置に、ポインターを表示し、或いは、表示中のポインターの表示位置を変更する。

操作検出部１８３は、入力情報取得部１１０から入力される操作データに基づいて、操作部１１１の各操作子に対して行われる操作を検出し、操作に対応して制御部１４０が実行する処理を決定する。
操作検出部１８３は、操作データを解析して、操作された操作子が決定キー１１、表示切替キー１３、輝度切り換えキー１５、メニューキー１７、または電源スイッチ１８である場合、これらの操作に対応する処理を選択する。決定キー１１の操作に対しては、ＧＵＩ制御部１８５の制御により表示されるメニュー画面等に対する決定処理が選択される。表示切替キー１３が操作された場合には、表示する画面を切り替える処理が選択される。例えば、操作検出部１８３は、ＧＵＩ制御部１８５の制御により画面を表示する状態と、コンテンツデータ１２３を表示する状態とを含む複数の表示状態を順次切り替える処理を選択する。輝度切り換えキー１５が操作された場合には、画像表示部２０における表示輝度を調整する処理が選択される。具体的には、表示制御部１７０が画像処理部１６０を制御して、右表示駆動部２２及び左表示駆動部２４に出力される画像データの輝度を変化させる処理が選択される。或いは、表示制御部１７０が右バックライト制御部２０１、左バックライト制御部２０２の輝度を変更する処理が選択される。

方向キー１６が操作された場合、操作検出部１８３は、方向キー１６の操作方向に対応して、ＧＵＩ制御部１８５の制御により表示されるメニュー画面等に対する処理等を選択する。電源スイッチ１８が操作された場合、操作検出部１８３は、ＨＭＤ１００の電源をオフにするシャットダウン処理、或いは、ＨＭＤ１００の電源をオンにする起動シーケンスを選択する。

トラックパッド１４が操作された場合、操作検出部１８３は、トラックパッド１４の操作位置の座標に対応して、ＧＵＩ制御部１８５が表示処理を行う座標を求める。
本実施形態では、ＧＵＩ制御部１８５が、トラックパッド１４の操作位置に対応してポインターを表示し、ポインターの表示位置を変更する。従って、制御装置１０を操作する使用者（ユーザー、操作者）が、トラックパッド１４に接触する操作（タッチ操作）を行うと、画像表示部２０に表示されるポインターが移動する。

図３は、トラックパッド１４の操作に対応するＨＭＤ１００の動作を示す説明図であり、（Ａ）はトラックパッド１４の操作例を示し、（Ｂ）はトラックパッド１４の操作に対応するポインターＰの移動の例を示す。図３（Ｃ）はトラックパッド１４の操作に対するポインターＰの移動の別の例を示し、（Ｄ）はトラックパッド１４の操作に対しリング型ＵＩ（User Interface）の表示を遷移させる例を示す。

トラックパッド１４に対する操作には、例えば図３（Ａ）に示すように、トラックパッド１４に指等を接触させたまま移動させる動きがある。図３（Ａ）には、使用者の手Ｈにより、操作位置Ａ１から操作位置Ａ２まで操作が行われた例を示す。図中に符号Ｘ、Ｙで示すように、本実施形態では、トラックパッド１４の左上隅を基準位置（例えば、原点）とするＸ−Ｙ直交座標が設定され、トラックパッド１４の操作位置がＸ座標、Ｙ座標で示される。

トラックパッド１４を操作する場合の操作体（例えば、手Ｈ）の動きを、ジェスチャーと呼ぶ。ジェスチャーには、トラックパッド１４に接触する動き、図３（Ａ）のように操作体が接触したまま移動する動き等がある。本実施形態では、操作体が図３（Ａ）のように移動する動きを、スライドジェスチャーと呼ぶ。
トラックパッド１４が、複数の位置に対する同時操作を検出可能な、マルチタッチ対応型の場合、複数の操作体がトラックパッド１４に接触し、これら複数の操作体の接触位置が移動するジェスチャーを行うことができる。

ＧＵＩ制御部１８５は、操作データに含まれる操作位置の座標に対応する位置に、図３（Ｂ）に示すようにポインターＰを表示する。図３（Ｂ）には、画像表示部２０を装着する使用者の視野ＶＲを示し、右表示駆動部２２、左表示駆動部２４が画像を表示可能な表示可能領域を符号Ｄで示す。なお、本実施形態では画像表示部２０の右表示駆動部２２、及び左表示駆動部２４のいずれにも同じ表示を行うため、図３（Ｂ）では右表示駆動部２２と左表示駆動部２４とを区別しない。

ＧＵＩ制御部１８５が表示制御部１７０及び画像処理部１６０を制御することにより、表示可能領域Ｄには、ポインターＰが表示される。ポインターＰは、ＧＵＩの操作用に表示され、表示領域における操作対象位置を示す指標であり、表示オブジェクトに対応する。ポインターＰは、トラックパッド１４の操作位置に対応する位置に表示され、移動される。図３（Ａ）に示すように、操作位置Ａ１から操作位置Ａ２まで手Ｈによる操作が行われた場合、ＧＵＩ制御部１８５は、操作位置Ａ１に対応する表示位置Ｂ１から表示位置Ｂ２にポインターＰを移動させる。

トラックパッド１４における操作位置の座標と、表示可能領域Ｄにおける表示位置の座標とは予め対応付けられる。ＧＵＩ制御部１８５はトラックパッド１４の操作位置の座標を操作検出部１８３から取得し、取得した座標に対応する表示可能領域Ｄ上の座標を算出する。ＧＵＩ制御部１８５は、表示可能領域Ｄ上の座標に対応する右ＬＣＤ２４１及び左ＬＣＤ２４２における表示位置を求め、この表示位置にポインターＰの画像を表示させる。これにより、操作に対応してポインターＰの表示位置が移動する。

図１を参照して説明したように、制御装置１０は使用者が携帯する装置であり、トラックパッド１４を大型化することは容易でないため、使用者が視野ＶＲにおいて視認する表示可能領域Ｄの大きさに比べ、トラックパッド１４は小さい。
そこで、本実施形態では、操作検出部１８３の処理により、トラックパッド１４における操作位置と、表示可能領域Ｄの表示位置との対応を変化させる。

入力操作に対する通常処理において、操作検出部１８３は、トラックパッド１４において実際に検出される操作位置の座標を、ＧＵＩ制御部１８５に渡す。操作検出部１８３は、スライドジェスチャーに対応して、通常処理とは異なる入力処理を行うことができる。この入力処理で、操作検出部１８３は、入力情報取得部１１０から入力される操作データに含まれる操作位置の座標ではなく、操作検出部１８３が生成する操作位置の座標を、ＧＵＩ制御部１８５に渡す。従って、ＧＵＩ制御部１８５は、通常処理でも、通常処理とは異なる入力処理でも、操作検出部１８３から渡される操作位置の座標に基づきポインターＰを表示すればよい。

操作検出部１８３は、入力情報取得部１１０から入力される操作データを解析して、図３（Ａ）に示すようにスライドジェスチャーを検出した場合、このスライドジェスチャーにおける移動方向に基づき、ポインターＰを移動する方向を求める。そして、操作検出部１８３は、スライドジェスチャーが終了しても操作体がトラックパッド１４に接触している間は、スライドジェスチャーが継続しているように操作位置の座標を出力する。つまり、操作体の動きが止まっても、操作体が動いている場合と同様に座標を変化させて出力する。これにより、操作体がトラックパッド１４から離れるまでの間、表示可能領域Ｄにおいて、ポインターＰが移動を続ける。
また、操作検出部１８３は、トラックパッド１４の操作がスライドジェスチャーに該当しない操作である場合、操作位置の座標をＧＵＩ制御部１８５に渡す。
これにより、使用者は、スライドジェスチャーを意図して行うことにより、実際の操作体の移動量よりも大きくポインターＰを移動させることができる。また、操作体をトラックパッド１４から離すことでポインターＰを停止させることができ、ポインターＰの停止位置を高精度で制御できる。

図４はＨＭＤ１００の動作を示すフローチャートであり、トラックパッド１４の操作に対しポインターＰの表示位置を制御する動作を示す。
制御部１４０は、入力情報取得部１１０から入力される操作データに基づいてトラックパッド１４へのタッチ操作を検出すると（ステップＳ１１）、操作位置の座標を取得する（ステップＳ１２）。制御部１４０は、操作位置が移動しているか否か、すなわち、スライドジェスチャーに該当するか否かの判定を行う（ステップＳ１３）。例えば、設定された時間内に操作位置の座標が閾値以上の変化をした場合に、スライドジェスチャーと判定することができ、スライドジェスチャーの判定の条件は設定データ１２１に含めて記憶することができる。

スライドジェスチャーでないと判定した場合（ステップＳ１３；Ｎｏ）、制御部１４０は、トラックパッド１４上の操作位置に対応する表示可能領域Ｄの表示位置に、ポインターＰを移動させ（ステップＳ１４）、本処理を終了する。

トラックパッド１４への操作がスライドジェスチャーであると判定した場合（ステップＳ１３；ＹＥＳ）、制御部１４０は、操作位置が停止するまで待機する（ステップＳ１５）。この待機中、制御部１４０は、入力情報取得部１１０からの操作データに基づき操作位置の検出を継続して行う。

操作位置が停止した場合（ステップＳ１５；ＹＥＳ）、制御部１４０は、スライドジェスチャーに対応するポインターＰの移動パラメーターを算出する（ステップＳ１６）。ポインターＰの移動パラメーターは、移動方向を示すデータ、及び、移動速度を示すデータを含む。

例えば、制御部１４０は、ポインターＰの移動方向を、ステップＳ１１〜Ｓ１５で検出したスライドジェスチャーの移動方向を同じ方向に決定し、移動パラメーターを生成する。トラックパッド１４に対するスライドジェスチャーの方向は、図３（Ａ）に示すＸ方向に限定されず、Ｙ方向や斜め方向であってもよく、特に制限されない。ポインターＰの移動方向は、スライドジェスチャーの方向に対応していればよく、表示可能領域Ｄに表示可能であればどの方向でもよい。

また、例えば、制御部１４０は、ポインターＰの移動速度を、ステップＳ１１〜Ｓ１５で検出したスライドジェスチャーの移動量（操作量）に対応する速度に決定し、移動パラメーターを生成する。より具体的には、スライドジェスチャーの移動量が大きいほど、ポインターＰの移動速度が高速になるよう移動速度を決定してもよい。また、ポインターＰの移動速度を一定としてもよく、この場合、制御部１４０は、設定データ１２１に予め設定されたデフォルトの移動速度を決定する。

制御部１４０は、右表示駆動部２２及び左表示駆動部２４によりポインターＰを表示させ、ステップＳ１６で算出した移動パラメーターに従って、ポインターＰの表示位置を移動する処理を開始する（ステップＳ１７）。制御部１４０は、トラックパッド１４への接触の解除を監視し（ステップＳ１８）、トラックパッド１４への接触が解除されるまで、ポインターＰの移動を継続する（ステップＳ１８；Ｎｏ）。
トラックパッド１４への接触が解除されたことを検出すると（ステップＳ１８；ＹＥＳ）、制御部１４０は、ポインターＰの移動を停止させ（ステップＳ１９）、本処理を終了する。

この図４に示した動作は、ポインターＰの移動だけでなく、例えば、リング状のＵＩに適用できる。
図３（Ｄ）には、リング型のＵＩの例を示す。リング型のＵＩは、複数の画面、或いは画像や文字等の表示オブジェクトを、リング状に配置し、リングの特定位置にある画面または表示オブジェクトが、大きく表示されるインターフェイスである。図３（Ｄ）には画面Ｍ１〜Ｍ６の６つの画面が表示用の画面として用意され、左右方向への操作に対応して、画面Ｍ１〜Ｍ６が順に、画像表示部２０により拡大表示される。また、画面Ｍ１〜Ｍ６は、図中右方向にも、左方向にも、順に切り替えて表示できる。

このリング状のＵＩをＧＵＩ制御部１８５が表示させる場合に、トラックパッド１４のスライドジェスチャーに対応して、画面Ｍ１〜Ｍ６を順に切り替えて表示できる。図３（Ｄ）のリング型のＵＩでは、画面Ｍ１〜Ｍ６のそれぞれは本発明の表示オブジェクトに相当し、ＧＵＩ制御部１８５は、トラックパッド１４の操作に対応して、それぞれの画面Ｍ１〜Ｍ６の表示位置を移動させる。また、図４の動作を適用すれば、トラックパッド１４のスライドジェスチャーが検出された場合に、画面Ｍ１、Ｍ２、Ｍ３…が順次切り替えられ、トラックパッド１４の接触が解除されるまで画面の切り替えが継続する。そして、使用者が操作体をトラックパッド１４から離すと、画面の切り替えが停止する。このように、ポインターＰの表示位置の移動に限らず、本発明を適用してトラックパッド１４の操作性の向上を図ることができる。また、図３（Ｄ）のリング型のＵＩを採用する場合、ＧＵＩ制御部１８５は、画面Ｍ１〜Ｍ６のうち、特定の位置に表示される画面を操作対象としてもよい。特定の位置とは、例えば表示画面の中央であり、他の画面より大きく、使用者の正面に表示される画面が操作対象となる。この場合、トラックパッド１４に対する操作の方向に対応して、操作対象の画面の表示位置が移動し、他の画面の表示位置は捜査対象の画面の表示位置の変化に応じて適宜移動される。

本実施形態の制御部１４０は、トラックパッド１４に対する操作がスライドジェスチャーでないと判定した場合（ステップＳ１３；Ｎｏ）、トラックパッド１４上の操作位置に対応する表示可能領域Ｄの表示位置に、ポインターＰを移動させる（ステップＳ１４）。つまり、本実施形態では一例として、入力情報取得部１１０がトラックパッド１４における操作位置の座標を制御部１４０に出力するよう構成され、トラックパッド１４は絶対座標を入力するデバイスとして機能する。ＨＭＤ１００の構成はこれに限定されない。例えば、入力情報取得部１１０が、トラックパッド１４における操作位置の変化を検出値として制御部１４０に出力し、制御部１４０が操作位置の変化量を入力として受け付ける構成としてもよい。つまり、トラックパッド１４が、マウス等と同様の相対位置を入力する入力デバイスとして機能する構成であってもよい。

以上説明したように、本発明を適用した実施形態のＨＭＤ１００は、使用者に画像を視認させるとともに外景を透過する画像表示部２０を備える。ＨＭＤ１００は、操作を検出するトラックパッド１４を有する操作部１１１と、画像表示部２０にポインターＰ等の操作対象の表示オブジェクトを表示する制御部１４０と、を備える。制御部１４０は、トラックパッド１４に対する操作に対応して、表示オブジェクトであるポインターＰの表示位置を変化させる。制御部１４０は、トラックパッド１４における操作位置に基づきポインターＰの移動方向を求め、トラックパッド１４に対する操作が終了するまで、求めた移動方向にポインターＰを移動させる。別の表現をすれば、制御部１４０は、操作面であるトラックパッド１４に対する操作が終了するまで、表示オブジェクトであるポインターＰが慣性を保つように、ポインターＰの表示位置を移動させる。このため、ポインターＰを、トラックパッド１４における操作位置の移動量よりも大きく移動させることができ、トラックパッド１４の大きさに起因する操作性の制約を緩和できる。さらに、ポインターＰの移動を停止する位置を容易に制御でき、操作性の向上を図ることができる。

また、制御部１４０は、ポインターＰの移動方向を、トラックパッド１４における操作位置の移動方向に対応する方向にするので、操作者が、ポインターＰを意図した通りに動かすことができ、操作性の向上を図ることができる。
また、制御部１４０は、トラックパッド１４に対するスライドジェスチャーの操作を検出した後、ポインターＰの移動方向を求める処理を行ってから、ポインターＰを移動させるので、ポインターＰを適切な方向に移動させることができる。

また、操作部１１１および制御部１４０は、トラックパッド１４に対する接触操作を検出し、トラックパッド１４への接触が解除された場合に、操作の終了を検出するので、操作者による操作の終了を確実に検出でき、より一層の操作性の向上を図ることができる。

本実施形態で、制御部１４０は、ステップＳ１１でトラックパッド１４に対する操作を検出した後、ステップＳ１６でポインターＰの移動方向を求める処理を行う間、トラックパッド１４の操作位置に対応する表示位置にポインターＰを移動させてもよい。この場合、ポインターＰの移動方向を求める処理を行う間においてもポインターＰを適切に移動させることで、操作者が違和感なく操作を行える。また、短時間または操作位置の移動量が小さい操作に対応してポインターＰを移動させることができる。この場合のポインターＰの移動は、トラックパッド１４の操作位置に対応する表示可能領域Ｄの表示位置にポインターＰを移動させる制御により実現すればよい。

また、制御部１４０は、トラックパッド１４における操作に応じてポインターＰの移動速度を求め、求めた移動速度で移動方向にポインターＰを移動させてもよい。この場合、操作者がポインターＰの移動速度を制御できるので、より一層の操作性の向上を図ることができる。

また、制御部１４０は、トラックパッド１４における操作位置の移動を検出した後、操作が終了するまでポインターＰを移動させるので、トラックパッド１４は、例えば画像表示部２０が画像を表示する領域に比べて小さくてもよい。トラックパッド１４は、制御部１４０が操作位置の移動の方向を検出可能なサイズがあればよく、言い換えれば、トラックパッド１４のサイズよりも大きくポインターＰを移動させることができる。従って、ＨＭＤ１００の構成においてトラックパッド１４が小さくても、ポインターＰを任意に移動させることができ、操作性の向上を図ることができる。また、ＨＭＤ１００の構成の自由度が高まるという利点がある。

［第２の実施形態］
図５は、本発明を適用した第２の実施形態に係るＨＭＤ１００の動作を示すフローチャートである。
本第２の実施形態において、ＨＭＤ１００の構成は第１の実施形態と同様である。このため、ＨＭＤ１００の構成に関して図示及び説明を省略する。

図５に示す動作のステップＳ１１〜Ｓ１９は、上記第１の実施形態と同様である。
本第２の実施形態において、ＨＭＤ１００の制御部１４０は、ポインターＰの移動を開始してから、トラックパッド１４で逆方向のスライドジェスチャーが行われると、ポインターＰの移動速度を変更する。

すなわち、制御部１４０は、トラックパッド１４への接触の解除を監視し（ステップＳ１８）、トラックパッド１４への接触が解除されるまで、ポインターＰの移動を継続する。トラックパッド１４への接触が解除されない場合（ステップＳ１８；Ｎｏ）、制御部１４０は、トラックパッド１４の操作位置が、逆方向に移動したか否かを判定する（ステップＳ２１）。「逆方向」とは、ステップＳ１３で検出した方向、或いは、ポインターＰの移動方向に対応する方向に対して逆の方向を指す。また、ステップＳ２１では、トラックパッド１４における操作位置が正確に逆方向に移動した場合に限らず、逆方向と見なすことができる範囲の操作位置の移動を、逆方向の移動と判定してもよい。また、ポインターＰの移動方向から所定角度以上の方向の違いを有する操作を、逆方向の移動と判定してもよい。また、ステップＳ２１では、トラックパッド１４の操作位置の移動量に基づく判定を行ってもよい。例えば、操作位置の移動量が予め設定された閾値より小さい場合に、逆方向の移動と判定しない構成としてもよい。

制御部１４０は、トラックパッド１４の操作位置が逆方向に移動したと判定した場合（ステップＳ２１；ＹＥＳ）、ポインターＰの移動速度に関する移動パラメーターを変更し、変更後の移動パラメーターに基づきポインターＰを移動させて（ステップＳ２２）、ステップＳ１８に戻る。また、トラックパッド１４の操作位置が逆方向に移動したと判定しない場合（ステップＳ２１；Ｎｏ）、ステップＳ１８に戻る。

ステップＳ２２では、例えば、ポインターＰの移動速度を段階的に変更可能であり、移動速度を１段階低下させることができる。この場合、操作位置を逆方向に移動させる操作を、制御部１４０が１回検出する毎に、ポインターＰの移動速度が１段階低下するので、ポインターＰの移動速度を使用者が容易に制御できる。

このように、制御部１４０が、ポインターＰの移動中におけるトラックパッド１４の操作位置の変化に応じて、ポインターＰの移動速度を変化させることで、操作者がポインターＰの移動速度を、より細かく制御できる。

また、本実施形態において、制御部１４０は、操作体による操作位置が逆方向に移動したと判定した場合に、表示オブジェクトであるポインターＰの移動速度を低速に変化させる例を説明した。この場合、ポインターＰの移動速度を変化させた後で、トラックパッド１４の操作位置が正方向に移動した場合に、ポインターＰの移動速度を復帰させてもよい。また、回数の限定なく、操作位置の正方向の移動を検出する毎にポインターＰの移動速度を増速し、操作位置の逆方向の移動を検出する毎にポインターＰに移動速度を減速してもよい。また、トラックパッド１４において操作体が接触する領域の面積を、入力情報取得部１１０及び制御部１４０が検出可能な構成において、接触する面積の変化によりポインターＰの移動速度を変化させてもよい。例えば、接触面積が小さく変化した場合はポインターＰの移動速度を減速させてもよい。また、接触面積が大きくなった場合はポインターＰの移動速度を増速させてもよい。このほか、ポインターＰを移動させる速度を、トラックパッド１４に対する操作態様に応じて変化させる具体的な態様は任意に変更可能である。

［第３の実施形態］
図６は、本発明を適用した第３の実施形態におけるトラックパッド１４における操作領域の設定状態を示す図であり、図７は、ＨＭＤ１００の動作を示すフローチャートである。本第３の実施形態において、ＨＭＤ１００の構成は第１の実施形態と同様である。このため、ＨＭＤ１００の構成に関して図示及び説明を省略する。

図６に示すように、第３の実施形態では、トラックパッド１４に複数の操作領域Ｃが設定される。操作領域Ｃは、トラックパッド１４における座標により指定され、それぞれの操作領域Ｃと他の領域との境界の座標が、例えば設定データ１２１に設置される。

操作領域Ｃ１は、第１及び第２実施形態で説明したように、トラックパッド１４の操作位置が移動しない間もポインターＰを移動させる制御の対象となる領域である。これに対し、操作領域Ｃ１以外の領域、すなわち操作領域Ｃ２は、表示可能領域ＤにおけるポインターＰの表示位置が、トラックパッド１４の操作位置に対応するように制御する領域である。

制御部１４０は、操作領域Ｃ１においてスライドジェスチャーが行われた場合に、第１の実施形態で説明した処理を実行する。また、操作領域Ｃ２では、スライドジェスチャーが行われても、トラックパッド１４の操作位置に対応する位置にポインターＰを移動させる、通常処理を実行する。この動作を図７に示す。

図７に示す動作のステップＳ１１〜Ｓ１９は、上記第１の実施形態と同様である。
本第３の実施形態において、ＨＭＤ１００の制御部１４０は、トラックパッド１４への操作がスライドジェスチャーであると判定した場合（ステップＳ１３；ＹＥＳ）、操作位置の座標を判定する（ステップＳ３１）。ステップＳ３１では、例えば、トラックパッド１４の操作位置の座標と設定データ１２１に設定された座標とを比較して、操作位置が操作領域Ｃ１に含まれるか否かを判定する。

制御部１４０は、ステップＳ３１の判定結果に基づき、通常処理を行うか否かを判定する（ステップＳ３２）。通常処理を行う場合（ステップＳ３２；Ｎｏ）、ステップＳ１４に移行して、トラックパッド１４上の操作位置に対応する表示可能領域Ｄの表示位置に、ポインターＰを移動させ（ステップＳ１４）、本処理を終了する。
また、通常処理を行わない場合（ステップＳ３２；Ｎｏ）、制御部１４０はステップＳ１５に移行する。

第３の実施形態の動作によれば、トラックパッド１４の実際の操作位置の移動量より大きくポインターＰを移動させる処理を、トラックパッド１４における特定の領域に限定して行うことができる。トラックパッド１４において、上記処理の対象とする領域は、図６に例示した操作領域Ｃ１のような形状、サイズに限定されない。例えば、トラックパッド１４を上下または左右に複数に分割して、いずれかの領域を、操作領域Ｃ１と同様の領域としてもよい。トラックパッド１４の形状が、Ｘ方向やＹ方向に長い形状である場合や、比較的広い面積のトラックパッド１４を実装可能な場合に、ポインターＰの不要な移動を回避できる点で有用である。

［第４の実施形態］
図８は、本発明を適用した第４の実施形態におけるＨＭＤ１００の動作を示すフローチャートである。本第４の実施形態において、ＨＭＤ１００の構成は第１の実施形態と同様である。このため、ＨＭＤ１００の構成に関して図示及び説明を省略する。

図８に示す動作のステップＳ１１〜Ｓ１９は、上記第１の実施形態と同様である。
本第４の実施形態において、ＨＭＤ１００の制御部１４０は、トラックパッド１４におけるスライドジェスチャーのうち、特定の方向に操作位置が移動する操作に対して、第１の実施形態で説明した処理を実行する。また、スライドジェスチャーが行われても、操作位置の移動方向が、設定された方向でない場合は、トラックパッド１４の操作位置に対応する位置にポインターＰを移動させる、通常処理を実行する。

すなわち、ＨＭＤ１００の制御部１４０は、トラックパッド１４への操作がスライドジェスチャーであると判定した場合（ステップＳ１３；ＹＥＳ）、操作位置の移動方向を判定する（ステップＳ４１）。

制御部１４０は、ステップＳ４１で判定した移動方向に基づき、通常処理を行うか否かを判定する（ステップＳ４２）。通常処理を行う場合（ステップＳ４２；Ｎｏ）、ステップＳ１４に移行して、トラックパッド１４上の操作位置に対応する表示可能領域Ｄの表示位置に、ポインターＰを移動させ（ステップＳ１４）、本処理を終了する。
また、通常処理を行わない場合（ステップＳ４２；Ｎｏ）、制御部１４０はステップＳ１５に移行する。

第４の実施形態の動作によれば、トラックパッド１４の実際の操作位置の移動量より大きくポインターＰを移動させる処理を、トラックパッド１４における特定の方向に対する操作に限定して行うことができる。例えば、Ｙ方向のスライドジェスチャーを上記処理の対象としてもよく、Ｘ方向のスライドジェスチャーに対しては通常処理を行ってもよい。この場合、トラックパッド１４がＸ方向に長い、横長の形状である場合に有用である。つまり、トラックパッド１４の形状が、Ｘ方向やＹ方向に長い形状である場合等、操作位置の移動量の確保が難しい方向についてのみ、上記処理を行う構成とすることができる。

ステップＳ４２では、ステップＳ４１で判定した方向が、設定された方向に該当するか否かを判定するが、この判定において、正確に特定の方向に移動した場合に限らず、特定の方向と見なすことができる範囲を設定してもよい。すなわち、上記処理を行う方向の範囲が予め設定され、操作位置の移動方向が、上記範囲に含まれる場合に、ステップＳ４２で否定判定してもよい。

［その他の変形例］
図９は、上記各実施形態の変形例を示す図である。
図９（Ａ）はトラックパッド１４の変形例として、円形のトラックパッド１４ａを示す。トラックパッド１４ａは、トラックパッド１４と同様に、接触操作を検出する操作面として機能する。ＨＭＤ１００がトラックパッド１４ａを備える場合、入力情報取得部１１０は、トラックパッド１４ａにおける操作を、例えば図９（Ａ）に符号Ｘ、Ｙで示す直交座標系における座標として検出する。トラックパッド１４ａは、Ｘ軸方向、及びＹ軸方向において、操作位置を大きく移動させることができないが、上記第１〜第４実施形態を適用することで、トラックパッド１４における操作位置の移動量よりも大きく、ポインターＰを動かすことができる。トラックパッド１４ａは、トラックパッド１４と同様に、制御部１４０が操作位置の移動の方向を検出可能なサイズがあればよいので、図９（Ａ）に示すように、画像表示部２０の表示領域とは異なる形状であってもよい。
従って、図９（Ａ）に示す円形のトラックパッド１４ａや、細長い形状など、様々な形状のトラックパッドを用いて、ポインターＰを大きく動かすことができ、高い操作性を実現できる。

図９（Ｂ）は、制御装置１０の本体に設けたトラックパッド１４（図１）に代えて、画像表示部２０の側面にトラックパッド１４ｂを配置する変形例を示す。トラックパッド１４ｂは、トラックパッド１４と同様に、接触操作を検出する操作面として機能する。
図９（Ｂ）の例では、画像表示部２０の側面を、使用者が指で擦るような動作で、スライドジェスチャーを実行できる。この場合も、トラックパッド１４ｂの面積を大きくすることは容易でないが、上記第１〜第４実施形態を適用することで、高い操作性を実現できる。

図９（Ｃ）は、指輪型のデバイス７１の表面に、トラックパッド１４と同様に接触操作を検出可能なトラックパッド１４ｃを配置する例を示す。トラックパッド１４ｃは、トラックパッド１４と同様に、接触操作を検出する操作面として機能する。
トラックパッド１４ｃはデバイス７１の表面の一部または全部に形成され、トラックパッド１４ｃの外観がデバイス７１の表面と一体化した構成とすることができる。トラックパッド１４ｃは、デバイス７１の表面に対する接触を検出できればよく、接触を検出するための回路等がデバイス７１の内部に埋設または収容された構成であってもよい。つまり、デバイス７１の表面が、操作を検出するための回路等と一体に構成されていなくてもよく、当該回路の一部を構成していなくてもよい。
デバイス７１は、例えば制御装置１０の通信部１１７との間で無線通信を実行し、制御部１４０が、トラックパッド１４ｃにおける操作位置を検出可能な構成とすることができる。
この場合、上記第１〜第４実施形態を適用することで、小さな指輪型のデバイス７１に対する接触操作により、ポインターＰを自在に動かすことができる。

図９（Ｄ）は、ペン型のデバイス７２の側面に、トラックパッド１４と同様に接触操作を検出可能なトラックパッド１４ｄを配置する例を示す。トラックパッド１４ｄは、トラックパッド１４と同様に、接触操作を検出する操作面として機能する。トラックパッド１４ｄはデバイス７２の表面の一部または全部に形成され、トラックパッド１４ｃの外観がデバイス７２の表面と一体化した構成とすることができる。トラックパッド１４ｄは、デバイス７２の表面に対する接触を検出できればよく、接触を検出するための回路等がデバイス７２の内部に埋設または収容された構成であってもよい。つまり、デバイス７２の表面が、操作を検出するための回路等と一体に構成されていなくてもよく、当該回路の一部を構成していなくてもよい。
デバイス７２は、例えば制御装置１０の通信部１１７との間で無線通信を実行し、制御部１４０が、トラックパッド１４ｄにおける操作位置を検出可能な構成とすることができる。また、デバイス７２は実際に筆記具として使用可能な構成を具備してもよい。このデバイス７２を用いた構成に、上記第１〜第４実施形態を適用することで、小さなペン型のデバイス７１に対する接触操作により、ポインターＰを自在に動かすことができる。

トラックパッド１４ｃ、１４ｄに対する操作は、手指等によるタッチ（接触）操作、及び、接触した手指の接触を維持したまま動かす操作等である。制御部１４０は、トラックパッド１４ｃ、１４ｄに対する接触を検出した場合、この接触が維持される間、すなわち接触が解除されるまで、操作が終了していないと判定する。言い換えれば、トラックパッド１４ｃ、１４ｄに対する手指の接触が解除されると、操作が終了したと判定する。従って、使用者がトラックパッド１４ｃ、１４ｄに手指を接触させて動かす操作を行った場合、この手指を使用者がトラックパッド１４ｃ、１４ｄから離すまでの間、表示オブジェクトであるポインターＰや画面Ｍ１〜Ｍ６の表示位置が移動する。

なお、この発明は上記各実施形態の構成に限られるものではなく、その要旨を逸脱しない範囲において種々の態様において実施することが可能である。
例えば、上記実施形態において、画像表示部２０に代えて、例えば帽子のように装着する画像表示部等の他の方式の画像表示部を採用してもよく、使用者の左眼に対応して画像を表示する表示部と、使用者の右眼に対応して画像を表示する表示部とを備えていればよい。また、本発明の表示装置は、例えば、自動車や飛行機等の車両に搭載されるヘッドマウントディスプレイとして構成されてもよい。また、例えば、ヘルメット等の身体防護具に内蔵されたヘッドマウントディスプレイとして構成されてもよいし、自動車のフロントガラスに用いられるヘッドアップディスプレイ（Head-up Display；ＨＵＤ）であってもよい。

さらに、上記実施形態では、画像表示部２０と制御装置１０とが分離され、接続部４０を介して接続された構成を例に挙げて説明したが、制御装置１０と画像表示部２０とが一体に構成され、使用者の頭部に装着される構成とすることも可能である。

また、例えば、画像表示部２０において画像光を生成する構成として、有機ＥＬ（有機エレクトロルミネッセンス、Organic Electro-Luminescence）のディスプレイと、有機ＥＬ制御部とを備える構成としてもよい。また、画像光を生成する構成として、ＬＣＯＳ（Liquid crystal on silicon, LCoSは登録商標）や、デジタル・マイクロミラー・デバイス等を用いることもできる。また、例えば、レーザー網膜投影型のヘッドマウントディスプレイに対して本発明を適用することも可能である。すなわち、画像生成部が、レーザー光源と、レーザー光源を使用者の眼に導く光学系とを備え、レーザー光を使用者の眼に入射させて網膜上を走査し、網膜に結像させることにより、使用者に画像を視認させる構成を採用してもよい。レーザー網膜投影型のヘッドマウントディスプレイを採用する場合、「画像光生成部における画像光の射出可能領域」とは、使用者の眼に認識される画像領域として定義することができる。

画像光を使用者の眼に導く光学系としては、外部から装置に向けて入射する外光を透過する光学部材を備え、画像光とともに使用者の眼に入射させる構成を採用できる。また、使用者の眼の前方に位置して使用者の視界の一部または全部に重なる光学部材を用いてもよい。さらに、レーザー光等を走査させて画像光とする走査方式の光学系を採用してもよい。また、光学部材の内部で画像光を導光させるものに限らず、使用者の眼に向けて画像光を屈折及び／または反射させて導く機能のみを有するものであってもよい。

また、本発明を、ＭＥＭＳミラーを用いた走査光学系を採用し、ＭＥＭＳディスプレイ技術を利用した表示装置に適用することも可能である。すなわち、画像表示素子として、信号光形成部と、信号光形成部が射出する光を走査するＭＥＭＳミラーを有する走査光学系と、走査光学系により走査される光によって虚像が形成される光学部材とを備えてもよい。この構成では、信号光形成部が射出した光がＭＥＭＳミラーにより反射され、光学部材に入射し、光学部材の中を導かれて、虚像形成面に達する。ＭＥＭＳミラーが光を走査することにより、虚像形成面に虚像が形成され、この虚像を使用者が眼で捉えることで、画像が認識される。この場合の光学部品は、例えば上記実施形態の右導光板２６１及び左導光板２６２のように、複数回の反射を経て光を導くものであってもよく、ハーフミラー面を利用してもよい。

また、本発明の表示装置は頭部装着型の表示装置に限定されず、フラットパネルディスプレイやプロジェクター等の各種の表示装置に適用できる。本発明の表示装置は、外光とともに画像光により画像を視認させるものであればよく、例えば、外光を透過させる光学部材により画像光による画像を視認させる構成が挙げられる。具体的には、上記のヘッドマウントディスプレイにおいて外光を透過する光学部材を備えた構成の他、使用者から離れた位置に固定的に、又は可動に設置された透光性の平面や曲面（ガラスや透明なプラスチック等）に画像光を投射する表示装置にも適用可能である。一例としては、車両の窓ガラスに画像光を投射し、乗車している使用者や車両の外にいる使用者に、画像光による画像とともに、車両内外の景色を視認させる表示装置の構成が挙げられる。また、例えば、建物の窓ガラスなど固定的に設置された透明また半透明、或いは有色透明な表示面に画像光を投射し、表示面の周囲にいる使用者に、画像光による画像とともに、表示面を透かして景色を視認させる表示装置の構成が挙げられる。
また、本発明は、外光とともに画像を視認させる表示装置に限らず、各種の表示装置に適用可能であり、例えば外景を視認できない状態で画像を表示する表示装置にも適用可能である。具体的には、カメラ６１の撮像画像、この撮像画像に基づき生成される画像やＣＧ、予め記憶された映像データや外部から入力される映像データに基づく映像等を表示する表示装置に、本発明を適用できる。この種の表示装置としては、外景を視認できない、いわゆるクローズ型の表示装置を含むことができる。また、ＡＲ表示、ＭＲ表示、或いはＶＲ表示といった処理を行わず、外部から入力される映像データまたはアナログ映像信号を表示する表示装置も、本発明の適用対象として勿論含まれる。

また、図２に示した各機能ブロックのうち少なくとも一部は、ハードウェアで実現してもよいし、ハードウェアとソフトウェアの協働により実現される構成としてもよく、図２に示した通りに独立したハードウェア資源を配置する構成に限定されない。また、制御部１４０が実行するプログラムは、記憶部１２０又は制御装置１０内の記憶装置に記憶されてもよいし、外部の装置に記憶されたプログラムを通信部１１７又はインターフェイス１２５を介して取得して実行する構成としてもよい。
また、制御部１４０が実行するプログラムの機能、すなわち制御部１４０が備える各処理部（例えば、画像処理部１６０、表示制御部１７０、操作検出部１８３、ＧＵＩ制御部１８５、音声処理部１９０、或いはその他の生成部、判定部、特定部等）を、当該機能を実現するために設計されたＡＳＩＣ（Application Specific Integrated Circuit：特定用途向け集積回路）やＳｏＣ（System on a Chip）を用いて構成してもよい。また、ＦＰＧＡ（Field-Programmable Gate Array））等のプログラマブルデバイスにより実現してもよい。
また、制御装置１０に形成された構成のうち、操作部１１１のみが単独の使用者インターフェイス（ＵＩ）として形成されてもよい。また、制御装置１０に形成された構成が重複して画像表示部２０に形成されていてもよい。例えば、図２に示す制御部１４０が制御装置１０と画像表示部２０との両方に形成されていてもよいし、制御装置１０に形成された制御部１４０と画像表示部２０に形成されたＣＰＵとが行う機能が別々に分けられている構成としてもよい。

１０…制御装置、１４、１４ａ、１４ｂ、１４ｃ、１４ｄ…トラックパッド（操作面）、２０…画像表示部（表示部）、２２…右表示駆動部、２４…左表示駆動部、６１…カメラ、１００…ＨＭＤ（表示装置）、１１０…入力情報取得部、１１１…操作部、１２０…記憶部、１２１…設定データ、１２３…コンテンツデータ、１４０…制御部、１６０…画像処理部、１７０…表示制御部、１８２…操作検出部、１８５…ＧＵＩ制御部、１９０…音声処理部、２６１…右導光板、２６２…左導光板、Ｐ…ポインター（表示オブジェクト）。

Claims (11)

1. 表示部と、
   操作を検出する操作面を有する操作部と、
   前記表示部に操作対象の表示オブジェクトを表示させ、前記操作面に対する操作に対応して前記表示オブジェクトの表示位置を変化させる制御部と、を備え、
   前記制御部は、前記操作面における操作位置に基づき前記表示オブジェクトの移動方向を求め、前記操作面に対する操作が終了するまで前記移動方向に前記表示オブジェクトを移動させること、
   を特徴とする表示装置。
2. 前記制御部は、前記表示オブジェクトの移動方向を、前記操作面における操作位置の移動方向に対応する方向にすること、
   を特徴とする請求項１記載の表示装置。
3. 前記制御部は、前記操作面に対する操作を検出した後、前記表示オブジェクトの移動方向を求める処理を行ってから、前記表示オブジェクトを移動させること、
   を特徴とする請求項１または２記載の表示装置。
4. 前記制御部は、前記操作面に対する操作を検出した後、前記表示オブジェクトの移動方向を求める処理を行う間、前記操作面の操作位置に対応する表示位置に前記表示オブジェクトを移動させること、
   を特徴とする請求項３記載の表示装置。
5. 前記制御部は、前記操作面における操作に応じて前記表示オブジェクトの移動速度を求め、求めた移動速度で前記移動方向に前記表示オブジェクトを移動させること、
   を特徴とする請求項１から４のいずれかに記載の表示装置。
6. 前記制御部は、前記表示オブジェクトの移動中における前記操作面の操作位置の変化に応じて、前記表示オブジェクトの移動速度を変化させること、
   を特徴とする請求項５記載の表示装置。
7. 前記操作部および前記制御部は、前記操作面に対して操作体が接触した場合に接触操作を検出し、前記操作面から前記操作体が離れて接触が解除された場合に、前記操作の終了を検出すること、
   を特徴とする請求項１から６のいずれかに記載の表示装置。
8. 前記操作面において前記操作部が操作を検出する面積またはサイズは、前記表示部が画像を表示する表示領域の面積またはサイズよりも小さいこと、
   を特徴とする請求項１から７のいずれかに記載の表示装置。
9. 前記操作面の形状は、前記表示部が画像を表示する表示領域とは異なる形状であること、
   を特徴とする請求項１から８のいずれかに記載の表示装置。
10. 表示部と、操作を検出する操作面を有する操作部と、を有する表示装置を制御して、
    前記表示部に操作対象の表示オブジェクトを表示させ、前記操作面に対する操作に対応して前記表示オブジェクトの表示位置を変化させる制御を行いし、
    前記操作面における操作位置に基づき前記表示オブジェクトの移動方向を求め、前記操作面に対する操作が終了するまで前記移動方向に前記表示オブジェクトを移動させること、
    を特徴とする表示装置の制御方法。
11. 表示部と、操作を検出する操作面を有する操作部と、を有する表示装置を制御するコンピューターが実行可能なプログラムであって、
    前記コンピューターを、
    前記表示部に操作対象の表示オブジェクトを表示させ、前記操作面に対する操作に対応して前記表示オブジェクトの表示位置を変化させる制御を行い、前記操作面における操作位置に基づき前記表示オブジェクトの移動方向を求め、前記操作面に対する操作が終了するまで前記移動方向に前記表示オブジェクトを移動させる制御部として機能させる、プログラム。

Images