JP5681850B2 - ヘッドマウントディスプレイを外部表示装置として使用する携帯端末 - Google Patents

Description

本発明はヘッドマウントディスプレイを外部表示装置として使用する携帯端末に関する。

携帯電話機などの携帯端末装置にヘッドマウントディスプレイ（ＨＭＤ）を連動させて使用する技術が開発されて来ている。図１、図２はそのような技術を説明するための参考例を示す。図１はユーザがＨＭＤを装着している状況を示す。図２はユーザの視野を示す。ユーザは、ＨＭＤ３０２を装着して携帯端末３０１を利用する。

ＨＭＤ３０２は透明な投影スクリーンを有する。ユーザは眼鏡を掛けているようにスクリーンを通して外界を見ることができる。ユーザの視野３０３には、ＨＭＤ３０２によってスクリーン上の定まった領域に仮想画面３０Ａが投影される。ユーザの視野３０３には更に、スクリーンを通して携帯端末３０１とその表示画面３１１が見える。携帯端末３０１が記憶しているテキストや画像を仮想画面３０Ａに投影することにより、ユーザは携帯端末３０１の表示画面３１１よりも大きな仮想画面３０Ａで情報を見ることができる。

この参考例においては、ＨＭＤ３０２の固定の位置に携帯端末３０１の表示画面３１１の内容が仮想画面３０Ａとして表示される。そのため仮想画面３０Ａが使用者の視界をさえぎる。仮想画面３０Ａによってさえぎられる外界の状況を目視で確認するためには表示をオフにする必要があり、使用状況によっては不便である。

この問題を解決するため、ＨＭＤ３０２の視界の中心からずらした場所に小さく仮想画面３０Ａを表示することが考えられる。しかしこの方法では、仮想画面３０Ａを見るためにユーザの視線が常に視界の中心からずれる。そのため、長期間の利用は使用者にとって負担となる。また、画面が小さいため表示できる情報量が限られる、という問題がある。

さらに、公共の場で使用すると、周囲の人々から見ると中空を凝視していることになり不自然である。更に、仮想画面３０Ａを見ているユーザの視線の先に他人が居ると、他人を凝視していると誤解される恐れがある。このような問題を解消する技術が望まれる。

以下、ＨＭＤに関する参考技術として特許文献１〜４を挙げる。

特開２００１−３５６８７５号公報 特開２００７−０１８１８８号公報 特表２００７−５２８７４３号公報 特表２００９−５３８４８７号公報

ユーザが通常の携帯端末の操作に近い自然な動作で使用することができるヘッドマウントディスプレイが望まれる。

本発明の一側面における携帯端末システムは、表示情報に応じて表示を行う表示装置を備える携帯端末と、携帯端末から取得した表示情報に基づいて、装着者の視野内の表示領域に仮想画面を表示するヘッドマウントディスプレイとを備える。ヘッドマウントディスプレイは、撮像部と、撮像部によって撮像された表示装置の表示に基づいてヘッドマウントディスプレイに対する携帯端末の相対的な位置を示す位置情報を生成する端末姿勢取得部とを備える。表示領域は位置情報に基づいて表示装置の表示画面に重なる位置に設定される。仮想画面に表示情報に応じた表示が行われる。

本発明により、ユーザが通常の携帯端末の操作に近い自然な動作で使用することができるヘッドマウントディスプレイが提供される。

図１は、参考例におけるヘッドマウントディスプレイと携帯端末を示す。 図２は、参考例におけるヘッドマウントディスプレイの視野を示す。 図３は、一実施形態におけるヘッドマウントディスプレイと携帯端末を示す。 図４は、一実施形態におけるヘッドマウントディスプレイの視野を示す。 図５は、一実施形態における携帯端末を示す。 図６は、一実施形態におけるヘッドマウントディスプレイと携帯端末の構成を示す。 図７は、一実施形態における携帯端末を示す。 図８は、一実施形態におけるヘッドマウントディスプレイを示す。 図９は、一実施形態におけるヘッドマウントディスプレイと携帯端末の動作を示す。 図１０は、一実施形態におけるヘッドマウントディスプレイと携帯端末の動作を示す。 図１１は、一実施形態におけるヘッドマウントディスプレイと携帯端末の動作を示す。 図１２は、一実施形態におけるヘッドマウントディスプレイと携帯端末の構成を示す。 図１３は、一実施形態における携帯端末を示す。 図１４は、一実施形態におけるヘッドマウントディスプレイと携帯端末の動作を示す。 図１５は、一実施形態における携帯端末を示す。 図１６は、一実施形態におけるヘッドマウントディスプレイと携帯端末の構成を示す。

以下、図面を参照して本発明の実施形態について説明する。図６は、本発明の第１の実施形態における携帯端末システムの構成を示すブロック図である。携帯端末システムは、携帯端末１ヘッドマウントディスプレイ２からなる。

携帯端末１は、演算回路１０、表示部１１、キー操作部１２、通信部１３を備える情報処理装置である。キー操作部１２は入力キー等を備える入力装置である。使用者がキー操作部１２に対して入力操作を行うと、その入力操作に応答して演算回路１０が情報処理を行い、その結果が表示部１１に表示される。携帯端末１の例として、携帯電話、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）などの小型の情報処理装置が挙げられる。

演算回路１０は表示制御部１０１、キー制御部１０２、通信制御部１０３、アプリケーション１０４、ＨＭＤ制御部１０５、端末姿勢取得部１０６を含む。具体的にはこれらは、携帯端末１のＣＰＵが記憶装置に予め格納されたプログラムを読み出して実行することによって実現される機能ブロックである。

表示制御部１０１は、通信部１３を介して無線通信によって受信したり、リムーバブルな記億媒体から読み取ったり、携帯端末１の内蔵カメラで撮影することによって生成された画像データを表示部１１で表示する。

キー制御部１０２は、使用者の入力操作に応答してキー操作部１２が生成した入力信号を受け取ってアプリケーション１０４にイベントデータとして通知する。通信部１３は無線通信を行うための信号の変調と復調を行う回路である。通信制御部１０３は、通信部１３を用いてＨＭＤ２と通信する手段を提供する。アプリケーション１０４は、キー制御部１０２から受け取った使用者のキー操作のイベントを含むさまざまなイベントを受け取り、情報処理を行ってその結果を表示制御部１０１またはＨＭＤ制御部１０５を用いてユーザへ提示する。

ＨＭＤ制御部１０５は、アプリケーション１０４からの指示により、ＨＭＤ接続状況の確認、ＨＭＤの使用開始、ＨＭＤへの画像表示指示、及びＨＭＤの使用終了の処理を行う。これらの処理では通信制御部１０３を使用してＨＭＤ２との通信を行う。端末姿勢取得部１０６は、ＨＭＤ制御部１０５がＨＭＤ２の使用を開始する処理を行うときに起動される。

端末姿勢取得部１０６は、表示部１１が表示する位置合わせ用の特定パターンを予め記憶する。端末姿勢取得部１０６は、通信制御部１０３を介してＨＭＤ２のカメラ２１が撮像した画像を取得し、その特定パターンの画像認識を行うことにより携帯端末の表示部１１の姿勢を計算して姿勢情報を生成する。また、ＨＭＤ制御部１０５からの要求に応答して、表示部１１の現在の姿勢を返却する。

表示部１１は、表示制御部１０１から受け取った画像データを表示する。キー操作部１２は、使用者の操作を受けて、操作されたキーの状態を信号としてキー制御部１０２へ送信する。表示部１１は、携帯電話の位置及び姿勢を認識するための位置合わせ用表示を行うための表示装置として機能する。ＨＭＤ２の仮想画面Ａの表示領域は、この位置合わせ用表示に応じて設定される。表示部１１は、ＨＭＤ２が使用されていないとき、表示画面に表示する内容を示す表示情報を表示し、ＨＭＤ２が使用されているときその表示情報の表示を停止する。

通信部１３は、ＨＭＤ２の通信部２３と相互にデータのやり取りを行う。通信方法は有線及び無線が考えられるが、本実施形態では通信方法を限定せず、既存の任意の通信方法を用いるものとする。

ＨＭＤ２は、演算回路２０、カメラ２１、表示部２２、通信部２３を備える。演算回路２０は情報の処理を行う部分であり、カメラ制御部２０１、表示制御部２０２、通信制御部２０３を含む。カメラ制御部２０１は、通信制御部２０３を介して受け取った要求に従ってカメラ２１による撮影を行い、取得した画像データを通信制御部２０３を用いて返却する。

表示制御部２０２は、携帯端末１などの機器から受け取った画像データを表示部２２で表示する。通信制御部２０３は、通信部２３を用いて携帯端末１と通信する手段を提供する。カメラ２１は、カメラ制御部２０１の指示を受けて撮影を行い、取得した画像データを返却する。カメラ２１は使用者の視線と同じ方向を向いており、中心が使用者の視野とほぼ一致した画像を取得することが出来る。

表示部２２は、表示制御部２０２から受け取った表示情報に応じて画像データを表示する。表示部２２は非透過スクリーンの場合と透過スクリーンの場合がある。非透過スクリーンは使用者の視界を完全に遮断する。透過スクリーンは使用者の視界に重ね合わせて画像を表示する。また、図８の通りに両眼にスクリーンがある場合と、スクリーンが片眼のみの場合がある。さらに、スクリーンを有するのではなく、網膜へ直接投射する方式のディスプレイも近年開発されており、それを用いてもよい。通信部２３は、携帯端末１の通信部１３と相互にデータのやり取りを行う。通信方法は有線及び無線が考えられるが、本発明では通信方法を限定視せず、既存の通信方法を用いるものとする。

図７は、携帯端末１の外観の例を示す。携帯端末１は表示部１１とキー操作部１２を備える。図８は、ＨＭＤ２の外観の例を示す。ＨＭＤ２はカメラ２１と表示部２２を備える。

次に、図９、図１０、図１１のフローチャート、および、図６の構成図を参照して、本発明の第１の実施形態について詳細に説明する。図９のフローチャートは、本発明の全体の動作例を示す。

ステップＳ０１で、まず携帯端末１の動作開始時に、アプリケーション１０４が、ＨＭＤ制御部１０５を用いてＨＭＤ２との接続状況の確認を行う。この際に、ＨＭＤ制御部１０５は、通信制御部１０３を用いて、ＨＭＤ２との通信の確立を試みる。通信の確立が成功したらアプリケーション１０４へ接続中であることを通知し、アプリケーション１０４はステップＳ０２へ進む。ＨＭＤ２との通信の確立が失敗したら、アプリケーション１０４へ未接続であることを通知し、アプリケーション１０４はステップＳ０３へ進む。

ステップＳ０２では、アプリケーション１０４はＨＭＤ制御部１０５へ、ＨＭＤ２の使用開始の指示を出す。ＨＭＤ制御部１０５のＨＭＤ使用開始の処理については、図１０を用いて後で説明する。
ステップＳ０３では、アプリケーション１０４がＨＭＤ２を使用中か否かで分岐を行う。使用中の場合はステップＳ０４へ進み、使用中でない場合はステップＳ０５へ進む。

ステップＳ０４では、アプリケーション１０４はＨＭＤ制御部１０５に対してユーザに提示する画面の画像データを送付し、ＨＭＤ２の仮想画面Ａの更新の指示を行う。ＨＭＤ制御部１０５による画面更新の処理については、図１１を用いて後で説明する。アプリケーション１０４がＨＭＤ制御部１０５に送付する画像のサイズは、携帯端末の表示部１１へ出力するサイズと異なってもよい。ＨＭＤ２の表示部２２の解像度が高い場合はそれを活かすために、携帯端末１の表示部１１へ出力するサイズより大きい画像を出力してもよい。

ステップＳ０５では、アプリケーション１０４は表示制御部１０１を用いて、ユーザに提示する画像データを表示部１１へ表示する。
ステップＳ０６では、アプリケーション１０４はキー操作部１０２やその他システム内から受け取ったイベントを取得し、イベントの内容により処理を分岐する。ステップＳ０６で取得したイベントが処理の終了であった場合は、アプリケーションの処理を終了し、携帯端末１の動作を終了する。

ステップＳ０６で取得したイベントがＨＭＤ２の使用終了であった場合は、ステップＳ０７で、ＨＭＤ制御部１０５へＨＭＤ２の使用終了を指示し、ＨＭＤ制御部１０５は端末姿勢取得部１０６へ動作の停止を指示し、通信制御部１０３を用いてＨＭＤ２の動作を終了し、ＨＭＤ２との接続を解除する。
ステップＳ０６で取得したイベントがＨＭＤ２の使用開始であった場合は、ステップＳ０１へ戻り、ＨＭＤ２の使用を再開する。
ステップＳ０６で取得したイベントが上記以外のアプリケーション１０４の処理にかかわるものであった場合は、ステップＳ０８でアプリケーション１０４内部でイベントに即した処理を行い、ステップＳ０３へ戻り、使用者へ提示する画面の更新に進む。

図１０のフローチャートは、図９のフローチャートのステップＳ０２の、ＨＭＤ使用開始の処理の詳細である。
ステップＳ１１では、ＨＭＤ制御部１０５が表示制御部１０１を用いて表示部１１に、図５で示すような画像認識で検出しやすい固定パターンの画像を表示する。
ステップＳ１２からステップＳ１５までのループは、ＨＭＤ制御部１０５が別スレッドを生成して、その生成されたスレッド内で端末姿勢取得部１０６が処理を行う。
ステップＳ１２では、端末姿勢取得部１０６が通信制御部１０３を用いてＨＭＤのカメラ２１の撮影画像を取得する。
ステップＳ１３では、端末姿勢取得部１０６がステップＳ１２で取得した画像を分析し、ステップＳ１１で携帯端末の付属ディスプレイ１１に表示した位置合わせ用表示である固定パターンを検出する。

ステップＳ１４では、ステップＳ１３での検出結果での固定パターンの大きさと歪みから、ＨＭＤ２に対する付属ディスプレイ１１の相対位置と相対姿勢を計算する。検出方法及び計算方法は、ＡＲＴｏｏｌＫｉｔ（ｈｔｔｐ：／／ｗｗｗ．ｈｉｔｌ．ｗａｓｈｉｎｇｔｏｎ．ｅｄｕ／ａｒｔｏｏｌｋｉｔ／）など既存のソフトウェアを利用して実行することができる。計算結果は、ＨＭＤ２の表示部２２に固定パターンを全画面表示した矩形を、ステップＳ１３で検出した固定パターンの形にアフィン変換するためのアフィン変換行列として端末姿勢取得部１０６が保持する。また、仮想ディスプレイの表示位置が頻繁に（フレーム毎に）変化すると使用者にとって見難いため、端末姿勢取得部１０６の内部で、計算結果の変化量を平滑化してもよい。

ステップＳ１５では、ＨＭＤ２の使用を継続するか判断する。図９のフローチャートのステップＳ０７で、端末姿勢取得部１０６がＨＭＤ制御部１０５からＨＭＤ使用終了の支持を受け取った場合は、ＨＭＤの使用終了と判断してループを抜け、ステップＳ１６へ進む。それ以外の場合は、ステップＳ１２へ戻る。
ステップＳ１６では、ＨＭＤ制御部１０５が表示制御部１０１を用いて表示部１１に表示していた固定パターンを消去し、通常の画面に戻す。

図１１のフローチャートは、図９のフローチャートのステップＳ０４においてＨＭＤ２の画面を更新する処理の詳細を示す。
まずステップＳ２１では、ＨＭＤ制御部１０５が、端末姿勢取得部１０６から、ステップＳ１４で計算し保持しているアフィン変換行列を取得する。

ステップＳ２２では、ＨＭＤ制御部１０５はアプリケーション１０４から受け取った画面の画像データに対して、前ステップで取得したアフィン変換行列によりアフィン変換を施し、変換後の四角形の画像を得る。これが、ＨＭＤへ仮想ディスプレイとして表示される仮想画面Ａの表示領域の画像データである。

この画像データを用いると、ＨＭＤ上での変換後の画像のサイズが、使用者から見て携帯端末の表示部１１の画面と同じである。ＨＭＤ２の解像度のために文字がつぶれて見難くなる場合や、ＨＭＤ２の大画面のメリットを生かしたい場合には、変換後の画像データは、予め設定された適当な倍率で拡大することが望ましい。その際、ボタン操作部を隠さないよう、図３、図４のように、仮想画面Ａの表示領域の下端と携帯端末１の表示画面１１の下端とが一致するように設定され、仮想画面Ａは上方向に拡大することが望ましい。

このアフィン変換後の画像を用いてＨＭＤ２への出力画面を生成するアフィン変換後の画像以外の背景の領域の生成方法は、ＨＭＤ２の方式により異なる。ＨＭＤ２の表示部２２が非透過の場合は、背景の領域は、ＨＭＤのカメラ２１が取得した最新の画像とし、その上にアフィン変換後の画像を上書きする。ＨＭＤの表示部２２が半透過の場合は、背景の領域は透明色とし、使用者の視野を確保する。

ステップＳ２３では、ＨＭＤ制御部１０５は、通信制御部１０３を用いて画像データをＨＭＤ２へ送付し表示指示を行う。ＨＭＤ２側の通信制御部２０３は、受け取った画像データを、表示制御部２０２を用いて表示部２２に表示する。

以上により、本実施形態の動作が実現される。使用者が自宅など安全な場所で使用する場合は、従来どおりＨＭＤ２の表示部２２の固定位置に仮想ディスプレイを表示してよい。使用者が携帯端末１に所定の入力操作を行うと、ＨＭＤ２はそれに応答して、仮想画面３０Ａの表示領域のＨＭＤ２に対する相対的な位置を固定する固定モードに設定される。その場合は、ステップＳ２１の処理は不要となり、ステップＳ２２ではアプリケーションから出力される画面の画像データを、ＨＭＤの表示部２２にフィットするサイズに拡大縮小する処理のみを行う。また、ステップＳ０２及び図１０のフローチャートの処理は不要となる。

本実施形態により、以下のような効果が得られる。
第１の効果は、常にＨＭＤの固定位置に携帯端末の画面が表示されているのではなく、使用者が見たいときだけ、携帯端末の画面の方向を見ればＨＭＤに仮想ディスプレイが表示され、自然に周囲の状況を確認する場合は、携帯端末から視線をそらすという自然な動作で実現できる点である。
第２の効果は、実際の携帯端末の画面より大きい画面をＨＭＤに表示することで、表示できる情報量の向上、視認性の向上が得られる点である。
第３の効果は、携帯端末の画面には情報が表示されないため、機密情報を他人から覗き見されるリスクが低減される点である。

次に、本発明の第２の実施形態について説明する。
第１の実施形態では、ＨＭＤ２のカメラ２１の撮影画像からの携帯端末１の位置の検出のために、表示部１１に固定パターンを表示していた。このような手段では、ＨＭＤ２の表示部の方式が半透過型または片眼の場合は、使用者に固定パターンが見えてしまい、表示画像の閲覧の邪魔になることが考えられる。また、タッチパネル型の携帯端末の場合に、使用者のタッチパネル操作により固定パターンが隠れてしまい、検出できなくなるという問題もある。

そこで、第２の実施形態では、携帯端末１の位置の検出のために、携帯端末１は、表示部１１への固定パターンの表示ではなく、表示部１１の周りに赤外線のＬＥＤを備える。赤外線のＬＥＤとした理由は、可視光の範囲から外れるため使用者には見えず、閲覧の邪魔にならないが、カメラ２１では検出できるためである。

図１２に、第２の実施形態の構成図を示す。第１の実施形態との違いは、ＬＥＤ１４が追加されているのみである。ＬＥＤ１４の点灯、消灯は、表示制御部１０１が行う。ＬＥＤ１４は、携帯電話の位置及び姿勢を認識するための位置合わせ用表示を行うための表示装置として機能する。

図１３に、第２の実施形態における携帯端末１の外観を示す。携帯端末１は、表示部１１の周囲３点にＬＥＤを備える。図１５のように、ＬＥＤ１４は、キー操作部を有せず表示部１１に含まれるタッチパネルを使用者が指で操作する場合に、指で隠れない位置に配置される。

第２の実施形態のフローチャートは、第１の実施形態と比較して図１０のみが変更となる。変更後のフローチャートを図１４に示す。第１の実施形態から変更となるステップのみ説明する。

ステップＳ１１では、表示部１１の消去し、ＬＥＤ１４を点灯する。３個のＬＥＤ１４でそれぞれ点滅パターンを変える、または、点灯する光の周波数を変えることで、３個のＬＥＤ１４を個別に識別することが出来るようにする。
ステップＳ１３では、ステップＳ１２で取得した画像から、ＬＥＤ１４の位置を検出する。
ステップＳ１４では、３個のＬＥＤ１４の位置を元に表示部１１の位置及び姿勢を計算する。計算結果の保持方法は、第１の実施形態と同じである。ＨＭＤ２の仮想画面Ａの表示領域は、ＬＥＤ１４の位置から得られた表示部１１の位置及び姿勢に基づいて設定される。
ステップＳ１５でＨＭＤの使用が終了すると、ステップＳ１６でＬＥＤ１４を消灯し、表示部１１の表示を再開する。

次に、本発明の第３の実施形態について説明する。
第３の実施形態では、図１６の構成図で示すとおり、携帯端末側だけでなく、ＨＭＤ側にも端末姿勢取得部２０５を持つ。図１０及び図１４のフローチャートに含まれるステップＳ１２からステップＳ１５までのループを、携帯端末側の端末姿勢取得部１０６ではなく、ＨＭＤ側の端末姿勢取得部２０５で行い、ステップＳ１４の計算結果のみを通信制御部２０３を用いて、携帯端末側の端末姿勢取得部１０６へ送付し、端末姿勢取得部１０６で保持する。

この変更により、携帯端末の検出というある程度負荷の高い処理をＨＭＤ側で行うことで、携帯端末の演算回路１０の処理量を減らすという効果がある。また、携帯端末１とＨＭＤ２の間の通信で画像全体を毎回送るのではなく、計算結果のみ送ればよいので、通信量の削減にもつながる。

以上に説明した実施形態は、矛盾の無い範囲で互いに任意的に組み合わせて実施することができる。

１ 携帯端末
２ ＨＭＤ（ヘッドマウントディスプレイ）
３ 視野
１１ 表示画面
１４ ＬＥＤ
１５ 表示装置
２１ カメラ
２２ 表示部
３０１ 携帯端末
３０３ 視野
３０Ａ 仮想画面
３１１ 表示画面
Ａ 仮想画面

Claims (7)

1. 表示情報に応じて表示を行う表示装置を備える携帯端末と、
   前記携帯端末から取得した前記表示情報に基づいて、装着者の視野の一部の表示領域に前記携帯端末の前記表示装置の表示画面に対応する仮想画面を表示するヘッドマウントディスプレイとを具備し、
   前記ヘッドマウントディスプレイは、
   撮像部と、
   前記撮像部によって撮像された前記表示装置の表示に基づいて前記ヘッドマウントディスプレイに対する前記携帯端末の相対的な位置を示す位置情報を生成する端末姿勢取得部とを備え、
   前記表示領域は、前記位置情報に基づいて、前記仮想画面が前記表示装置の表示画面に重なる位置に位置合わせされて表示されるように設定され、
   前記携帯端末が前記ヘッドマウントディスプレイとの通信の確立に成功した場合、前記携帯端末から取得した前記表示情報が示すユーザに提示する画面が前記ヘッドマウントディスプレイによって前記仮想画面に表示され、かつ前記表示装置による前記ユーザに提示する画面の表示が停止され、
   前記通信の確立に成功しなかった場合、前記ユーザに提示する画面が前記表示情報に応じて前記表示装置の表示画面に表示される
   携帯端末システム。
2. 請求項１に記載された携帯端末システムであって、
   前記端末姿勢取得部は、前記表示装置が表示する特定パターンを予め記憶し、前記撮像部が撮像した前記特定パターンと予め記憶した前記特定パターンとに基づいて前記ヘッドマウントディスプレイに対する前記携帯端末の相対的な姿勢を示す姿勢情報を生成し、
   前記表示領域は前記姿勢情報に基づいて設定される
   携帯端末システム。
3. 請求項１又は２に記載された携帯端末システムであって、
   前記携帯端末は、前記ヘッドマウントディスプレイが使用されていないとき前記表示情報に応じた表示を行い、前記ヘッドマウントディスプレイが使用されているとき前記表示情報に応じた表示を停止する
   携帯端末システム。
4. 請求項１から３のいずれかに記載された携帯端末システムであって、
   前記ヘッドマウントディスプレイは、前記携帯端末又は前記ヘッドマウントディスプレイに対する所定の入力操作に応答して、前記表示領域を固定する
   携帯端末システム。
5. 請求項１から４のいずれかに記載された携帯端末システムであって、
   前記ヘッドマウントディスプレイが使用されているとき、前記表示画面には所定の位置合わせ用表示が行われ、
   前記表示領域は前記位置合わせ用表示に応じて設定される
   携帯端末システム。
6. 請求項１から４のいずれかに記載された携帯端末システムであって、
   前記表示装置は赤外線を発光するＬＥＤを備え、
   前記撮像部は赤外線を撮像し、
   前記表示領域は前記撮像部が撮像した前記ＬＥＤの位置に応じて設定される
   携帯端末システム。
7. 請求項１から６のいずれかに記載された携帯端末システムであって、
   前記表示領域に表示される前記仮想画面は、前記装着者から見て前記携帯端末の表示画面に対して所定の倍率で拡大して設定され、更に前記携帯端末の表示画面と下端が一致するように設定される
   携帯端末システム。

Images