JP2021043300A - 表示システム、情報処理装置の制御プログラム、情報処理装置の制御方法、及び表示装置 - Google Patents

Abstract

【課題】ＨＭＤに表示された画像の視認性を向上する。【解決手段】スマートフォン３００にはＨＭＤ１００が接続される。ＨＭＤ１００は、左表示部２４に、外景に重ねて第１画像Ｐ１を表示し、右表示部２２に、外景に重ねて第１画像Ｐ１に対応する第２画像Ｐ２を表示する。スマートフォン３００は、第３画像Ｐ３を表示する表示パネル３３１と、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方が第３画像Ｐ３と重なっていることを検出する第１検出部３１３と、第１検出部３１３の検出結果に基づいて、第３画像Ｐ３を視認することが可能になるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方を調整する調整部３１５と、を備える。【選択図】図５

Description

本発明は、表示システム、情報処理装置の制御プログラム、情報処理装置の制御方法、及び表示装置に関する。

頭部装着型表示装置の制御部の操作面を操作する場合において、制御部の操作面の視認性を向上する技術が知られている（例えば、特許文献１参照）。
特許文献１に記載の頭部装着型表示装置は、画像を表す画像光を生成し射出させる画像光生成部と、射出された画像光を使用者の眼に導く導光部と、を有し、使用者に虚像を視認させるための画像表示部と、操作面を有するとともに画像表示部と接続され、画像表示部による画像表示を制御する制御部と、使用者が制御部の操作面を向いているかを判定する向き判定部とを備える。制御部は、使用者が制御部の操作面を向いていると判定された場合に、虚像の視認性を低下させるように、画像光生成部の輝度を調整し、または、画像光生成部により生成される画像光を調整する。

特開２０１２−２０４９９８号公報

特許文献１記載の頭部装着型表示装置では、使用者が制御部の操作面を向いていると判定された場合に、画像表示部に表示される画像の視認性を低下させるため、画像表示部に表示される画像を見難い場合があった。
また、頭部装着型表示装置がスマートフォンのような情報処理装置と接続され、使用者が情報処理装置を操作する場合にも、画像表示部に表示される画像の視認性を低下させるため、画像表示部に表示される画像を見難い場合があった。
例えば、スマートフォンのタッチパネルを用いて、画像表示部に表示される画像の輝度を調整する場合には、画像表示部に表示される画像の視認性が低下するため、操作性が低下する可能性があった。

上記課題を解決する一態様は、使用者の頭部に装着される表示装置と、前記表示装置が接続される情報処理装置とを備える表示システムであって、前記表示装置は、前記使用者の左眼側に位置し、外景に重ねて第１画像を表示する第１表示部と、前記使用者の右眼側に位置し、前記外景に重ねて前記第１画像に対応する第２画像を表示する第２表示部と、を備え、前記情報処理装置は、第３画像を表示する第３表示部と、前記第１画像及び前記第２画像の少なくとも一方が前記第３画像と重なっていることを検出する第１検出部と、前記第１検出部の検出結果に基づいて、前記第３画像を視認することが可能になるように、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する調整部と、前記調整部の調整結果に基づいて、前記第１表示部に前記第１画像を表示させ、前記第２表示部に前記第２画像を表示させる表示制御部と、を備える、表示システムである。

上記表示システムにおいて、前記調整部は、前記第２画像を前記第１画像と異ならせるように、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する構成であってもよい。

上記表示システムにおいて、前記調整部は、前記第１画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第１画像を調整し、前記第２画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第２画像を調整する構成であってもよい。

上記表示システムにおいて、前記調整部は、前記第１画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第１画像の表示を禁止し、前記第２画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第２画像の表示を禁止する構成であってもよい。

上記表示システムにおいて、前記調整部は、前記第１画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第１画像の透過率を調整し、前記第２画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第２画像の透過率を調整する構成であってもよい。

上記表示システムにおいて、前記情報処理装置は、前記第１画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第１画像が前記第３画像と重なっている領域を示す第１重畳領域を検出し、前記第２画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第２画像が前記第３画像と重なっている領域を示す第２重畳領域を検出する第２検出部を備え、前記調整部は、前記第２検出部の検出結果に基づいて、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する構成であってもよい。

上記表示システムにおいて、前記調整部は、前記第１画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第１画像における前記第１重畳領域の表示を禁止し、前記第２画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第２画像における前記第２重畳領域の表示を禁止する構成であってもよい。

上記表示システムにおいて、前記調整部は、前記第１画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第１画像における前記第１重畳領域の透過率を調整し、前記第２画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第２画像における前記第２重畳領域の透過率を調整する構成であってもよい。

上記表示システムにおいて、前記表示装置は、前記外景の第１撮像範囲を撮像する第１撮像部を備え、前記第１検出部は、前記第１撮像部の撮像結果に基づいて、前記第１画像及び前記第２画像の少なくとも一方が前記第３画像と重なっていることを検出し、前記第２検出部は、前記第１撮像部の撮像結果に基づいて、前記第１重畳領域、及び前記第２重畳領域を検出する構成であってもよい。

上記表示システムにおいて、前記表示装置は、前記外景の第１撮像範囲を撮像する第１撮像部を備え、前記情報処理装置は、前記第１撮像部の撮像結果に基づいて、前記情報処理装置が左手で把持されているか、右手で把持されているかを判定する第１判定部を備え、前記第１検出部は、前記情報処理装置が左手で把持されていると前記第１判定部が判定した場合に、前記第１画像が前記第３画像と重なっていることを検出し、前記情報処理装置が右手で把持されていると前記第１判定部が判定した場合に、前記第２画像が前記第３画像と重なっていることを検出する構成であってもよい。

上記表示システムにおいて、前記情報処理装置は、前記第３表示部が前記表示装置に対向しているか否か判定する第２判定部を備え、前記第３表示部が前記表示装置に対向していると前記第２判定部が判定した場合に、前記調整部は、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する構成であってもよい。

上記表示システムにおいて、前記表示装置は、前記外景の第１撮像範囲を撮像する第１撮像部を備え、前記情報処理装置は、前記外景の第２撮像範囲を撮像する第２撮像部を備え、前記第２判定部は、前記第１撮像部が撮像した画像、及び前記第２撮像部が撮像した画像に基づいて、前記情報処理装置の前記第３表示部が前記表示装置に対向しているか否かを判定する構成であってもよい。

上記課題を解決する別の一態様は、使用者の頭部に装着され、前記使用者の左眼側に位置し、外景に重ねて第１画像を表示する第１表示部と、前記使用者の右眼側に位置し、前記外景に重ねて前記第１画像に対応する第２画像を表示する第２表示部と、を備える表示装置が接続され、第３画像を表示する第３表示部と、コンピューターとを備える情報処理装置の制御プログラムであって、前記コンピューターを、前記第１画像及び前記第２画像の少なくとも一方が前記第３画像と重なっていることを検出する検出部、前記検出部の検出結果に基づいて、前記第３画像を視認することが可能になるように、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する調整部、及び、前記調整部の調整結果に基づいて、前記第１表示部に前記第１画像を表示させ、前記第２表示部に前記第２画像を表示させる表示制御部として機能させる、制御プログラムである。

上記課題を解決する更に別の一態様は、使用者の頭部に装着され、前記使用者の左眼側に位置し、外景に重ねて第１画像を表示する第１表示部と、前記使用者の右眼側に位置し、前記外景に重ねて前記第１画像に対応する第２画像を表示する第２表示部と、を備える表示装置が接続され、第３画像を表示する第３表示部と、コンピューターとを備える情報処理装置の制御方法であって、前記コンピューターが、前記第１画像及び前記第２画像の少なくとも一方が前記第３画像と重なっていることを検出する検出ステップと、前記コンピューターが、前記検出ステップの検出結果に基づいて、前記第３画像を視認することが可能になるように、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する調整ステップと、前記コンピューターが、前記調整ステップの調整結果に基づいて、前記第１表示部に前記第１画像を表示させ、前記第２表示部に前記第２画像を表示させる表示制御ステップと、を含む、情報処理装置の制御方法である。

上記課題を解決する更に別の一態様は、使用者の頭部に装着され表示ユニットと、第３画像を表示する第３表示部を有する情報処理装置、及び前記表示ユニットが接続されるコントロールユニットと備える表示装置であって、前記表示ユニットは、前記使用者の左眼側に位置し、外景に重ねて第１画像を表示する第１表示部と、前記使用者の右眼側に位置し、前記外景に重ねて前記第１画像に対応する第２画像を表示する第２表示部と、を備え、前記コントロールユニットは、前記第１画像及び前記第２画像の少なくとも一方が前記第３画像と重なっていることを検出する第１検出部と、前記第１検出部の検出結果に基づいて、前記第３画像を視認することが可能になるように、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する調整部と、前記調整部の調整結果に基づいて、前記第１表示部に前記第１画像を表示させ、前記第２表示部に前記第２画像を表示させる表示制御部と、を備える、表示装置である。

本実施形態に係る表示システムの構成の一例を示す図。 画像表示部の光学系の構成の一例を示す図。 画像表示部の要部構成の一例を示す斜視図。 ＨＭＤを構成する各部の構成の一例を示す図。 スマートフォンの構成の一例を示す図。 表示パネルがＨＭＤと対向している状態の一例を示す図。 表示パネルがＨＭＤと対向している状態の他の一例を示す図。 第３画像が第２画像と重なる状態の一例を示す図。 第３画像が第２画像と重なる状態の他の一例を示す図。 第３画像が第１画像及び第２画像と重なる状態の一例を示す図。 第２制御部の処理の一例を示すフローチャート。

以下、図面を参照して実施形態について説明する。

［１．表示システムの構成］
［１−１．表示システムの全体構成］
図１は、本実施形態に係る表示システム１の概略構成を示す図である。
図１に示すように、表示システム１は、ＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）１００を備える。ＨＭＤ１００は、使用者Ｕの頭部に装着される画像表示部２０と、接続装置１０とを備え、画像表示部２０により、使用者Ｕの頭部に装着された状態で使用者Ｕに虚像を視認させる装置である。
ＨＭＤ１００は、「表示装置」の一例に対応する。画像表示部２０は、「表示ユニット」の一例に対応する。接続装置１０は、「コントロールユニット」の一例に対応する。
以下の説明において、使用者Ｕとは、ＨＭＤ１００を装着して使用するユーザーを指す。

接続装置１０は、箱形のケースに、コネクター１１Ａ及びコネクター１１Ｄを備える。コネクター１１Ａには、画像表示部２０が接続ケーブル４０を介して接続される。以下、コネクター１１Ａ、１１Ｄを区別しない場合はコネクター１１と表記する場合がある。接続装置１０のケースは、筐体、或いは本体ということもできる。

表示システム１は、ＨＭＤ１００にスマートフォン３００を接続して構成されるシステムである。コネクター１１Ｄは、ＨＭＤ１００においてスマートフォン３００が接続されるインターフェイスである。すなわち、本実施形態では、コネクター１１Ｄにスマートフォン３００が接続される。スマートフォン３００は、「情報処理装置」の一例に対応する。
なお、スマートフォン３００は情報処理装置の一例に過ぎない。情報処理装置は、使用者Ｕが携帯可能であって、画像を表示する表示部と、コンピューターとを備えればよい。例えば、情報処理装置として、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）端末、タブレット型パーソナルコンピューター等を接続装置１０に接続可能である。

コネクター１１は、通信ケーブルを接続する有線インターフェイスであり、この通信ケーブルにより、接続装置１０は外部の装置と接続される。コネクター１１Ａは、接続ケーブル４０を接続する端子、及び、コネクター１１Ａを介して信号を送受信するインターフェイス回路を備える。

コネクター１１Ａは、接続装置１０に画像表示部２０を接続するために設けられる。接続ケーブル４０は、接続装置１０から画像表示部２０に対する電源供給を行うとともに、画像表示部２０と接続装置１０とが相互にデータを送受信する機能を有する。

コネクター１１Ｄは、スマートフォン３００から画像データが入力され、スマートフォン３００に対してセンサーデータの出力が可能なインターフェイス回路を備える。スマートフォン３００は、不揮発性記憶部に記録されたコンテンツデータを再生する。コネクター１１Ｄは、例えば、公知の通信インターフェイス規格に準拠するコネクターである。
本実施形態では、コネクター１１Ｄは、一例として、画像データ及び各種データの入出力に対応するインターフェイス回路を備え、ＵＳＢケーブル４６を介してスマートフォン３００が接続される。

コネクター１１Ｄとして、例えば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）−ＴｙｐｅＣ規格のコネクターを採用することができる。ＵＳＢ−ＴｙｐｅＣに対応するインターフェイス回路は、ＵＳＢ３．１規格に従ったデータの伝送、及び、２０ボルト、５アンペア以内の直流電力の供給が可能である。
また、ＵＳＢ−ＴｙｐｅＣの代替モードの機能として、ＨＤＭＩ（登録商標：Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）規格の画像データ、ＭＨＬ（Ｍｏｂｉｌｅ Ｈｉｇｈ−ｄｅｆｉｎｉｔｉｏｎ Ｌｉｎｋ）規格の画像データ等を伝送できる。スマートフォン３００は、ＵＳＢケーブル４６を介して、電源供給、データの送受信、及び、画像や音声のストリーミングデータの供給等を行うことができる。ＵＳＢ−ＴｙｐｅＣの代替モードは、Ａｌｔｅｒｎａｔｉｖｅモードとして知られている。

画像表示部２０は、本実施形態では眼鏡形状を有する。画像表示部２０は、右保持部２１と、左保持部２３と、前部フレーム２７とを有する本体に、右表示部２２、左表示部２４、右導光板２６、及び左導光板２８を備える。

右保持部２１及び左保持部２３は、前部フレーム２７の両端部から後方に延び、使用者Ｕの頭部に画像表示部２０を保持する。前部フレーム２７の両端部のうち、画像表示部２０の装着時に頭部の右側に位置する端部を端部ＥＲとし、左側に位置する端部を端部ＥＬとする。右保持部２１は、前部フレーム２７の端部ＥＲから、画像表示部２０の装着状態において使用者Ｕの右側頭部に対応する位置まで延伸して設けられる。左保持部２３は、端部ＥＬから、画像表示部２０の装着状態において使用者Ｕの左側頭部に対応する位置まで延伸して設けられる。

右導光板２６及び左導光板２８は、前部フレーム２７に設けられる。右導光板２６は、画像表示部２０の装着状態において使用者Ｕの右眼の眼前に位置し、右眼に画像を視認させる。左導光板２８は、画像表示部２０の装着状態において使用者Ｕの左眼の眼前に位置し、左眼に画像を視認させる。

前部フレーム２７は、右導光板２６の一端と左導光板２８の一端とを互いに連結した形状を有し、この連結位置は、使用者Ｕが画像表示部２０を装着する装着状態で、使用者Ｕの眉間に対応する。
前部フレーム２７は、右導光板２６と左導光板２８との連結位置において、画像表示部２０の装着状態で使用者Ｕの鼻に当接する鼻当て部を設けてもよい。この場合には、鼻当て部と右保持部２１及び左保持部２３とにより画像表示部２０を使用者Ｕの頭部に保持できる。また、右保持部２１及び左保持部２３に、画像表示部２０の装着状態において使用者Ｕの後頭部に接するベルトを連結してもよい。この場合には、ベルトによって画像表示部２０を使用者Ｕの頭部に保持できる。

右表示部２２及び左表示部２４の各々は、光学ユニット及び周辺回路をユニット化したモジュールである。
右表示部２２は、右導光板２６による画像の表示に係るユニットであり、右保持部２１に設けられ、装着状態において使用者Ｕの右側頭部の近傍に位置する。左表示部２４は、左導光板２８による画像の表示に係るユニットであり、左保持部２３に設けられ、装着状態において使用者Ｕの左側頭部の近傍に位置する。なお、右表示部２２及び左表示部２４を総称して単に「表示駆動部」と呼ぶこともできる。

右導光板２６及び左導光板２８は、光透過性の樹脂等によって形成される光学部であり、右表示部２２及び左表示部２４が出力する画像光を、使用者Ｕの眼に導く。右導光板２６及び左導光板２８は、例えばプリズムである。
左表示部２４及び左導光板２８は、「第１表示部」の一例に対応する。右表示部２２及び右導光板２６は、「第２表示部」の一例に対応する。

使用者Ｕの右眼には、右導光板２６により導かれた画像光と、右導光板２６を透過した外光とが入射する。同様に、左眼には、左導光板２８により導かれた画像光と、左導光板２８を透過した外光とが入射する。
左導光板２８により導かれた画像光は、第１画像Ｐ１に対応する。すなわち、左表示部２４及び左導光板２８は、外景に重ねて第１画像Ｐ１を表示する。右導光板２６により導かれた画像光は、第２画像Ｐ２に対応する。すなわち、右表示部２２及び右導光板２６は、外景に重ねて第２画像Ｐ２を表示する。
第２画像Ｐ２は、第１画像Ｐ１に対応する画像である。本実施形態では、第２画像Ｐ２は、例えば、第１画像Ｐ１と同一の画像である。
第１画像Ｐ１及び第２画像Ｐ２については、後述にて図８〜図１０を参照して詳細に説明する。

画像表示部２０の前部フレーム２７には、照度センサー６５が配置される。照度センサー６５は、画像表示部２０を装着する使用者Ｕの前方からの外光を受光する。
第１カメラ６１は、画像表示部２０の前部フレーム２７に配設される。第１カメラ６１は、右導光板２６及び左導光板２８を透過する外光を遮らない位置に設けられる。図１の例では、第１カメラ６１が右導光板２６と左導光板２８との連結部に配置されているが、前部フレーム２７の端部ＥＲ側に配置されてもよく、端部ＥＬ側に配置されてもよい。
第１カメラ６１は、「第１撮像部」の一例に対応する。

第１カメラ６１は、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ−Ｏｘｉｄｅ−Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）等の撮像素子及び撮像レンズ等を備えるデジタルカメラである。第１カメラ６１は、外景の第１撮像範囲を撮像し、第１撮像画像を生成する。
第１撮像範囲については、後述にて図６を参照して説明する。本実施形態の第１カメラ６１は単眼カメラであるが、ステレオカメラで構成してもよい。

前部フレーム２７には、ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）インジケーター６７が配置される。ＬＥＤインジケーター６７は、端部ＥＲに配置され、第１カメラ６１の動作中に点灯して、撮像中であることを報知する。

前部フレーム２７には、距離センサー６４及び赤外線センサー６６が設けられる。距離センサー６４は、予め設定された測定方向に位置する測定対象物までの距離を検出する。距離センサー６４は、例えば、ＬＥＤやレーザーダイオード等の光源と、光源が発する光が測定対象物に反射する反射光を受光する受光部とを有する光反射式距離センサーであってもよい。また、距離センサー６４は、超音波を発する音源と、測定対象物で反射する超音波を受信する検出部とを備える超音波式の距離センサーであってもよい。また、距離センサー６４は、レーザーレンジスキャナーを用いてもよく、この場合には、画像表示部２０の前方を含む広範囲の領域に対し測域を行える。

赤外線センサー６６は、赤外線を検出する。具体的には、赤外線センサー６６は、スマートフォン３００の赤外線通信部から出射された赤外線を検出する。また、赤外線センサー６６が赤外線通信部の一部として構成されてもよい。この場合には、スマートフォン３００の赤外線通信部との通信が可能である。赤外線通信部は、例えば、ＩｒＤＡ規格に則って通信を行う。

画像表示部２０の右表示部２２及び左表示部２４の各々は、接続装置１０に接続される。ＨＭＤ１００では、左保持部２３に接続ケーブル４０が接続され、この接続ケーブル４０に繋がる配線が画像表示部２０内部に敷設され、右表示部２２及び左表示部２４の各々が接続装置１０に接続される。

接続ケーブル４０は、オーディオコネクター３６を備え、ステレオヘッドホンを構成する右イヤホン３２及び左イヤホン３４と、マイク６３とを有するヘッドセット３０が、オーディオコネクター３６に接続される。右イヤホン３２は、使用者Ｕの右耳に装着され、左イヤホン３４は、使用者Ｕの左耳に装着される。右イヤホン３２及び左イヤホン３４は、音声出力部ということもできる。

右イヤホン３２及び左イヤホン３４は、接続装置１０が出力する音声信号に基づき音声を出力する。
マイク６３は、音声を集音して、音声信号を接続装置１０に出力する。マイク６３は、例えばモノラルマイクであってもステレオマイクであってもよく、指向性を有するマイクであってもよいし、無指向性のマイクであってもよい。

接続装置１０は、使用者Ｕにより操作される被操作部として、輝度調整キー１３、輝度調整キー１４、音量調整キー１５及び音量調整キー１６を備える。輝度調整キー１３、輝度調整キー１４、音量調整キー１５及び音量調整キー１６の各々は、ハードウェアキーで構成される。これらの被操作部は接続装置１０の本体の表面に配置され、例えば、使用者Ｕの手指により操作される。

輝度調整キー１３、１４は画像表示部２０により表示する画像の表示輝度を調整するためのハードウェアキーである。輝度調整キー１３は輝度の増大を指示し、輝度調整キー１４は輝度の低減を指示する。音量調整キー１５、１６は、右イヤホン３２及び左イヤホン３４から出力される音声の音量を調整するためのハードウェアキーである。音量調整キー１５は音量の増大を指示し、音量調整キー１６は音量の低減を指示する。

［１−２．ＨＭＤの画像表示部の光学系の構成］
図２は、画像表示部２０が備える光学系の構成を示す要部平面図である。図２には説明のために、使用者Ｕの左眼ＬＥ及び右眼ＲＥを図示する。
図２に示すように、右表示部２２と左表示部２４とは、左右対称に構成される。使用者Ｕの右眼ＲＥに画像を視認させる構成として、右表示部２２は、画像光を発するＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）ユニット２２１を備える。また、ＯＬＥＤユニット２２１が発する画像光Ｌを導くレンズ群等を備えた右光学系２５１を備える。画像光Ｌは、右光学系２５１により右導光板２６に導かれる。

ＯＬＥＤユニット２２１は、ＯＬＥＤパネル２２３と、ＯＬＥＤパネル２２３を駆動するＯＬＥＤ駆動回路２２５とを有する。ＯＬＥＤパネル２２３は、有機エレクトロルミネッセンスにより発光してＲ（赤）、Ｇ（緑）、Ｂ（青）の色光をそれぞれ発する発光素子を、マトリクス状に配置して構成される、自発光型の表示パネルである。ＯＬＥＤパネル２２３は、Ｒ、Ｇ、Ｂの素子を１個ずつ含む単位を１画素として、複数の画素を備え、マトリクス状に配置される画素により画像を形成する。ＯＬＥＤ駆動回路２２５は、第１制御部１２０の制御に従って、ＯＬＥＤパネル２２３が備える発光素子の選択及び発光素子への通電を実行して、ＯＬＥＤパネル２２３の発光素子を発光させる。第１制御部１２０については、後述にて図４を参照して説明する。
ＯＬＥＤ駆動回路２２５は、ＯＬＥＤパネル２２３の裏面すなわち発光面の裏側に、ボンディング等により固定される。ＯＬＥＤ駆動回路２２５は、例えばＯＬＥＤパネル２２３を駆動する半導体デバイスで構成され、ＯＬＥＤパネル２２３の裏面に固定される基板（図示略）に実装されてもよい。この基板には図４に示す温度センサー２１７が実装される。
なお、ＯＬＥＤパネル２２３は、白色に発光する発光素子をマトリクス状に配置し、Ｒ、Ｇ、Ｂの各色に対応するカラーフィルターを重ねて配置する構成であってもよい。また、Ｒ、Ｇ、Ｂの色光をそれぞれ放射する発光素子に加え、Ｗ（白）の光を発する発光素子を備えるＷＲＧＢ構成のＯＬＥＤパネル２２３を用いてもよい。

右光学系２５１は、ＯＬＥＤパネル２２３から射出された画像光Ｌを並行状態の光束にするコリメートレンズを有する。コリメートレンズにより並行状態の光束にされた画像光Ｌは、右導光板２６に入射する。右導光板２６の内部において光を導く光路には、画像光Ｌを反射する複数の反射面が形成される。画像光Ｌは、右導光板２６の内部で複数回の反射を経て右眼ＲＥ側に導かれる。右導光板２６には、右眼ＲＥの眼前に位置するハーフミラー２６１（反射面）が形成される。画像光Ｌは、ハーフミラー２６１で反射して右眼ＲＥに向けて右導光板２６から射出され、この画像光Ｌが右眼ＲＥの網膜に像を結び、使用者Ｕに第２画像Ｐ２を視認させる。

また、使用者Ｕの左眼ＬＥに画像を視認させる構成として、左表示部２４は、画像光を発するＯＬＥＤユニット２４１と、ＯＬＥＤユニット２４１が発する画像光Ｌを導くレンズ群等を備えた左光学系２５２とを備える。画像光Ｌは、左光学系２５２により左導光板２８に導かれる。

ＯＬＥＤユニット２４１は、ＯＬＥＤパネル２４３と、ＯＬＥＤパネル２４３を駆動するＯＬＥＤ駆動回路２４５とを有する。ＯＬＥＤパネル２４３は、ＯＬＥＤパネル２２３と同様に構成される自発光型の表示パネルである。ＯＬＥＤ駆動回路２４５は、第１制御部１２０の指示に従って、ＯＬＥＤパネル２４３が備える発光素子の選択及び発光素子への通電を実行して、ＯＬＥＤパネル２４３の発光素子を発光させる。
ＯＬＥＤ駆動回路２４５は、ＯＬＥＤパネル２４３の裏面すなわち発光面の裏側に、ボンディング等により固定される。ＯＬＥＤ駆動回路２４５は、例えばＯＬＥＤパネル２４３を駆動する半導体デバイスで構成され、ＯＬＥＤパネル２４３の裏面に固定される基板（図示略）に実装されてもよい。この基板には、図４に示す温度センサー２３９が実装される。

左光学系２５２は、ＯＬＥＤパネル２４３から射出された画像光Ｌを並行状態の光束にするコリメートレンズを有する。コリメートレンズにより並行状態の光束にされた画像光Ｌは、左導光板２８に入射する。左導光板２８は、画像光Ｌを反射する複数の反射面が形成された光学素子であり、例えばプリズムである。画像光Ｌは、左導光板２８の内部で複数回の反射を経て左眼ＬＥ側に導かれる。左導光板２８には、左眼ＬＥの眼前に位置するハーフミラー２８１（反射面）が形成される。画像光Ｌは、ハーフミラー２８１で反射して左眼ＬＥに向けて左導光板２８から射出され、この画像光Ｌが左眼ＬＥの網膜に像を結び、使用者Ｕに第１画像Ｐ１を視認させる。

この構成によれば、ＨＭＤ１００は、透過型の表示装置として機能する。すなわち、使用者Ｕの右眼ＲＥには、ハーフミラー２６１で反射した画像光Ｌと、右導光板２６を透過した外光ＯＬとが入射する。また、左眼ＬＥには、ハーフミラー２８１で反射した画像光Ｌと、ハーフミラー２８１を透過した外光ＯＬとが入射する。このように、ＨＭＤ１００は、内部で処理した画像の画像光Ｌと外光ＯＬとを重ねて使用者Ｕの眼に入射させ、使用者Ｕにとっては、右導光板２６及び左導光板２８を透かして外景が見え、この外景に重ねて、画像光Ｌによる画像が視認される。
ハーフミラー２６１、２８１は、右表示部２２及び左表示部２４がそれぞれ出力する画像光を反射して画像を取り出す画像取り出し部であり、表示部ということができる。

なお、左光学系２５２と左導光板２８とを総称して「左導光部」とも呼び、右光学系２５１と右導光板２６とを総称して「右導光部」と呼ぶ。右導光部及び左導光部の構成は上記の例に限定されず、画像光を用いて使用者Ｕの眼前に虚像を形成する限りにおいて任意の方式を用いることができ、例えば、回折格子を用いても良いし、半透過反射膜を用いても良い。

図３は、画像表示部２０の要部の構成を示す図である。図３は、画像表示部２０を使用者Ｕの頭部側から見た要部斜視図である。なお、図３では接続ケーブル４０の図示を省略する。

図３は、画像表示部２０の使用者Ｕの頭部に接する側、言い換えれば使用者Ｕの右眼ＲＥ及び左眼ＬＥに見える側である。別の言い方をすれば、図３では、右導光板２６及び左導光板２８の裏側が見えている。
図３では、使用者Ｕの右眼ＲＥに画像光を照射するハーフミラー２６１及び左眼ＬＥに画像光を照射するハーフミラー２８１が、略四角形の領域として見える。また、ハーフミラー２６１を含む右導光板２６の全体、及びハーフミラー２８１を含む左導光板２８の全体が、上述したように外光を透過する。このため、使用者Ｕには、右導光板２６及び左導光板２８の全体を透過して外景が視認され、ハーフミラー２６１、２８１の位置に矩形の表示画像が視認される。

また、画像表示部２０の使用者Ｕ側には内側カメラ６８が配置される。内側カメラ６８は、使用者Ｕの右眼ＲＥ及び左眼ＬＥの各々に対応するように、右導光板２６と左導光板２８との中央位置に一対、設けられる。内側カメラ６８は、使用者Ｕの右眼ＲＥと左眼ＬＥとをそれぞれ撮像する一対のカメラである。内側カメラ６８は、第１制御部１２０の指示に従って撮像を行う。第１制御部１２０は、内側カメラ６８の撮像画像データを解析する。例えば、第１制御部１２０は、内側カメラ６８の撮像画像データから右眼ＲＥ及び左眼ＬＥの眼球表面における反射光や瞳孔の画像を検出し、使用者Ｕの視線方向を特定する。また、第１制御部１２０は、使用者Ｕの視線方向の変化を求めることができ、右眼ＲＥ及び左眼ＬＥのそれぞれの眼球運動を検出してもよい。
ここで、使用者Ｕの視線の移動は、使用者Ｕの仮想視点の移動とみることもできる。

また、第１制御部１２０は、内側カメラ６８の撮像画像から右眼ＲＥ及び左眼ＬＥの視線方向を検出した場合に、右眼ＲＥ及び左眼ＬＥの輻輳角を求めることができる。輻輳角は、使用者Ｕが注視する対象物までの距離に対応する。すなわち、使用者Ｕが立体的に画像や物体を視認する場合、視認する対象までの距離に対応して、右眼ＲＥ及び左眼ＬＥの輻輳角が定まる。したがって、輻輳角を検出することで、使用者Ｕが注視する距離を求めることができる。また、使用者Ｕの輻輳角を誘導するように画像を表示することにより、立体視を誘導できる。

また、第１制御部１２０は、第２制御部３１０の指示に従って、調整部３１５の調整結果に基づいて、左表示部２４及び左導光板２８に第１画像Ｐ１を表示させ、右表示部２２及び右導光板２６に第２画像Ｐ２を表示させる。具体的には、第１制御部１２０は、第２制御部３１０の指示に従って、調整部３１５によって調整された後の第１画像Ｐ１を左表示部２４及び左導光板２８に表示させ、調整部３１５によって調整された後の第２画像Ｐ２を右表示部２２及び右導光板２６に表示させる。

［１−３．ＨＭＤの各部の構成］
図４は、ＨＭＤ１００を構成する各部の構成の一例を示す図である。
画像表示部２０の右表示部２２は、右表示部基板２１０を有する。右表示部基板２１０には、接続ケーブル４０に接続される右Ｉ／Ｆ部２１１、右Ｉ／Ｆ部２１１を介して接続装置１０から入力されるデータを受信する受信部２１３及びＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２１５が実装される。右Ｉ／Ｆ部２１１は、受信部２１３、ＥＥＰＲＯＭ２１５、温度センサー２１７、第１カメラ６１、距離センサー６４、照度センサー６５、赤外線センサー６６、ＬＥＤインジケーター６７及び内側カメラ６８を、接続装置１０に接続する。受信部２１３は、ＯＬＥＤユニット２２１を接続装置１０に接続する。

左表示部２４は、左表示部基板２３０を有する。左表示部基板２３０には、接続ケーブル４０に接続される左Ｉ／Ｆ部２３１及び左Ｉ／Ｆ部２３１を介して接続装置１０から入力されるデータを受信する受信部２３３が実装される。また、左表示部基板２３０には、６軸センサー２３５及び磁気センサー２３７が実装される。
左Ｉ／Ｆ部２３１は、受信部２３３、６軸センサー２３５、磁気センサー２３７及び温度センサー２３９を、接続装置１０に接続する。受信部２３３は、ＯＬＥＤユニット２４１を接続装置１０に接続する。

Ｉ／Ｆは、インターフェイスの略記である。なお、本実施形態においては、受信部２１３及び受信部２３３の各々を、Ｒｘ２１３、Ｒｘ２３３と記載する場合がある。

ＥＥＰＲＯＭ２１５は、各種のデータを不揮発的に記憶する。ＥＥＰＲＯＭ２１５は、例えば、画像表示部２０が備えるＯＬＥＤユニット２２１、２４１の発光特性や表示特性に関するデータ、右表示部２２又は左表示部２４が備えるセンサーの特性に関するデータ等を記憶する。
具体的には、ＯＬＥＤユニット２２１、２４１のガンマ補正に係るパラメーター、温度センサー２１７、２３９の検出値を補償するデータ等を記憶する。これらのデータは、ＨＭＤ１００の工場出荷時の検査によって生成され、ＥＥＰＲＯＭ２１５に書き込まれる。ＥＥＰＲＯＭ２１５が記憶するデータは、第１制御部１２０により読取り可能である。

第１カメラ６１は、右Ｉ／Ｆ部２１１を介して入力される信号に従って撮像を実行し、撮像画像データを、右Ｉ／Ｆ部２１１に出力する。
照度センサー６５は、外光を受光し、受光量又は受光強度に対応する検出値を出力する。ＬＥＤインジケーター６７は、右Ｉ／Ｆ部２１１を介して入力される制御信号又は駆動電流に従って点灯する。
内側カメラ６８は、右Ｉ／Ｆ部２１１を介して入力される信号に従って撮像を実行し、撮像画像データを、右Ｉ／Ｆ部２１１に出力する。
温度センサー２１７は、ＯＬＥＤユニット２２１の温度を検出し、検出温度に対応する電圧値又は抵抗値を、検出値として出力する。

距離センサー６４は、距離検出を実行し、検出結果を示す信号を、右Ｉ／Ｆ部２１１を介して接続装置１０に出力する。距離センサー６４は、例えば、赤外線式深度センサー、超音波式距離センサー、Ｔｉｍｅ Ｏｆ Ｆｌｉｇｈｔ式距離センサー、画像検出と音声検出とを組み合わせた距離検出ユニット等を用いることができる。また、距離センサー６４が、ステレオカメラや単眼カメラによるステレオ撮影で得られる画像を処理して距離を検出する構成であってもよい。

赤外線センサー６６は、赤外線検出を実行し、検出結果を示す信号を右Ｉ／Ｆ部２１１を介して接続装置１０に出力する。

受信部２１３は、右Ｉ／Ｆ部２１１を介して接続装置１０から伝送される表示用の画像データを受信し、ＯＬＥＤユニット２２１に出力する。ＯＬＥＤユニット２２１は、接続装置１０が伝送する画像データに基づく画像を表示する。
また、受信部２３３は、左Ｉ／Ｆ部２３１を介して接続装置１０から伝送される表示用の画像データを受信し、ＯＬＥＤユニット２４１に出力する。ＯＬＥＤユニット２２１、２４１は、接続装置１０が伝送する画像データに基づく画像を表示する。

６軸センサー２３５は、３軸加速度センサー、及び、３軸ジャイロセンサーを備えるモーションセンサーである。６軸センサー２３５は、上記のセンサーがモジュール化されたＩＭＵ（Ｉｎｅｒｔｉａｌ Ｍｅａｓｕｒｅｍｅｎｔ Ｕｎｉｔ）を採用してもよい。磁気センサー２３７は、例えば、３軸の地磁気センサーである。ジャイロセンサーは、角速度センサーとも呼ばれる。

温度センサー２３９は、ＯＬＥＤユニット２４１の温度を検出し、検出温度に対応する電圧値あるいは抵抗値を、検出値として出力する。

画像表示部２０の各部は、接続ケーブル４０により接続装置１０から供給される電力により動作する。

画像表示部２０は、右表示部２２に電源部２２９を備え、左表示部２４に電源部２４９を備える。電源部２２９は、接続装置１０が接続ケーブル４０を介して供給する電力を、右表示部基板２１０を含む右表示部２２の各部に分配し、供給する。同様に、電源部２４９は、接続装置１０が接続ケーブル４０を介して供給する電力を、左表示部基板２３０を含む左表示部２４の各部に分配し、供給する。右表示部２２及び左表示部２４は、電圧を変換する変換回路等を備えてもよい。

接続装置１０は、Ｉ／Ｆ部１１０、第１制御部１２０、センサー制御部１２２、第１表示制御部１２４、電源制御部１２６、不揮発性記憶部１３０、操作部１４０、接続部１４５及び音声処理部１４７を備える。

Ｉ／Ｆ部１１０は、コネクター１１Ｄを備える。また、Ｉ／Ｆ部１１０は、コネクター１１Ｄに接続されて、各種通信規格に準拠した通信プロトコルを実行するインターフェイス回路を備える。

Ｉ／Ｆ部１１０は、例えば、コネクター１１Ｄ及びインターフェイス回路を実装したインターフェイス基板であってもよい。また、接続装置１０の第１制御部１２０やセンサー制御部１２２、第１表示制御部１２４、電源制御部１２６が、図示しない接続装置メイン基板に実装される構成としてもよい。この場合には、接続装置メイン基板にＩ／Ｆ部１１０のコネクター１１Ｄ及びインターフェイス回路を実装してもよい。
また、Ｉ／Ｆ部１１０は、例えば、外部の記憶装置や記憶媒体を接続可能なメモリーカード用インターフェイス回路等を備えてもよいし、Ｉ／Ｆ部１１０を無線通信インターフェイス回路で構成してもよい。

第１制御部１２０は、接続装置１０の各部を制御する。第１制御部１２０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）のような第１プロセッサーを有する。第１制御部１２０において、第１プロセッサーが第１制御プログラムを実行することによって、ソフトウェアとハードウェアとの協働によりＨＭＤ１００の各部を制御する。第１制御部１２０には、不揮発性記憶部１３０、操作部１４０、接続部１４５及び音声処理部１４７が接続される。

センサー制御部１２２は、第１カメラ６１、距離センサー６４、照度センサー６５、赤外線センサー６６、温度センサー２１７、６軸センサー２３５、磁気センサー２３７及び温度センサー２３９を制御する。具体的には、センサー制御部１２２は、第１制御部１２０の制御に従って各センサーのサンプリング周期の設定及び初期化を行い、各センサーのサンプリング周期に合わせて、各センサーへの通電、制御データの送信、検出値の取得等を実行する。

センサー制御部１２２は、Ｉ／Ｆ部１１０のコネクター１１Ｄに接続され、予め設定されたタイミングで、各センサーから取得した検出値に関するデータをコネクター１１Ｄに出力する。コネクター１１Ｄに接続されたスマートフォン３００は、ＨＭＤ１００の各センサーの検出値、第１カメラ６１の撮像画像データ、及び内側カメラ６８によって検出された視線方向を示すデータを取得できる。

第１表示制御部１２４は、Ｉ／Ｆ部１１０に入力される画像データに基づく画像を画像表示部２０により表示するための各種処理を実行する。本実施形態では、コネクター１１Ｄに、スマートフォン３００が出力する画像信号が入力される。画像信号は、デジタル画像データであるが、アナログ画像信号であってもよい。
第１表示制御部１２４は、例えば、フレームの切り出し、解像度変換、中間フレーム生成、フレームレート変換等の各種処理を実行する。解像度変換は、いわゆるスケーリングを含む。第１表示制御部１２４は、ＯＬＥＤユニット２２１及びＯＬＥＤユニット２４１の各々に対応する画像データを接続部１４５に出力する。接続部１４５に入力された画像データは、コネクター１１Ａから、画像信号２０１として右Ｉ／Ｆ部２１１及び左Ｉ／Ｆ部２３１に伝送される。画像信号２０１は、ＯＬＥＤユニット２２１及びＯＬＥＤユニット２４１の各々に対応して処理されたデジタル画像データである。

本実施形態では、コネクター１１ＤがＵＳＢ−ＴｙｐｅＣコネクターで構成される。第１表示制御部１２４は、コネクター１１Ｄを介して、ＵＳＢ−ＴｙｐｅＣの代替モードで伝送される画像データを受信する。

センサー制御部１２２及び／又は第１表示制御部１２４は、第１プロセッサーがプログラムを実行することにより、ソフトウェアとハードウェアとの協働により実現されてもよい。すなわち、センサー制御部１２２及び第１表示制御部１２４は、第１プロセッサーにより構成され、プログラムを実行することで上記の動作を実行する。この例で、センサー制御部１２２及び第１表示制御部１２４は、第１制御部１２０を構成する第１プロセッサーがプログラムを実行することで実現されてもよい。言い換えれば、第１プロセッサーがプログラムを実行することで、第１制御部１２０、第１表示制御部１２４及びセンサー制御部１２２として機能してもよい。

また、第１表示制御部１２４及びセンサー制御部１２２は、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）やＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等、プログラムされたハードウェアにより構成されてもよい。また、センサー制御部１２２及び第１表示制御部１２４を統合して、ＳｏＣ（Ｓｙｓｔｅｍ−ｏｎ−ａ−Ｃｈｉｐ）−ＦＰＧＡとして構成してもよい。

電源制御部１２６は、コネクター１１Ｄに接続される。電源制御部１２６は、コネクター１１Ｄから供給される電力に基づき、接続装置１０の各部および画像表示部２０に対する電源供給を行う。また、電源制御部１２６は、図示しない電圧変換回路を備え、電圧を変換して接続装置１０及び画像表示部２０の各部に供給する構成であってもよい。電源制御部１２６は、ロジック回路やＦＰＧＡ等のプログラムされた半導体デバイスで構成されてもよい。また、電源制御部１２６をセンサー制御部１２２及び／又は第１表示制御部１２４と共通のハードウェアで構成してもよい。

センサー制御部１２２、第１表示制御部１２４及び電源制御部１２６は、データ処理を行うためのワークメモリーを具備してもよく、第１制御部１２０のメモリーを利用して処理を行ってもよい。

操作部１４０は、接続装置１０が備える被操作部に対する操作を検出し、操作内容を示すデータ、又は、操作された被操作部を示す操作信号を第１制御部１２０に出力する。

音声処理部１４７は、第１制御部１２０から入力される音声データに従って、音声信号を生成し、接続部１４５に出力する。この音声信号は接続部１４５からオーディオコネクター３６を介して右イヤホン３２及び左イヤホン３４に出力される。また、音声処理部１４７は、第１制御部１２０の制御に従って、音声信号のボリュームを調整する。また、音声処理部１４７は、マイク６３が集音した音声の音声データを生成し、第１制御部１２０に出力する。この音声データは、第１制御部１２０により、画像表示部２０が備えるセンサーの検出値と同様に処理されてもよい。

また、接続装置１０は図示しないバッテリーを備え、このバッテリーから接続装置１０及び画像表示部２０の各部に電力を供給する構成であってもよい。接続装置１０が備えるバッテリーは、充電可能な二次電池であってもよい。

［１−４．スマートフォンの構成］
図５は、スマートフォン３００の構成の一例を示す図である。
スマートフォン３００は、第２制御部３１０、表示部３３０、第２カメラ３４１、６軸センサー３５１、及び磁気センサー３５２を備える。

第２制御部３１０は、ＣＰＵやマイコン等の第２プロセッサー３１０Ａを備え、この第２プロセッサー３１０Ａにより第２制御プログラムを実行することにより、スマートフォン３００の各部を制御する。第２制御部３１０は、第２プロセッサー３１０Ａが実行する第２制御プログラムを不揮発的に記憶するＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、及び、第２プロセッサー３１０Ａのワークエリアを構成するＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）のような第２メモリー３１０Ｂを備える。
第２プロセッサー３１０Ａは、「コンピューター」の一例に対応する。第２制御部３１０の第２メモリー３１０Ｂに記憶された第２制御プログラムは、「制御プログラム」の一例に対応する。
第２メモリー３１０Ｂは、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）等の磁気的記録装置、又は、フラッシュメモリー等の半導体記憶素子を用いた記憶装置を備えてもよい。

表示部３３０が備える表示パネル３３１及びタッチセンサー３３２は、第２制御部３１０に接続される。表示パネル３３１は、第２制御部３１０の制御に基づき各種画像を表示する。表示パネル３３１は、例えばＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）で構成される。表示パネル３３１は、矩形状に構成される。本実施形態では、表示パネル３３１は、長方形状である。表示パネル３３１は、第３画像Ｐ３を表示する。
表示パネル３３１は、「第３表示部」の一例に対応する。第３画像Ｐ３については、後述にて図８〜図１０を参照して詳細に説明する。
タッチセンサー３３２は、タッチ操作を検出し、検出した操作を示すデータを第２制御部３１０に出力する。
タッチセンサー３３２は、表示パネル３３１と一体に形成される。具体的には、タッチセンサー３３２は、表示パネル３３１の画像表示面に形成される。本実施形態では、タッチセンサー３３２は、長方形状である。タッチセンサー３３２が出力するデータは、タッチセンサー３３２における操作位置を示す座標データ等である。

第２カメラ３４１は、ＣＣＤやＣＭＯＳ等の撮像素子及び撮像レンズ等を備えるデジタルカメラである。第２カメラ３４１は、第２制御部３１０の指示に従って、外景の第２撮像範囲を撮像し、第２撮像画像を生成する。第２カメラ３４１は、図７に示すように、スマートフォン３００において、表示パネル３３１と同じ側の面に配置されている。具体的には、第２カメラ３４１は、表示パネル３３１の短辺と、スマートフォン３００を構成する筐体のうち表示パネル３３１が配置される面の周辺との間に配置される。
第２カメラ３４１は、「第２撮像部」の一例に対応する。
第２撮像範囲については、後述にて図７を参照して説明する。

６軸センサー３５１は、３軸加速度センサー、及び、３軸ジャイロセンサーを備えるモーションセンサーである。６軸センサー３５１は、上記のセンサーがモジュール化されたＩＭＵを採用してもよい。磁気センサー３５２は、例えば、３軸の地磁気センサーである。ジャイロセンサーは、角速度センサーとも呼ばれる。

［１−５．スマートフォンの第２制御部の構成］
第２制御部３１０は、第１判定部３１１と、第２判定部３１２と、第１検出部３１３と、第２検出部３１４と、調整部３１５と、第２表示制御部３１６とを備える。具体的には、第２制御部３１０は、第２制御部３１０が備える第２プロセッサー３１０Ａが第２制御プログラムを実行することにより、第１判定部３１１、第２判定部３１２、第１検出部３１３、第２検出部３１４、調整部３１５、及び第２表示制御部３１６として機能する。

第１判定部３１１は、第１カメラ６１の撮像結果に基づいて、スマートフォン３００が使用者Ｕの左手で把持されているか、使用者Ｕの右手で把持されているかを判定する。具体的には、第１判定部３１１は、第１カメラ６１の第１撮像画像に画像処理等を実行することによって、スマートフォン３００が使用者Ｕの左手で把持されているか、使用者Ｕの右手で把持されているかを判定する。
例えば、使用者Ｕがスマートフォン３００を左手で把持する場合には、第１カメラ６１の第１撮像画像には、使用者Ｕの左手の手のひらの一部と、使用者Ｕの左手の親指と、使用者Ｕの左手の中指、薬指及び小指の各々の先端部とに対応する画像が含まれる。また、例えば、使用者Ｕがスマートフォン３００を右手で把持する場合には、第１カメラ６１の第１撮像画像には、使用者Ｕの右手の手のひらの一部と、使用者Ｕの右手の親指と、使用者Ｕの右手の中指、薬指及び小指の各々の先端部とに対応する画像が含まれる。
そこで、第１判定部３１１は、第１カメラ６１の第１撮像画像にスマートフォン３００を把持する使用者Ｕの左手の一部が含まれている場合に、スマートフォン３００が使用者Ｕの左手で把持されていると判定する。また、第１判定部３１１は、第１カメラ６１の第１撮像画像にスマートフォン３００を把持する使用者Ｕの右手の一部が含まれている場合に、スマートフォン３００が使用者Ｕの右手で把持されていると判定する。

第２判定部３１２は、表示パネル３３１が図１に示すＨＭＤ１００に対向しているか否かを判定する。具体的には、第２判定部３１２は、図１及び図４に示す第１カメラ６１が撮像した画像、及び第２カメラ３４１が撮像した画像に基づいて、スマートフォン３００の表示パネル３３１がＨＭＤ１００に対向しているか否かを判定する。更に具体的には、下記の第１条件、及び第２条件を満たす場合に、表示パネル３３１がＨＭＤ１００に対向していると判定する。
第１条件：第１カメラ６１の第１撮像範囲内に表示パネル３３１が位置する。
第２条件：第２カメラ３４１の第２撮像範囲内にＨＭＤ１００が位置する。
第１条件については、後述にて図６を参照して詳細に説明する。第２条件については、後述にて図７を参照して詳細に説明する。

第１検出部３１３は、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方が第３画像Ｐ３と重なっていることを検出する。具体的には、第１検出部３１３は、第１カメラ６１の撮像結果に基づいて、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方が第３画像Ｐ３と重なっていることを検出する。
更に具体的には、第１検出部３１３は、第１カメラ６１の第１撮像画像に含まれるスマートフォン３００の表示パネル３３１の位置と、右導光板２６及び左導光板２８の向きと、に基づいて、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方が第３画像Ｐ３と重なっていることを検出する。
例えば、第１検出部３１３は、第１画像Ｐ１が第３画像Ｐ３と重なっており、第２画像Ｐ２が第３画像Ｐ３と重なっていないことを検出する。また、例えば、第１検出部３１３は、第１画像Ｐ１が第３画像Ｐ３と重なっておらず、第２画像Ｐ２が第３画像Ｐ３と重なっていることを検出する。また、例えば、第１検出部３１３は、第１画像Ｐ１が第３画像Ｐ３と重なっており、第２画像Ｐ２が第３画像Ｐ３と重なっていることを検出する。
第１検出部３１３は、「検出部」の一例に対応する。
第１検出部３１３の処理については、後述にて図８〜図１０を参照して詳細に説明する。

第２検出部３１４は、第１画像Ｐ１が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第１重畳領域ＡＤ１を検出する。第１重畳領域ＡＤ１は、第１画像Ｐ１が第３画像Ｐ３と重なっている領域を示す。また、第２検出部３１４は、第２画像Ｐ２が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第２重畳領域ＡＤ２を検出する。第２重畳領域ＡＤ２は、第２画像Ｐ２が第３画像Ｐ３と重なっている領域を示す。
具体的には、第２検出部３１４は、第１カメラ６１の第１撮像画像に含まれるスマートフォン３００の表示パネル３３１の位置と、右導光板２６及び左導光板２８の向きと、に基づいて、第１重畳領域ＡＤ１及び第２重畳領域ＡＤ２を検出する。
第１重畳領域ＡＤ１及び第２重畳領域ＡＤ２の各々については、後述にて図８〜図１０を参照して詳細に説明する。

調整部３１５は、第１検出部３１３の検出結果に基づいて、第３画像Ｐ３を使用者Ｕが視認することが可能になるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整する。また、調整部３１５は、第２画像Ｐ２を第１画像Ｐ１と異ならせるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整する。
具体的には、調整部３１５は、第１画像Ｐ１が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第１画像Ｐ１を調整し、第２画像Ｐ２が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第２画像Ｐ２を調整する。
本実施形態では、調整部３１５は、第２検出部３１４の検出結果に基づいて、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整する。具体的には、第１画像Ｐ１が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、調整部３１５は、第１画像Ｐ１における第１重畳領域ＡＤ１の表示を禁止する。また、第２画像Ｐ２が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第２画像Ｐ２における第２重畳領域ＡＤ２の表示を禁止する。
調整部３１５の処理については、後述にて図８〜図１０を参照して詳細に説明する。

第２表示制御部３１６は、例えば、コンテンツデータを再生し、コンテンツデータに含まれる画像データに対応する第３画像Ｐ３を表示部３３０の表示パネル３３１に表示する。第２表示制御部３１６は、第３画像Ｐ３に対応する第１画像Ｐ１及び第２画像Ｐ２をＨＭＤ１００の第１制御部１２０に伝送する。具体的には、第２表示制御部３１６は、コンテンツデータに含まれる画像データに基づき、左表示部２４及び左導光板２８に表示させる第１画像Ｐ１と、右表示部２２及び右導光板２６に表示させる第２画像Ｐ２とをＨＭＤ１００の第１制御部１２０に伝送する。
また、第２表示制御部３１６は、調整部３１５の調整結果に基づいて、左表示部２４及び左導光板２８に第１画像Ｐ１を表示させ、右表示部２２及び右導光板２６に第２画像Ｐ２を表示させる。換言すれば、第２表示制御部３１６は、調整部３１５によって調整された後の第１画像Ｐ１を左表示部２４及び左導光板２８に表示させ、調整部３１５によって調整された後の第２画像Ｐ２を右表示部２２及び右導光板２６に表示させる。
第２表示制御部３１６は、「表示制御部」の一例に対応する。

第２制御部３１０の処理については、後述にて図１１を参照して具体的に説明する。

本実施形態では、第１画像Ｐ１が第３画像Ｐ３と重なっている場合に、調整部３１５は、第１重畳領域ＡＤ１の表示を禁止し、第２画像Ｐ２が第３画像Ｐ３と重なっている場合に、第２重畳領域ＡＤ２の表示を禁止するが、本発明の実施形態はこれに限定されない。第１画像Ｐ１が第３画像Ｐ３と重なっている場合に、調整部３１５は、第１画像Ｐ１を調整し、第２画像Ｐ２が第３画像Ｐ３と重なっている場合に、調整部３１５は、第２画像Ｐ２を調整すればよい。
例えば、第１画像Ｐ１が第３画像Ｐ３と重なっている場合に、調整部３１５は、第１画像Ｐ１の表示を禁止し、第２画像Ｐ２が第３画像Ｐ３と重なっている場合に、調整部３１５は、第２画像Ｐ２の表示を禁止してもよい。
また、例えば、第１画像Ｐ１が第３画像Ｐ３と重なっている場合に、調整部３１５は、第１画像Ｐ１の透過率を調整し、第２画像Ｐ２が第３画像Ｐ３と重なっている場合に、調整部３１５は、第２画像Ｐ２の透過率を調整してもよい。なお、調整部３１５は、第１画像Ｐ１の透過率、及び第２画像Ｐ２の透過率の各々が増加するように調整する。調整部３１５は、例えば、第１画像Ｐ１の透過率、及び第２画像Ｐ２の透過率の各々が１０％から５０％に増加するように調整する。
また、例えば、第１画像Ｐ１が第３画像Ｐ３と重なっている場合に、調整部３１５は、第１重畳領域ＡＤ１の透過率を調整し、第２画像Ｐ２が第３画像Ｐ３と重なっている場合に、調整部３１５は、第２重畳領域ＡＤ２の透過率を調整してもよい。なお、調整部３１５は、第１重畳領域ＡＤ１の透過率、及び第２重畳領域ＡＤ２の透過率の各々が増加するように調整する。調整部３１５は、例えば、第１重畳領域ＡＤ１の透過率、及び第２重畳領域ＡＤ２の透過率の各々が１０％から５０％に増加するように調整する。

本実施形態では、調整部３１５は、第１検出部３１３の検出結果、及び第２検出部３１４の検出結果に基づいて、第３画像Ｐ３を使用者Ｕが視認することが可能になるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整するが、本発明の実施形態はこれに限定されない。例えば、調整部３１５が、第１判定部３１１の判定結果に基づいて、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整してもよい。
具体的には、スマートフォン３００が使用者Ｕの左手で把持されていると第１判定部３１１が判定した場合に、調整部３１５が第１画像Ｐ１の表示を禁止し、スマートフォン３００が使用者Ｕの右手で把持されていると第１判定部３１１が判定した場合に、調整部３１５が第２画像Ｐ２の表示を禁止してもよい。

本実施形態では、スマートフォン３００の第２制御部３１０が、第１判定部３１１と、第２判定部３１２と、第１検出部３１３と、第２検出部３１４と、調整部３１５と、第２表示制御部３１６とを備えるが、本発明の実施形態はこれに限定されない。例えば、ＨＭＤ１００の接続装置１０の第１制御部１２０が、第１判定部３１１と、第２判定部３１２と、第１検出部３１３と、第２検出部３１４と、調整部３１５と、第２表示制御部３１６とを備えてもよい。ＨＭＤ１００の接続装置１０の第１制御部１２０が、第１判定部３１１と、第２判定部３１２と、第１検出部３１３と、第２検出部３１４と、調整部３１５と、第２表示制御部３１６とを備える形態を、以下の説明において、「本発明の他の実施形態」と記載する場合がある。
また、例えば、スマートフォン３００の第２制御部３１０が、第１判定部３１１、第２判定部３１２、第１検出部３１３、第２検出部３１４、調整部３１５、及び第２表示制御部３１６の一部を備え、ＨＭＤ１００の接続装置１０の第１制御部１２０が、第１判定部３１１、第２判定部３１２、第１検出部３１３、第２検出部３１４、調整部３１５、及び第２表示制御部３１６の残部を備えてもよい。

［２．具体例を用いたスマートフォンの第２制御部の処理の説明］
図６〜図１０の各々は、第２制御部３１０の処理の具体例を示す図である。

［２−１．第２判定部の処理の説明］
図６は、表示パネル３３１がＨＭＤ１００と対向している状態の一例を示す図である。
図６に示すように、使用者Ｕがスマートフォン３００を操作する場合には、通常、ＨＭＤ１００と対向する方向ＤＳにスマートフォン３００が配置される。方向ＤＳは、例えば、左導光板２８と右導光板２６とを含む平面に直交する方向を示す。方向ＤＳは、第１カメラ６１によって撮影された第１撮像画像に基づいて、第２制御部３１０によって検出される。
方向ＤＡは、ＨＭＤ１００からスマートフォン３００の表示パネル３３１の中心位置ＰＣに向かう方向を示す。方向ＤＡは、第１カメラ６１によって撮像された第１撮像画像に基づいて、第２判定部３１２によって検出される。
方向ＤＡは、方向ＤＳに対して傾斜角θだけ傾斜している。傾斜角θは方向ＤＳに対する方向ＤＡの傾斜角を示す。

第２判定部３１２は、傾斜角θの絶対値が閾値角θＳ以下である場合に、第１カメラ６１の第１撮像範囲内に表示パネル３３１が位置すると判定する。すなわち、第２判定部３１２は、傾斜角θが閾値角θＳ以下である場合に、第１条件を満たすと判定する。閾値角θＳは、例えば、３０度である。

このようにして、第２判定部３１２は、第１カメラ６１の第１撮像画像に基づいて、第１条件を満たすか否かを判定できる。

Ａ−Ａ線は、表示パネル３３１の長辺方向を示す。Ｂ−Ｂ線は、表示パネル３３１の短辺方向を示す。
Ａ−Ａ線は、方向ＤＡに対して傾斜角φだけ傾斜している。傾斜角φは、Ａ−Ａ線の方向ＤＡに対する傾斜角を示す。また、Ｂ−Ｂ線は、方向ＤＡに対して傾斜角ψだけ傾斜している。傾斜角ψは、Ｂ−Ｂ線の方向ＤＡに対する傾斜角を示す。

傾斜角φ及び傾斜角ψは、使用者Ｕが表示パネル３３１に表示される第３画像Ｐ３を視認する場合において、使用者Ｕ又はＨＭＤ１００に対する表示パネル３３１の表示面の傾きを規定する。
また、例えば、傾斜角φ及び傾斜角ψの各々が９０度である場合には、表示パネル３３１の表示面は、方向ＤＡと直交する。
本実施形態では、第１条件、及び第２条件を満たす場合に、第２判定部３１２は、表示パネル３３１がＨＭＤ１００に対向していると判定するが、本発明の実施形態はこれに限定されない。第１条件、及び第２条件を満たし、且つ、傾斜角φ及び傾斜角ψの各々が所定の範囲である場合に、第２判定部３１２が、表示パネル３３１がＨＭＤ１００に対向していると判定してもよい。所定の範囲は、例えば、９０度±３０度である。すなわち、傾斜角φ及び傾斜角ψの各々が所定の範囲であることは、次の式（１）及び式（２）を満たすことである。
６０度≦φ≦１２０度 （１）
６０度≦ψ≦１２０度 （２）

距離ＬＡは、表示パネル３３１とＨＭＤ１００との間の距離を示す。距離ＬＡは、距離センサー６４によって検出される。
本実施形態では、第１条件、及び第２条件を満たす場合に、第２判定部３１２は、表示パネル３３１がＨＭＤ１００に対向していると判定するが、本発明の実施形態はこれに限定されない。第１条件、及び第２条件に加えて、下記の第３条件を満たす場合に、第２判定部３１２が、表示パネル３３１がＨＭＤ１００に対向していると判定してもよい。
第３条件：第１カメラ６１とＨＭＤ１００との間の距離ＬＡが閾値距離ＬＳ以下である。
すなわち、第２判定部３１２は、距離ＬＡが閾値距離ＬＳ以下である場合に、第３条件を満たすと判定する。閾値距離ＬＳは、例えば０．８ｍである。

また、例えば、複数の閾値距離（例えば、０．８ｍ、０．５ｍ、及び０．３ｍ）を設け、第２判定部３１２は、距離ＬＡに応じて、表示パネル３３１がＨＭＤ１００に対向しているか否かの判定の基準を変更しても良い。
例えば、距離ＬＡが短いほど、表示パネル３３１がＨＭＤ１００に対向していると判する傾斜角φ及び傾斜角ψの範囲を狭くする。
例えば、距離ＬＡが０．８ｍ以下である場合には、表示パネル３３１がＨＭＤ１００に対向していると判定する条件は、上記式（１）及び式（２）を満たすことである。また、距離ＬＡが０．５ｍ以下である場合には、表示パネル３３１がＨＭＤ１００に対向していると判定する条件は、次の式（３）及び式（４）を満たすことである。
７０度≦φ≦１１０度 （３）
７０度≦ψ≦１１０度 （４）
更に、距離ＬＡが０．３ｍ以下である場合には、表示パネル３３１がＨＭＤ１００に対向していると判定する条件は、次の式（５）及び式（６）を満たすことである。
８０度≦φ≦１００度 （５）
８０度≦ψ≦１００度 （６）
距離ＬＡが短いほど、表示パネル３３１がＨＭＤ１００に対向していると判する傾斜角φ及び傾斜角ψの範囲を狭くすることによって、調整部３１５は、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を適正に調整できる。

図７は、表示パネル３３１がＨＭＤ１００と対向している状態の他の一例を示す図である。
図７に示すように、使用者Ｕがスマートフォン３００を操作する場合には、通常、表示パネル３３１に対してベクトルＶＮの方向にＨＭＤ１００が配置される。ベクトルＶＮは、表示パネル３３１の表示面の法線ベクトルを示す。
ＨＭＤ１００は、第２カメラ３４１の第２撮像範囲内に位置する。中心線ＣＬは、第２カメラ３４１の第２撮像範囲の中心を示す。中心線ＣＬは、ベクトルＶＮと平行である。すなわち、中心線ＣＬは、表示パネル３３１の表示面を含む平面と直交する。
中心線ＣＬに対して傾斜角ηＡ以下の範囲は、第２撮像範囲を示す。換言すれば、傾斜角ηＡは、第２カメラ３４１の画角の半分に対応する。

直線ＬＢは、第２カメラ３４１と第１カメラ６１とを結ぶ直線を示す。傾斜角ηＢは、直線ＬＢの中心線ＣＬに対する傾斜角を示す。図７に示すように、傾斜角ηＢは、傾斜角ηＡよりも小さい。したがって、第２カメラ３４１の撮像する第２撮像画像の中に、第１カメラ６１の画像が含まれる。なお、第１カメラ６１の画像は、第２撮像画像に対して画像処理等を実行することによって検出される。
第２カメラ３４１の撮像する第２撮像画像の中に、第１カメラ６１の画像が含まれる場合に、第２判定部３１２は、第２カメラ３４１の第２撮像範囲内にＨＭＤ１００が位置すると判定する。すなわち、第２判定部３１２は、第２条件を満たすと判定する。

このようにして、第２判定部３１２は、第２カメラ３４１の撮像する第２撮像画像に基づいて、第２条件を満たすか否かを判定できる。

本実施形態では、第２カメラ３４１の撮像する第２撮像画像の中に、第１カメラ６１の画像が含まれる場合に、第２判定部３１２は、第２カメラ３４１の第２撮像範囲内にＨＭＤ１００が位置すると判定するが、本発明の実施形態はこれに限定されない。第２判定部３１２が、第２撮像画像に基いて、第２カメラ３４１の第２撮像範囲内にＨＭＤ１００が位置するか否かを判定すればよい。例えば、第２カメラ３４１の撮像する第２撮像画像の中に、右導光板２６及び左導光板２８の画像が含まれる場合に、第２判定部３１２は、第２カメラ３４１の第２撮像範囲内にＨＭＤ１００が位置すると判定してもよい。

［２−２．調整部の処理の説明］
図８は、第３画像Ｐ３が第２画像Ｐ２と重なる状態の一例を示す図である。なお、図８〜図１０では、表示パネル３３１がＨＭＤ１００に対向している場合について説明する。すなわち、図８〜図１０では、第２判定部３１２は、表示パネル３３１がＨＭＤ１００に対向していると判定する。

図８の上側の図は、右視野範囲ＡＲ及び左視野範囲ＡＬと、スマートフォン３００の位置との関係を示す平面図である。右視野範囲ＡＲは、使用者Ｕの右眼ＲＥが右導光板２６を通して視認する視野の範囲を示す。左視野範囲ＡＬは、使用者Ｕの左眼ＬＥが左導光板２８を通して視認する視野の範囲を示す。
図８の上側の図に示すように、スマートフォン３００は、右視野範囲ＡＲの左右方向の中央部に位置している。なお、スマートフォン３００は、上下方向についても右視野範囲ＡＲの中央部に位置している。また、スマートフォン３００は、左視野範囲ＡＬには入っていない。
すなわち、第１検出部３１３は、第１画像Ｐ１が第３画像Ｐ３と重なっていないことを検出し、第２画像Ｐ２が第３画像Ｐ３と重なっていることを検出する。

図８の下側の図は、使用者Ｕの右眼ＲＥが右導光板２６を通して視認する画像と、使用者Ｕの左眼ＬＥが左導光板２８を通して視認する画像とを示す。図８の下側の右図は、使用者Ｕの右眼ＲＥが右導光板２６を通して視認する画像を示し、図８の下側の左図は、使用者Ｕの左眼ＬＥが左導光板２８を通して視認する画像を示す。

第１画像Ｐ１が第３画像Ｐ３と重なっていないことを第１検出部３１３が検出するため、調整部３１５は、第１画像Ｐ１を調整しない。そこで、第２表示制御部３１６は、左表示部２４及び左導光板２８に第１画像Ｐ１を表示させる。その結果、図８の下側の左図に示すように、使用者Ｕの左眼ＬＥは、左導光板２８を通して、第１画像Ｐ１を視認する。
第２画像Ｐ２が第３画像Ｐ３と重なっていることを第１検出部３１３が検出するため、調整部３１５は、第２画像Ｐ２を調整する。ここでは、調整部３１５は、第２画像Ｐ２の表示を禁止する。そこで、第２表示制御部３１６は、第２画像Ｐ２を表示しない。その結果、図８の下側の右図に示すように、使用者Ｕの右眼ＲＥは、右導光板２６を通して、第３画像Ｐ３を含むスマートフォン３００を視認する。

このようにして、使用者Ｕは、右眼ＲＥで第３画像Ｐ３を含むスマートフォン３００を視認でき、左眼ＬＥで、第１画像Ｐ１を視認できる。したがって、スマートフォン３００の表示パネル３３１に表示される第３画像Ｐ３の視認性を確保して、第１画像Ｐ１の視認性の低下を抑制できる。

図９は、第３画像Ｐ３が第２画像Ｐ２と重なる状態の他の一例を示す図である。図９の上側の図は、右視野範囲ＡＲ及び左視野範囲ＡＬと、スマートフォン３００の位置との関係を示す平面図である。
図９の上側の図に示すように、スマートフォン３００は、右視野範囲ＡＲの左右方向の中央部に位置している。なお、スマートフォン３００は、上下方向については、右視野範囲ＡＲの下部に位置している。すなわち、図９では、スマートフォン３００の上下方向の位置が図８と相違している。また、スマートフォン３００は、左視野範囲ＡＬには入っていない。
すなわち、第１検出部３１３は、第１画像Ｐ１が第３画像Ｐ３と重なっていないことを検出し、第２画像Ｐ２が第３画像Ｐ３と重なっていることを検出する。

図９の下側の右図は、使用者Ｕの右眼ＲＥが右導光板２６を通して視認する画像を示し、図９の下側の左図は、使用者Ｕの左眼ＬＥが左導光板２８を通して視認する画像を示す。
第１画像Ｐ１が第３画像Ｐ３と重なっていないことを第１検出部３１３が検出するため、調整部３１５は、第１画像Ｐ１を調整しない。そこで、第２表示制御部３１６は、左表示部２４及び左導光板２８に第１画像Ｐ１を表示させる。その結果、図９の下側の左図に示すように、使用者Ｕの左眼ＬＥは、左導光板２８を通して、第１画像Ｐ１を視認する。

第２画像Ｐ２が第３画像Ｐ３と重なっていることを第１検出部３１３が検出するため、調整部３１５は、第２画像Ｐ２を調整する。第２検出部３１４は、第２重畳領域ＡＤ２を検出する。第２重畳領域ＡＤ２は、第２画像Ｐ２が第３画像Ｐ３と重なっている領域を示す。図９の下側の右図に示すように、第２重畳領域ＡＤ２は、第２画像Ｐ２の下部領域に対応する。そこで、調整部３１５は、第２画像Ｐ２のうちの第２重畳領域ＡＤ２に対応する画像の表示を禁止する。その結果、図９の下側の右図に示すように、使用者Ｕの右眼ＲＥは、右導光板２６を通して、第２上画像Ｐ２Ｕと、第３上画像Ｐ３Ｕとを視認する。第２上画像Ｐ２Ｕは、第２画像Ｐ２の上部領域に対応する。第３上画像Ｐ３Ｕは、第３画像Ｐ３の上部領域に対応する。

このようにして、使用者Ｕは、右眼ＲＥで第２上画像Ｐ２Ｕと第３上画像Ｐ３Ｕとを視認でき、左眼ＬＥで、第１画像Ｐ１を視認できる。したがって、スマートフォン３００の表示パネル３３１に表示される第３画像Ｐ３の視認性を確保して、第１画像Ｐ１及び第２画像Ｐ２の視認性の低下を抑制できる。

図１０は、第３画像Ｐ３が第１画像Ｐ１及び第２画像Ｐ２と重なる状態の一例を示す図である。図１０の上側の図は、右視野範囲ＡＲ及び左視野範囲ＡＬと、スマートフォン３００の位置との関係を示す平面図である。
図１０の上側の図に示すように、スマートフォン３００は、右視野範囲ＡＲの左右方向の左部に位置している。また、スマートフォン３００は、左視野範囲ＡＬの左右方向の右部に位置している。なお、スマートフォン３００は、上下方向については、右視野範囲ＡＲ及び左視野範囲ＡＬの中央部に位置している。すなわち、図１０では、スマートフォン３００の左右方向の位置が図８と相違している。

図１０の下側の右図は、使用者Ｕの右眼ＲＥが右導光板２６を通して視認する画像を示し、図１０の下側の左図は、使用者Ｕの左眼ＬＥが左導光板２８を通して視認する画像を示す。
第１画像Ｐ１が第３画像Ｐ３と重なっていることを第１検出部３１３が検出するため、調整部３１５は、第１画像Ｐ１を調整する。第２検出部３１４は、第１重畳領域ＡＤ１を検出する。第１重畳領域ＡＤ１は、第１画像Ｐ１が第３画像Ｐ３と重なっている領域を示す。図９の下側の左図に示すように、第１重畳領域ＡＤ１は、第１画像Ｐ１の右部領域に対応する。そこで、調整部３１５は、第１画像Ｐ１のうちの第１重畳領域ＡＤ１に対応する画像の表示を禁止する。その結果、図９の下側の左図に示すように、使用者Ｕの左眼ＬＥは、左導光板２８を通して、第１左画像Ｐ１Ｌと、第３画像Ｐ３とを視認する。第１左画像Ｐ１Ｌは、第１画像Ｐ１の左部領域に対応する。

第２画像Ｐ２が第３画像Ｐ３と重なっていることを第１検出部３１３が検出するため、調整部３１５は、第２画像Ｐ２を調整する。第２検出部３１４は、第２重畳領域ＡＤ２を検出する。第２重畳領域ＡＤ２は、第２画像Ｐ２が第３画像Ｐ３と重なっている領域を示す。図１０の下側の右図に示すように、第２重畳領域ＡＤ２は、第２画像Ｐ２の左部領域に対応する。そこで、調整部３１５は、第２画像Ｐ２のうちの第２重畳領域ＡＤ２に対応する画像の表示を禁止する。その結果、図１０の下側の右図に示すように、使用者Ｕの右眼ＲＥは、右導光板２６を通して、第２右画像Ｐ２Ｒと、第３画像Ｐ３とを視認する。第２右画像Ｐ２Ｒは、第２画像Ｐ２の右部領域に対応する。

このようにして、使用者Ｕは、右眼ＲＥで第２右画像Ｐ２Ｒと第３画像Ｐ３とを視認でき、左眼ＬＥで、第１左画像Ｐ１Ｌと第３画像Ｐ３とを視認できる。したがって、スマートフォン３００の表示パネル３３１に表示される第３画像Ｐ３の視認性を確保して、第１画像Ｐ１及び第２画像Ｐ２の視認性の低下を抑制できる。

［３．スマートフォンの第２制御部の処理の説明］
図１１は、スマートフォン３００の第２制御部３１０の処理の一例を示すフローチャートである。
まず、図１１に示すように、ステップＳ１０１において、第２制御部３１０が、第１カメラ６１が撮像した第１撮像画像を取得する。
次に、ステップＳ１０３において、第２判定部３１２は、第１カメラ６１の第１撮像範囲内に表示パネル３３１が位置するか否かを判定する。換言すれば、第２判定部３１２は、第１カメラ６１が撮像した第１撮像画像が表示パネル３３１に表示された第３画像Ｐ３を含むか否かを判定する。
第１撮像画像が第３画像Ｐ３を含まないと第２判定部３１２が判定した場合（ステップＳ１０３；ＮＯ）には、処理がステップＳ１２７に進む。第１撮像画像が第３画像Ｐ３を含むと第２判定部３１２が判定した場合（ステップＳ１０３；ＹＥＳ）には、処理がステップＳ１０５に進む。

そして、ステップＳ１０５において、第２制御部３１０が、第２カメラ３４１が撮像した第２撮像画像を取得する。
次に、ステップＳ１０７において、第２判定部３１２は、第２カメラ３４１の第２撮像範囲内にＨＭＤ１００が位置するか否かを判定する。換言すれば、第２判定部３１２は、第２カメラ３４１が撮像した第２撮像画像がＨＭＤ１００の画像を含むか否かを判定する。ＨＭＤ１００の画像は、本実施形態では、図７を参照して説明したように、例えば、ＨＭＤ１００の第１カメラ６１の画像である。
第２撮像画像がＨＭＤ１００の画像を含まないと第２判定部３１２が判定した場合（ステップＳ１０７；ＮＯ）には、処理がステップＳ１２７に進む。第２撮像画像がＨＭＤ１００の画像を含むと第２判定部３１２が判定した場合（ステップＳ１０７；ＹＥＳ）には、処理がステップＳ１０９に進む。
そして、ステップＳ１０９において、第２判定部３１２は、表示パネル３３１がＨＭＤ１００に対向していると判定する。

次に、ステップＳ１１１において、第１検出部３１３は、第３画像Ｐ３が第１画像Ｐ１と重なっているか否かを判定する。
第３画像Ｐ３が第１画像Ｐ１と重なっていないと第１検出部３１３が判定した場合（ステップＳ１１１；ＮＯ）には、処理がステップＳ１１７に進む。
そして、ステップＳ１１７において、第２表示制御部３１６が、第１画像Ｐ１を左表示部２４及び左導光板２８に表示させる。その後、処理がステップＳ１１９に進む。
第３画像Ｐ３が第１画像Ｐ１と重なっていると第１検出部３１３が判定した場合（ステップＳ１１１；ＹＥＳ）には、処理がステップＳ１１３に進む。
そして、ステップＳ１１３において、第２検出部３１４が、第１画像Ｐ１が第３画像Ｐ３と重なっている領域を示す第１重畳領域ＡＤ１を検出する。
次に、ステップＳ１１５において、調整部３１５は、第１画像Ｐ１における第１重畳領域ＡＤ１の表示を禁止し、第２表示制御部３１６が、調整後の第１画像Ｐ１を左表示部２４及び左導光板２８に表示させる。その後、処理がステップＳ１１９に進む。

次に、ステップＳ１１９において、第１検出部３１３は、第３画像Ｐ３が第２画像Ｐ２と重なっているか否かを判定する。
第３画像Ｐ３が第２画像Ｐ２と重なっていないと第１検出部３１３が判定した場合（ステップＳ１１９；ＮＯ）には、処理がステップＳ１２５に進む。
そして、ステップＳ１２５において、第２表示制御部３１６が、第２画像Ｐ２を右表示部２２及び右導光板２６に表示させる。その後、処理がステップＳ１２７に進む。
第３画像Ｐ３が第２画像Ｐ２と重なっていると第１検出部３１３が判定した場合（ステップＳ１１９；ＹＥＳ）には、処理がステップＳ１２１に進む。
そして、ステップＳ１２１において、第２検出部３１４が、第２画像Ｐ２が第３画像Ｐ３と重なっている領域を示す第２重畳領域ＡＤ２を検出する。
次に、ステップＳ１２３において、調整部３１５は、第２画像Ｐ２における第２重畳領域ＡＤ２の表示を禁止し、第２表示制御部３１６が、調整後の第２画像Ｐ２を右表示部２２及び右導光板２６に表示させる。その後、処理がステップＳ１２７に進む。

そして、ステップＳ１２７において、第２制御部３１０が、処理を終了するか否かを判定する。
処理を終了しないと第２制御部３１０が判定した場合（ステップＳ１２７；ＮＯ）には、処理がステップＳ１０１に戻る。処理を終了すると第２制御部３１０が判定した場合（ステップＳ１２７；ＹＥＳ）には、処理が終了される。

なお、図１１のステップＳ１１１とステップＳ１１９とは、「検出ステップ」の一例に対応する。ステップＳ１１５とステップＳ１２３とは、「調整ステップ」の一例に対応し、「表示制御ステップ」の一例にも対応する。また、ステップＳ１１７とステップＳ１２５とは、「表示制御ステップ」の一例に対応する。

［４．本実施形態の効果］
以上説明したように、本実施形態に係る表示システム１は、使用者Ｕの頭部に装着されるＨＭＤ１００と、ＨＭＤ１００が接続されるスマートフォン３００とを備える表示システム１であって、ＨＭＤ１００は、使用者Ｕの左眼ＬＥ側に位置し、外景に重ねて第１画像Ｐ１を表示する左表示部２４及び左導光板２８と、使用者Ｕの右眼ＲＥ側に位置し、外景に重ねて第１画像Ｐ１に対応する第２画像Ｐ２を表示する右表示部２２及び右導光板２６と、を備え、スマートフォン３００は、第３画像Ｐ３を表示する表示パネル３３１と、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方が第３画像Ｐ３と重なっていることを検出する第１検出部３１３と、第１検出部３１３の検出結果に基づいて、第３画像Ｐ３を視認することが可能になるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整する調整部３１５と、調整部３１５の調整結果に基づいて、左表示部２４及び左導光板２８に第１画像Ｐ１を表示させ、右表示部２２及び右導光板２６に第２画像Ｐ２を表示させる第２表示制御部３１６と、を備える、表示システム１である。
したがって、第３画像Ｐ３を視認することが可能になるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整し、調整部３１５の調整結果に基づいて、左表示部２４及び左導光板２８に第１画像Ｐ１を表示させ、右表示部２２及び右導光板２６に第２画像Ｐ２を表示させるため、スマートフォン３００の表示パネル３３１に表示される第３画像Ｐ３の視認性の低下を抑制できる。

また、調整部３１５は、第２画像Ｐ２を第１画像Ｐ１と異ならせるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整する。
したがって、第２画像Ｐ２を第１画像Ｐ１と異ならせるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整するため、図８〜図１０を参照して説明したように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の視認性の低下を抑制できる。

また、調整部３１５は、第１画像Ｐ１が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第１画像Ｐ１を調整し、第２画像Ｐ２が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第２画像Ｐ２を調整する。
したがって、第１画像Ｐ１が第３画像Ｐ３と重なっている場合に、第１画像Ｐ１を調整し、第２画像Ｐ２が第３画像Ｐ３と重なっている場合に、第２画像Ｐ２を調整するため、簡素な処理で、第３画像Ｐ３の視認性の低下を抑制できる。また、簡素な処理で、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の視認性の低下を抑制できる。

また、調整部３１５は、第１画像Ｐ１が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第１画像Ｐ１の表示を禁止し、第２画像Ｐ２が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第２画像Ｐ２の表示を禁止する。
したがって、第１画像Ｐ１が第３画像Ｐ３と重なっている場合に、第１画像Ｐ１の表示を禁止し、第２画像Ｐ２が第３画像Ｐ３と重なっている場合に、第２画像Ｐ２の表示を禁止するため、簡素な処理で、第３画像Ｐ３の視認性の低下を抑制できる。また、簡素な処理で、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の視認性の低下を抑制できる。

また、調整部３１５は、第１画像Ｐ１が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第１画像Ｐ１の透過率を調整し、第２画像Ｐ２が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第２画像Ｐ２の透過率を調整する。
したがって、第１画像Ｐ１が第３画像Ｐ３と重なっている場合に、第１画像Ｐ１の透過率を調整するため、第１画像Ｐ１の表示を禁止する場合と比較して、第１画像Ｐ１の視認性の低下を抑制できる。また、第２画像Ｐ２が第３画像Ｐ３と重なっている場合に、第２画像Ｐ２の透過率を調整するため、第２画像Ｐ２の表示を禁止する場合と比較して、第２画像Ｐ２の視認性の低下を抑制できる。

また、スマートフォン３００は、第１画像Ｐ１が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第１画像Ｐ１が第３画像Ｐ３と重なっている領域を示す第１重畳領域ＡＤ１を検出し、第２画像Ｐ２が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第２画像Ｐ２が第３画像Ｐ３と重なっている領域を示す第２重畳領域ＡＤ２を検出する第２検出部３１４を備え、調整部３１５は、第２検出部３１４の検出結果に基づいて、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整する。
したがって、第１重畳領域ＡＤ１及び第２重畳領域ＡＤ２に基づいて、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整するため、第１画像Ｐ１及び第２画像Ｐ２の視認性の低下を更に抑制できる。

また、調整部３１５は、第１画像Ｐ１が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第１画像Ｐ１における第１重畳領域ＡＤ１の表示を禁止し、第２画像Ｐ２が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第２画像Ｐ２における第２重畳領域ＡＤ２の表示を禁止する。
したがって、第１画像Ｐ１が第３画像Ｐ３と重なっている場合に、第１重畳領域ＡＤ１の表示を禁止するため、第１画像Ｐ１の表示を禁止する場合と比較して、第１画像Ｐ１の視認性の低下を抑制できる。また、第２画像Ｐ２が第３画像Ｐ３と重なっている場合に、第２重畳領域ＡＤ２の表示を禁止するため、第２画像Ｐ２の表示を禁止する場合と比較して、第２画像Ｐ２の視認性の低下を抑制できる。

また、調整部３１５は、第１画像Ｐ１が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第１画像Ｐ１における第１重畳領域ＡＤ１の透過率を調整し、第２画像Ｐ２が第３画像Ｐ３と重なっていることを第１検出部３１３が検出した場合に、第２画像Ｐ２における第２重畳領域ＡＤ２の透過率を調整する。
したがって、第１画像Ｐ１が第３画像Ｐ３と重なっている場合に、第１重畳領域ＡＤ１の透過率を調整するため、第１重畳領域ＡＤ１の表示を禁止する場合と比較して、第１画像Ｐ１の視認性の低下を抑制できる。また、第２画像Ｐ２が第３画像Ｐ３と重なっている場合に、第２重畳領域ＡＤ２の透過率を調整するため、第２重畳領域ＡＤ２の表示を禁止する場合と比較して、第２画像Ｐ２の視認性の低下を抑制できる。

また、ＨＭＤ１００は、外景の第１撮像範囲を撮像する第１カメラ６１を備え、第１検出部３１３は、第１カメラ６１の撮像結果に基づいて、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方が第３画像Ｐ３と重なっていることを検出し、第２検出部３１４は、第１カメラ６１の撮像結果に基づいて、第１重畳領域ＡＤ１、及び第２重畳領域ＡＤ２を検出する。
したがって、簡素な構成で、第１検出部３１３及び第２検出部３１４を実現できる。

また、ＨＭＤ１００は、外景の第１撮像範囲を撮像する第１カメラ６１を備え、スマートフォン３００は、第１カメラ６１の撮像結果に基づいて、スマートフォン３００が左手で把持されているか、右手で把持されているかを判定する第１判定部３１１を備え、第１検出部３１３は、スマートフォン３００が左手で把持されていると第１判定部３１１が判定した場合に、第１画像Ｐ１が第３画像Ｐ３と重なっていることを検出し、スマートフォン３００が右手で把持されていると第１判定部３１１が判定した場合に、第２画像Ｐ２が第３画像Ｐ３と重なっていることを検出する。
したがって、簡素な処理で、第１画像Ｐ１が第３画像Ｐ３と重なっていること、及び、第２画像Ｐ２が第３画像Ｐ３と重なっていることを検出できる。

また、スマートフォン３００は、表示パネル３３１がＨＭＤ１００に対向しているか否か判定する第２判定部３１２を備え、表示パネル３３１がＨＭＤ１００に対向していると第２判定部３１２が判定した場合に、調整部３１５は、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整する。
したがって、表示パネル３３１がＨＭＤ１００に対向している場合に、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整するため、第１画像Ｐ１及び第２画像Ｐ２を適正に調整できる。例えば、表示パネル３３１がＨＭＤ１００に対向していない場合には、第１画像Ｐ１及び第２画像Ｐ２の画像を調整しないため、第１画像Ｐ１及び第２画像Ｐ２を適正に調整できる。

また、ＨＭＤ１００は、外景の第１撮像範囲を撮像する第１カメラ６１を備え、スマートフォン３００は、外景の第２撮像範囲を撮像する第２カメラ３４１を備え、第２判定部３１２は、第１カメラ６１が撮像した画像、及び第２カメラ３４１が撮像した画像に基づいて、スマートフォン３００の表示パネル３３１がＨＭＤ１００に対向しているか否かを判定する。
したがって、第１カメラ６１が撮像した画像、及び第２カメラ３４１が撮像した画像に基づいて、スマートフォン３００の表示パネル３３１がＨＭＤ１００に対向しているか否かを判定するため、表示パネル３３１がＨＭＤ１００に対向しているか否かを適正に判定できる。

本実施形態に係る制御プログラムは、使用者Ｕの頭部に装着され、使用者Ｕの左眼ＬＥ側に位置し、外景に重ねて第１画像Ｐ１を表示する左表示部２４及び左導光板２８と使用者Ｕの右眼ＲＥ側に位置し、外景に重ねて第１画像Ｐ１に対応する第２画像Ｐ２を表示する右表示部２２及び右導光板２６と、を備えるＨＭＤ１００が接続され、第３画像Ｐ３を表示する表示パネル３３１と、第２プロセッサー３１０Ａとを備えるスマートフォン３００の制御プログラムであって、第２プロセッサー３１０Ａを、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方が第３画像Ｐ３と重なっていることを検出する第１検出部３１３、第１検出部３１３の検出結果に基づいて、第３画像Ｐ３を視認することが可能になるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整する調整部３１５、及び、調整部３１５の調整結果に基づいて、左表示部２４及び左導光板２８に第１画像Ｐ１を表示させ、右表示部２２及び右導光板２６に第２画像Ｐ２を表示させる第２表示制御部３１６として機能させる、制御プログラムである。
したがって、第３画像Ｐ３を視認することが可能になるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整し、調整部３１５の調整結果に基づいて、左表示部２４及び左導光板２８に第１画像Ｐ１を表示させ、右表示部２２及び右導光板２６に第２画像Ｐ２を表示させるため、スマートフォン３００の表示パネル３３１に表示される第３画像Ｐ３の視認性の低下を抑制できる。

本実施形態に係るスマートフォン３００の制御方法は、使用者Ｕの頭部に装着され、使用者Ｕの左眼ＬＥ側に位置し、外景に重ねて第１画像Ｐ１を表示する左表示部２４及び左導光板２８と、使用者Ｕの右眼ＲＥ側に位置し、外景に重ねて第１画像Ｐ１に対応する第２画像Ｐ２を表示する右表示部２２及び右導光板２６と、を備えるＨＭＤ１００が接続され、第３画像Ｐ３を表示する表示パネル３３１と、第２プロセッサー３１０Ａとを備えるスマートフォン３００の制御方法であって、第２プロセッサー３１０Ａが、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方が第３画像Ｐ３と重なっていることを検出する検出ステップと、第２プロセッサー３１０Ａが、検出ステップの検出結果に基づいて、第３画像Ｐ３を視認することが可能になるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整する調整ステップと、第２プロセッサー３１０Ａが、調整ステップの調整結果に基づいて、左表示部２４及び左導光板２８に第１画像Ｐ１を表示させ、右表示部２２及び右導光板２６に第２画像Ｐ２を表示させる表示制御ステップと、を含む、スマートフォン３００の制御方法である。
したがって、第３画像Ｐ３を視認することが可能になるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整し、調整ステップの調整結果に基づいて、左表示部２４及び左導光板２８に第１画像Ｐ１を表示させ、右表示部２２及び右導光板２６に第２画像Ｐ２を表示させるため、スマートフォン３００の表示パネル３３１に表示される第３画像Ｐ３の視認性の低下を抑制できる。

本発明の他の実施形態に係るＨＭＤ１００は、使用者Ｕの頭部に装着され画像表示部２０と、第３画像Ｐ３を表示する表示パネル３３１を有するスマートフォン３００、及び画像表示部２０が接続される接続装置１０と備えるＨＭＤ１００であって、画像表示部２０は、使用者Ｕの左眼ＬＥ側に位置し、外景に重ねて第１画像Ｐ１を表示する左表示部２４及び左導光板２８と、使用者Ｕの右眼ＲＥ側に位置し、外景に重ねて第１画像Ｐ１に対応する第２画像Ｐ２を表示する右表示部２２及び右導光板２６と、を備え、接続装置１０は、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方が第３画像Ｐ３と重なっていることを検出する第１検出部３１３と、第１検出部３１３の検出結果に基づいて、第３画像Ｐ３を視認することが可能になるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整する調整部３１５と、調整部３１５の調整結果に基づいて、左表示部２４及び左導光板２８に第１画像Ｐ１を表示させ、右表示部２２及び右導光板２６に第２画像Ｐ２を表示させる第２表示制御部３１６と、を備える、ＨＭＤ１００である。
したがって、第３画像Ｐ３を視認することが可能になるように、第１画像Ｐ１及び第２画像Ｐ２の少なくとも一方の画像を調整し、調整部３１５の調整結果に基づいて、左表示部２４及び左導光板２８に第１画像Ｐ１を表示させ、右表示部２２及び右導光板２６に第２画像Ｐ２を表示させるため、スマートフォン３００の表示パネル３３１に表示される第３画像Ｐ３の視認性の低下を抑制できる。

［５．他の実施形態］
本発明は上記実施形態の構成に限られるものではなく、その要旨を逸脱しない範囲において種々の態様において実施することが可能である。
例えば、上記実施形態では、「情報処理装置」がスマートフォン３００であるが、これに限定されない。「情報処理装置」は、使用者Ｕが携帯可能に構成され、表示部と、操作部と、制御部とを備えればよい。例えば、「情報処理装置」がＰＤＡ端末でもよいし、タブレット型パーソナルコンピューターでもよい。

また、上記実施形態では、接続装置１０が画像表示部２０と有線接続される構成を例示したが、これに限定されず、接続装置１０に対して画像表示部２０が無線接続される構成であってもよい。
また、上記実施形態では、接続装置１０がスマートフォン３００と有線接続される構成を例示したが、これに限定されず、接続装置１０に対してスマートフォン３００が無線接続される構成であってもよい。

また、接続装置１０が備える一部の機能を画像表示部２０に設けてもよく、接続装置１０を複数の装置により実現してもよい。例えば、接続装置１０に代えて、使用者Ｕの身体、着衣、或いは、使用者Ｕが身につける装身具に取り付け可能なウェアラブルデバイスを用いてもよい。この場合のウェアラブルデバイスは、例えば、時計型の装置、指輪型の装置、レーザーポインター、マウス、エアーマウス、ゲームコントローラー、ペン型のデバイス等であってもよい。

また、上記実施形態では、画像表示部２０と接続装置１０とが分離され、接続ケーブル４０を介して接続された構成を例に挙げて説明した。これに限定されず、接続装置１０と画像表示部２０とが一体に構成され、使用者Ｕの頭部に装着される構成とすることも可能である。

また、上記実施形態において、使用者Ｕが表示部を透過して外景を視認する構成は、右導光板２６及び左導光板２８が外光を透過する構成に限定されない。例えば外景を視認できない状態で画像を表示する表示装置にも適用可能である。具体的には、第１カメラ６１の撮像画像、この撮像画像に基づき生成される画像やＣＧ、予め記憶された画像データや外部から入力される画像データに基づく画像等を表示する表示装置に、適用できる。例えば、第１カメラ６１により撮像する外景の画像と、表示画像とを合成した合成画像を画像表示部２０により表示する構成とすれば、画像表示部２０が外光を透過しなくても、使用者Ｕに外景と画像とを視認可能に表示できる。このような、いわゆるビデオシースルー型の表示装置に適用することも勿論可能である。

また、例えば、画像表示部２０に代えて、例えば帽子のように装着する画像表示部等の他の方式の画像表示部を採用してもよく、使用者Ｕの左眼ＬＥに対応して画像を表示する表示部と、使用者Ｕの右眼ＲＥに対応して画像を表示する表示部とを備えていればよい。また、表示装置は、例えば、自動車や飛行機等の車両に搭載されるＨＭＤとして構成されてもよい。また、例えば、ヘルメット等の身体防護具に内蔵されたＨＭＤとして構成されてもよい。この場合には、使用者Ｕの身体に対する位置を位置決めする部分、及び、当該部分に対し位置決めされる部分を装着部とすることができる。

また、画像光を使用者Ｕの眼に導く光学系として、右導光板２６及び左導光板２８の一部に、ハーフミラー２６１、２８１により虚像が形成される構成を例示した。これに限定されず、右導光板２６及び左導光板２８の全面又は大部分を占める面積を有する表示領域に、画像を表示する構成としてもよい。この場合には、画像の表示位置を変化させる動作において、画像を縮小する処理を含めてもよい。
更に、光学素子は、ハーフミラー２６１、２８１を有する右導光板２６、左導光板２８に限定されず、画像光を使用者Ｕの眼に入射させる光学部品であればよく、具体的には、回折格子、プリズム、ホログラフィー表示部を用いてもよい。

また、図４、図５等に示した各機能ブロックのうち少なくとも一部は、ハードウェアで実現してもよいし、ハードウェアとソフトウェアの協働により実現される構成としてもよく、図に示した通りに独立したハードウェア資源を配置する構成に限定されない。
また、第２制御部３１０が実行する第２制御プログラムは、不揮発性記憶部又は第２制御部３１０内の他の記憶部に記憶されてもよい。また、外部の装置に記憶された第２制御プログラムを、通信部等を介して取得して実行する構成としてもよい。
また、接続装置１０に形成された構成が重複して画像表示部２０に形成されていてもよい。例えば、接続装置１０の第１プロセッサーと同様のプロセッサーが画像表示部２０に配置されてもよいし、接続装置１０が備える第１プロセッサーと画像表示部２０のプロセッサーとが別々に分けられた機能を実行する構成としてもよい。

また、図１１に示すフローチャートの処理単位は、スマートフォン３００の第２制御部３１０の処理を理解容易にするために、主な処理内容に応じて分割したものである。図１１に示すフローチャートに示す処理単位の分割の仕方や名称によって実施形態が制限されることはない。また、第２制御部３１０の処理は、処理内容に応じて、さらに多くの処理単位に分割することもできるし、１つの処理単位がさらに多くの処理を含むように分割することもできる。また、上記のフローチャートの処理順序も、図示した例に限られるものではない。
また、第２制御部３１０の処理の一部又は全部を、第１制御部１２０が実行してもよい。

また、スマートフォン３００の制御方法は、スマートフォン３００が備える第２プロセッサー３１０Ａに、スマートフォン３００の制御方法に対応した第２制御プログラムを実行させることで実現できる。また、この第２制御プログラムは、コンピューターで読み取り可能に記録した記録媒体に記録しておくことも可能である。記録媒体としては、磁気的、光学的記録媒体又は半導体メモリーデバイスを用いることができる。具体的には、フレキシブルディスク、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｋ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）、Ｂｌｕ−ｒａｙ（登録商標）Ｄｉｓｃ、光磁気ディスク、フラッシュメモリー、カード型記録媒体等の可搬型、或いは固定式の記録媒体が挙げられる。また、記録媒体は、画像表示装置が備える内部記憶装置であるＲＡＭ、ＲＯＭ、ＨＤＤ等の不揮発性記憶装置であってもよい。また、スマートフォン３００の制御方法に対応した第２制御プログラムをサーバー装置等に記憶させておき、サーバー装置からスマートフォン３００に、第２制御プログラムをダウンロードすることでスマートフォン３００の制御方法を実現することもできる。

１…表示システム、１０…接続装置（コントロールユニット）、１１、１１Ａ、１１Ｄ…コネクター、１３、１４…輝度調整キー、１５、１６…音量調整キー、２０…画像表示部（表示ユニット）、２１…右保持部、２２…右表示部（第２表示部の一部）、２３…左保持部、２４…左表示部（第１表示部の一部）、２６…右導光板（第２表示部の一部）、２６１…ハーフミラー、２８…左導光板（第１表示部の一部）、２８１…ハーフミラー、４０…接続ケーブル、４６…ＵＳＢケーブル、６１…第１カメラ（第１撮像部）、６４…距離センサー、６６…赤外線センサー、６８…内側カメラ、１００…ＨＭＤ（表示装置）、１２０…第１制御部、１２２…センサー制御部、１２４…第１表示制御部、１２６…電源制御部、１３０…不揮発性記憶部、１４０…操作部、１４５…接続部、１４７…音声処理部、２１０…右表示部基板、２２１…ＯＬＥＤユニット、２３０…左表示部基板、２３５…６軸センサー、２３７…磁気センサー、２４１…ＯＬＥＤユニット、３００…スマートフォン（情報処理装置）、３１０…第２制御部、３１０Ａ…第２プロセッサー、３１０Ｂ…第２メモリー、３１１…第１判定部、３１２…第２判定部、３１３…第１検出部、３１４…第２検出部、３１５…調整部、３１６…第２表示制御部（表示制御部）、３３０…表示部、３３１…表示パネル（第３表示部）、３３２…タッチセンサー、３５１…６軸センサー、３５２…磁気センサー、ＡＤ１…第１重畳領域、ＡＤ２…第２重畳領域、ＡＬ…左視野範囲、ＡＲ…右視野範囲、Ｐ１…第１画像、Ｐ２…第２画像、Ｐ３…第２画像、Ｕ…使用者、θ、φ、ψ、ηＡ、ηＢ…傾斜角。

Claims (15)

1. 使用者の頭部に装着される表示装置と、前記表示装置が接続される情報処理装置とを備える表示システムであって、
   前記表示装置は、
   前記使用者の左眼側に位置し、外景に重ねて第１画像を表示する第１表示部と、
   前記使用者の右眼側に位置し、前記外景に重ねて前記第１画像に対応する第２画像を表示する第２表示部と、を備え、
   前記情報処理装置は、
   第３画像を表示する第３表示部と、
   前記第１画像及び前記第２画像の少なくとも一方が前記第３画像と重なっていることを検出する第１検出部と、
   前記第１検出部の検出結果に基づいて、前記第３画像を視認することが可能になるように、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する調整部と、
   前記調整部の調整結果に基づいて、前記第１表示部に前記第１画像を表示させ、前記第２表示部に前記第２画像を表示させる表示制御部と、を備える、表示システム。
2. 前記調整部は、前記第２画像を前記第１画像と異ならせるように、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する、請求項１に記載の表示システム。
3. 前記調整部は、
   前記第１画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第１画像を調整し、
   前記第２画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第２画像を調整する、請求項１又は請求項２に記載の表示システム。
4. 前記調整部は、
   前記第１画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第１画像の表示を禁止し、
   前記第２画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第２画像の表示を禁止する、請求項３に記載の表示システム。
5. 前記調整部は、
   前記第１画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第１画像の透過率を調整し、
   前記第２画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第２画像の透過率を調整する、請求項３に記載の表示システム。
6. 前記情報処理装置は、
   前記第１画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第１画像が前記第３画像と重なっている領域を示す第１重畳領域を検出し、前記第２画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第２画像が前記第３画像と重なっている領域を示す第２重畳領域を検出する第２検出部を備え、
   前記調整部は、前記第２検出部の検出結果に基づいて、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する、請求項１から５のいずれか１項に記載の表示システム。
7. 前記調整部は、
   前記第１画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第１画像における前記第１重畳領域の表示を禁止し、
   前記第２画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第２画像における前記第２重畳領域の表示を禁止する、請求項６に記載の表示システム。
8. 前記調整部は、
   前記第１画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第１画像における前記第１重畳領域の透過率を調整し、
   前記第２画像が前記第３画像と重なっていることを前記第１検出部が検出した場合に、前記第２画像における前記第２重畳領域の透過率を調整する、請求項６に記載の表示システム。
9. 前記表示装置は、前記外景の第１撮像範囲を撮像する第１撮像部を備え、
   前記第１検出部は、前記第１撮像部の撮像結果に基づいて、前記第１画像及び前記第２画像の少なくとも一方が前記第３画像と重なっていることを検出し、
   前記第２検出部は、前記第１撮像部の撮像結果に基づいて、前記第１重畳領域、及び前記第２重畳領域を検出する、請求項６から８のいずれか１項に記載の表示システム。
10. 前記表示装置は、前記外景の第１撮像範囲を撮像する第１撮像部を備え、
    前記情報処理装置は、前記第１撮像部の撮像結果に基づいて、前記情報処理装置が左手で把持されているか、右手で把持されているかを判定する第１判定部を備え、
    前記第１検出部は、
    前記情報処理装置が左手で把持されていると前記第１判定部が判定した場合に、前記第１画像が前記第３画像と重なっていることを検出し、
    前記情報処理装置が右手で把持されていると前記第１判定部が判定した場合に、前記第２画像が前記第３画像と重なっていることを検出する、請求項１から８のいずれか１項に記載の表示システム。
11. 前記情報処理装置は、
    前記第３表示部が前記表示装置に対向しているか否か判定する第２判定部を備え、
    前記第３表示部が前記表示装置に対向していると前記第２判定部が判定した場合に、前記調整部は、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する、請求項１から８のいずれか１項に記載の表示システム。
12. 前記表示装置は、前記外景の第１撮像範囲を撮像する第１撮像部を備え、
    前記情報処理装置は、前記外景の第２撮像範囲を撮像する第２撮像部を備え、
    前記第２判定部は、前記第１撮像部が撮像した画像、及び前記第２撮像部が撮像した画像に基づいて、前記情報処理装置の前記第３表示部が前記表示装置に対向しているか否かを判定する、請求項１１に記載の表示システム。
13. 使用者の頭部に装着され、前記使用者の左眼側に位置し、外景に重ねて第１画像を表示する第１表示部と、前記使用者の右眼側に位置し、前記外景に重ねて前記第１画像に対応する第２画像を表示する第２表示部と、を備える表示装置が接続され、第３画像を表示する第３表示部と、コンピューターとを備える情報処理装置の制御プログラムであって、
    前記コンピューターを、
    前記第１画像及び前記第２画像の少なくとも一方が前記第３画像と重なっていることを検出する検出部、
    前記検出部の検出結果に基づいて、前記第３画像を視認することが可能になるように、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する調整部、及び、
    前記調整部の調整結果に基づいて、前記第１表示部に前記第１画像を表示させ、前記第２表示部に前記第２画像を表示させる表示制御部として機能させる、制御プログラム。
14. 使用者の頭部に装着され、前記使用者の左眼側に位置し、外景に重ねて第１画像を表示する第１表示部と、前記使用者の右眼側に位置し、前記外景に重ねて前記第１画像に対応する第２画像を表示する第２表示部と、を備える表示装置が接続され、第３画像を表示する第３表示部と、コンピューターとを備える情報処理装置の制御方法であって、
    前記コンピューターが、前記第１画像及び前記第２画像の少なくとも一方が前記第３画像と重なっていることを検出する検出ステップと、
    前記コンピューターが、前記検出ステップの検出結果に基づいて、前記第３画像を視認することが可能になるように、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する調整ステップと、
    前記コンピューターが、前記調整ステップの調整結果に基づいて、前記第１表示部に前記第１画像を表示させ、前記第２表示部に前記第２画像を表示させる表示制御ステップと、を含む、情報処理装置の制御方法。
15. 使用者の頭部に装着され表示ユニットと、第３画像を表示する第３表示部を有する情報処理装置、及び前記表示ユニットが接続されるコントロールユニットと備える表示装置であって、
    前記表示ユニットは、
    前記使用者の左眼側に位置し、外景に重ねて第１画像を表示する第１表示部と、
    前記使用者の右眼側に位置し、前記外景に重ねて前記第１画像に対応する第２画像を表示する第２表示部と、を備え、
    前記コントロールユニットは、
    前記第１画像及び前記第２画像の少なくとも一方が前記第３画像と重なっていることを検出する第１検出部と、
    前記第１検出部の検出結果に基づいて、前記第３画像を視認することが可能になるように、前記第１画像及び前記第２画像の少なくとも一方の画像を調整する調整部と、
    前記調整部の調整結果に基づいて、前記第１表示部に前記第１画像を表示させ、前記第２表示部に前記第２画像を表示させる表示制御部と、を備える、表示装置。

Images