JPWO2014061388A1 - 携帯端末 - Google Patents

Abstract

【課題】携帯端末による音声出力中にユーザが透過型表示部による表示を適切に把握可能な携帯端末を提案する。【解決手段】携帯端末は、音声を出力する音声出力部を有する筺体と、前記筺体に対して回動可能に設けられた透過型表示部と、を備え、前記透過型表示部は、前記音声出力部による音声出力中に、前記筺体の主面と交差する平面上に配置可能である。前記透過型表示部は、通話中に、前記筺体の主面と交差する平面上に配置可能である。【選択図】図３

Description

本開示は、透過型表示部を備える携帯端末に関する。

携帯端末として、携帯電話やスマートフォン等の種々の装置が普及している。かかる携帯端末は、通話時等に音声を出力する音声出力部を有する。そして、利便性を向上させる観点等から、音声出力中に表示部に画像等を表示させる携帯端末が提案されている（特許文献１参照）。

また、携透過視可能な透過型表示部を有する携帯端末が提案されている（特許文献２参照）。特許文献２では、カメラ部で写真撮影をする際に、透過型表示部の表示面を透過視可能な状態に制御する技術が開示されている。

特開平１１−２３４６３７号公報 特開２０１０−１８３３７８号公報

ところで、携帯端末が音声出力中に透過型表示部に表示を行わせたい要望がなされている。しかし、音声出力中の透過型表示部の表示については、これまで十分な検討がなされていない。

そこで、本開示は、携帯端末による音声出力中にユーザが透過型表示部による表示を適切に把握可能な携帯端末を提案する。

本開示によれば、音声を出力する音声出力部を有する筺体と、前記筺体に対して回動可能に設けられた透過型表示部と、を備え、前記透過型表示部は、前記音声出力部による音声出力中に、前記筺体の主面と交差する平面上に配置可能である、携帯端末が提供される。

かかる携帯端末によれば、音声出力部による音声出力中に、透過型表示部が筺体の主面と交差する平面上に配置可能であるので、例えばユーザが携帯端末を耳に当てて出力されている音声を聞いている際に、透過型表示部が見えやすい位置に位置するため、透過型表示部の表示を適切に把握できる。

以上説明したように本開示によれば、携帯端末による音声出力中にユーザが透過型表示部による表示を適切に把握することが可能となる。

本実施の形態に係る携帯端末１０の構成の一例を示す正面図である。 透過型表示部４０の回動状態の一例を示す図である。 携帯端末１０の使用形態の一例を示す図である。 携帯端末１０に設けられたカメラを示す一例である。 透過型表示部４０の２つの開状態の一例を示す図である。 携帯端末１０の外観構成の第２実施例を示す図である。 携帯端末１０の外観構成の第３実施例を示す図である。 ユーザの左目用として利用する場合の透過型表示部４０の開状態を示す。 携帯端末１０の外観構成の第４実施例を示す図である。 第１表示方式に係る携帯端末１０の外観構成を示す図である。 第１表示方式に係る透過型表示部４０の内部構成と、光束の伝達経路とを示す模式図である。 第１表示方式の第１変形例に係る透過型表示部４０の内部構成と、光束の伝達経路とを示す模式図である。 第１表示方式の第２変形例に係る透過型表示部４０の内部構成と、光束の伝達経路とを示す模式図である。 第１表示方式の第３変形例に係る携帯端末１０の外観構成の一例を示す図である。 第１表示方式の第３変形例に係る透過型表示部４０の内部構成を示す模式図である。 透過型表示部４０が第１開状態に位置する際の光束の伝達経路を示す模式図である。 透過型表示部４０が第２開状態に位置する際の光束の伝達経路を示す模式図である。 第２表示方式に係る透過型表示部４０の内部構成と、光束の伝達経路とを示す模式図である。 第３表示方式に係る透過型表示部４０の内部構成と、光束の伝達経路とを示す模式図である。 透過型表示部４０の回動検出機構の第１実施例を示す図である。 透過型表示部４０の回動状態と、スイッチ７６の付勢状態との関係を示す図である。 透過型表示部４０の回動検出機構の第２実施例を示す図である。 透過型表示部４０の回動検出機構の第３実施例を示す図である。 透過型表示部４０の回動検出機構の第４実施例を示す図である。 透過型表示部４０の回動検出機構の第５実施例を示す図である。 携帯端末１０の内部構成例を示すブロック図である。 会話から抽出した話題に基づく関連情報の表示処理を示すフローチャートである。 通話中の話題の関連情報の表示処理中の透過型表示部４０の表示例を示す図である。 通話中の話題の関連情報の表示処理中の透過型表示部４０の表示例を示す図である。 通話中の話題の関連情報の表示処理中の透過型表示部４０の表示例を示す図である。 通話中の話題の関連情報の表示処理中の透過型表示部４０の表示例を示す図である。 通話中の話題の関連情報の表示処理中の透過型表示部４０の表示例を示す図である。 同時視聴しているテレビ画面の関連情報の表示処理を示すフローチャートである。 同時視聴しているテレビ画面の関連情報の表示処理を示すフローチャートである。 同時視聴しているテレビ画面の関連情報の表示処理中の透過型表示部４０の表示例を示す図である。 同時視聴しているテレビ画面の関連情報の表示処理中の透過型表示部４０の表示例を示す図である。 同時視聴しているテレビ画面の関連情報の表示処理中の透過型表示部４０の表示例を示す図である。 同時視聴しているテレビ画面の関連情報の表示処理中の透過型表示部４０の表示例を示す図である。 通話相手の話の要約の表示処理を示すフローチャートである。 通話相手の話の要約の表示処理中の透過型表示部４０の表示例を示す図である。 通話相手の話の要約の表示処理中の透過型表示部４０の表示例を示す図である。 通話相手のジェスチャに基づくナビゲーション情報の表示処理を示すフローチャートである。 通話相手のジェスチャに基づくナビゲーション情報の表示処理の流れを説明するための説明図である。 通話相手の音声から抽出したキーワードに基づくナビゲーション情報の表示処理を示すフローチャートである。 通話相手の音声から抽出したキーワードに基づくナビゲーション情報の表示処理の流れを説明するための説明図である。

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

なお、説明は以下の順序で行うものとする。
１．携帯端末の外観構成例
１−１．外観構成の第１実施例
１−２．外観構成の第２実施例
１−３．外観構成の第３実施例
１−４．外観構成の第４実施例
２．透過型表示部の表示方式
２−１．第１表示方式
２−２．第２表示方式
２−３．第３表示方式
３．透過型表示部の回動検出機構
３−１．透過型表示部の回動検出機構の第１実施例
３−２．透過型表示部の回動検出機構の第２実施例
３−３．透過型表示部の回動検出機構の第３実施例
３−４．透過型表示部の回動検出機構の第４実施例
３−５．透過型表示部の回動検出機構の第５実施例
４．携帯端末の内部構成例
５．透過型表示部による表示処理
５−１．通話中の会話から話題を抽出して関連情報の表示
５−２．同時視聴しているテレビ画面の関連情報の表示
５−３．相手の話の要約の自動表示処理
５−４．通話相手のジェスチャに基づくナビゲーション情報の表示処理
５−５．音声から抽出したキーワードに基づくナビゲーション情報の表示処理
６．まとめ

＜１．携帯端末の外観構成例＞
本実施の形態に係る携帯端末は、一例として通話機能を有する携帯電話やスマートフォンである。以下においては、携帯端末の外観構成例として、四つの実施例を挙げて説明する。

（１−１．外観構成の第１実施例）
図１は、本実施の形態に係る携帯端末１０の構成の一例を示す正面図である。図１に示すように、携帯端末１０は、筺体２０と、透過型表示部４０と、を有する。透過型表示部４０は、筐体２０にヒンジ部４５により連結され、ヒンジ部４５を中心に可動可能である。

筺体２０は、略直方体形状である。筺体２０は、前面２０ａに、タッチパネル２２と、音声出力部の一例であるスピーカ２４と、マイク２６と、を有する。

タッチパネル２２は、文字、図形、画像等を表示するとともに、指等を用いてタッチパネル２２に対して行われる各種動作を検出する。タッチパネル２２は、表示部と、表示部に重畳されたタッチセンサとを有する。表示部は、例えば液晶ディスプレイや、有機ＥＬパネル等で構成され、文字、図形、画像等を表示する。タッチセンサは、例えば感圧式、静電式等のいずれかの検出方式が採用され、指を用いてタッチパネル２２に対して行われる各種動作を、動作が行われたタッチパネル２２上での位置と共に検出する。

スピーカ２４は、音声を出力する。例えば、スピーカ２４は、通話中に相手の音声を出力する。マイク２６は、音声を集音する。例えば、マイク２６は、集音した携帯端末１０の利用者の音声を電気的な信号に変換する。なお、スピーカ２４とマイク２６が、通話を行う通話部に該当する。

透過型表示部４０は、透明な部材で構成された表示部である。透過型表示部４０は、筺体２０に対して回動可能に設けられている。透過型表示部４０の幅（図１のＸ方向の長さ）や厚み（図１のＹ方向の長さ）は、筐体２０の幅や厚みと同じである。本実施形態において、透過型表示部４０は、携帯端末１０の長手方向において筺体２０に接触している。

透過型表示部４０は、文字、図形、画像等を表示する。透過型表示部４０は、表示素子が表示する画像光をユーザの瞳に導くための導光部を有する。これにより、ユーザは、透過型表示部４０が目の前方に位置する際に、表示素子が表示する画像を観察することができる。なお、透過型表示部４０の表示の詳細な仕組みについては、後述する。

図２は、透過型表示部４０の回動状態の一例を示す図である。透過型表示部４０は、図２に示すように、筐体２０の短側面の一端側を中心に回動可能である。図２（ａ）は、閉状態に位置する透過型表示部４０を示し、図２（ｂ）は、回動中の透過型表示部４０を示し、図２（ｃ）は、開状態に位置する透過型表示部４０を示す。なお、図２（ｃ）の開状態は、閉状態から図２（ｂ）の矢印で示す方向に透過型表示部４０を９０度回転させた位置である。このように、透過型表示部４０は、筐体２０に対する開状態と閉状態の間で回動する。

また、透過型表示部４０が閉状態に位置する際に、図２（ａ）に示すように、透過型表示部４０の第２表示部４２が設けられた表示面と、筺体２０の前面２０ａとが、同一面上に位置する。また、透過型表示部４０が閉状態に位置する際に、透過型表示部４０の第２表示部４２が設けられた表示面と、筺体２０の前面２０ａとが、平行である。これにより、透過型表示部４０と筺体２０の境界が目立たなくなり、すなわち透過型表示部４０と筐体２０の一体感をユーザに与えることができ、デザイン上の美観を損なうことを防止できる。

図３は、携帯端末１０の使用形態の一例を示す図であり、ユーザＵが携帯端末１０で通話している際の携帯端末１０の使用形態が示されている。図３を見ると分かるように、図２（ｃ）の開状態に位置する透過型表示部４０は、通話中に、筺体２０の主面である前面２０ａと交差する平面上に配置される。具体的には、筺体２０の前面２０ａがユーザの右耳に対向し、開状態に位置する透過型表示部４０が、ユーザの右目の前方に位置している。これにより、ユーザは、通話をしながら、透過型表示部４０の表示を見ることができる。また、前述したように透過型表示部４０は透過型の表示部であるので、透過型表示部４０が目の前方に位置しても、外界像をシースルで観察できる。

透過型表示部４０は、日付や日時等を表示可能な第２表示部４２を有しても良い。第２表示部４２は、例えば透過型表示部４０が筺体２０に対して閉状態に位置する際に表示を行う。第２表示部４２は、非透過型の表示部であり、例えば自発光表示装置の一例である有機ＥＬパネルで構成されている。なお、透過型表示部４０と第２表示部４２の表示は、後述するシステムコントローラ１１０（図２６参照）によって制御される。

図４は、携帯端末１０に設けられたカメラを示す一例である。携帯端末１０は、撮像部であるカメラ６０を有しても良い。カメラ６０は、図４（ａ）に示すように、透過型表示部４０に設けても良いし、図４（ｂ）に示すように筺体２０に設けても良い。例えば、ユーザは、図３に示す状態で通話している際に、カメラ６０により目の前に見える風景等を撮像できる。

なお、図４（ｂ）では、２つのカメラ６０ａ、６０ｂが示されており、２つのカメラ６０ａ、６０ｂにより立体画像を撮像可能となる。ただし、これに限定されず、筺体２０には一つのカメラのみが設けられても良く、また透過型表示部４０に立体画像を撮像するための２つのカメラを設けても良い。

前述した図３では、透過型表示部４０がユーザの右目の前方に位置する例を説明したがこれに限定されない。開状態の透過型表示部４０は、図５に示すように、ユーザの右目と左目のいずれかの前方に位置できるように、回動可能な構成であっても良い。

また、携帯端末１０の長側面２０ｄには、操作ボタン７１、７２が設けられている。これにより、ユーザは、右目の前方に位置する透過型表示部４０に画像が表示中に、ボタン７１、７２を押下することにより携帯端末１０の操作を行うことができる。

図５は、透過型表示部４０の２つの開状態の一例を示す図である。図５（ａ）は、ユーザの右目用として利用する場合の透過型表示部４０の第１開状態を示し、図５（ｂ）は、ユーザの左目用として利用する場合の透過型表示部４０第２開状態を示す。このため、透過型表示部４０は、第１開状態又は第２開状態に位置する際に、筐体２０の前面２０ａと交差する平面上に位置することになる。

また、透過型表示部４０が第１開状態に位置している際の表示の向きと、第２開状態に位置している際の表示の向きが上下逆になるので、透過型表示部４０の表示の切り替えが行われる。すなわち、透過型表示部４０の回動状態に応じて、透過型表示部４０の表示が制御される。これにより、透過型表示部４０が複数の開状態に位置しても、ユーザが通話中に見やすい表示がなされる。

なお、ユーザの両目用として透過型表示部４０を利用する場合には、図５（ａ）に示すように筐体２０の前面２０ａにスピーカ２４とマイク２６を設けるだけで無く、図５（ｂ）に示すように筺体の背面２０ｂにもスピーカ２５とマイク２７とを設けることが望ましい。これにより、右・左目用のいずれで使用しても、通話を適切に行うことができる。

（１−２．外観構成の第２実施例）
図６は、携帯端末１０の外観構成の第２実施例を示す図である。図６（ａ）は、第２実施例に係る透過型表示部４０のデフォルト状態である閉状態を示し、図６（ｂ）は、透過型表示部４０の開状態を示す。

第２実施例に示す透過型表示部４０においては、回転軸となるヒンジ部から離れた部分の幅が、ヒンジ部に近い部分の幅よりも大きい。また、透過型表示部４０は、閉状態において、筺体２０の前面２０ａよりも凹んだ凹部２０ｅに接触する。なお、パッチパネル２２は、図２に示す構造とは異なり、筐体２０の背面２０ｂ側に設けられている。

（１−３．外観構成の第３実施例）
図７は、携帯端末１０の外観構成の第３実施例を示す図である。第３実施例では、透過型表示部４０は、携帯端末１０の短手方向において筺体２０に接触している。そして、透過型表示部４０は、筐体２０の長側面２０ｄの一端側を中心に回動可能である。

図７（ａ）は、第３実施例に係る透過型表示部４０の閉状態を示し、図７（ｂ）は、透過型表示部４０の開状態を示す。図７（ｂ）に示す透過型表示部４０は、通話中に、ユーザの右目の前方に位置可能である（図３参照）。

第３実施例においても、透過型表示部４０は、ユーザの右目と左目のいずれの前方に位置できるように回動可能である。すなわち、透過型表示部４０は、図７（ｂ）に示すように右目用として利用する場合の開状態と、図８に示すように左目用として利用する場合の開状態とに回動できる。なお、図８は、ユーザの左目用として利用する場合の透過型表示部４０の開状態を示す。

（１−４．外観構成の第４実施例）
図９は、携帯端末１０の外観構成の第４実施例を示す図である。図９（ａ）は、第４実施例に係る透過型表示部４０の閉状態を示し、図９（ｂ）は、透過型表示部４０の開状態を示す。

第４実施例における透過型表示部４０の表示面４０ａの大きさは、筐体２０の前面２０ａと同じ大きさである。このように表示面４０ａの大きさが、第１〜第３実施例に比べて大きいので、多くの情報を表示できる。また、第４実施例の透過型表示部４０の厚さは、第１〜第３実施例の透過型表示部４０に比べて薄い。

上記では、携帯端末１０が通話機能を有する携帯電話やスマートフォンであることとしたが、これに限定されない。例えば、携帯端末は、通話機能を有さず、音声ガイダンスを行う装置であっても良い。かかる装置の場合でも、透過型表示部４０は、音声出力中に、筺体２０の前面２０ａに交差する平面上に配置可能である。これにより、ユーザは、音声ガイダンスを聞きながら、透過型表示部４０に表示された表示を見ることができる。

＜２．透過型表示部の表示方式＞
前述したように、透過型表示部４０は、表示素子が表示する画像光をユーザの瞳に導くための導光部を有する。これにより、ユーザは、透過型表示部４０が目の前方に位置する際に、表示素子が表示する画像を観察することができる。以下においては、透過型表示部４０の表示方式として、３つの方式を例に挙げて説明する。

（２−１．第１表示方式）
第１表示方式は、透過型表示部４０の内部に光束を反射又は透過させるホログラムグレーティングを設けて、表示素子が表示する画像をユーザの瞳に導く方式である。以下において、図１０及び図１１を参照しながら、第１表示方式の仕組みについて説明する。

図１０は、第１表示方式に係る携帯端末１０の外観構成を示す図である。図１１は、第１表示方式に係る透過型表示部４０の内部構成と、光束の伝達経路とを示す模式図である。第１表示方式に係る携帯端末１０は、ヒンジ部４５を中心に、図１０（ａ）に示す閉状態と図１０（ｂ）に示す開状態との間で回動するものとする。そして、図１０（ｂ）に示す開状態の透過型表示部４０は、例えば通話中に、図１１（ｂ）に示すようにユーザの左目の前方に位置することになる。

透過型表示部４０は、図１１（ａ）に示すように、基部４１と、第２表示部４２と、導光部の一例である導光板４３と、ヒンジ部４５と、第１ホログラムグレーティング４６ａと、第２ホログラムグレーティング４６ｂと、を有する。

基部４１は、透過型表示部４０の土台となる部分であり、透明な部材から成る。第２表示部４２は、基部４１の第１面４１ａ側に設けられ、前述したように透過型表示部４０が閉状態である際に日付や日時等を表示する。

導光板４３は、基部４１の第２面４１ｂ側に、空気層４４を介して設けられた平板である。導光板４３の厚みは、内部を光が全反射可能となるように、基部４１に比べて薄く形成されている。導光板４３には、例えばヒンジ部４５の内部に設けられた画像表示素子（不図示）から射出された光束が、入射される。

導光板４３は、光学面４３ａの一端側に形成された光入射口４３ｂと、光学面４３ａに対向する光学面４３ｃの他端側に形成された光射出口４３ｄとを有する。光入射口４３ｂには、画像表示素子からの光束が入射される。光射出口４３ｄは、光学面４３ａと光学面４３ｃの間で全反射しながら進行する光束を射出する。

なお、画像表示素子と導光板４３の間に、画像表示素子から射出された光束を平行光束にするコリメートレンズ（不図示）を設けても良い。かかる場合には、コリメートレンズから射出された平行光束が、導光板４３に入射される。また、上記では画像表示素子がヒンジ部４５に設けられていることとしたが、これに限定されず、例えば画像表示素子が筺体２０に設けられていることとしても良い。

ヒンジ部４５は、透過型表示部４０から筺体２０へ向けて突出した円柱状の形状を成している（図２０参照）。ヒンジ部４５には、上述したように画像表示素子が設けられうる。画像表示素子は、透過型表示部４０が開状態の際に光束を射出する。また、ヒンジ部４５の内部には、第２表示部４２に接続されるケーブルが通過している。

第１ホログラムグレーティング４６ａは、光学面４３ｃの光入射口４３ｂに対向する位置に設けられ、光入射口４３ｂから入射した光束を回折反射する。第１ホログラムグレーティング４６ａにより回折反射された光束は、図１１（ｂ）に示すように光学面４３ａ、４３ｃの間で全反射を繰り返しながら進行して、第２ホログラムグレーティング４６ｂに入射する。

第２ホログラムグレーティング４６ｂは、光学面４３ａの光射出口４３ｄに対向する位置に設けられ、入射した光束を回折反射する。光束は、第２ホログラムグレーティング４６ｂに回折反射されることで全反射条件からずれる。これにより、光束は、図１１（ｂ）に示すように、光射出口４３ｄから射出され、ユーザの瞳Ｈに入射する。これにより、ユーザは、画像表示素子が表示する画像を認識できる。

（第１変形例）
上述した第１ホログラムグレーティング４６ａ及び第２ホログラムグレーティング４６ｂが、光束を反射させる反射型のホログラムグレーティングであることとしたが、これに限定されない。例えば、図１２に示すように、第１ホログラムグレーティング４６ａ及び第２ホログラムグレーティング４６ｂが、透過型のホログラムグレーティングであることとしても良い。

図１２は、第１表示方式の第１変形例に係る透過型表示部４０の内部構成と、光束の伝達経路とを示す模式図である。図１２に示すように、第１変形例では、第１ホログラムグレーティング４６ａは、光学面４３ａの光入射口４３ｂと同じ位置に設けられ、第２ホログラムグレーティング４６ｂは、光学面４３ｃの光射出口４３ｄと同じ位置に設けられている。これにより、第１ホログラムグレーティング４６ａを透過した光束は、光学面４３ａと光学面４３ｃの間で全反射を繰り返しながら進行して、第２ホログラムグレーティング４６ｂに入射する。そして、光束は、第２ホログラムグレーティング４６ｂを透過して、光射出口４３ｄから射出した後に、ユーザの瞳Ｈに入射する。

（第２変形例）
また、図１３に示すように、反射型のホログラムグレーティングと透過型のホログラムグレーティングとを組み合わせて構成しても良い。これにより、ホログラムグレーティングの配置箇所の自由度を高めることができる。

図１３は、第１表示方式の第２変形例に係る透過型表示部４０の内部構成と、光束の伝達経路とを示す模式図である。図１３に示すように、第２変形例では、透過型の第１ホログラムグレーティング４６ａは、光学面４３ａの光入射口４３ｂと同じ位置に設けられ、反射型の第２ホログラムグレーティング４６ｂは、光学面４３ａの光射出口４３ｄと対向すると同じ位置に設けられている。これにより、第１ホログラムグレーティング４６ａを透過した光束は、光学面４３ａと光学面４３ｃの間で全反射を繰り返しながら進行して、第２ホログラムグレーティング４６ｂに入射する。そして、光束は、第２ホログラムグレーティング４６ｂで回折反射して、光射出口４３ｄから射出した後に、ユーザの瞳Ｈに入射する。

（第３変形例）
ところで、携帯端末１０は、通話中にユーザの右目と左目のいずれかの前方に位置できるように、２つの開状態（第１開状態と第２開状態）に位置可能である（図５参照）。そこで、かかる構成における第１表示方式の仕組みについて、図１４〜図１７を参照しながら説明する。

図１４は、第１表示方式の第３変形例に係る携帯端末１０の外観構成の一例を示す図である。図１５は、第１表示方式の第３変形例に係る透過型表示部４０の内部構成を示す模式図である。図１６は、透過型表示部４０が第１開状態に位置する際の光束の伝達経路を示す模式図である。図１７は、透過型表示部４０が第２開状態に位置する際の光束の伝達経路を示す模式図である。

第３変形例に係る携帯端末１０は、ヒンジ部４５を中心に、図１４（ａ）に示す閉状態と、図１４（ｂ）に示す第１開状態と、図１４（ｃ）に示す第２開状態との間で回動するものとする。そして、例えば通話中に、図１４（ｂ）に示す第１開状態の透過型表示部４０は、図１６に示すようにユーザの左目の前方に位置し、図１４（ｃ）に示す第２開状態の透過型表示部４０は、図１７に示すようにユーザの右目の前方に位置する。

第３変形例に係る透過型表示部４０は、図１５に示すように、２つの導光板４３、４７を有する。導光板４３は、第１導光部であり、基部４１の第２面４１ｂ（第１表面に該当）側に空気層４４（第１空気層に該当）を介して設けられている。導光板４７は、第２導光部であり、基部４１の第１面４１ａ（第２表面に該当）側に空気層４８（第２空気層）を介して設けられている。そして、２つの導光板４３、４７に、それぞれ１組のホログラムグレーティングが設けられている。

導光板４３の第１ホログラムグレーティング４６ａ及び第２ホログラムグレーティング４６ｂは、反射型のホログラムグレーティングである。このため、図１６に示すように、ヒンジ部４５内の画像表示素子から光入射口４３ｂを介して入射した光束は、第１ホログラムグレーティング４６ａによって回折反射され、光学面４３ａ、４３ｃの間で全反射を繰り返しながら第２ホログラムグレーティング４６ｂに入射する。そして、光束は、第２ホログラムグレーティング４６ｂで回折反射され、光射出口４３ｄから射出され、ユーザの左目の瞳に入射する。

同様に、導光板４７の第１ホログラムグレーティング４９ａ及び第２ホログラムグレーティング４９ｂも、図１７に示すように反射型のホログラムグレーティングである。このため、図１７に示すように、ヒンジ部４５内の画像表示素子から光入射口４７ｂを介して入射した光束は、第１ホログラムグレーティング４９ａによって回折反射され、光学面４７ａ、４７ｃの間で全反射を繰り返しながら第２ホログラムグレーティング４９ｂに入射する。そして、光束は、第２ホログラムグレーティング４９ｂで回折反射され、光射出口４７ｄから射出され、ユーザの右目の瞳Ｈに入射する。

上述した図１５〜図１７では、反射型のホログラムグレーティングを例に挙げて説明したが、これに限定されない。例えば、図１２で説明したような透過型のホログラムグレーティングを用いても良く、また図１３で説明したように反射型のホログラムグレーティングと透過型のホログラムグレーティングを組み合わせて用いても良い。

（２−２．第２表示方式）
第２表示方式は、第１表示方式のホログラムグレーティングの代わりに、透過型表示部４０の内部に光束を反射させる反射面を設けて、表示素子が表示する画像をユーザの瞳に導く方式である。

図１８は、第２表示方式に係る透過型表示部４０の内部構成と、光束の伝達経路とを示す模式図である。図１８に示すように、透過型表示部４０は、基部４１と、第２表示部４２と、ヒンジ部４５と、導光部１４３とを有する。基部４１、第２表示部４２、及びヒンジ部４５は、前述した構成と同様であるので、説明を省略する。

導光部１４３は、ヒンジ部４５内の画像表示素子（不図示）から射出された光束を、ユーザの瞳Ｈに導く機能を有する。導光部１４３は、平板状の部材であり、基部４１の第２面４１ｂ側に設けられている。導光部１４３は、内部に、光束を反射させる二つの反射面１４４ａ、１４４ｂを有する。そして、画像表示素子から導光部１４３に入射した光束は、反射面１４４ａにより反射され、反射面１４４ｂに至り、反射面１４４ｂによって更に反射され、ユーザの瞳Ｈに入射する。これにより、ユーザは、画像表示素子が表示する画像を認識できる。

なお、上記では、導光部１４３が基部４１の第２面４１ｂ側に設けられていることとしたが、これに限定されず、例えば基部４１の第１面４１ａ側にも設けても良い。かかる場合には、前述した図１６及び図１７で説明したように、ユーザの左目又は右目の瞳に光束を入射させることが可能となる。

（２−３．第３表示方式）
第３表示方式は、透過型表示部４０の内部に、一部の光を反射させると共に残りの光を透過させるハーフミラー層を有する反射面を形成し、表示素子が表示する画像をユーザの瞳に導く方式である。

図１９は、第３表示方式に係る透過型表示部４０の内部構成と、光束の伝達経路とを示す模式図である。図１９に示すように、透過型表示部４０は、基部４１と、第２表示部４２と、ヒンジ部４５と、導光部１５３とを有する。基部４１、第２表示部４２、及びヒンジ部４５は、前述した構成と同様であるので、説明を省略する。

導光部１５３は、ヒンジ部４５内の画像表示素子から射出された光束を、ユーザの瞳Ｈに導く機能を有する。導光部１５３は、平板状の部材であり、基部４１の第２面４１ｂ側に設けられている。導光部１５３は、光束を反射させる四つの反射面１５４ａ、１５４ｂ、１５４ｃ、１５４ｄを有する。

反射面１５４ａは、画像表示素子から入射した光束を全反射させる。反射面１５４ｂ、１５４ｃは、図１９に示すように導光部１５３の長手方向に沿って形成されている。反射面１５４ａで反射された光束は、反射面１５４ｂと反射面１５４ｃの間で全反射を繰り返しながら進行して、反射面１５４ｄに入射する。

反射面１５４ｄは、入射してきた光束を導光部１５４から射出するための平坦面であり、一部にハーフミラー層を有する。ハーフミラー層の反射率は、例えば２０％に設定され、透過率は、例えば８０％に設定される。そして、反射面１５４ｄにより反射された光束は、ユーザの瞳Ｈに入射する。これにより、ユーザは、画像表示素子が表示する画像を認識できる。なお、反射面１５４ｄを透過した光束は、画像の形成には利用されない。

なお、第３表示方式において、基部４１の第２面４１ｂ側にも導光部１４３を設けても良い。これにより、前述した図１６及び図１７で説明したように、ユーザの左目又は右目の瞳に光束を入射させることが可能となる。

＜３．透過型表示部の回動検出機構＞
上述したように、透過型表示部４０は、ヒンジ部４５を中心に筺体２０に対して回動する。そして、携帯端末１０は、透過型表示部４０の回動状態を検出する回動検出機構を有し、透過型表示部４０の回動状態に応じて動作を制御する。例えば、携帯端末１０は、透過型表示部４０が閉状態である場合に、タッチパネル２２や第２表示部４２の表示をＯＮとする一方で、透過型表示部４０の表示をＯＦＦとする。また、携帯端末１０は、透過型表示部４０が開状態である場合に、タッチパネル２２や第２表示部４２の表示をＯＦＦとする一方で、透過型表示部４０の表示をＯＮとする。

以下においては、透過型表示部４０の回動状態を検出する回動検出部７５を含む回動検出機構として、第１〜第５実施例を例に挙げて説明する。

（３−１．透過型表示部の回動検出機構の第１実施例）
図２０は、透過型表示部４０の回動検出機構の第１実施例を示す図である。図２０（ａ）は、透過型表示部４０を筺体２０から分離した状態を示す斜視図である。図２０（ｂ）は、筺体２０内のヒンジ部４５と回動検出部７５の位置関係を示す図である。

ヒンジ部４５は、透過型表示部４０から突出した円柱状の形状を成している。第１実施例に係るヒンジ部４５の先端側には、外周面の一部がカットされたカット部４５ａが形成されている。カット部４５ａは、断面が略Ｄ形状となるように、Ｄカットされている。

回動検出部７５は、筺体２０内においてヒンジ部４５と対向する位置に設けられているセンサである。回動検出部７５は、ヒンジ部４５と接触可能なスイッチ７６を有し、スイッチ７６の状態に応じてヒンジ部４５の回動状態を検出する。スイッチ７６は、バネ等の付勢部材（不図示）により付勢されている。なお、図２０（ａ）には、付勢された状態のスイッチ７６が示されている。スイッチ７６は、透過型表示部４０の回動状態に応じて、ヒンジ部４５に押される。そして、回動検出部７５は、例えば、スイッチ７６がヒンジ部４５に押されていない場合に透過型表示部４０が閉状態であると検出し、スイッチ７６がヒンジ部４５に押された場合に透過型表示部４０が開状態であると検出する。

図２１は、透過型表示部４０の回動状態と、スイッチ７６の付勢状態との関係を示す図である。図２１（ｂ）は、図２１（ａ）の矢印の方向から見た図である。透過型表示部４０が閉状態である場合には、スイッチ７６がカット部４５ａと対向するので、スイッチ７６がヒンジ部４５に押されない。透過型表示部４０が開状態である場合には、スイッチ７６が、ヒンジ部４５のカット部４５ａ以外の外周面に接触して押される。

（３−２．透過型表示部の回動検出機構の第２実施例）
図２２は、透過型表示部４０の回動検出機構の第２実施例を示す図である。図２２（ａ）は、透過型表示部４０が閉状態である場合のヒンジ部４５と回動検出部７５の位置関係を示し、図２２（ｂ）は、透過型表示部４０が開状態である場合のヒンジ部４５と回動検出部７５の位置関係を示す。

第２実施例では、図２０で説明した第１実施例のカット部４５ａの代わりに、ヒンジ部４５の先端側に、外周面から外方へ突出した突起部４５ｂが形成されている。突起部４５ｂは、透過型表示部４０が閉状態である場合には、図２２（ａ）に示すようにスイッチ７６に接触しないので、スイッチ７６は押されない。一方で、突起部４５ｂは、透過型表示部４０が開状態である場合には、図２２（ｂ）に示すようにスイッチ７６に接触してスイッチ７６を押す。これにより、透過型表示部４０の開状態又は閉状態を判定できる。

（３−３．透過型表示部の回動検出機構の第３実施例）
図２３は、透過型表示部４０の回動検出機構の第３実施例を示す図である。

上述した第１、２実施例では、スイッチ７６がヒンジ部４５によって押されている。これに対して、第３実施例では、ヒンジ部４５の代わりに、透過型表示部４０のヒンジ部４５の横に形成された突起部４５ｃが、透過型表示部４０が閉状態である場合にスイッチ７６を押す。なお、スイッチ７６は、突起部４５ｃが入り込む凹部２０ｆの近傍に位置する。一方で、突起部４５ｃは、透過型表示部４０が開状態である場合にスイッチ７６を押さない。これにより、透過型表示部４０の開状態又は閉状態を判定できる。

（３−４．透過型表示部の回動検出機構の第４実施例）
図２４は、透過型表示部４０の回動検出機構の第４実施例を示す図である。

第４実施例の回動検出部７５は、第１〜第３の実施例とは異なり、ヒンジ部４５等によって押されるスイッチを有しない。代わりに、回動検出部７５は、例えばホール素子であり、透過型表示部４０には磁石７８が設けられている。これにより、回動検出部７５は、透過型表示部４０が閉状態である場合には磁石７８による磁力を検出し、透過型表示部４０が開状態である場合には磁石７８による磁力を検出しない。これにより、透過型表示部４０の開状態又は閉状態を判定できる。

（３−５．透過型表示部の回動検出機構の第５実施例）
透過型表示部４０は、図５で説明したように、ユーザの右目と左目のいずれかの前方に位置できるように、第１開状態と第２開状態に位置可能である。そして、第５の実施例では、回動検出部７５が、透過型表示部４０の開状態として第１開状態と第２開状態を検出可能な構成となっている。

図２５は、透過型表示部４０の回動検出機構の第５実施例を示す図である。図２５（ａ）は、透過型表示部４０が閉状態である場合のヒンジ部４５と回動検出部７５の位置関係を示し、図２５（ｂ）は、透過型表示部４０が第１開状態である場合のヒンジ部４５と回動検出部７５の位置関係を示し、図２５（ｃ）は、透過型表示部４０が第２開状態である場合のヒンジ部４５と回動検出部７５の位置関係を示す。

第５実施例のヒンジ部４５は、図２０に示すＤカットされたカット部４５ａの代わりに、凹部４５ｄを有する。透過型表示部４０が閉状態である場合には、図２５（ａ）に示すように、凹部４５ｄに回動検出部７５のスイッチ７６が入り込んでいる。図２５（ａ）に示すスイッチ７６は、付勢部材（不図示）により付勢されているが、ヒンジ部４５に接触しておらず、押されていない状態である。

図２５（ａ）に示す閉状態の透過型表示部４０が、図２５（ｂ）に示す矢印の方向に９０度回転して第１開状態に遷移する際には、スイッチ７６が凹部４５ｄの側壁によって不勢力に抗い第１方向（例えば、図２５（ｂ）に示す時計方向）に押されて倒れる。また、閉状態の透過型表示部４０が、図２５（ｃ）に示す矢印の方向に９０度回転して第２開状態に遷移する際に、スイッチ７６が凹部４５ｄの側壁によって不勢力に抗い第２方向（例えば、図２５（ｃ）に示す反時計方向）に押されて倒れる。そして、スイッチ７６の倒れた方向を検出することで、透過型表示部４０の第１開位置と第２開位置を判定できる。

＜４．携帯端末の内部構成例＞
図２６を参照しながら、携帯端末１０の内部構成例について説明する。図２６は、携帯端末１０の内部構成例を示すブロック図である。

システムコントローラ１１０は、例えばＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、不揮発性メモリ部、インターフェース部を備えたマイクロコンピュータにより構成され、携帯端末１０の全体を制御する制御部とされる。

このシステムコントローラ１１０は外界の状況に基づいて、携帯端末１０内の各部の制御を行う。つまり外界の状況を検知判定し、それに応じて各部の動作制御を実行するようにされた動作プログラムに従って動作する。このため機能的に見れば、図示するように外界の状況を判定する外界状況判定機能１１０ａと、外界状況判定機能１１０ａの判定結果に従って各部に制御指示を行う動作制御機能１１０ｂを有することになる。

携帯端末１０内では、ユーザの前方の光景の撮像のための構成として、撮像部１０３、撮像制御部１１１、撮像信号処理部１１５が設けられる。

撮像部１０３は、撮像レンズや、絞り、ズームレンズ、フォーカスレンズなどを備えて構成されるレンズ系や、レンズ系に対してフォーカス動作やズーム動作を行わせるための駆動系、さらにレンズ系で得られる撮像光を検出し、光電変換を行うことで撮像信号を生成する固体撮像素子アレイなどが設けられる。固体撮像素子アレイは、例えばＣＣＤ（Charge Coupled Device）センサアレイや、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサアレイとされる。

撮像信号処理部１１５は、撮像部１０３の固体撮像素子によって得られる信号に対するゲイン調整や波形整形を行うサンプルホールド／ＡＧＣ(Automatic Gain Control)回路や、ビデオＡ／Ｄコンバータを備え、デジタルデータとしての撮像信号を得る。また、撮像信号処理部１１５は、撮像信号に対してホワイトバランス処理、輝度処理、色信号処理、ぶれ補正処理なども行う。

撮像制御部１１１は、システムコントローラ１１０からの指示に基づいて、撮像部１０３及び撮像信号処理部１１５の動作を制御する。例えば撮像制御部１１１は、撮像部１０３、撮像信号処理部１１５の動作のオン／オフを制御する。また、撮像制御部１１１は、撮像部１０３に対して、オートフォーカス、自動露出調整、絞り調整、ズームなどの動作を実行させるための制御（モータ制御）を行うものとされる。

また、撮像制御部１１１は、タイミングジェネレータを備え、固体撮像素子及び撮像信号処理部１１１のサンプルホールド／ＡＧＣ回路、ビデオＡ／Ｄコンバータに対しては、タイミングジェネレータにて生成されるタイミング信号により信号処理動作を制御する。また、このタイミング制御により撮像フレームレートの可変制御も可能とされる。

さらに、撮像制御部１１１は、固体撮像素子及び撮像信号処理部１１５における撮像感度や信号処理の制御を行う。例えば撮像感度制御として固体撮像素子から読み出される信号のゲイン制御を行ったり、黒レベル設定制御や、デジタルデータ段階の撮像信号処理の各種係数制御、ぶれ補正処理における補正量制御などを行うことができる。撮像感度に関しては、特に波長帯域を考慮しない全体的な感度調整や、例えば赤外線領域、紫外線領域など、特定の波長帯域の撮像感度を調整する感度調整（例えば特定波長帯域をカットするような撮像）なども可能である。波長に応じた感度調整は、撮像レンズ系における波長フィルタの挿入や、撮像信号に対する波長フィルタ演算処理により可能である。これらの場合、撮像制御部１１１は、波長フィルタの挿入制御や、フィルタ演算係数の指定等により、感度制御を行うことができる。

撮像部１０３で撮像され、撮像信号処理部１１５で処理された撮像信号（撮像による画像データ）は画像入出力コントロール部１２７に供給される。

画像入出力コントロール部１２７は、システムコントローラ１１０の制御に応じて、画像データの転送を制御する。即ち撮像系（撮像信号処理部１１５）、表示系（表示画像処理部１１２）、ストレージ部１２５、通信部１２６の間の画像データの転送を制御する。例えば、画像入出力コントロール部１２７は、撮像信号処理部１１５で処理された撮像信号としての画像データを、表示画像処理部１１２に供給したり、ストレージ部１２５に供給したり、１通信部２６に供給する動作を行う。また、画像入出力コントロール部１２７は、例えば、ストレージ部１２５から再生された画像データを、表示画像処理部１１２に供給したり、通信部１２６に供給する動作を行う。また、画像入出力コントロール部１２７は、例えば、通信部１２６で受信された画像データを、表示画像処理部１１２に供給したり、ストレージ部１２５に供給する動作を行う。

携帯端末１０においてユーザに対して表示を行う構成としては、表示部１０２、表示画像処理部１１２、表示駆動部１１３、表示制御部１１４が設けられる。

例えば撮像部１０３で撮像され、撮像信号処理部１１５で処理された撮像信号としての画像データは、画像入出力コントロール部１２７を介して表示画像処理部１１２に供給されうる。表示画像処理部１１２は、例えばいわゆるビデオプロセッサとされ、供給された画像データに対して各種表示処理を実行できる部位とされる。例えば画像データの輝度レベル調整、色補正、コントラスト調整、シャープネス（輪郭強調）調整などを行うことができる。また、表示画像処理部１１２は、供給された画像データの一部を拡大した拡大画像の生成、或いは縮小画像の生成、供給された画像データの分割表示のための画像の分離や合成、画像内の一部をハイライト表示（強調表示）させる画像処理、キャラクタ画像やイメージ画像の生成や、生成した画像を供給された画像データに合成する処理なども行うことができる。つまり供給された画像データに対しての各種処理を行うことができる。

表示駆動部１１３は、表示画像処理部１１２から供給される画像データを、例えば液晶ディスプレイとされる表示部１０２において表示させるための画素駆動回路で構成されている。即ち、表示部１０２においてマトリクス状に配置されている各画素について、それぞれ所定の水平／垂直駆動タイミングで映像信号に基づく駆動信号を印加し、表示を実行させる。また、表示駆動部１１３は、表示部１０２の各画素の透過率を制御して、スルー状態とすることもできる。

表示制御部１１４は、システムコントローラ１１０の指示に基づいて、表示画像処理部１１２の処理動作や表示駆動部１１３の動作を制御する。即ち、表示制御部１１４は、表示画像処理部１１２に対して、上記の各種処理を実行させる。また、表示制御部１１４は、表示駆動部１１３に対して、スルー状態、画像表示状態の切り換えが行われるように制御する。

なお、ストレージ部１２５で再生された画像データや、通信部１２６で受信された画像データも、画像入出力コントロール部１２７を介して表示画像処理部１１２に供給できる。その場合、表示画像処理部１１２、表示駆動部１１３の上記動作により、表示部１０２において再生画像や受信画像が出力されることになる。

また、携帯端末１０には、音声入力部１０６、音声信号処理部１１６、音声出力部１０５が設けられる。

音声入力部１０６は、図１に示したマイク２６と、マイク２６で得られた音声信号を増幅処理するマイクアンプ部やＡ／Ｄ変換器を有し、音声データを出力する。音声入力部１０６で得られた音声データは、音声入出力コントロール部１２８に供給される。

音声入出力コントロール部１２８は、システムコントローラ１１０の制御に応じて、音声データの転送を制御する。即ち音声入力部１０６、音声信号処理部１１６、ストレージ部１２５、通信部１２６の間の音声信号の転送を制御する。例えば、音声入出力コントロール部１２８は、音声入力部１０６で得られた音声データを、音声信号処理部１１６に供給したり、ストレージ部１２５に供給したり、通信部１２６に供給する動作を行う。また、音声入出力コントロール部１２８は、例えば、ストレージ部１２５で再生された音声データを、音声信号処理部１１６に供給したり、通信部１２６に供給する動作を行う。また、音声入出力コントロール部１２８は、例えば、通信部１２６で受信された音声データを、音声信号処理部１１６に供給したり、ストレージ部１２５に供給する動作を行う。

音声信号処理部１１６は、例えばデジタルシグナルプロセッサ、Ｄ／Ａ変換器などからなる。この音声信号処理部１１６には、音声入力部１０６で得られた音声データや、ストレージ部１２５、或いは通信部１２６からの音声データが、音声入出力コントロール部１２８を介して供給される。音声信号処理部１１６は、供給された音声データに対して、システムコントローラ１１０の制御に応じて、音量調整、音質調整、音響エフェクト等の処理を行う。そして処理した音声データをアナログ信号に変換して音声出力部１０２に供給する。なお、音声信号処理部１１６は、デジタル信号処理を行う構成に限られず、アナログアンプやアナログフィルタによって信号処理を行うものでも良い。

音声出力部１０５は、図１に示したスピーカ２４と、スピーカ２４に対するアンプ回路を有する。音声入力部１０６、音声信号処理部１１６、音声出力部１０５により、ユーザは外部音声を聞いたり、ストレージ部１２５で再生された音声を聞いたり、通信部１２６で受信された音声を聞くことができる。なお、音声出力部１０５は、いわゆる骨伝導スピーカとして構成されてもよい。

ストレージ部１２５は、所定の記録媒体に対してデータの記録再生を行う部位とされる。例えばＨＤＤ（Hard Disc Drive）として実現される。もちろん記録媒体としては、フラッシュメモリ等の固体メモリ、固定メモリを内蔵したメモリカード、光ディスク、光磁気ディスク、ホログラムメモリなど各種考えられ、ストレージ部１２５としては採用する記録媒体に応じて記録再生を実行できる構成とされればよい。

撮像部１０３で撮像され、撮像信号処理部１１５で処理された撮像信号としての画像データや、通信部１２６で受信した画像データは、画像入出力コントロール部１２７を介してストレージ部１２５に供給されうる。また、音声入力部１０６で得られた音声データや、通信部１２６で受信した音声データは、音声入出力コントロール部１２８を介してストレージ部１２５に供給されうる。

ストレージ部１２５は、システムコントローラ１１０の制御に従って、供給された画像データや音声データに対して、記録媒体への記録のためのエンコード処理を行い、記録媒体に記録する。また、ストレージ部１２５は、システムコントローラ１１０の制御に従って、記録媒体から画像データや音声データを再生する。再生した画像データは画像入出力コントロール部１２７へ出力され、また再生した音声データは音声入出力コントロール部１２８へ出力される。

通信部１２６は、外部機器との間でのデータの送受信を行う。通信部１２６は、無線ＬＡＮ、ブルートゥースなどの方式で、例えばネットワークアクセスポイントに対する近距離無線通信を介してネットワーク通信を行う構成としても良いし、対応する通信機能を備えた外部機器との間で直接無線通信を行うものでもよい。

撮像部１０３で撮像され、撮像信号処理部１１５で処理された撮像信号としての画像データや、ストレージ部１２５で再生した画像データは、画像入出力コントロール部１２７を介して通信部１２６に供給されうる。また、音声入力部１０６で得られた音声データや、ストレージ部１２５で再生された音声データは、音声入出力コントロール部１２８を介して通信部１２６に供給されうる。

通信部１２６は、システムコントローラ１１０の制御に従って、供給された画像データや音声データに対して、送信のためのエンコード処理、変調処理等を行い、外部機器に送信する。また、通信部１２６は、外部機器からのデータ受信動作を行う。通信部１２６は、受信復調した画像データは画像入出力コントロール部１２７へ出力し、また受信復調した音声データは音声入出力コントロール部１２８へ出力する。

また、携帯端末１０には、音声合成部１２７が設けられる。音声合成部１２７は、システムコントローラ１１０の指示に応じて音声合成を行い、音声信号を出力する。音声合成部１２７から出力された音声信号は、音声入出力コントロール部１２８を介して音声信号処理部１１６に供給されて処理された後、音声出力部１０５に供給され、ユーザに対して音声出力される。音声合成部１２７は、例えば読み上げ音声の音声信号を発生させても良い。

携帯端末１０には、照明部１０4と照明制御部１１８が設けられる。照明部１０４は、発光部（例えばＬＥＤ）と、発光部を発光させる発光回路から成る。照明制御部１１８は、システムコントローラ１１０の指示に基づいて、照明部４に発光動作を実行させる。

携帯端末１０は、外界情報を取得するための構成として、周囲環境センサ１１９、撮像対象センサ１２０、ＧＰＳ受信部１２１、日時計数部１２２、画像解析部１１７、及び通信部１２６を有する。

周囲環境センサ１１９としては、例えば照度センサ、温度センサ、湿度センサ、気圧センサ等が想定され、携帯端末１０の周囲環境として、周囲の明るさ、温度、湿度、或いは天候等を検出するための情報を得るセンサとされる。

撮像対象センサ１２０は、撮像部１０３での撮像動作の被写体となっている撮像対象に関する情報を検出するセンサである。例えば、携帯端末１０から撮像対象までの距離の情報を検出する測距センサや、焦電センサなどの赤外線センサのように、撮像対象が発する赤外線の特定の波長などの情報やエネルギーを検出するセンサなどが想定される。焦電センサの場合、例えば撮像対象が人や動物などの生体であるか否かの検出が可能となる。さらに、各種ＵＶ（Ultra Violet）センサのように、撮像対象が発する紫外線の特定の波長などの情報やエネルギーを検出するセンサも想定される。この場合、例えば撮像対象が蛍光物質や蛍光体であるか否かの検出や、日焼け対策に必要な外界の紫外線量の検出が可能となる。

ＧＰＳ受信部１２１は、ＧＰＳ（Global Positioning System）の衛星からの電波を受信し、現在位置としての緯度・経度の情報を出力する。

日時計数部１２２は、いわゆる時計部として、日時（年月日時分秒）を計数し、現在日時情報を出力する。

画像解析部１１７は、画像データの画像解析を行う。画像解析部１１７には、画像入出力コントロール部１２７を介して画像データが供給される。画像解析部１１７において画像解析の対象となる画像データとは、撮像部１０３、撮像信号処理部１１５により得られた撮像画像としての画像データや、通信部１２６で受信された画像データ、或いはストレージ部１２５で記録媒体から再生された画像データとなる。つまり、携帯端末１０が、表示部１０２において表示可能に入力した画像データが画像解析部１１７での画像解析対象となる。そして、画像解析部１１７は、画像データを解析し、画像データに含まれる画像の情報を得る。

通信部１２６は、外部機器との間でのデータ通信を行う。外部機器としては、コンピュータ機器、ＰＤＡ（Personal Digital Assistant）、携帯電話機、ビデオ機器、オーディオ機器、チューナ機器など、情報処理及び通信機能を備えたあらゆる機器が想定される。また、インターネット等のネットワークに接続された端末装置、サーバ装置なども通信対象の外部機器として想定される。さらには、ＩＣチップを内蔵した非接触通信ＩＣカード、ＱＲコード等の二次元バーコード、ホログラムメモリなどを外部機器とし、通信部１２６はこれらの外部機器から情報を読み取る構成とすることも考えられる。さらには他の携帯端末１０も外部機器として想定される。通信部１２６は、無線ＬＡＮ、ブルートゥースなどの方式で、例えばネットワークアクセスポイントに対する近距離無線通信を介してネットワーク通信を行う構成としても良いし、対応する通信機能を備えた外部機器との間で直接無線通信を行うものでも良い。

これら周囲環境センサ１１９、撮像対象センサ１２０、ＧＰＳ受信部１２１、日時計数部１２２、画像解析部１１７、及び通信部１２６により、携帯端末１０からみての外界の情報が取得され、システムコントローラ１１０に供給される。

システムコントローラ１１０は、外界状況判定機能１１０ａの処理により、取得した外界情報に応じて、動作制御機能１１０ｂの処理により、撮像動作や表示動作に関する制御を行う。即ち、システムコントローラ１１０は、表示制御部１１４に指示して表示画像処理部１１２や表示駆動部１１３の動作を制御したり、表示するデータのソースを選択したり、またストレージ部１２５の再生動作や通信部１２６の通信動作の制御を行う。

なお、外界情報を取得するための構成として周囲環境センサ１１９、撮像対象センサ１２０、ＧＰＳ受信部１２１、日時計数部１２２、画像解析部１１７、及び通信部１２６を示したが、これらは必ずしも全てを備える必要はない。また、周囲の音声を検知・解析する音声解析部など、他のセンサが設けられても良い。

＜５．透過型表示部による表示処理＞
携帯端末１０は、例えば通話中に、開状態の透過型表示部４０に文字、画像、図形等を表示させる。以下において、通話中の透過型表示部４０による表示処理例について説明する。

（５−１．通話中の会話から話題を抽出して関連情報の表示処理）
本実施形態に係る携帯端末１０は、ユーザが第三者（通話相手）と通話している際に、会話から話題を抽出し、抽出した話題に対応する関連情報を透過型表示部４０に表示可能である。以下において、図２７〜図３２を参照しながら、通話中の話題の関連情報の表示処理について説明する。

図２７は、会話から抽出した話題に基づく関連情報の表示処理を示すフローチャートである。図２８〜図３２は、通話中の話題の関連情報の表示処理中の透過型表示部４０の表示例を示す図である。

図２７のフローチャートは、携帯端末１０のユーザが通話相手と通話を行うと共に、透過型表示部４０が開状態となってユーザの目の前に位置するところから開始される。この際、透過型表示部４０には、図２８に示すように画像等が表示されておらず、ユーザは、透過型表示部４０を介して部屋の様子を見ているものとする。

まず、携帯端末１０のシステムコントローラ１１０は、ユーザと通話相手の音声を音声入出力コントロール１２８でテキストへ変換し、変換したテキストデータをストレージ１２５に記憶させる（ステップＳ１０２）。

次に、システムコントローラ１１０は、所定期間毎に、ストレージ１２５に記憶されたテキストデータの内容に類似する話題を抽出する（ステップＳ１０４）。所定期間として、ここでは例えば５分であるが、これに限定されない。

ここで、話題の抽出方法の一例を説明する。まず、テキストデータの形態素解析を施して、不要語を除外した単語（特徴語）を抽出し、各単語の重みを演算する。これにより、テキストデータの特徴ベクトルが算出される。次に、予めストレージ１２５等に記憶されているデータベース（話題毎の特徴ベクトルが格納されている）を検索し、テキストデータの特徴ベクトルと、データベースに格納された話題毎の特徴ベクトルとの内積から、類似度をそれぞれ算出する。そして、例えば類似度が最大の話題を抽出する。

図２７のフローチャートに戻って説明を続ける。システムコントローラ１１０は、抽出された話題と関連付けられたＵＲＬの画像（例えば、カバー画像）を、図２９に示すように透過型表示部４０に表示させる（ステップＳ１０６）。図２９では、ドラマの話題に関する複数のカバー画像Ｉ１ａ〜Ｉ１ｄが、透過型表示部４０の右側半分の領域に表示されている。しかし、カバー画像の表示位置は、これに限定されず、例えば透過型表示部４０の左側の領域であっても良い。

透過型表示部４０が複数のカバー画像を表示している際に、ユーザは、表示された複数のカバー画像の中から一のカバー画像を選択すべく、図３０に示すように指先を一のカバー画像上に重ねることができる。なお、システムコントローラ１１０は、撮像部１０３によって、透過型表示部４０に対応する位置に手が位置すると認識した場合には、図３０に示すように、透過型表示部４０にカバー画像上に重ねられた手を擬似的に表示しても良い。

次に、システムコントローラ１１０は、ユーザの指先と一のカバー画像とが所定時間重なっているか否かを判定する（ステップＳ１０８）。そして、ステップＳ１０８で指先と一のカバー画像とが所定時間重なっていると判定された場合には（Ｙｅｓ）、システムコントローラ１１０は、指先が重なっていたカバー画像に対応するＵＲＬにアクセスする（ステップＳ１１０）。これにより、カバー画像に対応するウェブページが取得されることになる。

次に、システムコントローラ１１０は、取得したウェブページを、図３１に示すように透過型表示部４０の左側半分の領域に表示させる（ステップＳ１１２）。ここでは、図３１に示すように、ウェブページＩ２が全画面表示されている。

次に、システムコントローラ１１０は、ウェブページの表示後の所定時間内に、ユーザが操作を行なっていないかを判定する（ステップＳ１１４）。そして、ステップＳ１１４でユーザが操作を行なっていない場合には（Ｙｅｓ）、システムコントローラ１１０は、ステップＳ１０４の処理に戻って再度話題を抽出して、図３２に示すようにカバー画像を表示させる。図３２では、アニメの話題に関する複数のカバー画像Ｉ３ａ〜Ｉ３ｄが表示されている。

なお、ステップＳ１１４で所定時間内にユーザが操作を行った場合には、システムコントローラ１１２は、ユーザの操作に対応した処理（例えば、ブラウジングや他のＵＲＬへのアクセス）を行う。

上述した会話から抽出した話題に基づく関連情報の表示処理によれば、ユーザは、第三者との通話中に、話題に対応する画像等を透過型表示部４０で見ることができる。

上述した表示処理によれば、システムコントローラ１１０は、通話中に取得した音声又は画像に応じて、音声又は画像の関連情報（ウェブページ）を生成し、透過型表示部４０に表示させる。具体的には、システムコントローラ１１０は、通話中に取得した音声（会話）に対応する話題に関するＵＲＬにアクセスして、ＵＲＬに対応するウェブページを取得する。そして、システムコントローラ１１０は、取得したウェブページを透過型表示部４０に表示させる。これにより、ユーザは、表示されたウェブページを見ることにより、通話をしながら、会話に関連する話題の情報を得やすくなる。

（５−２．同時視聴しているテレビ画面の関連情報の表示処理）
本実施形態に係る携帯端末１０は、ユーザが第三者と同時にテレビを視聴している際に、視聴しているテレビ画面の関連情報を透過型表示部４０に表示可能である。以下において、図３３〜図３８を参照しながら、同時視聴しているテレビ画面の関連情報の表示処理について説明する。

図３３と図３４は、同時視聴しているテレビ画面の関連情報の表示処理を示すフローチャートである。図３５〜図３８は、同時視聴しているテレビ画面の関連情報の表示処理中の透過型表示部４０の表示例を示す図である。

図３３のフローチャートは、第三者と通話中の携帯端末１０のユーザが、視聴するテレビの表示をＯＮしたところから開始される（ステップＳ２０２）。この際、透過型表示部４０は、開状態となってユーザの目の前に位置している。

次に、携帯端末１０のシステムコントローラ１１０は、放送されているテレビ番組の映像と音声を一時的に記憶する（ステップＳ２０４）。次に、システムコントローラ１１０は、映像と音声からシグネチャー（例えば、フィンガープリント）を生成し、外部装置であるサーバに送信する（ステップＳ２０６）。なお、上記では、映像と音声からシグネチャーを生成しているが、これに限定されず、音声のみからシグネチャーを生成することとしても良い。

サーバは、携帯端末１０から受信したシグネチャーに基づいて、視聴中のテレビ番組に関連情報と、画像情報と、関連情報の表示位置情報等とを生成することになる。ここで、関連情報は、例えば、視聴中のテレビ番組のタイトルや、登場人物に関する情報である。画像情報は、テレビ画面の画角を決定するための情報である。

次に、システムコントローラ１１０は、サーバが生成した視聴中のテレビ番組の関連情報、画像情報、及び表示位置情報等を、サーバから取得する（ステップＳ２０８）。次に、システムコントローラ１１０は、撮像部１０３により撮像される画像と、取得した画像情報とを比較することで、テレビ画面の画角を特定する（ステップＳ２１０）。そして、システムコントローラ１１０は、図３５に示すように、取得した表示位置情報が示すテレビ画面に対する所定の相対位置に、関連情報をＡＲ表示する。図３５では、関連情報として、番組タイトルを示す情報Ｉ４ａ、番組の内容を示す情報Ｉ４ｂ、及び登場人物を示す情報Ｉ４ｃ、Ｉ４ｄがＡＲ表示されている。

その後、第三者である通話相手が利用する端末が、操作情報の要求を送信したものとする（ステップＳ２１２）。すると、携帯端末１０が、操作情報の要求に応じて認証信号を通話相手の端末に送信する（ステップＳ２１４）ことで、通話相手の端末は、認証信号を受信する（ステップＳ２１６）。

次に、携帯端末１０のシステムコントローラ１１０は、ユーザの指先と関連情報とが所定時間重なっているか否かを判定する（ステップＳ２１８）。そして、ステップＳ２１８で指先と関連情報とが所定時間重なっていると判定された場合には（Ｙｅｓ）、例えば図３６に示すように指先と登場人物を示す情報Ｉ４ｄとが重なっている場合には、システムコントローラ１１０は、指先が重なっていた関連情報Ｉ４ｄに関連付けられたＵＲＬにアクセスする（ステップＳ２２０）。これにより、関連情報Ｉ４ｄに対応するウェブページが取得されることになる。

次に、システムコントローラ１１０は、ステップＳ２２０でアクセスしたＵＲＬを含む情報を、通話相手の端末に送信する（ステップＳ２２２）ことで、通話相手の端末は、ＵＲＬを含む情報を受信する（ステップＳ２２４）。通話相手の端末は、受信した情報に含まれるＵＲＬにアクセスする（ステップＳ２２６）。

携帯端末１０のシステムコントローラ１１０は、図３７に示すように、アクセスしたＵＲＬのウェブページＩ５を透過型表示部４０に表示する（ステップＳ２２８）。この際、システムコントローラ１１０は、テレビ画面を避けるようにウェブページＩ５を表示し、また関連情報Ｉ４ｃとウェブページが重ならないように関連情報Ｉ４ｃの位置を変更している。

通話相手の端末も、携帯端末１０と同様に、アクセスしたＵＲＬのウェブページを表示する（ステップＳ２３０）。通話相手の端末が携帯端末１０と同様な端末である場合には、図３８に示すように、上述したステップＳ２２８で説明した表示制御が行われる。なお、図３８は、通話相手が利用する携帯端末の透過型表示部４０の表示例である。

上述した表示処理によれば、システムコントローラ１１０は、通話相手と同時に視聴しているテレビ画面に対応するＵＲＬにアクセスして、ＵＲＬに対応するウェブページを取得する。そして、システムコントローラ１１０は、取得したウェブページを透過型表示部４０に表示させる。これにより、ユーザは、表示されたウェブページを見ることにより、視聴中のテレビ画面に関する付加情報を得やすくなる。

（５−３．相手の話の要約の自動表示処理）
本実施形態に係る携帯端末１０は、ユーザが第三者（通話相手）と通話している際に、通話相手の話の要約を生成して、透過型表示部４０に自動的に表示可能である。以下において、図３９〜図４１を参照しながら、通話相手の話の要約の表示処理について説明する。

図３９は、通話相手の話の要約の表示処理を示すフローチャートである。図４０と図４１は、通話相手の話の要約の表示処理中の透過型表示部４０の表示例を示す図である。

図３９のフローチャートは、携帯端末１０のユーザが通話相手と通話を行うと共に、透過型表示部４０が開状態となってユーザの目の前に位置するところから開始される。

まず、携帯端末１０のシステムコントローラ１１０は、ユーザが操作部で要約機能をＯＮさせる操作を行うと、要約機能をＯＮする（ステップＳ３０２）。この際、図４０に示すように、透過型表示部４０に要約機能がＯＮ状態である情報Ｉ６が表示されても良い。

次に、システムコントローラ１１０は、通話相手の音声を音声入出力コントロール１２８でテキストへ変換し、変換したテキストデータをストレージ１２５に記憶させる（ステップＳ３０４）。

次に、システムコントローラ１１０は、所定時間（一例として５分）後に、ストレージ１２５に記憶された所定時間の間のテキストデータの内容から要約を作成し、図４０（ａ）に示すように透過型表示部４０に表示する（ステップＳ３０６）。図４０（ａ）では、透過型表示部４０の右側半分の領域に要約Ｉ７ａが表示されている。

ここで、テキストデータの要約の作成方法の一例について説明する。テキストデータの要約は、まず、テキストデータを単語、句、文等に分割し、分割された単語や句等を現れる頻度や互いの近さ等の特徴を取得する。そして、取得した単語や句等の特徴に基づき、順番や近さ等が要約に与える影響を考慮して、テキストデータにおける単語、句等の重要度をランキングする。そして、ランキングに基づき、要約文が作成される。

図３９に戻って説明を続ける。システムコントローラ１１０は、要約の表示から所定時間が経過したか否かを判定する（ステップＳ３０８）。所定時間として、ここでは例えば３０秒であるが、これに限定されない。

そして、ステップＳ３０８で所定時間が経過した場合には（Ｙｅｓ）、システムコントローラ１１０は、再度、通話相手の話の要約を作成し、図４０（ｂ）、図４０（ｃ）に示すように透過型表示部４０に表示させる。図４０（ｂ）及び図４０（ｃ）では、図４０（ａ）とは異なる要約Ｉ７ｂ、Ｉ７ｃが示されている。すなわち、システムコントローラ１１０は、要約の作成と表示を繰り返す。

一方で、ステップＳ３０８で所定時間が経過する前は（Ｎｏ）、システムコントローラ１１０は、ユーザが操作部で要約機能をＯＦＦにさせる操作を行ったか否かを判定する（ステップＳ３１０）。そして、ステップＳ３１０で要約機能をＯＦＦにした場合には（Ｙｅｓ）、システムコントローラ１１０は、通話相手の音声を音声入出力コントロール１２８でテキストへ変換する処理を停止する（ステップＳ３１２）。

上述した表示処理によれば、システムコントローラ１１０は、通話中に、通話相手の端末から取得した音声の内容の要約を生成し、透過型表示部４０に表示させるので、通話をしながら通話相手の話した内容を適切に理解できる。

（５−４．通話相手のジェスチャに基づくナビゲーション情報の表示処理）
本実施形態に係る携帯端末１０は、通話相手の端末から取得した通話相手のジェスチャ情報に基づきナビゲーション情報を生成し、生成したナビゲーション情報を透過型表示部４０に表示可能である。以下において、図４２及び図４３を参照しながら、通話相手のジェスチャに基づくナビゲーション情報の表示処理について説明する。

図４２は、通話相手のジェスチャに基づくナビゲーション情報の表示処理を示すフローチャートである。図４３は、通話相手のジェスチャに基づくナビゲーション情報の表示処理の流れを説明するための説明図である。

図４２のフローチャートは、ユーザの携帯端末１０が、通話相手の端末と通話を確立し、道案内モードを起動したところから開始される（ステップＳ４０２）。ユーザの携帯端末１０は、道案内モードを起動すると、その情報を通話相手の端末に送信する。これにより、通話相手の端末も、道案内モードを起動させる（ステップＳ４０３）。なお、本表示処理において、通話相手の端末も、透過型表示部４０を有する携帯端末１０であるものとする。

次に、ユーザの携帯端末１０（具体的には、システムコントローラ１１０）は、撮像部１０３によって、図４３（ａ）に示すようなユーザの視野画像Ｉ８を撮像する（ステップＳ４０４）。次に、ユーザの携帯端末１０は、撮像した視野画像を通話相手の端末に送信する（ステップＳ４０６）。この際、ユーザは、通話相手に対して、例えば目的地への道案内に関する質問をする。

通話相手の携帯端末１０は、受信した視野画像を透過型表示部４０に表示する（ステップＳ４０８）。次に、通話相手の携帯端末１０は、撮像部１０３によって、通話相手の前方（透過型表示部４０を含む領域）を撮像する（ステップＳ４１０）。通話相手は、ユーザの目的地への道案内に関する質問に応えるべく、図４３（ｂ）に示すように、透過型表示部４０に表示された画像における目的地に指を重ねる。すると、通話相手の携帯端末１０は、透過型表示部４０と共に通話相手の指も撮像することになる。

次に、通話相手の携帯端末１０は、撮像画像から通話相手の手を認識して切り出す（ステップＳ４１２）。次に、通話相手の携帯端末１０は、切り出した手の画像をユーザの携帯端末１０に送信する（ステップＳ４１４）。

次に、ユーザの携帯端末１０は、通話相手の端末から受信した手の画像Ｉ９をナビゲーション情報として、図４３（ｃ）に示すように透過型表示部４０に表示する（ステップＳ４１６）。これにより、ユーザは、目的地を容易に把握できる。その後、ユーザが動作中の道案内モードを終了させる操作等を行った場合には（ステップＳ４１８：Ｙｅｓ）、ユーザの携帯端末１０は、動作中の道案内モードを終了させる（ステップＳ４２０）。この際、ユーザの携帯端末１０は、道案内モードを終了させると共に、その情報を通話相手の携帯端末１０に送信する。これにより、通話相手の携帯端末１０も、動作中の道案内モードを終了させる（ステップＳ４２２）。これにより、本表示処理が終了する。

なお、上記では、ナビゲーション情報として手の画像を透過型表示部４０に表示することとしたが、これに限定されない。例えば、ナビゲーション情報は、目的地を指す矢印や、目的地を囲む円や矩形の図形や、文字等であっても良い。また、ナビゲーション情報として、目的地に関する音声を出力しても良い。

上述した表示処理によれば、システムコントローラ１１０は、通話中の通話相手の動作に関する動作情報を取得し、取得した動作情報に基づくナビゲーション情報を生成し、透過型表示部４０に表示させる。具体的には、システムコントローラ１１０は、通話相手のジェスチャ情報を取得し、取得したジェスチャ情報に基づくナビゲーション情報を透過型表示部４０に表示させる。これにより、ユーザは、透過型表示部４０に表示されたナビゲーション情報を見ることで、例えば通話相手の道案内を理解しやすくなる。

（５−５．音声から抽出したキーワードに基づくナビゲーション情報の表示処理）
本実施形態に係る携帯端末１０は、通話相手の音声から目的地を特定するキーワードを抽出し、抽出したキーワードに基づき目的地へのナビゲーション情報を透過型表示部４０に表示可能である。以下において、図４４及び図４５を参照しながら、通話相手の音声から抽出したキーワードに基づくナビゲーション情報の表示処理について説明する。

図４４は、通話相手の音声から抽出したキーワードに基づくナビゲーション情報の表示処理を示すフローチャートである。図４５は、通話相手の音声から抽出したキーワードに基づくナビゲーション情報の表示処理の流れを説明するための説明図である。

図４４のフローチャートは、ユーザの携帯端末１０が、通話相手の端末と通話を確立し、道案内モードを起動したところから開始される（ステップＳ５０２）。なお、本表示処理において、通話相手の端末は、少なくとも通話機能を有すれば良い。

次に、携帯端末１０のシステムコントローラ１１０は、撮像部１０３によって、図４５（ａ）に示すようにユーザの視野画像を撮像する（ステップＳ５０４）。次に、携帯端末１０は、ＧＰＳ受信部１２１によって、携帯端末１０のユーザの現在位置及び進行方向を検出する（ステップＳ５０６）。

その後、ユーザが、通話相手に対して例えば目的地への道案内に関する質問をし、通話相手が、ユーザの質問に対して図４５（ｂ）のように目的地（「ＡＢＣ百貨店」）に関する発話をしたものとする。

すると、システムコントローラ１１０は、通話相手からの音声を音声認識し、目的地に関するキーワードを抽出する（ステップＳ５０８）。ここでは、システムコントローラ１１０は、キーワードとして「ＡＢＣ百貨店」を抽出することになる。

次に、システムコントローラ１１０は、地図情報から、ユーザの現在位置周辺で抽出したキーワードに合致する場所を特定し、目的地に設定する（ステップＳ５１０）。そして、システムコントローラ１１０は、図４５（ｃ）に示すように、目的地の方向へ誘導するナビゲーション情報を透過型表示部４０に表示する（ステップＳ５１２）。図４５（ｃ）では、ナビゲーション情報として、目的地の方向を示す矢印Ｉ１０が表示されている。

次に、システムコントローラ１１０は、ユーザの現在位置及び進行方向から、視野映像内に目的地が含まれるか否かを判定する（ステップＳ５１４）。そして、ステップＳ５１４で目的地が含まれると判定した場合には（Ｙｅｓ）、システムコントローラ１１０は、図４５（ｄ）に示すように、目的地を指し示すナビゲーション情報を透過型表示部４０に表示する（ステップＳ５１６）。図４５（ｄ）では、ナビゲーション情報として、目的地を囲む円の図形Ｉ１１が表示されている。その後、ユーザが動作中の道案内モードを終了させる操作等を行った場合には（ステップＳ５１８：Ｙｅｓ）、システムコントローラ１１０は、動作中の道案内モードを終了させる（ステップＳ５２０）。これにより、本表示処理が終了する。

なお、上記では、ナビゲーション情報として、目的地の方向を示す矢印や目的地を囲む円の図形が表示されたが、これに限定されない。例えば、矢印の代わりに、文字や図形を表示しても良く、円の図形の代わりに、他の図形（例えば矩形）や文字を表示しても良い。また、ナビゲーション情報として、目的地への方向や目的地の場所に関する音声を出力しても良い。

上述した表示処理によれば、システムコントローラ１１０は、通話相手が発し音声を取得し、取得した音声に基づくナビゲーション情報を透過型表示部４０に表示させる。これにより、ユーザは、透過型表示部４０に表示されたナビゲーション情報を見ることで、例えば通話相手の道案内を理解しやすくなる。

＜６．まとめ＞
上述した携帯端末１０においては、透過型表示部４０は、音声出力部による音声出力中に、筺体２０の主面と交差する平面上に配置可能である。これにより、例えばユーザが携帯端末１０を耳に当てて出力されている音声を聞いている際に、透過型表示部４０が見えやすい位置に位置するため、透過型表示部４０の表示を適切に把握できる。

特に、透過型表示部４０は、図３に示すように、第三者との通話中に筐体２０の主面と交差する平面上に配置可能である。これにより、ユーザは第三者との通話している際に、透過型表示部４０が見えやすい位置に位置するため、透過型表示部４０の表示を把握しやすくなる。

以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

また、上記の実施形態のフローチャートに示されたステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的に又は個別的に実行される処理をも含む。また時系列的に処理されるステップでも、場合によっては適宜順序を変更することが可能であることは言うまでもない。

本明細書において説明した情報処理装置による処理は、ソフトウェア、ハードウェア、及びソフトウェアとハードウェアとの組合せのいずれを用いて実現されてもよい。ソフトウェアを構成するプログラムは、例えば、各装置の内部又は外部に設けられる記憶媒体に予め格納される。そして、各プログラムは、例えば、実行時にＲＡＭ（Random Access Memory）に読み込まれ、ＣＰＵなどのプロセッサにより実行される。
なお、以下のような構成も本開示の技術的範囲に属する。
（１）
音声を出力する音声出力部を有する筺体と、
前記筺体に対して回動可能に設けられた透過型表示部と、
を備え、
前記透過型表示部は、前記音声出力部による音声出力中に、前記筺体の主面と交差する平面上に配置可能である、携帯端末。
（２）
通話を行う通話部を更に備え
前記透過型表示部は、通話中に、前記筺体の主面と交差する平面上に配置可能である、
前記（１）に記載の携帯端末。
（３）
前記透過型表示部は、前記筺体に対する閉状態と開状態の間で回動し、
前記閉状態に位置する前記透過型表示部の表示面と、前記筺体の主面とが、同一面上に位置する、
前記（１）又は（２）に記載の携帯端末。
（４）
前記透過型表示部は、前記筺体に対する閉状態と開状態の間で回動し、
前記閉状態に位置する前記透過型表示部の表示面と、前記筺体の主面とが、平行である、
前記（１）又は（２）に記載の携帯端末。
（５）
前記透過型表示部は、前記筺体に対して第１方向に回動した第１開状態、又は前記第１方向とは逆方向に回動した第２回動状態に位置する際に、前記主面と交差する平面上に配置可能である、
前記（１）〜（４）のいずれか１項に記載の携帯端末。
（６）
前記透過型表示部は、非透過型の第２表示部を有する、
前記（１）〜（５）のいずれか１項に記載の携帯端末。
（７）
前記第２表示部は、前記透過型表示部が前記筺体に対して閉状態に位置する際に、表示を行う、
前記（６）に記載の携帯端末。
（８）
前記透過型表示部の回動状態を検出する検出部と、
前記透過型表示部の表示を制御する制御部と、
を更に備え、
前記制御部は、前記検出部により検出された前記透過型表示部の回動状態に応じて、表示を制御する、
前記（１）〜（７）のいずれか１項に記載の携帯端末。
（９）
通話を行う通話部と、
音声又は画像を取得する取得部と、
通話中に、前記取得部により取得された音声又は画像に応じて、前記音声又は前記画像の関連情報を生成し、前記透過型表示部に表示させる制御部と、
を更に備える、
前記（１）〜（８）のいずれか１項に記載の携帯端末。
（１０）
ＵＲＬにアクセスし、ウェブ情報を取得するウェブ情報取得部を更に備え、
前記制御部は、前記取得部により取得された音声に対応する話題に関連するＵＲＬにアクセスするように制御する、
前記（９）に記載の携帯端末。
（１１）
ＵＲＬにアクセスし、ウェブ情報を取得するウェブ情報取得部を更に備え、
前記制御部は、前記取得部により取得された画像に対応するＵＲＬにアクセスするように制御する、
前記（９）又は（１０）に記載の携帯端末。
（１２）
前記制御部は、前記取得部により取得された音声の内容の要約を生成し、前記透過型表示部に表示させる、
前記（９）〜（１１）のいずれか１項に記載の携帯端末。
（１３）
通話を行う通話部と、
通話中の通話相手の動作に関する動作情報を取得する取得部と、
前記取得部により取得された動作情報に基づくナビゲーション情報を生成し、前記透過型表示部に表示させる制御部と、
を更に備える、
前記（１）〜（１２）のいずれか１項に記載の携帯端末。
（１４）
前記取得部は、前記動作情報として前記通話相手のジェスチャ情報を取得し、
前記制御部は、取得した前記ジェスチャ情報に基づくナビゲーション情報を前記透過型表示部に表示させる、
前記（１３）に記載の携帯端末。
（１５）
前記取得部は、前記動作情報として前記通話相手が発した音声を取得し、
前記制御部は、取得した音声に基づくナビゲーション情報を前記透過型表示部に表示させる、
前記（１３）又は（１４）に記載の携帯端末。
（１６）
前記透過型表示部は、
前記筺体に対して回動可能な基部と、
前記基部の表面に設けられ、画像表示素子からの光を全反射させながら射出口へ導く導光部と、
前記基部と前記導光部の間に形成された空気層と、
を有する、
前記（１）〜（１５）のいずれか１項に記載の携帯端末。
（１７）
前記導光部は、
前記基部の第１表面に設けられた第１導光部と、
前記基部の前記第１表面とは反対側の第２表面に設けられた第２導光部と、
であり、
前記空気層は、
前記基部の前記第１表面と前記第１導光部の間に形成された第１空気層と、
前記基部の前記第２表面と前記第２導光部の間に形成された第２空気層と、
である、
前記（１６）に記載の携帯端末。
（１８）
前記基部は、前記筺体に対して第１方向に回動した第１開状態、又は前記第１方向とは逆方向に回動した第２回動状態に位置し、
前記第１導光部は、前記基部が前記第１開状態に位置する際に、前記画像表示素子からの光を全反射させながら射出口へ導き、
前記第２導光部は、前記基部が前記第２開状態に位置する際に、前記画像表示素子からの光を全反射させながら射出口へ導く、
前記（１７）に記載の携帯端末。

１０ 携帯端末
２０ 筺体
２０ａ 前面
２４ スピーカ
４０ 透過型表示部
４１ 基部
４２ 第２表示部
４３、４７ 導光板
４４、４８ 空気層
４５ ヒンジ部
７５ 回動検出部
１１０ システムコントローラ

Claims (18)

1. 音声を出力する音声出力部を有する筺体と、
   前記筺体に対して回動可能に設けられた透過型表示部と、
   を備え、
   前記透過型表示部は、前記音声出力部による音声出力中に、前記筺体の主面と交差する平面上に配置可能である、携帯端末。
2. 通話を行う通話部を更に備え
   前記透過型表示部は、通話中に、前記筺体の主面と交差する平面上に配置可能である、
   請求項１に記載の携帯端末。
3. 前記透過型表示部は、前記筺体に対する閉状態と開状態の間で回動し、
   前記閉状態に位置する前記透過型表示部の表示面と、前記筺体の主面とが、同一面上に位置する、
   請求項１に記載の携帯端末。
4. 前記透過型表示部は、前記筺体に対する閉状態と開状態の間で回動し、
   前記閉状態に位置する前記透過型表示部の表示面と、前記筺体の主面とが、平行である、
   請求項１に記載の携帯端末。
5. 前記透過型表示部は、前記筺体に対して第１方向に回動した第１開状態、又は前記第１方向とは逆方向に回動した第２回動状態に位置する際に、前記主面と交差する平面上に配置可能である、
   請求項１に記載の携帯端末。
6. 前記透過型表示部は、非透過型の第２表示部を有する、
   請求項１に記載の携帯端末。
7. 前記第２表示部は、前記透過型表示部が前記筺体に対して閉状態に位置する際に、表示を行う、
   請求項６に記載の携帯端末。
8. 前記透過型表示部の回動状態を検出する検出部と、
   前記透過型表示部の表示を制御する制御部と、
   を更に備え、
   前記制御部は、前記検出部により検出された前記透過型表示部の回動状態に応じて、表示を制御する、
   請求項１に記載の携帯端末。
9. 通話を行う通話部と、
   音声又は画像を取得する取得部と、
   通話中に、前記取得部により取得された音声又は画像に応じて、前記音声又は前記画像の関連情報を生成し、前記透過型表示部に表示させる制御部と、
   を更に備える、
   請求項１に記載の携帯端末。
10. ＵＲＬにアクセスし、ウェブ情報を取得するウェブ情報取得部を更に備え、
    前記制御部は、前記取得部により取得された音声に対応する話題に関連するＵＲＬにアクセスするように制御する、
    請求項９に記載の携帯端末。
11. ＵＲＬにアクセスし、ウェブ情報を取得するウェブ情報取得部を更に備え、
    前記制御部は、前記取得部により取得された画像に対応するＵＲＬにアクセスするように制御する、
    請求項９に記載の携帯端末。
12. 前記制御部は、前記取得部により取得された音声の内容の要約を生成し、前記透過型表示部に表示させる、
    請求項９に記載の携帯端末。
13. 通話を行う通話部と、
    通話中の通話相手の動作に関する動作情報を取得する取得部と、
    前記取得部により取得された動作情報に基づくナビゲーション情報を生成し、前記透過型表示部に表示させる制御部と、
    を更に備える、
    請求項１に記載の携帯端末。
14. 前記取得部は、前記動作情報として前記通話相手のジェスチャ情報を取得し、
    前記制御部は、取得した前記ジェスチャ情報に基づくナビゲーション情報を前記透過型表示部に表示させる、
    請求項１３に記載の携帯端末。
15. 前記取得部は、前記動作情報として前記通話相手が発した音声を取得し、
    前記制御部は、取得した音声に基づくナビゲーション情報を前記透過型表示部に表示させる、
    請求項１３に記載の携帯端末。
16. 前記透過型表示部は、
    前記筺体に対して回動可能な基部と、
    前記基部の表面に設けられ、画像表示素子からの光を全反射させながら射出口へ導く導光部と、
    前記基部と前記導光部の間に形成された空気層と、
    を有する、
    請求項１に記載の携帯端末。
17. 前記導光部は、
    前記基部の第１表面に設けられた第１導光部と、
    前記基部の前記第１表面とは反対側の第２表面に設けられた第２導光部と、
    であり、
    前記空気層は、
    前記基部の前記第１表面と前記第１導光部の間に形成された第１空気層と、
    前記基部の前記第２表面と前記第２導光部の間に形成された第２空気層と、
    である、
    請求項１６に記載の携帯端末。
18. 前記基部は、前記筺体に対して第１方向に回動した第１開状態、又は前記第１方向とは逆方向に回動した第２回動状態に位置し、
    前記第１導光部は、前記基部が前記第１開状態に位置する際に、前記画像表示素子からの光を全反射させながら射出口へ導き、
    前記第２導光部は、前記基部が前記第２開状態に位置する際に、前記画像表示素子からの光を全反射させながら射出口へ導く、
    請求項１７に記載の携帯端末。

Images