JP7133025B2

JP7133025B2 - ヘッドアップディスプレイシステム

Info

Publication number: JP7133025B2
Application number: JP2020546020A
Authority: JP
Inventors: 敏光渡辺; 望下田
Original assignee: Maxell Ltd
Current assignee: Maxell Ltd
Priority date: 2018-09-13
Filing date: 2019-09-10
Publication date: 2022-09-07
Anticipated expiration: 2039-09-10
Also published as: CN112368999A; CN112368999B; US11537354B2; WO2020054694A1; DE112019003047T5; JPWO2020054694A1; US20220050654A1

Description

本発明は、車両に搭載したヘッドアップディスプレイ装置を用いて、これに接続された携帯端末の画面を表示し、相手の端末と通信を行うことが可能なヘッドアップディスプレイシステムに関する。

近年、車両に搭載し、ウィンドシールドを介して前方に映像情報を表示するヘッドアップディスプレイ装置（以下、ＨＵＤ装置）が実用化されている。その際、表示する映像情報として運転者向けの運転支援情報を提供することで、安全運転に寄与することができる。一方、車内に持ち込んだスマートフォンなどの携帯端末を運転者が使用する場合、車両走行中に操作することは安全上の問題があり、ハンズフリー機器などを介することで安全に対応する必要がある。

これに関し例えば特許文献１には、スマートフォンなどの携帯端末を、ハンズフリーで通話可能な機能を有する車載装置に接続して使用する構成が記載されている。そして特許文献１に記載の車載装置は、無線通信可能なエリア内にある携帯端末を探索し、ユーザは、表示された特定の携帯端末に対応するＭＡＣアドレスを選択し、当該携帯端末と車載装置との接続を可能にしている。

特開２０１５－１０００６９号公報

車内に持ち込んだスマートフォンなどの携帯端末を運転者が使用する場合、ハンズフリー機器などを介することで、運転者は手の操作なしで相手の端末と通話を行うことができる。しかしながら従来のハンズフリー機器には、次のような使い勝手上の課題がある。

走行中に携帯端末に着信があった場合において、運転者は着信音などで感知することはできても、通話相手が誰かを即時に知ることができず不便である。つまり、走行中の運転者は通話相手が誰かを知ろうとして携帯端末やハンズフリー機器に視線をそらすことは、安全運転が損なわれる恐れがある。さらに、複数の携帯端末や音声を発する車載機器を接続しているとき、運転者がどの端末（機器）が音声を発しているかを即座に判別できず不便である。その結果、優先して聞くべき運転案内情報を聞き漏らす恐れがある。

本発明の目的は、安全運転を損なわずに、携帯端末での通信操作を容易に行えるヘッドアップディスプレイシステムを提供することである。

上記課題を解決するため、本発明によるヘッドアップディスプレイシステムは、車両に搭載し、運転者から見て前記車両の前方に映像を表示するヘッドアップディスプレイ装置（以下、ＨＵＤ装置）と、携帯端末とＨＵＤ装置を接続し通信するための通信部と、運転者に対して音声を出力するスピーカと、運転者の音声を集音するマイクロホンと、マイクロホンで集音した音声を解析する音声認識部と、運転者の顔を撮影する車内カメラと、を備える。ＨＵＤ装置には、携帯端末とスピーカ、マイクロホン、車内カメラの間で伝送する音声信号、画像信号の信号処理を行う信号処理部と、ＨＵＤ装置の表示画面での映像の表示を制御する表示制御部と、を有し、運転者は、スピーカとマイクロホンを用いて携帯端末での通話動作を行うことが可能である。携帯端末に着信があったとき、携帯端末の着信画面をＨＵＤ装置の表示画面に表示するとともに、スピーカから着信音を出力し、運転者の発する音声を音声認識部で解析した結果に基づいて、携帯端末の通話動作を開始あるいは終了する。

本発明によれば、車両に持ち込んだ携帯端末の画面をＨＵＤ装置の画面に表示することで、運転者は、安全運転を損なわずに携帯端末での通信操作を容易に行うことができる。

車両に搭載したＨＵＤシステムの概要を説明する図。ＨＵＤシステムの全体構成を示すブロック図。携帯端末の画面で、着信があったときの表示例を示す図。ＨＵＤ画面の表示例で、携帯端末が着信前の状態を示す図。ＨＵＤ画面の表示例で、携帯端末が着信時の状態を示す図。ＨＵＤ画面の表示例で、携帯端末にて通話中の状態を示す図。ＨＵＤシステムにおける携帯端末の通話処理を示すフローチャート。携帯端末の画面で、ＳＮＳ情報の表示例を示す図。ＨＵＤ画面に携帯端末のＳＮＳ画面を表示した状態を示す図。複数のスピーカを区別するアイコンの例を示す図。ＨＵＤ画面に複数の音声アイコンを表示した状態を示す図。

本発明によるヘッドアップディスプレイシステム（以下、ＨＵＤシステム）の実施形態について、図面を用いて説明する。

図１は、車両に搭載したＨＵＤシステムの概要を説明する図である。ＨＵＤシステム１は、車両２のダッシュボードの下部に設置されたヘッドアップディスプレイ装置（ＨＵＤ装置）１０から、表示用の映像を投射する。ＨＵＤ装置１０は、映像を生成して出射する映像表示部１４と、出射された映像をウィンドシールド４に向けて反射する凹面ミラー１５を有する。ウィンドシールド４で反射した映像は運転者５の目に入射し、映像を視認することができる。そのとき運転者５は、ウィンドシールド４の前方に存在する虚像９を見ていることになる。以下ではこの虚像９をＨＵＤ画面とも呼ぶことにする。ＨＵＤ画面（虚像）９では走行情報や車両情報が前景に重畳して表示され、運転操作を支援するものとなる。

さらに本実施例のＨＵＤシステム１では、車内に持ち込んだスマートフォン、タブレット端末、ノートパソコンなどの携帯端末３の通信動作を、ＨＵＤ装置１０の映像表示機能を利用してハンズフリーで行う構成としている。すなわち、携帯端末３とＨＵＤ装置１０の間で通信接続を行い、携帯端末３の通信動作（着信、音声通話、画像送受信など）を、ＨＵＤ画面９と、車内に設置したスピーカ３２、マイクロホン３３、車内カメラ３５を介して行う。設置場所は、例えばスピーカ３２は運転席のヘッドレスト、マイクロホン３３はウィンドシールド４の上部、車内カメラ３５はダッシュボード上などが好適であるが、運転者は適宜変更することができる。

その際、携帯端末３の着信の画面や受信画像の表示は、ＨＵＤ画面９内の運転支援情報の表示に重畳して、または一部の画面と切り替えて行う。これにより運転者５は、携帯端末３での通信動作をハンズフリーで行えるだけでなく、映像を表示するＨＵＤ画面９は常に運転者の視線範囲内に含まれる。すなわち運転者５は、携帯端末３での通信動作のために携帯端末や他の機器に視線をそらすことがなく、安全運転が損なわれる恐れがない。

図２は、ＨＵＤシステムの全体構成を示すブロック図である。ＨＵＤシステム１は、映像を投射表示するＨＵＤ装置１０に、いくつかの外部機器やデバイスを接続して構成される。

まず、車両情報に基づく運転支援動作に関連する構成について説明する。車両情報２０を取得するための外部機器として、車外カメラ（車外モニタカメラ）２１やＧＰＳ（Global Positioning System：全地球測位システム）アンテナ２２を接続する。

車外カメラ２１では、車両２の前方や後方等の周囲の状況を撮影し、得られた画像を画像解析部２３で解析することにより、例えば、周辺の他の車両や歩行者等の移動物の有無、道路標識、路面状況などを取得する。

ＧＰＳアンテナ２２では、ＧＰＳ信号を受信して現在位置情報を取得する。ナビゲーションユニット２４では、位置情報を地図データと照合することで、車両２の現在位置や走行方向（右折、左折、直進など）を示す地図情報を生成し、また必要に応じて運転手に対する音声案内情報を作成する。

さらには、図示しない車載の電子制御ユニット（ＥＣＵ）から出力される車速、ギア情報、ハンドル操舵角、ＡＣＣ（Adaptive Cruise Control）、走行レーンなどを含む車両情報２０が、車載バス２５を介してＣＡＮ（Controller Area Network）規格の信号として入力する。

入力したこれらの車両情報２０に基づき、ＨＵＤ装置１０内のグラフィック生成部１１は個々のグラフィック画像を生成し、映像表示部１４により表示される。また、音声案内情報は、図示しないスピーカから出力される。表示制御部１３は、グラフィック生成部１１で生成されたグラフィック画像の表示位置、表示の大きさ、複数画像の合成などの制御を行う。

次に、車内に持ち込んだ携帯端末３との通信機能に関連する構成について説明する。携帯端末３との通信機能を実現するための外部機器として、通信部３１、スピーカ３２、マイクロホン３３、車内カメラ３５を備える。すなわちこれらの外部機器は、運転者が携帯端末３をハンズフリーで使用可能とするために、携帯端末３の通話機能や画像送受信機能を代替えするデバイスとなる。

通信部３１は携帯端末３と無線接続するデバイスであり、例えばBluetooth（登録商標）、Ｗｉ－Ｆｉ（登録商標）などの通信モジュールを用いる。その際、携帯端末３の相手端末との間で通話機能（送話と受話）を可能とするための機能（ＨＦＰプロファイル）と、画像伝送とカメラ制御を行うための機能（ＢＩＰプロファイル）を備えている。無線通信以外の手段として、ＵＳＢケーブル（登録商標）などを用いて接続してもよい。

スピーカ３２は、携帯端末３における着信音（着信メッセージ）や通話中の相手の音声を出力するものである。なお、ＨＵＤ装置１０において、前記のナビゲーションユニット２４からの音声案内情報を出力するスピーカを備えている場合は、両者の機能を共通のスピーカで兼用する構成でもよい。

マイクロホン３３は、携帯端末３で相手と通話するとき、通話中の運転者の音声を集音するだけでなく、携帯端末３に対する操作指示を運転者の音声（発声）で行うときに運転者の音声を集音する。そのため音声認識部３４は、運転者の音声を解析して、どのような操作指示であるかを判断する。

車内カメラ３５は、ドライバモニタリングシステム（ＤＭＳ）を構成するデバイスであり、運転者の顔を撮影して携帯端末３の通話相手に送信するものである。

通信部３１、スピーカ３２、マイクロホン３３（音声認識部３４）、車内カメラ３５などの外部機器は、ＨＵＤ装置１０の信号処理部１２に接続される。信号処理部１２は、携帯端末３とスピーカ３２などの各外部機器の間で伝送する音声信号、画像信号の信号処理を行う。また信号処理部１３は、携帯端末３が着信したときや画像を受信したとき、それらの受信情報を表示制御部１３に転送する。表示制御部１３は、グラフィック生成部１１からの運転支援情報とともに、信号処理部１２から送られた携帯端末３の通信情報を、映像表示部１４を介してＨＵＤ画面９に表示する。これにより運転者は、携帯端末３の通話機能や画像送受信機能といった基本動作を、ＨＵＤ画面９、スピーカ３２、マイクロホン３３、車内カメラ３５などを介して、ハンズフリーで安全に実行することが可能になる。

次に、本発明のＨＵＤシステム１における通信・表示機能を実施例に分けて具体的に説明する。

実施例１では、携帯端末３の通話機能をＨＵＤシステム１にて実現する場合を説明する。車両２のイグニッションスイッチをＯＮにした時点で、携帯端末３とＨＵＤ装置１０は、例えばBluetooth（登録商標）などの通信部３１により接続（ペアリング）される。そして、携帯端末３に着信があると、運転者の視認するＨＵＤ画面９には携帯端末３の画面が表示される。以下、その表示画面の例を示す。

図３Ａは、携帯端末３の画面で、着信があったときの表示例を示す。携帯端末３は着信呼び出しモードとなり、画面には通話相手の顔画像（ただし登録済みの場合）３ｐが表示される。

図３Ｂは、ＨＵＤ画面９の表示例で、携帯端末３が着信前の状態を示す。ＨＵＤ画面９には、現在の車速、走行レーン、道路標識などの運転支援情報がグラフィック画像２０ａにて表示されている。

図３Ｃは、ＨＵＤ画面９の表示例で、携帯端末３に着信があったときの状態を示す。携帯端末３に着信があると、携帯端末３の画面はＢＩＰプロファイルを用いてＨＵＤ装置１０に転送される。そして、信号処理部１２と表示制御部１３を介して、映像表示部１４によりＨＵＤ画面９に表示される。そのとき携帯端末３の画面３ａは、グラフィック生成部１１の生成したグラフィック画像（運転支援情報）２０ａの一部の領域に重畳して表示される。また、ＨＵＤ画面９においても携帯端末３の通話相手の顔画像３ｐが表示される。これより運転者は、携帯端末３に着信があったことだけでなく、通話相手が誰であるかを即座に視認することができる。これと同時に、信号処理部１２を介してスピーカ３２から着信音、または着信メッセージの音声が出力されるので、運転者は着信があったことを着実に知ることができる。

これに対して運転者が着信を許可する用語（例えば「イエス」）を発声すると、相手との通話が可能になる。また、運転者が着信を拒否する用語（例えば「ノー」）を発声すると、相手との通話は切断される。その際、運転者の発声はマイクロホン３３で集音し、音声認識部３４は予め登録しておいた発声の用語（「イエス」、「ノー」など）と照合することで、運転者の指示内容（許可、拒否など）を判断する。

図３Ｄは、ＨＵＤ画面９の表示例で、携帯端末３を介して通話中の状態を示す。通話中には、ＨＵＤ画面９内の携帯端末の画面３ａは小面積のアイコン３ｂに変えてＨＵＤ画面９の下方に移動して表示する。これは、運転者の安全走行のために設けられたＨＵＤ画面における画像表示率の規定に従うためである。自動車関連の規格では、ＨＵＤ画面に表示される画像（コンテンツ）の表示率は３５％以下という規定があり、これを満足させるためである。そのため、図３Ｃで表示率が３５％を超える状態になった場合は、図３Ｄのようにアイコン化して小面積で表示する必要がある。あるいは、運転支援情報２０ａの一部（例えば道路標識等）を消去することでもよい。
一方、車内カメラ３５で撮影された運転者の画像は携帯端末３に伝送され、携帯端末３は通話相手に応答して相手の端末に画像を送信する。

通話終了時には、運転者は通話を終了する用語（例えば「オフ」、「フィニシュ」）を発声すると、携帯端末のアイコン化画面３ｂは一旦図３Ｃの元のサイズの画面３ａに戻り、所定の時間後に消去させる。そして、通話相手の端末との通話動作が終了する。

図４は、ＨＵＤシステム１における携帯端末の通話処理の流れを示すフローチャートである。以下の処理は、主に信号処理部１２により制御される。車両のイグニッションキーを点けた時点で、ＨＵＤ装置１０と携帯端末３は通信部３１を介して接続されている。

携帯端末３に着信があると（Ｓ１０１）、携帯端末３には図３Ａに示すような着信画面が表示される（Ｓ１０２）。
携帯端末３の着信画面はＨＵＤ装置１０に送信され（Ｓ１０３）、ＨＵＤ画面９には図３Ｃのように着信画面３ａが表示される（Ｓ１０４）。これと同時に、スピーカ３２から着信音（または着信メッセージの音声）が出力される（Ｓ１０５）。

着信のあったことを知った運転者は、音声により指示を行う。マイクロホン３３は運転者の発声を集音し（Ｓ１０６）、音声認識部３４により指示内容を解析する（Ｓ１０７）。運転者の指示内容が着信許可か否かを判定する（Ｓ１０８）。なお、着信許可か否かについては、予め発声の用語を登録しておき、これと照合して判断する。

運転者の指示内容が着信を許可しない場合は（Ｓ１０８でＮｏ）、携帯端末３に着信拒否のコマンドを送信する（Ｓ１０９）。そして、ＨＵＤ画面９に表示されている携帯端末の着信画面３ａを消去して（Ｓ１１０）、処理を終了する。

運転者の指示内容が着信を許可する場合は（Ｓ１０８でＹｅｓ）、携帯端末３に着信許可のコマンドを送信する（Ｓ１１１）。そして、図３ＤのＨＵＤ画面９のように、着信画面のサイズを縮小したアイコン３ｂとし、ＨＵＤ画面９の下部に移動して表示する（Ｓ１１２）。
一方、車内カメラ３５で運転者の画像を撮影し、携帯端末３に送信し（Ｓ１１３）、携帯端末３は通話相手に応答して運転者画像を送信する（Ｓ１１４）。運転者は、マイクロホン３３とスピーカ３２を用いて、携帯端末３での通話動作を開始する（Ｓ１１５）。

通話中には、音声認識部３４により運転者の発声を解析し（Ｓ１１６）、通話終了の指示（例えば「オフ」の音声）があるかどうかを判定する（Ｓ１１７）。
通話終了の指示があると（Ｓ１１７でＹｅｓ）、ＨＵＤ画面９内の着信画面を元のサイズに戻し（Ｓ１１８）、携帯端末３に終了コマンドを送信する（Ｓ１１９）。そして、ＨＵＤ画面９内の着信画面を消去して（Ｓ１２０）、通話処理を終了する。

このように実施例１によれば、携帯端末３の通話機能をＨＵＤシステム１にてハンズフリーで安全に実行することが可能になる。その際、ＨＵＤ画面９には携帯端末３の通話相手の顔画像３ｐが表示されるので、運転者は、通話相手が誰であるかを即座に視認することができる。また、音声認識部３４は、運転者の音声を解析して、どのような操作指示であるかを判断するので、使い勝手が向上できる。

実施例２では、画像の受信機能について説明する。例えば、車両が交通渋滞もしくは事故現場近くを走行するとき、ＳＮＳ（Social Networking Service）の投稿画像などをＨＵＤ画面９に表示する機能である。この機能は実施例１の通話機能に付加されるものであるが、独立した機能としても実行可能である。

図５Ａは、携帯端末３の画面で、ＳＮＳ情報の表示例を示す。例えば車両の走行ルート上に事故現場などが存在するとき、携帯端末３は外部の端末から投稿されたＳＮＳ画像や道路の渋滞状況などを受信し、携帯端末３の画面に表示することができる。この例では、ＳＮＳ画面（各種ロゴマーク）３ｓが表示されている。

図５Ｂは、ＨＵＤ画面９の表示例で、携帯端末のＳＮＳ画面３ｓを表示した状態を示す。携帯端末３のＳＮＳ画面３ｓはＨＵＤ装置１０に転送され、ＨＵＤ画面９では、運転支援情報２０ａの一部の領域にＳＮＳ画面３ｓが重畳して表示される。ただし、この場合もＨＵＤ画面９内の画像表示率が規定値以下となるように、運転支援情報２０ａの中で優先順位の低いコンテンツは消去するか、アイコン化して小さく表示する。この例では、破線枠２０ｂに示されていた道路標識（８０ｋｍの制限速度）を消去している。

運転者は、ＨＵＤ画面内のＳＮＳ画面を確認し、音声により指示を行う。運転者が、「デリート」などの用語を発声すると、マイクロホン３３と音声認識部３４により表示不要と判断し、ＨＵＤ画面９からＳＮＳ画面３ｓを消去する。運転者が、「ネクスト」などの用語を発声すると、類似のＳＮＳ投稿画像などに切り替えて表示する。運転者が「フィニッシュ」などの用語を発声すると、ＳＮＳ投稿画像の表示を終了する。

実施例２によれば、車両が交通渋滞もしくは事故現場近くを走行するとき、これに関連するＳＮＳの投稿画像などがＨＵＤ画面９に表示されるので、運転者はハンズフリーで、走行ルート上の有益な情報を効率良く取得することができる。

なお、実施例１，２において、携帯端末との通信指示のため運転者の発声する用語（「イエス」、「ノー」、「デリート」など）は一例であり、ユーザが自由に設定登録できることは言うまでもない。

実施例３では、ＨＵＤ装置１０に対し複数の携帯端末３が接続されているとき、どの端末が音声を出力しているかを識別する方法について説明する。あるいは、ＨＵＤ装置１０に接続されている機器（例えばナビゲーションユニット２４）と、車内に持ち込まれた携帯端末３のいずれが音声を出力しているかを識別する方法について説明する。複数の端末のスピーカが兼用されている場合はもちろんであるが、スピーカを個別に備える場合であっても、どの端末からの音声かを識別することで、使い勝手が向上する。この機能は実施例１の通話機能に付加されて用いられる。

図６Ａは、複数のスピーカ（または音源）を区別する音声アイコンの例を示す図である。例えば、１台の携帯端末３とナビゲーションユニット２４が接続されているとき、符号４１は携帯端末３のスピーカを、符号４２はナビゲーションユニット２４のスピーカを示す音声アイコンである。両者の音声アイコンは形状を異ならせているが、さらに音声アイコンの色を異ならせることで容易に区別することができる。

図６Ｂは、ＨＵＤ画面９の表示例で、複数の音声アイコンを表示した状態を示す。ＨＵＤ画面には、運転支援情報２０ａとともに、図６Ａで示した複数のスピーカの音声アイコン４１、４２が並べて表示されている。

運転中に携帯端末３が音声を発した時、あるいはナビゲーションユニット２４が音声を発した時は、ＨＵＤ装置１０の表示制御部１３はいずれの端末から音声が出力されているかを判断する。そして、対応するスピーカの音声アイコンを点滅、あるいはハイライト表示させる。この例では、左側の音声アイコン４１が点滅し、携帯端末３が音声を出力していることを表示している。これより運転者は、どの端末が音声を出力しているかを容易に判別することができる。

実施例３によれば、音声を出力している端末を容易に識別できることで、安全運転にも寄与するものとなる。例えば、安全運転を行う上で、携帯端末３の音声に比べナビゲーションユニット２４の運転案内情報の重要度が高い場合、運転者は運転案内情報をより注意して聞こうとするので聞き漏らす恐れは少なくなる。

以上述べたように各実施例によれば、車両に持ち込んだ携帯端末の画面をＨＵＤ装置の画面に表示することで、運転者は、安全運転を損なわずに携帯端末での通信操作を容易に行うことができる。

１：ヘッドアップディスプレイシステム（ＨＵＤシステム）、
２：車両、
３：携帯端末、
３ｂ：携帯端末のアイコン、
３ｓ：ＳＮＳ画面、
４：ウィンドシールド、
５：運転者、
９：ＨＵＤ画面（虚像）、
１０：ヘッドアップディスプレイ装置（ＨＵＤ装置）、
１１：グラフィック生成部、
１２：信号処理部
１３：表示制御部、
１４：映像表示部、
２０：車両情報、
２０ａ：グラフィック画像（運転支援情報）、
３１：通信部、
３２：スピーカ、
３３：マイクロホン
３４：音声認識部、
３５：車内カメラ、
４１，４２：音声アイコン。

Claims

携帯端末と接続して通信を行うヘッドアップディスプレイシステムであって、
車両に搭載し、運転者から見て前記車両の前方に映像を表示するヘッドアップディスプレイ装置（以下、ＨＵＤ装置）と、
前記携帯端末と前記ＨＵＤ装置を接続し通信するための通信部と、
前記運転者に対して音声を出力するスピーカと、
前記運転者の音声を集音するマイクロホンと、
前記マイクロホンで集音した音声を解析する音声認識部と、
前記運転者の顔を撮影する車内カメラと、を備え、
前記ＨＵＤ装置には、前記携帯端末と前記スピーカ、前記マイクロホン、前記車内カメラの間で伝送する音声信号、画像信号の信号処理を行う信号処理部と、前記ＨＵＤ装置の表示画面での映像の表示を制御する表示制御部と、を有し、
前記運転者は、前記スピーカと前記マイクロホンを用いて前記携帯端末での通話動作を行うことが可能であり、
前記携帯端末に着信があったとき、該携帯端末の着信画面を前記ＨＵＤ装置の表示画面に表示するとともに、前記スピーカから着信音を出力し、
前記運転者の発する音声を前記音声認識部で解析した結果に基づいて、前記携帯端末の通話動作を開始あるいは終了し、
前記表示制御部は、
前記携帯端末の通話動作が開始されると、前記ＨＵＤ装置の表示画面の所定の位置に表示されていた前記携帯端末の画面をアイコン化し、表示画面の下方に移動させて表示するとともに、
前記携帯端末の通話動作が終了したときは、前記アイコン化された画面を前記携帯端末の画面の表示に戻し、所定の時間後に消去させることを特徴とするヘッドアップディスプレイシステム。
携帯端末と接続して通信を行うヘッドアップディスプレイシステムであって、
車両に搭載し、運転者から見て前記車両の前方に映像を表示するヘッドアップディスプレイ装置（以下、ＨＵＤ装置）と、
前記携帯端末と前記ＨＵＤ装置を接続し通信するための通信部と、
前記運転者に対して音声を出力するスピーカと、
前記運転者の音声を集音するマイクロホンと、
前記マイクロホンで集音した音声を解析する音声認識部と、
前記運転者の顔を撮影する車内カメラと、を備え、
前記ＨＵＤ装置には、前記携帯端末と前記スピーカ、前記マイクロホン、前記車内カメラの間で伝送する音声信号、画像信号の信号処理を行う信号処理部と、前記ＨＵＤ装置の表示画面での映像の表示を制御する表示制御部と、を有し、
前記運転者は、前記スピーカと前記マイクロホンを用いて前記携帯端末での通話動作を行うことが可能であり、
前記携帯端末に着信があったとき、該携帯端末の着信画面を前記ＨＵＤ装置の表示画面に表示するとともに、前記スピーカから着信音を出力し、
前記運転者の発する音声を前記音声認識部で解析した結果に基づいて、前記携帯端末の通話動作を開始あるいは終了し、
前記信号処理部は、前記車両が交通渋滞もしくは事故現場に近い道路を走行中に、前記携帯端末が外部の端末から投稿された画像を受信すると、
前記表示制御部は、前記ＨＵＤ装置の表示画面に受信した画像を重畳して表示するとともに、表示画面内の画像表示率が規定値以下となるように、他の表示画像を消去して優先的に表示することを特徴とするヘッドアップディスプレイシステム。
請求項１記載のヘッドアップディスプレイシステムにおいて、
前記表示制御部は、前記携帯端末の画面をアイコン化するとき、
表示画面内の画像表示率が規定値以下となるように、小面積のアイコンで表示することを特徴とするヘッドアップディスプレイシステム。
請求項１または請求項２記載のヘッドアップディスプレイシステムにおいて、
前記音声認識部は、前記携帯端末の通話動作を開始あるいは終了するための用語を予め登録し、該登録された用語と照合することで前記運転者の指示内容を判断することを特徴とするヘッドアップディスプレイシステム。
請求項１または請求項２記載のヘッドアップディスプレイシステムにおいて、
前記信号処理部は、
前記携帯端末の通話動作が開始されると、前記車内カメラで撮影された運転者の顔画像を、前記携帯端末を通じて通話相手に送信することを特徴とするヘッドアップディスプレイシステム。
請求項１または請求項２記載のヘッドアップディスプレイシステムにおいて、
前記ＨＵＤ装置に複数の携帯端末が接続されている場合、または前記ＨＵＤ装置の備える別のスピーカが存在するとき、
前記表示制御部は、前記ＨＵＤ装置の表示画面に複数の音声アイコンを表示し、音声が出力されている端末に対応する音声アイコンを点滅させて表示することを特徴とするヘッドアップディスプレイシステム。