JP2021038978A - 重畳画像表示装置及びコンピュータプログラム - Google Patents

重畳画像表示装置及びコンピュータプログラム Download PDF

Info

Publication number
JP2021038978A
JP2021038978A JP2019159728A JP2019159728A JP2021038978A JP 2021038978 A JP2021038978 A JP 2021038978A JP 2019159728 A JP2019159728 A JP 2019159728A JP 2019159728 A JP2019159728 A JP 2019159728A JP 2021038978 A JP2021038978 A JP 2021038978A
Authority
JP
Japan
Prior art keywords
guide
vehicle
guide object
superimposed
shadow
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019159728A
Other languages
English (en)
Inventor
広之 三宅
Hiroyuki Miyake
広之 三宅
賢二 渡邊
Kenji Watanabe
賢二 渡邊
鋭典 竹内
Toshinori Takeuchi
鋭典 竹内
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aisin AW Co Ltd
Original Assignee
Aisin AW Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aisin AW Co Ltd filed Critical Aisin AW Co Ltd
Priority to JP2019159728A priority Critical patent/JP2021038978A/ja
Publication of JP2021038978A publication Critical patent/JP2021038978A/ja
Pending legal-status Critical Current

Links

Images

Abstract

【課題】車両周辺の風景に重畳して複数種類の案内オブジェクトを表示する場合であっても、視認性を低下させることなく案内オブジェクトに対応する影を表示することを可能にした重畳画像表示装置及びコンピュータプログラムを提供する。【解決手段】車両の進行方向前方に案内対象となる案内対象地点がある場合に、案内対象地点に対する案内を行う為の案内オブジェクトを表示する一方で、重畳される地面からの位置が異なる複数種類の案内オブジェクトを同時に表示する場合に、最も地面に近い位置に重畳される種類の案内オブジェクトを対象として、該案内オブジェクトに対応する影を表示するように構成する。【選択図】図3

Description

本発明は、車両の走行支援を行う重畳画像表示装置及びコンピュータプログラムに関する。
従来より、車両の乗員に対して経路案内や障害物の警告等の車両の走行支援を行う為の各種情報を提供する情報提供手段として、様々な手段が用いられている。例えば、車両に設置された液晶ディスプレイによる表示や、スピーカから出力する音声等である。そして、近年、このような情報提供手段の一つとして、乗員の周辺環境(風景、実景)に重畳する画像を表示することによって、情報の提供を行う装置がある。例えば、ヘッドアップディスプレイ、ウインドウシールドディスプレイの他、液晶ディスプレイに表示した車両周辺の撮像画像に重畳して画像を表示する方法等が該当する。
ここで、上記周辺環境に重畳する画像を表示することによって車両の乗員に案内を行う場合には、画像が重畳する位置を乗員に把握させることが重要である。例えば、障害物や案内分岐点に対する案内を行う場合には、該障害物や案内分岐点の位置に画像を重畳させることによって、画像を視認した乗員は画像の重畳する位置に障害物や案内分岐点があることを認識することが可能となる。そこで、例えば特開2018−136698号公報には、ヘッドアップディスプレイを用いて車両周辺の風景に重畳する虚像を生成する場合において、太陽の位置から太陽光によって虚像に生じる影についても推定し、影を考慮した虚像の生成を行い、虚像までの距離感をより明確にする技術について開示されている。
特開2018−136698号公報(第7−10頁、図4)
ここで、上記特許文献1に記載の技術のように、周辺環境に重畳する画像(以下、重畳画像という)に対して影の情報を付加することとすると、複数の重畳画像を同時に表示する場合には、複数の重畳画像毎に影が表示されることとなる。その結果、一方の重畳画像の影が他方の重畳画像上に表示されて他方の重畳画像が視認し難くなる場合がある。
また、各重畳画像の影同士が互いに重複することによって重畳画像と影との対応関係を把握することが難しくなり、重畳画像の距離感を明確にするという効果が失われる。更に、多数の影が表示されることによって視認性も低下する問題もあった。
本発明は前記従来における問題点を解消するためになされたものであり、車両周辺の風景に重畳して複数種類の案内オブジェクトを表示する場合であっても、視認性を低下させることなく案内オブジェクトに対応する影を表示することが可能となり、各案内オブジェクトが重畳する位置を明確に乗員に認識させることを可能にした重畳画像表示装置及びコンピュータプログラムを提供することを目的とする。
前記目的を達成するため本発明に係る重畳画像表示装置は、車両に搭載され、前記車両の乗員へ情報を案内する案内オブジェクトを、前記車両周辺の風景に重畳して視認させる重畳画像表示装置であって、重畳される地面からの位置が異なる複数種類の案内オブジェクトの内、案内内容に応じて前記案内オブジェクトを表示するオブジェクト表示手段と、複数種類の前記案内オブジェクトを同時に表示する場合に、最も地面に近い位置に重畳される種類の案内オブジェクトのみを対象として、該案内オブジェクトに対応する影を表示する影表示手段と、を有する。
尚、「風景」とは、実際に車両から視認される風景(実景)に加えて、風景を撮像した画像、風景を再現した画像等も含む。
また、「影」には、案内オブジェクトによって他(例えば地面等)に生じる影と、案内オブジェクト自身に生じる影(即ち陰影)の少なくとも一方を含む。
また、「複数種類の案内オブジェクトを同時に表示する」とは、表示を開始するタイミングや終了するタイミングが同じである必要は無く、複数種類の案内オブジェクトが同時に表示される期間が存在することを意味する。
また、本発明に係るコンピュータプログラムは、車両の走行支援を行うプログラムである。具体的には、車両に搭載され、前記車両の乗員へ情報を案内する案内オブジェクトを、前記車両周辺の風景に重畳して視認させる重畳画像表示装置を、重畳される地面からの位置が異なる複数種類の案内オブジェクトの内、案内内容に応じて一又は複数種類の前記案内オブジェクトを表示するオブジェクト表示手段と、複数種類の前記案内オブジェクトを同時に表示する場合に、最も地面に近い位置に重畳される種類の案内オブジェクトのみを対象として、該案内オブジェクトに対応する影を表示する影表示手段と、して機能させる。
前記構成を有する本発明に係る重畳画像表示装置及びコンピュータプログラムによれば、複数種類の案内オブジェクトを同時に表示する場合には、最も地面に近い位置に重畳される種類の案内オブジェクトのみを対象として、該案内オブジェクトに対応する影を表示するので、上方に位置する案内オブジェクトの影が下方に位置する案内オブジェクト上に表示されて、下方の案内オブジェクトが視認し難くなる事象を防止できる。また、各種類の案内オブジェクトの影同士が互いに重複することがなくなり、少なくとも最も地面に近い位置にある案内オブジェクトについては重畳する位置を明確に乗員に認識させることが可能となる。更に、表示される影の数を抑えることによって視認性の低下も防止できる。
第1実施形態に係るナビゲーション装置を示したブロック図である。 第1実施形態に係る走行支援処理プログラムのフローチャートである。 液晶ディスプレイに表示される走行案内画面の一例を示した図である。 案内オブジェクト表示位置決定処理のサブ処理プログラムのフローチャートである。 車両の走行に伴う表示対象とする案内オブジェクトの変位を示した図である。 案内オブジェクトの配置例を示した図である。 案内オブジェクト及び光源の配置例を示した図である。 3次元空間に配置された案内オブジェクトを視認した視認画像の一例を示した図である。 案内オブジェクト生成処理のサブ処理プログラムのフローチャートである。 車両の進行方向に対する案内分岐点の退出方向を説明した図である。 第2の案内オブジェクトのベースとなる矢印の画像を示した図である。 第2の案内オブジェクトに表示する文字列の幅を拡張する例を示した図である。 第2実施形態に係る重畳画像表示装置の概略構成図である。 第2実施形態に係る重畳画像表示装置における案内オブジェクトの表示例を示した図である。
以下、本発明に係る重畳画像表示装置をナビゲーション装置に具体化した第1実施形態及び第2実施形態について図面を参照しつつ詳細に説明する。
[第1実施形態]
先ず、第1実施形態に係るナビゲーション装置1の概略構成について図1を用いて説明する。図1は第1実施形態に係るナビゲーション装置1を示したブロック図である。
図1に示すように第1実施形態に係るナビゲーション装置1は、ナビゲーション装置1が搭載された車両の現在位置を検出する現在位置検出部11と、各種のデータが記録されたデータ記録部12と、入力された情報に基づいて、各種の演算処理を行うナビゲーションECU13と、ユーザからの操作を受け付ける操作部14と、ユーザに対して進行方向前方を撮像した実景画像を表示する液晶ディスプレイ15と、経路案内に関する音声ガイダンスを出力するスピーカ16と、記憶媒体であるDVDを読み取るDVDドライブ17と、プローブセンタやVICS(登録商標:Vehicle Information and Communication System)センタ等の情報センタとの間で通信を行う通信モジュール18と、を有する。また、ナビゲーション装置1はCAN等の車載ネットワークを介して、ナビゲーション装置1の搭載された車両に対して設置されたフロントカメラ19や各種センサが接続されている。
以下に、ナビゲーション装置1が有する各構成要素について順に説明する。
現在位置検出部11は、GPS21、車速センサ22、ステアリングセンサ23、ジャイロセンサ24等からなり、現在の車両の位置、方位、車両の走行速度、現在時刻等を検出することが可能となっている。ここで、特に車速センサ22は、車両の移動距離や車速を検出する為のセンサであり、車両の駆動輪の回転に応じてパルスを発生させ、パルス信号をナビゲーションECU13に出力する。そして、ナビゲーションECU13は発生するパルスを計数することにより駆動輪の回転速度や移動距離を算出する。尚、上記4種類のセンサをナビゲーション装置1が全て備える必要はなく、これらの内の1又は複数種類のセンサのみをナビゲーション装置1が備える構成としても良い。
また、データ記録部12は、外部記憶装置及び記録媒体としてのハードディスク(図示せず)と、ハードディスクに記録された地図情報DB31や所定のプログラム等を読み出すとともにハードディスクに所定のデータを書き込む為のドライバである記録ヘッド(図示せず)とを備えている。尚、データ記録部12をハードディスクの代わりにフラッシュメモリやメモリーカードやCDやDVD等の光ディスクにより構成しても良い。また、地図情報DB31は外部のサーバに格納させ、ナビゲーション装置1が通信により取得する構成としても良い。
ここで、地図情報DB31は、例えば、道路(リンク)に関するリンクデータ32、ノード点に関するノードデータ33、分岐点に関する分岐点データ34、施設等の地点に関する地点データ、地図を表示するための地図表示データ、経路を探索するための探索データ、地点を検索するための検索データ等が記憶された記憶手段である。
また、リンクデータ32としては、道路を構成する各リンクに関してリンクの属する道路の幅員、勾(こう)配、カント、バンク、路面の状態、道路の車線数、車線数の減少する箇所、幅員の狭くなる箇所、踏切り等を表すデータが、コーナに関して、曲率半径、交差点、T字路、コーナの入口及び出口等を表すデータが、道路属性に関して、降坂路、登坂路等を表すデータが、道路種別に関して、高速道路と一般道(国道、県道、細街路等)を表すデータがそれぞれ記録される。
また、ノードデータ33としては、実際の道路の分岐点(交差点、T字路等も含む)や各道路に曲率半径等に応じて所定の距離毎に設定されたノード点の座標(位置)、ノードが交差点に対応するノードであるか等を表すノード属性、ノードに接続するリンクのリンク番号のリストである接続リンク番号リスト、ノードにリンクを介して隣接するノードのノード番号のリストである隣接ノード番号リスト、各ノード点の高さ(高度)等に関するデータ等が記録される。
また、分岐点データ34としては、分岐点の交差点名称、分岐点を形成するノードを特定する該当ノード情報、分岐点に接続されるリンクを特定する接続リンク情報、分岐点に接続されるリンクに対応する方面名称、分岐点の形状を特定する情報等が記憶される。また、分岐点での右左折案内を行う場合に目印となり得る構造物についても記憶される。
一方、ナビゲーションECU(エレクトロニック・コントロール・ユニット)13は、ナビゲーション装置1の全体の制御を行う電子制御ユニットであり、演算装置及び制御装置としてのCPU41、並びにCPU41が各種の演算処理を行うにあたってワーキングメモリとして使用されるとともに、経路が探索されたときの経路データ等が記憶されるRAM42、制御用のプログラムのほか、後述の走行支援処理プログラム(図2)等が記録されたROM43、ROM43から読み出したプログラムを記憶するフラッシュメモリ44等の内部記憶装置を備えている。尚、ナビゲーションECU13は、処理アルゴリズムとしての各種手段を有する。例えば、オブジェクト表示手段は、重畳される地面からの位置が異なる複数種類の案内オブジェクトの内、案内内容に応じて案内オブジェクトを表示する。影表示手段は、複数種類の案内オブジェクトを同時に表示する場合に、最も地面に近い位置に重畳される種類の案内オブジェクトのみを対象として、該案内オブジェクトに対応する影を表示する。
操作部14は、走行開始地点としての出発地及び走行終了地点としての目的地を入力する際等に操作され、各種のキー、ボタン等の複数の操作スイッチ(図示せず)を有する。そして、ナビゲーションECU13は、各スイッチの押下等により出力されるスイッチ信号に基づき、対応する各種の動作を実行すべく制御を行う。尚、操作部14は液晶ディスプレイ15の前面に設けたタッチパネルを有する構成としても良い。また、マイクと音声認識装置を有する構成としても良い。
また、液晶ディスプレイ15には、道路を含む地図画像、交通情報、操作案内、操作メニュー、キーの案内、出発地から目的地までの案内経路、案内経路に沿った案内情報、ニュース、天気予報、時刻、メール、テレビ番組等が表示される。また、特に第1実施形態では、通常の走行時において液晶ディスプレイ15にはフロントカメラ19で撮像した撮像画像、即ち現時点の車両周辺(特に車両前方)の風景(実景画像)を表示し、更に必要に応じて風景に対して案内オブジェクトを重畳させて表示する。
ここで、風景に重畳して表示される案内オブジェクトとしては、車両に関する情報や乗員の運転の支援の為に用いられる各種情報がある。例えば乗員に対して警告対象となる対象物(他車両、歩行者、案内標識)に対する警告、ナビゲーション装置1で設定された案内経路や案内経路に基づく案内情報(右左折方向を示す矢印、案内分岐点の目印を示すアイコン、案内分岐点までの距離等)、路面に表示する警告(追突注意、制限速度等)、車両が走行する車線の区画線、現在車速、シフト位置、エネルギ残量、広告画像、施設情報、案内標識、地図画像、交通情報、ニュース、天気予報、時刻、接続されたスマートフォンの画面等がある。尚、以下に説明する第1実施形態では案内オブジェクトは、車両の進行方向前方にある案内分岐点における案内を行う為の案内情報とし、より具体的には案内経路に沿った案内分岐点の退出方向を示す矢印等とする。
また、スピーカ16は、ナビゲーションECU13からの指示に基づいて案内経路に沿った走行を案内する音声ガイダンスや、交通情報の案内を出力する。
また、DVDドライブ17は、DVDやCD等の記録媒体に記録されたデータを読み取り可能なドライブである。そして、読み取ったデータに基づいて音楽や映像の再生、地図情報DB31の更新等が行われる。尚、DVDドライブ17に替えてメモリーカードを読み書きする為のカードスロットを設けても良い。
また、通信モジュール18は、交通情報センタ、例えば、VICSセンタやプローブセンタ等から送信された渋滞情報、規制情報、交通事故情報等の各情報から成る交通情報を受信する為の通信装置であり、例えば携帯電話機やDCMが該当する。
また、フロントカメラ19は、例えばCCD等の固体撮像素子を用いたカメラを有する撮像装置であり、光軸方向を車両の進行方向前方に向けて設置される。そして、フロントカメラ19により撮像された撮像画像は、前述したように車両周辺(特に車両前方)の風景(実景画像)として液晶ディスプレイ15に対して表示される。
続いて、前記構成を有するナビゲーション装置1においてナビゲーションECU13が実行する走行支援処理プログラムについて図2に基づき説明する。図2は第1実施形態に係る走行支援処理プログラムのフローチャートである。ここで、走行支援処理プログラムは車両のACC電源(accessory power supply)がONされた後に実行され、液晶ディスプレイ15に表示された車両周辺の風景に重畳した案内オブジェクトを視認させることによって、車両の走行支援を行うプログラムである。尚、以下の図2、図4及び図9にフローチャートで示されるプログラムは、ナビゲーション装置1が備えているRAM42やROM43に記憶されており、CPU41により実行される。
以下の説明では案内オブジェクトを用いた車両の走行支援として、ナビゲーション装置1で設定された案内経路に沿った車両の走行案内を行う例について説明する。また、表示対象となる案内オブジェクトは、車両の進行方向前方にある案内分岐点における案内を行う為の案内情報とし、特に案内分岐点の退出方向と交差点名称を示す矢印及び案内分岐点の目印を示すアイコンを案内オブジェクトとして表示する場合の処理を例に挙げて説明する。但し、ナビゲーション装置1では案内オブジェクトを用いて上記走行支援以外の案内や情報提供を行うことも可能である。また、表示対象となる案内オブジェクトは、上記矢印やアイコン以外の情報とすることも可能である。例えば、案内オブジェクトとして乗員に対して警告対象となる対象物(他車両、歩行者、案内標識)に対する警告、路面に表示する警告(追突注意、制限速度等)、車両が走行する車線の区画線、現在車速、シフト位置、エネルギ残量、広告画像、施設情報、案内標識、地図画像、交通情報、ニュース、天気予報、時刻、接続されたスマートフォンの画面等を表示することも可能である。
先ず、走行支援処理プログラムでは、ステップ(以下、Sと略記する)1においてCPU41は、車両の現在位置を現在位置検出部11の検出結果や地図情報に基づいて特定する。尚、車両の現在位置を特定する際には、車両の現在位置を地図情報にマッチングさせるマップマッチング処理についても行う。その後、ナビゲーション装置1で設定されている案内経路を読み出し、特定された車両の現在位置から案内経路に沿った次の案内分岐点までの距離を算出する。尚、案内分岐点とは、ナビゲーション装置1に設定されている案内経路に従ってナビゲーション装置1が走行の案内を行う際に、右左折指示等の案内を行う対象となる分岐点(交差点)である。
次に、S2においてCPU41は、前記S1で算出された次の案内分岐点までの距離が、所定の案内開始距離以下か否かを判定する。尚、案内開始距離は車両が走行する道路の道路種別によって決定され、例えば高速道路は1km、一般道は高速道路よりも短い300mとする。
そして、前記S1で算出された次の案内分岐点までの距離が案内開始距離以下であると判定された場合(S2:YES)には、S3へと移行する。それに対して、前記S1で算出された次の案内分岐点までの距離が案内開始距離以下でないと判定された場合(S2:NO)には、S1へと戻る。
S3においてCPU41は、案内オブジェクトによって案内対象とする地点、即ち案内オブジェクトを重畳(配置)させるべき地点(以下、案内点という)の座標を取得する。尚、第1実施形態では案内オブジェクトを用いて案内分岐点の右左折案内を行うので、案内点としては案内分岐点が該当し、従って案内点の座標は案内分岐点の座標Xに相当する。また、特に目印を用いた案内分岐点の右左折案内を行う場合には、目印に対しても案内オブジェクトを重畳させるので案内分岐点周辺にある目印(施設、構造物など)についても案内点に該当し、案内点の座標には案内分岐点周辺にある目印の座標Yについても含む。尚、案内分岐点の座標Xや案内分岐点周辺にある目印の座標Yはナビゲーション装置1が有する地図情報から特定することとするが、フロントカメラ19で撮像した画像に対して画像認識処理を行うことにより特定しても良い。
次に、S4においてCPU41は、後述の案内オブジェクト表示位置決定処理(図4)を行う。案内オブジェクト表示位置決定処理は、車両の現在位置や前記S3で取得された案内点の座標に基づいて、液晶ディスプレイ15に対して表示する案内オブジェクトの形状及び案内オブジェクトを表示する位置(範囲)を具体的に決定する処理である。尚、前記S4で決定される案内オブジェクトの形状及び案内オブジェクトを表示する位置は、例えば風景内の案内点に案内オブジェクトを重畳して乗員に視認させる為の条件となる。但し、後述のように車両の現在位置や案内オブジェクトの種類によっては風景内の案内点以外に案内オブジェクトを重畳して視認させる場合もある。
続いて、S5においてCPU41は、液晶ディスプレイ15に対して制御信号を送信し、液晶ディスプレイ15に対して前記S4で決定された形状の案内オブジェクトの画像を、前記S4で決定された位置(範囲)に対して表示する。尚、液晶ディスプレイ15には予めフロントカメラ19で撮像した撮像画像、即ち現時点の車両周辺(特に車両前方)の風景(実景画像)が表示されている。その結果、車両の乗員に風景に重畳された案内オブジェクトを視認させることが可能となる。
図3は前記S5において液晶ディスプレイ15に表示される走行案内画面51の一例を示した図である。図3に示すように液晶ディスプレイ15には、フロントカメラ19により撮像された現時点の車両前方の風景52が表示される。そして、車両前方の風景52に重畳して案内オブジェクトの画像53〜55が表示される。
ここで、第1実施形態では案内に用いられる案内オブジェクトとして複数種類の案内オブジェクトが存在し、案内の内容や現在の状況に応じて選択された一又は複数種類の案内オブジェクトが表示される。また、複数種類の案内オブジェクトが同時に表示対象となる場合がある。例えば図3に示す例では、案内分岐点の退出方向を示す3つの矢印からなる第1の案内オブジェクトの画像53と、案内分岐点の退出方向及び交差点名称を示す矢印からなる第2の案内オブジェクトの画像54と、案内分岐点の目印を示すアイコンからなる第3の案内オブジェクトの画像55とが同時に表示される。尚、各案内オブジェクトの画像53〜55については、表示を開始するタイミングや表示を終了するタイミングについてはそれぞれ異なるタイミングとしても良い。また、案内オブジェクトの画像53〜55は、風景52内にある案内点(即ち案内分岐点や案内分岐点の目印となる施設)に重畳して表示される。更に、特に第1の案内オブジェクトの画像53については仮想的に設定された光源によって下方の路面に生じる影の画像56についても表示される。
また、第1の案内オブジェクトの影の画像56については、影を重畳する対象となるエリアの明るさに応じた色相又は明度で表示するのが望ましい。具体的には、先ずフロントカメラ19で撮像した画像に対して画像処理を行ったり、照度センサを用いることによって影を重畳する対象となるエリアの明るさを取得する。そして、例えば晴天時の昼間のように影を重畳する対象となるエリアが明るい状況にある場合には、影をより周囲とはっきり識別できる色相と明度で表示する。一方で、曇りや夜間などの影を重畳する対象となるエリアが暗い状況にある場合には、影を周囲と識別可能な程度の色相と明度で表示する。また、夜間などの影が生じ得ない状況では影を表示しないようにしても良い。尚、案内オブジェクトの影の詳細については後述する。
従って、走行案内画面51を車両の乗員が視認した場合に、右左折対象となる案内分岐点の位置や、案内交差点における退出方向を正確に把握できる。特に第1の案内オブジェクトの矢印については影の画像56についても表示することによって、第1案内オブジェクトまでの距離、即ち案内分岐点までの距離が把握しやすくなる。
また、案内オブジェクトとしては上述した車両の案内分岐点の退出方向や交差点名称を示す矢印、案内分岐点の目印のアイコン以外に、案内交差点までの距離を示す画像についても風景に重畳して表示するようにしても良い。案内交差点までの距離を示す画像を重畳する位置は、例えば車両の前方直近とし、車両から案内分岐点までの距離が所定距離区間内(例えば300mから150m)にある間において表示する。
その後、S6においてCPU41は、前記S1と同様に車両の現在位置から案内経路に沿った次の案内分岐点までの距離を算出し、算出された次の案内分岐点までの距離が、所定の案内終了距離以下か否かを判定する。尚、案内終了距離は車両が走行する道路の道路種別によって決定され、例えば高速道路は30m、一般道は高速道路よりも短い10mとする。
そして、次の案内分岐点までの距離が案内終了距離以下であると判定された場合(S6:YES)には、S7へと移行する。それに対して、次の案内分岐点までの距離が案内終了距離以下でないと判定された場合(S6:NO)にはS4へと戻り、案内オブジェクトの表示を継続して行う。
続いて、S7においてCPU41は、液晶ディスプレイ15に対して制御信号を送信し、液晶ディスプレイ15に対して表示されている案内オブジェクトの画像(影の画像も含む)の透過率を案内分岐点までの距離に応じで段階的に上昇させる。具体的には、車両が案内分岐点に到達するタイミングで透過率が100%となるように透過率を上昇させる。尚、案内オブジェクトの画像の背後に隠れている風景についても車両の乗員が把握できるように、案内オブジェクトの画像は表示開始時点において透過率が0%ではなく例えば20%に設定されている。従って、案内オブジェクトの画像は、車両から案内分岐点までの距離が案内終了距離以下となるまでは透過率が20%で表示され、その後は案内分岐点に近づくにつれて20%→30%→40%→・・・と段階的に透過率が上昇し、最終的に車両が案内分岐点に到達するタイミングで透過率が100%となる。
その後、S8においてCPU41は、車両が案内分岐点を通過したか否かを判定する。例えば現在位置検出部11で検出された車両の現在位置と地図情報に基づいて判定される。
そして、車両が案内分岐点を通過したと判定された場合(S8:YES)には、液晶ディスプレイ15に対して制御信号を送信し、液晶ディスプレイ15に表示されていた案内オブジェクトを非表示とする(S9)。尚、フロントカメラ19で撮像した撮像画像、即ち現時点の車両周辺(特に車両前方)の風景(実景画像)については継続して表示される。但し、風景の画像についても非表示とし、液晶ディスプレイ15の表示画面を地図画像の表示などに切り替えても良い。
一方、車両が案内分岐点を通過していないと判定された場合(S8:NO)にはS4へと戻り、案内オブジェクトの表示を継続して行う。
次に、前記S4において実行される案内オブジェクト表示位置決定処理のサブ処理について図4に基づき説明する。図4は案内オブジェクト表示位置決定処理のサブ処理プログラムのフローチャートである。
先ず、S11においてCPU41は、表示対象とする案内オブジェクトの種類を決定する。ここで、第1実施形態では案内に用いられる案内オブジェクトとして複数種類の案内オブジェクトが存在し、案内の内容や現在の状況に応じて選択された一又は複数種類の案内オブジェクトが表示される。以下の説明では下記の(1)〜(3)の3種類の案内オブジェクトから表示対象とする案内オブジェクトを決定する例について説明する。但し、下記の(1)〜(3)以外の案内オブジェクト(例えば案内分岐点までの距離)を表示対象に含めることも可能である。
(1)『第1の案内オブジェクト』・・・案内分岐点の退出方向を示す3つの矢印
(2)『第2の案内オブジェクト』・・・案内分岐点の退出方向及び交差点名称を示す矢印
(3)『第3の案内オブジェクト』・・・案内分岐点の目印を示すアイコン
そして、前記S11でCPU41は、車両の現在位置から案内分岐点までの距離と、案内分岐点に案内の目印となる施設や構造物が存在するか否かに基づいて、表示対象とする案内オブジェクトを決定する。尚、案内分岐点に案内の目印となる施設や構造物が存在するか否かを特定する情報は、地図情報の分岐点データ34に含まれている。以下に車両が一般道を走行する場合における決定方法の一例について図5を用いて説明する。
(A)案内分岐点の手前側150m以内に他の分岐点が無い場合
案内分岐点までの距離が300m以下であって且つ150m以下にない場合には、『第2の案内オブジェクト』のみを表示対象とする。
案内分岐点までの距離が150m以下である場合には、『第1の案内オブジェクト』と『第2の案内オブジェクト』を表示対象とする。更に、案内分岐点において案内の目印となる施設や構造物が存在する場合には『第3の案内オブジェクト』についても表示対象とする。
(B)案内分岐点の手前側150m以内に他の分岐点がある場合
案内分岐点までの距離が300m以下であって且つ他の分岐点に到達する前には、『第2の案内オブジェクト』のみを表示対象とする。
他の分岐点に到達した後は、『第1の案内オブジェクト』と『第2の案内オブジェクト』を表示対象とする。更に、案内分岐点において案内の目印となる施設や構造物が存在する場合には『第3の案内オブジェクト』についても表示対象とする。
次に、S12においてCPU41は、前記S11で表示対象に決定された各案内オブジェクトを対象として、“案内オブジェクトを風景に対して重畳する位置”を設定する。例えば『第1の案内オブジェクト』及び『第2の案内オブジェクト』については、“案内オブジェクトを風景に対して重畳する位置”を、案内点である案内分岐点(その周辺も含む)に対して案内オブジェクトの少なくとも一部が重畳して視認される位置とする。但し、『第1の案内オブジェクト』については、車両から案内分岐点まで距離が離れた状態では、乗員に車両との相対位置が固定された位置に設定しても良い。具体的には車両の現在位置に対して所定距離前方(例えば10m前方)の位置を案内オブジェクトの重畳位置としても良い。
一方、『第3の案内オブジェクト』については、“案内オブジェクトを風景に対して重畳する位置”を、案内点である案内分岐点の周辺にある目印(その周辺も含む)に対して案内オブジェクトの少なくとも一部が重畳して視認される位置とする。
続いて、S13においてCPU41は、車両の現在位置周辺(特に車両進行方向の前方)に対応した3次元空間を生成する。尚、3次元空間には、道路以外に、建築物、道路標識などについてもモデリングしても良いし、道路のみをモデリングしても良い。或いは道路についてもモデリングしない地面のみがある単なる空白の3次元空間としても良い。また、3次元空間は予め3次元地図情報として地図情報DB31に格納しておき、前記S13では地図情報DB31から該当する自車位置周辺の3次元地図情報を読み出しても良い。また、フロントカメラ19で撮像した画像に基づいて3次元空間を生成しても良い。例えばフロントカメラ19で撮像した撮像画像に対して点群マッチングを行うことによって、道路や道路周辺にある構造物を検出し、3次元空間を生成することが可能である。
また、前記S13でCPU41は、現在位置検出部11で検出されたパラメータに基づいて、生成された3次元空間における自車両の現在位置及び方位についても特定する。特に、車両に設置されたフロントカメラ19の位置を自車両の現在位置とし、フロントカメラ19の光軸方向を自車両の方位とする。尚、フロントカメラ19の位置は車両の乗員の位置、フロントカメラ19の光軸方向は車両の乗員の視線方向にも相当する。
次に、S14においてCPU41は、後述の案内オブジェクト生成処理(図9)を行う。案内オブジェクト生成処理は、前記S11で決定された液晶ディスプレイ15に表示対象となる種類の案内オブジェクトを生成する処理である。また、案内オブジェクトは2次元ポリゴンとし、基本的に厚みは存在しないこととする。但し、厚みを持たせた3次元ポリゴンとしても良い。例えば、『第1の案内オブジェクト』は車両の進行方向前方にある案内分岐点の退出方向を示す矢印とし、特に図6に示すように2等辺三角形状を有する3つの矢印61〜63を生成する。また、『第2の案内オブジェクト』は車両の進行方向前方にある案内分岐点の退出方向及び交差点名称を示す矢印とし、特に図6に示すように内部に交差点名称の描画された一の矢印64を生成する。また、『第3の案内オブジェクト』は車両の進行方向前方にある案内分岐点の目印を示すアイコンとし、特に図6に示すように内部に目印のジャンルを示すマークが表示された一の目印アイコン65を生成する。
続いて、S15においてCPU41は、前記S14で生成された案内オブジェクトを、前記S13で生成された3次元空間に対して配置する。尚、3次元空間に対して案内オブジェクトを配置する位置は、前記S12において設定された“風景に対して案内オブジェクトを重畳する位置”に基づいて決定される。
以下に、前記S11において液晶ディスプレイ15に表示対象となる種類の案内オブジェクトとして『第1の案内オブジェクト』と『第2の案内オブジェクト』と『第3の案内オブジェクト』の3種類の案内オブジェクトが設定されている場合を例に挙げて前記S15の処理について説明する。ここで、図6は一例として一般道の案内分岐点60を斜め左方向に退出する案内経路が設定されている場合における各案内オブジェクトの配置例を示した図である。
先ず『第1の案内オブジェクト』については、図6に示すように車両66の進行方向に沿って等間隔に3つの矢印61〜63が配列される。特に、3つの矢印61〜63像の内、最も進行方向側にある矢印63の左側端部(右方向の矢印である場合には右側端部)が案内分岐点の座標Xと一致(水平方向に関して一致)する位置とする。尚、案内分岐点の座標Xはナビゲーション装置1が有する地図情報から特定することとするが、フロントカメラ19で撮像した画像に対して画像認識処理を行うことにより特定しても良い。その場合には、分岐点の退出方向の道路との接続点を案内分岐点の座標Xとする。また、3つの矢印61〜63の配置間隔は適宜変更可能であるが例えば5m間隔とする。また、3つの矢印61〜63は進行方向に対して平行に配列されるのではなく、案内分岐点に近い位置にある矢印程、退出方向側に位置するように配列される。但し、進行方向に対して平行に配列しても良い。一方、垂直方向については図7に示すように矢印61〜63の下端が路面から所定距離(例えば1m)離れた位置に配置する。
一方『第2の案内オブジェクト』については図6に示すように車両66の案内分岐点60の退出方向に沿って一の矢印64が配置される。従って、図6に示すように案内分岐点60の退出方向が案内分岐点60への進入方向に対して垂直方向でない場合には、矢印64は車両66の進行方向に対して正面を向かずに傾斜して配置されることとなる。また、矢印64の内部には案内分岐点60の交差点名称に対応する文字列が描画されているので、交差点名称の文字列についても退出方向に沿って配列されることとなる。また、矢印64の先端部が案内分岐点の座標Xと一致(水平方向に関して一致)する位置に配置される。また、矢印64の長さは後述のように矢印の内部に描画される交差点名称の長さや退出方向の角度を考慮して決定される。一方、垂直方向については図7に示すように矢印64の下端が路面から所定距離(例えば5m)離れた位置に配置する。
また『第3の案内オブジェクト』については図6に示すように案内分岐点60の案内の目印となる施設や構造物の上方に目印アイコン65が配置される。即ち、『第3の案内オブジェクト』については『第1の案内オブジェクト』や『第2の案内オブジェクト』と異なり、路面上方ではなく施設や構造物の上方に配置される。特に、目印アイコン65の中心が案内分岐点に対応付けられた目印の座標Yと一致(水平方向に関して一致)する位置に配置される。尚、目印の座標Yはナビゲーション装置1が有する地図情報から特定することとするが、フロントカメラ19で撮像した画像に対して画像認識処理を行うことにより特定しても良い。一方、垂直方向については図7に示すように目印アイコン65の下端が地面から所定距離(例えば10m)離れた位置に配置する。
続いて、S16においてCPU41は、太陽を模した仮想の光源67を前記S13で生成された3次元空間に対して配置する。尚、3次元空間に対して光源67を配置する位置は、図7に示すように各案内オブジェクトの鉛直方向上方に対応する位置よりも車両66の現在位置に対して遠方側に配置する。但し、後述のように影を表示する対象となるのは最も地面に近い位置に配置された案内オブジェクトのみであるので、少なくとも影を表示する対象となる案内オブジェクトの鉛直方向上方に対応する位置よりも車両66の現在位置に対して遠方側に配置すればよい。尚、光源の垂直方向の位置については地面から十分に高い距離(例えば1km)或いは無限遠方(無限遠光源)に設定する。
次に、S17においてCPU41は、先ず案内オブジェクトが配置された3次元空間を、前記S13で特定された車両の位置(視点に相当する)から車両の進行方向に視認した画像(以下、視認画像という)を取得する。例えば、図8は図6に示す態様で車両並びに各案内オブジェクトが配置された場合に取得される視認画像69を示した図である。特に車両の位置はフロントカメラ19の位置とするので、取得された視認画像69は3次元空間に配置された各案内オブジェクトをフロントカメラ19の視点から車両の進行方向に視認した際に視認できる像となるが、車両の乗員の視界にも相当する。また、光源67によって生じた案内オブジェクトの影についても含まれる。尚、光源67については視認画像69から除かれる。
その後、CPU41は、視認画像69に含まれる各案内オブジェクトの形状及び案内オブジェクトの位置を、液晶ディスプレイ15により表示対象とする案内オブジェクトの形状及び案内オブジェクトの位置として記憶する。ここで、前記S17で記憶される案内オブジェクトの形状は、3次元空間に配置された案内オブジェクトを車両(より正確にはフロントカメラ19)の視点から視認した際に視認できる案内オブジェクトの形状である。また、前記S17で記憶される案内オブジェクトの位置は、3次元空間に配置された案内オブジェクトを車両(より正確にはフロントカメラ19)の視点から視認した際に視認できる案内オブジェクトの位置である。
続いて、S18においてCPU41は、前記S11で表示対象に決定された各案内オブジェクトが複数種類あるか否かを判定する。
そして、前記S11で表示対象に決定された各案内オブジェクトが複数種類あると判定された場合(S18:YES)には、S20へと移行する。それに対して、前記S11で表示対象に決定された各案内オブジェクトが一種類のみと判定された場合(S18:NO)には、S19へと移行する。
S19においてCPU41は、前記S16で3次元空間に配置された仮想の光源67の位置と、同じく3次元空間に配置された案内オブジェクトの位置及び形状に基づいて、光源67によって生じた案内オブジェクトの影の形状と位置を記憶する。影が形成されるのは基本的に路面上となるが、路面上に構造物がある場合にはそれらの構造物上に影が形成される場合もある。尚、前述したように光源67は、案内オブジェクトの鉛直方向上方に対応する位置よりも車両の現在位置に対して遠方側に配置する。従って、影の位置は案内オブジェクトの鉛直下方よりも僅かに車両側の位置に形成されることとなる。また、前記S19で影を記憶する対象となる案内オブジェクトは基本的に路面上方に位置する案内オブジェクトに限られる。即ち、第1実施形態では『第1の案内オブジェクト』と『第2の案内オブジェクト』のいずれかが表示対象となる場合に限られる。その後、S21へと移行する。
一方、S20においてCPU41は、前記S11で表示対象に決定された複数種類の案内オブジェクトについて、前記S15で3次元空間上に配置された位置を比較し、最も地面に近い位置に配置された種類の案内オブジェクトを特定する。例えば、『第1の案内オブジェクト』と『第2の案内オブジェクト』と『第3の案内オブジェクト』とが表示対象に設定されている場合には、最も地面に近い位置に配置された種類の案内オブジェクトは『第1の案内オブジェクト』となる。そして前記S16で3次元空間に配置された仮想の光源67の位置と、同じく3次元空間に配置された案内オブジェクトの位置及び形状に基づいて、光源67によって生じた各案内オブジェクトの影の内、最も地面に近い位置に配置された案内オブジェクトの影の形状と位置を記憶する。
例えば図8に示す視認画像69では、第1の案内オブジェクトである矢印61〜63に対応する影71〜73と、第2の案内オブジェクトである矢印64に対応する影74と、第3の案内オブジェクトである目印アイコン65に対応する影75とが生じている。従って、前記S20では第1の案内オブジェクトである矢印61〜63に対応する影71〜73の形状と位置を記憶することとなる。また、前記S20で影を記憶する対象となる案内オブジェクトは基本的に路面上方に位置する案内オブジェクトに限られる。即ち、第1実施形態では『第1の案内オブジェクト』と『第2の案内オブジェクト』のいずれかに対応する影に限られる。その後、S21へと移行する。
その後、S21においてCPU41は、前記S17で記憶された案内オブジェクトの形状及び案内オブジェクトの位置に基づいて、液晶ディスプレイ15において案内オブジェクトを表示する範囲を決定する。尚、案内オブジェクトの表示範囲は、前記S17で記憶される形状を有する案内オブジェクトが、3次元空間において配置された案内オブジェクトと同位置に表示される範囲となる。また、CPU41は前記S19又はS20で記憶された案内オブジェクトの影の形状及び位置に基づいて、液晶ディスプレイ15において案内オブジェクトの影を表する範囲についても同様に決定する。その後、S5へと移行し、前述したように液晶ディスプレイ15に対して制御信号を送信し、液晶ディスプレイ15に対して前記S18で記憶された形状の案内オブジェクト及び影の画像を、前記S21で決定された表示範囲に表示する。
その結果、車両の走行に伴って液晶ディスプレイ15に表示される走行案内画面51は図3のような画面となる。特に最も地面に近い位置にある第1の案内オブジェクトの影を示す画像56が表示されることによって、第1案内オブジェクトまでの距離、即ち案内分岐点までの距離が把握しやすくなる。一方で、第1の案内オブジェクトよりも上方にある第2の案内オブジェクトや第3の案内オブジェクトの影は表示されないので、上方に位置する案内オブジェクトの影が下方に位置する案内オブジェクト上に表示されて、下方の案内オブジェクトが視認し難くなる事象を防止できる。更に、表示される影の数を抑えることによって視認性の低下も防止できる。
次に、前記S14において実行される案内オブジェクト生成処理のサブ処理について図9に基づき説明する。図9は案内オブジェクト生成処理のサブ処理プログラムのフローチャートである。
先ず、S31においてCPU41は、前記S11で表示対象に決定された案内オブジェクトに『第1の案内オブジェクト』を含むか否かを判定する。尚、『第1の案内オブジェクト』は、前述したように案内分岐点の退出方向を示す案内オブジェクトであって、具体的には3つの矢印61〜63を有する。
そして、前記S11で表示対象に決定された案内オブジェクトに『第1の案内オブジェクト』を含むと判定された場合(S31:YES)には、S32へと移行する。それに対して、前記S11で表示対象に決定された案内オブジェクトに『第1の案内オブジェクト』を含まないと判定された場合(S31:NO)には、S33へと移行する。
S32においてCPU41は、液晶ディスプレイ15に表示する対象となる『第1の案内オブジェクト』を生成する。第1実施形態では、『第1の案内オブジェクト』は車両の進行方向前方にある案内分岐点の退出方向を示す矢印であり、特に図6〜図8に示すように2等辺三角形状を有する3つの矢印61〜63を生成する。尚、案内経路が進行方向前方にある案内交差点で右折する経路である場合には右方向を示す矢印となる。案内経路が進行方向前方にある案内交差点で左折する経路である場合には左方向を示す矢印となる。また、案内オブジェクトは2次元ポリゴンとし、基本的に厚みは存在しないこととする。但し、厚みを持たせた3次元ポリゴンとしても良い。また、前記S33で生成される『第1の案内オブジェクト』の形状は適宜変更可能であり、案内分岐点における退出方向を示すことができる形状であれば矢印以外の形状であっても良い。また、3つの矢印である必要もなく、1のみの矢印であっても良い。
続いて、S33においてCPU41は、前記S11で表示対象に決定された案内オブジェクトに『第2の案内オブジェクト』を含むか否かを判定する。尚、『第2の案内オブジェクト』は、前述したように案内分岐点の退出方向と交差点名称を示す案内オブジェクトであって、具体的には内部に文字列の記載された一の矢印64を有する。
そして、前記S11で表示対象に決定された案内オブジェクトに『第2の案内オブジェクト』を含むと判定された場合(S33:YES)には、S34へと移行する。それに対して、前記S11で表示対象に決定された案内オブジェクトに『第2の案内オブジェクト』を含まないと判定された場合(S33:NO)には、S38へと移行する。
S34においてCPU41は、案内対象となる案内分岐点の退出方向について算出する。具体的には、図10に示すように現在の車両の進行方向(案内分岐点への進入方向にも相当)に対する退出方向の角度θを算出する。
次に、S35においてCPU41は、案内オブジェクトに表示対象となる文字列(即ち案内分岐点の交差点名称)の文字数に基づいて、案内オブジェクトのベースとなる矢印の画像80を生成する。ここで、図11に示すように矢印の画像80は先端側に位置する鋭角三角形状をなす第1のパーツ81と、後端側に位置する直方体形状をなす第2のパーツ82との組み合わせからなる。また、基本的に第1のパーツ81の長さは固定であるが、第2のパーツ82の長さは案内オブジェクトに表示対象となる文字列の文字数、即ち案内分岐点の交差点名称の文字数に基づいて算出される。具体的には、第2のパーツ82の長さDは、以下の式(1)により算出する。
D=交差点名称の文字数×C+α・・・・(1)
(Cは案内オブジェクトの内部に表示される文字の標準の文字幅、αは固定の余白量)
続いて、S36においてCPU41は、前記S34で算出した退出方向の角度θに基づいて前記S35で生成した矢印の画像を補正する。具体的には、第2のパーツ82の長さDについて、案内分岐点における退出方向と現在の車両の進行方向に対して垂直に交差する交差方向との差異が大きくなる程、拡張するように補正する。具体的には以下の(1)〜(3)により補正を行う。
(1)前記S34で算出した退出方向の角度θが90°(僅かに異なる場合も含む)の場合、即ち案内分岐点における退出方向と現在の車両の進行方向とが垂直の場合には、第2のパーツ82の長さDについて変更しない。即ち前記S35で生成した矢印の画像を維持する。
(2)前記S34で算出した退出方向の角度θが0°≦θ<90°の場合、即ち案内分岐点における退出方向が斜め前方である場合には、第2のパーツ82の長さDについて、θが0°に近づくほど第2のパーツ82の長さDを長くして矢印の画像を補正する。例えば補正前の第2のパーツ82の長さDをD1、補正後の第2のパーツ82の長さDをD2とすると、以下の式(2)によりD2が算出される。
D2=D1/sinθ・・・・(2)
但し、D2には上限を設定し、例えばD1の2倍とする。
(3)前記S34で算出した退出方向の角度θが90°<θ≦180°の場合、即ち案内分岐点における退出方向が斜め後方(手前方向)である場合には、第2のパーツ82の長さDについて、θが180°に近づくほど第2のパーツ82の長さDを長くして矢印の画像を補正する。例えば補正前の第2のパーツ82の長さDをD1、補正後の第2のパーツ82の長さDをD2とすると、同じく上記の式(2)によりD2が算出される。
但し、D2には上限を設定し、例えばD1の2倍とする。
その後、S37においてCPU41は、前記S36で補正した後の矢印の画像80の内部に対して、表示対象となる文字列、即ち案内分岐点の交差点名称を描画する。また、交差点名称を描画する際には、矢印の画像80の文字表示領域の長さに対応した文字幅で描画する。ここで、図11に示すように矢印の画像80の文字表示領域は、左折矢印のように先端側に文字列の先頭が位置する場合には、第1のパーツ81と第2のパーツ82の接続点を起点とした第2のパーツ82の内部領域となる。一方、右折矢印のように矢印の後端側に文字列の先頭が位置する場合には、矢印の後端を起点とした第2のパーツ82の内部領域となる。また、文字表示領域の長さは前記S36で拡張した後の第2のパーツ82の長さDから固定の余白量αを減じた長さである。従って、図12に示すように例えば前記S36において第2のパーツ82の長さDを1.5倍に拡張した場合には、描画される文字列の文字幅も1.5倍になる。尚、前記S36において第2のパーツ82の長さDの拡張の上限は2倍としているので、文字幅の拡張についても2倍が上限となる。
その後、S38においてCPU41は、前記S37で文字列の描画された矢印の画像80を板ポリゴンに張り付けることによって、矢印ポリゴンを生成する。生成された矢印のポリゴンが『第2の案内オブジェクト』となる。尚、案内オブジェクトは2次元ポリゴンとし、基本的に厚みは存在しないこととする。但し、厚みを持たせた3次元ポリゴンとしても良い。
次に、S39においてCPU41は、前記S11で表示対象に決定された案内オブジェクトに『第3の案内オブジェクト』を含むか否かを判定する。尚、『第3の案内オブジェクト』は、前述したように案内分岐点の目印を示すアイコンであって、具体的には内部に目印のジャンルを示すマークが表示された一の目印アイコン65を有する。
そして、前記S11で表示対象に決定された案内オブジェクトに『第3の案内オブジェクト』を含むと判定された場合(S39:YES)には、S40へと移行する。それに対して、前記S11で表示対象に決定された案内オブジェクトに『第3の案内オブジェクト』を含まないと判定された場合(S39:NO)には、案内オブジェクト生成処理を終了してS15へと移行する。
S40においてCPU41は、液晶ディスプレイ15に表示する対象となる『第3の案内オブジェクト』を生成する。第1実施形態では、『第3の案内オブジェクト』は車両の進行方向前方にある案内分岐点の目印を示すアイコンであり、特に図6〜図8に示すように内部に目印のジャンルを示すマークが表示された一の目印アイコン65を生成する。また、案内オブジェクトは2次元ポリゴンとし、基本的に厚みは存在しないこととする。但し、厚みを持たせた3次元ポリゴンとしても良い。また、前記S40で生成される『第3の案内オブジェクト』の形状は適宜変更可能であり、案内分岐点における目印を示すことができる形状であればアイコン以外の形状であっても良い。
その後、S15へと移行し、上述した案内オブジェクト生成処理によって生成した案内オブジェクトを3次元空間内に配置する。そして、同じく3次元空間に配置された車両の現在位置である視点から視認できる案内オブジェクトの形状や位置を特定し(S17)、特定された位置や形状に基づいて案内オブジェクトの画像を表示する(S5)。ここで、『第2の案内オブジェクト』である矢印は、前述したように案内分岐点の退出方向に沿って配置されるので、案内分岐点の退出方向と現在の車両の進行方向に対して垂直に交差する交差方向との差異が大きくなる程、図12に示すように第2の案内オブジェクトの矢印の画像54は正面の向きから傾斜して表示されることとなる。そして、傾斜角度が大きくなる程、矢印内に表示される交差点名称の文字の形状が変更して文字幅も狭くなり、認識できなくなる問題がある。第1実施形態では、上述したように案内分岐点の退出方向と現在の車両の進行方向に対して垂直に交差する交差方向との差異が大きくなる程、矢印の内部に表示される文字列の文字幅を拡張する。その結果、第2の案内オブジェクトの矢印の画像54が正面の向きから傾斜したとしても、文字幅を拡張しない場合と比較して文字列の視認性が低下することを防止できる。
以上詳細に説明した通り、第1実施形態に係るナビゲーション装置1及びナビゲーション装置1で実行されるコンピュータプログラムによれば、車両の進行方向前方に案内対象となる案内対象地点がある場合に、案内対象地点に対する案内を行う為の案内オブジェクトを表示する(S5)一方で、重畳される地面からの位置が異なる複数種類の案内オブジェクトを同時に表示する場合に、最も地面に近い位置に重畳される種類の案内オブジェクトのみを対象として、該案内オブジェクトに対応する影を表示する(S5)ので、上方に位置する案内オブジェクトの影が下方に位置する案内オブジェクト上に表示されて、下方の案内オブジェクトが視認し難くなる事象を防止できる。また、各種類の案内オブジェクトの影同士が互いに重複することがなくなり、少なくとも最も地面に近い位置にある案内オブジェクトについては重畳する位置を明確に乗員に認識させることが可能となる。更に、表示される影の数を抑えることによって視認性の低下も防止できる。
[第2実施形態]
次に、第2実施形態に係る重畳画像表示装置について図13及び図14に基づいて説明する。尚、以下の説明において上記図1乃至図12の第1実施形態に係る重畳画像表示装置の構成と同一符号は、前記第1実施形態に係る重畳画像表示装置等の構成と同一あるいは相当部分を示すものである。
この第2実施形態に係る重畳画像表示装置の概略構成は、第1実施形態に係る重畳画像表示装置とほぼ同じ構成である。また、各種制御処理も第1実施形態に係る重畳画像表示装置とほぼ同じ制御処理である。
ただし、第1実施形態に係る重畳画像表示装置が、ナビゲーション装置1の液晶ディスプレイ15に対してフロントカメラ19で撮像した撮像画像を表示し、更に液晶ディスプレイ15に対して案内オブジェクトを表示することによって、車両周辺の風景に案内オブジェクトを重畳させて表示するのに対して、第2実施形態に係る重畳画像表示装置は車両周辺の風景に重畳する画像を表示する手段としてヘッドアップディスプレイシステムを用いる点で異なる。
以下に第2実施形態に係る重畳画像表示装置の概略構成について図13を用いて説明する。図13は第2実施形態に係る重畳画像表示装置101の概略構成図である。
図13に示すように重畳画像表示装置101は、車両102に搭載されたナビゲーション装置103と、同じく車両102に搭載されるとともにナビゲーション装置103と接続されたフロントディスプレイ104とを基本的に有する。尚、フロントディスプレイ104は車両102のフロントガラス105とともにヘッドアップディスプレイとして機能し、車両102の乗員106に対して様々な情報の提供を行う情報提供手段となる。
ここで、フロントディスプレイ104は、車両102のダッシュボード107内部に設置され、前面に設けられた画像表示面に対して画像を表示する機能を有する液晶ディスプレイである。バックライトとしては例えばCCFL(冷陰極管)や白色LEDが用いられる。尚、フロントディスプレイ104としては、液晶ディスプレイ以外に、有機ELディスプレイや液晶プロジェクタとスクリーンの組み合わせを用いても良い。
そして、フロントディスプレイ104は車両102のフロントガラス105とともにヘッドアップディスプレイとして機能し、フロントディスプレイ104から出力される画像を、運転席の前方のフロントガラス105に反射させて車両102の乗員106に視認させるように構成されている。尚、フロントディスプレイ104には、必要に応じて案内オブジェクトを表示する。尚、以下に説明する第2実施形態では案内オブジェクトは、第1実施形態と同様に車両の進行方向前方にある案内分岐点における案内を行う為の案内情報とし、より具体的には案内分岐点の退出方向を示す矢印等とする。
また、フロントガラス105を反射して乗員106がフロントディスプレイ104に表示された映像を視認した場合に、乗員106にはフロントガラス105の位置ではなく、フロントガラス105の先の遠方の位置にフロントディスプレイ104に表示された映像が虚像110として視認されるように構成される。また、虚像110は車両前方の周辺環境(風景、実景)に重畳して表示されることとなり、例えば車両前方に位置する任意の対象物(路面、建築物、警告対象となる物等)に重畳させて表示させることも可能である。
ここで、虚像110を生成する位置、より具体的には乗員106から虚像110までの距離(以下、結像距離という)Lについては、フロントディスプレイ104の位置によって決定される。例えば、フロントディスプレイ104において映像の表示された位置からフロントガラス105までの光路に沿った距離(光路長)によって結像距離Lが決定される。例えば結像距離Lが1.5mとなるように光路長が設定されている。
また、車両のフロントバンパの上方やルームミラーの裏側等にはフロントカメラ111が設置される。フロントカメラ111は、例えばCCD等の固体撮像素子を用いたカメラを有する撮像装置であり、光軸方向を車両の進行方向前方に向けて設置される。そして、フロントカメラ111により撮像された撮像画像に対して画像処理が行われることによって、フロントガラス越しに乗員106に視認される前方環境(即ち虚像110が重畳される環境)の状況等が検出される。尚、フロントカメラ111の代わりにミリ波レーダ等のセンサを用いても良い。
また、車両のインストルメントパネルの上面には車内カメラ112が設置される。車内カメラ112は、例えばCCD等の固体撮像素子を用いたカメラを有する撮像装置であり、光軸方向を運転席に向けて設置される。車内において一般的に乗員の顔が位置すると予想される範囲を検出範囲(車内カメラ112の撮像範囲)として設定し、運転席に座った乗員106の顔を撮像する。そして、車内カメラ112により撮像された撮像画像に対して画像処理が行われることによって、乗員106の目の位置(視線開始点)や視線方向を検出する。
そして、第2実施形態に係る重畳画像表示装置は、前述した走行支援処理プログラム(図2)のS5において、図14に示すようにフロントディスプレイ104に対して案内オブジェクトの画像120、121、122を表示する。その結果、図14に示すようにフロントディスプレイ104に表示された案内オブジェクトの画像120、121、122を車両の乗員が視認することによって、フロントガラス105越しの風景に重畳して案内オブジェクトの画像120の虚像123が視認される。同じくフロントガラス105越しの風景に重畳して案内オブジェクトの画像121の虚像124が視認される。また、フロントガラス105越しの風景に重畳して案内オブジェクトの画像122の虚像125が視認される。
更に、図14に示すようにフロントディスプレイ104に対して案内オブジェクトの影の画像126についても表示する。その結果、図14に示すようにフロントディスプレイ104に表示された案内オブジェクトの影の画像126を車両の乗員が視認することによって、フロントガラス105越しの風景に重畳して案内オブジェクトの影の画像126の虚像127が視認される。尚、影の画像126は黒色であると虚像が視認できないので、灰色にするのが望ましい。
それによって、第1実施形態に係る重畳画像表示装置と同様に、右左折対象となる案内分岐点の位置や、案分岐点における退出方向を正確に把握できる。尚、第2実施形態に係る重畳画像表示装置では、前記S4の案内オブジェクト表示位置決定処理において、フロントディスプレイ104に対して表示する案内オブジェクトの形状及び案内オブジェクトを表示する位置(範囲)を決定する。同じく、フロントディスプレイ104に対して表示する案内オブジェクトの影の形状及び位置(範囲)についても決定する。また、前記S13で3次元空間に特定する自車両の現在位置及び方位は、車両の乗員の位置及び車内カメラ112を用いて検出した乗員の視線方向とするのが望ましい。
尚、本発明は上記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の改良、変形が可能であることは勿論である。
例えば車両周辺の風景に重畳する画像を表示する手段として、第1実施形態では実景画像の表示された液晶ディスプレイ15を用い、第2実施形態ではヘッドアップディスプレイシステムを用いているが、フロントガラスに対して画像を表示するウインドウシールドディスプレイ(WSD)を用いても良い。WSDでは、フロントガラスをスクリーンとしてプロジェクタから映像を表示しても良いし、フロントガラスを透過液晶ディスプレイとしても良い。WSDによってフロントガラスに対して表示された画像は、車両周辺の風景に重畳する画像となる。
また、第1及び第2実施形態では、案内オブジェクトはナビゲーション装置で設定された案内経路に沿った車両の進行方向を示す矢印の画像としているが、他の画像としても良い。例えば、車両の乗員への警告対象となる対象物(例えば他車両、歩行者、案内標識)に対する警告画像、車両が走行する車線の区画線の画像などでも良い。
また、第1及び第2実施形態では、案内オブジェクトを用いて案内分岐点の案内を行っているが、案内オブジェクトにより案内対象とする地点は案内分岐点に限られることなく、例えば車線減少地点や合流区間等の車両の乗員に注意を促す他の地点としても良い。また、案内対象地点の種類によって表示する案内オブジェクトの内容を変更するのが望ましい。
また、第1及び第2実施形態では、光源によって案内オブジェクトに生じる影として、案内オブジェクトによって他(例えば地面等)に生じる影を表示しているが、案内オブジェクト自身に生じる影(即ち陰影)を表示しても良い。
また、第1及び第2実施形態では、第2の案内オブジェクトである矢印の内部に、文字列として案内分岐点の交差点名称を表示しているが、他の文字列を表示しても良い。例えば、退出方向に対応する方面名称や退出方向にある道路の道路名称を表示しても良い。
また、第1及び第2実施形態では、案内オブジェクトに含まれる文字列は、案内分岐点の退出方向に沿って配列された文字列としているが、文字列の配列方向は必ずしも案内分岐点の退出方向である必要はない。例えば、案内分岐点の進入方向であっても良い。また、案内オブジェクトを用いてカーブの走行案内を行う場合には、文字列をカーブの接線方向に配列しても良い。
また、第1及び第2実施形態では、案内オブジェクトを用いた走行支援は、高速道路の走行時と一般道の走行時の両方で行っているが、高速道路の走行時のみ或いは一般道の走行時のみで行うようにしても良い。
また、第1実施形態では、ナビゲーション装置1の液晶ディスプレイ15に対してフロントカメラ19で撮像した実景画像や案内オブジェクトを表示しているが、実景画像や案内オブジェクトを表示するディスプレイとしては車両内に配置されたディスプレイであれば、液晶ディスプレイ15以外のディスプレイであっても良い。
また、第2実施形態では、フロントディスプレイ104によって車両102のフロントガラス105の前方に虚像を生成する構成としているが、フロントガラス105以外のウィンドウの前方に虚像を生成する構成としても良い。また、フロントディスプレイ104により映像を反射させる対象はフロントガラス105自身ではなくフロントガラス105の周辺に設置されたバイザー(コンバイナー)であっても良い。
また、第1及び第2実施形態では、走行支援処理プログラム(図2)の処理をナビゲーション装置1のナビゲーションECU13が実行する構成としているが、実行主体は適宜変更することが可能である。例えば、液晶ディスプレイ15の制御部、車両制御ECU、その他の車載器が実行する構成としても良い。
また、本発明に係る重畳画像表示装置を具体化した実施例について上記に説明したが、重畳画像表示装置は以下の構成を有することも可能であり、その場合には以下の効果を奏する。
例えば、第1の構成は以下のとおりである。
車両に搭載され、前記車両の乗員へ情報を案内する案内オブジェクト(61〜65)を、前記車両周辺の風景に重畳して視認させる重畳画像表示装置(1)であって、重畳される地面からの位置が異なる複数種類の案内オブジェクトの内、案内内容に応じて前記案内オブジェクトを表示するオブジェクト表示手段(41)と、複数種類の前記案内オブジェクトを同時に表示する場合に、最も地面に近い位置に重畳される種類の案内オブジェクトのみを対象として、該案内オブジェクトに対応する影(56)を表示する影表示手段(41)と、を有する。
上記構成を有する重畳画像表示装置によれば、複数種類の案内オブジェクトを同時に表示する場合には、最も地面に近い位置に重畳される種類の案内オブジェクトのみを対象として、該案内オブジェクトに対応する影を表示するので、上方に位置する案内オブジェクトの影が下方に位置する案内オブジェクト上に表示されて、下方の案内オブジェクトが視認し難くなる事象を防止できる。また、各種類の案内オブジェクトの影同士が互いに重複することがなくなり、少なくとも最も地面に近い位置にある案内オブジェクトについては重畳する位置を明確に乗員に認識させることが可能となる。更に、表示される影の数を抑えることによって視認性の低下も防止できる。
また、第2の構成は以下のとおりである。
前記案内オブジェクト(61〜65)を重畳させるエリア周辺に対応した3次元空間内に表示対象となる前記案内オブジェクトを配置する案内オブジェクト配置手段(41)と、前記3次元空間内に光源(67)を配置する光源配置手段(41)と、を有し、前記影表示手段(41)は、前記3次元空間内に配置された前記案内オブジェクト及び前記光源に基づいて前記案内オブジェクトに対応する影を表示する。
上記構成を有する重畳画像表示装置によれば、3次元空間内に配置した仮想の光源に基づいて案内オブジェクトに生じる影の位置や形状を正確に特定することが可能となる。その結果、車両の乗員に違和感を与えることのない影を表示することが可能となる。
また、第3の構成は以下のとおりである。
現在の車両の位置に対応する前記3次元空間内の位置に視点を設定する視点設定手段(41)を有し、前記オブジェクト表示手段(41)は、前記3次元空間内に配置された前記案内オブジェクト(61〜65)を前記視点から視認される形状で表示し、前記影表示手段は、前記光源(67)によって生じた前記案内オブジェクトに対応する影を前記視点から視認される形状で表示する。
上記構成を有する重畳画像表示装置によれば、3次元空間内に設定した視点からの像に基づいて案内オブジェクトや影を表示することによって、案内オブジェクトや影を風景内の適切な位置に重畳させて乗員に視認させることが可能となる。また、仮想の光源に基づいて案内オブジェクトに生じる影の位置や形状を正確に特定することが可能となる。その結果、車両の乗員に違和感を与えることのない案内オブジェクトや影の表示が可能となる。
また、第4の構成は以下のとおりである。
前記光源配置手段(41)は、前記光源(67)を前記案内オブジェクト(61〜65)の鉛直方向上方に対応する位置よりも前記視点に対して遠方側に配置する。
上記構成を有する重畳画像表示装置によれば、影の位置が案内オブジェクトの鉛直下方よりも手前側に位置することとなるので、より乗員に違和感を与えない自然な影の位置とすることができ、鉛直下方に表示する場合よりも案内オブジェクトまでの距離を正確に把握し易くすることが可能となる。また、案内オブジェクトが厚み形状を有しないものであったとしても影を生じさせることが可能となる。
また、第5の構成は以下のとおりである。
前記影を重畳する対象となるエリアの明るさを取得する環境取得手段(41)を有し、前記影表示手段は、前記エリアの明るさに応じた色相又は明度で前記影を表示する。
上記構成を有する重畳画像表示装置によれば、影を重畳させる風景の明るさに対応した影を表示することが可能となる。その結果、乗員に違和感を与えない自然な影とすることができる。
また、第6の構成は以下のとおりである。
前記影表示手段(41)は、道路の路面上方の位置に重畳する複数種類の案内オブジェクト(61〜65)を同時に表示する場合に、最も路面に近い位置に重畳される種類の案内オブジェクトのみを対象として、案内オブジェクトの下方に該案内オブジェクトに対応する影を表示する。
上記構成を有する重畳画像表示装置によれば、路面上に影が生じる案内オブジェクトを対象として、案内オブジェクトによって生じる影を表示するので、車両の乗員から影を視認し易くすることが可能となる。
また、第7の構成は以下のとおりである。
前記案内オブジェクト(61〜65)は、案内分岐点(60)における車両の退出方向を示す矢印である。
上記構成を有する重畳画像表示装置によれば、特に案内分岐点における車両の退出方向の案内を複数種類の案内オブジェクトを同時に表示して行う場合において、特に最も地面に近い位置にある案内オブジェクトの影が表示されることによって、案内オブジェクトまでの距離、即ち案内分岐点までの距離が把握しやすくなる。
1 ナビゲーション装置
15 液晶ディスプレイ
19 フロントカメラ
41 CPU
42 RAM
43 ROM
51 走行案内画面
52 風景
53〜55 案内オブジェクトの画像
56 影の画像
60 案内分岐点
61〜64 矢印(案内オブジェクトの一例)
65 目印アイコン(案内オブジェクトの一例)
66 車両
67 光源
80 矢印画像
81 第1のパーツ
82 第2のパーツ

Claims (8)

  1. 車両に搭載され、前記車両の乗員へ情報を案内する案内オブジェクトを、前記車両周辺の風景に重畳して視認させる重畳画像表示装置であって、
    重畳される地面からの位置が異なる複数種類の案内オブジェクトの内、案内内容に応じて前記案内オブジェクトを表示するオブジェクト表示手段と、
    複数種類の前記案内オブジェクトを同時に表示する場合に、最も地面に近い位置に重畳される種類の案内オブジェクトのみを対象として、該案内オブジェクトに対応する影を表示する影表示手段と、を有する重畳画像表示装置。
  2. 前記案内オブジェクトを重畳させるエリア周辺に対応した3次元空間内に表示対象となる前記案内オブジェクトを配置する案内オブジェクト配置手段と、
    前記3次元空間内に光源を配置する光源配置手段と、を有し、
    前記影表示手段は、前記3次元空間内に配置された前記案内オブジェクト及び前記光源に基づいて前記案内オブジェクトに対応する影を表示する請求項1に記載の重畳画像表示装置。
  3. 現在の車両の位置に対応する前記3次元空間内の位置に視点を設定する視点設定手段を有し、
    前記オブジェクト表示手段は、前記3次元空間内に配置された前記案内オブジェクトを前記視点から視認される形状で表示し、
    前記影表示手段は、前記光源によって生じた前記案内オブジェクトに対応する影を前記視点から視認される形状で表示する請求項2に記載の重畳画像表示装置。
  4. 前記光源配置手段は、前記光源を前記案内オブジェクトの鉛直方向上方に対応する位置よりも前記視点に対して遠方側に配置する請求項3に記載の重畳画像表示装置。
  5. 前記影を重畳する対象となるエリアの明るさを取得する環境取得手段を有し、
    前記影表示手段は、前記エリアの明るさに応じた色相又は明度で前記影を表示する請求項1乃至請求項4のいずれかに記載の重畳画像表示装置。
  6. 前記影表示手段は、道路の路面上方の位置に重畳する複数種類の案内オブジェクトを同時に表示する場合に、最も路面に近い位置に重畳される種類の案内オブジェクトのみを対象として、案内オブジェクトの下方に該案内オブジェクトに対応する影を表示する請求項1乃至請求項5のいずれかに記載の重畳画像表示装置。
  7. 前記案内オブジェクトは、案内分岐点における車両の退出方向を示す矢印である請求項1乃至請求項6のいずれかに記載の重畳画像表示装置。
  8. 車両に搭載され、前記車両の乗員へ情報を案内する案内オブジェクトを、前記車両周辺の風景に重畳して視認させる重畳画像表示装置を、
    重畳される地面からの位置が異なる複数種類の案内オブジェクトの内、案内内容に応じて一又は複数種類の前記案内オブジェクトを表示するオブジェクト表示手段と、
    複数種類の前記案内オブジェクトを同時に表示する場合に、最も地面に近い位置に重畳される種類の案内オブジェクトのみを対象として、該案内オブジェクトに対応する影を表示する影表示手段と、して機能させる為のコンピュータプログラム。
JP2019159728A 2019-09-02 2019-09-02 重畳画像表示装置及びコンピュータプログラム Pending JP2021038978A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019159728A JP2021038978A (ja) 2019-09-02 2019-09-02 重畳画像表示装置及びコンピュータプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019159728A JP2021038978A (ja) 2019-09-02 2019-09-02 重畳画像表示装置及びコンピュータプログラム

Publications (1)

Publication Number Publication Date
JP2021038978A true JP2021038978A (ja) 2021-03-11

Family

ID=74848542

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019159728A Pending JP2021038978A (ja) 2019-09-02 2019-09-02 重畳画像表示装置及びコンピュータプログラム

Country Status (1)

Country Link
JP (1) JP2021038978A (ja)

Similar Documents

Publication Publication Date Title
WO2019097763A1 (ja) 重畳画像表示装置及びコンピュータプログラム
JP3375258B2 (ja) 地図表示方法及び装置並びにその装置を備えたナビゲーション装置
JP5346650B2 (ja) 情報表示装置
JP2021039085A (ja) 重畳画像表示装置、重畳画像描画方法及びコンピュータプログラム
JP6946963B2 (ja) 重畳画像表示装置及びコンピュータプログラム
JP2007257286A (ja) 車両用表示システム
US20230135641A1 (en) Superimposed image display device
JP2010236915A (ja) 情報表示装置
US11828613B2 (en) Superimposed-image display device
JP2018173399A (ja) 表示装置及びコンピュータプログラム
JP2017032436A (ja) 移動案内システム、移動案内方法及びコンピュータプログラム
JP7400356B2 (ja) 重畳画像表示装置及びコンピュータプログラム
JP2021038978A (ja) 重畳画像表示装置及びコンピュータプログラム
JP7302389B2 (ja) 重畳画像表示装置及びコンピュータプログラム
JP6939147B2 (ja) 走行情報案内装置及びコンピュータプログラム
JP2021081232A (ja) 重畳画像表示装置及びコンピュータプログラム
JP2022077198A (ja) 重畳画像表示装置
JP2021076415A (ja) 重畳画像表示装置及びコンピュータプログラム
JP7484132B2 (ja) 重畳画像表示装置及びコンピュータプログラム
JP2023008462A (ja) 重畳画像表示装置
JP2023064957A (ja) 重畳画像表示装置
JP2024033759A (ja) 重畳画像表示装置
JP2024018205A (ja) 重畳画像表示装置
JP2023044949A (ja) 重畳画像表示装置
JP2022110828A (ja) 重畳画像表示装置

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20210423