JP2019038372A - 画像表示装置 - Google Patents

画像表示装置 Download PDF

Info

Publication number
JP2019038372A
JP2019038372A JP2017161847A JP2017161847A JP2019038372A JP 2019038372 A JP2019038372 A JP 2019038372A JP 2017161847 A JP2017161847 A JP 2017161847A JP 2017161847 A JP2017161847 A JP 2017161847A JP 2019038372 A JP2019038372 A JP 2019038372A
Authority
JP
Japan
Prior art keywords
image
viewpoint
display
occupant
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017161847A
Other languages
English (en)
Other versions
JP7037896B2 (ja
Inventor
雅也 石井
Masaya Ishii
雅也 石井
秀倫 高木
Hidemichi Takagi
秀倫 高木
淳也 関
Junya Seki
淳也 関
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Subaru Corp
Original Assignee
Subaru Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Subaru Corp filed Critical Subaru Corp
Priority to JP2017161847A priority Critical patent/JP7037896B2/ja
Publication of JP2019038372A publication Critical patent/JP2019038372A/ja
Application granted granted Critical
Publication of JP7037896B2 publication Critical patent/JP7037896B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Instrument Panels (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

【課題】乗員の意図に応じた表示範囲の変更を直感的に行える画像表示装置を提供する。【解決手段】視認補助装置を、自車両の周囲を撮像する撮像装置10と、撮像装置によって撮像された画像を表示する画像表示装置50と、乗員の視点の位置を検出する視点検出装置30と、水平方向における一方側への視点の移動に応じて、画像表示装置に表示される画像を水平方向における他方側へパンさせる表示範囲変更手段40とを備える構成とする。【選択図】図5

Description

本発明は、自動車等の車両に設けられ自車両周囲の状況を表示する画像表示装置に関し、特に乗員の意図に応じた表示範囲の変更を直感的に行えるものに関する。
自動車等の車両において、手動運転時におけるドライバ等の乗員が自車両周囲の状況認識を容易に行えるようにして、監視負担の軽減等を図るため、カメラ等の撮像装置によって撮像された画像を乗員に提示する各種の視認補助装置が提案されている。
例えば、特許文献1には、自車両前方を赤外線カメラによって撮像した画像を、ヘッドアップディスプレイに表示する車両用表示装置において、ステアリング操作から車両がカーブを曲がることを判定した場合には、帯状の映像データのうち中央部から所定の画像ずらし量だけオフセットした映像データを抽出して表示させるものが記載されている。
特許文献2には、運転者が運転中に視線を向けた注視対象の画像を拡大表示する運転支援装置において、注視対象が拡大された拡大画像と、この拡大画像の外周全体に隣接する環状の画像であって、拡大画像から元の風景にかけて画像が連続的に繋がった状態でドライバに視認されるように画像の縮小処理が施された周囲縮小画像とからなる画像を生成し、重畳表示することが記載されている。
特許文献3には、車両用表示装置において、自車両前方の道路反射鏡の鏡像をカメラで撮影し、撮影対象の道路反射鏡が曲面鏡を採用している場合には平面鏡像に投影変換する画像処理を行い、この画像処理の施された画像をウィンドシールドの表示領域内に表示することが記載されている。
特許文献4には、自車両前方を赤外線カメラによって撮像した画像をヘッドアップディスプレイに表示する車両用表示装置において、映像の拡大率を車速に応じて段階的に変化させるとともに、表示ユニットが拡大された映像を示す表示光を、インストルメントパネルの開口部を通してフロントウインドシールドに向けて出射することにより、運転者が表示光により車両前方の映像を視認して拡大表示が行われているかを実感できるようにすることが記載されている。
特開2004−155307号公報 特開2009− 43003号公報 特開2005−178623号公報 特開2004−168105号公報
上述したような視認補助装置において、一画面に車両の運行中乗員が視認すべき全ての情報を表示することは困難であり、乗員の要望に応じて画像表示される範囲(視野)を変更可能とすることが望ましい。
しかし、表示範囲の変更は、乗員が車両を手動運転しながら行う場合もあり得るため、煩雑な操作を必要とするものでは視認補助装置の利便性が損なわれてしまう。
上述した問題に鑑み、本発明の課題は、乗員の意図に応じた表示範囲の変更を直感的に行える視認補助装置を提供することである。
本発明は、以下のような解決手段により、上述した課題を解決する。
請求項1に係る発明は、自車両の周囲を撮像する撮像装置と、前記撮像装置によって撮像された画像を表示する画像表示装置と、乗員の視点の位置を検出する視点検出装置と、水平方向における一方側への前記視点の移動に応じて、前記画像表示装置に表示される画像を水平方向における他方側へパンさせる表示範囲変更手段とを備えることを特徴とする視認補助装置である。
これによれば、乗員が視点を水平方向における一方側へ移動させることによって、画像を水平方向における他方側へパン(水平方向のフレーミング移動)させることができ、乗員の意図に応じた水平方向の表示範囲の変更を直感的に行うことができる。
このような動作は、人間が遮蔽物に遮られ視角となっている領域を視認しようとしたときに無意識に行う動作に近く、乗員は違和感なく表示範囲を変更することができる。
請求項2に係る発明は、前記表示範囲変更手段は、上下方向における一方側への前記視点の移動に応じて、表示される画像を上下方向における他方側へチルトさせることを特徴とする請求項1に記載の視認補助装置である。
これによれば、乗員が視点を上下方向における一方側へ移動させることによって、画像を上下方向における他方側へチルト(上下方向のフレーミング移動)させることができ、乗員の意図に応じた上下方向の表示範囲の変更を直感的に行うことができる。
請求項3に係る発明は、前記画像表示装置は、前記乗員の視点から見たときの少なくとも水平方向の表示倍率が肉眼により目視する視野に対して縮小して表示されることを特徴とする請求項1又は請求項2に記載の視認補助装置である。
これによれば、画像表示装置の表示倍率を、乗員が肉眼により目視する視野に対して縮小(画角を広角化)することによって、乗員に広範囲の前方視界情報を提供し、少ない視線移動により広範囲の状況を視認させることができる。
請求項4に係る発明は、前記画像表示装置は、前記乗員に対して左右方向にオフセットして配置され、前記表示範囲変更手段は、前記画像表示装置の左右方向における前記乗員側の端部近傍に設定される視点移動基準点から見たときの前記視点の移動角度に応じて前記画像のパン量を設定することを特徴とする請求項1から請求項3までのいずれか1項に記載の視認補助装置である。
これによれば、比較的少ない視点移動量により表示範囲を大きく変化させることができ、視点を過度に大きく動かすことなく広範囲の視界情報を得ることができる。
請求項5に係る発明は、前記画像表示装置は、前記乗員に対して左右方向にオフセットして配置され、前記表示範囲変更手段は、前記画像表示装置の左右方向における前記乗員側と反対側の端部近傍に設定される視点移動基準点から見たときの前記視点の移動角度に応じて前記画像のパン量を設定することを特徴とする請求項1から請求項3までのいずれか1項に記載の視認補助装置である。
これによれば、視点移動量に対する表示範囲の変化量を抑制することによって、表示範囲の変化が煩雑となって乗員に違和感を与えることを防止できる。
請求項6に係る発明は、自車両周辺のリスク対象物を検出するリスク対象物検出手段を備え、前記表示範囲変更手段は、前記リスク対象物が検出された場合に、前記視点の移動量に対する前記画像のパン量を増加させることを特徴とする請求項1から請求項5までのいずれか1項に記載の視認補助装置である。
これによれば、リスク対象物が存在する場合に視点移動量に対する画像のパン量が増加することによって、乗員に違和感を与え、乗員に注意を喚起し、安全性を向上することができる。
請求項7に係る発明は、自車両周辺のリスク対象物を検出するリスク対象物検出手段を備え、前記表示範囲変更手段は、前記リスク対象物が検出された場合に、前記視点の位置に関わらず前記リスク対象物が表示されるよう表示範囲を設定することを特徴とする請求項1から請求項5までのいずれか1項に記載の視認補助装置である。
これによれば、リスク対象物が存在する場合にはこれを常時表示することによって、乗員の注意を喚起するとともに、リスク対象物の視認性を高めて適切な対処を促すことができる。
以上説明したように、本発明によれば、乗員の意図に応じた表示範囲の変更を直感的に行える画像表示装置を提供することができる。
本発明を適用した視認補助装置の第1実施形態の構成を示すブロック図である。 第1実施形態の視認補助装置を有する車両におけるドライバ視界の一例を示す図である。 第1実施形態の視認補助装置の動作を示すフローチャートである。 第1実施形態の視認補助装置における視角検出を示す図である。 第1実施形態の視認補助装置を有する車両におけるドライバ視界の他の例を示す図であって、図2の状態から右側へ視点移動した状態を示す図である。 第1実施形態の視認補助装置を有する車両におけるドライバ視界の他の例を示す図であって、側方から接近する他車両と衝突するリスクが発生した際の状態を示す図である。 本発明を適用した視認補助装置の第2実施形態における視角検出を示す図である。
<第1実施形態>
以下、本発明を適用した視認補助装置の第1実施形態について説明する。
第1実施形態の視認補助装置は、例えば、乗用車等の自動車に設けられ、自車両前方等の画像を画像表示装置によりドライバ等の乗員に提示し、自車両周囲の状況視認を支援するものである。
図1は、第1実施形態の視認補助装置の構成を示すブロック図である。
第1実施形態の視認補助装置1は、ステレオカメラ装置10、環境認識ユニット20、乗員モニタリングユニット30、表示画像生成ユニット40、表示装置50等を有して構成されている。
ステレオカメラ装置10、環境認識ユニット20、乗員モニタリングユニット30、表示画像生成ユニット40、表示装置50は、例えば、CAN通信システム等の車載LANシステムを介して、あるいは、直接接続され、相互にデータの送受信が可能となっている。
また、各ユニットは、例えばCPU等の情報処理手段、RAMやROM等の記憶手段、入出力インターフェイス、及び、これらを接続するバス等を有して構成されている。
ステレオカメラ装置10は、カメラLH11、カメラRH12、ステレオ画像処理ユニット13等を有する。
カメラLH11、カメラRH12は、自車両前方を広角に撮像するレンズ群等の光学系や、CMOS等の固体撮像素子、及び、その駆動装置、画像処理エンジン、入出力インターフェイス等を有する撮像装置である。
カメラLH11、カメラRH12は、左右方向に離間した状態で、光学系の光軸を車両前方に向けて取り付けられている。
カメラLH11、カメラRH12は、例えば、ルーフ130の前端部から車室内に下方に突き出した状態で固定され、フロントガラス140越しに自車両前方の画像を撮像するようになっている。
カメラLH11、カメラRH12がそれぞれ撮像した画像に係るデータは、ステレオ画像処理ユニット13に逐次提供されるようになっている。
また、これらの画像データは、表示装置50に表示される画像を生成するため、ステレオ画像処理ユニット13を介して、表示画像生成ユニット40にも提供される。
例えば、第1実施形態のように、自車両の斜め左前方の状況を表示する場合(図2参照)には、カメラLH11が撮像した画像を利用して表示画像を生成することができる。
ステレオ画像処理ユニット13は、カメラLH11、カメラRH12から逐次伝達される画像データに、公知のステレオ画像処理を施し、自車両前方に存在する被写体を認識するとともに、認識された被写体の自車両に対する相対位置を、画像上の画素位置、及び、カメラLH11とカメラRH12との視差等を用いて検出する。
また、ステレオ画像処理ユニット13は、公知の画像処理、画像認識技術により、認識された被写体の種類、属性(例えば、他車両、自転車、歩行者、建造物、車線端白線等)を判別することが可能となっている。
環境認識ユニット20は、ステレオ画像処理ユニット13による自車両前方の物体検出結果等を利用して、自車両前方の環境を認識するものである。
環境認識ユニット20は、ステレオ画像処理ユニット13が認識した他車両、建築物等のうち、自車両に対する相対位置、相対速度などから自車両と衝突する可能性が高いリスク対象物を認識する。
環境認識ユニット20は、本発明にいうリスク対象物検出手段として機能する。
環境認識ユニット20は、リスク対象物の自車両に対する相対位置、相対速度(接近速度)などから、リスク対象物と自車両との衝突が不可避であると判定した場合(プリクラッシュ判定が成立した場合)には、そのリスク対象物に関する情報を、表示画像生成ユニット40に伝達する。
ここで、リスク対象物に関する情報として、例えば、リスク対象物の種類、自車両に対する相対位置及び相対速度等が挙げられる。
乗員モニタリングユニット30は、手動運転時におけるドライバとなる乗員を乗員撮影カメラ31によって撮像した画像を画像処理し、乗員の状態を検出するものである。
乗員撮影カメラ31は、例えば、車両のインストルメントパネル140等に設けられ、モニタ対象の乗員の顔面等を撮像する。
乗員撮影カメラ31は、例えば、コンビネーションメータ141(図2参照)に設けることができる。
乗員モニタリングユニット30は、乗員撮影カメラ31が撮像した画像データに所定の画像処理を施し、視点(眼部)の位置、視線方向、覚醒状態などを検出する。
乗員の視点位置に関する情報は、表示画像生成ユニット40に伝達される。
乗員モニタリングユニット30は、乗員撮影カメラ31と協働して本発明にいう視点検出装置として機能する。
表示画像生成ユニット40は、ステレオカメラ装置10から提供される画像データ、環境認識ユニット20によるリスク対象物に関する情報、及び、乗員モニタリングユニット30による乗員視点位置の検出結果を用いて、表示装置50により表示される表示画像のデータを生成するものである。
表示画像生成ユニット40は、ステレオカメラ装置10から提供される画像データのうち、表示装置50に表示される表示範囲、及び、表示位置を設定する機能を有する。
表示画像生成ユニット40は、乗員モニタリングユニット30により検出される乗員の視点移動に応じて、表示装置50に表示される画像のフレーミングを水平方向、上下方向にそれぞれ変更し、表示範囲(視野)を変更する機能を有する。
表示画像生成ユニット40は、本発明にいう表示範囲変更手段として機能する。
表示画像生成ユニット40の機能については、後により詳細に説明する。
表示装置50は、例えば自車両の左斜め前方の車外状況を撮像した画像をユーザ(乗員)に対して提示する画像表示装置である。
表示装置50は、表示画像生成ユニット40が生成した表示画像を表示するディスプレイ及びその駆動装置等を有する。
表示装置50として、例えば、非表示時には実質的に透明となり乗員が透視可能な透明LCDを用いることができる。
表示装置50の配置に関しては、後に詳しく説明する。
図2は、第1実施形態の視認補助装置を有する車両におけるドライバ視界の一例を示す図である。
図2に示すように、車両は、フロントガラス110、フロントドアガラス120、サイドミラー130、インストルメントパネル140、ステアリングホイール150、Aピラー160、ルーフ170、ルームミラー180等を有する。
フロントガラス110は、ドライバの前方側に配置されている。
フロントガラス110は、実質的に横長の矩形状に形成され、前方が凸となる方向に湾曲した2次曲面ガラスである。
フロントガラス110は、上端部が下端部に対して車両後方側となるように後傾して配置されている。
乗員の視点から見たときに、フロントガラス110における透明部分(周辺に設けられる図示しない黒セラミック部分等を除いた部分)は、乗員が肉眼により自車両前方を直接目視する際の視野となる。
フロントドアガラス120は、乗員の乗降に用いられる左右フロントドアの上部であって、ドライバの側方に設けられている。
フロントドアガラス120は、昇降式の本体部121、及び、本体部121の前部に設けられた固定式の三角窓部122を有する。
サイドミラー130は、ドライバが左右後方視界を確認するものである。
サイドミラー130は、左右フロントドアのアウタパネルから車幅方向外側に突出している。
乗員視界において、サイドミラー130は、例えば、フロントドアガラス120の本体部121の前端部近傍に見えるようになっている。
インストルメントパネル140は、車室内においてフロントガラス110の下方に設けられた内装部材である。
インストルメントパネル140は、各種計器類、表示装置、スイッチ類、空調装置、助手席エアバッグ装置、膝部保護エアバッグ装置等が収容される筐体としても機能する。
インストルメントパネル140は、コンビネーションメータ141、マルチファンクションディスプレイ142、ナビゲーション装置ディスプレイ143等が設けられる。
コンビネーションメータ141は、運転席の正面に設けられ、速度計、エンジン回転計、距離計などの各種計器類をユニット化したものである。
マルチファンクションディスプレイ142は、インストルメントパネル140の車幅方向中央部における上部に設けられた例えばLCD等の画像表示手段である。
ナビゲーション装置ディスプレイ143は、図示しないナビゲーション装置が地図等を表示するLCD等の画像表示手段である。
ナビゲーション装置ディスプレイ143は、インストルメントパネル140の車幅方向中央部における下部に設けられている。
ステアリングホイール150は、ドライバが手動運転時に操舵操作を入力する環状の操作部材である。
ステアリングホイール150は、ドライバの前方に実質的に正対して設けられる。
コンビネーションメータ141は、乗員視界において、ステアリングホイール150の上半部における内径側から目視可能となっている。
Aピラー160は、フロントガラス110の側端部及びフロントドアガラス120の前端部に沿って配置された柱状の車体構造部材である。
Aピラー160の車室内側の面部は、樹脂製のピラートリムによってカバーされている。
ルーフ170は、フロントガラス110の上端部から後方に伸びて形成されている。
ルーフ170の車室内側の面部は、樹脂製のルーフトリムによってカバーされている。
ルーフ170の車幅方向中央部における前端部には、カメラLH11、カメラRH12が収容されるステレオカメラ収容部171が設けられている。
ルームミラー180は、車室内に設けられた後方確認用のミラーである。
ルームミラー180は、図示しないステーを介してフロントガラス110の車幅方向中央部における上端部近傍に設けられている。
表示装置50のスクリーン部分は、例えば、左右方向における反ドライバ側(図2の場合には左側)のAピラー160近傍から、車幅方向中央側(フロントガラス110側)に張り出して設けられている。
表示装置50の一部は、乗員の視点から見たときに、フロントガラス110の手前側に重なった状態で配置されている。
次に、第1実施形態の視認補助装置の動作について説明する。
図3は、第1実施形態の視認補助装置の動作を示すフローチャートである。
以下、ステップ毎に順を追って説明する。
<ステップS01:前方画像データ取得>
表示画像生成ユニット40は、ステレオカメラ装置10のステレオ画像処理ユニット13から、カメラLH11、カメラRH12によって撮像された自車両前方の画像データを取得する。
その後、ステップS02に進む。
<ステップS02:乗員視点位置検出>
乗員モニタリングユニット30は、乗員撮影カメラ31が撮像した画像データに所定の画像処理を施して、乗員(手動運転時におけるドライバ)の視点位置(眼部の座標位置)を検出する。
例えば、左右の眼部の座標位置を検出し、その中間点を表示範囲設定に用いられる視点位置として用いることができる。
検出された視点位置に関する情報は、表示画像生成ユニット40に提供される。
その後、ステップS03に進む。
<ステップS03:リスク対象物有無判断>
環境認識ユニット20は、自車両の周辺でありかつ表示装置50により画像表示され得る範囲内に、自車両と衝突する可能性が高いリスク対象物が存在するか否かを判別する。
環境認識ユニット20による判別結果(リスク対象物の有無)に関する情報は、表示画像生成ユニット40に伝達される。
リスク対象物が存在する場合には、その自車両に対する相対位置、相対速度、種類等の情報も表示画像生成ユニット40に伝達される。
リスク対象物が存在する場合はステップS05に進み、存在しない場合はステップS04に進む。
<ステップS04:通常表示画像生成>
表示画像生成ユニット40は、通常時(リスク対象物非検出時)に表示装置50に表示される通常表示画像を生成する。
通常表示画像の表示倍率は、自車両の前方を肉眼により目視可能な視野に対して、同等あるいは縮小(広角化)する構成とすることができる。
このとき、表示画像生成ユニット40は、乗員の視点位置が通常運転時における位置に存在する場合には、画像上に設定される表示位置基準点R(図2参照)を乗員の視点から見たときの視線方向が、表示位置基準点Rに相当する箇所(画像上で表示位置基準点Rに表示される被写体)を乗員が肉眼により直接目視する際の視線方向と実質的に一致するよう表示画像の表示範囲、表示位置を設定する。
その後、ステップS06に進む。
<ステップS05:リスク対象物クローズアップ画像生成>
表示画像生成ユニット40は、ステレオカメラ装置10から提供される画像データから、リスク対象物が含まれる領域をトリミングすることによって、リスク対象物を拡大表示するリスク対象物クローズアップ画像を生成する。
このとき、リスク対象物クローズアップ画像がより強く乗員の注意を喚起するよう、例えば表示色を変化させたり、表示を点滅させるようにしてもよい。
また、リスク対象物が存在することを示すテキストメッセージ、絵記号を表示してもよい。さらに、このような表示と音声によるメッセージ、警告音等を併用してもよい。
リスク対象物クローズアップ画像においては、乗員の視点位置に関わらず、表示装置50にリスク対象物が常時表示される構成とすることができる。
その後、ステップS06に進む。
<ステップS06:表示装置診断>
表示画像生成ユニット40は、表示装置50が備える自己診断機能を用いて、表示装置50が正常に画像表示を行うことが可能な状態であるか判別する。
表示装置50が正常に画像表示を行うことが可能な場合はステップS07に進み、何らかの故障等によって正常に画像表示を行うことができない場合はステップS10に進む。
<ステップS07:画像表示実行>
表示画像生成ユニット40は、ステップS05又はステップS06において生成された画像を表示装置50により表示させ、その後ステップS08に進む。
<ステップS08:視点移動有無判断>
表示画像生成ユニット40は、乗員モニタリングユニット30による乗員の視点位置の検出結果に基づいて、乗員の視点位置の移動があったか否かを判別する。
乗員の視点位置に所定の閾値以上の変位が検出された場合にはステップS09に進み、その他の場合は一連の処理を終了する。
<ステップS09:表示範囲変更>
表示画像生成ユニット40は、ステップS08において検出された視点位置の変位に応じて、表示装置50に表示される画像の表示範囲を変更する。
図4は、第1実施形態の視認補助装置における視角検出を示す図である。
図4は車両を鉛直方向から見た状態を模式的に図示している。
乗員の視点位置がP1からP2へ、車幅方向に沿って右側へ変位した場合を例として説明する。
表示画像生成ユニット40は、表示装置50の表示領域における右側の端部に設定された視点移動基準点Oと、視点位置P1、P2をそれぞれ結んだ直線がなす角度である視角変化量θを算出する。
表示画像生成ユニット40は、視角変化量θに予め設定された係数を乗じて算出されたパン量だけ、表示装置50に表示される画像を、視点の移動方向とは反対に(この場合左側に)パン(水平方向のフレーミング移動)させる。
また、視点位置の上下方向変位に応じて、実質的に同様の手法により表示装置50に表示される画像をチルト(上下方向のフレーミング移動)させてもよい。
このようなパン、チルトは、カメラLH11、カメラRH12が十分広角な画角を有する場合には、ステレオカメラ装置10から提供される画像をトリミング処理する際のトリミング範囲を変更することによって行うことができる。
また、リスク対象物が検出されており、リスク対象物クローズアップ画像が表示されている場合は、視点位置が移動した場合であっても、リスク対象物が表示範囲外へ逸脱する表示範囲の変更は禁止され、リスク対象物が常時表示される。
その後、一連の処理を終了する。
<ステップS10:画像表示オフ>
表示画像生成ユニット40は、表示装置50による画像表示を中止し、表示装置50を実質的に透明であり乗員が透視可能な状態とする。
その後、一連の処理を終了する。
以下、第1実施形態の視認補助装置1における表示装置50の表示例について説明する。
図2は、リスク対象物が存在せず、かつ、乗員の視点位置が通常運転時の位置にある状態を示している。
リスク対象物が存在しないことから、表示装置50には、通常表示画像が表示されている。
図2に示す状態では、自車両が走行中の車線の左側に、自車両進行方向に沿って前方側から樹木A,B,C,D,Eが並んで立っている。
図2に示す状態においては、表示装置50に表示される画像の表示範囲及び表示倍率は、仮に表示装置50が存在しない場合に肉眼によって目視される視野と実質的に同様となっている。
この状態では、樹木A,B,Cまでは実質的に全体が視認可能であるが、樹木Dの下端部及び樹木Eの大部分は視認不可能となっている。
図5は、第1実施形態の視認補助装置を有する車両におけるドライバ視界の他の例を示す図であって、図2の状態から右側へ視点移動した状態を示す図である。
図2に示す状態から、乗員の視点位置が右側へ移動したことによって、表示画像50に表示される画像は、左側へパンしている。
図5に示す状態においては、表示装置50において、樹木D,Eの主要部分を視認可能となっているが、図2に示す状態で表示されていた樹木B,Cは、実質的に表示範囲外となっている。
第1実施形態においては、図2に示す状態から乗員がさらに左側の状態を目視したいと考えた場合に、視点位置を右方向に変位させることによって、表示装置50に表示される画像を左方向へパンさせて、表示範囲を左側にシフトさせ、容易に目視することができる。
図6は、第1実施形態の視認補助装置を有する車両におけるドライバ視界の他の例を示す図であって、側方から接近する他車両と衝突するリスクが発生した際の状態を示す図である。
図6に示す状態においては、自車両の左斜め前方に、自車両から見て右方向に向かって走行する他車両Vが存在する。
他車両Vは、図6に示す時点では、衝突が発生する可能性が高くなったことにより、リスク対象物として認識されている。
表示装置50には、この他車両Vを撮像した他車両像vが常時拡大表示されるリスク対象物クローズアップ画像が表示されている。
図6に示す状態では他車両Vは、肉眼で目視する視野においてはフロントガラス110の左側端部近傍に目視可能となっているが、表示装置50においては、他車両像vを肉眼で目視される他車両Vに対して拡大して表示するとともに、画面の表示色を異ならせ、危険であることを示すテキストメッセージも表示することによって、乗員の注意を喚起し、適切な回避動作を促すようになっている。
以上説明した第1実施形態によれば、以下の効果を得ることができる。
(1)乗員が視点を水平方向における一方側へ移動させることによって、画像を水平方向における他方側へパン(水平方向のフレーミング移動)させることができ、乗員の意図に応じた水平方向の表示範囲の変更を直感的に行うことができる。
このような動作は、車両周囲をガラス越しに肉眼で、あるいは、ミラー類を介して目視する際に視野を変更する動作と類似しており、視認補助装置をもたない既存の車両に慣れた乗員であっても容易に視野変更機能を利用することができる。
(2)乗員が視点を上下方向における一方側へ移動させることによって、画像を上下方向における他方側へチルト(上下方向のフレーミング移動)させることができ、乗員の意図に応じた上下方向の表示範囲の変更を直感的に行うことができる。
(3)視角変化量θの算出に用いる視点移動基準点Oを、表示装置50の表示領域の右側(左右方向における乗員側)に設けることによって、比較的少ない視点移動量により表示範囲を大きく変化させることができ、過度に視点を大きく動かすことなく広範囲の視界情報を得ることができる。
(4)リスク対象物が存在する場合には、通常表示画像からリスク対象物クローズアップ画像に切り換え、リスク対象物を常時表示することによって、乗員の注意を喚起するとともに、リスク対象物の視認性を高めて適切な対処を促すことができる。
<第2実施形態>
次に、本発明を適用した視認補助装置の第2実施形態について説明する。
以下説明する各実施形態において、上述した第1実施形態と実質的に共通する箇所については同じ符号を付して説明を省略し、主に相違点について説明する。
図7は、第2実施形態の視認補助装置における視覚検出を示す図である。
第2実施形態においては、視角変化量θを算出するために用いる視点移動基準点Oを、表示装置50の左右方向における乗員側とは反対側(左側)の端部に設けている。
以上説明した第2実施形態によれば、視点移動量に対する表示範囲の変化量を抑制することによって、表示範囲の変化が煩雑となって乗員に違和感を与えることを防止できる。
<第3実施形態>
次に、本発明を適用した視認補助装置の第3実施形態について説明する。
第3実施形態の視認補助装置においては、リスク対象物が検出された場合に、第1実施形態のように、リスク対象物を常時拡大表示するリスク対象物クローズアップ画像に切り替えることに代えて、通常表示画像における視点位置の移動量に対する画像のパン量を増加させる(ゲインを高める)ようにしている。
このとき、第1実施形態と同様に、表示色を変更したり警告メッセージを表示するようにしてもよい。
以上説明した第3実施形態によれば、リスク対象物が存在する場合に視点移動量に対する画像のパン量が増加することによって、乗員に違和感を与え、乗員に注意を喚起し、安全性を向上することができる。
(変形例)
本発明は、以上説明した実施形態に限定されることなく、種々の変形や変更が可能であって、それらも本発明の技術的範囲内である。
(1)車両及び視認補助装置の構成は、上述した実施形態に限定されることなく、適宜変更することが可能である。
例えば、表示装置が設けられる位置や、表示装置の個数は適宜変更することが可能である。
また、実施形態において単一のユニット等により実現している機能を複数のユニットに分割したり、実施形態において複数のユニットにより実現している機能を単一のユニットに集約してもよい。
(2)実施形態では、表示装置として透明LCDを用いているが、表示装置の具体的構成はこれに限定されず適宜変更することができる。例えば、透明ではない一般的なLCDや、有機ELディスプレイを用いてもよい。
また、ヘッドアップディスプレイ装置を用いて、フロントガラスや、フロントガラスとは別個に設けられる透明板に画像を投影してもよい。
(3)実施形態では、自車両前方の環境認識に用いられるステレオカメラ装置により撮像された画像を表示画像の生成に利用しているが、表示画像生成用として専用のカメラユニットを設けてもよい。
この場合、画像をパン、シフトさせる際に、広角撮像画像の一部範囲をトリミングするトリミング範囲を変更することに代えて、カメラ自体をアクチュエータによって駆動し、角度変化させる構成としてもよい。
1 視認補助装置 10 ステレオカメラ装置
11 カメラLH 12 カメラRH
13 ステレオ画像処理ユニット 20 環境認識ユニット
30 乗員モニタリングユニット 31 乗員撮影カメラ
40 表示画像生成ユニット 50 表示装置
110 フロントガラス 120 フロントドアガラス
121 本体部 122 三角窓部
130 サイドミラー 140 インストルメントパネル
141 コンビネーションメータ
142 マルチファンクションディスプレイ
143 ナビゲーション装置ディスプレイ
150 ステアリングホイール 160 Aピラー
170 ルーフ 171 ステレオカメラ収容部
180 ルームミラー
A,B,C 樹木 a,b,c 樹木像
R 表示位置基準点
V 他車両 v 他車両像
P1,P2 乗員の視点位置
O 視点移動基準点

Claims (7)

  1. 自車両の周囲を撮像する撮像装置と、
    前記撮像装置によって撮像された画像を表示する画像表示装置と、
    乗員の視点の位置を検出する視点検出装置と、
    水平方向における一方側への前記視点の移動に応じて、前記画像表示装置に表示される画像を水平方向における他方側へパンさせる表示範囲変更手段と
    を備えることを特徴とする視認補助装置。
  2. 前記表示範囲変更手段は、上下方向における一方側への前記視点の移動に応じて、表示される画像を上下方向における他方側へチルトさせること
    を特徴とする請求項1に記載の視認補助装置。
  3. 前記画像表示装置は、前記乗員の視点から見たときの少なくとも水平方向の表示倍率が肉眼により目視する視野に対して縮小して表示されること
    を特徴とする請求項1又は請求項2に記載の視認補助装置。
  4. 前記画像表示装置は、前記乗員に対して左右方向にオフセットして配置され、
    前記表示範囲変更手段は、前記画像表示装置の左右方向における前記乗員側の端部近傍に設定される視点移動基準点から見たときの前記視点の移動角度に応じて前記画像のパン量を設定すること
    を特徴とする請求項1から請求項3までのいずれか1項に記載の視認補助装置。
  5. 前記画像表示装置は、前記乗員に対して左右方向にオフセットして配置され、
    前記表示範囲変更手段は、前記画像表示装置の左右方向における前記乗員側と反対側の端部近傍に設定される視点移動基準点から見たときの前記視点の移動角度に応じて前記画像のパン量を設定すること
    を特徴とする請求項1から請求項3までのいずれか1項に記載の視認補助装置。
  6. 自車両周辺のリスク対象物を検出するリスク対象物検出手段を備え、
    前記表示範囲変更手段は、前記リスク対象物が検出された場合に、前記視点の移動量に対する前記画像のパン量を増加させること
    を特徴とする請求項1から請求項5までのいずれか1項に記載の視認補助装置。
  7. 自車両周辺のリスク対象物を検出するリスク対象物検出手段を備え、
    前記表示範囲変更手段は、前記リスク対象物が検出された場合に、前記視点の位置に関わらず前記リスク対象物が表示されるよう表示範囲を設定すること
    を特徴とする請求項1から請求項5までのいずれか1項に記載の視認補助装置。
JP2017161847A 2017-08-25 2017-08-25 視認補助装置 Active JP7037896B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017161847A JP7037896B2 (ja) 2017-08-25 2017-08-25 視認補助装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017161847A JP7037896B2 (ja) 2017-08-25 2017-08-25 視認補助装置

Publications (2)

Publication Number Publication Date
JP2019038372A true JP2019038372A (ja) 2019-03-14
JP7037896B2 JP7037896B2 (ja) 2022-03-17

Family

ID=65725176

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017161847A Active JP7037896B2 (ja) 2017-08-25 2017-08-25 視認補助装置

Country Status (1)

Country Link
JP (1) JP7037896B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021160598A (ja) * 2020-03-31 2021-10-11 本田技研工業株式会社 情報提供装置

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06247184A (ja) * 1993-03-01 1994-09-06 Aisin Seiki Co Ltd 車上表示装置
JP2008280026A (ja) * 2007-04-11 2008-11-20 Denso Corp 運転支援装置
JP2008293095A (ja) * 2007-05-22 2008-12-04 Denso Corp 運転支援システム
WO2009072366A1 (ja) * 2007-12-05 2009-06-11 Bosch Corporation 車両情報表示装置
JP2012179958A (ja) * 2011-02-28 2012-09-20 Denso Corp 車両用表示装置
JP2014045265A (ja) * 2012-08-24 2014-03-13 Kyocera Corp 車載撮像システム
JP2015009646A (ja) * 2013-06-28 2015-01-19 アルパイン株式会社 運転支援装置
JP2016024574A (ja) * 2014-07-18 2016-02-08 日産自動車株式会社 車両用表示装置
US20160297362A1 (en) * 2015-04-09 2016-10-13 Ford Global Technologies, Llc Vehicle exterior side-camera systems and methods
JP2017009293A (ja) * 2015-06-16 2017-01-12 株式会社デンソー 表示装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06247184A (ja) * 1993-03-01 1994-09-06 Aisin Seiki Co Ltd 車上表示装置
JP2008280026A (ja) * 2007-04-11 2008-11-20 Denso Corp 運転支援装置
JP2008293095A (ja) * 2007-05-22 2008-12-04 Denso Corp 運転支援システム
WO2009072366A1 (ja) * 2007-12-05 2009-06-11 Bosch Corporation 車両情報表示装置
JP2012179958A (ja) * 2011-02-28 2012-09-20 Denso Corp 車両用表示装置
JP2014045265A (ja) * 2012-08-24 2014-03-13 Kyocera Corp 車載撮像システム
JP2015009646A (ja) * 2013-06-28 2015-01-19 アルパイン株式会社 運転支援装置
JP2016024574A (ja) * 2014-07-18 2016-02-08 日産自動車株式会社 車両用表示装置
US20160297362A1 (en) * 2015-04-09 2016-10-13 Ford Global Technologies, Llc Vehicle exterior side-camera systems and methods
JP2017009293A (ja) * 2015-06-16 2017-01-12 株式会社デンソー 表示装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021160598A (ja) * 2020-03-31 2021-10-11 本田技研工業株式会社 情報提供装置
JP7423388B2 (ja) 2020-03-31 2024-01-29 本田技研工業株式会社 情報提供装置

Also Published As

Publication number Publication date
JP7037896B2 (ja) 2022-03-17

Similar Documents

Publication Publication Date Title
JP5099451B2 (ja) 車両周辺確認装置
JP6413207B2 (ja) 車両用表示装置
JP2018157403A (ja) 車載表示装置、車載表示装置の制御方法及び車載表示装置の制御プログラム
JP5310602B2 (ja) 車両用周辺監視システム
JP5169884B2 (ja) ヘッドアップディスプレイ装置
JP5093611B2 (ja) 車両周辺確認装置
JP6649914B2 (ja) 画像表示装置
JP2011213186A (ja) 電子サイドミラー装置
US11601621B2 (en) Vehicular display system
JP2010143411A (ja) ヘッドアップディスプレイ装置
JP2013191050A (ja) 車両周辺監視装置
US10836311B2 (en) Information-presenting device
US20150085117A1 (en) Driving assistance apparatus
JP2011189775A (ja) 車両の後側方確認装置
JP2017111739A (ja) 運転支援装置、運転支援方法
JP2019116220A (ja) 車両用視認装置
JP7037896B2 (ja) 視認補助装置
KR20160034681A (ko) 차량의 주변 감시 장치 및 방법
WO2013144998A1 (ja) 車両用視認支援装置
JP2008162550A (ja) 外部環境表示装置
JP6971087B2 (ja) 視認補助装置
JP2021154888A (ja) 車両用表示装置
JP6878109B2 (ja) 画像表示装置
WO2017183513A1 (ja) 鏡ディスプレイ装置
TWI751932B (zh) 車內電子後視系統

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200707

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210630

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210706

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210827

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211210

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220114

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220209

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220307

R150 Certificate of patent or registration of utility model

Ref document number: 7037896

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150