JP7423388B2 - 情報提供装置 - Google Patents
情報提供装置 Download PDFInfo
- Publication number
- JP7423388B2 JP7423388B2 JP2020065022A JP2020065022A JP7423388B2 JP 7423388 B2 JP7423388 B2 JP 7423388B2 JP 2020065022 A JP2020065022 A JP 2020065022A JP 2020065022 A JP2020065022 A JP 2020065022A JP 7423388 B2 JP7423388 B2 JP 7423388B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- vehicle
- unit
- display
- occupant
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000006243 chemical reaction Methods 0.000 claims description 25
- 230000008859 change Effects 0.000 claims description 24
- 206010062519 Poor quality sleep Diseases 0.000 claims description 12
- 230000006870 function Effects 0.000 description 28
- 238000010586 diagram Methods 0.000 description 20
- 230000009471 action Effects 0.000 description 17
- 238000001514 detection method Methods 0.000 description 11
- 230000001133 acceleration Effects 0.000 description 10
- 210000003128 head Anatomy 0.000 description 10
- 238000002485 combustion reaction Methods 0.000 description 9
- 239000005357 flat glass Substances 0.000 description 7
- 230000033228 biological regulation Effects 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 4
- 230000037007 arousal Effects 0.000 description 3
- 239000000446 fuel Substances 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 210000000744 eyelid Anatomy 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 241000283070 Equus zebra Species 0.000 description 1
- LFQSCWFLJHTTHZ-UHFFFAOYSA-N Ethanol Chemical compound CCO LFQSCWFLJHTTHZ-UHFFFAOYSA-N 0.000 description 1
- UFHFLCQGNIYNRP-UHFFFAOYSA-N Hydrogen Chemical compound [H][H] UFHFLCQGNIYNRP-UHFFFAOYSA-N 0.000 description 1
- 206010039203 Road traffic accident Diseases 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 229910052739 hydrogen Inorganic materials 0.000 description 1
- 239000001257 hydrogen Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000001172 regenerating effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Instrument Panels (AREA)
Description
なお、以下に示す図面において、共通の機能を有する部材には共通の参照符号を付するものとする。また、部材のサイズ及び形状は、説明の便宜のため、変形又は誇張して模式的に表す場合がある。
本発明の実施形態に係る情報提供装置300が備わる車両制御装置100を備える自動運転車(以下、「自車両」と称する場合がある。)Mの説明において、自車両Mについて左右の表現を用いる場合、自車両Mの進行方向前方を基準とする。具体的には、例えば、自車両Mが右ハンドル仕様のケースに置いて、運転席側を右側、助手席側を左側と呼ぶことにする。
はじめに、本発明の実施形態に係る情報提供装置300が備わる車両制御装置100を備える自動運転車Mの構成について、図1を参照して説明する。
図1は、本発明の実施形態に係る情報提供装置300が備わる車両制御装置100を備える自動運転車Mの全体構成図である。
本発明の実施形態に係る情報提供装置300が備わる車両制御装置100が搭載される自車両Mは、図1に示すように、例えば、二輪、三輪、四輪等の自動車である。
自車両Mとしては、ディーゼルエンジン・ガソリンエンジン等の内燃機関を動力源とした自動車、電動機を動力源とした電気自動車、内燃機関及び電動機を兼ね備えたハイブリッド自動車等を含む。このうち、電気自動車は、例えば、二次電池、水素燃料電池、金属燃料電池、アルコール燃料電池等の電池により放電される電力を使用して駆動される。
これらの装置や機器は、例えばCAN(Controller Area Network)等の通信媒体を介して相互にデータ通信可能に接続して構成されている。
外界センサ10は、カメラ11、レーダ13、及びライダ15を含んで構成されている。
カメラ11は、自車両前方の斜め下方に傾斜した光軸を有し、自車両Mの進行方向画像を撮像する機能を有する。カメラ11としては、例えば、CMOS(Complementary Metal Oxide Semiconductor)カメラやCCD(Charge Coupled Device)カメラ等を適宜用いることができる。カメラ11は、自車両Mの車室内におけるバックミラー(不図示)近傍、及び自車両Mの車室外における右側ドア前部・左側ドア前部などに設けられる。
カメラ11により撮像された自車両Mの進行方向前方・右後側方・左後側方の画像情報は、通信媒体を介して車両制御装置100へ送られる。
レーダ13は、本実施形態において、図1に示すように、フロント側に3つ、リア側に2つの都合5つ設けられている。レーダ13による物標の分布情報は、通信媒体を介して車両制御装置100へ送られる。
ナビゲーション装置20は、GNSS(Global Navigation Satellite System)受信機、地図情報(ナビ地図)、ヒューマンマシンインターフェースとして機能するタッチパネル式の内部表示装置61、スピーカ63(いずれも図3参照)、マイク等を備えて構成される。ナビゲーション装置20は、GNSS受信機によって自車両Mの現在位置を割り出すと共に、現在位置からユーザによって指定された目的地までの経路を導き出す役割を果たす。
次に、自車両Mに搭載される、本発明の実施形態に係る情報提供装置300が備わる車両制御装置100及びその周辺部構成について、図2を参照して説明する。
図2は、本発明の実施形態に係る情報提供装置300が備わる車両制御装置100及びその周辺部の構成を表す機能ブロック構成図である。
自車両Mには、前記した外界センサ10、ナビゲーション装置20、及び車両制御装置100の他に、図2に示すように、通信装置25、車両センサ30、HMI(Human Machine Interface)35、走行駆動力出力装置200、ステアリング装置210、ブレーキ装置220、が搭載されている。
通信装置25、車両センサ30、HMI35、走行駆動力出力装置200、ステアリング装置210、及びブレーキ装置220は、車両制御装置100との間で通信媒体を介して相互にデータ通信可能に接続して構成されている。
通信装置25は、例えば、セルラー網、Wi-Fi網、Bluetooth(登録商標)、DSRC(Dedicated Short Range Communication)等の無線通信媒体を介して通信を行う機能を有する。
通信装置25は、例えば、VICS(Vehicle Information and Communication System)(登録商標)などの道路の交通状況を監視するシステムの情報提供用サーバと無線通信を行い、自車両Mが走行中の道路や走行予定の道路の交通状況を示す交通情報を取得する。交通情報には、前方の渋滞情報、渋滞地点を通過するための所要時間情報、事故・故障車・工事情報、速度規制・車線規制情報、駐車場の位置情報、駐車場・サービスエリア・パーキングエリアの満車・空車情報などの情報が含まれる。
通信装置25は、道路の側帯などに設けられた無線ビーコンと通信を行ったり、自車両Mの周囲を走行する他車両と車車間通信を行ったりすることで、前記交通情報を取得してもよい。
通信装置25は、道路の側帯などに設けられた光ビーコンと通信を行ったり、自車両Mの周囲を走行する他車両と車車間通信を行ったりすることで、前記信号情報を取得してもよい。
車両センサ30は、自車両Mに関する各種情報を検出する機能を有する。車両センサ30は、自車両Mの車速を検出する車速センサ、自車両Mの加速度を検出する加速度センサ、自車両Mの鉛直軸回りの角速度を検出するヨーレートセンサ、自車両Mの向きを検出する方位センサ、自車両Mの傾斜角度を検出する傾斜角センサ、自車両Mの存する場所の照度を検出する照度センサ、自車両Mの存する場所の雨滴の量を検出する雨滴センサ等を含む。
次に、HMI35について、図3、図4を参照して説明する。
図3は、本発明の実施形態に係る車両制御装置100に接続されるHMI35の概略構成図である。図4は、車両制御装置100を備える車両Mの車室前部構造を表す図である。
HMI35は、図3に示すように、運転操作系の構成部材と、非運転操作系の構成部材と、を備える。これらの境界は明確なものではなく、運転操作系の構成部材が非運転操作系の機能を備える構成(又はその逆)を採用しても構わない。
なお、アクセル開度信号を車両制御装置100に出力するのに代えて、走行駆動力出力装置200、ステアリング装置210、又はブレーキ装置220に直接出力する構成を採用してもよい。以下に説明する他の運転操作系の構成についても同様である。アクセルペダル反力出力装置45は、例えば車両制御装置100からの指示に応じて、アクセルペダル41に対して操作方向と反対向きの力(操作反力)を出力する。
マルチインフォメーションパネル87には、例えば、前方視界に関する風景画像の情報、自車両M周辺の地図情報、地図上における自車両Mの現在位置情報、自車両Mの現在の走行路・予定経路に関する交通情報(信号情報を含む)、自車両Mの周囲に存する交通参加者(歩行者・自転車・オートバイ・他車両等を含む)に関する交通参加者情報、交通参加者に向けて発するメッセージ等の各種情報等が表示される。
右側パネル89aには、自車両Mの右側に設けたカメラ11により撮像した自車両Mの右側における後方及び下方の画像情報が表示される。
左側パネル89bには、自車両Mの左側に設けたカメラ11により撮像した自車両Mの左側における後方及び下方の画像情報が表示される。
スピーカ63は、音声を出力する機能を有する。スピーカ63は、例えば、車室内のインストルメントパネル60、ドアパネル、リアパーセルシェルフ(いずれも不図示)等の適宜の位置に適宜の数だけ設けられる。
接触操作検出装置65は、内部表示装置61がタッチパネル式である場合に、内部表示装置61の表示画面におけるタッチ位置を検出し、検出したタッチ位置の情報を車両制御装置100に出力する機能を有する。なお、内部表示装置61がタッチパネル式ではない場合、接触操作検出装置65はこれを省略することができる。
次に、図2に戻って、車両制御装置100の構成について説明する。
車両制御装置100は、例えば、一以上のプロセッサ又は同等の機能を有するハードウェアにより実現される。車両制御装置100は、CPU(Central Processing Unit)などのプロセッサ、記憶装置、及び通信インターフェースが内部バスによって接続されたECU(Electronic Control Unit)、又はMPU(Micro-Processing Unit)などが組み合わされた構成であってよい。
目標車線決定部110、運転支援制御部120の各部の機能、及び走行制御部160のうち一部又は全部の機能は、プロセッサがプログラム(ソフトウェア)を実行することにより実現される。また、これらの機能のうち一部又は全部は、LSI(Large Scale Integration)やASIC(Application Specific Integrated Circuit)等のハードウェアによって実現されてもよいし、ソフトウェアとハードウェアの組み合わせによって実現されてもよい。
目標車線決定部110は、例えば、MPU(Micro Processing Unit)により実現される。目標車線決定部110は、ナビゲーション装置20から提供された経路を複数のブロックに分割し(例えば、車両進行方向に関して100[m]毎に分割し)、高精度地図情報181を参照してブロックごとに目標車線を決定する。目標車線決定部110は、例えば、左から何番目の車線を走行するといった決定を行う。目標車線決定部110は、例えば、経路において分岐箇所や合流箇所などが存在する場合、自車両Mが、分岐先に進行するための合理的な走行経路を走行できるように、目標車線を決定する。目標車線決定部110により決定された目標車線は、目標車線情報182として記憶部180に記憶される。
運転支援制御部120は、運転支援モード制御部130と、認識部140と、切替制御部150と、を備える。
運転支援モード制御部130は、HMI35に対する運転者の操作、行動計画生成部144により決定されたイベント、軌道生成部147により決定された走行態様などに基づいて、運転支援制御部120が実行する自動運転モード(自動運転支援状態)を決定する。自動運転モードは、HMI制御部170に通知される。
オーバーライドは、例えば、自車両Mの運転者によるHMI35の運転操作系の構成要素に対する操作が、所定時間を超えて継続した場合、所定の操作変化量(例えばアクセルペダル41によるアクセル開度、ブレーキペダル47によるブレーキ踏量、ステアリングホイール55によるステアリング操舵角)を超える場合、又は、運転操作系の構成要素に対する操作を所定の回数を超えて行った場合などに開始される。
認識部140は、自車位置認識部141と、外界認識部142と、エリア特定部143と、行動計画生成部144と、軌道生成部147と、を備える。
自車位置認識部141は、記憶部180に格納された高精度地図情報181と、カメラ11、レーダ13、ライダ15、ナビゲーション装置20、又は車両センサ30から入力される情報とに基づいて、自車両Mが走行している走行車線、及び、走行車線に対する自車両Mの相対位置を認識する。
外界認識部142は、図2に示すように、カメラ11、レーダ13、ライダ15を含む外界センサ10から入力される外界情報に基づいて、例えば、周辺車両の位置・車速・加速度を含む外界状態を認識する。周辺車両とは、例えば、自車両Mの周辺を走行する車両であって、自車両Mと同じ方向に走行する他車両(前走車及び後走車;詳しくは後記)である。
周辺車両の位置は、他車両の重心やコーナー等の代表点で表されてもよいし、他車両の輪郭で表現された領域で表されてもよい。周辺車両の状態とは、上記各種機器の情報に基づいて把握される、周辺車両の速度・加速度、車線変更をしているか否か(あるいは車線変更をしようとしているか否か)を含んでもよい。また、外界認識部142は、前走車及び後走車を含む周辺車両に加えて、ガードレール、電柱、駐車車両、歩行者、交通標識を含む物標の位置を認識する構成を採用してもよい。
本発明の実施形態において、周辺車両のうち自車両Mと共通の走行レーンかつ自車両Mの直前を走行する車両であって、追従走行制御において追従対象となる車両を「前走車」と呼ぶ。また、周辺車両のうち自車両Mと共通の走行レーンかつ自車両Mの直後を走行する車両を「後走車」と呼ぶ。
エリア特定部143は、自車両Mの周辺に存する特定エリア(インターチェンジ:IC/ジャンクション:JCT/車線の増加・減少地点)に係る情報を地図情報に基づき取得する。これにより、エリア特定部143は、前走車を含む前方車両に隠れて進行方向画像を外界センサ10を介して取得できない場合でも、自車両Mの円滑な進行を補助する特定エリアに係る情報を取得することができる。
また、後記するように、通信装置25が入手したVICS情報を用いて、エリア特定部143が取得した特定エリアに係る情報の精度を高める構成を採用しても構わない。
行動計画生成部144は、自動運転のスタート地点、及び/又は自動運転の目的地を設定する。自動運転のスタート地点は、自車両Mの現在位置であってもよいし、自動運転を指示する操作がなされた地点であってもよい。行動計画生成部144は、そのスタート地点と自動運転の目的地との間の区間において、行動計画を生成する。なお、これに限らず、行動計画生成部144は、任意の区間について行動計画を生成してもよい。
<モード変更部145>
モード変更部145は、例えば、外界認識部142による自車両Mの進行方向に存する物標に認識結果に基づいて、予め設定される複数段階の自動運転モード及び手動運転モードを含む運転モードのなかから、前記認識結果に相応しい運転モードを選択し、当該選択した運転モードを用いて自車両Mの運転動作を行わせる。
報知制御部146は、モード変更部145によって自車両Mの運転モードが遷移された場合、自車両Mの運転モードが遷移した旨を報知する。報知制御部146は、例えば、記憶部180に予め記憶される音声情報をスピーカ63に出力させることにより、自車両Mの運転モードが遷移した旨を報知する。
なお、自車両Mの運転モードの遷移を運転者に報知することが可能であれば、音声による報知に限らず、表示、発光、振動、又はこれらの組合わせによって前記報知を行っても構わない。
軌道生成部147は、行動計画生成部144で生成された行動計画に基づいて、自車両Mの走行すべき軌道を生成する。
切替制御部150は、図2に示すように、自動運転切替スイッチ71(図3参照)から入力される信号、その他に基づいて自動運転モード及び手動運転モードを相互に切替える。また、切替制御部150は、HMI35における運転操作系の構成要素に対する加速、減速又は操舵を指示する操作に基づいて、その時の自動運転モードを下位の運転モードに切替える。例えば、切替制御部150は、HMI35における運転操作系の構成要素から入力された信号の示す操作量が閾値を超えた状態が、基準時間以上継続した場合に、その時の自動運転モードを下位の運転モードに切替える(オーバーライド)。
また、切替制御部150は、オーバーライドによる下位の運転モードへの切替えの後、所定時間の間、HMI35における運転操作系の構成要素に対する操作が検出されなかった場合に、元の自動運転モードに復帰させる切替え制御を行ってもよい。
走行制御部160は、軌道生成部147によって生成された自車両Mの走行すべき軌道を、予定の時刻通りに自車両Mが通過するように、走行駆動力出力装置200、ステアリング装置210、及びブレーキ装置220の制御を行うことにより、自車両Mの走行制御を行う。
HMI制御部170は、運転支援制御部120により自車両Mの自動運転モードに係る設定情報が通知されると、モード別操作可否情報184(後記図11参照)を参照して、自動運転モードの設定内容に応じてHMI35を制御する。
HMI制御部170は、図2に示すように、運転支援制御部120から取得した自車両Mの運転モードの情報に基づき、また、モード別操作可否情報184を参照することで、使用が許可される装置(ナビゲーション装置20及びHMI35の一部又は全部)と、使用が許可されない装置とを判別する。また、HMI制御部170は、前記判別結果に基づいて、運転操作系のHMI35又はナビゲーション装置20に関する運転者操作の受け付け可否を制御する。
<表示制御部171>
表示制御部171は、内部表示装置61及び外部表示装置83に関する表示制御を行う。具体的には、例えば、表示制御部171は、車両制御装置100の実行する運転モードが自動化度の高い自動運転モードである場合に、自車両Mの周囲に存する交通参加者に対する注意喚起・警告・運転補助等の情報を内部表示装置61及び/又は外部表示装置83に表示させる制御を行う。
記憶部180には、例えば、高精度地図情報181、目標車線情報182、行動計画情報183、モード別操作可否情報184などの情報が格納される。記憶部180は、ROM(Read Only Memory)やRAM(Random Access Memory)、HDD(Hard Disk Drive)、フラッシュメモリ等で実現される。プロセッサが実行するプログラムは、予め記憶部180に格納されていてもよいし、車載インターネット設備等を介して外部装置からダウンロードされてもよい。また、プログラムは、そのプログラムを格納した可搬型記憶媒体が図示しないドライブ装置に装着されることで記憶部180にインストールされてもよい。
車両制御装置100は、図2に示すように、走行制御部160による走行制御指令に従って、走行駆動力出力装置200、ステアリング装置210、及びブレーキ装置220の駆動を制御する。
<走行駆動力出力装置200>
走行駆動力出力装置200は、自車両Mが走行するための駆動力(トルク)を駆動輪に出力する。走行駆動力出力装置200は、例えば、自車両Mが内燃機関エンジンを動力源とした自動車である場合、内燃機関エンジン、変速機、及び内燃機関エンジンを制御するエンジンECU(Electronic Control Unit:いずれも不図示)を備える。
また、走行駆動力出力装置200は、自車両Mが電動機を動力源とした電気自動車である場合、走行用モータ及び走行用モータを制御するモータECU(いずれも不図示)を備える。
さらに、走行駆動力出力装置200は、自車両Mがハイブリッド自動車である場合、内燃機関エンジン、変速機、エンジンECU、走行用モータ、及びモータECU(いずれも不図示)を備える。
走行駆動力出力装置200が走行用モータのみを含む場合、モータECUは、走行制御部160から入力される情報に従って、走行用モータに与えるPWM信号のデューティ比を調整する。
走行駆動力出力装置200が内燃機関エンジン及び走行用モータを含む場合、エンジンECU及びモータECUは、走行制御部160から入力される情報に従って、互いに協調して走行駆動力を制御する。
ステアリング装置210は、例えば、ステアリングECUと、電動モータ(いずれも不図示)とを備える。電動モータは、例えば、ラックアンドピニオン機構に力を作用させて転舵輪の向きを変更する。ステアリングECUは、車両制御装置100から入力される情報、又は入力されるステアリング操舵角又はステアリングトルクの情報に従って電動モータを駆動し、転舵輪の向きを変更させる。
ブレーキ装置220は、例えば、ブレーキキャリパと、ブレーキキャリパに油圧を伝達するシリンダと、シリンダに油圧を発生させる電動モータと、制動制御部とを備える電動サーボブレーキ装置(いずれも不図示)である。電動サーボブレーキ装置の制動制御部は、走行制御部160から入力される情報に従って電動モータを制御し、制動操作に応じたブレーキトルクが各車輪に出力されるようにする。電動サーボブレーキ装置は、ブレーキペダル47の操作によって発生させた油圧を、マスターシリンダを介してシリンダに伝達する機構をバックアップとして備えてもよい。
次に、前述した車両制御装置100に備わる本発明の実施形態に係る情報提供装置300のブロック構成について、図5及び図6を参照して説明する。
図5は、本発明の実施形態に係る情報提供装置300が有する風景画像変換機能を概念的に表すブロック構成図である。図6は、情報提供装置300が有する風景画像変換機能に係る実行部を概念的に表すブロック構成図である。
情報取得部311は、図5に示すように、外界センサ10のうちカメラ11により撮像された自車両Mの前方視界に関する風景画像の情報、及び、乗員の視点位置EP(アイポイント:図6参照)を含む着座状態の情報を取得する。
ここで、本発明において乗員とは、主として助手席の乗員を、副次的に運転席の乗員(運転者)を想定している。乗員の視点位置(アイポイント)EPを含む着座状態の情報は、例えば、車室内カメラ81により乗員の頭部付近の画像を撮影し、この撮影画像に対して画像処理を施すことにより、乗員の視点位置EPを抽出すればよい。
情報取得部311は、図2に示す車両制御装置100のうち認識部140に内包される機能部である。
推定部313は、情報取得部311により取得した乗員の視点位置EP(アイポイント)を含む着座状態に基づいて、車室内の乗員が自然な体位で前部ウインドウガラス77越しに広がる自車両Mの前方視界に関する風景を視た際において、当該乗員の前方視界に関する風景に係る第1下方見切り部331(例えば図6参照、詳しくは後記する。)の座標を推定する。
推定部313は、図2に示す車両制御装置100のうち認識部140に内包される機能部である。
変換部315は、図6に示すように、推定部313により推定された第1下方見切り部331の座標に基づいて、情報取得部313により取得した前方視界に関する風景画像を、当該風景画像に係る第2下方見切り部333が風景に係る第1下方見切り部331に基づき区画された見切り領域335を有する風景画像に変換する。第2下方見切り部333、見切り領域335について、詳しくは後記する。
変換部315は、図2に示す車両制御装置100のうち認識部140に内包される機能部である。
表示制御部171(図2及び図5参照)は、基本的に、MIP(表示部)87の表示制御を行う。特に、表示制御部171は、図6に示すように、変換部315により変換された見切り領域335を有する風景画像をMIP87に表示させる。
同様に、カメラ11により撮像された自車両Mの前方視界に関する風景画像をMIP87に表示させるケースでは、前部ウインドウガラス77越しに乗員が視る前方視界に関する風景と、MIP87に表示される風景画像とでは、見え方が異なるおそれがある。
次いで、変換部315は、この推定結果に基づいて、前方視界に関する風景画像を、当該風景画像に係る第2見切り部(例えば、第2下方見切り部333)が風景に係る第1見切り部(例えば、第1下方見切り部331)に基づき区画された見切り領域335を有する風景画像に変換することとした。
次に、本発明の実施形態に係る情報提供装置300の動作について、図7、図8A~図8Cを適宜参照して説明する。
図7は、情報提供装置300の動作説明に供するフローチャート図である。図8Aは、カメラ11により撮像した前方視界に関する風景画像を概念的に表す図である。図8Bは、乗員の前方視界に関する風景を概念的に表す図である。図8Cは、マルチインフォメーションパネル(MIP)87に表示される乗員の前方視界に関する風景画像を概念的に表す図である。
前提として、情報提供装置300が搭載された自動運転車(自車両)Mは、予め設定されたあるレベルの自動運転モードで走行しているものとする。
次に、本発明の実施形態に係る情報提供装置300の作用効果について説明する。
(1)の観点に基づく情報提供装置300は、自車両Mの前方視界に関する風景画像の情報を取得する情報取得部311と、車室内に設けられ、情報取得部311により取得した前方視界に関する風景画像が表示されるMIP(表示部)87と、MIP87の表示制御を行う表示制御部171と、を備え、MIP87に表示された風景画像の情報を乗員に提供する情報提供装置である。
(1)の観点に基づく情報提供装置300において、情報取得部311は、乗員の着座状態の情報をさらに取得する。
(1)の観点に基づく情報提供装置300は、情報取得部311により取得した乗員の着座状態に基づいて、当該乗員の前方視界に関する風景に係る第1見切り部(例えば、第1下方見切り部331;以下、「第1見切り部」として「第1下方見切り部331」を採用した例をあげて説明する。)の座標を推定する推定部313と、推定部313により推定された第1下方見切り部331の座標に基づいて、情報取得部311により取得した前方視界に関する風景画像を、当該風景画像に係る第2見切り部(例えば、第2下方見切り部333;以下、「第2見切り部」として「第2下方見切り部333」を採用した例をあげて例で説明する。)が風景に係る第1下方見切り部331に基づき区画された見切り領域335を有する風景画像に変換する変換部315と、をさらに備える。
表示制御部171は、変換部315により変換された見切り領域335を有する風景画像を、MIP87に表示させる構成を採用することとした。
表示制御部171は、変換部315により変換された見切り領域335を有する風景画像を、MIP87に表示させる。
図9は、自車両Mの前方視界に関する風景画像が占める領域のなかから、助手席乗員及び運転席乗員のそれぞれの視点位置EP1,EP2に基づき変換された見切り領域335A,335Bをそれぞれ有する風景画像を対比して概念的に表す説明図である。なお、助手席乗員の横方向視野と、運転席乗員の横方向視野とは、実質的に同等であるものとする。また、助手席乗員及び運転席乗員のそれぞれの着座位置は、一般的な車両の座席間隔に従う位置に設定されているものとする。
これは、助手席乗員及び運転席乗員間の鉛直方向の視点位置差が生じていること、及び、助手席乗員及び運転席乗員が横方向に離れて着座していることに基づく。
その結果、短時間のうちに乗員の視点位置EPが目まぐるしく変わるようなケースが生じた場合であっても、MIP87の表示内容に混乱を来すことなく、風景情報提供サービスを安定して享受することができる。
以上説明した複数の実施形態は、本発明の具現化の例を示したものである。したがって、これらによって本発明の技術的範囲が限定的に解釈されることがあってはならない。本発明はその要旨又はその主要な特徴から逸脱することなく、様々な形態で実施することができるからである。
乗員の前方視界に関する風景に係る第1見切り部として、乗員の前方視界に関する風景において左右の側方を見切る第1側方見切り部を採用しても構わない。
同様に、乗員の前方視界に関する風景に係る第1見切り部として、乗員の前方視界に関する風景において上方を見切る第1上方見切り部を採用しても構わない。
例えば、助手席乗員が子どもである場合には、乗員(子ども)の前方視界に関する風景は、フロントダッシュボード、ボンネット等の車両構造部材によって、同風景の下方側が大きく遮られる。このような場合にまで、前記した(2)の観点に基づく(乗員が大人である際の)情報提供装置300の構成を適用すると、乗員(子ども)提供される風景画像は空の方角を向くような不適切なものになりかねない。
そこで、このような(助手席乗員の視点位置EPから乗員が子どもであると判定された)場合には、推定部313は、助手席乗員(子ども)の視点位置EPを用いることなく、子ども用に予め設定された、助手席乗員(子ども)の前方視界に関する風景に係る第1見切り部(例えば、第1下方見切り部331)の座標を推定する態様を採用すればよい。このように構成すれば、助手席乗員(子ども)に違和感を抱かせることのない風景情報の提供サービスを遂行することができる。
変換部315により変換された見切り領域335を有する風景画像の縮尺を、自動運転レベルに応じて拡大又は縮小させる構成を採用しても構わない。
171 表示制御部
300 情報提供装置
311 情報取得部
313 推定部
315 変換部
331 第1下方見切り部(第1見切り部)
333 第2下方見切り部(第2見切り部)
335 見切り領域
EP 乗員の視点位置
M 自車両(自動運転車)
Claims (3)
- 自車両の前方視界に関する風景画像の情報を取得する情報取得部と、
車室内に設けられ、前記情報取得部により取得した前記前方視界に関する風景画像が表示される表示部と、
前記表示部の表示制御を行う表示制御部と、を備え、前記表示部に表示された前記風景画像の情報を乗員に提供する情報提供装置であって、
前記情報取得部は、乗員の着座状態及び視点位置、助手席乗員の覚醒状態の情報をさらに取得し、
前記情報取得部により取得した乗員の着座状態に基づいて、当該乗員の前方視界に関する風景に係る第1見切り部の座標を推定する推定部と、
前記推定部により推定された前記第1見切り部の座標に基づいて、前記情報取得部により取得した前記前方視界に関する風景画像を、当該風景画像に係る第2見切り部が前記風景に係る前記第1見切り部に基づき区画された見切り領域を有する風景画像に変換する変換部と、をさらに備え、
前記表示制御部は、前記変換部により変換された前記見切り領域を有する風景画像を、前記表示部に表示させ、
前記推定部は、前記情報取得部により取得した助手席乗員の視点位置に基づいて、当該助手席乗員の前方視界に関する風景に係る第1見切り部の座標を推定するところ、前記情報取得部により取得した助手席乗員の覚醒状態が所定の覚醒閾値未満である場合に、前記情報取得部により取得した運転席乗員の視点位置に基づいて、当該運転席乗員の前方視界に関する風景に係る第1見切り部の座標を推定する
ことを特徴とする情報提供装置。 - 請求項1に記載の情報提供装置であって、
前記情報取得部は、少なくとも鉛直方向における乗員の視点位置の変更が生じた際、当該変更後における乗員の視点位置が所定の継続時間を超えて変わらない場合に、当該変更後における乗員の視点位置の情報を更新取得する
ことを特徴とする情報提供装置。 - 請求項1又は2に記載の情報提供装置であって、
前記情報取得部は、前記表示部に対する乗員の頭部の相対距離の情報をさらに取得し、
前記表示制御部は、前記表示部に対する乗員の頭部の相対距離に基づいて、前記変換部により変換された前記見切り領域を有する風景画像を、その縮尺を拡大又は縮小させて、前記表示部に表示させる
ことを特徴とする情報提供装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020065022A JP7423388B2 (ja) | 2020-03-31 | 2020-03-31 | 情報提供装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020065022A JP7423388B2 (ja) | 2020-03-31 | 2020-03-31 | 情報提供装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021160598A JP2021160598A (ja) | 2021-10-11 |
JP7423388B2 true JP7423388B2 (ja) | 2024-01-29 |
Family
ID=78004212
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020065022A Active JP7423388B2 (ja) | 2020-03-31 | 2020-03-31 | 情報提供装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7423388B2 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008182591A (ja) | 2007-01-25 | 2008-08-07 | Sanyo Electric Co Ltd | 画像提供装置、車両、および画像提供方法 |
JP2011188028A (ja) | 2010-03-04 | 2011-09-22 | Denso Corp | 車両用周辺監視システム |
JP2013055385A (ja) | 2011-09-01 | 2013-03-21 | Toyota Motor Corp | 車両周辺表示装置 |
JP2016118859A (ja) | 2014-12-19 | 2016-06-30 | パイオニア株式会社 | 情報表示装置、制御方法、プログラム、及び記憶媒体 |
JP2019038372A (ja) | 2017-08-25 | 2019-03-14 | 株式会社Subaru | 画像表示装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11151997A (ja) * | 1997-11-20 | 1999-06-08 | Nissan Motor Co Ltd | 車両用操作装置 |
-
2020
- 2020-03-31 JP JP2020065022A patent/JP7423388B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008182591A (ja) | 2007-01-25 | 2008-08-07 | Sanyo Electric Co Ltd | 画像提供装置、車両、および画像提供方法 |
JP2011188028A (ja) | 2010-03-04 | 2011-09-22 | Denso Corp | 車両用周辺監視システム |
JP2013055385A (ja) | 2011-09-01 | 2013-03-21 | Toyota Motor Corp | 車両周辺表示装置 |
JP2016118859A (ja) | 2014-12-19 | 2016-06-30 | パイオニア株式会社 | 情報表示装置、制御方法、プログラム、及び記憶媒体 |
JP2019038372A (ja) | 2017-08-25 | 2019-03-14 | 株式会社Subaru | 画像表示装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2021160598A (ja) | 2021-10-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6390035B2 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
JP6368959B2 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
JP6354085B2 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
JP6387548B2 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
JP6745334B2 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
JP6689365B2 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
JP6847094B2 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
WO2017187622A1 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
JPWO2017158772A1 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
WO2017158764A1 (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
JP7478570B2 (ja) | 車両制御装置 | |
JP2017199317A (ja) | 車両制御システム、車両制御方法、および車両制御プログラム | |
CN113044035B (zh) | 自动驾驶车辆用信息提示装置 | |
JP7423837B2 (ja) | 自動運転車用情報提示装置 | |
JP7157780B2 (ja) | 自動運転車用情報提示装置 | |
JP7158368B2 (ja) | 自動運転車用情報提示装置 | |
JP6971300B2 (ja) | 車両制御装置、車両制御方法及びプログラム | |
JP7088899B2 (ja) | 自動運転車用情報提示装置 | |
JP7101161B2 (ja) | 車両制御装置、車両制御方法及びプログラム | |
JP7423388B2 (ja) | 情報提供装置 | |
CN113044028A (zh) | 自动驾驶车辆用信息提示装置 | |
JP2021107772A (ja) | 車両用報知装置、車両用報知方法及びプログラム | |
JP2021138217A (ja) | 移動体用情報処理システム及び移動体用情報処理方法 | |
JP2021138218A (ja) | 移動体用情報処理システム及び移動体用情報処理方法 | |
JP2021092979A (ja) | 自動運転車用情報提示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221128 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230727 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230801 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230929 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231219 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240117 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7423388 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |