JP6575404B2 - 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム - Google Patents

車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム Download PDF

Info

Publication number
JP6575404B2
JP6575404B2 JP2016051385A JP2016051385A JP6575404B2 JP 6575404 B2 JP6575404 B2 JP 6575404B2 JP 2016051385 A JP2016051385 A JP 2016051385A JP 2016051385 A JP2016051385 A JP 2016051385A JP 6575404 B2 JP6575404 B2 JP 6575404B2
Authority
JP
Japan
Prior art keywords
vehicle
video data
range
display control
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016051385A
Other languages
English (en)
Other versions
JP2017165218A (ja
Inventor
泉 佐伯
泉 佐伯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Priority to JP2016051385A priority Critical patent/JP6575404B2/ja
Priority to PCT/JP2016/089116 priority patent/WO2017154316A1/ja
Publication of JP2017165218A publication Critical patent/JP2017165218A/ja
Priority to US15/967,709 priority patent/US10531016B2/en
Priority to US16/565,654 priority patent/US10567672B2/en
Priority to US16/565,665 priority patent/US10567673B2/en
Application granted granted Critical
Publication of JP6575404B2 publication Critical patent/JP6575404B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)

Description

本発明は、車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラムに関する。
車両の後方を確認するルームミラーや左右サイドミラーに代わって、車両の後方周辺領域を撮影する後方カメラからの映像を表示したり、車両の側方周辺領域を撮影した側方カメラからの映像を表示したりする技術が知られている(例えば、特許文献1参照)。
特開2015−009646号公報
ところで、運転者は、車両の走行状況に応じて、車両の側方を確認したい場合や、車両の側方より後方を優先して確認したい場合がある。そこで、走行状況に応じて適切な車両周辺の確認を可能にする技術が望まれている。
本発明は、上記に鑑みてなされたものであって、走行状況に応じて適切な車両周辺の確認を可能とすることを目的とする。
上述した課題を解決し、目的を達成するために、本発明に係る車両用表示制御装置は、車両の後方に配置され、前記車両の後方を撮影する後方カメラからの第一映像データを取得する後方映像データ取得部と、前記車両の側方に配置され、前記車両の側後方を撮影する側後方カメラからの第二映像データを取得する側後方映像データ取得部と、前記後方映像データ取得部が取得した前記第一映像データの一部である第一範囲と、前記第一範囲の側方に位置する第二範囲とを切り出す切出部と、前記車両の乗員の降車可能性を判断する判断部と、前記判断部が判断した降車可能性に基づき、前記側後方映像データ取得部が取得した前記第二映像データと、前記切出部が切り出した前記第二範囲の映像データとからいずれか一方の映像データを選択する選択部と、前記選択部が選択した映像データを、前記車両の側方の映像を表示するサイドモニタに表示させ、前記第一範囲として切り出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させる表示制御部と備えることを特徴とする。
本発明に係る車両用表示システムは、上記の車両用表示制御装置と、前記後方カメラ、前記側後方カメラ、前記リヤビューモニタ、前記サイドモニタのうち少なくともいずれかを備えることを特徴とする。
本発明に係る車両用表示制御方法は、車両の後方に配置され、前記車両の後方を撮影する後方カメラからの第一映像データを取得する後方映像データ取得ステップと、前記車両の側方に配置され、前記車両の側後方を撮影する側後方カメラからの第二映像データを取得する側後方映像データ取得ステップと、前記後方映像データ取得ステップで取得した前記第一映像データの一部である第一範囲と、前記第一範囲の側方に位置する第二範囲とを切り出す切出ステップと、前記車両の乗員の降車可能性を判断する判断ステップと、前記判断ステップで判断した降車可能性に基づき、前記側後方映像データ取得ステップで取得した前記第二映像データと、前記切出ステップで切り出した前記第二範囲の映像データとからいずれか一方の映像データを選択する選択ステップと、前記選択ステップで選択した映像データを、前記車両の側方の映像を表示するサイドモニタに表示させ、前記第一範囲として切り出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させる表示制御ステップとを含む。
本発明に係るプログラムは、車両の後方に配置され、前記車両の後方を撮影する後方カメラからの第一映像データを取得する後方映像データ取得ステップと、前記車両の側方に配置され、前記車両の側後方を撮影する側後方カメラからの第二映像データを取得する側後方映像データ取得ステップと、前記後方映像データ取得ステップで取得した前記第一映像データの一部である第一範囲と、前記第一範囲の側方に位置する第二範囲とを切り出す切出ステップと、前記車両の乗員の降車可能性を判断する判断ステップと、前記判断ステップで判断した降車可能性に基づき、前記側後方映像データ取得ステップで取得した前記第二映像データと、前記切出ステップで切り出した前記第二範囲の映像データとからいずれか一方の映像データを選択する選択ステップと、前記選択ステップで選択した映像データを、前記車両の側方の映像を表示するサイドモニタに表示させ、前記第一範囲として切り出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させる表示制御ステップとを車両用表示制御装置として動作するコンピュータに実行させる。
本発明によれば、走行状況に応じて適切な車両周辺の確認を可能にすることができるという効果を奏する。
図1は、実施形態に係る車両用表示システムの構成例を示す概略図である。 図2は、実施形態に係る車両用表示システムの構成例を示す概略図である。 図3は、実施形態に係る車両用表示システムの構成例を示すブロック図である。 図4は、実施形態に係る車両用表示システムの構成例を示す概略図である。 図5は、実施形態に係る車両用表示システムの後方カメラで撮影された映像データの一例を示す図である。 図6は、実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の一例を示す図である。 図7は、実施形態に係る車両用表示システムの後方カメラで撮影された映像データの他の例を示す図である。 図8は、実施形態に係る車両用表示システムの車両用表示制御装置の制御部における処理の流れを示すフローチャートである。 図9は、実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の他の例を示す図である。 図10は、実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の他の例を示す図である。
以下に添付図面を参照して、本発明に係る車両用表示制御装置10、車両用表示システム1、車両用表示制御方法およびプログラムの実施形態を詳細に説明する。なお、以下の実施形態により本発明が限定されるものではない。
[実施形態]
車両用表示システム1は、車両100に搭載され、適切に車両周辺を表示する。図1は、第一実施形態に係る車両用表示システムの構成例を示す概略図である。図2は、第一実施形態に係る車両用表示システムの構成例を示す概略図である。図3は、第一実施形態に係る車両用表示システムの構成例を示すブロック図である。
図1ないし図3に示すように、車両用表示システム1は、後方カメラ110と、右側方カメラ(側後方カメラ)120と、左側方カメラ(側後方カメラ)130と、リヤビューモニタ140と、右サイドモニタ150と、左サイドモニタ160と、認識辞書記憶部200と、車両用表示制御装置10とを有する。
後方カメラ110は、車両100の後方に配置され、車両100の後方を撮影する。後方カメラ110は、リヤビューモニタ140による確認範囲を含んだ範囲を撮影する。後方カメラ110は、右側方カメラ120および左側方カメラ130の死角を含んだ範囲を撮影する。図4、図5を用いて、後方カメラ110の撮影範囲を説明する。図4は、第一実施形態に係る車両用表示システムの構成例を示す概略図である。図5は、第一実施形態に係る車両用表示システムの後方カメラで撮影された映像データの一例を示す図である。後方カメラ110は、水平方向の画角が例えば90〜180°、上下方向の画角が例えば45〜90°である。具体的には、後方カメラ110は、図5に示すような、第一映像データ110Aを撮影している。後方カメラ110は、リヤビューモニタ140に表示させる範囲より広い範囲の映像を撮影可能であるが、リヤビューモニタ140を用いて車両100の運転者が適切に後方を認識できるような範囲としての第一範囲ACを切り出してリヤビューモニタ140に表示する。図4、図5に示すように、第一映像データ110Aは、リヤビューモニタ140による確認範囲である第一範囲ACと、右サイドモニタ150および左サイドモニタ160による確認範囲である第二範囲AR、第二範囲ALとを含む。第一範囲ACと第二範囲ARとは、一部が重複している。第一範囲ACと第二範囲ALとは、一部が重複している。本実施形態では、第一映像データ110Aは、第一範囲ACと第二範囲ARと第二範囲ALとの外側をさらに含んでいる。言い換えると、後方カメラ110は、通常時、リヤビューモニタ140や右サイドモニタ150および左サイドモニタ160に表示されない範囲を含んで撮影している。後方カメラ110は、撮影した第一映像データ110Aを車両用表示制御装置10の映像データ取得部40の後方映像データ取得部42へ出力する。
右側方カメラ120は、車両100の右側方に配置され、車両100の右側方を撮影する。右側方カメラ120は、右サイドモニタ150による確認範囲を撮影する。右側方カメラ120は、図4に示すような、撮影範囲SRを撮影している。右側方カメラ120は、水平方向の画角が例えば15〜45°、上下方向の画角が例えば15〜45°である。右側方カメラ120は、角度調節自在である。右側方カメラ120は、撮影した第二映像データを車両用表示制御装置10の映像データ取得部40の側後方映像データ取得部41へ出力する。
左側方カメラ130は、車両100の左側方に配置され、車両100の左側方を撮影する。左側方カメラ130は、左サイドモニタ160による確認範囲を撮影する。左側方カメラ130は、図4に示すような、撮影範囲SLを撮影している。左側方カメラ130は、水平方向の画角が例えば15〜45°、上下方向の画角が例えば15〜45°である。左側方カメラ130は、角度調節自在である。左側方カメラ130は、撮影した第二映像データを車両用表示制御装置10の映像データ取得部40の側後方映像データ取得部41へ出力する。
リヤビューモニタ140は、一例としては電子ルームミラーである。リヤビューモニタ140を電子ルームミラーとして用いる場合は、後方を光学的な反射により確認するためのハーフミラーの有無は問わない。リヤビューモニタ140は、例えば、液晶ディスプレイ(LCD:Liquid Crystal Display)または有機EL(Organic Electro-Luminescence)ディスプレイなどを含むディスプレイである。リヤビューモニタ140は、車両用表示制御装置10の表示制御部90から出力された映像信号に基づき、車両100の後方映像を表示する。具体的に、リヤビューモニタ140は、図6に示すような後方映像を表示する。図6は、第一実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の一例を示す図である。リヤビューモニタ140は、側方において、右サイドモニタ150および左サイドモニタ160の一部と重複して表示している。リヤビューモニタ140は、運転者から視認容易な位置に配置されている。本実施形態では、リヤビューモニタ140は、ウィンドシールド101の車幅方向の中央上部に配置されている。
右サイドモニタ150は、例えば、液晶ディスプレイまたは有機ELディスプレイなどを含むディスプレイである。右サイドモニタ150は、車両用表示制御装置10の表示制御部90から出力された映像信号に基づき、車両100の右側後方映像を表示する。具体的に、右サイドモニタ150は、通常表示時は、図6に示すような右側後方映像を表示する。右サイドモニタ150は、車両100の右側方の車体100Rの映り込みにより後方視界が阻害される範囲がある。右サイドモニタ150は、運転者から視認容易な位置に配置されている。本実施形態では、右サイドモニタ150は、ダッシュボード102の車幅方向の右側に配置されている。
左サイドモニタ160は、例えば、液晶ディスプレイまたは有機ELディスプレイを含むディスプレイである。左サイドモニタ160は、車両用表示制御装置10の表示制御部90から出力された映像信号に基づき、車両100の左側後方映像を表示する。具体的に、左サイドモニタ160は、通常表示時は、図6に示すような左側後方映像を表示する。左サイドモニタ160は、車両100の左側方の車体100Lの映り込みにより後方視界が阻害される範囲がある。左サイドモニタ160は、運転者から視認容易な位置に配置されている。本実施形態では、左サイドモニタ160は、ダッシュボード102の車幅方向の左側に配置されている。
認識辞書記憶部200は、例えば、四輪車、二輪車、人を含む移動体の正面視などの形状、大きさ、色などのパターンを照合可能な認識辞書を記憶している。認識辞書記憶部200は、例えば、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ(Flash Memory)などの半導体メモリ素子、または、ハードディスク、光ディスク、ネットワークを介した外部記憶装置などの記憶装置である。
図3に戻って、車両用表示制御装置10は、記憶部20と、制御部30とを有する。制御部30は、映像データ取得部40と、切出部50と、判断部60と、選択部70と、検出部80と、表示制御部90とを含む。
記憶部20は、車両用表示制御装置10における各種処理に要するデータおよび各種処理結果を記憶する。記憶部20は、例えば、ROM、フラッシュメモリなどの半導体メモリ素子、または、ハードディスク、光ディスク、ネットワークを介した外部記憶装置などの記憶装置である。
制御部30は、例えば、CPU(Central Processing Unit)などで構成された演算処理装置である。制御部30は、映像データ取得部40と、切出部50と、判断部60と、選択部70と、検出部80と、表示制御部90とを含む。制御部30は、記憶部20に記憶されているプログラムに含まれる命令を実行する。
映像データ取得部40は、車両100の後方および側後方を撮影した映像を取得する。映像データ取得部40が取得する映像データは、例えば、毎秒120フレームの画像が連続した映像データである。映像データ取得部40は、側後方映像データ取得部41と、後方映像データ取得部42とを有する。側後方映像データ取得部41は、右側方カメラ120および左側方カメラ130が出力した第二映像データを取得する。側後方映像データ取得部41は、取得した第二映像データを切出部50に出力する。後方映像データ取得部42は、後方カメラ110が出力した第一映像データ110Aを取得する。後方映像データ取得部42は、取得した第一映像データ110Aを切出部50および検出部80に出力する。
切出部50は、第一映像データ110Aから、第一範囲ACを切り出す。より詳しくは、切出部50は、第一映像データ110Aの一部である第一範囲ACを切り出す。第一映像データ110Aのどの範囲を第一範囲ACとするかは、あらかじめ記憶部20に記憶されている。本実施形態では、第一範囲ACは、第一映像データ110Aの中央部とする。
切出部50は、第二映像データから、右サイドモニタ150および左サイドモニタ160に合わせた第一右映像データ110R1および第一左映像データ110L1を切り出す。右サイドモニタ150に表示される映像データは、右側方カメラ120が撮影した第二映像データを切り出さずに表示してもよく、第一右映像データ110R1として切り出したデータを表示してもよい。左サイドモニタ160に表示される映像データは、左側方カメラ130が撮影した第二映像データを切り出さずに表示してもよく、第一左映像データ110L1として切り出したデータを表示してもよい。
切出部50は、第一映像データ110Aから、第二範囲ARおよび第二範囲ALを切り出す。より詳しくは、切出部50は、第一映像データ110Aの第一範囲ACの側方に位置する第二範囲ARを第二右映像データ110R2として切り出す。切出部50は、第一映像データ110Aの第一範囲ACの側方に位置する第二範囲ALを第二左映像データ110L2として切り出す。第一映像データ110Aのどの範囲を第二範囲ARおよび第二範囲ALとするかは、あらかじめ記憶部20に記憶されている。
本実施形態では、図5に示すように、第二範囲ARおよび第二範囲ALは、その上下方向の中心軸線が、第一範囲ACの上下方向の中心軸線と一致している。
または、図7に示すように、第二範囲AR1および第二範囲AL1は、その上下方向の中心軸線が、第一範囲ACの上下方向の中心軸線より下方に位置付けられていてもよい。
このように構成された切出部50は、切り出した第一右映像データ110R1と第一左映像データ110L1と第二右映像データ110R2と第二左映像データ110L2と切り出した後方映像データ110Cとを選択部70に出力する。
判断部60は、例えば、車速と乗員の降車可能性を判断する情報とを取得する。乗員の降車可能性を判断する情報とは、例えば、車両100のドアロック解除または車両100のドアの車内側ノブへの接触または車両100のドアの車内側ノブへの操作または乗員に装着されていたシートベルトの解除操作の少なくもいずれかまたはこれらの組み合わせである。判断部60は、車両100が停止し、かつ、車両100から乗員が降車する降車可能性があるか否かを判断する。この場合の車両100の停止とは、車速がゼロの完全な停止に加えて、減速により例えば車速が5km/h未満となったときから、停止とみなしてもよい。降車予定の乗員に対して、完全な停止直前から適切に車両100周辺の確認を可能とさせるためである。判断部60は、判断結果を選択部70に出力する。
より詳しくは、判断部60は、車速がゼロ、かつ、車両100のドアロック解除が検出された場合、降車可能性ありと判断する。言い換えると、判断部60は、車両100の停止後に車両100のドアロック解除されたことが検出された場合、降車可能性ありと判断する。または、判断部60は、車速がゼロ、かつ、車両100のドアの車内側ノブへの接触が検出された場合、降車可能性ありと判断する。言い換えると、判断部60は、車両100の停止後に車両100のドアの車内側ノブへの接触が検出された場合、降車可能性ありと判断する。または、判断部60は、車速がゼロ、かつ、車両100のドアの車内側ノブへの操作が検出された場合、降車可能性ありと判断する。言い換えると、判断部60は、車両100の停止後に車両100のドアの車内側ノブへの操作が検出された場合、降車可能性ありと判断する。または、判断部60は、車速がゼロ、かつ、乗員に装着されていたシートベルトの解除操作が検出された場合、降車可能性ありと判断する。言い換えると、判断部60は、車両100の停止後に乗員に装着されていたシートベルトの解除操作が検出された場合、降車可能性ありと判断する。判断部60は、上記を複数組み合わせて、降車可能性ありと判断してもよい。判断部60で降車可能性ありと判断される状態は、上記に限定されない。具体的には例えば、判断部60は、車両100の現在地がナビゲーションシステムに設定された目的地であることが検出された場合、降車可能性ありと判断してもよい。
選択部70は、判断部60で車両100が停止し、かつ、降車可能性ありと判断された場合、第二右映像データ110R2および第二左映像データ110L2を選択する。選択部70は、判断部60で車両100が停止し、かつ、降車可能性ありと判断されていない場合、第一右映像データ110R1および第一左映像データ110L1を選択する。言い換えると、選択部70は、通常時に、第一右映像データ110R1および第一左映像データ110L1を選択する。選択部70は、選択結果を表示制御部90に出力する。
検出部80は、第一映像データ110Aの移動体を検出する。検出部80は、第一映像データ110Aにおいて、移動体認識を行い、移動体を認識する認識部81を有する。認識部81は、第一映像データ110Aに対して、認識辞書記憶部200が記憶している認識辞書を用いたパターンマッチングを行い、移動体の存在を検出する。認識部81は、フレームごとの第一映像データ110Aにおける移動体の大きさの変化に基づき、移動体が車両100に近接しているか離接しているかを認識する。検出部80は、検出結果を表示制御部90に出力する。
表示制御部90は、通常時の通常表示処理として、後方映像データ110Cをリヤビューモニタ140に表示させる。表示制御部90は、選択部70で選択された映像データを、右サイドモニタ150および左サイドモニタ160に表示させる。より詳しくは、表示制御部90は、通常時の通常表示処理として、第一右映像データ110R1および第一左映像データ110L1を、右サイドモニタ150および左サイドモニタ160に表示させる。表示制御部90は、判断部60で所定条件を満たすと判断された場合、第一右映像データ110R1および第一左映像データ110L1を、右サイドモニタ150および左サイドモニタ160に表示させる。
次に、図8を用いて、制御部30における処理の流れについて説明する。図8は、第一実施形態に係る車両用表示システムの車両用表示制御装置の制御部における処理の流れを示すフローチャートである。この処理は、車両用表示システム1の起動中実行される。
制御部30は、判断部60で、車両100が停止していると判断されたか否かを判定する(ステップS31)。
制御部30は、判断部60で、車両100が停止していないと判断された場合(ステップS31でNo)、ステップS36に進む。
制御部30は、判断部60で、車両100が停止していると判断された場合(ステップS31でYes)、ステップS32に進む。
制御部30は、判断部60で、乗員降車可能性ありと判断されたか否かを判定する(ステップS32)。
制御部30は、判断部60で、乗員降車可能性なしと判断された場合(ステップS32でNo)、ステップS36に進む。
制御部30は、判断部60で、乗員降車可能性ありと判断された場合(ステップS32でYes)、ステップS33に進む。
制御部30は、右サイドモニタ150および左サイドモニタ160に表示する映像として、第二範囲ARおよび第二範囲ALの第二右映像データ110R2および第二左映像データ110L2を選択させ表示させる(ステップS33)。より詳しくは、制御部30は、選択部70で、第二右映像データ110R2および第二左映像データ110L2を選択し、表示制御部90で、右サイドモニタ150および左サイドモニタ160に対して、第二右映像データ110R2および第二左映像データ110L2を表示させる。
制御部30は、第二範囲ARまたは第二範囲ALに近接移動体検出と判断されたか否かを判定する(ステップS34)。より詳しくは、制御部30は、認識部81で、第二範囲ARまたは第二範囲ALに移動体(後方移動体)が検出され、かつ、移動体が車両100に近接していると判断した場合、第二範囲ARまたは第二範囲ALに近接移動体が検出されたと判定する。
制御部30は、第二範囲ARまたは第二範囲ALに近接移動体検出と判断されなかった場合(ステップS34でNo)、ステップS31に戻って処理を繰り返す。
制御部30は、第二範囲ARまたは第二範囲ALに近接移動体検出と判断された場合(ステップS34でYes)、ステップS35に進む。
制御部30は、警告を行い(ステップS35)、ステップS31に戻って処理を継続する。より詳しくは、制御部30は、表示制御部90で、ステップS34で近接移動体が検出された側(以下、「検出側」という)の右サイドモニタ150または左サイドモニタ160に、文字やアイコンなどの警告表示を表示させる。または、制御部30は、表示制御部90で、検出側の右サイドモニタ150または左サイドモニタ160に、第二範囲ARまたは第二範囲ALを点滅させた警告表示を表示させ、かつ、スピーカーで音声を出力させてもよい。または、制御部30は、表示制御部90で、検出側の車両100のドア後端内側の照明を点灯させ、近接移動体にドアの開操作を認識させてもよい。さらに、制御部30は、検出側と、判断部60で乗員降車可能性ありと判断された側とが一致した場合、警告を行うようにしてもよい。より詳しくは、制御部30は、検出側と、車両100のドアロック解除が検出された側とが一致した場合、警告を行うようにしてもよい。または、制御部30は、検出側と、車両100のドアの車内側ノブへの接触が検出された側とが一致した場合、警告を行うようにしてもよい。または、制御部30は、検出側と、車両100のドアの車内側ノブへの操作が検出された側とが一致した場合、警告を行うようにしてもよい。または、制御部30は、検出側と、乗員に装着されていたシートベルトの解除操作が検出された側とが一致した場合、警告を行うようにしてもよい。
制御部30は、現在の右サイドモニタ150および左サイドモニタ160が第二範囲ARおよび第二範囲ALの第二右映像データ110R2および第二左映像データ110L2を表示しているか否かを判定する(ステップS36)。
制御部30は、現在の右サイドモニタ150および左サイドモニタ160が第二範囲ARおよび第二範囲ALの第二右映像データ110R2および第二左映像データ110L2を表示していないと判断された場合(ステップS36でNo)、処理を終了する。
制御部30は、現在の右サイドモニタ150および左サイドモニタ160が第二範囲ARおよび第二範囲ALの第二右映像データ110R2および第二左映像データ110L2を表示していると判断された場合(ステップS36でYes)、ステップS37に進む。
制御部30は、右サイドモニタ150および左サイドモニタ160に表示する映像として、側後方映像データ取得部41が取得した第二映像データを選択させ表示させる(ステップS37)。より詳しくは、制御部30は、選択部70で、第一右映像データ110R1および第一左映像データ110L1を選択させる。そして、表示制御部90で、右サイドモニタ150および左サイドモニタ160に対して、第一右映像データ110R1および第一左映像データ110L1を表示させる。
具体的には、第二範囲ARおよび第二範囲ALが図5に示すように設定されている場合、制御部30は、図9に示すように、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2および第二左映像データ110L2を表示させる。図9は、第一実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の他の例を示す図である。
または、第二範囲AR1および第二範囲AL1が図7に示すように設定されている場合、制御部30は、図10に示すように、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2および第二左映像データ110L2を表示させる。
このようにして、車両用表示システム1は、判断部60で判断した車両100の走行状況に基づき、選択部70が選択した映像データを、右サイドモニタ150および左サイドモニタ160に表示させる。
上述したように、本実施形態に係る車両用表示システム1は、判断部60で判断した車両100の走行状況に基づき、選択部70が選択した映像データを、右サイドモニタ150および左サイドモニタ160に表示させる。このように、車両用表示システム1は、車両100の走行状況に基づき、適切な映像データを右サイドモニタ150および左サイドモニタ160に表示することができる。具体的には、車両用表示システム1は、車両100が所定速度以上を所定時間以上継続している場合、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2および第二左映像データ110L2を表示する。これにより、車両100が所定速度以上を所定時間以上継続している場合、車両100の死角を含まない第二右映像データ110R2および第二左映像データ110L2で後方を側方より優先して確認することができる。これに対して、通常時は、第一右映像データ110R1および第一左映像データ110L1で車両100の側方を確認することができる。このように、車両用表示システム1は、走行状況に応じて適切な車両100周辺の確認を可能にすることができる。
このようにして、車両用表示システム1は、判断部60で判断した車両100の走行状況に基づき、選択部70が選択した映像データを、右サイドモニタ150および左サイドモニタ160に表示させる。
上述したように、本実施形態に係る車両用表示システム1は、判断部60で判断した車両100の走行状況に基づき、選択部70が選択した映像データを、右サイドモニタ150および左サイドモニタ160に表示させる。このように、車両用表示システム1は、車両100の走行状況に基づき、適切な右サイドモニタ150および左サイドモニタ160の表示をすることができる。具体的には、車両用表示システム1は、車両100が停止し、かつ、降車可能性がある場合、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2および第二左映像データ110L2を表示する。これにより、車両100が停止し、かつ、降車可能性がある場合、車両100の死角を含まない第二右映像データ110R2および第二左映像データ110L2で後方を側方より優先して確認することができる。これに対して、通常時は、第一右映像データ110R1および第一左映像データ110L1で車両100の側方を確認することができる。このため、車両用表示システム1は、走行状況に応じて適切な車両100周辺の確認を可能にすることができる。
車両用表示システム1は、乗員降車可能性があり、かつ、第二範囲ARまたは第二範囲ALに近接移動体が検出された場合、乗員に近接移動体があることを報知したり、近接移動体にドアが開操作されたことを報知したりする。これにより、車両用表示システム1は、乗員降車時に乗員の安全を確保することができる。
上述した実施形態においては、選択部70は、判断部60で車両100が停止し、かつ、降車可能性ありと判断された場合、第二右映像データ110R2および第二左映像データ110L2を選択し、それ以外においては第一右映像データ110R1および第一左映像データ110L1を選択した。判断部60は、乗員の降車可能性を左右独立して判断してもよい。この場合、選択部70は、映像データの選択を左右独立して行う。
判断部60が、車両100の右側に着座している乗員の降車可能性ありと判断した場合、または判断部60が、車両100の右側のドアロック解除やドアの車内側ノブ操作から乗員の降車可能性ありと判断した場合、選択部70は、右サイドモニタ150に表示する映像として、第二右映像データ110R2を選択する。この場合、左サイドモニタ160に表示させる映像は、第一左映像データ110L1の表示が維持される。
判断部60が、車両100の左側に着座している乗員の降車可能性ありと判断した場合、または判断部60が、車両100の左側のドアロック解除やドアの車内側ノブ操作から乗員の降車可能性ありと判断した場合、選択部70は、左サイドモニタ160に表示する映像として、第二左映像データ110L2を選択する。この場合、右サイドモニタ150に表示させる映像は、第一右映像データ110R1の表示が維持される。
車両用表示システム1は、乗員の降車可能性ありと判断した場合、車両100のエンジンが停止後も所定時間、右サイドモニタ150および左サイドモニタ160の表示を継続するようにしてもよい。車両100がEV車である場合、右サイドモニタ150および左サイドモニタ160の表示に要する電力は蓄電池から供給することができる。また、車両用表示システム1は、所定時間経過後、または、乗員の降車が完了し、車両100がドアロックされたことを検出した場合などに、右サイドモニタ150および左サイドモニタ160の表示をOFFにする。
図示した車両用表示システム1の各構成要素は、機能概念的なものであり、必ずしも物理的に図示の如く構成されていなくてもよい。すなわち、各装置の具体的形態は、図示のものに限られず、各装置の処理負担や使用状況などに応じて、その全部または一部を任意の単位で機能的または物理的に分散または統合してもよい。
車両用表示システム1の構成は、例えば、ソフトウェアとして、メモリにロードされたプログラムなどによって実現される。上記実施形態では、これらのハードウェアまたはソフトウェアの連携によって実現される機能ブロックとして説明した。すなわち、これらの機能ブロックについては、ハードウェアのみ、ソフトウェアのみ、または、それらの組み合わせによって種々の形で実現できる。
上記に記載した構成要素には、当業者が容易に想定できるもの、実質的に同一のものを含む。さらに、上記に記載した構成は適宜組み合わせが可能である。また、本発明の要旨を逸脱しない範囲において構成の種々の省略、置換または変更が可能である。
認識部81は、図8に示すフローチャートのステップS34において、さらに、車両100と検出した近接移動体までの距離が所定距離内であるか否かを判定してもよい。車両100と検出した近接移動体までの距離は、第一映像データ110Aから認識部81による近接移動体を検出した際に、検出した近接移動体の輪郭に基づく接地位置を特定し、接地位置の第一映像データ110Aにおける位置関係により求めることができる。
表示制御部90は、右サイドモニタ150および左サイドモニタ160に通常表示処理以外の表示処理を行う場合、通常表示ではないことを運転者などの認識可能に表示させてもよい。具体的には例えば、表示制御部90は、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2および第二左映像データ110L2を表示する場合、所定透明度の半透明で着色して表示してもよい。これにより、車両用表示システム1は、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2および第二左映像データ110L2を表示していることを認識させ易くなる。このため、車両用表示システム1は、適切な車両100周辺の確認を可能にすることができる。
1 車両用表示システム
10 車両用表示制御装置
30 制御部
40 映像データ取得部
41 側後方映像データ取得部
42 後方映像データ取得部
50 切出部
60 判断部
70 選択部
80 検出部
90 表示制御部
100 車両
110 後方カメラ
110A 第一映像データ
120 右側方カメラ(側後方カメラ)
130 左側方カメラ(側後方カメラ)
140 リヤビューモニタ
150 右サイドモニタ
160 左サイドモニタ
AC 第一範囲
AR 第二範囲
AL 第二範囲

Claims (11)

  1. 車両の後方に配置され、前記車両の後方を撮影する後方カメラからの第一映像データを取得する後方映像データ取得部と、
    前記車両の側方に配置され、前記車両の側後方を撮影する側後方カメラからの第二映像データを取得する側後方映像データ取得部と、
    前記後方映像データ取得部が取得した前記第一映像データの一部である第一範囲と、前記第一範囲の側方に位置する第二範囲とを切り出す切出部と、
    前記車両の乗員の降車可能性を判断する判断部と、
    前記判断部が判断した降車可能性に基づき、前記側後方映像データ取得部が取得した前記第二映像データと、前記切出部が切り出した前記第二範囲の映像データとからいずれか一方の映像データを選択する選択部と、
    前記選択部が選択した映像データを、前記車両の側方の映像を表示するサイドモニタに表示させ、前記第一範囲として切り出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させる表示制御部と
    を備えることを特徴とする車両用表示制御装置。
  2. 前記判断部は、前記車両が停止している判断に加えて、前記車両から乗員が降車する降車可能性があるか否かを判断し、
    前記選択部は、前記判断部で前記車両が停止し、かつ、前記降車可能性ありと判断された場合、前記切出部が切り出した前記第二範囲の映像データを選択する
    請求項1に記載の車両用表示制御装置。
  3. 前記判断部は、前記車両のドアロック解除または前記車両のドアの車内側ノブへの接触検出または前記車両のドアの車内側ノブへの操作検出または前記乗員に装着されていたシートベルトの解除操作のいずれかが検出された場合、前記降車可能性ありと判断する
    請求項2に記載の車両用表示制御装置。
  4. 前記判断部は、前記車両の乗員の降車可能性を、前記車両の左右方向に対して独立して判断し、
    前記選択部は、前記判断部が判断した前記車両の降車可能性に基づき、降車可能性のある方向に対して映像を選択する
    請求項1から3のいずれか一項に記載の車両用表示制御装置。
  5. 前記第一映像データにおいて、移動体認識を行い、後方移動体の存在および前記車両に近接しているか否かを検出する検出部を備え、
    前記表示制御部は、前記検出部で、前記車両に近接している前記後方移動体を検出した場合、前記車両に近接している前記後方移動体の存在を報知する報知部に報知させる
    請求項1から4のいずれか一項に記載の車両用表示制御装置。
  6. 前記切出部は、前記側後方映像データ取得部が取得した前記第二映像データに基づき、前記サイドモニタに表示される範囲において前記車両の車体の映り込みにより後方視界が阻害される範囲を含む範囲を前記第二範囲として切り出す
    請求項1から5のいずれか一項に記載の車両用表示制御装置。
  7. 前記切出部は、前記第一範囲の側方端部と前記第二範囲とが一部重なるように切り出す
    請求項1から6のいずれか一項に記載の車両用表示制御装置。
  8. 前記切出部は、前記第二範囲を、前記第一範囲に対して下方に位置するように切り出す
    請求項1から7のいずれか一項に記載の車両用表示制御装置。
  9. 請求項1から8のいずれか一項に記載の車両用表示制御装置と、
    前記後方カメラ、前記側後方カメラ、前記リヤビューモニタ、前記サイドモニタのうち少なくともいずれかを備える
    ことを特徴とする車両用表示システム。
  10. 車両の後方に配置され、前記車両の後方を撮影する後方カメラからの第一映像データを取得する後方映像データ取得ステップと、
    前記車両の側方に配置され、前記車両の側後方を撮影する側後方カメラからの第二映像データを取得する側後方映像データ取得ステップと、
    前記後方映像データ取得ステップで取得した前記第一映像データの一部である第一範囲と、前記第一範囲の側方に位置する第二範囲とを切り出す切出ステップと、
    前記車両の乗員の降車可能性を判断する判断ステップと、
    前記判断ステップで判断した降車可能性に基づき、前記側後方映像データ取得ステップで取得した前記第二映像データと、前記切出ステップで切り出した前記第二範囲の映像データとからいずれか一方の映像データを選択する選択ステップと、
    前記選択ステップで選択した映像データを、前記車両の側方の映像を表示するサイドモニタに表示させ、前記第一範囲として切り出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させる表示制御ステップと
    を含む車両用表示制御方法。
  11. 車両の後方に配置され、前記車両の後方を撮影する後方カメラからの第一映像データを取得する後方映像データ取得ステップと、
    前記車両の側方に配置され、前記車両の側後方を撮影する側後方カメラからの第二映像データを取得する側後方映像データ取得ステップと、
    前記後方映像データ取得ステップで取得した前記第一映像データの一部である第一範囲と、前記第一範囲の側方に位置する第二範囲とを切り出す切出ステップと、
    前記車両の乗員の降車可能性を判断する判断ステップと、
    前記判断ステップで判断した降車可能性に基づき、前記側後方映像データ取得ステップで取得した前記第二映像データと、前記切出ステップで切り出した前記第二範囲の映像データとからいずれか一方の映像データを選択する選択ステップと、
    前記選択ステップで選択した映像データを、前記車両の側方の映像を表示するサイドモニタに表示させ、前記第一範囲として切り出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させる表示制御ステップと
    を車両用表示制御装置として動作するコンピュータに実行させるためのプログラム。
JP2016051385A 2016-03-09 2016-03-15 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム Active JP6575404B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2016051385A JP6575404B2 (ja) 2016-03-15 2016-03-15 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
PCT/JP2016/089116 WO2017154316A1 (ja) 2016-03-09 2016-12-28 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
US15/967,709 US10531016B2 (en) 2016-03-09 2018-05-01 On-vehicle display control device, on-vehicle display system, on-vehicle display control method, and non-transitory storage medium
US16/565,654 US10567672B2 (en) 2016-03-09 2019-09-10 On-vehicle display control device, on-vehicle display system, on-vehicle display control method, and non-transitory storage medium
US16/565,665 US10567673B2 (en) 2016-03-09 2019-09-10 On-vehicle display control device, on-vehicle display system, on-vehicle display control method, and non-transitory storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016051385A JP6575404B2 (ja) 2016-03-15 2016-03-15 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2017165218A JP2017165218A (ja) 2017-09-21
JP6575404B2 true JP6575404B2 (ja) 2019-09-18

Family

ID=59912470

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016051385A Active JP6575404B2 (ja) 2016-03-09 2016-03-15 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム

Country Status (1)

Country Link
JP (1) JP6575404B2 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6984079B2 (ja) * 2017-10-30 2021-12-17 ダイハツ工業株式会社 駐車支援装置
KR102441079B1 (ko) * 2017-11-30 2022-09-06 현대자동차주식회사 차량의 디스플레이 제어 장치 및 방법
US20210284069A1 (en) * 2018-07-13 2021-09-16 Maxell Frontier Co., Ltd. Vehicle display device
JP7349646B2 (ja) * 2020-02-06 2023-09-25 パナソニックIpマネジメント株式会社 表示システム、カメラモニタリングシステム、表示方法、及び表示プログラム
JP7491208B2 (ja) 2020-12-22 2024-05-28 トヨタ自動車株式会社 降車動作判定装置、車両、降車動作判定法及びプログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3916958B2 (ja) * 2002-01-24 2007-05-23 クラリオン株式会社 車両後方モニタシステムおよびモニタ装置
JP2005223524A (ja) * 2004-02-04 2005-08-18 Nissan Motor Co Ltd 車両周辺監視装置
JP4731392B2 (ja) * 2006-04-26 2011-07-20 アルパイン株式会社 車載周辺状況提示装置
JP5347257B2 (ja) * 2007-09-26 2013-11-20 日産自動車株式会社 車両用周辺監視装置および映像表示方法
JP5310017B2 (ja) * 2009-01-16 2013-10-09 株式会社デンソー 車両用表示装置及びそれを備えた車両周辺視野表示システム
JP5321711B2 (ja) * 2012-04-23 2013-10-23 日産自動車株式会社 車両用周辺監視装置および映像表示方法
JP2014116756A (ja) * 2012-12-07 2014-06-26 Toyota Motor Corp 周辺監視システム
JP2015144407A (ja) * 2013-12-27 2015-08-06 株式会社Jvcケンウッド 視界支援装置、視界支援方法、及び視界支援プログラム

Also Published As

Publication number Publication date
JP2017165218A (ja) 2017-09-21

Similar Documents

Publication Publication Date Title
JP6575404B2 (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP5088669B2 (ja) 車両周辺監視装置
JP5744352B2 (ja) 車両周辺表示装置
JP6217172B2 (ja) 車室内監視装置
JP6020507B2 (ja) 車両用画像表示装置及び車両用画像表示方法
CN107298051A (zh) 当操作机动车辆时改善情境感知的系统和方法
JP2012140106A (ja) 後方視界支援システム
US10567673B2 (en) On-vehicle display control device, on-vehicle display system, on-vehicle display control method, and non-transitory storage medium
US20150296140A1 (en) Panoramic view blind spot eliminator system and method
JP2006227811A (ja) 運転支援装置
US9981598B2 (en) Alighting notification device
JP2015213305A (ja) 携行可能な情報機器のための機器制御方法および機器制御システム
US11628801B2 (en) Wheelchair securing structure
US20180330619A1 (en) Display device and display method for displaying pictures, and storage medium
JP2010208359A (ja) 車両用表示装置
JP2008120142A (ja) 自動車用情報表示システム
JP6115278B2 (ja) 車両用表示装置
JP2018148530A (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
WO2017154317A1 (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP2019110518A (ja) 撮像装置および撮像システム
CN109690559A (zh) 用于提供车辆环境信息的装置
JP2008282235A (ja) 運転支援装置、運転支援装置を搭載した自動車、および運転支援方法
CN115336248B (zh) 车辆用记录控制装置以及记录控制方法
JP2017163345A (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
WO2020179656A1 (ja) 運転者監視装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190207

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190723

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190805

R150 Certificate of patent or registration of utility model

Ref document number: 6575404

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150