JP2013098919A - Vehicle periphery monitoring device - Google Patents
Vehicle periphery monitoring device Download PDFInfo
- Publication number
- JP2013098919A JP2013098919A JP2011242494A JP2011242494A JP2013098919A JP 2013098919 A JP2013098919 A JP 2013098919A JP 2011242494 A JP2011242494 A JP 2011242494A JP 2011242494 A JP2011242494 A JP 2011242494A JP 2013098919 A JP2013098919 A JP 2013098919A
- Authority
- JP
- Japan
- Prior art keywords
- display
- image
- monitoring
- area
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
Abstract
Description
この発明は、車両に搭載された撮像部から出力された撮像画像に基づいて、前記車両の周辺における監視対象物を検出する車両周辺監視装置に関する。 The present invention relates to a vehicle periphery monitoring device that detects a monitoring object around the vehicle based on a captured image output from an imaging unit mounted on the vehicle.
従来の車両周辺監視装置として、赤外線カメラによる車両前方の画像を運転席前方のHUD(Head Up Display)に表示するとともに、当該画像から検出された歩行者の画像部位を強調表示する装置が知られている。 2. Description of the Related Art As a conventional vehicle periphery monitoring device, a device that displays an image in front of a vehicle by an infrared camera on a HUD (Head Up Display) in front of a driver's seat and highlights an image part of a pedestrian detected from the image is known. ing.
監視対象物がどの範囲に存在するか等を詳細に知りたい場合、運転者は、ディスプレイを見ることで、監視対象物を認識するが、従来の車両周辺監視装置においては、撮像された画像を表示するので、色々な情報が表示されてしまい、監視対象物を瞬時に把握することが困難であった。 When the driver wants to know in detail what range the monitoring object is in, the driver recognizes the monitoring object by looking at the display. However, in the conventional vehicle periphery monitoring device, the captured image is displayed. Since it is displayed, various information is displayed, and it is difficult to instantly grasp the monitoring object.
本発明は上記した問題を解決するためになされたもので、画像から検出された監視対象物の存否及び位置を極めて容易に把握可能な車両周辺監視装置を提供することを目的とする。 The present invention has been made to solve the above-described problems, and an object of the present invention is to provide a vehicle periphery monitoring device that can very easily grasp the presence / absence and position of a monitoring target detected from an image.
本発明に係る車両周辺監視装置は、車両に搭載された撮像部が前記車両前方の風景が撮像することによって得られた撮像画像に基づいて、前記車両の前方にいる監視対象物を検出する車両周辺監視装置であって、前記撮像画像に基づいて前記監視対象物を検出する監視対象物検出部と、前記撮像画像は予め決められた複数の画像分割領域に分けられ、検出された前記監視対象物が前記撮像画像のどの前記画像分割領域に存在するかを判断する画像分割領域判断部と、前記撮像画像を第1表示部に表示する第1表示制御部と、判断された前記画像分割領域に対応する第2表示部の表示分割領域に、前記監視対象物をシンボル化したマークを表示することで、前記監視対象物の存在を表示させる第2表示制御部と、を備え、前記第2表示制御部は、前記監視対象物が同一の前記画像分割領域に複数存在する場合は、前記監視対象物の存在を強調して表示させることを特徴とする。 A vehicle periphery monitoring device according to the present invention is a vehicle in which an imaging unit mounted on a vehicle detects a monitoring object in front of the vehicle based on a captured image obtained by imaging a landscape in front of the vehicle. A peripheral monitoring device, wherein the monitoring target detection unit detects the monitoring target based on the captured image, and the captured image is divided into a plurality of predetermined image division regions, and the detected monitoring target An image division region determination unit that determines in which image division region of the captured image the object is present, a first display control unit that displays the captured image on the first display unit, and the determined image division region A second display control unit for displaying the presence of the monitored object by displaying a mark symbolized from the monitored object in a display divided region of the second display unit corresponding to the second display unit, The display control unit If the monitored object is a plurality in the same of the image segmentation region is characterized by displaying and emphasizing the presence of the monitored object.
このように、運転者は第2表示部を一見するだけで、監視対象物の存否、監視対象物が存在する場合はその位置を容易且つ瞬時に把握することができる。また、監視対象物が同じエリアにかたまって多数存在する場合は、監視対象物が飛び出してくる可能性が高くなるので、監視対象物の存在を強調して表示させることで、運転者に注意喚起を促すことができる。 As described above, the driver can easily and instantly grasp the presence / absence of the monitoring target object and the position of the monitoring target object when there is the monitoring target only by looking at the second display unit. Also, if there are many monitoring objects in the same area, the possibility of the monitoring objects popping out increases, so the presence of the monitoring object is highlighted and displayed to alert the driver. Can be encouraged.
第2表示制御部は、前記監視対象物が同一の前記画像分割領域に複数存在する場合は、前記マークを表示させる前記表示分割領域を拡張し、複数の前記表示分割領域に前記マークを表示させることで、前記監視対象物の存在を強調して表示させてもよい。このように、監視対象物が同じエリアにかたまって多数存在する場合は、監視対象物が飛び出してくる可能性が高くなるので、マークを表示させる表示分割領域を拡張することで、監視対象物が飛び出してくるかもしれないエリアに対しても運転者に注意喚起を促すことができる。 The second display control unit expands the display division area for displaying the mark and displays the mark in the plurality of display division areas when a plurality of the monitoring objects exist in the same image division area. Thus, the presence of the monitoring object may be highlighted and displayed. In this way, when there are a large number of monitoring objects in the same area, there is a high possibility that the monitoring objects will pop out, so by expanding the display division area where the mark is displayed, the monitoring objects The driver can be alerted to areas that may come out.
検出された前記監視対象物の移動方向を検出する移動方向検出部を備え、第2表示制御部は、前記監視対象物が同一の前記画像分割領域に複数存在する場合は、前記監視対象物の移動方向に応じて、前記マークを表示させる前記表示分割領域を拡張してもよい。これにより、監視対象物が同じエリアに多数存在し、少なくとも何れか1つの監視対象物が車両に接近している場合は、監視対象物と車両とが接触する可能性が高いので、マークを表示させる表示分割領域を拡張することで、監視対象物が飛び出してくるエリアに対しても運転者に注意喚起を促すことができる。 A movement direction detection unit that detects a movement direction of the detected monitoring object, and the second display control unit is configured to detect the monitoring object when a plurality of the monitoring objects exist in the same image division region. The display divided area for displaying the mark may be expanded according to the moving direction. As a result, when there are many monitoring objects in the same area and at least one of the monitoring objects is close to the vehicle, the mark is displayed because the monitoring object and the vehicle are likely to contact each other. By expanding the display division area to be activated, the driver can be alerted to the area where the monitored object pops out.
前記第2表示制御部は、前記検出された前記監視対象物が前記撮像画像の中央にある前記画像分割領域に複数存在する場合は、前記マークを表示させる前記表示分割領域を拡張しなくてもよい。 The second display control unit does not need to expand the display division region for displaying the mark when there are a plurality of the detected monitoring objects in the image division region in the center of the captured image. Good.
本発明に係る車両周辺監視装置によれば、運転者は第2表示部を一見するだけで、監視対象物の存否、監視対象物が存在する場合はその位置を容易且つ瞬時に把握することができる。また、監視対象物が同じエリアにかたまって多数存在する場合は、少なくとも1つが飛び出してくる可能性が高いので、監視対象物の存在を強調して表示させることで、運転者に注意喚起を促すことができる。 According to the vehicle periphery monitoring apparatus according to the present invention, the driver can easily and instantly grasp the presence / absence of the monitoring target object and the position of the monitoring target object when the monitoring target exists only by looking at the second display unit. it can. In addition, when there are a large number of monitoring objects in the same area, there is a high possibility that at least one of the monitoring objects will pop out, so that the driver is alerted by highlighting the presence of the monitoring object. be able to.
以下、本発明に係る車両周辺監視装置について好適な実施形態を挙げ、添付の図面を参照して説明する。 Hereinafter, preferred embodiments of a vehicle periphery monitoring device according to the present invention will be described with reference to the accompanying drawings.
図1は、本実施の形態に係る車両周辺監視装置10の構成を示す電気ブロック図である。図2は、図1に示す車両周辺監視装置10が組み込まれた車両12の概略斜視図である。図3は、図2に示す車両12の、運転者側から視た前方内観図である。なお、この車両12は、自動車が右側走行することを取り決められている国の道路を走行している状況を示しており、車両12は左ハンドル車として図示されている。
FIG. 1 is an electric block diagram showing a configuration of a vehicle
車両周辺監視装置10は、この車両周辺監視装置10を制御する画像処理部14と、画像処理部14に接続される左右の赤外線カメラ16L、16R(撮像部)と、車両12の車速Vsを検出する車速センサ18と、運転者による図示しないブレーキペダルの操作量Br(ブレーキ操作量Br)を検出するブレーキセンサ20と、車両12のヨーレートYrを検出するヨーレートセンサ22と、音声で警報等を発するためのスピーカ24と、赤外線カメラ16L、16Rから出力された撮像画像を表示する汎用ディスプレイ26と、車両12の運転の際の付随情報を可視化して表示するMID(Multi-Information Display)28と、記憶部30とを備える。
The vehicle
図2に示すように、ステレオカメラとして機能する赤外線カメラ16L、16Rは、車両12前方の風景を撮像するものであり、車両12の前部バンパー部に、車両12の車幅方向中心部に対してほぼ対称な位置に配置されている。2つの赤外線カメラ16(赤外線カメラ16L、16R)の光軸が互いに平行であって、且つ両者の路面からの高さが等しくなるように固定されている。赤外線カメラ16L、16Rは、監視対象物の温度が高いほど、その出力信号レベルが高くなる(輝度が増加する)特性を有している。
As shown in FIG. 2, the infrared cameras 16 </ b> L and 16 </ b> R functioning as a stereo camera image the scenery in front of the
ここで、赤外線カメラ16を2つ備える理由としては、監視対象物までの距離を算出するためである。従って、赤外線カメラ16L、16Rのうち何れか一方の赤外線カメラ16で得られた撮像画像が基本的に用いられ、他方の赤外線カメラ16で撮像して得られた撮像画像は、監視対象物までの距離の算出時のみ用いられる。本実施の形態では、赤外線カメラ16Lによって得られた撮像画像(以下、撮像画像IL)を基本的に用い、赤外線カメラ16Rによって得られた撮像画像(以下、撮像画像IR)は、監視対象物までの距離の算出時のみ用いられる。
Here, the reason for providing two infrared cameras 16 is to calculate the distance to the monitoring object. Therefore, the captured image obtained by one of the
なお、本発明の撮像部は、図2に示す構成例に限られることなく、種々の構成を採り得る。例えば、撮像部は、複眼カメラ(ステレオカメラ)であっても単眼カメラ(1つのカメラ)であってもよい。単眼カメラの場合、別の測距手段(レーダ装置、測距センサ等)を併せて備えていてもよく、TOF(Time Of Flight)法を用いて被写体まで距離を算出してもよい。TOF法とは、簡単に説明すると、光源から出た光が対象物で反射し、カメラに届くまでの光の飛行時間(遅れ時間)と光の速度とから、被写体までの距離を得る手法である。また、赤外線カメラに代替して、主に可視光領域の波長を有する光を利用するカメラ(カラーカメラともいう。)を用いてもよく、あるいは両方を併せ備えてもよい。また、撮像部は、複数のカメラを有してもよい。 The imaging unit of the present invention is not limited to the configuration example shown in FIG. For example, the imaging unit may be a compound eye camera (stereo camera) or a monocular camera (one camera). In the case of a monocular camera, another distance measuring means (a radar device, a distance measuring sensor, or the like) may be provided, and the distance to the subject may be calculated using a TOF (Time Of Flight) method. To explain simply, the TOF method is a method of obtaining the distance to the subject from the flight time (delay time) of light until the light emitted from the light source is reflected by the object and reaches the camera, and the speed of the light. is there. Instead of an infrared camera, a camera that mainly uses light having a wavelength in the visible light region (also referred to as a color camera) may be used, or both may be provided. The imaging unit may include a plurality of cameras.
図2及び図3に示すように、ダッシュボード40には、その下部から図示しない運転席の方へ突出するハンドル42が配設されている。ハンドル42の中心位置に揃えた位置であり、且つ、計器盤44の上側近傍のダッシュボード40(あるいは、計器盤44内)の部位には、MID(第2表示部)28が配設されている。これにより、運転者は、車両12の前方へ顔を向けたままの状態で、MID28を正視することができ、MID28への視認性が向上する。なお、汎用ディスプレイ(第1表示部)26は、ダッシュボード40の所定部位(具体的には、MID28の配設位置に対して右方の部位)に配設されている。
As shown in FIGS. 2 and 3, the
図4Aは汎用ディスプレイ26の正面図であり、図4BはMID28の正面図である。
4A is a front view of the general-
図4Aに示す汎用ディスプレイ26の略全面には、横方向に長尺な矩形状の第1表示領域46が設けられている。本図では、赤外線カメラ16Lから出力された撮像画像ILを、第1表示領域46内に表示した状態を表している。汎用ディスプレイ26は、カラー画像又はモノクロ画像が表示可能なモジュールであり、例えば液晶パネル、有機EL(Electro-Luminescence)、無機ELパネル等で構成されてもよい。この場合、汎用ディスプレイ26は、任意の画像、例えば、カーナビゲーション用の各種画像(道路地図、サービス情報等)、動画コンテンツ等も表示可能である。
A rectangular
図4Bに示すMID28の略全面には、横方向に長尺な矩形状の第2表示領域48が設けられている。第2表示領域48には、第1表示領域46に表示される所定の特徴部位のみを抽出して模擬化した模擬画像50が表示されている。具体的には、模擬画像50は、車両前方に見える道路を模式化した道路52を有し、道路52は、ライン52L、52C、52Rを含む。道路52は、遠近法を用いて表され、詳しくは、ライン52L、52R間の幅は、上側になるほど狭くなっている。このライン52L、52C、52Rにより、運転席から前方を眺めた時の直線道路を運転者に想起させることができる。なお、MID28は、このライン52L、52C、52Rを電気的に表示するのではなく、機械的若しくは構造的に表示させてもよい。例えば、予めMID28の第2表示領域48にライン52L、52C、52Rを示す部材を貼り付けることで、模式的に道路52を表示してもよい。つまり、MID28には、車両前方に見える道路を模式化された道路52が表されていればよい。
A rectangular
MID28は、汎用ディスプレイ26よりも構成が簡便で、且つ、安価な表示モジュールである。MID28は、燃費、現在時刻、計器盤44に関する情報等を表示可能であってもよい。
The
画像処理部14は、入力されたアナログ信号をデジタル信号に変換するA/D変換回路、各種演算処理を実行するCPU(中央処理装置;コンピュータ)等を有し(図示略)、記憶部30に記憶されたプログラムを読み込むことによって、本実施の形態の画像処理部14として機能する。記憶部30は、デジタル信号に変換された撮像画像IL、IR、各種演算処理に供される一時データ等を記憶するRAM(Random Access Memory)、あるいは、実行プログラム、テーブル、若しくはマップ等を記憶するROM(Read Only Memory)等で構成されている。
The
赤外線カメラ16L、16R、車速センサ18、ブレーキセンサ20及びヨーレートセンサ22の各出力信号は、デジタル信号として画像処理部14に供給可能に構成されている。
The output signals of the
画像処理部14は、対象物検出部60、画像分割領域判断部62、移動方向検出部64、危険度評価部66、表示分割領域選択部68、第1表示制御部70、及び第2表示制御部72を有する。この画像処理部14による各種処理により、画像処理部14は、赤外線カメラ16L、16Rが撮像した車両12前方の撮像画像(赤外線画像)IL、IRと、車両12の走行状態を示す各種信号(例えば、車速Vs、ブレーキ操作量Br及びヨーレートYr)等とから、車両12の前方に存在する監視対象物を検出し、監視対象物に車両12が接触する可能性が高いと判断したとき、スピーカ24等を通じて警報を発する。
The
対象物検出部60は、赤外線カメラ16Lが撮像して得られた撮像画像ILに基づいて、該撮像画像IL内に監視対象物(人間)が存在するか否かを検出する。検出手法としては、例えば、パターンマッチング手法(人間の特徴を示す特徴データと撮像された撮像画像ILとをマッチングすることで、人間を検出する手法)等を採用してもよい。
The
画像分割領域判断部62は、対象物検出部60が検出した監視対象物が撮像画像ILのどの画像分割領域に存在するかを判断する。対象物検出部60が複数の監視対象物を検出した場合は、画像分割領域判断部62は、それぞれの監視対象物が撮像画像ILのどの画像分割領域に存在するかを判断する。なお、撮像画像ILは、後述するように予め決められた複数の画像分割領域に分けられる。
The image segmentation
移動方向検出部64は、対象物検出部60が検出した監視対象物の移動方向を検出する。移動方向検出部64は、監視対象物の動きベクトルを算出することで、移動方向を検出する。例えば、移動方向検出部64は、前回検出された監視対象物が今回撮像された撮像画像ILのどこにいるかをブロックマッチング法等によって検出して、前回検出された監視対象物の位置とブロックマッチング法等によって検出された今回の監視対象物の位置とから動きベクトルを求めることで、監視対象物の移動方向を検出する。
The movement
危険度評価部66は、監視対象物が飛び出してくる確率(危険度)の高さを評価する。詳しくは、危険度評価部66は、監視対象物が同一の画像分割領域に複数存在する場合は、危険度が高いと評価する。同一の画像分割領域に監視対象物が複数存在する場合は、監視対象物が車両12の進行方向に対して飛び出してくる確率が高くなるからである。なお、危険度評価部66は、監視対象物が同一の画像分割領域に複数存在する場合であって、何れかの監視対象物が車両12の進行方向に向かって移動している場合に、危険度が高いと評価してもよい。
The
表示分割領域選択部68は、画像分割領域判断部62が判断した監視対象物が存在する画像分割領域に対応するMID28の第2表示領域48の表示分割領域を選択する。この表示分割領域については、後で詳しく説明する。表示分割領域選択部68は、危険度評価部66により危険度が高いと評価された場合は、選択する表示分割領域を拡張し、複数の表示分割領域を選択してもよい。なお、危険度評価部66により危険度が高いと評価された場合であっても、検出された監視対象物が撮像画像ILの中央にある画像分割領域に複数存在する場合は、選択する表示分割領域を拡張しない。
The display division area selection unit 68 selects the display division area of the
第1表示制御部70は、赤外線カメラ16Lが撮像して得られた撮像画像ILを汎用ディスプレイ26の第1表示領域46に表示させる。第2表示制御部72は、表示分割領域選択部68が選択した表示分割領域に、監視対象物をシンボル化したマーク(図7B、図8B等参照)100を表示させる。表示されるマーク100の数は、表示分割領域につき1つだけ表示させ、1つの表示分割領域に同一のマーク100を複数表示させない。また、第2表示制御部72は、監視対象物が同一の画像分割領域に複数存在する場合は、監視対象物の存在を強調表示させる。
The first
この監視対象物の強調表示の方法としては、例えば、監視対象物が複数存在する画像分割領域に対応する表示分割領域にマーク100を強調表示させることで、監視対象物の存在を強調表示させてもよい。マーク100の強調表示としては、マーク100の色を変える、マーク100を動かす、マーク100を点滅表示させる等がある。また、表示分割領域選択部68が、選択する表示分割領域を拡張した場合は、選択した各表示分割領域にマーク100を表示させることで、監視対象物の存在を強調表示させてもよい。
As a method for highlighting the monitoring object, for example, the presence of the monitoring object is highlighted by highlighting the
図5は、撮像画像ILの画像分割領域及び撮像画像ILの画像分割領域に対応する表示分割領域を示す図である。撮像画像ILは、3つの画像分割領域、左から順に、左側画像分割領域82、中央画像分割領域84、右側画像分割領域86に分けられており、MID28の第2表示領域48は、3つの表示分割領域、左から順に、左側表示分割領域92、中央表示分割領域94、右側表示分割領域96に分けられている。左側画像分割領域82は左側表示分割領域92に、中央画像分割領域84は中央表示分割領域94に、右側画像分割領域86は右側表示分割領域96にそれぞれ対応付けられている。点92aは、左側表示分割領域92におけるマーク100の表示位置を示し、点94aは、中央表示分割領域94におけるマーク100の表示位置を示し、点96aは、右側表示分割領域96におけるマーク100の表示位置を示している。なお、画像分割領域及び表示分割領域は、MID28の第2表示領域48に表示される道路52のライン52L、52Rに沿う形(ハの字)に分割されていてもよい。また、画像分割領域及び表示分割領域は、第1表示領域46、第2表示領域48を4つ以上に分割した領域であってもよい。
FIG. 5 is a diagram illustrating display divided areas corresponding to the image divided areas of the captured image IL and the image divided areas of the captured image IL. The captured image IL is divided into three image division areas, a left
表示分割領域選択部68は、監視対象物が左側画像分割領域82に存在する場合は、左側表示分割領域92を選択し、第2表示制御部72は、表示分割領域選択部68が選択した左側表示分割領域92の表示位置92aにマーク100を表示させる。また、表示分割領域選択部68は、監視対象物が中央画像分割領域84に存在する場合は、中央表示分割領域94を選択し、第2表示制御部72は、表示分割領域選択部68が選択した中央表示分割領域94の表示位置94aにマーク100を表示させる。また、表示分割領域選択部68は、監視対象物が右側画像分割領域86に存在する場合は、右側表示分割領域96を選択し、第2表示制御部72は、表示分割領域選択部68が選択した右側表示分割領域96の表示位置96aにマーク100を表示させる。従って、第2表示制御部72は、複数の監視対象物が同一の画像分割領域に存在する場合であっても、該画像分割領域に対応する表示分割領域には1つのマーク100しか表示させないことになる。
The display divided region selection unit 68 selects the left display divided
本実施の形態に係る車両周辺監視装置10は、基本的には以上のように構成される。続いて、この車両周辺監視装置10の動作の一例を、図6のフローチャートに沿って、他の図面を適宜参照しながら説明する。
The vehicle
画像処理部14は、赤外線カメラ16L、16Rによって得られた撮像画像IL、IRを取得する(ステップS1)。赤外線カメラ16L、16Rは、所定のフレームレート、例えば、30fps(1秒間に30フレームを撮像するフレームレート)で撮像を行うものとする。なお、図6のフローチャートに示す動作は、1/30秒周期で実行するものとする。つまり、赤外線カメラ16L、16Rが1回撮像するたびに図6のフローチャートに示す動作が実行される。
The
次いで、対象物検出部60は、ステップS1で取得した撮像画像ILに基づいて、撮像画像IL内に存在する監視対象物を検出する(ステップS2)。対象物検出部60は、撮像画像IL内に複数の監視対象物が存在する場合は、複数の監視対象物を検出する。
Next, the
次いで、画像分割領域判断部62は、ステップS2で検出された監視対象物が撮像画像ILのどの画像分割領域に存在するかを判断する(ステップS3)。画像分割領域判断部62は、複数の監視対象物が検出された場合は、それぞれの監視対象物がどの画像分割領域に存在するかを判断する。
Next, the image division
次いで、表示分割領域選択部68は、ステップS3で判断した監視対象物が存在する画像分割領域に対応するMID28の第2表示領域48の表示分割領域を選択する(ステップS4)。例えば、画像分割領域判断部62により監視対象物が右側画像分割領域86に存在すると判断された場合は、表示分割領域選択部68は、右側表示分割領域96を選択する。
Next, the display divided area selection unit 68 selects the display divided area of the
次いで、危険度評価部66は、複数の監視対象物が同一の画像分割領域に存在するか否かを判断する(ステップS5)。この判断は、ステップS3の判断結果に基づいて判断する。
Next, the
ステップS5で、複数の監視対象物が同一の画像分割領域に存在しない場合は、危険度評価部66は危険度が低いと評価してステップS6に進み、ステップS5で、複数の監視対象物が同一の画像分割領域に存在する場合は、危険度評価部66は危険度が高いと評価してステップS7に進む。
If a plurality of monitoring objects do not exist in the same image segmentation area in step S5, the
ステップS6に進むと、第2表示制御部72は、ステップS4で選択した表示分割領域の表示位置で、監視対象物をシンボル化したマーク100をMID28に表示させて、ステップS8に進む。
In step S6, the second
図7Aは、ステップS1で取得した撮像画像ILの一例を示し、図7Bは、図7Aに示す撮像画像ILを取得した場合に、ステップS6でMID28の第2表示領域48に表示される模擬画像50の一例を示す図である。
7A shows an example of the captured image IL acquired in step S1, and FIG. 7B shows a simulated image displayed in the
図7Aに示すように、中央画像分割領域84に監視対象物H1が存在し、右側画像分割領域86に監視対象物H2が存在し、同一の画像分割領域には複数の監視対象物が存在しないことがわかる。
As shown in FIG. 7A, the monitoring object H1 exists in the central
図7Aは、監視対象物H1、H2が中央画像分割領域84と右側画像分割領域86に存在するので、ステップS4で、選択される表示分割領域は、中央表示分割領域94と右側表示分割領域96となり、図7Bに示すように、ステップS6で、マーク100は、中央表示分割領域94の表示位置94aと、右側表示分割領域96の表示位置96aとに表示される。これにより、監視対象物の存在がMID28に表示され、運転者は、視線を前方に向けたままの状態でMID28を一見するだけで、監視対象物の存否、監視対象物が存在する場合にはその位置を容易且つ瞬時に把握することができる。なお、マーク100は、所定の色(例えば、黄色)で表示される。
In FIG. 7A, since the monitoring objects H1 and H2 exist in the central image divided
一方、ステップS7に進むと、第2表示制御部72は、ステップS4で選択した表示分割領域の表示位置で、監視対象物をシンボル化したマーク100を強調してMID28に表示させて、ステップS8に進む。これにより、監視対象物の存在が強調表示されることになる。このシンボル化したマーク100の強調表示は、監視対象物が複数存在すると判断された画像分割領域に対応する表示分割領域に対してのみ行い、1つの監視対象物しか存在しない画像分割領域に対応する表示分割領域には、マーク100を強調しないで単に表示させる。
On the other hand, when the process proceeds to step S7, the second
図8Aは、ステップS1で取得した撮像画像ILの一例を示し、図8Bは、図8Aに示す撮像画像ILを取得した場合に、ステップS7でMID28の第2表示領域48に表示される模擬画像50の一例を示す図である。図8Aに示すように、右側画像分割領域86に複数の監視対象物H1、H2、H3が存在することがわかる。
FIG. 8A shows an example of the captured image IL acquired in step S1, and FIG. 8B shows a simulated image displayed in the
図8Aは、監視対象物H1、H2、H3が右側画像分割領域86に存在するので、ステップS4で、選択される表示分割領域は右側表示分割領域96となり、図8Bに示すように、ステップS7で、マーク100は、右側表示分割領域96の表示位置96aに表示される。ここで、右側画像分割領域86には、複数の監視対象物H1、H2、H3が存在するので、右側表示分割領域96に、マーク100を強調して表示させる。図8Bに示す例では、便宜上、マーク100を斜線で表すことで強調表示しているが、ステップS6で表示されるマーク100の色(所定の色)とは異なる色(例えば、赤色)でマーク100を強調表示させてもよいし、マーク100を左右又は上下に震動させることで、マーク100を強調表示させてもよい。また、マーク100を点滅させて表示させることでマーク100を強調表示させてもよい。このように、マーク100自体を強調表示させることで、監視対象物の存在を強調してMID28に表示させることができる。
In FIG. 8A, since the monitoring objects H1, H2, and H3 are present in the right image divided
ステップS8に進むと、第1表示制御部70は、ステップS1で直近に取得した撮像画像ILを汎用ディスプレイ26の第1表示領域46に表示させる。
In step S8, the first
次に、車両周辺監視装置10の動作の別の一例を、図9のフローチャートに沿って、他の図面を適宜参照しながら説明する。
Next, another example of the operation of the vehicle
画像処理部14は、赤外線カメラ16L、16Rによって得られた撮像画像IL、IRを取得する(ステップS11)。赤外線カメラ16L、16Rは、所定のフレームレート、例えば、30fps(1秒間に30フレームを撮像するフレームレート)で撮像を行うものとする。なお、図9のフローチャートに示す動作は、1/30秒周期で実行するものとする。つまり、赤外線カメラ16L、16Rが1回撮像するたびに図9のフローチャートに示す動作が実行される。
The
次いで、対象物検出部60は、ステップS11で取得した撮像画像ILに基づいて、撮像画像IL内に存在する監視対象物を検出する(ステップS12)。対象物検出部60は、撮像画像IL内に複数の監視対象物が存在する場合は、複数の監視対象物を検出する。
Next, the
次いで、画像分割領域判断部62は、ステップS12で検出された監視対象物が撮像画像ILのどの画像分割領域に存在するかを判断する(ステップS13)。画像分割領域判断部62は、複数の監視対象物が検出された場合は、それぞれの監視対象物がどの画像分割領域に存在するかを判断する。
Next, the image division
次いで、表示分割領域選択部68は、ステップS13で判断した監視対象物が存在する画像分割領域に対応するMID28の第2表示領域48の表示分割領域を選択する(ステップS14)。例えば、画像分割領域判断部62により監視対象物が右側画像分割領域86に存在すると判断された場合は、表示分割領域選択部68は、右側表示分割領域96を選択する。
Next, the display divided area selection unit 68 selects the display divided area of the
次いで、危険度評価部66は、複数の監視対象物が同一の画像分割領域に存在するか否かを判断する(ステップS15)。この判断は、ステップS13の判断結果に基づいて判断する。ステップS15で、複数の監視対象物が同一の画像分割領域に存在しない場合は、危険度評価部66は危険度が低いと評価してステップS16に進む。
Next, the
ステップS16に進むと、第2表示制御部72は、ステップS14で選択した表示分割領域の表示位置で、監視対象物をシンボル化したマーク100をMID28に表示させて、ステップS21に進む。このステップS11〜ステップS16、ステップS21の動作は、図6のステップS1〜ステップS6、ステップS8の動作と同様である。
In step S16, the second
ステップS15で、複数の監視対象物が同一の画像分割領域に存在すると判断すると、移動方向検出部64は、同一の画像分割領域に存在すると判断した複数の監視対象物の移動方向をそれぞれ検出する(ステップS17)。
If it is determined in step S15 that a plurality of monitoring objects are present in the same image divided area, the moving
次いで、危険度評価部66は、同一の画像分割領域に存在すると判断した複数の監視対象物のうち、少なくとも1つが車両12に接近しているか否かを判断する(ステップS18)。例えば、監視対象物が車両12の進行方向に向かって移動している場合や監視対象物が前方から車両12に向かって移動している場合等は、監視対象物が車両12に接近していると判断する。ステップS18の判断は、ステップS17で検出された監視対象物の移動方向に基づいて判断する。
Next, the
ステップS18で、監視対象物が車両12に接近していると判断すると、危険度評価部66は、危険度が高いと評価してステップS19に進み、ステップS18で、監視対象物が車両12に接近していないと判断すると、危険度評価部66は、危険度が低いと評価してステップS16に進む。
If it is determined in step S18 that the monitoring object is approaching the
ステップS19に進むと、表示分割領域選択部68は、該複数の監視対象物が存在する画像分割領域は、中央画像分割領域84であるか否かを判断する。
In step S19, the display divided region selection unit 68 determines whether or not the image divided region where the plurality of monitoring objects exist is the central image divided
ステップS19で、複数の監視対象物が存在する画像分割領域は、中央画像分割領域84である判断すると、ステップS16に進む。ステップS16に進むと、第2表示制御部72は、ステップS14で選択した表示分割領域の表示位置で、監視対象物をシンボル化したマーク100をMID28に表示させて、ステップS21に進む。
If it is determined in step S19 that the image division area where a plurality of monitoring objects exist is the central
一方、ステップS19で、複数の監視対象物が存在する画像分割領域は、中央画像分割領域84でないと判断すると、選択する表示分割領域を拡張して、更に表示分割領域を選択する(ステップS20)。複数の監視対象物が存在する場合は、つまり、ステップS14で選択した表示分割領域に加え、更に表示分割領域を選択する。更に選択する表示分割領域は、ステップS14で選択した表示分割領域であって、複数の監視対象物が存在する画像分割領域に対応する表示分割領域より車両12の進行方向(第2表示領域48の中央)寄りの表示分割領域である。複数の監視対象物が同一の画像分割領域にいる場合であって、監視対象物が車両12に接近している場合は、監視対象物が飛び出して来ると予測できる画像分割領域に対応する表示分割領域を更に選択する。
On the other hand, if it is determined in step S19 that the image division area in which a plurality of monitoring objects exist is not the central
具体的に説明すると、例えば、右側画像分割領域86に複数の監視対象物が存在し、ステップS14で、右側表示分割領域96が選択された場合は、ステップS20で、右側表示分割領域96より車両12の進行方向寄りの中央表示分割領域94を更に選択する。また、左側画像分割領域82に複数の監視対象物が存在し、ステップS14で、左側表示分割領域92が選択された場合は、ステップS20で、左側表示分割領域92より車両12の進行方向寄りの中央表示分割領域94を更に選択する。
More specifically, for example, when there are a plurality of monitoring objects in the right image divided
ステップS20で、選択する表示分割領域を拡張すると、ステップS16に進み、第2表示制御部72は、ステップS14で選択した表示分割領域の表示位置と、ステップS20で選択した表示分割領域の表示位置とで、監視対象物をシンボル化したマーク100をMID28に表示させて、ステップS21に進む。
When the display divided area to be selected is expanded in step S20, the process proceeds to step S16, and the second
図10Aは、ステップS11で取得した撮像画像ILであって、監視対象物が右側画像分割領域86に複数存在する場合の撮像画像ILの一例を示し、図10Bは、図10Aに示す撮像画像ILを取得した場合に、ステップS16でMID28の第2表示領域48に表示される模擬画像50の一例を示す図である。図10Aに示すように、右側画像分割領域86に複数の監視対象物H1、H2、H3が存在することがわかる。
FIG. 10A shows an example of the captured image IL acquired in step S11 in the case where there are a plurality of objects to be monitored in the right image divided
図10Aは、監視対象物H1、H2、H3が右側画像分割領域86に存在するので、ステップS14で選択される表示分割領域は右側表示分割領域96となり、図10Bに示すように、ステップS16で、マーク100は、右側表示分割領域96の表示位置96aに表示される。ここで、右側画像分割領域86には、複数の監視対象物H1、H2、H3が存在し、監視対象物H2は、車両12の進行方向に向かって移動しているので、ステップS20で、更に選択される表示分割領域は、右側表示分割領域96より車両12の進行方向寄りの中央表示分割領域94となり、ステップS16で、マーク100は、中央表示分割領域94の表示位置94aにも表示される。これにより、監視対象物の存在が強調表示されることになる。
In FIG. 10A, since the monitoring objects H1, H2, and H3 exist in the right image divided
ここで、車両12の進行方向は、ハンドル42が切られていない状態では、撮像画像ILの中央にある目的物に向かう方向(直進方向)であり、ハンドル42が切られている場合は、撮像画像ILの中央にある目的物に向かう方向と、ヨーレートセンサ22が検出したヨーレートYrとから進行方向を求めることができる。図10Aでは、ハンドル42が切られていない状態とする。例えば、ハンドル42が右に切られている場合は、撮像画像ILの中央にある目的物に向かう方向をヨーレートYrに相当する角度だけ右側に回転させた方向が直進方向となり、ハンドル42が左に切られている場合は、撮像画像ILの中央にある目的物に向かう方向をヨーレートYrに相当する角度だけ左側に回転させた方向が直進方向となる。図10Aの一点鎖線P1は、車両12の予測軌道を示しており、車両12の進行方向を示している。
Here, the traveling direction of the
図11Aは、ステップS11で取得した撮像画像ILであって、監視対象物が中央画像分割領域84に複数存在する場合の撮像画像ILの一例を示し、図11Bは、図11Aに示す撮像画像ILを取得した場合に、ステップS16でMID28の第2表示領域48に表示される模擬画像50の一例を示す図である。図11Aに示すように、中央画像分割領域84に複数の監視対象物H1、H2、H3が存在することがわかる。
FIG. 11A shows the captured image IL acquired in step S11, and shows an example of the captured image IL when there are a plurality of monitoring objects in the central image divided
図11Aは、監視対象物H1、H2、H3が中央画像分割領域84に存在するので、ステップS14で選択される表示分割領域は中央表示分割領域94となり、図11Bに示すように、ステップS16で、マーク100は、中央表示分割領域94の表示位置94aに表示される。ここで、複数の監視対象物が中央画像分割領域84に存在するので、更に表示分割領域が選択されることはない。従って、ステップS14で選択した中央表示分割領域94のみにマーク100が表示されることになる。
In FIG. 11A, since the monitoring objects H1, H2, and H3 exist in the central image divided
ステップS21に進むと、第1表示制御部70は、ステップS11で直近に取得した撮像画像ILを汎用ディスプレイ26の第1表示領域46に表示させる。
In step S21, the first
このように、監視対象物が存在する画像分割領域に対応する第2表示領域48の表示分割領域にマークを表示させるので、運転者は、視線を前方に向けたままの状態でMID28を一見するだけで、監視対象物の存否、監視対象物が存在する場合はその位置を容易且つ瞬時に把握することができる。また、監視対象物が同じエリアにかたまって多数存在する場合は、少なくとも1つが飛び出してくる可能性が高いので、監視対象物の存在を強調して表示させることで、運転者に注意喚起を促すことができる。
In this way, since the mark is displayed in the display divided region of the
また、監視対象物の存在の強調表示として、表示させるマークを強調表示させてもよい。これにより、マークが強調表示される表示分割領域に監視対象物が複数いることを運転者は瞬時に認識することができ、注意を払うことができる。 In addition, as a highlighted display of the presence of the monitoring target, a mark to be displayed may be highlighted. Accordingly, the driver can instantly recognize that there are a plurality of monitoring objects in the display divided area where the mark is highlighted, and can pay attention.
また、監視対象物の存在の強調表示として、マークを表示させる表示分割領域を拡張してもよい。これにより、監視対象物が飛び出してくるかもしれないエリアに対しても運転者に注意喚起を促すことができる。更に、監視対象物の移動方向を検出し、監視対象物が車両12に接近する可能性がある場合に、マークを表示させる表示分割領域を拡張してもよい。これにより、監視対象物が飛び出してくるエリアに対して運転者に注意喚起を促すことができる。
In addition, as a highlight display of the presence of the monitoring target, a display division area for displaying a mark may be expanded. Thereby, it is possible to urge the driver to call attention to an area where the monitoring object may pop out. Further, the moving direction of the monitoring object may be detected, and when the monitoring object may approach the
上記実施の形態は、以下のように変形してもよい。 The above embodiment may be modified as follows.
(変形例1)上記実施の形態の図9のフローチャートに示す動作では、複数の監視対象物が同一の画像分割領域に存在する場合であって、その何れかの監視対象物が車両12に接近している場合に、選択する表示分割領域を拡張してマーク100を表示させるようにしたが、監視対象物が車両12に接近していなくても、複数の監視対象物が同一の画像分割領域に存在する場合は、選択する表示分割領域を拡張してマーク100を表示させるようにしてもよい。
(Modification 1) The operation shown in the flowchart of FIG. 9 in the above embodiment is a case where a plurality of monitoring objects exist in the same image segmentation area, and any of the monitoring objects approaches the
即ち、図9のステップS15で、複数の監視対象物が1つの画像分割領域に存在すると判断すると、ステップS17、ステップS18の動作を飛ばして、ステップS19に進むようにしてもよい。監視対象物が同一の画像分割領域に複数存在する場合は、監視対象物が飛び出してくる可能性が高いと評価できるからである。 That is, if it is determined in step S15 in FIG. 9 that a plurality of monitoring objects exist in one image division region, the operations in steps S17 and S18 may be skipped and the process may proceed to step S19. This is because when there are a plurality of monitoring objects in the same image division region, it can be evaluated that there is a high possibility that the monitoring objects will pop out.
(変形例2)上記実施の形態では、人間を監視対象物として検出するようにしたが、人間以外のもの、例えば、犬、猫、鹿等の動物等を監視対象物として検出するようにしてもよい。この場合は、監視対象物に応じてMID28に表示させるマークを異ならせるようにしてもよい。
(Modification 2) In the above embodiment, humans are detected as monitoring objects. However, other than humans, for example, animals such as dogs, cats, deers, etc., are detected as monitoring objects. Also good. In this case, the mark displayed on the
(変形例3)上記図9のフローチャートに示す動作においては、複数の監視対象物が同一の画像分割領域に存在する場合は、選択する表示分割領域を拡張したが、表示分割領域を拡張することで、全ての表示分割領域、又は一定の割合(例えば、80%)以上の表示分割領域が選択されてしまう場合は、選択する表示分割領域を拡張しなくてもよい。例えば、左側画像分割領域82に監視対象物が1つ存在し、右側画像分割領域86に複数の監視対象物が存在する場合は、ステップS14で左側表示分割領域92と右側表示分割領域96が選択され、ステップS20で更に、中央表示分割領域94が選択されることになり、全ての表示分割領域が選択され、全ての表示分割領域にマーク100が表示されることになる。このように、一定の割合以上の表示分割領域にマーク100が表示されると、運転者が混乱してしまうので、このような場合は、選択する表示分割領域の拡張を行わないようにしてもよい。
(Modification 3) In the operation shown in the flowchart of FIG. 9, when a plurality of monitoring objects exist in the same image divided area, the display divided area to be selected is expanded, but the display divided area is expanded. Thus, when all the display divided areas or display divided areas of a certain ratio (for example, 80%) or more are selected, the display divided area to be selected may not be expanded. For example, if there is one monitoring object in the left image divided
(変形例4)上記変形例1〜3を任意に組み合わせた態様であってもよい。 (Modification 4) The aspect which arbitrarily combined the said modifications 1-3 may be sufficient.
以上、本発明について好適な実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更又は改良を加えることが可能であることが当業者に明らかである。その様な変更又は改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。 As described above, the present invention has been described using the preferred embodiments, but the technical scope of the present invention is not limited to the scope described in the above embodiments. It will be apparent to those skilled in the art that various modifications or improvements can be added to the above embodiment. It is apparent from the description of the scope of claims that embodiments with such changes or improvements can be included in the technical scope of the present invention.
10…車両周辺監視装置 12…車両
14…画像処理部 16L、16R…赤外線カメラ
26…汎用ディスプレイ 28…MID
30…記憶部 40…ダッシュボード
42…ハンドル 46…第1表示領域
48…第2表示領域 52…道路
52L、52C、52R…ライン 60…対象物検出部
62…画像分割領域判断部 64…移動方向検出部
66…危険度評価部 68…表示分割領域選択部
70…第1表示制御部 72…第2表示制御部
82…左側画像分割領域 84…中央画像分割領域
86…右側画像分割領域 92…左側表示分割領域
92a、94a、96a…表示位置 94…中央表示分割領域
96…右側表示分割領域 100…マーク
DESCRIPTION OF
DESCRIPTION OF
Claims (4)
前記撮像画像に基づいて前記監視対象物を検出する監視対象物検出部と、
前記撮像画像は予め決められた複数の画像分割領域に分けられ、検出された前記監視対象物が前記撮像画像のどの前記画像分割領域に存在するかを判断する画像分割領域判断部と、
前記撮像画像を第1表示部に表示する第1表示制御部と、
判断された前記画像分割領域に対応する第2表示部の表示分割領域に、前記監視対象物をシンボル化したマークを表示することで、前記監視対象物の存在を表示させる第2表示制御部と、
を備え、
前記第2表示制御部は、前記監視対象物が同一の前記画像分割領域に複数存在する場合は、前記監視対象物の存在を強調して表示させる
ことを特徴とする車両周辺監視装置。 A vehicle periphery monitoring device that detects an object to be monitored in front of the vehicle based on a captured image obtained by capturing an image of a landscape in front of the vehicle with an imaging unit mounted on the vehicle,
A monitoring object detection unit that detects the monitoring object based on the captured image;
The captured image is divided into a plurality of predetermined image division regions, and an image division region determination unit that determines in which image division region of the captured image the detected monitoring target exists;
A first display control unit for displaying the captured image on the first display unit;
A second display control unit for displaying the presence of the monitored object by displaying a mark symbolizing the monitored object in a display divided region of the second display unit corresponding to the determined image divided region; ,
With
The said 2nd display control part emphasizes and displays the presence of the said monitoring target object, when the said monitoring target object exists in two or more in the same said image division area. The vehicle periphery monitoring apparatus characterized by the above-mentioned.
第2表示制御部は、前記監視対象物が同一の前記画像分割領域に複数存在する場合は、前記マークを表示させる前記表示分割領域を拡張し、複数の前記表示分割領域に前記マークを表示させることで、前記監視対象物の存在を強調して表示させる
ことを特徴とする車両周辺監視装置。 The vehicle periphery monitoring device according to claim 1,
The second display control unit expands the display division area for displaying the mark and displays the mark in the plurality of display division areas when a plurality of the monitoring objects exist in the same image division area. Thus, the vehicle periphery monitoring device is characterized in that the presence of the monitoring object is highlighted and displayed.
検出された前記監視対象物の移動方向を検出する移動方向検出部を備え、
第2表示制御部は、前記監視対象物が同一の前記画像分割領域に複数存在する場合は、前記監視対象物の移動方向に応じて、前記マークを表示させる前記表示分割領域を拡張する
ことを特徴とする車両周辺監視装置。 In the vehicle periphery monitoring device according to claim 2,
A movement direction detection unit that detects a movement direction of the detected monitoring object;
The second display control unit, when there are a plurality of the monitoring objects in the same image division area, expands the display division area in which the mark is displayed according to the moving direction of the monitoring object. A vehicle periphery monitoring device.
前記第2表示制御部は、前記検出された前記監視対象物が前記撮像画像の中央にある前記画像分割領域に複数存在する場合は、前記マークを表示させる前記表示分割領域を拡張しない
ことを特徴とする車両周辺監視装置。 In the vehicle periphery monitoring device according to claim 2 or 3,
The second display control unit does not extend the display divided region for displaying the mark when there are a plurality of the detected monitoring objects in the image divided region in the center of the captured image. A vehicle periphery monitoring device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011242494A JP5703192B2 (en) | 2011-11-04 | 2011-11-04 | Vehicle periphery monitoring device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011242494A JP5703192B2 (en) | 2011-11-04 | 2011-11-04 | Vehicle periphery monitoring device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013098919A true JP2013098919A (en) | 2013-05-20 |
JP5703192B2 JP5703192B2 (en) | 2015-04-15 |
Family
ID=48620377
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011242494A Active JP5703192B2 (en) | 2011-11-04 | 2011-11-04 | Vehicle periphery monitoring device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5703192B2 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017043404A1 (en) * | 2015-09-10 | 2017-03-16 | 株式会社デンソー | Image recording device |
CN113961483A (en) * | 2020-09-02 | 2022-01-21 | 深圳市汇顶科技股份有限公司 | Cache memory and method of using cache memory |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007140630A (en) * | 2005-11-15 | 2007-06-07 | Mitsubishi Electric Corp | Tracking type monitoring system |
JP2009098956A (en) * | 2007-10-17 | 2009-05-07 | Mazda Motor Corp | Driving support device for vehicle |
JP2011091549A (en) * | 2009-10-21 | 2011-05-06 | Toyota Motor Corp | Night visual range support device for vehicle |
JP2011113255A (en) * | 2009-11-26 | 2011-06-09 | Toyota Home Kk | Regional security system |
WO2011108198A1 (en) * | 2010-03-03 | 2011-09-09 | 本田技研工業株式会社 | Surrounding area monitoring device for vehicle |
-
2011
- 2011-11-04 JP JP2011242494A patent/JP5703192B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007140630A (en) * | 2005-11-15 | 2007-06-07 | Mitsubishi Electric Corp | Tracking type monitoring system |
JP2009098956A (en) * | 2007-10-17 | 2009-05-07 | Mazda Motor Corp | Driving support device for vehicle |
JP2011091549A (en) * | 2009-10-21 | 2011-05-06 | Toyota Motor Corp | Night visual range support device for vehicle |
JP2011113255A (en) * | 2009-11-26 | 2011-06-09 | Toyota Home Kk | Regional security system |
WO2011108198A1 (en) * | 2010-03-03 | 2011-09-09 | 本田技研工業株式会社 | Surrounding area monitoring device for vehicle |
US20120320212A1 (en) * | 2010-03-03 | 2012-12-20 | Honda Motor Co., Ltd. | Surrounding area monitoring apparatus for vehicle |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017043404A1 (en) * | 2015-09-10 | 2017-03-16 | 株式会社デンソー | Image recording device |
JP2017055290A (en) * | 2015-09-10 | 2017-03-16 | 株式会社デンソー | Video recorder |
CN107950020A (en) * | 2015-09-10 | 2018-04-20 | 株式会社电装 | Device, video recorder |
CN113961483A (en) * | 2020-09-02 | 2022-01-21 | 深圳市汇顶科技股份有限公司 | Cache memory and method of using cache memory |
Also Published As
Publication number | Publication date |
---|---|
JP5703192B2 (en) | 2015-04-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6113375B2 (en) | Driving support device and driving support method | |
JP5616531B2 (en) | Vehicle periphery monitoring device | |
JP6232759B2 (en) | Information processing apparatus, approaching object notification method, and program | |
JP5143235B2 (en) | Control device and vehicle surrounding monitoring device | |
JP4687411B2 (en) | Vehicle peripheral image processing apparatus and program | |
JP2006338594A (en) | Pedestrian recognition system | |
JP6330341B2 (en) | Driving assistance device | |
JP7047586B2 (en) | Vehicle display control device | |
JP6827202B2 (en) | Information display device, information display method and program | |
JP5192007B2 (en) | Vehicle periphery monitoring device | |
JP5703192B2 (en) | Vehicle periphery monitoring device | |
JP2019188855A (en) | Visual confirmation device for vehicle | |
JP2023165721A (en) | display control device | |
JP2008158963A (en) | Vehicle surrounding detecting system | |
JP5192009B2 (en) | Vehicle periphery monitoring device | |
JP5604011B2 (en) | Vehicle periphery monitoring device | |
JP4884806B2 (en) | Vehicle perimeter monitoring system | |
JP5251673B2 (en) | Vehicle display device | |
JP5529097B2 (en) | Vehicle driving support device | |
JP6583385B2 (en) | Information processing apparatus, approaching object notification method, and program | |
JP2013095375A (en) | Vehicle surroundings monitoring device | |
JP2007249324A5 (en) | ||
JP5547159B2 (en) | Vehicle periphery monitoring device | |
JP7342926B2 (en) | Display control device and display control program | |
JP5704417B2 (en) | Obstacle alarm device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20131128 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140908 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140916 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150203 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150223 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5703192 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |