JP2008271266A - Display controller, display control method, and display control program - Google Patents
Display controller, display control method, and display control program Download PDFInfo
- Publication number
- JP2008271266A JP2008271266A JP2007112552A JP2007112552A JP2008271266A JP 2008271266 A JP2008271266 A JP 2008271266A JP 2007112552 A JP2007112552 A JP 2007112552A JP 2007112552 A JP2007112552 A JP 2007112552A JP 2008271266 A JP2008271266 A JP 2008271266A
- Authority
- JP
- Japan
- Prior art keywords
- detection area
- detection sensor
- display control
- object detection
- control value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、車両の周囲の障害物の有無などを検知し、ユーザに知らせる表示制御装置、方法およびプログラムに関するものである。特に、車両周囲を撮像した画像と物体検知センサの検知結果を用いて、ユーザに報知する表示制御装置、方法およびプログラムに関する。 The present invention relates to a display control apparatus, method, and program for detecting the presence or absence of an obstacle around a vehicle and notifying a user. In particular, the present invention relates to a display control apparatus, method, and program for informing a user using an image obtained by capturing an image of a vehicle periphery and a detection result of an object detection sensor.
近年、車両に搭載された物体検知センサ(撮像画像を処理するものも含む)の検知結果に基づき、車両周囲の映像や警報装置を用いて、障害物への接触や衝突の可能性をユーザに知らせる運転支援装置が実用化されている。 In recent years, based on the detection results of object detection sensors (including those that process captured images) mounted on vehicles, the possibility of contact with or collision with obstacles can be indicated to the user using images around the vehicle and alarm devices. The driving assistance device that informs is put into practical use.
一般に、このような運転支援装置に用いられる車両周囲の物体を検知するセンサとしてはアクティブセンサが用いられることが多い。なお、アクティブセンサとは、光・電波・音といったのエネルギーを送出し、それらが障害物に当たり、反射し戻ってくるエネルギーを受信することにより障害物を検知するものである。特に、図13に示すとおり、ビーム切替手段によりアンテナの放射パターン(ビーム)を切り替えて、遠距離用のビームと近距離用のビームを形成し、状況に応じて検知領域を変化させるものが知られている(例えば、特許文献1参照)。また、高速走行時の検知性能を維持することを目的として車両の速度に応じて送信出力を変化させ、検知領域を変えるものもある(例えば、特許文献2参照)。 In general, an active sensor is often used as a sensor for detecting an object around a vehicle used in such a driving support device. The active sensor transmits energy such as light, radio wave, and sound, and detects an obstacle by receiving energy that hits the obstacle and is reflected back. In particular, as shown in FIG. 13, the antenna switching pattern (beam) is switched by the beam switching means to form a long-distance beam and a short-distance beam, and the detection area is changed depending on the situation. (For example, refer to Patent Document 1). In addition, there is a technique in which the detection area is changed by changing the transmission output in accordance with the speed of the vehicle in order to maintain the detection performance during high-speed traveling (for example, see Patent Document 2).
その他にも検知領域を変える場合がある。例えば、物体検知センサから近い距離に存在する物体を高精度に検知するには、通常サンプリング間隔を細かくするため、同じサンプリング周期で検知するには、検知領域を小さくする必要がある。 In addition, the detection area may be changed. For example, in order to detect an object existing at a short distance from the object detection sensor with high accuracy, the sampling interval is usually made fine. Therefore, in order to detect at the same sampling period, it is necessary to reduce the detection area.
また、物体検知センサとしてレーダを使った場合、送信アンテナから受信アンテナに直接電波がまわりこんで極近距離検知性能が劣化するので、送信出力を低く制御するため検知領域が狭くなる。同様に、反射強度が大きい障害物が近くに存在する場合も、受信側の検知性能を維持するため、送信出力を低く制御するので検知領域は狭くなる。 Further, when a radar is used as the object detection sensor, radio waves directly travel from the transmission antenna to the reception antenna, and the detection performance of the very short distance deteriorates. Therefore, the detection area is narrowed because the transmission output is controlled to be low. Similarly, even when an obstacle with a high reflection intensity is present nearby, the detection area is narrowed because the transmission output is controlled low in order to maintain the detection performance on the reception side.
あるいは、物体検知センサとして撮像装置を用いたとき、例えば夜間では、検知領域が小さくなる等、状況に応じて検知領域を変えることがある。
しかしながら、物体検知センサの媒体(例えばレーダだと電波、超音波センサだと音波、レーザーレーダだとレーザ)は、肉眼で確認することが困難であるため、ユーザは、物体検知センサの検知領域を正確に認識できないが、従来の構成では、状況に応じて時事刻々と変わる物体検知センサの検知領域をユーザに提示できないという問題がある。 However, the object detection sensor medium (for example, radio waves for radar, sound waves for ultrasonic sensors, and lasers for laser radar) is difficult to check with the naked eye. Although it cannot be accurately recognized, the conventional configuration has a problem that the detection area of the object detection sensor that changes from moment to moment according to the situation cannot be presented to the user.
本発明は、従来の問題を解決するためになされたもので、ユーザが車両の周囲に存在する物体(障害物等)の状況を認知しやすい表示制御装置、方法およびプログラムを提供することを目的とする。 The present invention has been made to solve the conventional problems, and it is an object of the present invention to provide a display control device, method, and program that allow a user to easily recognize the state of an object (such as an obstacle) that exists around a vehicle. And
従来の課題を解決するために、本発明の第1の局面は、車両周囲を撮影する撮像装置によって撮影された画像を表示する表示制御装置に向けられている。本発明は、音波、電波、またはレーザを照射し反射波を受信することにより、あるいは、撮像装置からの画像を処理することにより、周囲の障害物の有無、あるいは、距離や方向を検知する物体検知センサの検知領域を制御する制御値を設定する検知領域判断部と、制御値と対応した、物体検知センサの検知領域を示唆する検知領域図形を、撮像装置によって撮影された画像に重畳表示する表示制御部とを備える。 In order to solve the conventional problems, a first aspect of the present invention is directed to a display control device that displays an image photographed by an imaging device that photographs the periphery of a vehicle. The present invention is an object that detects the presence or absence of surrounding obstacles, or the distance and direction by irradiating sound waves, radio waves, or lasers and receiving reflected waves, or processing images from an imaging device. A detection area determination unit for setting a control value for controlling the detection area of the detection sensor, and a detection area figure corresponding to the control value and indicating the detection area of the object detection sensor are superimposed and displayed on the image captured by the imaging device. A display control unit.
また、検知領域判断部は、物体検知センサが検知した障害物との距離により設定する制御値を変えることを特徴とする。 In addition, the detection area determination unit is characterized by changing a control value set according to a distance from an obstacle detected by the object detection sensor.
また、検知領域判断部は、物体検知センサが検知した障害物との距離が短い程、物体検知センサの検知領域が小さい制御値を設定することを特徴とする。 In addition, the detection area determination unit is characterized in that the control value of the detection area of the object detection sensor is set to be smaller as the distance from the obstacle detected by the object detection sensor is shorter.
また、検知領域判断部は、物体検知センサの受信電力により設定する制御値を変えることを特徴とする。 In addition, the detection area determination unit is characterized in that the control value set by the received power of the object detection sensor is changed.
また、検知領域判断部は、物体検知センサの受信電力が予め決められた値より大きいとき、物体検知センサの検知領域が小さくなる制御値に変えることを特徴とする。 Further, the detection area determination unit is characterized in that when the received power of the object detection sensor is larger than a predetermined value, the detection area determination unit changes the control value to be a detection value that decreases the detection area of the object detection sensor.
また、検知領域判断部は、車両の速度により設定する制御値を変えることを特徴とする。 In addition, the detection area determination unit is characterized by changing a control value set according to the speed of the vehicle.
さらに、表示制御部は、検知領域図形として、物体検知センサの検知領域を路面上に投影した領域を重畳表示してもよい。 Furthermore, the display control unit may superimpose and display an area obtained by projecting the detection area of the object detection sensor on the road surface as the detection area graphic.
また、表示制御部は、検知領域図形として、物体検知センサの検知領域を、路面に平行な平面に投影した領域を重畳表示してもよい。 Further, the display control unit may superimpose and display an area obtained by projecting the detection area of the object detection sensor onto a plane parallel to the road surface as the detection area graphic.
また、表示制御部は、検知領域図形として、物体検知センサの検知領域の3次元形状を重畳表示してもよい。 The display control unit may superimpose and display the three-dimensional shape of the detection region of the object detection sensor as the detection region graphic.
本発明の第2の局面は、車両周囲を撮影する撮像装置によって撮影された画像を表示する表示制御方法に向けられている。本発明は、音波、電波、またはレーザを照射し反射波を受信することにより、あるいは、前記撮像装置からの画像を処理することにより、周囲の障害物の有無、あるいは、距離や方向を検知する物体検知センサの検知領域を制御する制御値を設定する検知領域ステップと、制御値と対応した、物体検知センサの検知領域を示唆する検知領域図形を、撮像装置によって撮影された画像に重畳表示する表示ステップとを備える。 The second aspect of the present invention is directed to a display control method for displaying an image photographed by an imaging device that photographs the periphery of a vehicle. The present invention detects the presence, distance, and direction of surrounding obstacles by irradiating sound waves, radio waves, or lasers and receiving reflected waves, or by processing an image from the imaging device. A detection area step for setting a control value for controlling the detection area of the object detection sensor and a detection area figure corresponding to the control value and indicating the detection area of the object detection sensor are superimposed on the image captured by the imaging device. A display step.
本発明の第3の局面は、車両周囲を撮影する撮像装置によって撮影された画像を表示する表示制御装置のコンピューターで実行される表示制御プログラムに向けられている。本発明は、音波、電波、またはレーザを照射し反射波を受信することにより、あるいは、前記撮像装置からの画像を処理することにより、周囲の障害物の有無、あるいは、距離や方向を検知する物体検知センサの検知領域を制御する制御値を設定する検知領域ステップと、制御値と対応した、物体検知センサの検知領域を示唆する検知領域図形を、撮像装置によって撮影された画像に重畳表示する表示ステップとを備える。 The third aspect of the present invention is directed to a display control program that is executed by a computer of a display control device that displays an image captured by an imaging device that captures a vehicle periphery. The present invention detects the presence, distance, and direction of surrounding obstacles by irradiating sound waves, radio waves, or lasers and receiving reflected waves, or by processing an image from the imaging device. A detection area step for setting a control value for controlling the detection area of the object detection sensor and a detection area figure corresponding to the control value and indicating the detection area of the object detection sensor are superimposed on the image captured by the imaging device. A display step.
この構成によれば、運転者は、時々刻々と変化する物体検知センサの検知領域を認識できる。そのため、障害物が検知領域の外側にあった場合、その意識をもってその物体を注視することができる。さらに、検知センサが動作しない状況であるのか否かが判断や、場合によっては、物体検知センサが適切に動作していないという判断もできる。 According to this configuration, the driver can recognize the detection area of the object detection sensor that changes every moment. Therefore, when an obstacle is outside the detection area, it is possible to gaze at the object with that awareness. Furthermore, it can be determined whether or not the detection sensor is in a non-operating state, and in some cases, it can be determined that the object detection sensor is not operating properly.
以上の説明より、本発明の表示制御装置は、ユーザが車両周囲に存在する障害物の状況を認知しやすい表示制御装置を提供することができる。 From the above description, the display control device of the present invention can provide a display control device that allows the user to easily recognize the status of obstacles around the vehicle.
以下、本発明の実施の形態の表示制御装置100について、図面を用いて説明する。なお、本実施の形態では、表示制御装置100を車両に搭載し、車両後方の状況をユーザに知らせる例を用いて説明する。
Hereinafter, a
図1は、本発明の実施の形態に係る表示制御装置100の全体構成を示すブロック図である。図1において、表示制御装置100は、検知領域判断部103、検知領域座標保持部104、表示制御部105を備える。さらに、車両周囲を撮像する撮像部101、車両周囲の障害物等の物体を検知する物体検知センサ102、及び撮影された車両周囲の画像などユーザに車両周囲の状況を提示するLCD(LiquidCrystal Display)等の表示デバイスを含む表示部106が接続されている。なお、本発明における表示制御装置100を、車両に設けられたECU(Electronic Control Unit)によって構成し、本発明における表示制御部をDSP(Digital Signal Processor)によって構成することが一例として挙げられる。また、表示制御装置100に撮像部101、物体検知センサ102、表示部106が含まれる構成とすることも可能である。
FIG. 1 is a block diagram showing an overall configuration of a
撮像部101は、車両周囲を撮像する、例えば、CCDカメラ、又はCMOSカメラである。物体検知センサ102は、音波、電波、またはレーザを照射し反射波を受信することにより、周囲の障害物の有無、あるいは、距離や方向を検知する超音波センサ、レーダ、レーザーレーダ等である。あるいは、撮像部101が撮像した画像(動画などの映像も含む)を処理する画像処理センサであってもよい。
The
表示部106は、車両の後方を撮影した画像を表示可能なLCD(Liquid Crystal Display)、ELD(Electroluminescence Display)等の表示デバイスを含むナビゲーション装置、テレビ放送受信機およびDVD(Digital Versatile Disc)プレーヤ等の映像信号再生機器が代表的なものであるが、画像を表示することができるオーディオ機器であってもかまわない。
The
検知領域判断部103は、物体検知センサ102の検知結果等から検知領域を制御する制御値を決める。どのように制御値を決めるかの詳細は、後述する。
The detection
検知領域座標保持部104は、検知領域判断部103が判断した検知領域の各制御値に対応する該検知領域を表す検知領域図形を保持している。なお、表示制御装置100に検知領域座標保持部104を含まない構成とすることも可能である。その場合、検知領域座標保持部104は、表示制御装置100に接続されている物体検知センサ102や表示部106に含む構成としてもよいし、単独で表示制御装置100に接続されてもよい。また、本実施の形態では、検知領域座標保持部104に保持された検知領域図形を表示させる構成としているが、検知領域図形の変わりに制御値に対応した座標値を保持しておき、CG(コンピューターグラフィック)により制御値の変化に合わせて検知領域図形を作成する構成とすることも可能である。
The detection area
表示制御部105は、撮像部101が撮像した車両周囲の画像と、検知領域座標保持部104に保持されている検知領域を示す図形を重畳して表示部106に表示させる。場合によっては、物体検知センサ102が検知した障害物を赤枠あるいは輪郭線で囲む、あるいはマークを重畳して描く。
The
図2は、本発明の実施の形態に係る表示制御装置の表示処理のフロー図である。 FIG. 2 is a flowchart of the display process of the display control apparatus according to the embodiment of the present invention.
表示処理動作は指示信号の「Start」で開始する(ステップS20)。まず、表示制御部105は、撮像部101が撮像した車両周囲の画像を表示部106に表示させる(ステップS21)。次に、検知領域判断部103は物体検知センサ102の検知領域を決定する制御値を算出する。例えば、表示処理動作開始直後は初期値を出力するが、その後は、物体検知センサの検知結果等に基づき決定した制御値を出力する(ステップS22)。次に、制御値に初期値が設定されたか、あるいは制御値が変更されたかを判定し(ステップS23)、その制御値が初期値であるか、変更されたとき(ステップS23でYes)、その制御値から物体検知センサ102の検知領域を示す表示用図形を検知領域座標保持部104から取得する(ステップS24)。制御値が初期値でもなく、変更もされていない場合(ステップS23でNo)には、そのままステップS25に進む。次に、表示制御部105は、表示部106に表示された画像に検知領域を重畳表示させる(ステップS25)。次に、物体検知センサ102が車両周囲をセンシングし(ステップS26)、障害物を検知すると(ステップS27でYes)、表示制御部105は、その結果を表示部106に表示させる、あるいは音声でユーザに報知する(ステップS28)。ステップS27で物体を検知しなかった場合(No)には、そのままステップS29に進む。以上の動作を指示信号「End」が入力されるまで繰り返す(ステップS29)。
The display processing operation starts with an instruction signal “Start” (step S20). First, the
なお、指示信号の入力は、例えば、通信モジュール(図示しない)を介して車両のトランスミッションの状態を表すトランスミッション情報を取得することにより行う。例えば、車両後方を目的とするシステムの場合は、シフトレバーを「R」にした場合を指示信号「Start」とし、シフトレバーを「R」以外にした場合を指示信号「End」とすることが考えられる。 Note that the instruction signal is input by, for example, acquiring transmission information indicating the state of transmission of the vehicle via a communication module (not shown). For example, in the case of a system aimed at the rear of the vehicle, the instruction signal “Start” is set when the shift lever is set to “R”, and the instruction signal “End” is set when the shift lever is set to other than “R”. Conceivable.
図3は、本発明の実施の形態に係る表示制御装置の表示の一例を示す図で、物体検知センサ102の制御値に初期値が設定された場合である。
FIG. 3 is a diagram illustrating an example of display on the display control apparatus according to the embodiment of the present invention, in which an initial value is set as a control value of the
撮像部101によって撮像された車両後方の画像に、物体検知センサ102の検知領域を示唆する図形301が重畳表示されている。具体的には、物体検知センサ102の検知領域を示唆する図形301の路面上の座標から、画像上の座標に変換したものを表示部106に表示したものである。なお、表示部106に自車両の一部300が表示されている方が、ユーザは車両との位置関係を把握しやすい。これらにより、ユーザは、物体検知センサ102の検知領域をおおまかに把握しながら、周囲状況を確認することができる。
A graphic 301 suggesting a detection area of the
さらに、図4は、自車両の近くに障害物402が存在し、物体検知センサ102の検知領域が小さくなる場合の表示例を示す図である。検知領域判断部103の制御に基づいて、物体検知センサ102の検知領域は小さくなり、画面上にはその検知領域を示唆する図形401が重畳表示されている。この場合、障害物302は、画面上に表示されるが、物体検知センサ102では検知されない。しかし、画面上に小さくなった検知領域が重畳表示されるので、ユーザは物体検知センサ102の検知領域から障害物302が外れていることが分かる。したがって、物体検知センサ102が障害物302を検知しないため機器が故障したと、ユーザが誤った判断をすることを防止することができる。
Further, FIG. 4 is a diagram showing a display example when an obstacle 402 exists near the own vehicle and the detection area of the
図5に示す表は、物体検知センサ102を制御する検知領域判断部103の制御値と、検知領域を示唆する図形の関係を示したものである。同表の上段は検知領域判断部103の制御値を示している。中段の制御値aに対応する図、および制御値bに対応する図は、制御値にそれぞれa、bが設定された場合の物体検知センサ102の実際の検知領域を示している。下段の制御値aに対応する図、および制御値bに対応する図は設定された物体検知センサ102の検知領域を示唆する図形を示したものである。なお、中段の図は、物体検知センサ102の検知領域を天頂方向から見た場合の図を示している。
The table shown in FIG. 5 shows the relationship between the control value of the detection
同表に示すとおり、検知領域判断部103の制御値が初期値aの場合、中段の制御値aに対応する図に示す領域が物体検知センサ102の検知領域となる。従って、撮像画像上において物体検知センサ102の検知領域を示唆する画像は下段の制御値aに対応する図に示すものとなり、この図形が検知領域座標保持部104に保持されている。なお、下段の制御値aに対応する図に示す図形は、物体検知センサ102の検知領域を路面に投影した平面図形を、表示画像上にさらに投影した図形になっている。一方、検知領域判断部103の制御値にbが設定され、物体検知センサ102の検知領域が中段の制御値bに対応する図に示すとおり小さくなった場合、撮像画像上で物体検知センサ102の実際の検知領域を示唆する画像は下段の制御値bに対応する図に示すものとなり、この図形が検知領域座標保持部104に保持されている。
As shown in the table, when the control value of the detection
従って、検知領域判断部103が制御値に初期値aを設定した場合、表示制御部105は、検知領域座標保持部104に保持された下段の制御値aに対応する図に示す検知領域を示唆する図形を呼び出し、表示部106に重畳表示させる。一方、検知領域判断部103が制御値にbを設定した場合、表示制御部105は、検知領域座標保持部104に保持された下段の制御値bに対応する図に示す検知領域を示唆する図形を呼び出し、表示装置106に重畳表示させる。
Therefore, when the detection
次に、図2の表示処理フローのステップS22の制御値決定処理について説明する。まず、図6を用いて、検知領域が小さくなる一例を説明する。 Next, the control value determination process in step S22 of the display process flow of FIG. 2 will be described. First, an example in which the detection area is reduced will be described with reference to FIG.
図6(a)は、障害物が遠くに存在した場合の物体検知センサ102の反射波形を、図6(b)は、障害物が近くに存在した場合の物体検知センサ102の反射波形の一例を示したものである。横軸が物体検知センサ102からの距離、縦軸は反射信号の振幅を示している。図6(b)は、図6(a)と比較して、サンプリング間隔が細かくなっており、検知領域は小さくなっている。これは、物体検知センサ102から近い距離に存在する物体を高精度に検知するには、通常サンプリング間隔を細かくする。しかし、処理周期を一定にし、かつ処理速度は変わらないことが要求される場合が多いため、同じサンプリング周期で検知するには、検知領域を小さくしなければならない。
FIG. 6A shows an example of a reflected waveform of the
ここで、図6の場合の制御値決定処理について、図7を用いて説明する。 Here, the control value determination process in the case of FIG. 6 will be described with reference to FIG.
まず、物体検知センサ102は、物体までの距離Lを測定する(ステップS71)。検知領域判断部103が、自車両の近くに障害物402が存在すると判断した場合、より具体的には、障害物の検知距離Lが所定の閾値Lthより小さい(図7では、L=Lb<Lth)とき(ステップS72)、検知領域判断部103は、検知領域を小さくする制御値に変更する(ステップS73)。障害物の検知距離Lが所定の閾値Lthより大きいとき(図7では、L=La>Lth)は、制御値を変更しない(ステップS74)。検知領域を小さくする制御値に変更した場合、物体検知センサ102はサンプリング間隔を細かくして、近距離領域を高精度に検知するよう動作する。続いて、図2の表示処理を行うと、図4に示すような、検知領域の小さい物体検知センサ102の検知領域を示唆する図形401が重畳表示される。
First, the
次に、図8を用いて検知領域が小さくなる別の例を説明する。 Next, another example in which the detection area becomes smaller will be described with reference to FIG.
図8は、物体検知センサ102の反射波形を示したものである。ここで、Ath_min、Ath_maxは反射強度Aの所定の閾値を表している。図8(a)に示す状態、つまり、物体検知センサ102の近くに存在する障害物402の反射強度が強い(図8(a)のAa>Ath_max)場合、物体検知センサ102の受信側が飽和するため正確な検知ができなくなることに加え、受信側に負荷を与えるという問題がある。これを防ぐことを目的として、物体検知センサ102の送信出力を低く制御することが通常行われる。図8(b)は、物体検知センサ102の送信出力が低く制御され、障害物402の反射強度が所定の強度以下になった(図8(b)のAb<Ath_min)場合を示したものである。
FIG. 8 shows the reflected waveform of the
ここで、送信出力を低くすると、物体検知センサ102の検知領域が小さくなることに関して詳しく説明する。
Here, it will be described in detail that the detection area of the
検知領域判断部103の制御値により送信出力を小さくしたことにより、目的とする標準的な障害物を想定してその障害物が検知されるであろう領域は必ず小さくなる。しかしながら、障害物の種類によって電波の反射強度は大きく異なるため、物体検知センサ102の出力は同じでも、検知可能な領域は大きく異なる場合がある。
By reducing the transmission output according to the control value of the detection
そこで、物体検知センサ102の検知領域は、当該制御値において、目的とする障害物の中で最も標準的な物体の場合を想定して決まる領域を検知領域とする。例えば、本実施形態における表示制御装置を自動車に設置した場合、物体検知センサ102の最も重要な障害物の1つとして人がある。その場合、人の反射強度を基準に検知領域を設定する。具体的には人の反射断面積を−10〜0dBm2の値で回線設計して算出した検知領域を設定する。このように設定した検知領域を示唆する図形を制御値と対応付けて検知領域座標保持部104に保持している。
Therefore, the detection area of the
次に、図8の場合の制御値決定処理について、図9を用いて説明する。 Next, the control value determination process in the case of FIG. 8 will be described with reference to FIG.
まず、物体検知センサ102は、周囲の障害物を検知する(ステップS90)。次に、ステップS91で物体が検知されたかどうかを判定する。物体が検知されなかった場合は(ステップS91でNo)、ステップS92へ進み、制御値が最も高い値でなければ(ステップS92でNo)、検知領域判断部103は送信出力を高くするよう制御値を変更し、検知領域を大きくする(ステップS94)。一方、制御値が最も高い値である場合(ステップS92でYes)、制御値を変更しない(ステップS93)。よって、通常周囲に障害物が存在しない場合、制御値は最大に設定され検知領域も最大になる。
First, the
次に、ステップS91において物体が検知された場合は(ステップS91でYes)、検知領域判断部103は検知した物体の信号の強度、より具体的には波形の振幅を取得する(ステップS95)。このとき複数の物体を検知した場合は、最も近くに存在する物体の反射信号強度を取得する、あるいは最も反射信号強度の強い物体の反射信号強度を取得する。
Next, when an object is detected in step S91 (Yes in step S91), the detection
次に、検知領域判断部103が、受信側が飽和していると判断した場合、より具体的には検知した物体の反射強度Aが所定の閾値Ath_maxより大きくなる(図8(a)のAa>Ath_max)場合は(ステップS96でYes)、制御値が最も低い値でなければ(ステップS97でNo)、検知領域判断部103は、送信出力を低くするよう制御値を変更し、検知領域を小さくする(ステップ98)。制御値が既に最も低い値に設定されている場合は(ステップS97でYes)、制御値を変更しない(ステップ93)。
Next, when the detection
一方、ステップS96において、検知領域判断部103が、信号の強度が飽和していないと判断した場合、より具体的には検知した物体の反射強度Aが所定の閾値Ath以下になる(図8(b)のAb<Ath_max)場合は(ステップ96でNo)、ステップS99に進み、そこで信号強度が弱すぎると判断した場合、より具体的には検知した物体の反射強度Aが所定の閾値Ath_minより小さくなる場合は(ステップ99でYes)、制御値が最も高い値でなければ(ステップS92でNo)、検知領域判断部103は送信出力を高くするよう制御値を変更し、検知領域を大きくする(ステップS94)。制御値が最も高い値である場合(ステップS92でYes)、制御値を変更しない(ステップS93)。逆に、ステップS99において、検知領域判断部103が適切な強度の信号と判断した場合、より具体的には検知した物体の反射強度Aが所定の閾値Ath_minより大きくなる場合は(ステップ99でNo)、検知領域判断部103は制御値を変更しない(ステップS93)。続いて、図2の表示処理を行うと、図4に示すような、検知領域の小さい物体検知センサ102の検知領域を示唆する図形401が重畳表示される。
On the other hand, when the detection
なお、図3から図9の例では、物体検知センサ102を制御する検知領域判断部103の制御値の数が2つである場合を示したが、これに限らず、複数の種類の検知領域を設定することが可能である。また、閾値はAth_maxの方がAth_minより大きく(Ath_max>Ath_min)設定される。また、Ath_maxとAth_minの差(Ath_max−Ath_min)は、制御値を1ステップ変化させることによって変化する反射信号振幅レベルの差よりも大きく設定されることが望ましい。
In the example of FIGS. 3 to 9, the case where the number of control values of the detection
また、検知領域判断部103が制御値を決定する方法は、検知した障害物の結果だけによらない。例えば、特許文献1に示すように所定の時間間隔で所定の制御値を出力してもかまわない。あるいは、特許文献2に示すように検知領域判断部103が速度検出部(図示しない)を具備し、表示制御装置100が設置されている移動体の速度によってその制御値を設定してもかまわない。
Further, the method by which the detection
あるいは、物体検知センサ102が撮像装置を具備した画像処理センサを用いた場合の、昼間と夜間における検知領域の変化が挙げられる。この場合、画像処理センサの実際の処理領域が必ずしも変化しているわけではなく一定でもよい。具体的には、検知領域判断部103が周囲の照度から制御値を出力し、照度が大きいときは検知領域を広く設定し、表示制御部105は検知領域大きく示唆する図形を重畳表示し、照度が小さいときは検知領域を狭く設定してもかまわない。
Or the change of the detection area | region in the daytime at night when the
さらに、図10に示すように、物体検知センサ102が機械的な駆動部を有するレーザーレーダ1000で、検知領域判断部103の制御値により駆動部を動作させ、レーザーの照射領域が制御されて検知領域が決定される場合もある。図10の上の図は、検知領域が大きく設定される場合、図10の下の図は、検知領域が小さく設定される場合を示している。
Further, as shown in FIG. 10, in the laser radar 1000 in which the
あるいは、図11に示すように物体検知センサ102が撮像装置を具備した画像処理センサで、検知領域判断部103の制御値により、撮像された画像のうち処理する画素を選択することによって検知領域が決定される場合もある。図11の上の図は、検知領域が大きく設定される場合、図11の下の図は、検知領域が小さく設定される場合を示している。
Alternatively, as shown in FIG. 11, the
以上、検知領域が変わる様々な例を説明したが、表示部106に表示される検知領域を示唆する図形も図3および図4で示した例に限らない。例えば、路面から所定の高さの平面を重畳表示しても構わない。これにより、ユーザは高さのある障害物との衝突の可能性等を的確に判断することができる。
As described above, various examples in which the detection area is changed have been described. However, the graphic indicating the detection area displayed on the
また、図12に示すように検知領域を表示しても構わない。図12が図3と異なる点は、物体検知センサ102の検知領域301が、図3の場合は路面上の2次元の領域なのに対し、高さ成分も含んだ立体的な領域を重畳表示している点である。これにより、ユーザは物体検知センサ102の検知領域をより正確に把握することが可能となる。
Further, the detection area may be displayed as shown in FIG. 12 differs from FIG. 3 in that the detection area 301 of the
なお、本実施の形態では、車両後方の場合の例を示したが、車両の側方、車両の前方、あるいは車両の全周囲であっても構わない。 In the present embodiment, an example in the case of the rear of the vehicle is shown, but it may be on the side of the vehicle, in front of the vehicle, or all around the vehicle.
本発明は、上述した実施の形態を実現するソフトウェアのプログラム(実施の形態では図に示すフロー図に対応したプログラム)が装置に供給され、その装置のコンピュータが、供給されたプログラムを読出して、実行することによっても達成させる場合を含む。したがって、本発明の機能処理をコンピュータで実現するために、コンピュータにインストールされるプログラム自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現させるためのプログラムも含む。 In the present invention, a software program for realizing the above-described embodiment (in the embodiment, a program corresponding to the flowchart shown in the figure) is supplied to the apparatus, and the computer of the apparatus reads the supplied program, Including the case where it is also achieved by executing. Therefore, in order to implement the functional processing of the present invention on a computer, the program itself installed in the computer also implements the present invention. That is, the present invention also includes a program for realizing the functional processing of the present invention.
また、上記実施の形態で説明した構成は、単に具体例を示すものであり、本願発明の技術的範囲を制限するものではない。本願の効果を奏する範囲において、任意の構成を採用することが可能である。 The configuration described in the above embodiment is merely a specific example, and does not limit the technical scope of the present invention. Any configuration can be employed within the scope of the effects of the present application.
以上のように、本発明にかかる表示制御装置は、物体検知センサがシステム上検知しなければならないとされた検知領域を、運転者が認識することが可能となるので、周囲に存在する障害物の状況を運転者に知らせる表示制御装置等に利用することができる。 As described above, the display control device according to the present invention enables the driver to recognize the detection area that the object detection sensor has to detect on the system. It can be used for a display control device for informing the driver of the situation.
101 撮像部
102 物体検知センサ
103 検知領域判断部
104 検知領域座標保持部
105 表示制御部
106 表示部
300 表示部に映った自車両
301、401、1201 表示部に示される物体検知センサの検知領域
302、402 表示部に映った障害物
1000 レーザーレーダ
DESCRIPTION OF
Claims (11)
音波、電波、またはレーザを照射し反射波を受信することにより、あるいは、前記撮像装置からの画像を処理することにより、周囲の障害物の有無、あるいは、距離や方向を検知する物体検知センサの検知領域を制御する制御値を設定する検知領域判断部と、
前記制御値と対応した、前記物体検知センサの検知領域を示唆する検知領域図形を、前記撮像装置によって撮影された画像に重畳表示する表示制御部とを備える表示制御装置。 A display control device for displaying an image photographed by an imaging device for photographing a vehicle periphery,
An object detection sensor that detects the presence or absence of surrounding obstacles, distance, or direction by irradiating sound waves, radio waves, or lasers and receiving reflected waves, or processing images from the imaging device A detection area determination unit for setting a control value for controlling the detection area;
A display control device comprising: a display control unit that superimposes and displays a detection region graphic corresponding to the control value and indicating a detection region of the object detection sensor on an image captured by the imaging device.
音波、電波、またはレーザを照射し反射波を受信することにより、あるいは、前記撮像装置からの画像を処理することにより、周囲の障害物の有無、あるいは、距離や方向を検知する物体検知センサの検知領域を制御する制御値を設定する検知領域判断ステップと、
前記制御値と対応した、前記物体検知センサの検知領域を示唆する検知領域図形を、前記撮像装置によって撮影された画像に重畳表示する表示ステップとを備える表示制御方法。 A display control method for displaying an image photographed by an imaging device for photographing a vehicle periphery,
An object detection sensor that detects the presence or absence of surrounding obstacles, distance, or direction by irradiating sound waves, radio waves, or lasers and receiving reflected waves, or processing images from the imaging device A detection area determination step for setting a control value for controlling the detection area;
A display control method comprising: a display step of superimposing and displaying a detection area graphic corresponding to the control value and indicating a detection area of the object detection sensor on an image captured by the imaging device.
音波、電波、またはレーザを照射し反射波を受信することにより、あるいは、前記撮像装置からの画像を処理することにより、周囲の障害物の有無、あるいは、距離や方向を検知する物体検知センサの検知領域を制御する制御値を設定する検知領域判断ステップと、
前記制御値と対応した、前記物体検知センサの検知領域を示唆する検知領域図形を、前記撮像装置によって撮影された画像に重畳表示する表示ステップとを実行させる、表示制御プログラム。 A display control program executed by a computer of a display control device that displays an image captured by an imaging device that captures the surroundings of a vehicle,
An object detection sensor that detects the presence or absence of surrounding obstacles, distance, or direction by irradiating sound waves, radio waves, or lasers and receiving reflected waves, or processing images from the imaging device A detection area determination step for setting a control value for controlling the detection area;
A display control program for executing a display step of superimposing and displaying a detection area figure corresponding to the control value and indicating a detection area of the object detection sensor on an image captured by the imaging device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007112552A JP2008271266A (en) | 2007-04-23 | 2007-04-23 | Display controller, display control method, and display control program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007112552A JP2008271266A (en) | 2007-04-23 | 2007-04-23 | Display controller, display control method, and display control program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2008271266A true JP2008271266A (en) | 2008-11-06 |
Family
ID=40050174
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007112552A Pending JP2008271266A (en) | 2007-04-23 | 2007-04-23 | Display controller, display control method, and display control program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2008271266A (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011043006A1 (en) * | 2009-10-07 | 2011-04-14 | パナソニック株式会社 | Control device and vehicle surrounding monitoring device |
KR101417408B1 (en) * | 2012-11-15 | 2014-07-14 | 현대자동차주식회사 | Method and system for judging object by radar |
JP2015224936A (en) * | 2014-05-27 | 2015-12-14 | 住友電気工業株式会社 | Radio wave sensor, detection method, and detection program |
-
2007
- 2007-04-23 JP JP2007112552A patent/JP2008271266A/en active Pending
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011043006A1 (en) * | 2009-10-07 | 2011-04-14 | パナソニック株式会社 | Control device and vehicle surrounding monitoring device |
US20110228980A1 (en) * | 2009-10-07 | 2011-09-22 | Panasonic Corporation | Control apparatus and vehicle surrounding monitoring apparatus |
JP5143235B2 (en) * | 2009-10-07 | 2013-02-13 | パナソニック株式会社 | Control device and vehicle surrounding monitoring device |
KR101417408B1 (en) * | 2012-11-15 | 2014-07-14 | 현대자동차주식회사 | Method and system for judging object by radar |
JP2015224936A (en) * | 2014-05-27 | 2015-12-14 | 住友電気工業株式会社 | Radio wave sensor, detection method, and detection program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4816923B2 (en) | Vehicle peripheral image providing apparatus and method | |
US8330816B2 (en) | Image processing device | |
JP4687411B2 (en) | Vehicle peripheral image processing apparatus and program | |
JP5012718B2 (en) | Image processing device | |
US20180061102A1 (en) | Drive assist device and drive assist method | |
JP5329582B2 (en) | Vehicle periphery monitoring device | |
JP2005311868A (en) | Vehicle periphery visually recognizing apparatus | |
JP2007221200A (en) | Vehicle periphery monitoring system | |
JP2000295604A (en) | Rear and side monitoring device for vehicle | |
JP2009217740A (en) | Vehicle surroundings monitoring device and method | |
JP2010069921A (en) | Lane recognition device | |
JP2006279752A (en) | Undervehicle image display controlling apparatus and its display controlling program | |
JP2008013022A (en) | Drive assisting device for vehicle | |
US10579884B2 (en) | Image processing device and image processing method | |
JP5136071B2 (en) | Vehicle rear monitoring device and vehicle rear monitoring method | |
JP2012040883A (en) | Device for generating image of surroundings of vehicle | |
JP2012025327A (en) | Image display system, image processing apparatus, and image display method | |
JP2015232442A (en) | Image processor and vehicle front monitoring device | |
JP5718080B2 (en) | Vehicle periphery monitoring device | |
WO2018159016A1 (en) | Bird's eye view image generation device, bird's eye view image generation system, bird's eye view image generation method and program | |
JP2008271266A (en) | Display controller, display control method, and display control program | |
JP2008176566A (en) | Driving support device, driving support method, and driving support program | |
JP2002036987A (en) | Vehicle surrounding monitoring device | |
JP2007249814A (en) | Image-processing device and image-processing program | |
JP2011211432A (en) | In-vehicle imaging apparatus |