JP2010018102A - Driving support device - Google Patents

Driving support device Download PDF

Info

Publication number
JP2010018102A
JP2010018102A JP2008179158A JP2008179158A JP2010018102A JP 2010018102 A JP2010018102 A JP 2010018102A JP 2008179158 A JP2008179158 A JP 2008179158A JP 2008179158 A JP2008179158 A JP 2008179158A JP 2010018102 A JP2010018102 A JP 2010018102A
Authority
JP
Japan
Prior art keywords
line
guide
guide line
image
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008179158A
Other languages
Japanese (ja)
Other versions
JP5178361B2 (en
Inventor
Haruhiko Nishiguchi
遼彦 西口
Yoshiyuki Matsumoto
善行 松本
Takashi Watanabe
崇 渡邊
Kei Oshida
圭 忍田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2008179158A priority Critical patent/JP5178361B2/en
Publication of JP2010018102A publication Critical patent/JP2010018102A/en
Application granted granted Critical
Publication of JP5178361B2 publication Critical patent/JP5178361B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To improve the visibility of a guide line by changing the luminance of the guide line in a driving support device which superimposes the guide line, which becomes a standard of driving actions including a lane change, on photographed images of the periphery of an own vehicle, and displays the images with the guide line. <P>SOLUTION: The driving support device includes a photographing means (10), which photographs the periphery of the own vehicle (60); a display means (30), which displays a source images (12) photographed by the photographing means (10); a generation means (40), which generates the guide line (GL) that supplements the discrimination of road situation around the own vehicle (60) displayed in the source images (12); and a superimposing means (20), which displays on the display means (30) the guide line (GL) superimposed on the source images (12). The generation means (40) makes the luminance (L) of the guide line (GL) different from luminance (L) of at least a part of the images in the periphery of the guide line (GL). <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、運転支援装置に係り、詳しくは、自車の後側方を撮影した画像に重畳させた自車周辺の道路状況の識別を補完するガイド線の輝度(色)を変更して表示する装置に関する。   The present invention relates to a driving support device, and more specifically, changes and displays the luminance (color) of a guide line that complements identification of road conditions around the vehicle superimposed on an image of the rear side of the vehicle. It is related with the apparatus to do.

運転者は、安全な自車の走行のために、運転状況に応じて、前方はもとより後方や側方を自車のドアミラーやバックミラー等で目視確認する。   For safe driving of the vehicle, the driver visually checks not only the front but also the rear and the side with the door mirror and the rearview mirror of the vehicle according to the driving situation.

しかし、ドアミラーやバックミラーだけでは、車両の後方もしくは後側方の視野範囲は限定される。さらに、運転者が車室内の中央前方かつ上方に配設されたバックミラーと左右のフロントドアに配設されたドアミラーを見るためには、視線の方向を大きく変えなければならず、慎重な行動が必要であった。   However, the field of view behind or behind the vehicle is limited only by the door mirror or the rearview mirror. Furthermore, in order for the driver to look at the rear-view mirror located at the center front and above in the passenger compartment and the door mirrors located at the left and right front doors, the direction of line of sight must be changed significantly, Was necessary.

そこで、視野範囲を広くし、かつ、視線を大きく動かさずにすむように、自車の周囲をカメラ等の撮影手段で撮影し、撮影した画像を車室内のディスプレイに表示させる技術が開発されている。   In view of this, a technique has been developed in which the field of view of the vehicle is photographed with a photographing means such as a camera and the photographed image is displayed on the display in the vehicle interior so that the field of view is widened and the line of sight is not greatly moved. .

これらの技術の中には、自車の周囲の複数の画像を同時に表示し、その複数の画像を区別する境界線を設ける技術が開示されている(例えば、特許文献1参照)。   Among these techniques, a technique is disclosed in which a plurality of images around the host vehicle are simultaneously displayed and a boundary line for distinguishing the plurality of images is provided (for example, see Patent Document 1).

また、運転者が自車を車線変更しようとするときに、後続する他車との間隔を視認するために、自車からの距離や車線情報の目安となるガイド指標を、後方もしくは後側方を撮影した画像に重畳させる技術が開示されている。その他にも、自車を後退させて駐車する際に自車の後方の画像を表示し、自車の操舵角に応じた自車の予想軌跡を描くガイド指標を画像に重畳させる技術が開示されている(例えば、特許文献2参照)。
特開平11−59270号公報 特許第3183284号公報
In addition, when the driver tries to change the lane of his / her vehicle, the guide index that is a guideline for the distance from the own vehicle and lane information can be set in the rear or rear A technique for superimposing images on captured images is disclosed. In addition, a technology is disclosed that displays an image behind the host vehicle when the host vehicle is parked backward and superimposes a guide index that draws an expected trajectory of the host vehicle according to the steering angle of the host vehicle on the image. (For example, refer to Patent Document 2).
JP-A-11-59270 Japanese Patent No. 3183284

前記した撮影された画像に重畳される境界線やガイド指標は、運転者が明確に識別できることが好ましい。   It is preferable that the driver can clearly identify the boundary line and the guide index that are superimposed on the captured image.

特許文献1もしくは特許文献2で開示された技術は、境界線やガイド指標(両者を総称して以下「ガイド線」という)を生成して、撮影した画像に重畳しているが、運転者がこれらを容易に視認できるかは記載されていない。   The technique disclosed in Patent Document 1 or Patent Document 2 generates boundary lines and guide indices (both are collectively referred to as “guide lines” hereinafter) and superimposes them on a captured image. It is not described whether these are easily visible.

例えば、夜間やトンネル内等であって、周囲の光量の少ない道路を自車が走行しているとき、通常の可視光用の車載カメラで撮影された画像は暗くなる。この画像に黒系統のガイド線を重畳させた場合、元の画像とガイド線とのコントラストが小さく、ガイド線を認識することが困難となる。一方、自車の後方を走行している他車のヘッドライトの光がカメラに強く入射する、太陽光が入射する等の、カメラへ入射される光量が多い場合には、撮影された画像は明るくなる。この画像に白系統のガイド線を重畳させた場合においても、元の画像とのコントラストが小さく、ガイド線を認識することが困難となる。   For example, when the vehicle is traveling on a road with a small amount of ambient light, such as at night or in a tunnel, an image taken with a normal visible light vehicle-mounted camera becomes dark. When a black guide line is superimposed on this image, the contrast between the original image and the guide line is small, making it difficult to recognize the guide line. On the other hand, if the amount of light incident on the camera is large, such as when the light from the headlight of another vehicle traveling behind the vehicle is strongly incident on the camera or sunlight is incident, It becomes brighter. Even when a white guide line is superimposed on this image, the contrast with the original image is small and it is difficult to recognize the guide line.

このように、同じ色のガイド線を撮影された画像に重畳させる構成にあっては、自車周辺の明るさや色に係る環境によって、言い換えればディスプレイに表示される画像によっては、ガイド線が見えにくくなる場合が生ずる。その反対に、元の画像とのコントラストが大きすぎると、ガイド線が極端に目だってしまうおそれもあり、視認が必要な自車周辺の画像が見えにくくなったり、運転者はガイド線を煩わしく感ずる場合も生じうる。   As described above, in the configuration in which the guide line of the same color is superimposed on the captured image, the guide line is visible depending on the environment related to the brightness and color around the vehicle, in other words, depending on the image displayed on the display. Sometimes it becomes difficult. On the other hand, if the contrast with the original image is too large, the guide line may become extremely conspicuous, making it difficult to see the image around the vehicle that needs to be viewed, and the driver feels annoying the guide line. Cases can also arise.

本発明は、自車の周辺を撮影した画像に車線変更等の運転行動の目安となるガイド線を重畳させて表示する運転支援装置において、ガイド線の輝度を変更し,ガイド線の視認性を向上させることを目的とする。   The present invention relates to a driving assistance device that displays a guide line that is a guideline for driving behavior such as lane change on an image of the periphery of a host vehicle, and changes the brightness of the guide line to improve the visibility of the guide line. The purpose is to improve.

前記問題を解決するため、本発明の一の実施形態は、自車の周辺を撮影した画像を運転者に視認可能に表示する運転支援装置であって、前記自車の周辺を撮影する撮影手段と、前記撮影手段が撮影した元画像を表示する表示手段と、前記元画像に表示された前記自車の周辺の道路状況の識別を補完するガイド線を生成する生成手段と、前記元画像に前記ガイド線を重畳させて表示手段に表示する重畳手段と、を備え、前記生成手段は、前記ガイド線の輝度を、前記ガイド線の周囲の少なくとも一部の画像の輝度と異ならせることを特徴としている。   In order to solve the above-described problem, an embodiment of the present invention is a driving support device that displays an image of the periphery of the own vehicle so that the driver can visually recognize the image. Display means for displaying the original image taken by the photographing means, generation means for generating a guide line that complements identification of road conditions around the vehicle displayed in the original image, and the original image Superimposing means for superimposing the guide lines on the display means, and the generating means makes the luminance of the guide lines different from the luminance of at least a part of the image around the guide lines. It is said.

前記構成によれば、本実施形態は、重畳された画像の少なくとも一部にはガイド線の輝度と自車の周辺を撮影した画像の輝度とが異なる部分が設けられるため、運転者はガイド線の位置を認識しやすくなる。   According to the above-described configuration, in the present embodiment, at least a part of the superimposed image is provided with a portion where the luminance of the guide line and the luminance of the image obtained by photographing the periphery of the host vehicle are different. It becomes easy to recognize the position of.

本発明の他の実施形態は、前記ガイド線は、前記元画像に含まれる、前記運転者がドアミラーを介して視認できる前記自車の後側方の写像と同じ画像と、前記ドアミラーの写像と隣接した前記運転者がドアミラーを介して視認できない前記自車の後側方の死角領域の画像と、を分離する境界線であることを特徴としている。   In another embodiment of the present invention, the guide line is included in the original image, and the same image as a rear side map of the own vehicle that the driver can visually recognize through a door mirror, and a map of the door mirror, It is a boundary line that separates an image of a blind spot area on the rear side of the own vehicle that cannot be visually recognized by the adjacent driver through a door mirror.

前記構成によれば、1つの連続した画像へ境界線を重畳することにより、ドライバは画像に映っている他車の位置と、実際に他車が存在する位置の関係をつかみやすくなり、これによりドアミラーの死角に車両が存在するか否かを瞬時に判断することができる。また例えば、カーナビのディスプレイに自車の周辺の画像が表示されており、この画像とは異なる画像がディスプレイ上に重畳されて表示される場合であっても、これらの両画像と異なる輝度の境界線を表示し、両画像を区別しやすくすることも可能となる。   According to the above configuration, by superimposing the boundary line on one continuous image, the driver can easily grasp the relationship between the position of the other vehicle shown in the image and the position where the other vehicle actually exists. It is possible to instantly determine whether a vehicle is present in the blind spot of the door mirror. In addition, for example, even when an image around the host vehicle is displayed on the display of the car navigation system and an image different from this image is superimposed on the display, a boundary with a luminance different from both these images is displayed. It is also possible to display lines and make it easy to distinguish both images.

本発明の他の実施形態は、前記境界線は、輝度が異なる複数の境界線が連結されていることを特徴としている。   Another embodiment of the present invention is characterized in that the boundary line is connected to a plurality of boundary lines having different luminances.

自車の後側方を撮影した画像には地平線や山並みなどの遠景が含まれる。陸と空とは、太陽光の影響等で画像の輝度が部分的に大きく異なる部分が生ずる場合が多い。このような状態において、垂直方向の境界線を重畳させると、一部分では認識しやすくても、他の部分では視認できないという状況が発生する。   Images taken from the back side of the vehicle include distant views such as the horizon and mountains. The land and the sky often have a part where the luminance of the image is largely different due to the influence of sunlight or the like. In such a state, if a vertical boundary line is superimposed, a situation may occur in which it is easy to recognize in one part but cannot be recognized in another part.

前記構成によれば、本実施形態は、連結された複数の境界線が、それぞれの背景(撮像された画像)の上で、強いコントラストを持つことによって境界線が背景(撮像された画像)に埋没せず、容易に識別できる。   According to the above configuration, in the present embodiment, a plurality of connected boundary lines have a strong contrast on each background (captured image), so that the boundary line becomes a background (captured image). Can be easily identified without being buried.

本発明の他の実施形態は、前記境界線は、交互に輝度の異なる縞状の線、もしくは、破線であることを特徴としている。   Another embodiment of the present invention is characterized in that the boundary line is a striped line or a broken line having alternately different luminances.

前記構成によれば、本実施形態は、境界線が重畳される画像の輝度が頻繁に変化している場合であっても、識別しやすい境界線を表示することができる。   According to the configuration, the present embodiment can display an easily distinguishable boundary line even when the luminance of an image on which the boundary line is superimposed frequently changes.

本発明の他の実施形態は、前記ガイド線は、前記自車から後方への所定の距離を指示するガイド指標であることを特徴としている。   Another embodiment of the present invention is characterized in that the guide line is a guide index indicating a predetermined distance from the host vehicle to the rear.

自車の後方や後側方の画像は、照明設備が少ない道路での夜間走行や自車の後方を走行する他車のヘッドライトの影響等によって輝度が大きく変化する。   The luminance of the rear and rear side images of the host vehicle changes greatly due to the influence of the headlights of other vehicles that travel behind the host vehicle at night or on the road with less lighting equipment.

前記構成によれば、本実施形態は、画像の輝度に応じて、ガイド指標の輝度を設定することができる。   According to the configuration, in the present embodiment, the brightness of the guide index can be set according to the brightness of the image.

本発明の他の実施形態は、前記生成手段は、複数の輝度の異なる前記ガイド線を生成し、前記重畳手段は、この複数の輝度の異なる前記ガイド線を並設させて表示手段に表示することを特徴としている。   In another embodiment of the present invention, the generating unit generates a plurality of the guide lines having different luminances, and the superimposing unit displays the plurality of the guide lines having different luminances in parallel on the display unit. It is characterized by that.

本実施形態は、予め輝度値に差がある複数のガイド線を生成し、これらのガイド線を並べて表示する。かかる構成によれば、撮影された画像に応じて、その画像に重畳されるガイド線の輝度を算定する機能(生成手段が備える演算装置等)を車両が備えていない場合であっても、輝度値に差がある複数のガイド線の少なくとも一つは重畳される画像の輝度に対して比較的見やすいものとなり、運転者はガイド線を識別しやすくなる。   In the present embodiment, a plurality of guide lines having a difference in luminance value are generated in advance, and these guide lines are displayed side by side. According to such a configuration, even if the vehicle does not have a function (such as an arithmetic device provided in the generation unit) that calculates the luminance of the guide line superimposed on the captured image according to the captured image, the luminance At least one of the plurality of guide lines having a difference in value becomes relatively easy to see with respect to the luminance of the superimposed image, and the driver can easily identify the guide line.

本発明によれば、自車の周辺を撮影した画像に車線変更等の運転行動の目安となるガイド線を重畳させて表示する運転支援装置において、ガイド線の輝度を変更し,ガイド線の視認性を向上させることができる。   According to the present invention, in a driving assistance device that displays a guide line that is a guideline for driving behavior such as lane change on an image obtained by photographing the periphery of the host vehicle, the brightness of the guide line is changed, and the guide line is visually recognized. Can be improved.

[第1実施形態]
以下、本発明の実施形態について、図面を参照して説明する。図1は、本実施形態に係る運転支援装置の構成を示すブロック図である。
[First Embodiment]
Hereinafter, embodiments of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram illustrating a configuration of the driving support apparatus according to the present embodiment.

本実施形態は、図1に示すように、自車の後側方を撮影する撮影装置(撮影手段)10と、撮影装置10が撮影した元画像12を表示する表示装置(表示手段)30と、車線変更等の運転行動の目安となるガイド線GLが生成される生成装置(生成手段)40と、元画像12にガイド線GLを重畳させて表示装置30に重畳画像42を表示する重畳装置(重畳手段)20と、を備えている。   In the present embodiment, as shown in FIG. 1, an imaging device (imaging means) 10 that captures the rear side of the host vehicle, and a display device (display means) 30 that displays an original image 12 captured by the imaging device 10. A generating device (generating means) 40 that generates a guide line GL that serves as a guideline for driving behavior such as lane change, and a superimposing device that displays the superimposed image 42 on the display device 30 by superimposing the guide line GL on the original image 12. (Superimposing means) 20.

撮影装置10は、例えば、ドアミラー(図示せず)の下部に、自車の後側方を撮影できる方向に配設されたカメラ11である。撮影装置10が自車の後側方を撮影した元画像12は、一旦重畳装置20に送られ、表示装置30によって表示される。カメラ11は、後側方を広く撮影するために、広角のレンズを有したもの等が適用されるが、これに限定はされない。   The imaging device 10 is, for example, a camera 11 that is disposed at a lower part of a door mirror (not shown) in a direction in which the rear side of the vehicle can be captured. The original image 12 captured by the imaging device 10 at the rear side of the host vehicle is once sent to the superimposing device 20 and displayed by the display device 30. The camera 11 is a camera having a wide-angle lens in order to widely shoot the rear side, but is not limited thereto.

重畳装置20は、送られた元画像12を表示装置30とともに生成装置40にも送る。   The superimposing device 20 sends the sent original image 12 to the generating device 40 together with the display device 30.

生成装置40は、例えば、カーナビに備えられた演算装置(コンピュータ、図示せず)が適用される。以下、生成装置40が処理する輝度について説明する。   As the generation device 40, for example, an arithmetic device (computer, not shown) provided in a car navigation system is applied. Hereinafter, the luminance processed by the generation device 40 will be described.

元画像12は、コンピュータによって処理された、赤色、緑色、青色(RGB)の明度(例えば、国際電気標準会議(IEC)が定めた「sRGB」等による所定の値)のピクセルとしてディスプレイ31上に構成される。さらに詳しく説明すると、この明度の数値は、適宜補正(ガンマ補正)が行われて、操作する者が表現したい色合いや明るさでディスプレイ31に表示されるように輝度に変換され、調整される。このように、RGBの輝度の組み合わせによって様々な色を表現することができることは公知の技術となっている。   The original image 12 is displayed on the display 31 as pixels of red, green and blue (RGB) brightness (for example, a predetermined value according to “sRGB” determined by the International Electrotechnical Commission (IEC)) processed by the computer. Composed. More specifically, the brightness value is appropriately corrected (gamma correction), converted into luminance so as to be displayed on the display 31 with the hue and brightness desired by the operator, and adjusted. As described above, it is a known technique that various colors can be expressed by combinations of RGB luminances.

元画像12は、撮影状況や撮影場所、撮影装置の機能、設定等によって、一つの画像内におけるコントラストが常に同じとなることはない。   The original image 12 does not always have the same contrast in one image depending on the shooting situation, shooting location, function of the shooting device, settings, and the like.

コントラストが高くなると、明暗の差が大きくなり、明るい部分や暗い部分がはっきりするが、中間の色が識別しにくくなる。逆にコントラストが低くなると、明暗の差が縮まり中間の色が増えて、明るい部分や暗い部分がはっきりしなくなる。   When contrast is increased, the difference between light and dark becomes large, and bright and dark portions become clear, but intermediate colors are difficult to distinguish. On the other hand, when the contrast is lowered, the difference between light and dark is reduced and the number of intermediate colors is increased, so that bright and dark portions are not clear.

すなわち、画像におけるコントラストとは、映像・画像の最明部と最暗部との明るさの比、広義にはそれらの全体としての明暗の調子をいう。通常、背景に物体が重畳されているような場合、その物体とそれ以外の背景とを視覚的に区別可能か否か、を言うことが多い。そして、コントラストは、輝度の差として表現することができる。   That is, the contrast in an image means the brightness ratio between the brightest part and the darkest part of a video / image, and in a broad sense, the contrast of light and dark as a whole. Usually, when an object is superimposed on a background, it is often said whether or not the object can be visually distinguished from other backgrounds. The contrast can be expressed as a difference in luminance.

生成装置40は、送られた元画像12の輝度を判別する。そして、この元画像に重畳される後記するガイド線の輝度を前記したコントラストの比を前提として適宜設定する。詳しくは、ガイド線を描画する元画像12上の位置近傍の輝度を求め、ガイド線の輝度との差分ΔLをとり、カメラ映像とガイド線の輝度の差が一定値L_min以上であって、一定値L_max以下になるように、ガイド線の輝度Lを変化させる。   The generation device 40 determines the luminance of the sent original image 12. Then, the luminance of a guide line, which will be described later, superimposed on the original image is appropriately set on the assumption of the contrast ratio described above. Specifically, the luminance near the position on the original image 12 on which the guide line is drawn is obtained, the difference ΔL from the luminance of the guide line is taken, and the difference in luminance between the camera image and the guide line is equal to or greater than a certain value L_min. The luminance L of the guide line is changed so as to be equal to or less than the value L_max.

ここで、Lは、luminanceを表す輝度の単位であり、例えば、Adobe Systems(登録商標)によって提唱された色空間の定義AdobeRGBによれば、L=(0.298912*r+0.586611*g+0.114478*b)、と表すことができる。輝度Lは以上のようなRGB値の加重平均で決定されることにより、人の視覚に近い明るさや色の評価を数値的に扱うことができる。   Here, L is a unit of luminance representing luminance. For example, according to the definition of RGB color space proposed by Adobe Systems (registered trademark) AdobeRGB, L = (0.298912 * r + 0.586611 * g + 0.114478). * B). The brightness L is determined by the weighted average of RGB values as described above, so that evaluation of brightness and color close to human vision can be handled numerically.

さらに、ガイド線の輝度Lを設定するに当たっては、ガイド線を描画する画像上の位置近傍の色分布マップを求め、色差が一定値E_min以上になるように色を変化させてもよい。   Furthermore, when setting the luminance L of the guide line, a color distribution map in the vicinity of the position on the image on which the guide line is drawn may be obtained, and the color may be changed so that the color difference becomes a certain value E_min or more.

ここで、色差とは、標準となる色と比較する色の差である。色差の評価としては、国際照明委員会(CIE)のCIElab系が利用される場合、L*,a*,b*表色系の各値を用いて計算された値を色差(ΔE)と表す。ある色と他の色の色差を知るには、L*軸、a*軸、b*軸の差をそれぞれ二乗したものの和の平方根、を(つまり、2つの座標の距離を)求める(JIS Z 8729「色の表示方法−L*a*b*表色系及びL*u*v*表色系」による)。   Here, the color difference is a color difference to be compared with a standard color. When the CIElab system of the International Commission on Illumination (CIE) is used for color difference evaluation, the value calculated using each value of the L *, a *, b * color system is expressed as color difference (ΔE). . In order to know the color difference between one color and another color, the square root of the sum of the squares of the differences of the L * axis, a * axis, and b * axis is obtained (ie, the distance between the two coordinates) (JIS Z 8729 “Color Display Method—L * a * b * Color System and L * u * v * Color System”).

色差の値の評価基準として、米国標準局(NBS単位)では以下のように設定されている。下記基準を考慮することによって、適宜色差を設定することができる。   As an evaluation standard for the value of color difference, the US National Bureau of Standards (NBS unit) is set as follows. The color difference can be set as appropriate by considering the following criteria.

ΔE=0〜0.5のとき、かすかに(同色)差がある。ΔE=0.5〜1.5のとき、わずかに差がある。ΔE=1.5〜3.0のとき、かなり(異色)差がある。ΔE=3.0〜6.0のとき、目だって差がある。ΔE=6.0〜12のとき、大きな差がある。ΔE=12〜のとき、非常に大きな差がある。   When ΔE = 0 to 0.5, there is a slight (same color) difference. There is a slight difference when ΔE = 0.5 to 1.5. When ΔE = 1.5 to 3.0, there is a considerable (different color) difference. When ΔE = 3.0 to 6.0, there is a noticeable difference. There is a large difference when ΔE = 6.0-12. There is a very large difference when ΔE = 12.

このように、一定値E_minは、運転者の識別のしやすさを勘案して、適正な値ΔEを設定することができる。   As described above, the constant value E_min can be set to an appropriate value ΔE in consideration of the ease of identification of the driver.

輝度Lと色差ΔEの設定の実施例を説明する。   An example of setting the luminance L and the color difference ΔE will be described.

輝度の大きく異なる十分大きな複数の部分領域を描画領域に含む場合、例えば、後記する図5の説明のように、空(そら)領域と路面領域の両方を描画領域に含むような場合、描画領域全体の平均輝度とガイド線の輝度を比較するのではなく、各部分領域ごとに輝度を比較してガイド線の輝度を描画部分領域ごとに調節する。   When the drawing area includes a plurality of sufficiently large partial areas having greatly different luminances, for example, when the drawing area includes both an empty area and a road surface area as illustrated in FIG. Rather than comparing the overall average luminance with the luminance of the guide line, the luminance of each partial area is compared and the luminance of the guide line is adjusted for each drawing partial area.

ガイド線が重畳される元画像12の部分を小さな面積Aの一単位とすると、この単位内において輝度差や色差が大きい像(まだら模様の物体,砂利道等)へガイド線を重畳する場合はガイド線を複数輝度、または複数色で描画する。   When the portion of the original image 12 on which the guide line is superimposed is a unit of a small area A, when the guide line is superimposed on an image (a mottled pattern object, gravel road, etc.) having a large luminance difference or color difference within this unit. Draw guide lines with multiple brightness or multiple colors.

生成装置40は、前記のようにガイド線GLを生成し、この生成されたガイド線GLを重畳装置20に送る。   The generation device 40 generates the guide line GL as described above, and sends the generated guide line GL to the superposition device 20.

重畳装置20は、元画像12にガイド線GLを重畳し、適正な輝度差、もしくは色差を有した、重畳画像42がディスプレイ31に表示される。   The superimposing device 20 superimposes the guide line GL on the original image 12, and the superimposed image 42 having an appropriate luminance difference or color difference is displayed on the display 31.

次に図2と図3を参照して、本実施形態の実施例について説明する。図2と図3は、ディスプレイ31の表示画面の説明図であり、図2は自車の後方、後側方が暗い場合、図3は自車の後方、後側方が他車のヘッドライト等の影響で明るい場合を説明したものである。   Next, examples of the present embodiment will be described with reference to FIGS. 2 and 3 are explanatory diagrams of the display screen of the display 31. FIG. 2 shows the case where the rear side and the rear side of the own vehicle are dark. FIG. 3 shows the headlight of the other vehicle on the rear side and the rear side. It explains the case where it is bright due to the influence of the above.

表示装置30は、例えば、カーナビシステムのディスプレイ31を兼用できる。重畳画像42は、元画像12にガイド線GLが重畳された画像である。   For example, the display device 30 can also be used as the display 31 of the car navigation system. The superimposed image 42 is an image in which the guide line GL is superimposed on the original image 12.

元画像12は、例えば、車両走行方向に向かって左側のドアミラー(図示せず)の下部に配設されたカメラ11(図1参照)によって撮影された映像であり、図2の右下の角に自車60が写っており、図の右から順に自車が走行している走行車線73、隣車線70があり、そして、走行車線73と隣車線70とを仕切る白線や黄線に相当する仕切線71、隣車線70を挟んで仕切線71と対向する側に並設されている第2仕切線72が写っている。図2では、隣車線70であって自車60の後方を他車61が走行している場面を示している。   The original image 12 is, for example, an image taken by the camera 11 (see FIG. 1) disposed at the lower part of the left door mirror (not shown) in the vehicle traveling direction, and the lower right corner of FIG. There is a traveling lane 73 and an adjacent lane 70 in which the host vehicle is traveling in order from the right in the figure, and corresponds to a white line or a yellow line that partitions the traveling lane 73 and the adjacent lane 70. A second partition line 72 arranged in parallel on the side facing the partition line 71 across the partition line 71 and the adjacent lane 70 is shown. FIG. 2 shows a scene in which another vehicle 61 is traveling in the adjacent lane 70 and behind the host vehicle 60.

図2に示されるように、自車60の後側方を撮影した元画像12は、自車60が夜間でしかも照明設備がない道路を走行しているため、元画像12全体にわたって、仕切線71等を視認できないほど暗いものとなっている。   As shown in FIG. 2, the original image 12 obtained by photographing the rear side of the own vehicle 60 is traveling on a road where the own vehicle 60 is nighttime and has no lighting equipment. It is too dark to see 71 etc.

このような状況で、もし、黒色系統のガイド線GLを元画像12に重畳させたとしても(図示せず)、運転者はガイド線GLを視認しにくい。   In such a situation, even if the black-type guide line GL is superimposed on the original image 12 (not shown), it is difficult for the driver to visually recognize the guide line GL.

そこで、本実施形態では、以下に述べるようにガイド線GLの輝度を設定している。なお、以下の説明において、本実施形態におけるガイド線GLは、境界線BL1として、ディスプレイ31の固定した座標(図2に示す位置)に描画されているものとしている。境界線BL1はドアミラー視認可能な領域と不可能な死角領域とを分割する線であるため、ドアミラーの曲率、ドアミラーの向き(角度)、運転者のアイポイントにより一意に決定できる。したがって、このように、ドアミラーの向きやアイポイントの違いによって大きく境界線の位置が異なることがないことから、予め境界線の座標を設定して良い。   Therefore, in the present embodiment, the luminance of the guide line GL is set as described below. In the following description, it is assumed that the guide line GL in the present embodiment is drawn at a fixed coordinate (position shown in FIG. 2) of the display 31 as the boundary line BL1. The boundary line BL1 is a line that divides the area where the door mirror is visible and the blind area where it is impossible, and can be uniquely determined by the curvature of the door mirror, the direction (angle) of the door mirror, and the driver's eye point. Therefore, since the position of the boundary line does not vary greatly depending on the direction of the door mirror or the eye point, the coordinates of the boundary line may be set in advance.

なお、図2において、重畳画像42は、境界線BL1を挟んで、右側がドアミラー視認可能な領域MAであり、左側が視認不可能な死角領域MBである。このように境界線BL1は、視認領域MAと死角領域MBを分割している。   In FIG. 2, the superimposed image 42 is an area MA where the right side is visible through the boundary line BL <b> 1 and a blind spot area MB where the left side is not visible. Thus, the boundary line BL1 divides the visual recognition area MA and the blind spot area MB.

まず、固定された境界線BL1の座標の近傍のNピクセルを含む描画領域(図示せず)の輝度値が積算される。そして、ピクセルあたりの輝度値L_backと、境界線BL1の輝度値L_guideの差分がとられる。その差分値が、前記したように適宜選択された所定の閾値L_min以下であるとき、描画領域近傍の元画像の輝度値と、境界線BL1の輝度値がL_min以上の差をもつように、境界線BL1の輝度値を増減させる。また、差分値がL_maxを超えるときは、L_max以下の差となるように、境界線BL1の輝度値を増減させている。   First, the luminance values of a drawing area (not shown) including N pixels near the coordinates of the fixed boundary line BL1 are integrated. Then, the difference between the luminance value L_back per pixel and the luminance value L_guide of the boundary line BL1 is taken. When the difference value is equal to or smaller than the predetermined threshold L_min appropriately selected as described above, the boundary value is set so that the luminance value of the original image near the drawing area and the luminance value of the boundary line BL1 have a difference equal to or larger than L_min. Increase or decrease the luminance value of the line BL1. Further, when the difference value exceeds L_max, the luminance value of the boundary line BL1 is increased or decreased so that the difference is equal to or less than L_max.

かかる処理がされ、輝度値が設定された境界線BL1は、図2に示すように、暗い元画像12から際立つように表示される。   The boundary line BL1 which has been subjected to such processing and has a luminance value set is displayed so as to stand out from the dark original image 12, as shown in FIG.

後方を走行する他車のヘッドライト等の強い外光が入射されたとき、後側方の元画像12は、ハレーション等の影響で非常に見にくい画像となる。このとき、白色系統のガイド線GLを元画像12に重畳させて表示しても、運転者はガイド線GLを視認することが困難である.
かかる場合にも、図2で説明した場合と同様な処理が行われて境界線BL2の輝度値が設定される。輝度値が設定された境界線BL2は、図3に示すように、明るい元画像12から際立つように表示される。
When strong external light such as a headlight of another vehicle traveling behind the vehicle is incident, the rear side original image 12 becomes an image that is very difficult to see due to the influence of halation or the like. At this time, even if the white guide line GL is superimposed on the original image 12 and displayed, it is difficult for the driver to visually recognize the guide line GL.
In such a case, the same processing as that described with reference to FIG. 2 is performed to set the luminance value of the boundary line BL2. The boundary line BL2 in which the luminance value is set is displayed so as to stand out from the bright original image 12, as shown in FIG.

本実施形態は、前記したように、自車が実際に遭遇する状況を鑑みてガイド線GL(BL1,BL2)の輝度を設定しているため、周辺環境の輝度の状態によらず、ガイド線GLの視認性を保つことができる。   In the present embodiment, as described above, since the brightness of the guide lines GL (BL1, BL2) is set in consideration of the situation that the host vehicle actually encounters, the guide lines are independent of the brightness state of the surrounding environment. GL visibility can be maintained.

なお、同様の効果を得るために,ガイド線の描画領域近傍の色分布マップを求め,色差が一定値E_min以上になるように色を変化させてもよい。   In order to obtain the same effect, a color distribution map in the vicinity of the drawing area of the guide line may be obtained, and the color may be changed so that the color difference becomes a certain value E_min or more.

前記した説明におけるガイド線は、境界線だけでなく、図4に示すガイド指標にも適用できる。図4は、本実施形態に係るディスプレイ31に表示される画面の一実施例である。   The guide line in the above description can be applied not only to the boundary line but also to the guide index shown in FIG. FIG. 4 is an example of a screen displayed on the display 31 according to the present embodiment.

ガイド指標41とは、仕切線71から第2仕切線へ隣車線70を横断する方向であって、予め指示された自車から後方への指定距離の位置に引かれる仮想線であり、車両からの距離や車線位置の目安となるものである。   The guide indicator 41 is a virtual line drawn in the direction of the designated distance from the vehicle to the rear instructed in advance in the direction crossing the adjacent lane 70 from the partition line 71 to the second partition line. It is a guide for distance and lane position.

ガイド指標41の輝度等の設定は、前記した境界線と同様に行うことができる。すなわち、生成装置40(図1参照)は、ガイド指標41が重畳される元画像12の近傍領域(図示せず)に基づき、識別しやすい輝度のガイド指標41を生成する。そして、生成されたガイド指標41は、図4に示すように元画像12に重畳される。   Setting of the brightness | luminance etc. of the guide parameter | index 41 can be performed similarly to the above-mentioned boundary line. In other words, the generation device 40 (see FIG. 1) generates a guide index 41 having a luminance that is easy to identify based on a neighborhood area (not shown) of the original image 12 on which the guide index 41 is superimposed. Then, the generated guide index 41 is superimposed on the original image 12 as shown in FIG.

本実施形態は、画面上のガイド線描画位置近傍の輝度によって、ガイド線の輝度を変化させている。かかる構成は、暗い路面に黒色のガイド線がうもれてしまう、もしくは、強い外光によってハレーションが起きても白色のガイド線がうもれてしまうことを防止し、運転者は容易にガイド線を視認することができる。さらには、ガイド線が極度に目立ってしまい煩わしく感じることも防止することができる。   In the present embodiment, the luminance of the guide line is changed by the luminance near the guide line drawing position on the screen. Such a configuration prevents a black guide line from being obscured on a dark road surface, or a white guide line from being obscured even if halation is caused by strong external light, and the driver can easily visually recognize the guide line. be able to. Furthermore, it is possible to prevent the guide line from becoming extremely noticeable and annoying.

[第2実施形態]
次に、本発明の第2実施形態について図面を参照して説明する。なお、第1実施形態と重複する部分については省略し、差異のある部分を中心に説明する。図5は、本実施形態に係るディスプレイ31に表示される画面の一実施例である。
[Second Embodiment]
Next, a second embodiment of the present invention will be described with reference to the drawings. Note that portions that are the same as those in the first embodiment are omitted, and the differences will be mainly described. FIG. 5 is an example of a screen displayed on the display 31 according to the present embodiment.

本実施形態の実施例は、境界線の描画に関するものであり、基本的な構成は、第1実施形態と同じである。   The example of this embodiment relates to drawing of a boundary line, and the basic configuration is the same as that of the first embodiment.

図5に示される元画像12には、地平線15と、この地平線15によって地上部分(隣車線70等)と区別される空16が写っている。ハッチングされた地上部分(隣車線70等)と空16とは、輝度や色が大きく異なる。単色のガイド線GLは、一方の領域で見やすくとも、もう一方の領域で見づらい場合が生ずる。そこで、地上部分と空16とで領域ごとに輝度または色を変更する、例えば、白色系統の境界線BL1を地上部分に、黒色系統の境界線BL2を空16の部分に配することにより、図5に示すように、全領域において見やすいガイド線GLを実現できる。   In the original image 12 shown in FIG. 5, the horizon 15 and the sky 16 that is distinguished from the ground portion (the adjacent lane 70 and the like) by the horizon 15 are shown. The hatched ground portion (such as the adjacent lane 70) and the sky 16 are greatly different in luminance and color. The monochromatic guide line GL may be difficult to see in one region even though it is easy to see in one region. Therefore, the luminance or color is changed for each area between the ground part and the sky 16, for example, by arranging the white line boundary line BL 1 on the ground part and the black line boundary line BL 2 on the sky 16 part. As shown in FIG. 5, a guide line GL that is easy to see in the entire region can be realized.

[第3実施形態]
次に、本発明の第3実施形態について図面を参照して説明する。なお、第1実施形態と重複する部分については省略し、差異のある部分を中心に説明する。図6〜10は、本実施形態に係るディスプレイ31に表示される画面の実施例であり、図6は後側方が暗い状況における並設境界線の説明図、図7は後側方が他車のヘッドライト等の影響で明るい状況における並設境界線の説明図、図8は後側方が暗い状況における破線境界線の説明図、図9は後側方が他車のヘッドライト等の影響で明るい状況における破線境界線の説明図、図10はガイド指標の説明図である。
[Third Embodiment]
Next, a third embodiment of the present invention will be described with reference to the drawings. Note that portions that are the same as those in the first embodiment are omitted, and the differences will be mainly described. 6 to 10 are examples of screens displayed on the display 31 according to the present embodiment. FIG. 6 is an explanatory diagram of a parallel boundary line in a situation where the rear side is dark, and FIG. FIG. 8 is an explanatory diagram of a broken boundary line in a situation where the rear side is dark, and FIG. 9 is a rear side of a headlight of another vehicle. FIG. 10 is an explanatory diagram of a guide index, and FIG. 10 is an explanatory diagram of a broken line boundary line in a bright situation.

本実施形態の実施例は、第1実施形態と異なり、図1における重畳装置20から生成装置40へ元画像12を送らない。生成装置40は、元画像12の明るさや色とは無関係に、独立して、予め輝度が大きく異なる複数のガイド線GLを生成する。生成されたガイド線GLは、生成装置40から重畳装置20へ送られ、重畳装置20は元画像12にガイド線GLを重畳する。そして、重畳画像42は、表示装置30のディスプレイ31に表示される。   Unlike the first embodiment, the example of the present embodiment does not send the original image 12 from the superimposing device 20 in FIG. 1 to the generating device 40. The generation device 40 independently generates a plurality of guide lines GL with greatly different luminances independently of the brightness and color of the original image 12. The generated guide line GL is sent from the generating device 40 to the superimposing device 20, and the superimposing device 20 superimposes the guide line GL on the original image 12. Then, the superimposed image 42 is displayed on the display 31 of the display device 30.

生成されるガイド線GLは、例えば、図6に示すように白色系統の境界線BL1と黒色系統の境界線BL2であり、これらの境界線BL1,BL2が並んで表示される。図6のように後側方を撮影した元画像12が暗い場合、黒色系統の境界線BL2は視認しにくいが、白色系統の境界線BL1は周囲との輝度の違いが大きいため視認しやすい。   The generated guide lines GL are, for example, a white line boundary line BL1 and a black line boundary line BL2 as shown in FIG. 6, and these boundary lines BL1 and BL2 are displayed side by side. As shown in FIG. 6, when the original image 12 taken from the rear side is dark, the black line boundary line BL2 is difficult to visually recognize, but the white line boundary line BL1 is easy to visually recognize because of a large difference in luminance from the surroundings.

このように、生成装置40がガイド線GLの輝度値の増減量を算定するために必要な演算装置を有さない場合においても、予め輝度値の差が大きな複数本の線を描画することで、数本のうちの少なくとも1本は認識することができる。   In this way, even when the generation device 40 does not have a calculation device necessary for calculating the amount of increase / decrease in the luminance value of the guide line GL, a plurality of lines with large luminance value differences are drawn in advance. , At least one of several can be recognized.

図7は、後側方が他車のヘッドライト等の影響で明るい状況において、境界線BL1と境界線BL2とを並設した例である。図7では、黒色系統の境界線BL2が視認しやすくなっている。   FIG. 7 is an example in which the boundary line BL1 and the boundary line BL2 are arranged side by side in a situation where the rear side is bright under the influence of the headlights of other vehicles. In FIG. 7, the black line boundary line BL2 is easily visible.

図8では、生成装置40は白色系統の境界線の上から、黒色系統の破線の境界線を表示した境界線BL3を生成し、元画像12に重畳させている。かかる境界線の組み合わせによっても、境界線BL3は視認しやすくなる。   In FIG. 8, the generation device 40 generates a boundary line BL <b> 3 displaying a black line boundary line from above the white line boundary line and superimposes it on the original image 12. The boundary line BL3 can be easily visually recognized by the combination of the boundary lines.

図9は、後側方が他車のヘッドライト等の影響で明るい状況において、破線の境界線BL3を元画像12に重畳させた実施例である。境界線BL3の黒色系統の部分が視認しやすくなっている。   FIG. 9 is an example in which a broken boundary line BL3 is superimposed on the original image 12 in a situation where the rear side is bright due to the influence of the headlights of other vehicles. The black line portion of the boundary line BL3 is easily visible.

図10では、かかる境界線の組み合わせをガイド指標43に適用したものであり、同様な効果を得ることができる。そして、図示していないが、破線状のガイド指標を適用してもよい。   In FIG. 10, such a combination of boundary lines is applied to the guide index 43, and a similar effect can be obtained. Although not shown, a broken-line guide index may be applied.

なお、輝度の異なる複数のガイド線の組み合わせや、破線による表示は、第1または第2の各実施形態で説明したような、生成装置40が輝度値の増減量を算定するために必要な演算装置を有する場合においても適用できることは言うまでもない。例えば、図5のように地上部分と空という、大きく輝度の異なる領域が元画像に存在する場合などには、地上部分に応じた輝度を有するガイド線と、空部分に応じた輝度を有するガイド線とを並べて、もしくは、前記したような破線状にすることで、運転者はガイド線を容易に識別することが可能となる。   The combination of a plurality of guide lines having different luminances and the display with broken lines are operations necessary for the generation device 40 to calculate the amount of increase / decrease in luminance values as described in the first or second embodiment. Needless to say, the present invention can be applied to the case where the apparatus is provided. For example, as shown in FIG. 5, when an area having a large brightness difference between the ground part and the sky exists in the original image, a guide line having brightness corresponding to the ground part and a guide having brightness corresponding to the sky part are used. The driver can easily identify the guide line by arranging the lines side by side or by using the broken line as described above.

また、かかる輝度の異なるガイド線の組み合わせは、補助的となる輝度または色の異なる一方のガイド線が陰影の役割を果たすことにより、路面上の位置を示す他方のガイド線に対して、視認性を向上させるだけでなく、ガイド線が空中ではなく、路面上にあるという接地感を与えることができる。   In addition, such a combination of guide lines with different luminance levels is more visible than the other guide lines indicating the position on the road surface, with one auxiliary guide line having different luminance or color serving as a shadow. It is possible to give a feeling of grounding that the guide line is not on the air but on the road surface.

以上、本発明について好適な実施形態を説明した。本発明は、図面に記載したものに限定されることなく、その趣旨を逸脱しない範囲で設計変更が可能である。例えば、前記したガイド線は、従来技術である、自車の周囲の複数の画像を同時に表示し、その複数の画像に境界線を設ける技術(例えば、特許文献1参照)に適用することができることは言うまでもない。   The preferred embodiments of the present invention have been described above. The present invention is not limited to the one described in the drawings, and design changes can be made without departing from the spirit of the present invention. For example, the above-described guide line can be applied to a technique of displaying a plurality of images around the own vehicle at the same time and providing boundary lines in the plurality of images (for example, see Patent Document 1). Needless to say.

第1実施形態に係る運転支援装置の構成を示すブロック図である。It is a block diagram which shows the structure of the driving assistance device which concerns on 1st Embodiment. ディスプレイの表示画面の説明図であり、自車の後方、後側方が暗い場合を説明したものである。It is explanatory drawing of the display screen of a display, and demonstrates the case where the back and back side of the own vehicle are dark. ディスプレイの表示画面の説明図であり、自車の後方、後側方が他車のヘッドライト等の影響で明るい場合を説明したものである。It is explanatory drawing of the display screen of a display, and demonstrates the case where the back and the back side of the own vehicle are bright under the influence of the headlight etc. of another vehicle. ディスプレイに表示される画面の一実施例である。It is one Example of the screen displayed on a display. 第2実施形態に係るディスプレイに表示される画面の一実施例である。It is an example of the screen displayed on the display which concerns on 2nd Embodiment. 第3実施形態に係るディスプレイに表示される画面の実施例であり、後側方が暗い状況における並設境界線の説明図である。It is an example of the screen displayed on the display which concerns on 3rd Embodiment, and is explanatory drawing of the juxtaposed boundary line in the condition where the back side is dark. 第3実施形態に係るディスプレイに表示される画面の実施例であり、後側方が他車のヘッドライト等の影響で明るい状況における並設境界線の説明図である。It is an example of the screen displayed on the display which concerns on 3rd Embodiment, and is an explanatory view of the juxtaposed boundary line in the situation where the rear side is bright under the influence of the headlights of other vehicles. 第3実施形態に係るディスプレイに表示される画面の実施例であり、後側方が暗い状況における破線境界線の説明図である。It is an example of the screen displayed on the display which concerns on 3rd Embodiment, and is explanatory drawing of the broken-line boundary line in the condition where a back side is dark. 第3実施形態に係るディスプレイに表示される画面の実施例であり、後側方が他車のヘッドライト等の影響で明るい状況における破線境界線の説明図である。It is an Example of the screen displayed on the display which concerns on 3rd Embodiment, and is an explanatory view of the broken-line boundary line in the situation where the back side is bright under the influence of the headlight etc. of another vehicle. 第3実施形態に係るディスプレイに表示される画面の実施例であり、並設したガイド指標の説明図である。It is an Example of the screen displayed on the display which concerns on 3rd Embodiment, and is explanatory drawing of the guide parameter | index arranged in parallel.

符号の説明Explanation of symbols

10 撮影装置
11 カメラ
12 元画像
15 地平線
16 空
20 重畳装置
30 表示装置
31 ディスプレイ
40 生成装置
41,43 ガイド指標
42 重畳画像
60 自車
61 他車
70 隣車線
71 仕切線
72 第2仕切線
73 走行車線
GL ガイド線
BL1,BL2,BL3 境界線
DESCRIPTION OF SYMBOLS 10 Image pick-up device 11 Camera 12 Original image 15 Horizon 16 Sky 20 Superimposing device 30 Display device 31 Display 40 Generating device 41, 43 Guide index 42 Superimposed image 60 Own vehicle 61 Other vehicle 70 Neighboring lane 71 Dividing line 72 Second dividing line 73 Running Lane GL Guide line BL1, BL2, BL3 Boundary line

Claims (6)

自車の周辺を撮影した画像を運転者に視認可能に表示する運転支援装置であって、
前記自車の周辺を撮影する撮影手段と、
前記撮影手段が撮影した元画像を表示する表示手段と、
前記元画像に表示された前記自車の周辺の道路状況の識別を補完するガイド線を生成する生成手段と、
前記元画像に前記ガイド線を重畳させて表示手段に表示する重畳手段と、を備え、
前記生成手段は、前記ガイド線の輝度を、前記ガイド線の周囲の少なくとも一部の画像の輝度と異ならせる運転支援装置。
A driving support device that displays an image of the periphery of the vehicle in a visible manner to the driver,
Photographing means for photographing the periphery of the vehicle;
Display means for displaying an original image taken by the photographing means;
Generating means for generating a guide line that complements identification of road conditions around the vehicle displayed in the original image;
Superimposing means for superimposing the guide line on the original image and displaying it on a display means,
The driving means according to claim 1, wherein the generation means makes the luminance of the guide line different from the luminance of at least a part of the image around the guide line.
前記ガイド線は、前記元画像に含まれる、前記運転者がドアミラーを介して視認できる前記自車の後側方の写像と同じ画像と、前記ドアミラーの写像と隣接した前記運転者がドアミラーを介して視認できない前記自車の後側方の死角領域の画像と、を分離する境界線である請求項1に記載の運転支援装置。   The guide line is included in the original image, the same image as the rear side map of the host vehicle that the driver can visually recognize through the door mirror, and the driver adjacent to the door mirror map through the door mirror. The driving support device according to claim 1, wherein the driving assistance device is a boundary line that separates an image of a blind spot area behind the host vehicle that cannot be visually recognized. 前記境界線は、輝度が異なる複数の境界線が連結されている請求項2に記載の運転支援装置。   The driving support device according to claim 2, wherein the boundary line is connected to a plurality of boundary lines having different luminances. 前記境界線は、交互に輝度の異なる縞状の線、もしくは、破線である請求項2または請求項3に記載の運転支援装置。   The driving support device according to claim 2 or 3, wherein the boundary line is a striped line or a broken line with alternately different luminances. 前記ガイド線は、前記自車から後方への所定の距離を指示するガイド指標である請求項1に記載の運転支援装置。   The driving support device according to claim 1, wherein the guide line is a guide index that indicates a predetermined distance from the host vehicle to the rear. 前記生成手段は、複数の輝度の異なる前記ガイド線を生成し、
前記重畳手段は、この複数の輝度の異なる前記ガイド線を並設させて表示手段に表示する請求項1、請求項2、または、請求項5に記載の運転支援装置。
The generation means generates a plurality of the guide lines having different luminances,
6. The driving support device according to claim 1, wherein the superimposing unit displays the plurality of guide lines having different luminances side by side on a display unit.
JP2008179158A 2008-07-09 2008-07-09 Driving assistance device Expired - Fee Related JP5178361B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008179158A JP5178361B2 (en) 2008-07-09 2008-07-09 Driving assistance device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008179158A JP5178361B2 (en) 2008-07-09 2008-07-09 Driving assistance device

Publications (2)

Publication Number Publication Date
JP2010018102A true JP2010018102A (en) 2010-01-28
JP5178361B2 JP5178361B2 (en) 2013-04-10

Family

ID=41703437

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008179158A Expired - Fee Related JP5178361B2 (en) 2008-07-09 2008-07-09 Driving assistance device

Country Status (1)

Country Link
JP (1) JP5178361B2 (en)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110317002A1 (en) * 2010-06-24 2011-12-29 Tk Holdings Inc. Vehicle display enhancements
WO2012102392A1 (en) * 2011-01-27 2012-08-02 京セラ株式会社 Vehicle driving assist device
WO2012172842A1 (en) * 2011-06-13 2012-12-20 本田技研工業株式会社 Driving assistance device
WO2013088995A1 (en) * 2011-12-13 2013-06-20 住友建機株式会社 Peripheral image display device and peripheral image display method for construction machinery
WO2013145710A1 (en) * 2012-03-28 2013-10-03 京セラ株式会社 Image processing apparatus, image capturing apparatus, vehicle drive assisting apparatus, and image processing method
WO2013157250A1 (en) * 2012-04-20 2013-10-24 京セラ株式会社 Image processing device and driving assisting method
JP2016065449A (en) * 2015-12-01 2016-04-28 住友建機株式会社 Shovel
JP2017182543A (en) * 2016-03-31 2017-10-05 日産自動車株式会社 Drive support method and drive support apparatus
JP2018029229A (en) * 2016-08-15 2018-02-22 株式会社デンソー Information processing apparatus and program
JP2018056755A (en) * 2016-09-28 2018-04-05 パナソニックIpマネジメント株式会社 On-vehicle video image display device, on-vehicle video image display method, and program
JP2019206912A (en) * 2019-08-19 2019-12-05 住友建機株式会社 Shovel and display device of shovel

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002362270A (en) * 2001-06-11 2002-12-18 Matsushita Electric Ind Co Ltd Driving support device
JP2003339044A (en) * 2002-05-20 2003-11-28 Nissan Motor Co Ltd Surrounding monitoring apparatus for vehicle
JP2006176054A (en) * 2004-12-24 2006-07-06 Nippon Seiki Co Ltd Display device for vehicle
JP2008120293A (en) * 2006-11-14 2008-05-29 Aisin Seiki Co Ltd Vehicle periphery display device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002362270A (en) * 2001-06-11 2002-12-18 Matsushita Electric Ind Co Ltd Driving support device
JP2003339044A (en) * 2002-05-20 2003-11-28 Nissan Motor Co Ltd Surrounding monitoring apparatus for vehicle
JP2006176054A (en) * 2004-12-24 2006-07-06 Nippon Seiki Co Ltd Display device for vehicle
JP2008120293A (en) * 2006-11-14 2008-05-29 Aisin Seiki Co Ltd Vehicle periphery display device

Cited By (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110317002A1 (en) * 2010-06-24 2011-12-29 Tk Holdings Inc. Vehicle display enhancements
WO2011163480A2 (en) * 2010-06-24 2011-12-29 Tk Holdings Inc. Vehicle display enhancements
WO2011163480A3 (en) * 2010-06-24 2012-04-19 Tk Holdings Inc. Vehicle display enhancements
US8896684B2 (en) 2010-06-24 2014-11-25 Tk Holdings Inc. Vehicle display enhancements
WO2012102392A1 (en) * 2011-01-27 2012-08-02 京セラ株式会社 Vehicle driving assist device
US9363485B2 (en) 2011-01-27 2016-06-07 Kyocera Corporation Vehicle driving assist device
JP5643344B2 (en) * 2011-01-27 2014-12-17 京セラ株式会社 Vehicle travel support device
CN103535029A (en) * 2011-06-13 2014-01-22 本田技研工业株式会社 Driving assistance device
JP5450900B2 (en) * 2011-06-13 2014-03-26 本田技研工業株式会社 Driving assistance device
WO2012172842A1 (en) * 2011-06-13 2012-12-20 本田技研工業株式会社 Driving assistance device
US9275287B2 (en) 2011-06-13 2016-03-01 Honda Motor Co., Ltd. Driving assistance device
US20140267731A1 (en) * 2011-12-13 2014-09-18 Sumitomo(S.H.I.) Construction Machinery Co., Ltd. Peripheral image display device and method of displaying peripheral image for construction machine
CN103958790A (en) * 2011-12-13 2014-07-30 住友建机株式会社 Peripheral image display device and peripheral image display method for construction machinery
KR20140094575A (en) * 2011-12-13 2014-07-30 스미토모 겐키 가부시키가이샤 Peripheral image display device and peripheral image display method for construction machinery
JP2013124467A (en) * 2011-12-13 2013-06-24 Sumitomo (Shi) Construction Machinery Co Ltd Surrounding image display device and surrounding image display method of construction machine
WO2013088995A1 (en) * 2011-12-13 2013-06-20 住友建機株式会社 Peripheral image display device and peripheral image display method for construction machinery
EP2792800A4 (en) * 2011-12-13 2015-06-17 Sumitomo Shi Constr Mach Co Peripheral image display device and peripheral image display method for construction machinery
US10017113B2 (en) 2011-12-13 2018-07-10 Sumitomo(S.H.I.) Construction Machinery Co., Ltd. Peripheral image display device and method of displaying peripheral image for construction machine
US10293751B2 (en) 2011-12-13 2019-05-21 Sumitomo (S.H.I.) Construction Machinery Co., Ltd. Peripheral image display device and method of displaying peripheral image for construction machine
KR101672862B1 (en) * 2011-12-13 2016-11-04 스미토모 겐키 가부시키가이샤 Peripheral image display device and peripheral image display method for construction machinery
WO2013145710A1 (en) * 2012-03-28 2013-10-03 京セラ株式会社 Image processing apparatus, image capturing apparatus, vehicle drive assisting apparatus, and image processing method
US9663035B2 (en) 2012-03-28 2017-05-30 Kyocera Corporation Image processing apparatus, imaging apparatus, vehicle drive assisting apparatus, and image processing method
WO2013157250A1 (en) * 2012-04-20 2013-10-24 京セラ株式会社 Image processing device and driving assisting method
US9789818B2 (en) 2012-04-20 2017-10-17 Kyocera Corporation Image processing apparatus, imaging apparatus and drive assisting method
JP2013224081A (en) * 2012-04-20 2013-10-31 Kyocera Corp Image processing device and driving assisting method
JP2016065449A (en) * 2015-12-01 2016-04-28 住友建機株式会社 Shovel
JP2017182543A (en) * 2016-03-31 2017-10-05 日産自動車株式会社 Drive support method and drive support apparatus
JP2018029229A (en) * 2016-08-15 2018-02-22 株式会社デンソー Information processing apparatus and program
WO2018034287A1 (en) * 2016-08-15 2018-02-22 株式会社デンソー Information processing apparatus and program
CN109565575A (en) * 2016-08-15 2019-04-02 株式会社电装 Information processing unit and program
US11410274B2 (en) 2016-08-15 2022-08-09 Denso Corporation Information processing device and program
JP2018056755A (en) * 2016-09-28 2018-04-05 パナソニックIpマネジメント株式会社 On-vehicle video image display device, on-vehicle video image display method, and program
JP2019206912A (en) * 2019-08-19 2019-12-05 住友建機株式会社 Shovel and display device of shovel

Also Published As

Publication number Publication date
JP5178361B2 (en) 2013-04-10

Similar Documents

Publication Publication Date Title
JP5178361B2 (en) Driving assistance device
US11553153B2 (en) Display system and method
US20050134479A1 (en) Vehicle display system
US8514282B2 (en) Vehicle periphery display device and method for vehicle periphery image
WO2012169355A1 (en) Image generation device
WO2013088995A9 (en) Peripheral image display device and peripheral image display method for construction machinery
KR20190047027A (en) How to provide a rearview mirror view of the vehicle&#39;s surroundings in the vehicle
US20120249789A1 (en) Vehicle peripheral image display system
KR102045088B1 (en) Image displaying Method and Apparatus therefor
JP6182629B2 (en) Vehicle display system
JP4200343B2 (en) Monitor device
JP3972722B2 (en) In-vehicle image processing device
CN112224132A (en) Vehicle panoramic all-around obstacle early warning method
JP2008001182A (en) Vehicular visual information presenting device and method
US20120154590A1 (en) Vehicle surrounding monitor apparatus
CN108364263B (en) Vehicle-mounted image processing method for standard definition input and high definition output
US20200137322A1 (en) Image processing apparatus
JP2009049943A (en) Top view display unit using range image
KR101657673B1 (en) Apparatus and method for generating panorama view
JP2012257106A (en) Image generating device
WO2011000392A1 (en) Method and camera system for improving the contrast of a camera image
JP3485165B2 (en) Back monitor device for vehicles
KR20160069034A (en) Light control apparatus for head-up display information and method thereof
WO2014010179A1 (en) Field of view assistance device for vehicle
CN113840755A (en) Method for generating image of surroundings of vehicle and apparatus for generating image of surroundings of vehicle

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101125

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120719

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120828

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121024

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121218

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130108

R150 Certificate of patent or registration of utility model

Ref document number: 5178361

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees