JP2015136056A - Operation support device - Google Patents

Operation support device Download PDF

Info

Publication number
JP2015136056A
JP2015136056A JP2014006843A JP2014006843A JP2015136056A JP 2015136056 A JP2015136056 A JP 2015136056A JP 2014006843 A JP2014006843 A JP 2014006843A JP 2014006843 A JP2014006843 A JP 2014006843A JP 2015136056 A JP2015136056 A JP 2015136056A
Authority
JP
Japan
Prior art keywords
image
display
angle
assistance device
driving assistance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014006843A
Other languages
Japanese (ja)
Other versions
JP6323018B2 (en
Inventor
川島 毅
Takeshi Kawashima
毅 川島
猛 羽藤
Takeshi Hado
羽藤  猛
勝之 福田
Katsuyuki Fukuda
勝之 福田
大祐 竹森
Daisuke Takemori
大祐 竹森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2014006843A priority Critical patent/JP6323018B2/en
Publication of JP2015136056A publication Critical patent/JP2015136056A/en
Application granted granted Critical
Publication of JP6323018B2 publication Critical patent/JP6323018B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

PROBLEM TO BE SOLVED: To achieve an easy-to-see display for a driver, in an electronic mirror for displaying an image obtained by capturing a rear side of an own vehicle.SOLUTION: When a determination is made that there is no other vehicle in the proximity range of an own vehicle, a control unit 11 displays a captured image acquired from a camera 20, as a narrow angle image in a range corresponding to a field angle narrower than the total angle of view in the horizontal direction, on a display 30. However, when a determination is made that there is no other vehicle in the proximity range of the own vehicle, the image is displayed as a wide angle image, where the field angle in the horizontal direction is wider than that of the narrow angle image. Alternatively, the control unit 11 performs smoothing for image information corresponding to a set partial object region, out of the captured image acquired from the camera 20, and displays the captured image, including the image information subjected to smoothing, on the display 30.

Description

本発明は、自車両の後側方を撮影した映像を表示する運転支援装置に関する。   The present invention relates to a driving support device that displays an image of a rear side of a host vehicle.

車両のドアミラー付近に取付けられたカメラで自車両の後側方を撮影し、車室内に設けられたディスプレイにカメラによって撮影された画像を表示する、いわゆる電子ミラーの技術が提案されている(例えば、特許文献1参照)。この種の電子ミラーによれば、カメラを用いることでフェンダーミラーやドアミラー等の後写鏡よりも広範囲を撮影して表示できるので、死角を減らすという利点がある。   There has been proposed a so-called electronic mirror technique in which a camera attached to the vicinity of a vehicle door mirror is used to photograph the rear side of the host vehicle, and an image photographed by the camera is displayed on a display provided in the passenger compartment (for example, , See Patent Document 1). According to this type of electronic mirror, a camera can be used to shoot and display a wider area than a rear-view mirror such as a fender mirror or a door mirror, which has the advantage of reducing blind spots.

特開2006−51850号公報JP 2006-51850 A

一方で、電子ミラーによって従来の後写鏡よりも広範囲の光景が表示されるようになることで、次のような問題点がある。第1の問題点として、広角表示になることで画面に入る範囲が広くなる反面、画面に写る被写体は小さくなる。そのため、主に表示すべき後側方の光景が小さく表示されてしまう。第2の問題点として、自車両から至近の道路面まで広く表示されることで、荒れた道路面の質感(テクスチャ)が運転者の目に入り易くなり、運転者が煩わしく感じるおそれがある。   On the other hand, since the electronic mirror displays a wider range of scenes than the conventional rearview mirror, there are the following problems. As a first problem, wide-angle display widens the range that enters the screen, but the subject on the screen becomes smaller. For this reason, the rear side scene to be mainly displayed is displayed small. As a second problem, the wide display from the host vehicle to the nearest road surface makes the rough road surface texture (texture) easily visible to the driver, and the driver may feel annoying.

本発明は、上記第1及び第2の問題点を解決するするためになされたものである。   The present invention has been made to solve the first and second problems.

上記第1の問題点を解決するためになされた請求項1に記載の発明は、自車両の後側方を撮像する撮像手段と、自車両の後側方に存在する他車両を検知する検知手段と、撮像手段により撮像された撮像画像を表示する表示手段と通信可能に接続された運転支援装置である。この運転支援装置が備える表示制御手段は、自車両の後側方における所定範囲で他車両が検知されていない場合、撮像手段から取得した撮像画像のうち、この撮像画像における水平方向の全画角よりも狭い画角に相当する範囲の画像で構成される狭角画像を表示手段に表示させる。一方、自車両の後側方における所定範囲で他車両が検知されている場合、表示制御装置は、狭角画像よりも水平方向の画角を広げた範囲に相当する画像で構成される広角画像を表示手段に表示させる。   The invention according to claim 1, which has been made to solve the first problem, includes an imaging unit that images the rear side of the host vehicle, and a detection that detects another vehicle that is located behind the host vehicle. And a driving support apparatus communicably connected to a display unit that displays a captured image captured by the imaging unit. When the other vehicle is not detected in a predetermined range on the rear side of the host vehicle, the display control means included in the driving support device has a full angle of view in the horizontal direction in the captured image among the captured images acquired from the imaging means. A narrow-angle image composed of an image in a range corresponding to a narrower angle of view is displayed on the display means. On the other hand, when another vehicle is detected in a predetermined range on the rear side of the host vehicle, the display control device displays a wide-angle image composed of an image corresponding to a range in which the horizontal angle of view is wider than the narrow-angle image. Is displayed on the display means.

本発明によれば、自車両の後側方における特定の位置に他車両が存在しないときには、撮像手段から取得した撮像画像を狭角画像として表示することで、画面に入る範囲を狭くして必要な範囲を大きく表示することができる。一方、自車両の後側方における特定の位置に他車両が存在するときには、撮像手段から取得した撮像画像を広角画像として表示することで、画面に入る範囲を広くして死角を減らし、他車両を発見し易くできる。このように、自車両の後側方に存在する他車両の有無に応じて、狭角表示と広角表示を使い分けることで、広角表示による利点と、狭角表示による利点とを両立できる。   According to the present invention, when there is no other vehicle at a specific position on the rear side of the host vehicle, the captured image acquired from the imaging unit is displayed as a narrow-angle image, so that the range that enters the screen is narrowed. A large range can be displayed. On the other hand, when there is another vehicle at a specific position on the rear side of the host vehicle, the captured image acquired from the imaging means is displayed as a wide-angle image, thereby widening the range that enters the screen and reducing the blind spot, Can be easily discovered. In this way, by selectively using the narrow-angle display and the wide-angle display according to the presence or absence of other vehicles existing behind the host vehicle, it is possible to achieve both the advantages of the wide-angle display and the advantages of the narrow-angle display.

上記第2の問題点を解決するためになされた請求項6に記載の発明は、自車両の後側方を撮像する撮像手段と、撮像手段により撮像された撮像画像を表示する表示手段と通信可能に接続された運転支援装置である。この運転支援装置が備える表示制御手段は、撮像手
段から取得した撮像画像のうち、設定された一部の対象領域に該当する画像情報に対して平滑化処理を施し、平滑化処理が施された画像情報を含む撮像画像を表示手段に表示させる。
The invention according to claim 6 made to solve the second problem communicates with an imaging means for imaging the rear side of the host vehicle, and a display means for displaying a captured image captured by the imaging means. It is the driving assistance device connected so as to be possible. The display control means included in the driving support device performs the smoothing process on the image information corresponding to the set target area among the captured images acquired from the imaging means, and the smoothing process is performed. A captured image including image information is displayed on the display means.

本発明によれば、撮像画像における一部の対象領域に対して平滑化処理を施すことで、その対象領域における画像の細かい変化を少なくし、滑らかで見やすい画像にすることができる。このようにすることで、例えば、自車両から至近の道路面の荒れた質感を軽減することができ、運転者にとって見やすい画像を表示できる。   According to the present invention, by performing the smoothing process on a part of the target area in the captured image, it is possible to reduce a fine change in the image in the target area and to make the image smooth and easy to see. By doing so, for example, the rough texture of the road surface close to the host vehicle can be reduced, and an image that is easy to see for the driver can be displayed.

運転支援装置の構成を示すブロック図。The block diagram which shows the structure of a driving assistance device. 支援画像表示処理(第1実施形態)の手順を示すフローチャート。The flowchart which shows the procedure of a support image display process (1st Embodiment). 狭角表示及び広角表示の概要を表す説明図。Explanatory drawing showing the outline | summary of a narrow angle display and a wide angle display. 画像表示態様の推移を表す説明図。Explanatory drawing showing transition of an image display mode. 支援画像の表示態様の一例を表す説明図。Explanatory drawing showing an example of the display mode of a support image. 画像表示態様の変形例を表す説明図。Explanatory drawing showing the modification of an image display mode. 狭角表示から広角表示に切替えるタイミングの変形例を表す説明図。Explanatory drawing showing the modification of the timing which switches from a narrow angle display to a wide angle display. 支援画像表示処理(第2実施形態)の手順を示すフローチャート。The flowchart which shows the procedure of assistance image display processing (2nd Embodiment). 平滑化処理の対象領域の概要を表す説明図。Explanatory drawing showing the outline | summary of the object area | region of a smoothing process. 対象領域の決定方法の一例を表す説明図。Explanatory drawing showing an example of the determination method of an object area | region.

以下、本発明の実施形態を図面に基づいて説明する。なお、本発明は下記の実施形態に限定されるものではなく様々な態様にて実施することが可能である。
[運転支援システムの構成の説明]
図1に示すように、実施形態の車載システム1は、運転支援装置10と、この運転支援装置10に接続されているカメラ20、レーダ・センサ部21、車両情報入力部22、操作部23、及びディスプレイ30とを備える。
Hereinafter, embodiments of the present invention will be described with reference to the drawings. In addition, this invention is not limited to the following embodiment, It is possible to implement in various aspects.
[Description of configuration of driving support system]
As shown in FIG. 1, the in-vehicle system 1 of the embodiment includes a driving support device 10, a camera 20 connected to the driving support device 10, a radar sensor unit 21, a vehicle information input unit 22, an operation unit 23, And a display 30.

カメラ20は、車載システム1が搭載される車両(以下、自車両)の後側方を撮像するものである。このカメラ20は、主に自車両が走行している車線と隣接する車線(以下、隣接車線)が撮像範囲に入るように、例えば自車両のバックミラーや車体側面に後方に向けて取付けられている。このカメラ20は、例えば、車両の左右どちら側に取付けられていてもよい。   The camera 20 captures an image of the rear side of a vehicle (hereinafter, the host vehicle) on which the in-vehicle system 1 is mounted. For example, the camera 20 is attached to the rearview mirror of the host vehicle or the side of the vehicle body so that the lane adjacent to the lane in which the host vehicle is traveling (hereinafter referred to as the adjacent lane) enters the imaging range. Yes. This camera 20 may be attached to either the left or right side of the vehicle, for example.

レーダ・センサ部21は、例えば、ミリ波レーダやレーザレーダ、カメラ映像に対する画像認識により、自車両の後側方に存在する他車両等の対象物の存在や位置(自車両からの距離や方向)を検知する物体検知用センサである。車両情報入力部22は、自車両に装備された車載機器からの情報を運転支援装置10に入力する。本実施形態では、車両情報入力部22によって入力される情報として、時刻や、車両に装備された灯火の作動状況、日照センサによる検知結果等に関する情報を想定している。   For example, the radar sensor unit 21 recognizes the presence or position of an object such as another vehicle existing behind the host vehicle (distance or direction from the host vehicle) by image recognition for a millimeter wave radar, a laser radar, or a camera image. ) Is a sensor for detecting an object. The vehicle information input unit 22 inputs information from the in-vehicle device equipped in the host vehicle to the driving support device 10. In this embodiment, the information input by the vehicle information input unit 22 is assumed to be information related to time, the operating condition of the lights installed in the vehicle, the detection result by the sunshine sensor, and the like.

操作部23は、運転支援装置10に対するユーザからの操作指示を入力するための入力装置である。この操作部23は、例えば、カメラ20の撮像方向を変えて表示範囲を変更するための操作に用いられる。ディスプレイ30は、カメラ20による撮像画像を表示するための表示装置である。このディスプレイ30は、例えば運転席前方のメータパネルやAピラー付近の運転者から視認しやすい位置に設置される。   The operation unit 23 is an input device for inputting an operation instruction from the user to the driving support device 10. The operation unit 23 is used for an operation for changing the display range by changing the imaging direction of the camera 20, for example. The display 30 is a display device for displaying an image captured by the camera 20. For example, the display 30 is installed at a position that is easily visible from a meter panel in front of the driver's seat or a driver near the A pillar.

運転支援装置10は、図示しないCPU,ROM,RAM等を中心に構成された情報処理装置(例えば、マイクロコンピュータ)である。この運転支援装置10は、カメラ20
から取得した撮像画像を加工した支援画像を表示する機能を実現するものであり、そのための機能的構成として、制御部11、表示出力部12、及び記憶部13を備える。
The driving support device 10 is an information processing device (for example, a microcomputer) configured mainly with a CPU, ROM, RAM, and the like (not shown). The driving support device 10 includes a camera 20
The function which displays the support image which processed the captured image acquired from 1 is implemented, and the control part 11, the display output part 12, and the memory | storage part 13 are provided as a functional structure for it.

制御部11は、カメラ20から取得した撮像画像を加工して支援画像を作成する。この処理の詳細な内容については、後述の第1実施形態及び第2実施形態の項において説明する。表示出力部12は、カメラ20から取得した撮像画像に基づいて制御部11において作成された支援画像を、ディスプレイ30に出力して表示させる。記憶部13は、制御部11が実行する処理に用いられるデータ等の各種情報を記憶する。   The control unit 11 processes the captured image acquired from the camera 20 and creates a support image. Detailed contents of this processing will be described in the sections of the first and second embodiments described later. The display output unit 12 outputs and displays the support image created in the control unit 11 on the display 30 based on the captured image acquired from the camera 20. The storage unit 13 stores various information such as data used for processing executed by the control unit 11.

〈第1実施形態〉
第1実施形態の概要は次のとおりである。運転支援装置10は、自車両の後側方に設定された近接範囲に他車両が存在するか否かに応じて、カメラ20から取得した撮像画像を表示するときの水平方向の画角の表示範囲を狭くする狭角表示と、広くする広角表示とを切り変える。
<First Embodiment>
The outline of the first embodiment is as follows. The driving support device 10 displays a horizontal angle of view when displaying a captured image acquired from the camera 20 depending on whether or not another vehicle exists in the proximity range set to the rear side of the host vehicle. Switch between narrow-angle display that narrows the range and wide-angle display that widens the range.

〈〈支援画像表示処理〉〉
第1実施形態における支援画像表示処理の手順について、図2のフローチャートを参照しながら説明する。この処理は、運転支援装置10の制御部11が所定の制御周期で繰返し実行する。
<Supported image display processing>
The procedure of the support image display process in the first embodiment will be described with reference to the flowchart of FIG. This process is repeatedly executed by the control unit 11 of the driving support apparatus 10 at a predetermined control cycle.

S100では、制御部11は、カメラ20による撮像画像を取得する。S102では、制御部11は、レーダ・センサ部21から得られた検知結果に基づき、自車両の位置から後側方の所定範囲内に設定された近接範囲に他車両が存在するか否かを判定する。近接範囲に他車両が存在しない場合(S102:NO)、制御部11はS104に進む。S104では、制御部11は、カメラ20から取得した撮像画像における水平画角の全範囲のうち、自車両に近い側の一部の画角に相当する範囲の画像からなる狭角画像を作成する。   In S100, the control unit 11 acquires an image captured by the camera 20. In S102, based on the detection result obtained from the radar sensor unit 21, the control unit 11 determines whether or not there is another vehicle in the proximity range set within a predetermined range on the rear side from the position of the own vehicle. judge. When there is no other vehicle in the proximity range (S102: NO), the control unit 11 proceeds to S104. In S <b> 104, the control unit 11 creates a narrow-angle image composed of images in a range corresponding to a part of the angle of view closer to the host vehicle out of the entire range of the horizontal angle of view in the captured image acquired from the camera 20. .

一方、近接範囲に他車両が存在する場合(S102:YES)、制御部11はS106に進む。なお、S102では、後側方にいる他車両の位置の推移に基づき、自車両の後方から接近(追越し)しつつある後側方の他車両が前記近接範囲に到達したことを条件に、肯定判定をする構成であってもよい。S106では、制御部11は、カメラ20から取得した撮像画像において、狭角表示の水平画角から自車両から遠ざかる方向にさらに画角を広げた範囲(最大は全画角)に相当する画像からなる広角画像を作成する。また、S106では、制御部11は、狭角画像の表示から広角画像の表示に切替える過程において、広角側の画像を画像の縁部から徐々にスライドインさせるアニメーションの画像を作成する。狭角画像及び広角画像の具体的な態様については後述する。   On the other hand, when another vehicle exists in the proximity range (S102: YES), the control unit 11 proceeds to S106. In S102, affirmation is made on the condition that the other vehicle on the rear side approaching (passing) from the rear of the host vehicle has reached the proximity range based on the transition of the position of the other vehicle on the rear side. The structure which determines may be sufficient. In S <b> 106, the control unit 11 starts from an image corresponding to a range in which the angle of view is further widened in the direction away from the host vehicle from the horizontal angle of view of the narrow angle display in the captured image acquired from the camera 20. Create a wide angle image. In S106, the control unit 11 creates an animation image that gradually slides in the wide-angle image from the edge of the image in the process of switching from the narrow-angle image display to the wide-angle image display. Specific modes of the narrow angle image and the wide angle image will be described later.

次のS108では、制御部11は、S104又はS106で作成した支援画像を、表示出力部12を介してディスプレイ30に表示させる。S108の後、制御部11は、S100に戻る。   In the next S108, the control unit 11 causes the display 30 to display the support image created in S104 or S106 via the display output unit 12. After S108, the control unit 11 returns to S100.

〈〈狭角表示及び広角表示についての詳細な説明〉〉
図3は、自車両に搭載されたカメラ20による撮像範囲を模式的に表す上視図である。図3の事例では、自車両と、自車両の後側方の隣接車線を走行する後続車両1,2がいる状況を想定している。
<Detailed description of narrow-angle display and wide-angle display>
FIG. 3 is a top view schematically showing an imaging range of the camera 20 mounted on the host vehicle. In the example of FIG. 3, it is assumed that there is a host vehicle and the following vehicles 1 and 2 traveling in the adjacent lane on the rear side of the host vehicle.

図3に例示されるとおり、カメラ20による撮像範囲の水平画角は、自車両側の端を0°として、自車両から遠ざかる方向に50°までを最大とする。このうち、0〜29°の範囲が、狭角表示をするときの水平画角に相当する。また、0〜50°の範囲が広角表示をするときの水平画角に相当する。   As illustrated in FIG. 3, the horizontal angle of view of the imaging range by the camera 20 is 0 ° at the end on the own vehicle side, and is maximum up to 50 ° in a direction away from the own vehicle. Of these, the range of 0 to 29 ° corresponds to the horizontal angle of view when narrow-angle display is performed. A range of 0 to 50 ° corresponds to a horizontal angle of view when wide-angle display is performed.

自車用の後側方のごく近くに設定された近接範囲に他車両が存在しないときには、カメラ20から取得した撮像画像を水平画角0〜29°の狭角表示にて表示する。一方、図3の後続車両1のように、自車両の近接範囲に他車両が存在するときには、カメラ20から取得した撮像画像2を水平画角0〜50°の広角表示にて表示する。図3の事例では、狭角表示の場合には車体後部のごく一部しか表示されないはずの後続車両1が、広角表示に切替わることにより車体の大部分が表示されるようになる。   When there is no other vehicle in the proximity range set very close to the rear side for the own vehicle, the captured image acquired from the camera 20 is displayed in a narrow-angle display with a horizontal angle of view of 0 to 29 °. On the other hand, when there is another vehicle in the proximity range of the host vehicle as in the following vehicle 1 in FIG. 3, the captured image 2 acquired from the camera 20 is displayed in a wide-angle display with a horizontal angle of view of 0 to 50 °. In the case of FIG. 3, in the case of narrow-angle display, the succeeding vehicle 1 that should have displayed only a small part at the rear of the vehicle body is switched to the wide-angle display, so that most of the vehicle body is displayed.

ところで、本実施形態では、カメラ20から取得した撮像画像を表示する際、狭角表示及び広角表示の何れにおいても同じ画像サイズで表示するようになっている。また、画像の垂直画角については、水平画角を狭角表示にする場合と広角表示する場合とで範囲を変えないようにする。このようにすることで、狭角表示された画像と広角表示された画像とで風景に対する遠近感が変わらないようにできる。そのために、広角表示するときに画像の幅を圧縮して、狭角表示と同じ画像サイズに収めるようになっている。本実施形態では、図4に例示される態様によって、狭角表示と広角表示との切替えを実現する。   By the way, in this embodiment, when displaying the picked-up image acquired from the camera 20, it displays with the same image size also in any of a narrow angle display and a wide angle display. The range of the vertical angle of view of the image is not changed between the case where the horizontal angle of view is displayed as a narrow angle and the case where it is displayed as a wide angle. By doing so, it is possible to prevent the perspective with respect to the landscape from changing between an image displayed at a narrow angle and an image displayed at a wide angle. For this reason, the width of the image is compressed to display the same image size as that of the narrow-angle display when the wide-angle display is performed. In the present embodiment, switching between narrow-angle display and wide-angle display is realized by the mode illustrated in FIG.

図4(a)に例示されるとおり、狭角表示の段階では、画像全体を等倍表示エリアAに設定し、ここに水平画角0〜29°の範囲の撮像画像を割当てる。等倍表示エリアAには、垂直画角に対する画像の高さの比率と、水平画角に対する画像の幅の比率とを等倍(カメラ20から取得した元の撮像画像と同じ縦横比)にして画像を作成する。   As illustrated in FIG. 4A, at the narrow-angle display stage, the entire image is set in the equal magnification display area A, and a captured image having a horizontal angle of view of 0 to 29 ° is assigned thereto. In the same magnification display area A, the ratio of the image height to the vertical angle of view and the ratio of the image width to the horizontal angle of view are set to the same magnification (the same aspect ratio as the original captured image acquired from the camera 20). Create an image.

図5(a)は、狭角表示によってディスプレイ30に表示される支援画像の一例である。図5(a)に例示されるとおり、支援画像の左縁の領域には自車両が写っており、それより右側の領域には自車両の後側方の道路の光景が写っている。この狭角表示による支援画像には、水平画角0〜29°に相当する範囲の撮像画像が含まれており、自車両の後側方の隣接車線の光景が良好に写っている。   FIG. 5A is an example of a support image displayed on the display 30 by narrow-angle display. As illustrated in FIG. 5A, the host vehicle is shown in the left edge area of the support image, and a road scene behind the host vehicle is shown in the right area. The support image based on the narrow angle display includes a captured image in a range corresponding to a horizontal angle of view of 0 to 29 °, and the scene of the adjacent lane on the rear side of the host vehicle is well captured.

つぎに、図4(b)に例示されるとおり、広角表示の段階では、画像の所定位置において縦方向に引いた境界線によって、画像全体を等倍表示エリアA及び変倍表示エリアBの2つの領域に分割する。本実施形態では、撮像画像において自車両に近い側に等倍表示エリアAを設定する。また、撮像画像において自車両から遠い側に変倍表示エリアBを設定する。なお、境界線は、広角表示の画像上に視認可能に描画してもよいし、視認可能に描画しなくてもよい。   Next, as illustrated in FIG. 4B, at the wide-angle display stage, the entire image is divided into two of the same magnification display area A and the magnification display area B by the boundary line drawn in the vertical direction at a predetermined position of the image. Divide into two areas. In the present embodiment, the same size display area A is set on the side close to the host vehicle in the captured image. Further, a zoom display area B is set on the far side from the host vehicle in the captured image. The boundary line may be drawn so as to be visible on the wide-angle display image, or may not be drawn so as to be visible.

等倍表示エリアAには、水平方向の画角0°から基準線の位置に相当する範囲の撮像画像を割当てる。この等倍表示エリアAには狭角表示のときと同様に、カメラ20から取得した元の撮像画像と同じ縦横比で画像を作成する。一方、変倍表示エリアBには、等倍表示エリアAの続きから水平方向の画角50°までに相当する範囲の撮像画像を割当てる。この変倍表示エリアBには、水平画角に対する画像の幅の比率を小さくして画像を収める。このため、この変倍表示エリアBに表示される画像は、カメラ20から取得した元の撮像画像を、変倍表示エリアBの幅に合わせて所定の圧縮率で水平方向に圧縮した縦長の画像になる。   A captured image in a range corresponding to the position of the reference line from the horizontal angle of view 0 ° is assigned to the equal magnification display area A. In the same magnification display area A, an image is created with the same aspect ratio as the original captured image acquired from the camera 20 as in the case of narrow-angle display. On the other hand, in the variable magnification display area B, a captured image in a range corresponding to the continuation of the equal magnification display area A to the horizontal field angle of 50 ° is assigned. In this variable magnification display area B, the ratio of the width of the image to the horizontal angle of view is reduced to store the image. Therefore, the image displayed in the scaling display area B is a vertically long image obtained by compressing the original captured image acquired from the camera 20 in the horizontal direction at a predetermined compression rate in accordance with the width of the scaling display area B. become.

変倍表示エリアBにおける画像の幅の圧縮率は、変倍表示エリアB全体で均一に設定してもよいし、境界線の位置を最小値として、画像の右端に向けて所定の変化率で徐々に大きくなるように設定してもよい。この変化率は、境界線の位置から画像の右端まで一定であっても非一定であってもよい。   The compression ratio of the image width in the variable magnification display area B may be set uniformly in the entire variable magnification display area B, or at a predetermined change rate toward the right edge of the image with the position of the boundary line as the minimum value. You may set so that it may become large gradually. This rate of change may be constant or non-constant from the position of the boundary line to the right edge of the image.

また、狭角表示から広角表示に切替える過程では、境界線を画像の右端から所定位置まで徐々に移動させながら、推移する基準線の位置に合わせて連続的に等倍表示エリアA及
び変倍表示エリアBに対応する画像を描画する。このようにすることで、変倍表示エリアBが画像の右端から徐々にスライドインしながら拡大するアニメーションを表示する。
In the process of switching from narrow-angle display to wide-angle display, the boundary line is gradually moved from the right end of the image to a predetermined position, and continuously in the same magnification display area A and variable magnification display according to the position of the changing reference line. An image corresponding to area B is drawn. In this way, an animation in which the magnification display area B expands while gradually sliding in from the right end of the image is displayed.

図5(b)は、図5(a)に例示される狭角表示から広角表示に切替えたときの支援画像の一例である。図5(b)に例示されるとおり、広角表示による支援画像は、境界線によって左右2つの領域に区切られており、この2つの領域に水平画角0〜50°に相当する範囲の撮像画像が含まれている。境界線より左側(自車両側)の領域が、等倍表示エリアAに相当する。ここには、図5(a)の狭角表示と同じ縦横比(圧縮なし)で撮像画像が描画されている。そのため、狭角表示のときと遠近感が変わらず、自車両の後側方の隣接車線の光景が良好に写っている。   FIG. 5B is an example of a support image when the narrow-angle display illustrated in FIG. 5A is switched to the wide-angle display. As illustrated in FIG. 5B, the support image based on the wide-angle display is divided into two left and right regions by a boundary line, and the captured image in a range corresponding to a horizontal angle of view of 0 to 50 ° is included in these two regions. It is included. The area on the left side of the boundary line (the vehicle side) corresponds to the same size display area A. Here, a captured image is drawn with the same aspect ratio (no compression) as the narrow-angle display in FIG. Therefore, the perspective does not change from the narrow-angle display, and the scene of the adjacent lane on the rear side of the host vehicle is well reflected.

一方、境界線より右側(自車両から遠い側)の領域が、変倍表示エリアBに相当する。ここには、等倍表示エリアAに含まれなかった撮像画像の残りの領域が、変倍表示エリアBの幅に合わせて水平方向に圧縮された縦長の画像として描画されている。このように、広角表示においては、狭角表示のときに死角であった範囲を水平方向に圧縮した状態で表示する。このようにすることで、狭角表示のときと同様に隣接車線の光景を大きく表示したまま死角を低減できる。   On the other hand, the area on the right side of the boundary line (the side far from the host vehicle) corresponds to the magnification display area B. Here, the remaining area of the captured image that was not included in the 1 × magnification display area A is drawn as a vertically long image that is compressed in the horizontal direction in accordance with the width of the magnification display area B. In this way, in wide-angle display, the range that was a blind spot in narrow-angle display is displayed in a state compressed in the horizontal direction. By doing in this way, a blind spot can be reduced with the large sight of the adjacent lane displayed as in the narrow-angle display.

なお、図5(c)は、図5(a)に例示される狭角表示から画像全体をズームアウトすることで、画像の水平画角を50°まで拡大した参考例である。この手法では、狭角表示のときに表示されていた範囲が全体に小さく表示される。代わりに、狭角表示においては死角であった自車両の近接範囲にいる後続車両が画像の右側に大きく表示される。   Note that FIG. 5C is a reference example in which the horizontal angle of view of an image is enlarged to 50 ° by zooming out the entire image from the narrow-angle display illustrated in FIG. In this method, the range displayed at the time of narrow-angle display is displayed small as a whole. Instead, the following vehicle in the proximity range of the host vehicle, which was a blind spot in the narrow-angle display, is displayed large on the right side of the image.

一方、広角表示から狭角表示に切替える過程では、図4(c)に例示されるように、境界線を画像の右端に向けて徐々に移動させながら、推移する基準線の位置に合わせて連続的に等倍表示エリアA及び変倍表示エリアBに対応する画像を描画する。このようにすることで、変倍表示エリアBが画像の右端に向けて徐々にスライドアウトしながら縮小するアニメーションを表示する。   On the other hand, in the process of switching from the wide-angle display to the narrow-angle display, as illustrated in FIG. 4C, the boundary line is gradually moved toward the right end of the image, and continuously according to the position of the changing reference line. Specifically, images corresponding to the same size display area A and the variable magnification display area B are drawn. In this way, an animation is displayed in which the scaling display area B is reduced while gradually sliding out toward the right end of the image.

狭角表示及び広角表示の表示態様の変形例について、図6を参照しながら説明する。図6(a)に例示されるとおり、広角表示の段階において、画像の右側縁部の初期位置において縦方向に引いた境界線によって、画像全体を等倍表示エリアA及び変倍表示エリアBの2つの領域に分割する。この広角表示の段階では、境界線の左側(自車両側)に相当する画像の大部分を等倍表示エリアAが占めている。この等倍表示エリアAに水平画角0〜29°の範囲の撮像画像を割当てる。この等倍表示エリアAには、カメラ20から取得した元の撮像画像と同じ縦横比で画像を作成する。   A modification of the display mode of the narrow angle display and the wide angle display will be described with reference to FIG. As illustrated in FIG. 6A, in the wide-angle display stage, the entire image is displayed in the same magnification display area A and the magnification display area B by the boundary line drawn in the vertical direction at the initial position of the right edge of the image. Divide into two areas. At this wide-angle display stage, the same size display area A occupies most of the image corresponding to the left side of the boundary line (the vehicle side). A captured image having a horizontal angle of view in the range of 0 to 29 ° is assigned to the equal magnification display area A. In this same size display area A, an image is created with the same aspect ratio as the original captured image acquired from the camera 20.

一方、変倍表示エリアBは、境界線の右側(自車両から遠い側)における僅かな範囲のみに設定されている。この変倍表示エリアBには、水平画角29〜50°に相当する範囲の撮像画像を、変倍表示エリアBの幅に合わせて水平方向に圧縮した縦長の画像が収められている。   On the other hand, the scaling display area B is set to only a small range on the right side of the boundary line (the side far from the host vehicle). In this magnification display area B, a vertically long image obtained by compressing a captured image in a range corresponding to a horizontal angle of view of 29 to 50 ° in the horizontal direction in accordance with the width of the magnification display area B is stored.

図6(b)に例示されるとおり、広角表示の段階では、基準線を初期位置から左方の所定位置まで移動させて、変倍表示エリアBを左側に拡大する。このとき、狭角表示から広角表示に切替える過程では、境界線を初期位置から所定位置まで徐々に移動させながら、推移する基準線の位置に合わせて連続的に等倍表示エリアA及び変倍表示エリアBに対応する画像を描画する。このようにすることで、変倍表示エリアBが画像の右端部から徐々にスライドインしながら拡大するアニメーションを表示する。   As illustrated in FIG. 6B, in the wide-angle display stage, the reference line is moved from the initial position to a predetermined position on the left side, and the magnification display area B is expanded to the left side. At this time, in the process of switching from the narrow-angle display to the wide-angle display, the boundary line is gradually moved from the initial position to the predetermined position, and continuously at the same magnification display area A and the magnification display according to the position of the changing reference line. An image corresponding to area B is drawn. In this way, an animation in which the magnification display area B expands while gradually sliding in from the right end of the image is displayed.

一方、広角表示から狭角表示に切替える過程では、図6(c)に例示されるように、境
界線を所定位置から右端部の初期位置まで徐々に移動させながら、推移する基準線の位置に合わせて連続的に等倍表示エリアA及び変倍表示エリアBに対応する画像を描画する。このようにすることで、変倍表示エリアBが画像の右端に向けて徐々にスライドアウトしながら縮小するアニメーションを表示する。
On the other hand, in the process of switching from the wide-angle display to the narrow-angle display, as illustrated in FIG. 6C, the boundary line is gradually moved from the predetermined position to the initial position of the right end portion, and is moved to the reference line position. In addition, images corresponding to the same size display area A and the variable magnification display area B are continuously drawn. In this way, an animation is displayed in which the scaling display area B is reduced while gradually sliding out toward the right end of the image.

つぎに、狭角表示から広角表示に切替えるタイミングについての変形例について、図7を参照しながら説明する。図7(a)は、時刻t=0の時点において狭角表示によってディスプレイ30に表示される支援画像の一例である。ここでは、自車両の後側方から追越しをかける後続車両が、自車両に接近してくる状況を想定している。図7(a)に例示される時点では、まだ後続車両は遠方にいるため狭角表示をする。   Next, a modified example of the timing for switching from narrow-angle display to wide-angle display will be described with reference to FIG. FIG. 7A is an example of a support image displayed on the display 30 by narrow-angle display at time t = 0. Here, it is assumed that a succeeding vehicle that overtakes from the rear side of the host vehicle approaches the host vehicle. At the time point illustrated in FIG. 7A, the following vehicle is still far away, so a narrow-angle display is performed.

図7(b)は、時刻t=0からある時間が経過した時刻t=1の時点における広角表示による支援画像の一例である。この時点では、表示範囲内に映る後続車両の画像の一部が、広角表示を行う際の等倍表示エリアAと変倍表示エリアBとの境界である境界線の位置に到達するところまで、後続車両が接近しているものとする。   FIG. 7B is an example of a support image by wide-angle display at time t = 1 when a certain time has elapsed from time t = 0. At this point, until a part of the image of the following vehicle reflected in the display range reaches the position of the boundary line that is the boundary between the same magnification display area A and the magnification display area B when performing wide angle display, Assume that the following vehicle is approaching.

一方、図7(c)は、さらに、時刻t=1からある時間が経過した時刻t=2の時点における広角表示による支援画像の一例である。この時点では、表示範囲内に映る後続車両の画像の一部が、表示範囲の右端に到達するところまで、後続車両が接近しているものとする。   On the other hand, FIG. 7C is an example of a support image by wide-angle display at a time t = 2 when a certain time has elapsed from the time t = 1. At this time, it is assumed that the succeeding vehicle is approaching until a part of the image of the following vehicle that appears in the display range reaches the right end of the display range.

狭角表示から広角表示に切替えるタイミングとして、図7(b)に例示されるとおり、後続車両の画像の一部が境界線に到達した時点(t=1)にすることが考えられる。あるいは、図7(c)に例示されるとおり、後続車両の画像の一部が表示範囲の右端に到達した時点(t=2)としてもよい。   As timing for switching from the narrow-angle display to the wide-angle display, as illustrated in FIG. 7B, it is conceivable that the time when a part of the image of the following vehicle reaches the boundary line (t = 1). Alternatively, as illustrated in FIG. 7C, it may be a time point (t = 2) when a part of the image of the following vehicle reaches the right end of the display range.

図7(c)は、時刻t=1又は時刻t=2の時点で広角表示に切替えた後の、時刻t=3における支援画像の一例である。図7(c)に例示されるとおり、境界線より左側の表示範囲に設定された等倍表示エリアAには、狭角表示と同じ縦横比(圧縮なし)で撮像画像が描画されている。また、境界線より右側の表示範囲に設定された変倍表示エリアBには、等倍表示エリアAに含まれなかった撮像画像の残りの領域が、変倍表示エリアBの幅に合わせて水平方向に圧縮された縦長の画像として描画されている。   FIG. 7C is an example of a support image at time t = 3 after switching to wide-angle display at time t = 1 or time t = 2. As illustrated in FIG. 7C, the captured image is drawn in the same-size display area A set in the display range on the left side of the boundary line with the same aspect ratio (no compression) as the narrow-angle display. Further, in the scaling display area B set in the display range on the right side of the boundary line, the remaining area of the captured image that was not included in the normal scaling display area A is horizontal in accordance with the width of the scaling display area B. It is drawn as a vertically long image compressed in the direction.

〈〈第1実施形態の効果〉〉
第1実施形態の運転支援装置10によれば、次の効果を奏する。
自車両の後側方における近接範囲に他車両が存在しないときには、カメラ20から取得した撮像画像を狭表示することで、隣接車線等の重要な範囲を大きく表示することができる。一方、自車両の後側方における近接範囲に他車両が存在するときには、狭角表示から広角表示に切替えることで、狭角表示のときよりも死角を減らし、近接範囲にいる他車両を認識し易くできる。
<< Effects of First Embodiment >>
According to the driving support device 10 of the first embodiment, the following effects are obtained.
When there is no other vehicle in the proximity range on the rear side of the host vehicle, an important range such as an adjacent lane can be displayed larger by narrowly displaying the captured image acquired from the camera 20. On the other hand, when there is another vehicle in the proximity range on the rear side of the host vehicle, switching from the narrow angle display to the wide angle display reduces the dead angle compared to the narrow angle display, and recognizes other vehicles in the proximity range. Easy to do.

また、広角表示においては、狭角表示のときに死角であった範囲を水平方向に圧縮した状態で表示することで、狭角表示のときに表示していた光景を大きく表示したまま死角を低減できる。このように、自車両の後側方に存在する他車両の有無に応じて、狭角表示と広角表示を使い分けることで、広角表示による利点と、狭角表示による利点とを両立できる。   In wide-angle display, the range that was the dead angle in the narrow-angle display is displayed in a compressed state in the horizontal direction, reducing the blind spot while keeping the sight displayed in the narrow-angle display large. it can. In this way, by selectively using the narrow-angle display and the wide-angle display according to the presence or absence of other vehicles existing behind the host vehicle, it is possible to achieve both the advantages of the wide-angle display and the advantages of the narrow-angle display.

また、狭角表示から広角表示に切替える過程、あるいは、広角表示から狭角表示に切替える過程において、変倍表示エリアBの画像を連続的にスライドイン/スライドアウトするアニメーションを表示する。これにより、支援画像の表示態様が切替わるときに運転者
が受ける違和感を低減できる。
Further, in the process of switching from the narrow-angle display to the wide-angle display, or in the process of switching from the wide-angle display to the narrow-angle display, an animation for continuously sliding in / out the image in the zoom display area B is displayed. Thereby, the uncomfortable feeling that the driver receives when the display mode of the support image is switched can be reduced.

〈第2実施形態〉
第2実施形態の概要は次のとおりである。運転支援装置10は、カメラ20から取得した撮像画像について、設定された一部の対象領域に該当する画像情報を平滑化(ぼかす)する画像処理を施し、平滑化された範囲を含む撮像画像をディスプレイ30に表示する。
Second Embodiment
The outline of the second embodiment is as follows. The driving support device 10 performs image processing on the captured image acquired from the camera 20 to smooth (blur) image information corresponding to the set target region, and the captured image including the smoothed range is displayed. It is displayed on the display 30.

〈〈支援画像表示処理〉〉
第2実施形態における支援画像表示処理の手順について、図8のフローチャートを参照しながら説明する。この処理は、運転支援装置10の制御部11が所定の制御周期で繰返し実行する。
<Supported image display processing>
The procedure of the support image display process in 2nd Embodiment is demonstrated referring the flowchart of FIG. This process is repeatedly executed by the control unit 11 of the driving support apparatus 10 at a predetermined control cycle.

S200では、制御部11は、カメラ20による撮像画像を取得する。S202では、制御部11は、車両情報入力部22から得られた情報や、カメラ20から取得した撮像画像の状態に基づき、現時点が昼間であるか否かを判定する。ここでは、例えば、時刻や、前照灯の点灯状況、日照センサによる検知結果、撮像画像の輝度等に基づいて、現時点が昼間であるか否かを判定する。現時点が昼間に該当しない場合(S202:NO)、制御部11はS208に進む。一方、現時点が昼間に該当する場合(S202:YES)、制御部11はS204に進む。   In S <b> 200, the control unit 11 acquires an image captured by the camera 20. In S <b> 202, the control unit 11 determines whether or not the current time is daytime based on information obtained from the vehicle information input unit 22 and the state of the captured image acquired from the camera 20. Here, for example, it is determined whether or not the present time is daytime based on the time, the lighting condition of the headlamp, the detection result by the sunshine sensor, the brightness of the captured image, and the like. When the present time does not correspond to daytime (S202: NO), the control unit 11 proceeds to S208. On the other hand, when the current time corresponds to daytime (S202: YES), the control unit 11 proceeds to S204.

S204では、制御部11は、カメラ20から取得した撮像画像を対象に予め設定された対象領域に対応する、実在の空間に他車両が存在するか否かを判定する。ここでは、レーダ・センサ部21によってカメラ20の撮像範囲における他車両の位置を検知する方法や、カメラ20から取得した撮像画像に対する画像認識によって他車両を検知する方法を用いることが考えられる。対象領域は、自車両から比較的近い位置の道路面といった、撮像画像において荒れた質感が強く現れると予想される画像領域を予め設定したものである。この対象領域の設定方法の具体例については後述する。対象領域に他車両が存在する場合(S204:YES)、制御部11はS208に進む。一方、対象領域に他車両が存在しない場合(S204:NO)、制御部11はS206に進む。   In S <b> 204, the control unit 11 determines whether there is another vehicle in the real space corresponding to the target area set in advance for the captured image acquired from the camera 20. Here, it is conceivable to use a method of detecting the position of the other vehicle in the imaging range of the camera 20 by the radar sensor unit 21 or a method of detecting the other vehicle by image recognition on the captured image acquired from the camera 20. The target area is an image area in which a rough texture is expected to appear strongly in the captured image, such as a road surface relatively close to the host vehicle. A specific example of the method for setting the target area will be described later. When another vehicle exists in the target area (S204: YES), the control unit 11 proceeds to S208. On the other hand, when there is no other vehicle in the target area (S204: NO), the control unit 11 proceeds to S206.

S206では、制御部11は、カメラ20から取得した撮像画像における対象領域に該当する画像情報に対して平滑化処理を施す。平滑化処理は、細かい模様をぼかして滑らかな画像にする画像処理である。この平滑化処理には、例えば、ローパスフィルタや、移動平均フィルタ、ガウシアンフィルタ、メディアンフィルタ等の周知の平滑化フィルタを使用することが考えられる。   In S <b> 206, the control unit 11 performs a smoothing process on the image information corresponding to the target area in the captured image acquired from the camera 20. The smoothing process is an image process that blurs a fine pattern to make a smooth image. For this smoothing process, for example, a known smoothing filter such as a low-pass filter, a moving average filter, a Gaussian filter, or a median filter may be used.

次のS208では、制御部11は、S200で取得した撮像画像を、表示出力部12を介してディスプレイ30に表示させる。ここでは、S206からS208に移行してきた場合には、平滑化処理が施された画像情報を含む撮像画像を表示する。一方、S202又はS204からS208に移行してきた場合には、平滑化処理が施されていない撮像画像を表示する。S208の後、制御部11は、S200に戻る。   In next step S208, the control unit 11 causes the display 30 to display the captured image acquired in step S200 via the display output unit 12. Here, when the process proceeds from S206 to S208, the captured image including the image information subjected to the smoothing process is displayed. On the other hand, when the process proceeds from S202 or S204 to S208, a captured image that has not been subjected to the smoothing process is displayed. After S208, the control unit 11 returns to S200.

〈〈平滑化処理の対象領域に関する説明〉〉
図9(a)は、カメラ20により撮像された撮像画像の一例である。この撮像画像における左側の縁部には自車両の車体の一部が写っており、それより右側の領域には、自車両の後側方の道路の様子が写っている。この撮像画像において、カメラ20から近い手前側の道路が写っている下部の領域では、道路の表面状態が克明に写っており、道路面に描かれた区画線(白線)の模様に荒れた道路面の質感が相まって、複雑な視覚情報を呈している。このような道路面の荒れた質感等の重要でない視覚情報は、運転者にとって煩わしいものである。
<< Explanation about target area of smoothing process >>
FIG. 9A is an example of a captured image captured by the camera 20. A part of the body of the host vehicle is shown on the left edge of the captured image, and the road on the rear side of the host vehicle is shown in the area on the right side of the image. In this captured image, in the lower area where the road on the near side near the camera 20 is shown, the road surface state is clearly visible, and the road is rough in the pattern of the lane markings (white lines) drawn on the road surface. Combined with the texture of the surface, it presents complex visual information. Such unimportant visual information such as rough texture on the road surface is troublesome for the driver.

そこで、図9(b)に例示されるように、撮像画像において手前側に写る道路面に相当する一部領域を対象領域として予め設定しておき、この対象領域に該当する画像情報に対して平滑化処理を行う。このように、カメラ20の取付け位置や撮像範囲等に基づいて、平滑化処理を施すのに好適な画像範囲を対象領域として予め設定しておくことが考えられる。   Therefore, as illustrated in FIG. 9B, a partial area corresponding to the road surface on the near side in the captured image is set in advance as a target area, and image information corresponding to this target area is set. Perform smoothing. As described above, it is conceivable that an image range suitable for performing the smoothing process is set in advance as a target region based on the mounting position of the camera 20, the imaging range, and the like.

対象領域の設定方法について、いくつかの具体例を挙げる。
(1)画像上の所定の基準位置(例えば、中心)からの距離を基準にして対象領域に設定する。図10(a)は、撮像画像全体のうち、画像の中心から距離a以上離れた領域を、対象領域として設定した事例である。このような対象領域を設定することで、撮像画像の中央部を鮮明に表示し、周辺部をぼかして表示することができる。なお、対象領域から除外する範囲は、円形に限らず任意の形状であってもよい。また、基準位置については、画像の中心に限らずの任意の位置に設定してもよい。
Some specific examples of the method of setting the target area will be given.
(1) A target area is set based on a distance from a predetermined reference position (for example, the center) on the image. FIG. 10A shows an example in which, in the entire captured image, an area that is a distance a or more away from the center of the image is set as the target area. By setting such a target area, it is possible to display the center part of the captured image clearly and blur the peripheral part. The range excluded from the target region is not limited to a circle and may be an arbitrary shape. Further, the reference position may be set at an arbitrary position without being limited to the center of the image.

(2)撮像画像において道路面が写る領域であって、カメラ20の位置から道路面までの距離が所定範囲に該当する部分を対象領域に設定する。図10(b)は、表示範囲内における道路面(地面)に相当する領域(点線内)のうち、カメラ20の位置から距離b以内にある道路面に該当する部分(斜線部)を、対象領域として設定した事例である。このような対象領域を設定することで、カメラ20から近い手前側に写る道路面の荒れた質感をぼかして表示することができる。   (2) A region in which the road surface is captured in the captured image and the distance from the position of the camera 20 to the road surface falls within a predetermined range is set as a target region. FIG. 10B shows a portion corresponding to the road surface within the distance b from the position of the camera 20 (hatched portion) in the region corresponding to the road surface (ground) in the display range (within the dotted line). This is an example set as an area. By setting such a target area, it is possible to blur and display the rough texture of the road surface reflected on the near side from the camera 20.

なお、ディスプレイ30に表示される撮像画像の表示範囲における道路面に相当する領域を定義するためのデータとして、カメラ20の撮像位置から道路面までの距離が計測されたデータが予め作成されており、その作成されたデータが記憶部13に記憶されているものとする。また、操作部23におけるユーザ操作によって撮像画像の表示範囲を調節可能にした場合、調節前と調節後と道路面に相当する領域が表示範囲に対して不変となるようにすることが考えられる。この場合、調節可能な範囲の複数パターンの表示範囲にそれぞれ対応する、地面に相当する領域のデータを予め記憶部13に保存しておくことが考えられる。   As data for defining a region corresponding to the road surface in the display range of the captured image displayed on the display 30, data obtained by measuring the distance from the imaging position of the camera 20 to the road surface is created in advance. It is assumed that the created data is stored in the storage unit 13. In addition, when the display range of the captured image can be adjusted by a user operation on the operation unit 23, it is conceivable that the area corresponding to the road surface before and after the adjustment is unchanged with respect to the display range. In this case, it is conceivable that data of areas corresponding to the ground corresponding to the display ranges of a plurality of patterns in the adjustable range are stored in the storage unit 13 in advance.

〈〈第2実施形態に適用可能な工夫〉〉
対象領域の画像情報に対する平滑化の強度(ぼかしの程度)を、対象領域全体で均一に設定してもよいし、画像の位置に応じて変えてもよい。例えば、画像上の基準位置(例えば、中心)から離れるほど、平滑化の強度を大きくすることが考えられる。具体的には、カメラ20の撮像範囲の中心を基準とする画角θに対して、対象領域における画角kθに比例する平滑化の強度を設定する。
<Ingenuity applicable to the second embodiment>
The smoothing intensity (the degree of blurring) for the image information of the target area may be set uniformly over the entire target area, or may be changed according to the position of the image. For example, it is conceivable to increase the smoothing intensity as the distance from the reference position (for example, the center) on the image increases. Specifically, a smoothing intensity proportional to the field angle kθ in the target region is set with respect to the field angle θ based on the center of the imaging range of the camera 20.

上述の第2実施形態では、平滑化処理の対象領域が設計事項として予め設定されていることを前提としている。これとは別に、運転支援装置10において支援画像を表示する処理の過程で、周辺状況に応じて対象領域を随時設定する構成であってもよい。具体的には、上述の支援画像表示処理(図8参照)において、制御部11は、S202で肯定判定した次にS203の処理を実行する。S203では、制御部11は、レーダ・センサ部21よって自車両の後側方における道路面を含む対象物との距離を測定した結果に基づき、測定された距離が所定範囲の値になっている場所に対応する画像範囲を対象領域に決定する。このようにすることで、走行中の道路の形状に応じて動的に対象領域を設定できる。   In the second embodiment described above, it is assumed that the target area for the smoothing process is set in advance as a design item. Apart from this, in the process of displaying a support image in the driving support device 10, the configuration may be such that the target region is set as needed according to the surrounding situation. Specifically, in the above-described support image display process (see FIG. 8), the control unit 11 executes the process of S203 after making an affirmative determination in S202. In step S203, the control unit 11 uses the radar sensor unit 21 to measure the distance from the object including the road surface on the rear side of the host vehicle, and the measured distance is within a predetermined range. An image range corresponding to the place is determined as a target area. In this way, the target area can be set dynamically according to the shape of the road that is running.

〈〈第2実施形態の効果〉〉
第2実施形態の運転支援装置10によれば、次の効果を奏する。
カメラ20から取得した撮像画像のうち、設定された対象領域に該当する画像情報に対
して平滑化処理を施すことで、その対象領域における画像の細かい変化を少なくし、滑らかで見やすい画像にすることができる。これにより、例えば、自車両から至近の道路面の荒れた質感を軽減することができ、運転者にとって見やすい画像を表示できる。
<< Effects of Second Embodiment >>
According to the driving support device 10 of the second embodiment, the following effects are obtained.
By smoothing the image information corresponding to the set target area in the captured image acquired from the camera 20, the fine change of the image in the target area is reduced and the image is smooth and easy to see. Can do. Thereby, for example, the rough texture of the road surface close to the host vehicle can be reduced, and an image easy to see for the driver can be displayed.

また、対象領域に他車両が写っているときには平滑化処理を行わないことで、他車両の視認性を低下させないようにできる。また、昼間以外の時間帯では撮像画像の視認性が低下すると考えられるため、昼間以外の時間帯においては無用な平滑化処理を行わない。   Further, when the other vehicle is shown in the target area, the visibility of the other vehicle can be prevented from being lowered by not performing the smoothing process. Moreover, since it is thought that the visibility of a captured image falls in time zones other than daytime, useless smoothing processing is not performed in time zones other than daytime.

1…車載システム、10…運動支援装置、11…制御部、12…表示出力部、13…記憶部、20…カメラ、21…レーダ・センサ部、22…車両情報入力部、23…操作部、30…ディスプレイ。   DESCRIPTION OF SYMBOLS 1 ... Car-mounted system, 10 ... Exercise support apparatus, 11 ... Control part, 12 ... Display output part, 13 ... Memory | storage part, 20 ... Camera, 21 ... Radar sensor part, 22 ... Vehicle information input part, 23 ... Operation part, 30: Display.

Claims (18)

自車両の後側方を撮像する撮像手段(20)と、自車両の後側方に存在する他車両を検知する検知手段(21)と、前記撮像手段により撮像された撮像画像を表示する表示手段(30)と通信可能に接続された運転支援装置(10)であって、
前記検知手段によって自車両の後側方における所定範囲で他車両が検知されていない場合、前記撮像手段から取得した撮像画像のうち、この撮像画像における水平方向の全画角よりも狭い画角に相当する範囲の画像で構成される狭角画像を前記表示手段に表示させる一方、前記検知手段によって前記所定範囲で他車両が検知されている場合、前記撮像手段から取得した撮像画像のうち、前記狭角画像よりも水平方向の画角を広げた範囲に相当する画像で構成される広角画像を前記表示手段に表示させる表示制御手段(11)を備えること、
を特徴とする運転支援装置。
An imaging means (20) for imaging the rear side of the host vehicle, a detection means (21) for detecting another vehicle existing on the rear side of the host vehicle, and a display for displaying a captured image captured by the imaging means. A driving support device (10) communicatively connected to the means (30),
When no other vehicle is detected in a predetermined range on the rear side of the host vehicle by the detection unit, the captured image acquired from the imaging unit has an angle of view narrower than the entire horizontal angle of view in the captured image. While displaying a narrow-angle image composed of an image of a corresponding range on the display unit, when another vehicle is detected in the predetermined range by the detection unit, among the captured images acquired from the imaging unit, Comprising display control means (11) for causing the display means to display a wide-angle image composed of an image corresponding to a range in which the horizontal angle of view is wider than the narrow-angle image;
A driving assistance device characterized by the above.
請求項1に記載の運転支援装置において、
前記表示制御手段は、前記広角画像を所定位置に設定された境界線で左右に2つの領域に分け、その2つの領域のうち一方の第1領域では、水平方向の画角に対する画像の幅の比率を、前記狭角画像を表示するときの比率と同じにして、他方の第2領域では、水平方向の画角に対する画像の幅の比率を、前記狭角画像を表示するときの比率よりも所定の割合で縮小することにより、前記広角画像を前記狭角画像と同じサイズで前記表示手段に表示させること、
を特徴とする運転支援装置。
The driving support device according to claim 1,
The display control means divides the wide-angle image into two regions on the left and right by a boundary set at a predetermined position, and in one of the two regions, the width of the image with respect to the horizontal angle of view is set. The ratio is the same as the ratio when displaying the narrow-angle image, and in the other second region, the ratio of the image width to the horizontal angle of view is greater than the ratio when displaying the narrow-angle image. Causing the display means to display the wide-angle image in the same size as the narrow-angle image by reducing the image at a predetermined ratio.
A driving assistance device characterized by the above.
請求項2に記載の運転支援装置において、
前記表示制御手段は、前記狭角画像を表示している状態から前記広角画像の表示に切替えるときに、前記境界線を画像の側縁部の方から前記所定位置まで横方向に連続的に移動させて、前記第2領域に相当する画像が徐々に広がるアニメーションを前記表示手段に表示させること、
を特徴とする運転支援装置。
In the driving assistance device according to claim 2,
The display control means continuously moves the boundary line laterally from the side edge of the image to the predetermined position when switching from displaying the narrow-angle image to displaying the wide-angle image. And causing the display means to display an animation in which an image corresponding to the second region gradually spreads,
A driving assistance device characterized by the above.
請求項2又は請求項3に記載の運転支援装置において、
前記表示制御手段は、前記第2領域における水平方向の画角に対する画像の幅の比率を、前記第2領域全体で均一にすること、
を特徴とする運転支援装置。
In the driving assistance device according to claim 2 or claim 3,
The display control means makes the ratio of the image width to the horizontal angle of view in the second region uniform in the entire second region;
A driving assistance device characterized by the above.
請求項2又は請求項3に記載の運転支援装置において、
前記表示制御手段は、前記第2領域における水平方向の画角に対する画像の幅の縮小度合を、前記境界線から前記広角画像の側縁部に向かって連続的に徐々に大きくすること、
を特徴とする運転支援装置。
In the driving assistance device according to claim 2 or claim 3,
The display control means is configured to gradually and gradually increase the reduction degree of the image width with respect to the horizontal angle of view in the second region from the boundary line toward the side edge of the wide-angle image;
A driving assistance device characterized by the above.
請求項2ないし請求項5に記載の運転支援装置において、
前記表示制御手段は、前記狭角画像の表示中に、前記検知手段により検知された他車両の撮像画像の少なくとも一部分が、前記表示手段の表示範囲における前記第2領域側の側端部に到達したタイミングで、前記狭角画像の表示から前記広角画像の表示に切替えること、
を特徴とする運転支援装置。
In the driving assistance device according to claim 2 to 5,
In the display control means, during the display of the narrow-angle image, at least a part of the captured image of the other vehicle detected by the detection means reaches a side end portion on the second region side in the display range of the display means. Switching from the narrow-angle image display to the wide-angle image display at the same timing,
A driving assistance device characterized by the above.
請求項2ないし請求項5に記載の運転支援装置において、
前記表示制御手段は、前記狭角画像の表示中に、前記検知手段により検知された他車両の撮像画像の少なくとも一部分が、前記境界線の位置に到達したタイミングで、前記狭角
画像の表示から前記広角画像の表示に切替えること、
を特徴とする運転支援装置。
In the driving assistance device according to claim 2 to 5,
The display control means starts displaying the narrow-angle image at a timing when at least a part of the captured image of the other vehicle detected by the detection means reaches the position of the boundary line during the display of the narrow-angle image. Switching to the display of the wide-angle image,
A driving assistance device characterized by the above.
請求項1ないし請求項7に記載の運転支援装置において、
前記表示制御手段は、前記検知手段により検知された他車両が後方から自車両に接近して前記所定範囲に到達したことを条件に、前記広角画像の表示を行うこと、
を特徴とする運転支援装置。
In the driving assistance device according to claim 1 to 7,
The display control means displays the wide-angle image on the condition that another vehicle detected by the detection means approaches the host vehicle from behind and reaches the predetermined range;
A driving assistance device characterized by the above.
自車両の後側方を撮像する撮像手段(20)と、前記撮像手段により撮像された撮像画像を表示する表示手段(30)と通信可能に接続された運転支援装置(10)であって、
前記撮像手段から取得した撮像画像のうち、設定された一部の対象領域に該当する画像情報に対して平滑化処理を施し、前記平滑化処理が施された画像情報を含む前記撮像画像を前記表示手段に表示させる表示制御手段(11)を備えること、
を特徴とする運転支援装置。
A driving support device (10) communicably connected to an imaging means (20) for imaging the rear side of the host vehicle and a display means (30) for displaying a captured image captured by the imaging means,
The captured image including the image information subjected to the smoothing process is obtained by performing a smoothing process on the image information corresponding to the set target area among the captured images acquired from the imaging unit. Comprising display control means (11) for displaying on the display means;
A driving assistance device characterized by the above.
請求項9に記載の運転支援装置において、
前記撮像画像における前記対象領域に相当する位置に他車両が存在するか否かを判断する車両判断手段(11,S204)を備え、
前記表示制御手段は、前記車両判断手段により前記対象領域に相当する位置に他車両が存在しないと判断されて場合、前記撮像画像に対して前記平滑化処理を行う一方、前記対象領域に相当する位置に他車両が存在すると判断された場合、前記平滑化処理を行わないで前記撮像画像を前記表示手段に表示させること、
を特徴とする運転支援装置。
The driving support device according to claim 9, wherein
Vehicle judging means (11, S204) for judging whether or not another vehicle exists at a position corresponding to the target area in the captured image;
The display control unit corresponds to the target region while performing the smoothing process on the captured image when the vehicle determination unit determines that no other vehicle exists at a position corresponding to the target region. When it is determined that there is another vehicle at a position, the captured image is displayed on the display means without performing the smoothing process;
A driving assistance device characterized by the above.
請求項9又は請求項10に記載の運転支援装置において、
昼間であるか否かを判断する判断手段(11,S202)を備え、
前記表示制御手段は、前記判断手段により昼間であると判断された場合、前記撮像画像に対して前記平滑化処理を施す一方、前記判断手段により昼間ではないと判断された場合、前記平滑化処理を行わないで前記撮像画像を前記表示手段に表示させること、
を特徴とする運転支援装置。
In the driving support device according to claim 9 or 10,
A determination means (11, S202) for determining whether it is daytime;
The display control unit performs the smoothing process on the captured image when the determination unit determines that it is daytime, whereas the display control unit performs the smoothing process when the determination unit determines that it is not daytime. Displaying the captured image on the display means without performing
A driving assistance device characterized by the above.
請求項9ないし請求項11の何れか1項に記載の運転支援装置において、
前記対象領域は、前記撮像画像における地面に相当する領域であって、前記撮像手段の位置から撮像範囲内にある地面までの距離が所定範囲の値になる領域に設定されていること、
を特徴とする運転支援装置。
In the driving assistance device according to any one of claims 9 to 11,
The target area is an area corresponding to the ground in the captured image, and is set to an area where the distance from the position of the imaging unit to the ground in the imaging range becomes a value in a predetermined range;
A driving assistance device characterized by the above.
請求項12に記載の運転支援装置において、
情報を記憶する記憶手段を備え、
前記地面に相当する領域として、前記表示手段に表示される表示範囲において、前記撮像手段の位置から地面までの距離が予め計測された情報が前記記憶手段に記憶されていること、
を特徴とする運転支援装置。
The driving support device according to claim 12,
Comprising storage means for storing information;
Information in which a distance from the position of the imaging unit to the ground is measured in advance in the display range displayed on the display unit as an area corresponding to the ground is stored in the storage unit;
A driving assistance device characterized by the above.
請求項13に記載の運転支援装置において、
ユーザの操作を受付けて前記表示範囲の位置を調節する調節手段(23)を備え、
前記調節手段による調節前と調節後とで、前記地面に相当する領域が前記表示範囲に対して不変となるように、前記調節手段により調節されたときの各表示範囲に対応する前記地面に相当する領域が、予め前記記憶手段に記憶されていること、
を特徴とする運転支援装置。
The driving support device according to claim 13,
Adjusting means (23) for accepting a user operation and adjusting the position of the display range;
Corresponding to the ground corresponding to each display range when adjusted by the adjusting means so that the area corresponding to the ground is unchanged with respect to the display range before and after adjustment by the adjusting means. The area to be stored in advance in the storage means;
A driving assistance device characterized by the above.
請求項9ないし請求項11の何れか1項に記載の運転支援装置において、
前記対象領域は、前記撮像画像の特定位置からの画像上での距離が所定範囲の値に該当する領域に設定されていること、
を特徴とする運転支援装置。
In the driving assistance device according to any one of claims 9 to 11,
The target area is set to an area in which a distance on the image from a specific position of the captured image corresponds to a value in a predetermined range;
A driving assistance device characterized by the above.
請求項9ないし請求項11の何れか1項に記載の運転支援装置において、
前記撮像手段の撮像範囲内にある対象物との距離を測定する測定手段(21)と通信可能に接続されており、
前記測定手段により測定された距離が所定範囲の値になっている場所に対応する前記撮像範囲の一部領域を前記対象領域として設定する設定手段(11,S203)を備えること、
を特徴とする運転支援装置。
In the driving assistance device according to any one of claims 9 to 11,
It is communicably connected to measuring means (21) for measuring the distance to an object within the imaging range of the imaging means,
Comprising setting means (11, S203) for setting, as the target area, a partial area of the imaging range corresponding to a place where the distance measured by the measuring means is a value within a predetermined range;
A driving assistance device characterized by the above.
請求項9ないし請求項16の何れか1項に記載の運転支援装置において、
前記表示制御手段は、前記対象領域に対して、前記撮像画像上の所定の基準位置から遠い位置ほど前記平滑化処理における平滑化の度合を大きくすること、
を特徴とする運転支援装置。
The driving support device according to any one of claims 9 to 16,
The display control means increases the degree of smoothing in the smoothing process as the position is farther from the predetermined reference position on the captured image with respect to the target region.
A driving assistance device characterized by the above.
請求項17に記載の運転支援装置において、
前記表示制御手段は、前記基準位置として、前記撮像画像の中心から遠い位置ほど前記平滑化処理における平滑化の度合を大きくすること、
を特徴とする運転支援装置。
The driving support device according to claim 17,
The display control means increases the degree of smoothing in the smoothing process as a position farther from the center of the captured image as the reference position,
A driving assistance device characterized by the above.
JP2014006843A 2014-01-17 2014-01-17 Driving assistance device Active JP6323018B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014006843A JP6323018B2 (en) 2014-01-17 2014-01-17 Driving assistance device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014006843A JP6323018B2 (en) 2014-01-17 2014-01-17 Driving assistance device

Publications (2)

Publication Number Publication Date
JP2015136056A true JP2015136056A (en) 2015-07-27
JP6323018B2 JP6323018B2 (en) 2018-05-16

Family

ID=53767649

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014006843A Active JP6323018B2 (en) 2014-01-17 2014-01-17 Driving assistance device

Country Status (1)

Country Link
JP (1) JP6323018B2 (en)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017061376A1 (en) * 2015-10-09 2017-04-13 株式会社東海理化電機製作所 Viewing device for vehicles and viewing control program for vehicles
JP2017192089A (en) * 2016-04-15 2017-10-19 本田技研工業株式会社 Image display device
JP2018027772A (en) * 2016-08-16 2018-02-22 三星電子株式会社Samsung Electronics Co.,Ltd. Stereo camera-based autonomous driving method, autonomous driving apparatus, and computer program
EP3315366A1 (en) * 2016-10-25 2018-05-02 Toyota Jidosha Kabushiki Kaisha Imaging and display device for vehicle and recording medium
KR20180045792A (en) * 2016-10-25 2018-05-04 도요타 지도샤(주) Imaging and display device for vehicle and recording medium
WO2018092919A1 (en) * 2016-11-21 2018-05-24 京セラ株式会社 Image processing device, imaging device, and display system
JP2018085584A (en) * 2016-11-21 2018-05-31 京セラ株式会社 Image processing apparatus, imaging apparatus, and display system
KR20180059106A (en) * 2016-11-25 2018-06-04 에스엘 주식회사 Apparatus for processing surronding image of vehicle
JP2018101897A (en) * 2016-12-20 2018-06-28 株式会社デンソーテン Vehicle periphery monitoring device and monitoring method
WO2019111305A1 (en) * 2017-12-05 2019-06-13 三菱電機株式会社 Display control device and display control method
WO2019111307A1 (en) * 2017-12-05 2019-06-13 三菱電機株式会社 Display control device amd display control method
JP2019121913A (en) * 2018-01-05 2019-07-22 アルパイン株式会社 Rear side image display device for vehicle
JP2019161559A (en) * 2018-03-15 2019-09-19 パナソニックIpマネジメント株式会社 Vehicle periphery display system, display control device, and computer program
JP2019196140A (en) * 2018-05-11 2019-11-14 トヨタ自動車株式会社 Image display device
CN111469762A (en) * 2019-01-23 2020-07-31 本田技研工业株式会社 Display system, travel control device, display control method, and storage medium
JP2020120267A (en) * 2019-01-23 2020-08-06 本田技研工業株式会社 Display system, travel control device, display control method, and program
JP2020167650A (en) * 2019-03-29 2020-10-08 パナソニックIpマネジメント株式会社 Visual field support image generating device and image conversion program
CN112565673A (en) * 2019-09-26 2021-03-26 歌乐株式会社 Display control device and display control method
KR20220167794A (en) * 2021-01-06 2022-12-21 노다르 인크. Method and system for providing confidence estimates for depth maps
US11834038B2 (en) 2020-01-22 2023-12-05 Nodar Inc. Methods and systems for providing depth maps with confidence estimates
EP4304191A2 (en) 2022-07-05 2024-01-10 Canon Kabushiki Kaisha Camera system, method for controlling the same, and computer program

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001006097A (en) * 1999-06-25 2001-01-12 Fujitsu Ten Ltd Device for supporting driving for vehicle
JP2005328181A (en) * 2004-05-12 2005-11-24 Mitsubishi Electric Corp Periphery confirming apparatus
JP2008027138A (en) * 2006-07-20 2008-02-07 Nissan Motor Co Ltd Vehicle monitoring device
JP2009117971A (en) * 2007-11-02 2009-05-28 Denso Corp Apparatus for monitoring periphery of vehicle
JP2010095086A (en) * 2008-10-15 2010-04-30 Nissan Motor Co Ltd Vehicular display device and display method
JP2013183298A (en) * 2012-03-02 2013-09-12 Nissan Motor Co Ltd Rearward visibility support device for vehicle and rearward visibility support method for vehicle
JP2013191050A (en) * 2012-03-14 2013-09-26 Toyota Motor Corp Vehicle periphery monitoring device
JP2013207746A (en) * 2012-03-29 2013-10-07 Mazda Motor Corp Device for photographing rear lateral side of vehicle

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001006097A (en) * 1999-06-25 2001-01-12 Fujitsu Ten Ltd Device for supporting driving for vehicle
JP2005328181A (en) * 2004-05-12 2005-11-24 Mitsubishi Electric Corp Periphery confirming apparatus
JP2008027138A (en) * 2006-07-20 2008-02-07 Nissan Motor Co Ltd Vehicle monitoring device
JP2009117971A (en) * 2007-11-02 2009-05-28 Denso Corp Apparatus for monitoring periphery of vehicle
JP2010095086A (en) * 2008-10-15 2010-04-30 Nissan Motor Co Ltd Vehicular display device and display method
JP2013183298A (en) * 2012-03-02 2013-09-12 Nissan Motor Co Ltd Rearward visibility support device for vehicle and rearward visibility support method for vehicle
JP2013191050A (en) * 2012-03-14 2013-09-26 Toyota Motor Corp Vehicle periphery monitoring device
JP2013207746A (en) * 2012-03-29 2013-10-07 Mazda Motor Corp Device for photographing rear lateral side of vehicle

Cited By (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017061376A1 (en) * 2015-10-09 2017-04-13 株式会社東海理化電機製作所 Viewing device for vehicles and viewing control program for vehicles
JP2017073733A (en) * 2015-10-09 2017-04-13 株式会社東海理化電機製作所 Viewing device for vehicle and viewing control program for vehicle
JP2017192089A (en) * 2016-04-15 2017-10-19 本田技研工業株式会社 Image display device
CN107298050A (en) * 2016-04-15 2017-10-27 本田技研工业株式会社 Image display device
CN107298050B (en) * 2016-04-15 2020-05-15 本田技研工业株式会社 Image display device
JP2018027772A (en) * 2016-08-16 2018-02-22 三星電子株式会社Samsung Electronics Co.,Ltd. Stereo camera-based autonomous driving method, autonomous driving apparatus, and computer program
KR101941607B1 (en) * 2016-10-25 2019-01-24 도요타 지도샤(주) Imaging and display device for vehicle and recording medium
JP2018074558A (en) * 2016-10-25 2018-05-10 トヨタ自動車株式会社 On-vehicle imaging and display device and imaging and display program for vehicle
KR20180045792A (en) * 2016-10-25 2018-05-04 도요타 지도샤(주) Imaging and display device for vehicle and recording medium
EP3315366A1 (en) * 2016-10-25 2018-05-02 Toyota Jidosha Kabushiki Kaisha Imaging and display device for vehicle and recording medium
RU2694877C2 (en) * 2016-10-25 2019-07-17 Тойота Дзидося Кабусики Кайся Image forming and displaying device for vehicle and recording medium
US10897572B2 (en) 2016-10-25 2021-01-19 Toyota Jidosha Kabushiki Kaisha Imaging and display device for vehicle and recording medium thereof for switching an angle of view of a captured image
WO2018092919A1 (en) * 2016-11-21 2018-05-24 京セラ株式会社 Image processing device, imaging device, and display system
JP2018085584A (en) * 2016-11-21 2018-05-31 京セラ株式会社 Image processing apparatus, imaging apparatus, and display system
US11030468B2 (en) 2016-11-21 2021-06-08 Kyocera Corporation Image processing apparatus
KR20180059106A (en) * 2016-11-25 2018-06-04 에스엘 주식회사 Apparatus for processing surronding image of vehicle
KR102543454B1 (en) * 2016-11-25 2023-06-14 에스엘 주식회사 Apparatus for processing surronding image of vehicle
JP2018101897A (en) * 2016-12-20 2018-06-28 株式会社デンソーテン Vehicle periphery monitoring device and monitoring method
WO2019111307A1 (en) * 2017-12-05 2019-06-13 三菱電機株式会社 Display control device amd display control method
JPWO2019111305A1 (en) * 2017-12-05 2020-02-06 三菱電機株式会社 Display control device and display control method
JPWO2019111307A1 (en) * 2017-12-05 2020-04-02 三菱電機株式会社 Display control device and display control method
WO2019111305A1 (en) * 2017-12-05 2019-06-13 三菱電機株式会社 Display control device and display control method
JP2019121913A (en) * 2018-01-05 2019-07-22 アルパイン株式会社 Rear side image display device for vehicle
JP7086458B2 (en) 2018-01-05 2022-06-20 アルパイン株式会社 Rear side image display device for vehicles
JP2019161559A (en) * 2018-03-15 2019-09-19 パナソニックIpマネジメント株式会社 Vehicle periphery display system, display control device, and computer program
JP7113348B2 (en) 2018-03-15 2022-08-05 パナソニックIpマネジメント株式会社 VEHICLE AREA DISPLAY SYSTEM, DISPLAY CONTROL DEVICE AND COMPUTER PROGRAM
CN110466429A (en) * 2018-05-11 2019-11-19 丰田自动车株式会社 Image display device
JP2019196140A (en) * 2018-05-11 2019-11-14 トヨタ自動車株式会社 Image display device
JP7147255B2 (en) 2018-05-11 2022-10-05 トヨタ自動車株式会社 image display device
JP2020120268A (en) * 2019-01-23 2020-08-06 本田技研工業株式会社 Display system, travel control device, display control method, and program
JP7202195B2 (en) 2019-01-23 2023-01-11 本田技研工業株式会社 DISPLAY SYSTEM, RUNNING CONTROL DEVICE, DISPLAY CONTROL METHOD AND PROGRAM
CN111469762B (en) * 2019-01-23 2023-11-07 本田技研工业株式会社 Display system, travel control device, display control method, and storage medium
CN111469762A (en) * 2019-01-23 2020-07-31 本田技研工业株式会社 Display system, travel control device, display control method, and storage medium
JP7202903B2 (en) 2019-01-23 2023-01-12 本田技研工業株式会社 DISPLAY SYSTEM, RUNNING CONTROL DEVICE, DISPLAY CONTROL METHOD AND PROGRAM
JP2020120267A (en) * 2019-01-23 2020-08-06 本田技研工業株式会社 Display system, travel control device, display control method, and program
JP2020167650A (en) * 2019-03-29 2020-10-08 パナソニックIpマネジメント株式会社 Visual field support image generating device and image conversion program
JP7291901B2 (en) 2019-03-29 2023-06-16 パナソニックIpマネジメント株式会社 Visibility support image generation device and image conversion program
EP3798058A1 (en) 2019-09-26 2021-03-31 Clarion Co., Ltd. Display control device and display control method
CN112565673A (en) * 2019-09-26 2021-03-26 歌乐株式会社 Display control device and display control method
CN112565673B (en) * 2019-09-26 2023-09-01 歌乐株式会社 Display control device and display control method
US11245866B2 (en) 2019-09-26 2022-02-08 Clarion Co., Ltd. Display control device and display control method
US11834038B2 (en) 2020-01-22 2023-12-05 Nodar Inc. Methods and systems for providing depth maps with confidence estimates
KR20220167794A (en) * 2021-01-06 2022-12-21 노다르 인크. Method and system for providing confidence estimates for depth maps
KR102583256B1 (en) 2021-01-06 2023-10-04 노다르 인크. Method and system for providing confidence estimates to depth maps
EP4304191A2 (en) 2022-07-05 2024-01-10 Canon Kabushiki Kaisha Camera system, method for controlling the same, and computer program

Also Published As

Publication number Publication date
JP6323018B2 (en) 2018-05-16

Similar Documents

Publication Publication Date Title
JP6323018B2 (en) Driving assistance device
JP3711864B2 (en) Vehicle display device
KR102151654B1 (en) Image display apparatus
JP5953824B2 (en) Vehicle rear view support apparatus and vehicle rear view support method
CN107298050B (en) Image display device
JP2005223524A (en) Supervisory apparatus for surrounding of vehicle
JP5622986B2 (en) Image display system, image processing apparatus, and image display method
JP5966513B2 (en) Rear side photographing device for vehicle
JP2018127083A (en) Image display device
JP2013187562A (en) Posterior sight support device for vehicle
US10965872B2 (en) Image display apparatus
JP6084048B2 (en) Object detection apparatus, object detection system, and object detection method
JP2019110492A (en) Image display device
JP6394940B2 (en) Vehicle display system
WO2016042733A1 (en) Electronic mirror device
JP2010081245A (en) Display device for vehicle, and display method
JP6384138B2 (en) Vehicle display device
US11823467B2 (en) Display control apparatus, vehicle, and display control method
JP6178580B2 (en) Object detection apparatus, object detection system, and object detection method
US10988083B2 (en) Visual field support image generation device and image conversion method
JP2020113066A (en) Video processing device, video processing method, and program
JP5235843B2 (en) Vehicle periphery monitoring device and vehicle periphery monitoring method
JP5831331B2 (en) Rear side photographing device for vehicle
US20230199137A1 (en) Display control apparatus, vehicle, and display control method
JP2004172828A (en) Night vision device for vehicle

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160310

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170316

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170829

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170914

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180313

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180326

R151 Written notification of patent or utility model registration

Ref document number: 6323018

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250