JP6860385B2 - Image display device - Google Patents

Image display device Download PDF

Info

Publication number
JP6860385B2
JP6860385B2 JP2017046454A JP2017046454A JP6860385B2 JP 6860385 B2 JP6860385 B2 JP 6860385B2 JP 2017046454 A JP2017046454 A JP 2017046454A JP 2017046454 A JP2017046454 A JP 2017046454A JP 6860385 B2 JP6860385 B2 JP 6860385B2
Authority
JP
Japan
Prior art keywords
image
unit
image display
road surface
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017046454A
Other languages
Japanese (ja)
Other versions
JP2018149877A (en
Inventor
男 鈴木
男 鈴木
木下 真
真 木下
暢 山住
暢 山住
研太郎 山崎
研太郎 山崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Subaru Corp
Original Assignee
Subaru Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Subaru Corp filed Critical Subaru Corp
Priority to JP2017046454A priority Critical patent/JP6860385B2/en
Publication of JP2018149877A publication Critical patent/JP2018149877A/en
Application granted granted Critical
Publication of JP6860385B2 publication Critical patent/JP6860385B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、画像表示装置、特に車内に表示される透過型画像と車外に表示される路面画像との重複を解消する画像表示装置に関する。 The present invention relates to an image display device, particularly an image display device that eliminates duplication of a transparent image displayed inside a vehicle and a road surface image displayed outside the vehicle.

車両の運転者と警告を受ける他者との両当事者に対して適切な表示を行う車両用表示システムが知られている(特許文献1参照)。特許文献1に開示された車両用表示システムは、運転者に向けた運転者用表示と、他者に向けた他者用表示とを含む異なる複数箇所に画像を表示するものである。 There is known a vehicle display system that appropriately displays to both the driver of the vehicle and the other party who receives the warning (see Patent Document 1). The vehicle display system disclosed in Patent Document 1 displays images at a plurality of different locations including a driver's display for the driver and another's display for the other.

特開2004−161033号公報Japanese Unexamined Patent Publication No. 2004-161033

しかしながら、異なる複数箇所に表示を行ったときに乗員から見て画像が重複すると、画像情報を乗員が正確に理解することが困難となり、乗員に混乱を招く。 However, if the images are duplicated when viewed from the occupant when the images are displayed at a plurality of different locations, it becomes difficult for the occupant to accurately understand the image information, which causes confusion for the occupant.

これに鑑みて、本発明が解決しようとする課題は、車内及び車外にそれぞれ画像を表示して相互に重複状態となった場合に、乗員の混乱を抑制又は低減可能な画像表示装置を提供することである。 In view of this, the problem to be solved by the present invention is to provide an image display device capable of suppressing or reducing occupant confusion when images are displayed inside and outside the vehicle and are in a mutually overlapping state. That is.

前記課題を解決するための手段として、本発明に係る画像表示装置は、車内で乗員に対して透過型画像を表示する第1画像表示部を備えた車両に設けられる画像表示装置であって、路面に画像を表示する第2画像表示部と、第1画像表示部の透過型画像と第2画像表示部の路面画像とが重複している場合に、透過型画像及び路面画像の少なくともいずれかの画像表示形態を変更する表示制御部と、を備える。 As a means for solving the above-mentioned problems, the image display device according to the present invention is an image display device provided in a vehicle provided with a first image display unit for displaying a transparent image to an occupant in the vehicle. When the second image display unit that displays an image on the road surface, the transparent image of the first image display unit, and the road surface image of the second image display unit overlap, at least one of the transparent image and the road surface image. It is provided with a display control unit for changing the image display form of the above.

本発明に係る画像表示装置において、透過型画像及び路面画像の画像情報に基づいて画像の重複の有無を判定する判定部を更に備えることが好ましい。 It is preferable that the image display device according to the present invention further includes a determination unit for determining the presence or absence of duplication of images based on the image information of the transmissive image and the road surface image.

本発明に係る画像表示装置において、透過型画像及び路面画像の表示面積、表示量、表示個数及び表示位置の少なくともいずれかを含む画像情報を導出する導出部を更に備えることが好ましい。 It is preferable that the image display device according to the present invention further includes a derivation unit that derives image information including at least one of the display area, display amount, display number, and display position of the transmissive image and the road surface image.

本発明に係る画像表示装置において、透過型画像と路面画像との画像情報を比較する比較部を更に備え、表示制御部は、判定部の判定結果と比較部の比較結果とに基づいて画像表示形態を変更することが好ましい。 The image display device according to the present invention further includes a comparison unit for comparing image information between the transmissive image and the road surface image, and the display control unit displays an image based on the determination result of the determination unit and the comparison result of the comparison unit. It is preferable to change the form.

本発明に係る画像表示装置において、乗員の視線を検出する視線検出部を更に備え、判定部は、画像情報と視線検出部の視線情報とに基づいて判定を行うことが好ましい。 It is preferable that the image display device according to the present invention further includes a line-of-sight detection unit that detects the line of sight of the occupant, and the determination unit makes a determination based on the image information and the line-of-sight information of the line-of-sight detection unit.

本発明に係る画像表示装置において、車両の周辺環境に基づいた安全度を評価する評価部を更に備え、表示制御部は、安全度が閾値より低い場合に画像表示形態を変更することが好ましい。 It is preferable that the image display device according to the present invention further includes an evaluation unit for evaluating the safety level based on the surrounding environment of the vehicle, and the display control unit changes the image display form when the safety level is lower than the threshold value.

本発明に係る画像表示装置において、表示制御部は、透過型画像及び路面画像の少なくともいずれかの重複部分の画像表示形態を変更することが好ましい。 In the image display device according to the present invention, it is preferable that the display control unit changes the image display form of at least one of the overlapping portion of the transmissive image and the road surface image.

本発明に係る画像表示装置において、表示制御部は、透過型画像及び路面画像の少なくともいずれかの色彩を変更することが好ましい。 In the image display device according to the present invention, it is preferable that the display control unit changes the color of at least one of the transmissive image and the road surface image.

本発明に係る画像表示装置において、表示制御部は、透過型画像及び路面画像の少なくともいずれかの輝度を変更することが好ましい。 In the image display device according to the present invention, it is preferable that the display control unit changes the brightness of at least one of the transmissive image and the road surface image.

本発明に係る画像表示装置において、第2画像表示部はヘッドランプにより構成されることが好ましい。 In the image display device according to the present invention, it is preferable that the second image display unit is composed of a headlamp.

本発明によると、重複が生じると車内の透過型画像又は車外の路面画像の少なくともいずれかの色彩又は輝度を変更する等して画像表示形態を変更することで、重複状態にあっても制御後の画像の視認性が向上するので、重複画像表示の情報の視認不能状態が解消され、かつ画像全体としての情報内容の変化が少ないことによって、乗員の混乱を抑制又は低減可能な画像表示装置を提供することができる。 According to the present invention, when duplication occurs, the image display form is changed by changing at least one of the colors or brightness of the transparent image inside the vehicle or the road surface image outside the vehicle, so that even if there is an duplication state, after control. Since the visibility of the image of the image is improved, the invisible state of the information of the duplicate image display is eliminated, and the change of the information content of the entire image is small, so that the image display device capable of suppressing or reducing the confusion of the occupants can be provided. Can be provided.

図1は、本発明の一実施形態である画像表示装置を備えた車両の一画像表示形態を示す斜視概略図である。FIG. 1 is a schematic perspective view showing an image display mode of a vehicle provided with an image display device according to an embodiment of the present invention. 図2は、図1の車両を側方視で示す概略図である。FIG. 2 is a schematic view showing the vehicle of FIG. 1 in a side view. 図3は、第1画像表示部のみを駆動した乗員の視界について示す概略図である。FIG. 3 is a schematic view showing the field of view of the occupant who drives only the first image display unit. 図4は、第2画像表示部のみを駆動した乗員の視界について示す概略図である。FIG. 4 is a schematic view showing the field of view of the occupant who drives only the second image display unit. 図5は、第1画像表示部及び第2画像表示部を駆動した乗員Pの視界について示す概略図である。FIG. 5 is a schematic view showing the field of view of the occupant P who drives the first image display unit and the second image display unit. 図6は、本発明の一実施形態に係る画像表示装置を示すブロック図である。FIG. 6 is a block diagram showing an image display device according to an embodiment of the present invention. 図7は、図6に示した各部材を用いて画像表示形態の変更制御を行う際の制御フローについて示すフローチャート図である。FIG. 7 is a flowchart showing a control flow when control for changing the image display form is performed using each member shown in FIG. 図8は、本発明の他の実施形態に係る画像表示装置を示すブロック図である。FIG. 8 is a block diagram showing an image display device according to another embodiment of the present invention. 図9は、図8に示した部材を用いて画像表示形態の変更制御を行う際の制御フローについて示すフローチャート図である。FIG. 9 is a flowchart showing a control flow when control for changing the image display form is performed using the member shown in FIG. 図10は、図8に示した部材を用いて画像表示形態の別の変更制御を行う際の制御フローについて示すフローチャート図である。FIG. 10 is a flowchart showing a control flow when another change control of the image display form is performed using the member shown in FIG.

(基本実施形態)
本発明に係る画像表示装置の一実施形態について、図1及び図2を参照しつつ説明する。
なお、図1は、本発明の一実施形態である画像表示装置1を備えた車両100の一画像表示形態を示す斜視概略図である。図2は、図1の車両100を側方視で示す概略図である。
(Basic embodiment)
An embodiment of the image display device according to the present invention will be described with reference to FIGS. 1 and 2.
Note that FIG. 1 is a schematic perspective view showing an image display mode of the vehicle 100 provided with the image display device 1 according to the embodiment of the present invention. FIG. 2 is a schematic view showing the vehicle 100 of FIG. 1 in a side view.

図1及び2に示すように、車両100は、第1画像表示部10と第2画像表示部20とを備える。 As shown in FIGS. 1 and 2, the vehicle 100 includes a first image display unit 10 and a second image display unit 20.

第1画像表示部10は、車両100内で乗員Pに対して透過型画像G1を表示する。本実施形態において第1画像表示部10は、インスツルメントパネル101から照射された画像が車両100のフロントウィンドウ102に投影されて透過型画像G1として表示されるヘッドアップディスプレイ装置として設けられている。
なお、本実施形態のフロントウィンドウ102に透過型画像G1を投影する形態に代えて、ステアリングホイールの前方かつインスツルメントパネル101上部に立設される透明板に投影する形態を採用することもできる。
The first image display unit 10 displays the transparent image G1 to the occupant P in the vehicle 100. In the present embodiment, the first image display unit 10 is provided as a head-up display device in which an image emitted from the instrument panel 101 is projected onto the front window 102 of the vehicle 100 and displayed as a transmissive image G1. ..
Instead of projecting the transmissive image G1 on the front window 102 of the present embodiment, it is also possible to adopt a form of projecting on a transparent plate erected in front of the steering wheel and above the instrument panel 101. ..

本実施形態において乗員Pは車両100のドライバとして図示及び説明するが、本発明において乗員としては第1画像表示部の透過型画像及び第2画像表示部の路面画像を視認可能であれば良い。 In the present embodiment, the occupant P is illustrated and described as a driver of the vehicle 100, but in the present invention, the occupant may be able to visually recognize the transparent image of the first image display unit and the road surface image of the second image display unit.

第2画像表示部20は、路面Rに路面画像G2を表示する。本実施形態において第2画像表示部20は、車両100の前部における配光可変型の多光源ヘッドランプとして設けられている。
本発明において第2画像表示部としては、路面に画像を表示可能であればとくに制限されず、例えばデジタルミラーデバイス又はプロジェクタ等であっても良い。
The second image display unit 20 displays the road surface image G2 on the road surface R. In the present embodiment, the second image display unit 20 is provided as a multi-light source headlamp with variable light distribution in the front portion of the vehicle 100.
In the present invention, the second image display unit is not particularly limited as long as it can display an image on the road surface, and may be, for example, a digital mirror device or a projector.

なお、本発明において画像を表示する形態としては、本発明の目的を達成可能な限り様々な形態を採用可能であり、例えば文字及び記号等の照射形態自体に意味を生じるものだけでなく、道路沿いに設置される標識、並びに、規制標示及び指示標示等の道路標示等を強調するための標示の縁取り配光、標示領域に重ねた点滅配光等を挙げることができる。 As the form for displaying an image in the present invention, various forms can be adopted as long as the object of the present invention can be achieved. For example, not only those that give meaning to the irradiation form itself such as characters and symbols, but also roads. Examples include signs installed along the road, border light distribution of markings for emphasizing road markings such as regulatory markings and instruction markings, and blinking light distribution superimposed on the marking area.

また、特に図2に示すように車両100には視線検出部30が設けられている。視線検出部30は、図2に破線で示す乗員Pの視線を検知する。具体的に視線検出部30は、車内カメラにより乗員Pを監視可能なドライバモニタリングシステムを応用することで、乗員Pによる視線方向等の視線に係る情報を検出する。なお、乗員Pの視線情報を検出可能であればドライバモニタリングシステム以外の監視手段も採用可能である。
視線検出部30の使用形態及び作用効果については後述する。
Further, as shown in FIG. 2, the vehicle 100 is provided with a line-of-sight detection unit 30. The line-of-sight detection unit 30 detects the line of sight of the occupant P shown by the broken line in FIG. Specifically, the line-of-sight detection unit 30 detects information related to the line-of-sight such as the line-of-sight direction by the occupant P by applying a driver monitoring system capable of monitoring the occupant P with an in-vehicle camera. If the line-of-sight information of the occupant P can be detected, a monitoring means other than the driver monitoring system can be adopted.
The usage pattern and the effect of the line-of-sight detection unit 30 will be described later.

ここで、第1画像表示部10及び第2画像表示部20を駆動した場合の乗員Pの視点について、図3〜図5を参照しつつ説明する。
図3は、第1画像表示部10のみを駆動した乗員Pの視界について示す概略図である。図4は、第2画像表示部20のみを駆動した乗員Pの視界について示す概略図である。図5は、第1画像表示部10及び第2画像表示部20を駆動した乗員Pの視界について示す概略図である。
Here, the viewpoint of the occupant P when the first image display unit 10 and the second image display unit 20 are driven will be described with reference to FIGS. 3 to 5.
FIG. 3 is a schematic view showing the field of view of the occupant P who drives only the first image display unit 10. FIG. 4 is a schematic view showing the field of view of the occupant P who drives only the second image display unit 20. FIG. 5 is a schematic view showing the field of view of the occupant P who drives the first image display unit 10 and the second image display unit 20.

まず、第1画像表示部10のみを駆動した場合、例えば図4に示すように、フロントウィンドウ102に透過型画像G1が投影表示される。本実施形態における透過型画像G1は、乗員Pが奥行きを視認可能なように画像上部に向かって徐々に縮小する画像として表示されている。これにより、乗員Pは、透過型画像G1を路面R上の道路標示と同様の視覚情報として視認することができる。 First, when only the first image display unit 10 is driven, the transparent image G1 is projected and displayed on the front window 102, for example, as shown in FIG. The transmissive image G1 in the present embodiment is displayed as an image that is gradually reduced toward the upper part of the image so that the occupant P can visually recognize the depth. As a result, the occupant P can visually recognize the transparent image G1 as visual information similar to the road marking on the road surface R.

また、第2画像表示部20のみを駆動した場合、例えば図3に示すように、自車両100の接近に関わらず道路を横断しようとしている歩行者Wに対して、横断禁止を報知する路面画像G2が路面Rに投影表示される。本実施形態における路面画像G2は、歩行者Wが判別及び判読可能な向きで、かつ歩行者Wの進行軌道上に表示されている。これにより、歩行者W及び乗員Pは、路面画像G2を歩行者W近傍の路面R上に表示される警告画像として視認することができる。 Further, when only the second image display unit 20 is driven, for example, as shown in FIG. 3, a road surface image for notifying a pedestrian W who is trying to cross the road regardless of the approach of the own vehicle 100 is prohibited from crossing. G2 is projected and displayed on the road surface R. The road surface image G2 in the present embodiment is displayed in a direction that the pedestrian W can discriminate and read, and is displayed on the traveling trajectory of the pedestrian W. As a result, the pedestrian W and the occupant P can visually recognize the road surface image G2 as a warning image displayed on the road surface R in the vicinity of the pedestrian W.

なお、図4に示した透過型画像G1は、車両100の走行案内情報であり、矢印記号で示される走行ルート案内情報、文字で示される案内先での規制情報及び現在の走行速度情報等を含んでいる。更に、図3に示した路面画像G2は、文字及び記号から成る歩行者Wに対する警告情報を含んでいる。透過型画像G1及び路面画像G2として表示する情報の種類、面積、量、個数、色彩、輝度、位置、及び表示タイミング等については、車両100毎又は乗員P毎に適宜に設定される。 The transmissive image G1 shown in FIG. 4 is travel guidance information of the vehicle 100, and includes travel route guidance information indicated by arrow symbols, regulation information at the guide destination indicated by characters, current travel speed information, and the like. Includes. Further, the road surface image G2 shown in FIG. 3 includes warning information for the pedestrian W composed of characters and symbols. The type, area, amount, number, color, brightness, position, display timing, and the like of the information to be displayed as the transparent image G1 and the road surface image G2 are appropriately set for each vehicle 100 or each occupant P.

第1画像表示部10及び第2画像表示部20を共に駆動した場合、例えば図5に示すように、透過型画像G1と路面画像G2とが車内から、特に乗員Pからの視界では、重複して見えることがある。このとき、歩行者Wにしてみると路面画像G2が進行軌道上に表示されているに過ぎないので、歩行者Wに混乱は生じ難い。しかしながら、乗員Pが特に重複部分する両画像それぞれから正確な情報を得ることは難しいので、乗員Pに混乱を生じ易い。 When both the first image display unit 10 and the second image display unit 20 are driven, for example, as shown in FIG. 5, the transmissive image G1 and the road surface image G2 overlap in the field of view from the inside of the vehicle, especially from the occupant P. May be seen. At this time, when the pedestrian W is used, the road surface image G2 is only displayed on the traveling track, so that the pedestrian W is unlikely to be confused. However, since it is difficult to obtain accurate information from each of the two images in which the occupant P particularly overlaps, the occupant P is likely to be confused.

このような乗員Pの混乱を抑制又は低減するために、上記車両100には図6に示す画像表示装置1が設けられている。図6に示すように画像表示装置1は、第2画像表示部20と検出部40と制御部5とを備える。
なお、図6は、本発明の一実施形態に係る画像表示装置1を示すブロック図である。
In order to suppress or reduce such confusion of the occupant P, the vehicle 100 is provided with the image display device 1 shown in FIG. As shown in FIG. 6, the image display device 1 includes a second image display unit 20, a detection unit 40, and a control unit 5.
Note that FIG. 6 is a block diagram showing an image display device 1 according to an embodiment of the present invention.

検出部40は、第1画像表示部10の上記透過型画像G1、及び第2画像表示部20の上記路面画像G2の少なくともいずれか、好ましくは両方を検出する。検出部40の画像検出形態としては、例えば上記フロントウィンドウ102及び上記路面Rを車載カメラにより撮像することで画像の有無を直接的に検出する形態を採用することができる。また、他の画像検出形態として、第1画像表示部10及び第2画像表示部20に対して適宜の車載CPUから入力される画像を表示させるための信号、又は、第1画像表示部10及び第2画像表示部20自体の駆動信号を検出することで、画像の有無を間接的に検出する形態等であっても良い。 The detection unit 40 detects at least one of the transparent image G1 of the first image display unit 10 and the road surface image G2 of the second image display unit 20, preferably both. As the image detection form of the detection unit 40, for example, a form in which the presence or absence of an image is directly detected by capturing the front window 102 and the road surface R with an in-vehicle camera can be adopted. Further, as another image detection mode, a signal for displaying an image input from an appropriate in-vehicle CPU to the first image display unit 10 and the second image display unit 20, or the first image display unit 10 and The presence or absence of an image may be indirectly detected by detecting the drive signal of the second image display unit 20 itself.

制御部5は、導出部51、判定部52、表示変更部53、及び比較部54を有する。
なお、制御部5は本発明における表示制御部の一例である。本発明においては、後述の判定部52及び比較部54等を含めて表示画像に応じた詳細な制御を行う必要が無ければ表示制御部として画像表示の表示形態を変更可能であれば良く、例えば後述の表示変更部53のみを設けることとしても良い。また、後述するように本実施形態では検出部40の検出結果に基づいて判定、比較、表示形態の変更等の様々な処理を行う部材として制御部5を採用しているが、本発明においては処理毎に制御部材を分けても良い。
The control unit 5 includes a lead-out unit 51, a determination unit 52, a display change unit 53, and a comparison unit 54.
The control unit 5 is an example of the display control unit in the present invention. In the present invention, if it is not necessary to perform detailed control according to the display image including the determination unit 52 and the comparison unit 54 described later, the display form of the image display may be changed as the display control unit, for example. Only the display changing unit 53 described later may be provided. Further, as will be described later, in the present embodiment, the control unit 5 is adopted as a member that performs various processes such as determination, comparison, and change of the display form based on the detection result of the detection unit 40, but in the present invention. The control member may be separated for each process.

導出部51は、上記透過型画像G1及び上記路面画像G2の画像情報を導出する。本実施形態では検出部40により検出された画像に係る信号が導出部51に入力される。導出部51は入力された画像に係る信号を解析することで、画像情報を導出することとなる。
画像情報としては、それぞれの画像の表示面積、表示量、表示個数、表示位置及び表示内容の少なくともいずれかを含む。
The derivation unit 51 derives the image information of the transparent image G1 and the road surface image G2. In the present embodiment, the signal related to the image detected by the detection unit 40 is input to the derivation unit 51. The derivation unit 51 derives the image information by analyzing the signal related to the input image.
The image information includes at least one of the display area, display amount, display number, display position, and display content of each image.

判定部52は、上記透過型画像G1及び上記路面画像G2の画像情報に基づいて画像の重複の有無を判定する。本実施形態では導出部51により導出された画像情報に係る信号が判定部52に入力される。判定部52は入力された画像情報に係る信号に基づいて、透過型画像G1と路面画像G2とが車内から重複して見えるか否か、又は、重複して見える蓋然性が高いか否かを判定することとなる。 The determination unit 52 determines whether or not there is duplication of images based on the image information of the transparent image G1 and the road surface image G2. In the present embodiment, the signal related to the image information derived by the derivation unit 51 is input to the determination unit 52. Based on the signal related to the input image information, the determination unit 52 determines whether or not the transmissive image G1 and the road surface image G2 appear to overlap from the inside of the vehicle, or whether or not there is a high probability that they will appear to overlap. Will be done.

表示変更部53は、検出部40の検出結果に基づいて上記透過型画像G1と上記路面画像G2とが重複している場合に、透過型画像G1及び路面画像G2の少なくともいずれかの画像表示形態を変更する。本実施形態では判定部52により重複の有無に係る信号が表示変更部53に入力される。表示変更部53は、重複して見える第1画像表示部10又は第2画像表示部20の少なくともいずれかの画像表示について、表示形態を変更させることで重複状態にあっても視認性を向上させる。 When the transparent image G1 and the road surface image G2 overlap based on the detection result of the detection unit 40, the display changing unit 53 has an image display form of at least one of the transparent image G1 and the road surface image G2. To change. In the present embodiment, the determination unit 52 inputs a signal relating to the presence or absence of duplication to the display change unit 53. The display changing unit 53 improves the visibility of at least one of the image displays of the first image display unit 10 and the second image display unit 20, which appear to be duplicated, by changing the display form even in the overlapping state. ..

表示変更部53による画像表示の変更態様としては、表示内容は維持しつつ透過型画像G1及び路面画像G2の少なくともいずれかの表示形態を変えることで、車内から見た画像の視認性を向上せしめることができれば良く、様々な変更態様を採用可能である。この変更態様としては、例えば一方又は両方の画像の色彩を変更する態様、及び、画像の輝度を変更する態様等を挙げることができる。なお、画像の色彩及び輝度を変更する態様として具体的には、例えば画像表示部に入力される駆動信号を制御することで実際に画像の照射光の色彩又は輝度を変更する態様、及び、画像表示部の光の照射部を可動式の色付き又は遮光フィルターで覆うことで表示部自体は駆動していても表示される画像の色彩又は輝度を規制する態様等が挙げられる。可動式のフィルターを設ける態様では、それぞれの画像を表示し得る領域において少なくとも重複状態となり易い領域を覆うことができるように配置すれば良い。 As a mode of changing the image display by the display changing unit 53, the visibility of the image seen from the inside of the vehicle is improved by changing at least one of the transparent image G1 and the road surface image G2 while maintaining the display content. As long as it can be done, various modification modes can be adopted. Examples of this change mode include a mode in which the color of one or both images is changed, a mode in which the brightness of the image is changed, and the like. Specifically, as a mode for changing the color and brightness of the image, for example, a mode for actually changing the color or brightness of the irradiation light of the image by controlling a drive signal input to the image display unit, and an image. Examples thereof include a mode in which the color or brightness of the displayed image is regulated even if the display unit itself is driven by covering the light irradiation unit of the display unit with a movable colored or light-shielding filter. In the embodiment in which the movable filter is provided, it may be arranged so as to cover at least the area that is likely to be overlapped in the area where each image can be displayed.

なお、画像の色彩又は輝度の変更は、透過型画像G1及び路面画像G2が重複していても相互に見分けることができるような色彩又は輝度に調整されることが好ましく、重複していても良好な視認性が得られる色彩又は輝度の相関、組合せ等を予め設定しておくのが良い。 It is preferable that the color or brightness of the image is changed so that the transmissive image G1 and the road surface image G2 can be distinguished from each other even if they overlap, and even if they overlap, it is good. It is preferable to set in advance the correlation, combination, etc. of the color or the brightness that can obtain a good visibility.

比較部54は、上記透過型画像G1と上記路面画像G2との画像情報を比較する。本実施形態では導出部51により導出された画像情報に係る信号が比較部54に入力される。比較部54は、透過型画像G1及び路面画像G2の少なくともいずれかに対して表示形態変更制御を行った場合に、車両100の走行状況に対して生じ得る影響の大きさを導出するために、画像情報の比較を行う。 The comparison unit 54 compares the image information between the transparent image G1 and the road surface image G2. In the present embodiment, the signal related to the image information derived by the derivation unit 51 is input to the comparison unit 54. The comparison unit 54 derives the magnitude of the influence that can occur on the traveling condition of the vehicle 100 when the display form change control is performed on at least one of the transmissive image G1 and the road surface image G2. Compare image information.

画像情報として表示面積、表示量及び表示個数等に応じて車両100の走行状況への影響が生じ得るが、画像情報として画像内容に応じた影響が最も大きいことが多い。表示形態変更制御による走行状況への影響としては、車両100がそれまでの安全な走行状態を維持することが困難となる要素を挙げることができる。この要素としては、例えば透過型画像G1の輝度を下げると、走行時の天候によっては車両前方の風景と透過型画像G1とが同化し易くなること、及び、路面画像G2の色彩を変更すると、歩行者Wが信号と同様に色が切り替ると横断して良いと思い込んで通常の路面画像G2によって中止していた道路の横断を始めてしまうこと等である。 The image information may have an influence on the traveling condition of the vehicle 100 depending on the display area, the display amount, the number of displays, and the like, but the image information often has the greatest influence on the image content. As an influence on the traveling situation by the display form change control, there is an element that makes it difficult for the vehicle 100 to maintain the safe traveling state up to that point. As this element, for example, when the brightness of the transmissive image G1 is lowered, the scenery in front of the vehicle and the transmissive image G1 are easily assimilated depending on the weather during traveling, and when the color of the road surface image G2 is changed, Like the signal, the pedestrian W thinks that he / she may cross the road when the color changes, and starts crossing the road that was stopped by the normal road surface image G2.

好ましくは、比較部54は上記走行状況に対して生じ得る影響の大きさを数値化した画像情報を比較することで、後述の表示変更部53による制御対象とする画像の決定が煩雑とならずに容易に行うことができる。なおこれは、種々の画像情報に対応する走行への影響の大小を数値化した換算表を予め設定しておくことで容易に実行可能である。 Preferably, the comparison unit 54 compares the image information that quantifies the magnitude of the influence that may occur on the traveling situation, so that the determination of the image to be controlled by the display change unit 53, which will be described later, is not complicated. Can be easily done. It should be noted that this can be easily executed by setting in advance a conversion table that quantifies the magnitude of the influence on traveling corresponding to various image information.

本実施形態では、判定部52による画像重複の有無の判定結果に係る信号と、比較部54による画像情報の比較結果に係る信号とが、表示変更部53に入力される。これらに基づいて、表示変更部53は、画像表示形態の変更制御と、変更制御を行う側の決定制御とを行う。 In the present embodiment, the signal related to the determination result of the presence or absence of image duplication by the determination unit 52 and the signal related to the comparison result of the image information by the comparison unit 54 are input to the display changing unit 53. Based on these, the display change unit 53 performs change control of the image display form and determination control of the side performing the change control.

ここで、図6に示した各部材を用いて画像表示形態の変更制御を行う際の制御フローについて、フローチャート図として示した図7を参照しつつ説明する。 Here, the control flow when the change control of the image display form is performed using each member shown in FIG. 6 will be described with reference to FIG. 7 shown as a flowchart.

まず、図2及び図6に示した第1画像表示部10及び第2画像表示部20の駆動により表示された図1等に示した透過型画像G1及び路面画像G2を、検出部40が検出する(ステップS1)。 First, the detection unit 40 detects the transparent image G1 and the road surface image G2 shown in FIG. 1 and the like displayed by driving the first image display unit 10 and the second image display unit 20 shown in FIGS. 2 and 6. (Step S1).

次に、検出部40が検出した透過型画像G1及び路面画像G2の少なくともいずれか、好ましくは両方の画像情報を、導出部51が導出する(ステップS2)。このとき、導出する画像情報としては、透過型画像G1と路面画像G2とが車内から重複して見えている又はその蓋然性が高いと判定可能な情報が得ることができれば良い。 Next, the derivation unit 51 derives at least one of the transparent image G1 and the road surface image G2 detected by the detection unit 40, preferably both image information (step S2). At this time, as the image information to be derived, it is sufficient that information that can be determined that the transparent image G1 and the road surface image G2 are seen overlapping from the inside of the vehicle or that the probability thereof is high can be obtained.

例えば透過型画像G1の表示面積が大きいことで、表示面積の小さい路面画像G2が表示されていても車内の乗員には重複して見えてしまう蓋然性が高い場合がある。この場合、大きな画像表示をしているという第1画像表示部10の駆動信号を検知した上で、透過型画像G1の表示面積のみを導出して、次工程で用いる判定部52に出力すれば良い。もっとも、画像表示部の駆動信号を検知することなく、透過型画像G1及び路面画像G2の表示面積を導出しても良い。この場合、透過型画像G1の表示面積が予め設定された閾値を超えていれば、透過型画像G1の表示面積に係る画像情報のみを判定部52に出力することができる。 For example, since the display area of the transparent image G1 is large, even if the road surface image G2 having a small display area is displayed, there is a high possibility that the occupants in the vehicle will see it in duplicate. In this case, after detecting the drive signal of the first image display unit 10 that a large image is displayed, only the display area of the transmissive image G1 is derived and output to the determination unit 52 used in the next step. good. However, the display area of the transmissive image G1 and the road surface image G2 may be derived without detecting the drive signal of the image display unit. In this case, if the display area of the transparent image G1 exceeds a preset threshold value, only the image information related to the display area of the transparent image G1 can be output to the determination unit 52.

表示面積だけでなく、画像が重複して見える蓋然性が高くなる表示量、表示個数及び表示位置等について予め閾値を設定しておいて、該閾値を超えた場合は閾値を超えた画像情報を判定部52に出力することができる。なお、該閾値を設定することなく、又は閾値を超えるものがあっても、導出した両画像の画像情報を全て判定部52に出力することとしても良い。 In addition to the display area, threshold values are set in advance for the display amount, the number of displays, the display position, etc., which increase the probability that images will appear duplicated, and if the threshold value is exceeded, the image information exceeding the threshold value is determined. It can be output to the unit 52. It should be noted that all the image information of both the derived images may be output to the determination unit 52 without setting the threshold value or even if there is an image exceeding the threshold value.

次いで、車両100内の乗員の視線を視線検出部30が検出する(ステップS3)。なお、この視線検出工程(ステップS3)は、表示変更部53による画像表示の表示形態変更制御を行う前であれば、上記ステップS1及び上記ステップS2と順序が逆であっても良い。 Next, the line-of-sight detection unit 30 detects the line of sight of the occupant in the vehicle 100 (step S3). The order of the line-of-sight detection step (step S3) may be reversed from that of step S1 and step S2 before the display form change control of the image display is performed by the display change unit 53.

ステップS2により導出された画像情報及びステップS3により検出された乗員Pの視線情報に基づいて、判定部52が画像の重複の有無を判定する(ステップS4)。ここでは、フロントウィンドウ102及び路面Rにおいて、視線情報に基づいて乗員Pの視線上で画像が重複しているか否かを判定部52が判定する。画像が重複していると判定された場合は、次工程に移る(ステップS4のYes)。画像が重複していないと判定された場合は、乗員Pは透過型画像G1及び路面画像G2のそれぞれから正確な情報を得ることができて混乱が生じ難いので、画像表示形態を変更する必要は無い。この場合は、別の画像表示がなされるまでそれぞれの画像表示を維持しつつ制御フローを完了状態としておく(ステップS4のNo)。
なお、ステップS2において上述したように、画像重複の蓋然性が高い場合に大きな表示面積等の画像情報を判定部52が入力された際には、視線情報と照合することなく画像重複有りという判定を行うこともできる(ステップS4のYes)。
Based on the image information derived in step S2 and the line-of-sight information of the occupant P detected in step S3, the determination unit 52 determines whether or not there is duplication of images (step S4). Here, in the front window 102 and the road surface R, the determination unit 52 determines whether or not the images overlap on the line of sight of the occupant P based on the line of sight information. If it is determined that the images are duplicated, the process proceeds to the next step (Yes in step S4). If it is determined that the images do not overlap, the occupant P can obtain accurate information from each of the transparent image G1 and the road surface image G2, and confusion is unlikely to occur. Therefore, it is necessary to change the image display form. There is no. In this case, the control flow is kept in the completed state while maintaining each image display until another image is displayed (No in step S4).
As described above in step S2, when the determination unit 52 inputs image information such as a large display area when the probability of image duplication is high, it is determined that there is image duplication without collating with the line-of-sight information. It can also be done (Yes in step S4).

続いて、画像の重複有りと判定された場合は、比較部54による画像情報の比較が行われる(ステップS5)。ここでは、次工程において表示形態変更制御を行う画像を決定するための要素を導出する準備工程として、透過型画像G1の画像情報と路面画像G2の画像情報とを、例えば走行への影響の大小という観点等に基づいて比較する。 Subsequently, when it is determined that there is duplication of images, the comparison unit 54 compares the image information (step S5). Here, as a preparatory step for deriving an element for determining an image for which display form change control is performed in the next step, the image information of the transmissive image G1 and the image information of the road surface image G2 are, for example, large or small in influence on traveling. The comparison is made based on the viewpoint.

更に、表示変更部53による表示形態の変更制御の対象となる画像の決定が行われる(ステップS6)。このとき、表示変更部53に入力された比較部54による比較結果に基づいて、透過型画像G1及び路面画像G2の少なくともいずれかの画像表示の形態を変更するかを決定する。表示変更部53は、一方の画像又は両画像において表示形態の変更制御を行った場合に、車両100の走行に影響の小さい変更形態を決定する。逆に、本工程では画像表示形態を変更した場合に走行に影響の大きい画像表示は維持する側を決定することとしても良い。 Further, the display changing unit 53 determines the image to be controlled to change the display form (step S6). At this time, based on the comparison result by the comparison unit 54 input to the display change unit 53, it is determined whether to change at least one of the image display forms of the transparent image G1 and the road surface image G2. The display change unit 53 determines a change form that has little influence on the traveling of the vehicle 100 when the display form change control is performed on one image or both images. On the contrary, in this step, when the image display form is changed, the side that maintains the image display that has a great influence on the running may be determined.

次に、形態変更の制御対象と決定した画像表示の表示部である第1画像表示部10及び第2画像表示部20の少なくともいずれかに対して、表示変更部53が表示形態の変更制御を行う(ステップS7)。これにより、第1画像表示部10及び第2画像表示部20の画像表示の色彩又は輝度が変更された状態となる。 Next, the display change unit 53 controls the change of the display form for at least one of the first image display unit 10 and the second image display unit 20, which are the display units of the image display determined to be the control target of the form change. (Step S7). As a result, the color or brightness of the image display of the first image display unit 10 and the second image display unit 20 is changed.

乗員から見て重複している2種の画像表示の一方又は両方の表示形態を変更する制御を行うことで、画像表示の視認性が向上するので、重複状態であっても乗員Pはそれぞれの画像から画像情報を読み取ることができるようになり、車両100の走行について乗員Pに混乱を生じさせない又は生じさせ難くなる。 By controlling to change the display form of one or both of the two types of image displays that are duplicated from the viewpoint of the occupant, the visibility of the image display is improved. The image information can be read from the image, and the occupant P is not confused or less likely to be confused about the running of the vehicle 100.

更に言うと、上記透過型画像G1及び上記路面画像G2において、画像表示形態の変更制御を行うことで、表示面積、表示量、表示個数、及び表示位置等の画像情報の大部分に変化が無く、情報内容を維持することができる。情報内容の変化を少なくすることで、表示制御前後で変化した部分の乗員Pによる視認と、変化した内容の乗員Pによる抽出及び確認作業とが少なくて済む。これにより、結果として表示制御前後での乗員Pの混乱を抑制又は低減するだけでなく、乗員Pを安全な車両100の運転に集中させることができる。 Furthermore, in the transparent image G1 and the road surface image G2, by controlling the change of the image display form, most of the image information such as the display area, the display amount, the number of displays, and the display position does not change. , The information content can be maintained. By reducing the change in the information content, it is possible to reduce the visual recognition of the changed portion by the occupant P before and after the display control, and the extraction and confirmation work by the occupant P of the changed content. As a result, not only the confusion of the occupant P before and after the display control can be suppressed or reduced, but also the occupant P can be concentrated on the safe driving of the vehicle 100.

(変形例)
以下に、本発明の変形例について説明する。
図8〜図10には、本発明に係る画像表示装置の変形例を示した。
なお、図8は、本発明の他の実施形態に係る画像表示装置11を示すブロック図である。図9は、図8に示した部材を用いて画像表示形態の変更制御を行う際の制御フローについて示すフローチャート図である。図10は、図8に示した部材を用いて画像表示形態の別の変更制御を行う際の制御フローについて示すフローチャート図である。図8に示す画像表示装置11と図6に示した画像表示装置1とにおいて共通する部材については、共通の参照符号を付すこととし、詳細な説明を省略する。
(Modification example)
Hereinafter, modifications of the present invention will be described.
8 to 10 show a modified example of the image display device according to the present invention.
Note that FIG. 8 is a block diagram showing an image display device 11 according to another embodiment of the present invention. FIG. 9 is a flowchart showing a control flow when control for changing the image display form is performed using the member shown in FIG. FIG. 10 is a flowchart showing a control flow when another change control of the image display form is performed using the member shown in FIG. Members common to the image display device 11 shown in FIG. 8 and the image display device 1 shown in FIG. 6 are designated by a common reference numeral, and detailed description thereof will be omitted.

図8に示す画像表示装置11における上記画像表示装置1との相違点は、第2導出部55、評価部56及び検知手段60の有無である。具体的には、画像表示装置11は、制御部50の一部材として第2導出部55及び評価部56を備えると共に、評価部56による制御のために検知手段60を設けている。 The difference between the image display device 11 shown in FIG. 8 and the image display device 1 is the presence or absence of the second derivation unit 55, the evaluation unit 56, and the detection means 60. Specifically, the image display device 11 includes a second lead-out unit 55 and an evaluation unit 56 as one member of the control unit 50, and also provides a detection means 60 for control by the evaluation unit 56.

第2導出部55は、上記透過型画像G1及び上記路面画像G2の重複部分を導出する。図8に係る実施形態では、導出部51により導出された画像情報に係る信号が第2導出部55に入力される。第2導出部55は、画像の表示位置及び表示面積等の画像情報に基づいて、乗員Pが透過型画像G1及び上記路面画像G2において重複して見える部分、領域を導出する。 The second derivation unit 55 derives the overlapping portion of the transparent image G1 and the road surface image G2. In the embodiment according to FIG. 8, the signal related to the image information derived by the extraction unit 51 is input to the second extraction unit 55. The second derivation unit 55 derives a portion and a region where the occupant P appears to overlap in the transparent image G1 and the road surface image G2 based on the image information such as the display position and the display area of the image.

なお、図8に係る実施形態では画像情報に基づいて重複部分を導出しているが、検出部40により検出された画像に係る信号が第2導出部55に直接入力されても良く、この場合は画像分析と画像の重複部分の導出とを第2導出部55が行うこととなる。更に、視線検出部30により検出された乗員Pの視線情報に係る信号を第2導出部55に入力しても良く、この場合は視線情報と画像情報とを併せることで画像の重複部分を正確に導出することができるようになる。 In the embodiment according to FIG. 8, the overlapping portion is derived based on the image information, but the signal related to the image detected by the detection unit 40 may be directly input to the second extraction unit 55, in this case. The second derivation unit 55 will perform the image analysis and the derivation of the overlapping portion of the image. Further, a signal related to the line-of-sight information of the occupant P detected by the line-of-sight detection unit 30 may be input to the second derivation unit 55. Will be able to be derived to.

評価部56は、上記車両100の周辺環境に基づいた安全度を評価する。図8に係る実施形態では検知手段60により検知された画像に係る信号が評価部56に入力される。 The evaluation unit 56 evaluates the safety level of the vehicle 100 based on the surrounding environment. In the embodiment according to FIG. 8, the signal related to the image detected by the detection means 60 is input to the evaluation unit 56.

車両100の周辺環境は、例えば歩行者に係る情報、他車両の通行に係る情報、ナビゲーションシステム等による地図及び走行ルートに係る情報、交通規制等の交通に係る情報、並びに、雨雪等の路面状態に係る情報に基づいて認識することができる。この周辺環境を認識するための情報は、各種センサ、カメラ、衛星通信デバイス、車々間通信デバイス及び路車間通信デバイス等の適宜の検知手段60によって得られる。 The surrounding environment of the vehicle 100 includes, for example, information on pedestrians, information on the passage of other vehicles, information on maps and traveling routes by a navigation system, information on traffic such as traffic regulations, and road surfaces such as rain and snow. It can be recognized based on the information related to the state. Information for recognizing the surrounding environment is obtained by an appropriate detection means 60 such as various sensors, cameras, satellite communication devices, vehicle-to-vehicle communication devices, and road-to-vehicle communication devices.

また、車両100の安全度は、車両100の周辺環境が車両100の走行に及ぼす又は及ぼし得る影響の大きさに応じて変化するものとして設定することができる。上記安全度は、例えば歩行者の有無、歩行者の進行方向、他車両の有無、他車両の速度及び進行方向、走行ルート上及びその周辺の交通規制の内容、並びに、乾湿状況及び凍結状況等の路面状態等によって、複合的に変化する。安全度に及ぼす影響の大きさを周辺環境の各要素について例えば数値等で予め登録しておくことで、検知手段60による検知結果に基づいて安全度への複合的な影響を導出し易くなる。 Further, the safety level of the vehicle 100 can be set as changing according to the magnitude of the influence that the surrounding environment of the vehicle 100 has or can have on the running of the vehicle 100. The above safety levels include, for example, the presence or absence of pedestrians, the direction of travel of pedestrians, the presence or absence of other vehicles, the speed and direction of travel of other vehicles, the content of traffic regulations on and around the travel route, and the wet and dry conditions and freezing conditions. It changes in a complex manner depending on the road surface condition and the like. By registering the magnitude of the effect on the safety level in advance for each element of the surrounding environment, for example, numerically, it becomes easy to derive a complex effect on the safety level based on the detection result by the detection means 60.

図8に係る実施形態では、第2導出部55による画像の重複部分に係る信号と、評価部56による安全度の評価結果に係る信号とが、表示変更部53に入力される。これにより、表示変更部53は、上述した画像表示形態の部分的な変更制御、及び変更制御を行う側の決定制御に加えて、安全度と閾値との比較に基づいた形態変更の要否に係る決定制御を行う。 In the embodiment according to FIG. 8, the signal related to the overlapping portion of the image by the second derivation unit 55 and the signal related to the evaluation result of the safety degree by the evaluation unit 56 are input to the display changing unit 53. As a result, the display change unit 53 determines the necessity of the form change based on the comparison between the safety level and the threshold value, in addition to the above-mentioned partial change control of the image display form and the determination control of the side performing the change control. The decision control is performed.

画像表示装置11を用いた制御フローとしては、例えば図9に示すように、ステップS4において画像の重複有りと判定された場合は、評価部56による安全度に係る評価が行われる(ステップS8)。ここでは、車外撮像用カメラ及び各種センサ等の検知手段60によって検知される車両100の周辺環境の情報に基づいた現実の安全度と、予め設定された安全度の閾値との差を評価部56が導出することで評価を行う。ここで設定される閾値は、現実の安全度が下回ると車両100の走行を正常に維持することが困難と成り得る安全度を例えば数値化したものであって良い。 As a control flow using the image display device 11, for example, as shown in FIG. 9, when it is determined in step S4 that there is duplication of images, the evaluation unit 56 evaluates the safety level (step S8). .. Here, the evaluation unit 56 determines the difference between the actual safety level based on the information on the surrounding environment of the vehicle 100 detected by the detection means 60 such as the camera for imaging outside the vehicle and various sensors, and the preset safety level threshold value. Evaluates by deriving. The threshold value set here may be, for example, a numerical value of the safety level that may make it difficult to maintain the normal running of the vehicle 100 when the actual safety level is lower.

現実の安全度が閾値よりも低いと評価部56が評価した場合は、次工程である上記画像情報の比較工程(ステップS5)に移る(ステップS8のYes)。現実の安全度が閾値よりも高いと評価部56が評価した場合は、別の画像表示がなされるまで画像表示を維持しつつ制御フローを完了状態としておく(ステップS8のNo)。 When the evaluation unit 56 evaluates that the actual safety level is lower than the threshold value, the process proceeds to the next step, the image information comparison step (step S5) (Yes in step S8). When the evaluation unit 56 evaluates that the actual safety level is higher than the threshold value, the control flow is completed while maintaining the image display until another image display is performed (No in step S8).

評価工程以降(ステップS8のYes以降)は図7を参照しつつ説明した画像情報の比較制御(ステップS5)及び変更制御対象を決定する制御(ステップS6)を実行した後に、上記第2導出部55による制御を実行する。第2導出部55による制御としては、画像の重複部分の導出である(ステップS9)。ここでは、次工程において表示形態の変更制御を行うための準備工程として、透過型画像G1の画像情報と路面画像G2の画像情報との重複部分、好ましくは画像表示の色彩又は輝度の変更が可能な重複部分を導出する。 After the evaluation step (after Yes in step S8), after executing the image information comparison control (step S5) and the control for determining the change control target (step S6) described with reference to FIG. 7, the second derivation unit is described above. The control by 55 is executed. The control by the second derivation unit 55 is the derivation of the overlapping portion of the image (step S9). Here, as a preparatory step for controlling the change of the display form in the next step, it is possible to change the overlapping portion, preferably the color or brightness of the image display, between the image information of the transparent image G1 and the image information of the road surface image G2. Derivation of overlapping parts.

更に、前工程で導出された重複部分の画像表示形態を変更する制御を実行する(ステップS70)。第2導出部55を設けない場合には上述したように透過型画像G1及び路面画像G2の少なくともいずれかの画像表示形態を変更する制御を行っていた(ステップS7)のに対して、図9に示す制御形態では重複部分のみの表示形態の変更を行う。 Further, a control for changing the image display form of the overlapping portion derived in the previous step is executed (step S70). When the second derivation unit 55 is not provided, control is performed to change at least one of the image display forms of the transmissive image G1 and the road surface image G2 as described above (step S7), whereas FIG. 9 In the control mode shown in, the display form of only the overlapping portion is changed.

以上のように、図9に示した実施形態では、画像が重複していると判定がなされても画像表示の形態変更制御が即時実行されることはない。画像表示装置11において評価部56を設けることで、画像重複に起因して情報の一部を乗員Pが視認しにくい状態となっていても、走行に重大な影響が無い安全度を維持している限りは画像表示形態の変更制御を行わない。つまり、画像の重複が生じている場合で、かつ現実の安全度が所定の閾値より低い場合に初めて画像表示形態の変更制御を行う。これにより、車両100として必要性及び緊急性の高い画像表示制御を選択的に実行することができるようになるので、画像表示形態の変更という画像の経時的変化が少なくなる。画像の経時的変化が少なくなると、乗員Pによる変化した画像表示の注視動作に起因して、他の走行環境の変化に対する乗員Pの対応が遅れるという状況を低減又は抑制することがより一層可能となる。 As described above, in the embodiment shown in FIG. 9, even if it is determined that the images are duplicated, the image display form change control is not immediately executed. By providing the evaluation unit 56 in the image display device 11, even if it is difficult for the occupant P to see a part of the information due to the duplication of images, the safety level that does not have a serious influence on the running is maintained. As long as it is, the change control of the image display form is not performed. That is, the change control of the image display form is performed only when the images are duplicated and the actual safety level is lower than the predetermined threshold value. As a result, the vehicle 100 can selectively execute the image display control that is highly necessary and urgent, so that the change of the image display form over time is reduced. When the change in the image with time is reduced, it is possible to further reduce or suppress the situation in which the response of the occupant P to other changes in the driving environment is delayed due to the gaze operation of the changed image display by the occupant P. Become.

また、画像全体の中でも画像の重複部分に対して選択的に表示形態の変更制御を行うことによって、表示内容の変化をより一層低減することができ、乗員Pが得られる画像表示全体の印象が制御前後でほぼ変わらなくなるので、乗員Pの混乱が大きく抑制される。 Further, by selectively controlling the change of the display form for the overlapping portion of the image in the entire image, the change in the display content can be further reduced, and the impression of the entire image display obtained by the occupant P can be obtained. Since there is almost no change before and after the control, the confusion of the occupant P is greatly suppressed.

なお、図9に示した制御フローの更なる変形例として、ステップS8のNoの場合にフローを完了状態とせずに、ステップS8がNoである限り、表示している画像が維持されている間は、重複判定工程(ステップS4)と安全度評価工程(ステップS8)とを反復して実行する制御形態を採っても良い。 As a further modification of the control flow shown in FIG. 9, in the case of No in step S8, the flow is not in the completed state, and as long as step S8 is No, the displayed image is maintained. May adopt a control mode in which the duplication determination step (step S4) and the safety evaluation step (step S8) are repeatedly executed.

更に、図8に示した画像表示装置11を用いた別の制御形態を図10に示す。図10に示す制御フローと図9に示した制御フローとの相違点は、画像表示の形態変更制御を解除する制御を行っている点である。 Further, another control mode using the image display device 11 shown in FIG. 8 is shown in FIG. The difference between the control flow shown in FIG. 10 and the control flow shown in FIG. 9 is that the control for canceling the form change control of the image display is performed.

具体的な制御フローとしては、図10に示すように、安全度評価工程において現実の安全度が所定の閾値よりも低いと評価された場合(ステップS8のYes)に、重複部分の画像表示形態の変更工程(ステップS70)まで実行した後に、第2安全度評価工程(ステップS80)を実行する。具体的には、実行している形態変更制御を解除したと仮定した場合、つまり走行している車両100の経時的に変化する周辺環境に必要な画像表示を重複状態となっても実行した場合に、車両100の安全度と所定の閾値との差を上記評価部56が導出し直すことで、第2安全度評価工程(ステップS80)を実行することとする。 As a specific control flow, as shown in FIG. 10, when the actual safety level is evaluated to be lower than a predetermined threshold value in the safety level evaluation step (Yes in step S8), the image display form of the overlapping portion is formed. After executing up to the change step (step S70) of the above, the second safety evaluation step (step S80) is executed. Specifically, when it is assumed that the executed form change control is canceled, that is, when the image display required for the time-varying surrounding environment of the traveling vehicle 100 is executed even if it is in an overlapping state. The second safety evaluation step (step S80) is executed by the evaluation unit 56 re-deriving the difference between the safety level of the vehicle 100 and the predetermined threshold value.

導出し直した安全度が閾値よりも高い、すなわち画像が重複しても走行に影響が無い又は小さくなったと評価部56が評価した場合は、次工程である画像表示形態の変更制御の解除工程(ステップS10)に移る(ステップS80のNo)。これに対して、導出し直した安全度が閾値よりも低い、すなわち画像が重複すると走行に影響が生じ得ると評価部56が評価した場合は、画像表示形態の変更制御を維持しつつ安全度と閾値との差を反復して導出し続ける(ステップS80のYes)。 When the evaluation unit 56 evaluates that the re-derivated safety level is higher than the threshold value, that is, the running is not affected or reduced even if the images are duplicated, the next step, the step of canceling the change control of the image display form. (Step S10) (No in step S80). On the other hand, when the re-derived safety level is lower than the threshold value, that is, when the evaluation unit 56 evaluates that overlapping images may affect the running, the safety level is maintained while maintaining the change control of the image display form. The difference between the threshold value and the threshold value is repeatedly derived (Yes in step S80).

具体的には、現実の安全度が所定の閾値より一旦低くなった(ステップS8のYes)後に、導出し直した安全度が閾値より高くなった場合(ステップS80のNo)は、画像表示形態の変更制御を解除する制御を行う(ステップS10)。これにより、第1画像表示部10及び第2画像表示部20の少なくともいずれかの画像表示形態の変更状態が解除されるので、乗員から視認可能な画像表示が変更前の色彩及び輝度等を有する重複画像となる。本工程で画像が表示形態の変更前の重複画像に戻ったとしても、戻った場合の安全度に応じて車両100の走行に問題無い状況を選択して戻しているので、乗員Pに混乱を生じ難い。 Specifically, when the actual safety level is once lower than the predetermined threshold value (Yes in step S8) and then the re-derived safety level becomes higher than the threshold value (No in step S80), the image display mode. Control is performed to release the change control of (step S10). As a result, the changed state of at least one of the image display form of the first image display unit 10 and the second image display unit 20 is released, so that the image display visible to the occupant has the color and brightness before the change. It will be a duplicate image. Even if the image returns to the duplicate image before the change of the display form in this process, the occupant P is confused because the situation where there is no problem in running the vehicle 100 is selected and returned according to the safety level when returning. Hard to occur.

このように、図10に示した実施形態では、画像の重複判定と安全度の評価結果とに基づいた画像表示形態の変更制御だけでなく、安全度の評価結果に基づいた画像表示の変更制御前状態への復帰も実行することができるようになる。 As described above, in the embodiment shown in FIG. 10, not only the image display form change control based on the image duplication determination and the safety evaluation result but also the image display change control based on the safety evaluation result. It will also be possible to return to the previous state.

以上、本発明者によってなされた発明を適用した実施形態について説明したが、この実施形態による本発明の開示の一部をなす論述及び図面により、本発明は限定されることはない。すなわち、この実施形態に基づいて当業者等によりなされる他の実施形態、実施例及び運用技術等は全て本発明の範疇に含まれることは勿論であることを付け加えておく。 Although the embodiment to which the invention made by the present inventor is applied has been described above, the present invention is not limited by the essay and the drawings which form a part of the disclosure of the present invention according to this embodiment. That is, it should be added that all other embodiments, examples, operational techniques, and the like made by those skilled in the art based on this embodiment are of course included in the scope of the present invention.

1及び11:画像表示装置、10:第1画像表示部、20:第2画像表示部、30:視線検出部、40:検出部、5及び50:制御部、51:導出部、52:判定部、53:表示変更部、54:比較部、55:第2導出部、56:評価部、60:検知手段、100:車両、101:インスツルメントパネル、102:フロントウィンドウ、G1:透過型画像、G2:路面画像、P:乗員、R:路面、W:歩行者
1 and 11: Image display device, 10: First image display unit, 20: Second image display unit, 30: Line-of-sight detection unit, 40: Detection unit, 5 and 50: Control unit, 51: Derivation unit, 52: Judgment Unit, 53: Display change unit, 54: Comparison unit, 55: Second derivation unit, 56: Evaluation unit, 60: Detection means, 100: Vehicle, 101: Instrument panel, 102: Front window, G1: Transparent type Image, G2: Road surface image, P: Crew, R: Road surface, W: Pedestrian

Claims (9)

車内で乗員に対して透過型画像を表示する第1画像表示部を備えた車両に設けられる画像表示装置であって、
路面に路面画像を表示する第2画像表示部と、
前記透過型画像及び前記路面画像の画像情報に基づいて前記乗員から見た画像の重複の有無を判定する判定部と、
前記判定部が、前記透過型画像と前記路面画像とが重複していると判定した場合に、前記透過型画像及び前記路面画像のずれかの画像表示形態を変更する表示制御部と、
前記透過型画像と前記路面画像との前記画像情報を比較する比較部と、を備え、
前記判定部により画像の重複が有ると判定された場合に前記比較部により前記画像情報を比較し、前記透過型画像及び前記路面画像の画像表示のうち、前記画像表示形態を変更した場合に前記車両の走行に影響の小さい画像表示を変更し、影響の大きい画像表示は維持する、
画像表示装置。
An image display device provided in a vehicle provided with a first image display unit that displays a transparent image to an occupant in the vehicle.
A second image display unit that displays a road surface image on the road surface,
A determination unit that determines whether or not there is duplication of images viewed from the occupant based on the image information of the transparent image and the road surface image.
The determination unit, and when said transmission type image with the road surface image is determined to be overlapped, the display control unit to change the image display form of have either the said transmission image and the road surface image,
A comparison unit for comparing the image information of the transparent image and the road surface image is provided.
When the determination unit determines that there is duplication of images, the comparison unit compares the image information, and when the image display form of the transparent image and the road surface image is changed, the image display form is changed. Change the image display that has a small effect on the running of the vehicle, and maintain the image display that has a large effect.
Image display device.
前記比較部は、走行状況に対して生じ得る影響の大きさを数値化した前記画像情報を比較する、 The comparison unit compares the image information in which the magnitude of the influence that may occur on the driving situation is quantified.
請求項1に記載の画像表示装置。 The image display device according to claim 1.
前記透過型画像及び前記路面画像の表示面積、表示量、表示個数及び表示位置の少なくともいずれかを含む前記画像情報を導出する導出部を更に備える、
請求項2に記載の画像表示装置。
A derivation unit for deriving the image information including at least one of the display area, display amount, display number, and display position of the transmissive image and the road surface image is further provided.
The image display device according to claim 2.
前記乗員の視線を検出する視線検出部を更に備え、
前記判定部は、前記画像情報と前記視線検出部の視線情報とに基づいて判定を行う、
請求項のいずれかに記載の画像表示装置。
Further comprising a visual axis detecting unit for detecting the occupant of the line of sight,
The determination unit makes a determination based on the image information and the line-of-sight information of the line-of-sight detection unit.
The image display device according to any one of claims 1 to 3.
前記車両の周辺環境に基づいた安全度を評価する評価部を更に備え、
前記表示制御部は、前記安全度が閾値より低い場合に前記画像表示形態を変更する、
請求項1〜のいずれかに記載の画像表示装置。
It is further equipped with an evaluation unit that evaluates the degree of safety based on the surrounding environment of the vehicle.
The display control unit changes the image display form when the safety level is lower than the threshold value.
The image display device according to any one of claims 1 to 4.
前記表示制御部は、前記透過型画像及び前記路面画像の少なくともいずれかの重複部分の前記画像表示形態を変更する、
請求項1〜のいずれかに記載の画像表示装置。
Wherein the display control unit changes the image display form of at least one of the overlapped portion of the transmission image and the road surface image,
The image display device according to any one of claims 1 to 5.
前記表示制御部は、前記透過型画像及び前記路面画像の少なくともいずれかの色彩を変更する、
請求項1〜のいずれかに記載の画像表示装置。
The display control unit changes the color of at least one of the transmissive image and the road surface image.
The image display device according to any one of claims 1 to 6.
前記表示制御部は、前記透過型画像及び前記路面画像の少なくともいずれかの輝度を変更する、
請求項1〜のいずれかに記載の画像表示装置。
The display control unit changes the brightness of at least one of the transmissive image and the road surface image.
The image display device according to any one of claims 1 to 7.
前記第2画像表示部はヘッドランプにより構成される、
請求項1〜のいずれかに記載の画像表示装置。
The second image display unit is composed of a headlamp.
The image display device according to any one of claims 1 to 8.
JP2017046454A 2017-03-10 2017-03-10 Image display device Active JP6860385B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017046454A JP6860385B2 (en) 2017-03-10 2017-03-10 Image display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017046454A JP6860385B2 (en) 2017-03-10 2017-03-10 Image display device

Publications (2)

Publication Number Publication Date
JP2018149877A JP2018149877A (en) 2018-09-27
JP6860385B2 true JP6860385B2 (en) 2021-04-14

Family

ID=63680728

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017046454A Active JP6860385B2 (en) 2017-03-10 2017-03-10 Image display device

Country Status (1)

Country Link
JP (1) JP6860385B2 (en)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3855439B2 (en) * 1998-03-17 2006-12-13 いすゞ自動車株式会社 Night driving visibility support device
JP2014185926A (en) * 2013-03-22 2014-10-02 Aisin Aw Co Ltd Guidance display system
JP6379779B2 (en) * 2014-07-16 2018-08-29 日産自動車株式会社 Vehicle display device
JP6746270B2 (en) * 2014-09-08 2020-08-26 株式会社小糸製作所 Vehicle display system
JP6377508B2 (en) * 2014-11-27 2018-08-22 パイオニア株式会社 Display device, control method, program, and storage medium

Also Published As

Publication number Publication date
JP2018149877A (en) 2018-09-27

Similar Documents

Publication Publication Date Title
JP6593803B2 (en) Image display device
US9779622B2 (en) Method and device for assisting a driver when driving a vehicle
US8626427B2 (en) User interface method for terminal for vehicle and apparatus thereof
US9443429B2 (en) Optimum gaze location on full windscreen display
US20170151958A1 (en) Vehicle Operation Device
JP6354804B2 (en) Visibility control device
US11731509B2 (en) Method for displaying the course of a trajectory in front of a transportation vehicle or an object by a display unit, and device for carrying out the method
US9266429B2 (en) Human machine interface
WO2015163205A1 (en) Vehicle display system
JP2017091115A (en) Vehicular display device
JP6464933B2 (en) Route setting device and automatic travel control system
KR101601553B1 (en) Driving control system of vehicle and method for changing speed setting mode using thereof
JP3931343B2 (en) Route guidance device
JP2008030729A (en) Vehicular display device
JP3931342B2 (en) Route guidance device
JP6860384B2 (en) Image display device
JP2017202721A (en) Display system
JP2022155283A (en) Display control device for vehicles and display control method for vehicles
JP6860385B2 (en) Image display device
JP2020051925A (en) Vehicle driving assist device
WO2021132306A1 (en) Display control device, display device, display control method, and program
JP6354805B2 (en) Visibility control device
JP6380480B2 (en) Visibility control device
KR20150056715A (en) Output apparatus of head up display image and method thereof
JP6384529B2 (en) Visibility control device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200129

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201126

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201201

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210113

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210302

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210326

R150 Certificate of patent or registration of utility model

Ref document number: 6860385

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250