JP2016172526A - Display device for vehicle - Google Patents

Display device for vehicle Download PDF

Info

Publication number
JP2016172526A
JP2016172526A JP2015054270A JP2015054270A JP2016172526A JP 2016172526 A JP2016172526 A JP 2016172526A JP 2015054270 A JP2015054270 A JP 2015054270A JP 2015054270 A JP2015054270 A JP 2015054270A JP 2016172526 A JP2016172526 A JP 2016172526A
Authority
JP
Japan
Prior art keywords
vehicle
display
image
driver
rear image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015054270A
Other languages
Japanese (ja)
Other versions
JP6197814B2 (en
Inventor
彰 貝野
Akira Kaino
彰 貝野
由貴 藤原
Yuki Fujiwara
由貴 藤原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mazda Motor Corp
Original Assignee
Mazda Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mazda Motor Corp filed Critical Mazda Motor Corp
Priority to JP2015054270A priority Critical patent/JP6197814B2/en
Publication of JP2016172526A publication Critical patent/JP2016172526A/en
Application granted granted Critical
Publication of JP6197814B2 publication Critical patent/JP6197814B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To prevent attraction of a line of sight to a video of an electronic mirror monitor, and enable smooth check and operation of display contents for a main monitor provided on a vehicle width direction central part of an instrument panel.SOLUTION: A display device 1 for a vehicle includes: a main monitor 30; photographing means 11 for photographing the rear part of an own vehicle; and an electronic mirror monitor 16 which is provided in the vicinity of the main monitor 30 and displays the vehicle rear part image photographed by the photographing means 11, in the vehicle width direction of an instrument panel 51. The display device 1 for the vehicle includes presumption information acquisition means 12 and 113 for acquiring presumption information presumed when a driver sees the main monitor 30; determination means 43 for determining whether or not the vehicle rear part image is degraded and displayed based on the presumption information; and degradation display means 44 for degrading the visibility of the vehicle rear part image based on the determination result of the determination means 43.SELECTED DRAWING: Figure 1

Description

この発明は、インストルメントパネル(ダッシュボード)の車幅方向中央部に表示部や操作部を備えたセンターコンソールと、自車両の後方を撮影する撮像手段と、該撮像手段により撮影した車両後方画像を表示する電子ミラーモニタとを備えた車両用表示装置に関する。   The present invention relates to a center console having a display unit and an operation unit at the center in the vehicle width direction of an instrument panel (dashboard), an imaging unit that captures the rear of the host vehicle, and a vehicle rear image captured by the imaging unit. The present invention relates to a display device for a vehicle including an electronic mirror monitor that displays the above.

車両用表示装置は、運転者が車両後方を確認するために、自車両に搭載された後方カメラ(撮像手段)によって撮像された画像を車室内に搭載されたモニタに表示し、運転者がドアサイドミラーやバックミラー等の代わりに、電子ミラーとして上記モニタを目視することにより、車両後方の様子を確認することができるものであり、このような車両用表示装置に関して、近年では、特許文献1、2に例示されるように、運転者が車両後方の様子を確認し易くするための技術が知られている。   The vehicle display device displays an image captured by a rear camera (imaging means) mounted on the host vehicle on a monitor mounted in the vehicle interior so that the driver can check the rear of the vehicle. The state behind the vehicle can be confirmed by observing the monitor as an electronic mirror instead of a side mirror, a rearview mirror, and the like. As illustrated in FIG. 2, a technique for making it easier for the driver to check the state behind the vehicle is known.

特許文献1は、電子ミラーの表示部に表示される映像が車両の右後方と左後方のいずれの映像であるかを直感的に分かり易くするために、電子ミラーの表示部を、運転者と撮像手段との位置関係に応じて運転者の正面位置から外した位置に配置させたものである。   In Patent Document 1, in order to intuitively understand whether the video displayed on the display unit of the electronic mirror is the right rear or left rear video of the vehicle, the display unit of the electronic mirror is connected to the driver. According to the positional relationship with the imaging means, it is arranged at a position removed from the front position of the driver.

特許文献2は、安全性の観点による重要度のレベルが上昇したとき、運転席の前方に配置されたパネル画面において例えば、左端側に表示された左後方画像を、該左端側から中央側へと移動させるなどして左後方の状況を運転者に素早く認識させるものである。   In Patent Document 2, when the level of importance increases from the viewpoint of safety, for example, a left rear image displayed on the left end side on the panel screen arranged in front of the driver's seat is displayed from the left end side to the center side. The driver can quickly recognize the situation on the left rear.

一方、運転席と助手席との間に配置されたセンターコンソールのインストルメントパネルには、カーナビゲーション装置、オーディオ装置、或いは空調装置等の各種機器から出力される情報を表示する表示部が設けられるとともに、これら各種機器に対して操作を行うための操作部が運転席から手が届く位置に設けられている。   On the other hand, the instrument panel of the center console arranged between the driver seat and the passenger seat is provided with a display unit for displaying information output from various devices such as a car navigation device, an audio device, or an air conditioner. In addition, an operation unit for operating these various devices is provided at a position that can be reached from the driver's seat.

ところで、上述した電子ミラーのモニタには、走行中においてフロントウインドウ越しに見える景色の流れ(オプティカルフロー)とは逆方向に車両後方の風景が流れる動画像が表示されるため、運転者の目につき易い。   By the way, the above-mentioned monitor of the electronic mirror displays a moving image in which the scenery behind the vehicle flows in the opposite direction to the scenery flow (optical flow) seen through the front window during traveling. easy.

運転者は、通常、フロントウインドウ越しに進行方向を向いており、電子ミラーモニタを常に注視しながら走行しているわけではないため、走行中に電子ミラーのモニタの映像が過度に目につくことはない。   The driver usually faces in the direction of travel through the front window and does not always drive while keeping an eye on the electronic mirror monitor. There is no.

しかし、運転者は、フロントウインドウ越しに見える景色だけでなくインストルメントパネルに配置された計器類や表示部の表示内容を見ながら走行しており、また、例えば、カーナビゲーション装置の設定変更や、空調装置の温度調整など、操作部に対して手を伸ばして操作を行う際にも操作部の位置を確認しながら操作するために、車両前方からセンターコンソールの側へ僅かな時間であるが視線移動が行われる。   However, the driver is traveling while looking at not only the scenery seen through the front window but also the instruments arranged on the instrument panel and the display contents of the display unit, and for example, changing the setting of the car navigation device, When adjusting the temperature of the air conditioner, etc., when reaching out to the operation unit, it is only a short time from the front of the vehicle to the center console to operate while checking the position of the operation unit. A move is made.

そして、運転者が車両前方とセンターコンソールに設けられた表示部に表示された画像を確認したり、操作部を操作するために、運転者が車両前方と、これら表示部や操作部との間において視線移動する際に、電子ミラーモニタを横切るように、或いは電子ミラーモニタが視界の中央視側に入り込むように視線移動するため、電子ミラーモニタの映像を注視する必要性がない状況であっても、電子ミラーモニタの映像に目を奪われ易くなる。   Then, in order for the driver to check the images displayed on the front side of the vehicle and on the display unit provided on the center console, or to operate the operation unit, the driver can move between the front side of the vehicle and the display unit and the operation unit. When moving the line of sight, the line of sight is moved so as to cross the electronic mirror monitor or so that the electronic mirror monitor enters the central view side of the field of view. However, the image of the electronic mirror monitor is easily taken away.

そうすると、センターコンソールの表示部の表示内容の確認や操作部の操作を素早く行うことができないという課題があった。   If it does so, there existed a subject that the display content of the display part of a center console and the operation of an operation part could not be performed quickly.

上述した特許文献1のように、電子ミラーを運転者と撮像手段との位置関係に応じて運転者の正面位置から外した位置として例えば、センターコンソールの上部に配置した場合や、特許文献2のように、重要度のレベルが上昇していない通常走行時に、運転席の前方に配置されたパネル画面中における左端側に左後方画像を表示させた場合であっても、運転者が車両前方と表示部との間で視線移動する際に、電子ミラーモニタの画像に目を奪われ易くなるという上述した課題が生じるおそれがあった。   As in Patent Document 1 described above, for example, when the electronic mirror is disposed at the upper part of the center console as a position removed from the front position of the driver according to the positional relationship between the driver and the imaging unit, Thus, even when the left rear image is displayed on the left end side in the panel screen arranged in front of the driver's seat during normal driving where the level of importance is not increased, the driver is When moving the line of sight between the display unit and the display unit, there is a possibility that the above-described problem that the image of the electronic mirror monitor is easily lost.

特開2005−329768号公報JP 2005-329768 A 特開2010−64691号公報JP 2010-64691 A

そこでこの発明は、電子ミラーモニタの映像に視線が吸い寄せられることを抑制し、センターコンソールに設けた表示部の表示内容の確認や操作部の操作をスムーズに行うことを目的とする。   In view of this, an object of the present invention is to suppress the line of sight from being attracted to the image of the electronic mirror monitor, and to smoothly check the display content of the display unit provided in the center console and to operate the operation unit.

この発明は、表示部と操作部との少なくとも一方をインストルメントパネルの車幅方向中央部に備えたセンターコンソールと、自車両の後方を撮影する撮像手段と、前記インストルメントパネルの車幅方向における、前記センターコンソール、又は、該センターコンソールとステアリングホイールとの間に設けられ、前記撮像手段により撮影した車両後方画像を表示する電子ミラーモニタとを備えた車両用表示装置であって、運転者が前記センターコンソールを視認すると推認される推認情報を取得する推認情報取得手段と、前記推認情報に基づいて前記車両後方画像の視認性を劣化表示させるか否かを判定する判定手段と、前記判定手段の判定結果に基づいて前記車両後方画像の視認性を低下させる劣化表示手段とを備えたことを特徴とする。   The present invention relates to a center console provided with at least one of a display unit and an operation unit in a center portion in the vehicle width direction of the instrument panel, imaging means for photographing a rear side of the own vehicle, and a vehicle width direction of the instrument panel in the vehicle width direction. A vehicle display device provided with the center console or an electronic mirror monitor provided between the center console and a steering wheel and displaying a vehicle rear image taken by the imaging means, An identification information acquisition unit that acquires the estimation information estimated to visually recognize the center console, a determination unit that determines whether or not the visibility of the vehicle rear image is degraded based on the estimation information, and the determination unit And deterioration display means for reducing the visibility of the vehicle rear image based on the determination result. .

上記構成によれば、電子ミラーモニタの映像に視線が吸い寄せられることを抑制し、センターコンソールに設けた表示部の表示内容の確認や操作部の操作をスムーズに行うことができる。   According to the above configuration, it is possible to suppress the line of sight from being attracted to the image of the electronic mirror monitor, and to confirm the display content of the display unit provided in the center console and to operate the operation unit smoothly.

ここで、前記表示部と前記操作部とはタッチパネル式のモニタなど、互いの機能を有して一体に形成したものであっても、別々に備えたものであってもよい。また、前記表示部と前記操作部とは、ナビゲーション機能とオーディオ機能など、複数の機能ごとに別々に備えてもよいが、複数の機能を兼用した表示部、或いは操作部として構成してもよい。   Here, the display unit and the operation unit may be formed integrally with each other, such as a touch panel monitor, or may be provided separately. Further, the display unit and the operation unit may be provided separately for each of a plurality of functions such as a navigation function and an audio function, but may be configured as a display unit or an operation unit that also has a plurality of functions. .

すなわち、センターコンソールにおけるインストルメントパネルの車幅方向中央部には、例えば、ナビゲーション装置、オーディオ装置、空調装置、メール送受信装置、テレビ、電話など様々な機器のうち少なくとも一つの表示部、操作部として備えることができる。   That is, at the center of the instrument panel in the center console in the vehicle width direction, for example, as a display unit or an operation unit of at least one of various devices such as a navigation device, an audio device, an air conditioner, a mail transmission / reception device, a television, and a telephone. Can be provided.

前記電子ミラーモニタは、前記センターコンソール、又は該センターコンソールとステアリングホイールとの間の箇所に設けることができ、例えば、運転者がセンターコンソールの表示部や操作部に視線移動する際に、目につき易いステアリングホイールと略同じ高さの位置に設けることができる。   The electronic mirror monitor can be provided at the center console or at a location between the center console and the steering wheel. For example, when the driver moves his eyes to the display unit or the operation unit of the center console, It can be provided at a position approximately the same height as the easy steering wheel.

前記推認情報取得手段は、車載機器や制御部(ECU)が取得した情報、又は出力した情報を、運転者が前記センターコンソールを視認すると推認される推認情報として取得可能な構成とすることができるが、これに限らず、例えば、運転者による前記センターコンソールへの視認動作を検出する視認動作検出手段であってもよい。   The said inference information acquisition means can be set as the structure which can acquire the information which the vehicle equipment and the control part (ECU) acquired, or the output information as the inference information estimated when a driver | operator visually recognizes the said center console. However, the present invention is not limited thereto, and for example, a visual motion detection means for detecting a visual motion of the center console by the driver may be used.

この発明の態様として、劣化表示を開始して所定時間経過後に、劣化表示させた劣化表示画像を復元表示させる復元表示手段を備えたものである。   As an aspect of the present invention, there is provided a restoration display means for restoring and displaying a degraded display image that has been degraded and displayed after a lapse of a predetermined time since the degradation display was started.

上記構成によれば、所定時間経過後に劣化表示された車両後方画像が元の状態で表示されるため、運転者がセンターコンソールにおいて表示内容を確認したり、操作をし、該センターコンソールから車両前方へ視線を戻す度に、意識して劣化表示画像を復元する操作を行う必要がなく、進路変更や車線変更など、安全性を優先する観点で前記車両後方画像を確認する必要がある場合には、復元された車両後方画像によって自車両の後方の状況を確実に確認することができる。   According to the above configuration, the vehicle rear image that has been degraded and displayed after the elapse of a predetermined time is displayed in its original state, so that the driver can confirm the display contents or perform operations on the center console, When it is necessary to check the rear image of the vehicle from the viewpoint of giving priority to safety, such as a course change or a lane change, without having to consciously restore the degraded display image every time the line of sight is returned to The situation behind the host vehicle can be reliably confirmed by the restored vehicle rear image.

ここで、前記所定時間とは、例えば、センターコンソールにおいて表示部の表示内容や操作部の操作箇所を確認する際に必要と見込まれる時間とすることができ、例えば、タスクメニューの内容や、表示内容の情報量(表示時間、情報の文字数等)、操作の際にスイッチを押圧する数等の操作量に応じて任意に設定することができる。   Here, the predetermined time can be, for example, a time that is expected to be necessary when confirming the display content of the display unit or the operation location of the operation unit in the center console. The amount of information (display time, number of characters of information, etc.) and the amount of operation such as the number of pressing switches during operation can be arbitrarily set.

なお、表示部の表示内容や操作部の操作箇所を確認する際に必要と見込まれる時間には、前記センターコンソールの表示部や操作部を視認している時間に限定せず、車両前方と前記センターコンソールとの間において視線を移動させている時間を含んでもよい。   It should be noted that the time expected to be required when confirming the display content of the display unit and the operation location of the operation unit is not limited to the time when the display unit and the operation unit of the center console are visually recognized, The time during which the line of sight is moved between the center console and the center console may be included.

またこの発明の態様として、前記撮像手段は、車幅方向における運転席に対して前記センターコンソール側の車両側方から車両後方を撮像するように車幅方向における該助手席側の車両側方に配設され、前記判定手段は、前記センターコンソール側の車両側方への方向を指示するウインカ装置をON状態にした場合、前記車両後方画像を劣化表示させない判定をする構成とすることができる。   Further, as an aspect of the present invention, the imaging means is arranged on the vehicle side on the passenger seat side in the vehicle width direction so as to image the rear of the vehicle from the vehicle side on the center console side with respect to the driver seat in the vehicle width direction. The determination means may be configured to determine that the vehicle rear image is not degraded when the turn signal device that indicates the direction of the center console toward the vehicle side is turned on.

上記構成によれば、一般に自車両が運転席に対して前記センターコンソール側への方向へ進路変更や車線変更する際には、前記インストルメントパネルの車幅方向における、前記センターコンソール、又は該センターコンソールとステアリングホイールとの間に設けられた電子ミラーモニタに表示される車両後方画像を視認する必要性が高いといえる。   According to the above configuration, in general, when the own vehicle changes its course or lane in the direction toward the center console with respect to the driver's seat, the center console in the vehicle width direction of the instrument panel or the center It can be said that the necessity of visually recognizing the vehicle rear image displayed on the electronic mirror monitor provided between the console and the steering wheel is high.

よって、ウインカ装置を、車幅方向における前記センターコンソール側の車両側方への方向を指示するようにON状態にした場合には、たとえ運転者が前記センターコンソールに設けた表示部の表示内容を確認したり、操作部を操作するために前記センターコンソール側へ視線移動する場合であっても、前記車両後方画像の視認性が低下しないように表示させることにより、運転者は、電子ミラーモニタに表示される車両後方画像を確実に目視しながら安全に進路変更や車線変更することができる。   Therefore, when the turn signal device is turned on so as to indicate the direction of the center console side to the vehicle side in the vehicle width direction, the display content of the display unit provided on the center console by the driver is displayed. Even when moving to the center console side for checking or operating the operation unit, the driver can display on the electronic mirror monitor by displaying so that the visibility of the vehicle rear image does not deteriorate. It is possible to safely change the course or change the lane while reliably viewing the displayed vehicle rear image.

ここで、例えば、自車両が進路変更や車線変更する際には、運転者が安全性を優先する観点で前記車両後方画像を確認する必要性が高いといえる。よって、これら進路変更や車線変更する自車両の動きを事前に検出できるのであれば、前記判定手段は、上述したようにウインカ装置をON状態にした場合に限らず、例えば、ナビゲーション装置の案内内容、運転者撮像カメラが検出した運転者の動きの変化等に基づいて、前記車両後方画像を劣化表示させないように判定してもよい。   Here, for example, when the host vehicle changes its course or lane, it can be said that the driver needs to check the vehicle rear image from the viewpoint of giving priority to safety. Therefore, if it is possible to detect in advance the movement of the host vehicle that changes the course or the lane, the determination means is not limited to the case where the turn signal device is turned on as described above. Further, based on a change in the movement of the driver detected by the driver imaging camera, the vehicle rear image may be determined not to be displayed in a degraded manner.

またこの発明の態様として、前記劣化表示手段は、前記撮像手段で異なる時間に撮像した複数の車両後方画像に基づいて、オプティカルフローを算出する算出手段と、前記オプティカルフローを基に前記車両後方画像中から動的フロー成分を抽出する動的フロー成分抽出手段と、前記車両後方画像中から前記動的フロー成分を除去して劣化表示する動的フロー成分除去手段とを備えることができる。   Further, as an aspect of the present invention, the deterioration display unit includes a calculation unit that calculates an optical flow based on a plurality of vehicle rear images captured at different times by the imaging unit, and the vehicle rear image based on the optical flow. Dynamic flow component extraction means for extracting a dynamic flow component from the inside, and dynamic flow component removal means for removing and displaying the dynamic flow component from the vehicle rear image.

上記構成によれば、前記劣化表示手段により、車両後方画像中の前記動的フロー成分のみを除去して劣化表示させるため、運転者が目を奪われ易いオプティカルフローが大きい領域のみを劣化表示する一方で、車両後方画像中の静的フロー成分は、前記劣化表示手段によって劣化表示せずに通常どおり表示するため、運転者は、例えば、後方車両等の移動物体の存在を認識することができる。   According to the above configuration, since only the dynamic flow component in the vehicle rear image is removed and the deterioration display is performed by the deterioration display means, only the region where the optical flow is likely to be taken away by the driver is displayed in a deteriorated manner. On the other hand, since the static flow component in the vehicle rear image is displayed as usual without being deteriorated by the deterioration display means, the driver can recognize the presence of a moving object such as a rear vehicle, for example. .

ここで、前記動的フロー成分は、自車両に対して相対速度が大きい物体であり、例えば、電柱など実際には静止している静止物体である。
なお、前記静的フロー成分は、自車両に対して相対速度が小さい物体であり、例えば、自車両と略同じ速度で走行している移動物体である。
またこの発明の態様として、前記劣化表示手段は、前記電子ミラーモニタの画面に表示される前記車両後方画像を該画面サイズに対して縮小表示させて劣化表示させる車両後方画像縮小化手段であり、前記車両後方画像縮小化手段により縮小表示させた縮小車両後方画像を、前記電子ミラーモニタの画面の車幅方向において、前記センターコンソールの有する側と反対側に表示したものである。
Here, the dynamic flow component is an object having a large relative speed with respect to the own vehicle, for example, a stationary object that is actually stationary, such as a utility pole.
Note that the static flow component is an object having a small relative speed with respect to the host vehicle, for example, a moving object traveling at substantially the same speed as the host vehicle.
Further, as an aspect of the present invention, the deterioration display means is a vehicle rear image reduction means for displaying the vehicle rear image displayed on the screen of the electronic mirror monitor in a reduced manner with respect to the screen size and displaying the deterioration. The reduced vehicle rear image reduced and displayed by the vehicle rear image reduction means is displayed on the opposite side of the center console in the vehicle width direction of the screen of the electronic mirror monitor.

上記構成によれば、車両後方画像縮小化手段によって、前記電子ミラーモニタの画面に表示される前記車両後方画像を該画面サイズに対して縮小表示することができるため、例えば、運転者がセンターコンソールに設けた表示部や操作部に視線移動する際に、電子ミラーモニタの映像に視線が吸い寄せられることなく表示部の表示内容の確認や操作部の操作を素早く行うことができる。   According to the above configuration, the vehicle rear image reduction means can reduce the vehicle rear image displayed on the screen of the electronic mirror monitor with respect to the screen size. When the line of sight is moved to the display unit and the operation unit provided in the display unit, the display content of the display unit can be confirmed and the operation unit can be quickly operated without drawing the line of sight to the image of the electronic mirror monitor.

一方で、縮小車両後方画像を、前記電子ミラーモニタの画面の車幅方向において、前記センターコンソールの有する側と反対側に表示したため、運転者は、たとえ前記車両後方画像を劣化表示している間であっても縮小車両後方画像を意識的に目視すれば、車両後方の様子を認識することができ、安全性を確保することができる。   On the other hand, since the reduced vehicle rear image is displayed on the side opposite to the side having the center console in the vehicle width direction of the screen of the electronic mirror monitor, the driver is displayed while the vehicle rear image is degraded. Even so, if the reduced vehicle rear image is consciously viewed, the state behind the vehicle can be recognized, and safety can be ensured.

この発明によれば、電子ミラーモニタの映像に視線が吸い寄せられることを抑制し、センターコンソールに設けた表示部の表示内容の確認や操作部の操作をスムーズに行うことができる。   According to the present invention, it is possible to suppress the line of sight from being drawn into the image of the electronic mirror monitor, and to confirm the display content of the display unit provided in the center console and to operate the operation unit smoothly.

本車両用表示装置の概略構成を示すブロック図。The block diagram which shows schematic structure of the display apparatus for vehicles. 走行中において車両前後各で異なる方向に流れる風景が運転席から同時に見える様子を模式的に説明した説明図。FIG. 4 is an explanatory diagram schematically illustrating how a landscape flowing in different directions before and after the vehicle can be seen simultaneously from the driver's seat during traveling. 本車両用表示装置の実施例1の制御処理を示すフローチャート。The flowchart which shows the control processing of Example 1 of the display apparatus for vehicles. 実施例1の劣化表示処理の前後の車両左後方画像を示す模式図。The schematic diagram which shows the vehicle left back image before and behind the deterioration display process of Example 1. FIG. 本車両用表示装置の実施例2の制御処理を示すフローチャート。The flowchart which shows the control processing of Example 2 of the display apparatus for vehicles. 運転者がメインモニタを操作する様子を模式的に示した平面図。The top view which showed typically a driver | operator operating a main monitor. 他の劣化表示処理後の車両左後方画像を示す模式図。The schematic diagram which shows the vehicle left back image after another deterioration display process. 他の劣化表示処理後の車両左後方画像を示す模式図。The schematic diagram which shows the vehicle left back image after another deterioration display process. 他の劣化表示処理後の車両左後方画像を示す模式図。The schematic diagram which shows the vehicle left back image after another deterioration display process.

この発明の一実施例を以下図面に基づいて詳述する。
図1は本実施形態の車両用表示装置1の概略構成を示すブロック図であり、図2は前方へ走行中の自車両の車室における前側座席よりも前方を見たときに、フロントガラス越しに見える風景と電子ミラーに表示される車両後方風景の各オプティカルフローを強調して模式的に示した説明図である。図3は本実施形態の車両用表示装置の実施例1の制御処理を示すフローチャートである。図4(a)は、実施例1のステップ5の劣化表示処理前の車両左後方画像を示す模式図であり、図4(b)は、実施例1のステップ5の劣化表示処理後の左後方画像を示す模式図である。
An embodiment of the present invention will be described in detail with reference to the drawings.
FIG. 1 is a block diagram showing a schematic configuration of a vehicle display device 1 according to the present embodiment. FIG. 2 shows a state through a windshield when looking forward from a front seat in a passenger compartment of a host vehicle traveling forward. It is explanatory drawing which highlighted and showed typically each optical flow of the scenery which can be seen, and the vehicle back view displayed on an electronic mirror. FIG. 3 is a flowchart showing the control processing of Example 1 of the vehicle display device of the present embodiment. FIG. 4A is a schematic diagram illustrating a vehicle left rear image before the deterioration display process in step 5 of the first embodiment, and FIG. 4B is a left view after the deterioration display process in step 5 of the first embodiment. It is a schematic diagram which shows a back image.

本実施形態の車両用表示装置1を備えた車両は、右ハンドル車であり、図1に示すように、自車両の左後方を撮影する左サイドカメラ11と、該左サイドカメラ11により撮影した車両後方画像を表示する左電子ミラーモニタ16(左電子ミラーディスプレイ16)と、運転者を撮像する運転者撮像カメラ12と、メール受信検出部113と、車両用表示装置1の制御処理(運転支援処理)などの各種制御処理を行うECU40と、主にインストルメントパネル51(図2参照)内に組み込まれている各種車載機器20と、該各種車載機器20の情報表示及び操作を行うメインモニタ30(メインディスプレイ30)と、計時部14と、ウインカ装置15Aと、左ウインカON状態検出部15とを備えている。
なお、本実施形態の車両には、上述した左サイドカメラ11、左電子ミラーモニタ16、左ウインカON状態検出部15等の左側に備えた機器のそれぞれに対応する右側の機器を車両右側に備えているが、これら左右各側に備えた一対の機器のうち、右側に備えた機器は、上記左側に備えた機器と同様の構造であるとともに、本実施形態の車両用表示装置1を用いた制御処理には直接、関係しないため、その説明を省略する。
The vehicle provided with the vehicle display device 1 according to the present embodiment is a right-hand drive vehicle. As shown in FIG. 1, the left side camera 11 that captures the left rear of the host vehicle and the left side camera 11 capture the images. Control processing of the left electronic mirror monitor 16 (left electronic mirror display 16) for displaying the vehicle rear image, the driver imaging camera 12 for imaging the driver, the mail reception detection unit 113, and the vehicle display device 1 (driving support) ECU 40 that performs various control processing such as processing), various in-vehicle devices 20 that are mainly incorporated in the instrument panel 51 (see FIG. 2), and a main monitor 30 that performs information display and operation of the various in-vehicle devices 20. (Main display 30), a timing unit 14, a blinker device 15A, and a left blinker ON state detection unit 15.
The vehicle according to the present embodiment includes right-side devices corresponding to the left-side devices such as the left side camera 11, the left electronic mirror monitor 16, and the left turn signal ON state detection unit 15 described above on the right side of the vehicle. However, among the pair of devices provided on the left and right sides, the device provided on the right side has the same structure as the device provided on the left side, and the vehicle display device 1 of the present embodiment is used. Since it is not directly related to the control processing, its description is omitted.

左サイドカメラ11は、図2に示すように、自車両の左側後方を連続的に撮像可能に自車両の左側部、すなわち左フロントフェンダーにおける後側上部(左側フロントサイドウインドウの近傍)に備えている。   As shown in FIG. 2, the left side camera 11 is provided on the left side of the host vehicle, that is, the rear upper part of the left front fender (near the left front side window) so that the left rear of the host vehicle can be continuously imaged. Yes.

この左サイドカメラ11は、左サイドカメラハウジングの内部に、車体ボディから車幅方向外側に突出するカメラブラケットを介して先端側に備え、例えば可視光領域や赤外線領域等にて撮像可能なCCDやCMOSを撮像素子とする小型のカラーカメラ等からなり、撮影した情報を動画情報としてリアルタイムに出力する(図1、及び図2参照)。   The left side camera 11 is provided inside the left side camera housing on the front end side through a camera bracket that protrudes outward in the vehicle width direction from the vehicle body. For example, a CCD or the like that can capture images in the visible light region, the infrared region, etc. It consists of a small color camera or the like using a CMOS as an image sensor, and outputs captured information as moving image information in real time (see FIGS. 1 and 2).

なお、本実施形態の車両の側部にはドアミラー(サイドミラー)を備えていないが、サイドカメラとは別途、ドアミラーを備え、ハウジングにサイドカメラを埋設したカメラ一体型のドアミラーを採用してもよい。   In addition, although the door mirror (side mirror) is not provided in the side part of the vehicle of this embodiment, even if it employ | adopts the camera integrated door mirror which provided the door mirror separately from the side camera and embedded the side camera in the housing. Good.

運転者撮像カメラ12は、運転席に着席している運転者を車両前方側から見た映像を撮像するための小型カメラであり、例えば、CCDカメラや赤外線カメラを用いることができる。この運転者撮像カメラ12は、本実施例においては図2に示すように、フロントピラー57の車室内のガーニッシュに取り付けられているが、運転者がメインモニタ30を操作する動作を含めて該メインモニタ30を視認する動作を検出するために、運転者の例えば頭部や左手の動きを撮像できるのであれば、インストルメントパネル51やセンターコンソール50等に配置してもよい。   The driver imaging camera 12 is a small camera for capturing an image of the driver sitting in the driver's seat as viewed from the front side of the vehicle. For example, a CCD camera or an infrared camera can be used. The driver imaging camera 12 is attached to the garnish in the passenger compartment of the front pillar 57 as shown in FIG. 2 in the present embodiment, but the driver imaging camera 12 includes the operation of the driver operating the main monitor 30. In order to detect the movement of visually recognizing the monitor 30, for example, if the movement of the driver's head or left hand can be imaged, it may be arranged on the instrument panel 51, the center console 50, or the like.

左電子ミラーモニタ16は、液晶モニタ等で構成し、後述する画像生成部42で生成した自車両の左後方の様子を示す画像を表示する。このような左電子ミラーモニタ16は、運転者から視認できるようインストルメントパネル51に配置されている。   The left electronic mirror monitor 16 is composed of a liquid crystal monitor or the like, and displays an image showing a left rear state of the host vehicle generated by the image generation unit 42 described later. Such a left electronic mirror monitor 16 is disposed on the instrument panel 51 so as to be visible to the driver.

具体的には、左電子ミラーモニタ16は、図2に示すように、インストルメントパネル51の車幅方向のメインモニタ30と運転席の正面側のメーターパネル56との間位置に、ステアリングホイール55と略同じ高さで設置されている。
なお、本実施例において、インストルメントパネル51は、車室の前席前方部分の車幅方向の全体に亘って配設されているダッシュボードを示すものとする。
Specifically, as shown in FIG. 2, the left electronic mirror monitor 16 has a steering wheel 55 at a position between the main monitor 30 in the vehicle width direction of the instrument panel 51 and the meter panel 56 on the front side of the driver's seat. It is installed at almost the same height.
In addition, in a present Example, the instrument panel 51 shall show the dashboard arrange | positioned over the whole vehicle width direction of the front seat front part of a compartment.

ECU40は、各種処理を制御するためのCPUと、このCPUで行う処理を実行するプログラムやパラメータ等を格納するROMと、その処理過程で生成されるデータを一時格納する作業領域としてのRAM等を備えた周知のマイクロコンピュータで構成している。さらに、ECU40は、外部機器との接続を行なうインターフェース部等を有しており、車載機器20としての例えば、図1に示すようなEメール送受信装置21、カーナビゲーション装置22、空調装置23、オーディオ装置24、さらに図示省略するが電話装置等から取得した表示情報をメインモニタ30に表示するとともに、メインモニタ30のスイッチ操作により入力された情報を各種車載機器20に出力する。   The ECU 40 includes a CPU for controlling various processes, a ROM for storing programs and parameters for executing processes performed by the CPU, a RAM as a work area for temporarily storing data generated in the process, and the like. It comprises a well-known microcomputer provided. Further, the ECU 40 includes an interface unit for connecting to an external device, and as an in-vehicle device 20, for example, an e-mail transmission / reception device 21, a car navigation device 22, an air conditioner 23, an audio device as shown in FIG. The display information acquired from the device 24 and a telephone device or the like (not shown) is displayed on the main monitor 30, and information input by a switch operation of the main monitor 30 is output to various in-vehicle devices 20.

このようなECU40には、本実施形態の車両用表示装置1を用いた制御処理を行う画像生成部41,42と判定部43と電子ミラー画像劣化表示処理部44と電子ミラー画像劣化表示解除処理部45とを備えている(図1参照)。   In such an ECU 40, image generation units 41 and 42, a determination unit 43, an electronic mirror image deterioration display processing unit 44, and an electronic mirror image deterioration display release processing that perform control processing using the vehicle display device 1 of the present embodiment. Part 45 (see FIG. 1).

画像生成部41,42は、各種の画像処理を行う機能を有し、左サイドカメラ11用の画像生成部41と運転者撮像カメラ12用の画像生成部42とを備えている(同図参照)。左サイドカメラ11用の画像生成部41は、左サイドカメラ11で撮像した車両左後方風景の撮像データを基に生成した生成過程画像を左右反転させ、左右反転した像に対応する車両左後方画像P1(図4参照)に加工して左電子ミラーモニタ16に表示する機能を有する。
運転者撮像カメラ12用の画像生成部42は、運転者撮像カメラ12で撮像した運転者撮像データを基に運転者画像を生成する。
The image generation units 41 and 42 have a function of performing various types of image processing, and include an image generation unit 41 for the left side camera 11 and an image generation unit 42 for the driver imaging camera 12 (see the same figure). ). The image generation unit 41 for the left side camera 11 horizontally reverses the generation process image generated based on the imaging data of the vehicle left rear landscape captured by the left side camera 11, and the vehicle left rear image corresponding to the horizontally reversed image. It has a function of processing to P1 (see FIG. 4) and displaying it on the left electronic mirror monitor 16.
The image generation unit 42 for the driver imaging camera 12 generates a driver image based on the driver imaging data captured by the driver imaging camera 12.

判定部43は、後述するメール受信検出部113、運転者撮像カメラ12用の画像生成部42、計時部14、及び左ウインカON状態検出部15など複数の情報取得部を介して取得した情報を包括して車両左後方画像P1を劣化表示するか否かを複数パターンの判定条件に対応する判定プログラムに基づいて判定する。   The determination unit 43 receives information acquired through a plurality of information acquisition units such as a mail reception detection unit 113, an image generation unit 42 for the driver imaging camera 12, a timekeeping unit 14, and a left turn signal ON state detection unit 15 which will be described later. Whether to comprehensively display the vehicle left rear image P1 is determined based on a determination program corresponding to a plurality of patterns of determination conditions.

例えば、判定部43は、Eメール送受信装置21がメールを受信したか否かに基づいて車両左後方画像P1を劣化表示するか否かの判定をする。
この場合の具体的な判定条件として、判定部43は、Eメール送受信装置21がメールを受信した際に、メール受信検出部113により出力されたメール受信検出信号を取得した時点において、左ウインカON状態検出部15により、左ウインカON状態検出信号を取得していない場合には、左電子ミラーモニタ16の車両左後方画像P1を「劣化表示可」と判定する。その一方で、判定部43は、メール受信検出部113により出力されたメール受信検出信号を取得した時点において、左ウインカON状態検出部15により、左ウインカON状態検出信号を取得している場合には、左電子ミラーモニタ16の車両左後方画像P1を「劣化表示不可」と判定する。
For example, the determination unit 43 determines whether or not the vehicle left rear image P1 is displayed in a degraded manner based on whether or not the email transmission / reception device 21 has received an email.
As a specific determination condition in this case, when the e-mail transmission / reception device 21 receives e-mail, the determination unit 43 acquires the e-mail reception detection signal output by the e-mail reception detection unit 113 and acquires the left turn signal ON. When the state blinker ON state detection signal is not acquired by the state detection unit 15, the vehicle left rear image P <b> 1 of the left electronic mirror monitor 16 is determined as “degradable display is possible”. On the other hand, when the determination unit 43 has acquired the left turn signal ON state detection signal by the left turn signal ON state detection unit 15 at the time of acquiring the mail reception detection signal output by the mail reception detection unit 113. Determines that the vehicle left rear image P <b> 1 of the left electronic mirror monitor 16 is “impossible to display degradation”.

或いは、判定部43は、運転者撮像カメラ12により撮像された運転者の姿勢を基に車両左後方画像P1を劣化表示するか否かの判定をする。
この場合の具体的な判定条件として、判定部43は、運転者撮像カメラ12の撮像により取得した運転者画像を基に運転者の姿勢がメインモニタ30を視認する意図が推認される姿勢であると判定した時点で、左ウインカON状態検出部15により、左ウインカON状態検出信号を取得していない場合には、左電子ミラーモニタ16の車両左後方画像P1を「劣化表示可」と判定する。その一方で、判定部43は、運転者の姿勢がメインモニタ30を視認する意図が推認される姿勢であると判定された時点で、左ウインカON状態検出部15により、左ウインカON状態検出信号を取得している場合には、左電子ミラーモニタ16の車両左後方画像P1を「劣化表示不可」と判定する。
Alternatively, the determination unit 43 determines whether or not the vehicle left rear image P1 is displayed in a degraded manner based on the posture of the driver imaged by the driver imaging camera 12.
As a specific determination condition in this case, the determination unit 43 is an attitude in which the intention of the driver to recognize the main monitor 30 is inferred based on the driver image acquired by the imaging of the driver imaging camera 12. When the left turn signal ON state detection unit 15 has not acquired a left turn signal ON state detection signal, the vehicle left rear image P1 of the left electronic mirror monitor 16 is determined as “degradable display is possible”. . On the other hand, when the determination unit 43 determines that the driver's posture is a posture in which an intention to visually recognize the main monitor 30 is determined, the left turn signal ON state detection unit 15 causes the left turn signal ON state detection signal to be detected. Is obtained, it is determined that the vehicle left rear image P1 of the left electronic mirror monitor 16 is “degradation display is impossible”.

なお、運転者撮像カメラ12の撮像により取得した運転者画像を基に運転者の姿勢がメインモニタ30を視認する意図が推認される姿勢であると判定する手法としては、例えば、運転者がメインモニタ30を操作するために、該メインモニタ30に向けて左手を伸ばした姿勢、或いは頭部をメインモニタ30に向けた姿勢(頭部を車両前方から左側へ所定角度傾けた姿勢)など、メインモニタ30を視認する意図が推測される複数の姿勢パターンをメインモニタ視認姿勢パターンとしてECU40のROMなどに記憶して予めデータベース化して登録しておき、運転者撮像カメラ12の撮像により取得した運転者画像に表示される運転者の姿勢と、登録されたメインモニタ視認姿勢パターンとを照合して、双方の姿勢の位置情報や角度情報の差異が所定の閾値内に含まれる場合には、運転者がメインモニタ30を視認する意図があると判定する手法を採用することができるが、この手法に限らず、他の手法を用いてもよい。   In addition, as a method of determining that the driver's posture is the posture in which the intention of visually recognizing the main monitor 30 is estimated based on the driver image acquired by the imaging of the driver imaging camera 12, for example, the driver is the main In order to operate the monitor 30, a posture in which the left hand is extended toward the main monitor 30 or a posture in which the head is directed to the main monitor 30 (a posture in which the head is inclined at a predetermined angle from the front to the left side of the vehicle) A plurality of posture patterns whose intent to visually recognize the monitor 30 is stored in a ROM of the ECU 40 as a main monitor visual posture pattern, registered in advance as a database, and acquired by imaging by the driver imaging camera 12 By comparing the driver's posture displayed in the image with the registered main monitor visual recognition posture pattern, the position information and angle information of both postures When the difference is included within a predetermined threshold, a method of determining that the driver intends to visually recognize the main monitor 30 can be adopted, but not limited to this method, other methods may be used. Good.

また、判定部43は、劣化表示開始時点から後述する計時部14により計測した時間が、ROMに記憶されている所定の劣化表示時間を経過した経過情報を受信したとき、「劣化表示解除可」と判定する。   Further, when the determination unit 43 receives the elapsed information when the time measured by the time measuring unit 14 to be described later from the deterioration display start time has passed a predetermined deterioration display time stored in the ROM, the “degradation display can be canceled”. Is determined.

ここで、劣化表示時間は、左電子ミラーモニタ16に表示されている車両左後方画像P1の劣化表示を開始してから解除するまでの時間であり、車載機器20を用いて運転者が行う所定のタスク内容に応じて運転者が完了するまでに必要と見込まれるタスク完了想定時間を設定している。例えば、メール受信時における左電子ミラーモニタ16画面の劣化表示時間は、着信メールを確認する際に運転者が必要と見込まれる時間である。このような劣化表示時間は、タスクの項目に対応付けたデータベースとしてECU40に備えたROMに記憶されている。   Here, the deterioration display time is the time from the start of the deterioration display of the vehicle left rear image P1 displayed on the left electronic mirror monitor 16 to the cancellation, and is a predetermined performed by the driver using the in-vehicle device 20. Estimated task completion time expected to be completed by the driver according to the task content is set. For example, the deterioration display time of the left electronic mirror monitor 16 screen at the time of mail reception is the time that the driver is expected to need when confirming incoming mail. Such deterioration display time is stored in a ROM provided in the ECU 40 as a database associated with the task item.

なお、この劣化表示時間は、タスク内容ごとに運転者により変更可能に構成してもよい。   The deterioration display time may be configured to be changeable by the driver for each task content.

また、電子ミラー画像劣化表示処理部44は、図1に示すように、車両左後方画像P1を左電子ミラーモニタ16画面に劣化表示する処理を行うために、オプティカルフロー算出部441、動的フロー成分抽出部442、及び動的フロー成分除去処理部443とで構成している。
オプティカルフロー算出部441は、例えば、異なる時刻に撮像した複数の画像間において、同一の部位として認識可能な点を特徴点として設定し、この特徴点の移動をフローベクトルとして該画像を複数に分類した群ごとに算出する。このようなフローベクトルを、撮像した画像内の全領域において算出する。
Further, as shown in FIG. 1, the electronic mirror image deterioration display processing unit 44 performs an optical flow calculation unit 441, a dynamic flow in order to perform a process of displaying the vehicle left rear image P <b> 1 on the left electronic mirror monitor 16 screen. The component extraction unit 442 and the dynamic flow component removal processing unit 443 are configured.
For example, the optical flow calculation unit 441 sets, as a feature point, a point that can be recognized as the same part between a plurality of images taken at different times, and classifies the image into a plurality of points using the movement of the feature point as a flow vector. Calculate for each group. Such a flow vector is calculated in the entire region in the captured image.

ここで、オプティカルフローの具体的な算出方法は、マッチング法や勾配法などの代表的な公知の手法を用いることができるが、特に限定しない。また、オプティカルフローは、フィルタ処理を施して得られた特徴点を基に算出してもよい。フィルタ処理としては、例えば、画像内において中心部分より周辺部分の方がオプティカルフローの特徴がより明確に表すことができるという人間の受容野の特性に似せるガボールフィルタ(gabor-filter)による公知の処理を適用できるが、特に限定しない。   Here, a specific known method such as a matching method or a gradient method can be used as a specific method for calculating the optical flow, but is not particularly limited. Further, the optical flow may be calculated based on feature points obtained by performing the filtering process. As a filtering process, for example, a known process using a Gabor filter (gabor-filter) that resembles the characteristics of a human receptive field that the optical flow characteristics can be expressed more clearly in the peripheral part than in the central part in the image. Can be applied, but is not particularly limited.

さらに、動的フロー成分抽出部442は、撮像した画像内の全領域において算出したフローベクトルを基に、画像内の移動物体の位置および移動方向等の情報を検出するが、自車両が走行中においては左サイドカメラ11自体が移動しているため、自車両の移動により生じるフローベクトルを差し引いて、左サイドカメラ11自体の移動量の影響を除去することにより、自車両が走行中において左サイドカメラ11で撮像した車両左後方画像P1の中から背景などの静止物体と、他車両などの移動物体とを検出し、左サイドカメラ11自体が移動する場合には、左電子ミラーモニタ16画面において流れるように表示される静止物体を動的フロー成分Dとして抽出する。   Furthermore, the dynamic flow component extraction unit 442 detects information such as the position and moving direction of the moving object in the image based on the flow vector calculated in the entire region in the captured image, but the host vehicle is traveling. Since the left side camera 11 itself is moving, the flow vector generated by the movement of the own vehicle is subtracted to remove the influence of the movement amount of the left side camera 11 itself, so that the left side camera 11 When a stationary object such as a background and a moving object such as another vehicle are detected from the vehicle left rear image P1 captured by the camera 11, and the left side camera 11 itself moves, on the left electronic mirror monitor 16 screen A stationary object displayed to flow is extracted as a dynamic flow component D.

なお、自車両が走行中に撮像した車両左後方画像P1の中から静止物体と移動物体とを検出する技術は、例えば、「特開2004−56763」等の文献に開示されている公知の技術であるため、ここではその説明は省略する。   A technique for detecting a stationary object and a moving object from the vehicle left rear image P1 captured while the host vehicle is traveling is, for example, a known technique disclosed in a document such as “Japanese Unexamined Patent Application Publication No. 2004-56763”. Therefore, the description thereof is omitted here.

動的フロー成分除去処理部443は、車両左後方画像P1中において、静止物体が表示される部分のオプティカルフロー200bを除去する、すなわち、該部分のフローを停止させるなどして車両左後方画像P1中の動的フロー成分Dを除去することにより、運転者の視線が奪われないように劣化表示する。   The dynamic flow component removal processing unit 443 removes the optical flow 200b of the portion where the stationary object is displayed in the vehicle left rear image P1, that is, stops the flow of the portion, for example, and stops the vehicle left rear image P1. By removing the dynamic flow component D in the middle, the deterioration display is performed so that the driver's line of sight is not lost.

また、電子ミラー画像劣化表示解除処理部45は、判定部43が「劣化表示解除可」と判定したとき、車両左後方画像P1の劣化表示を解除して元の表示形態に復元する。   Further, when the determination unit 43 determines that “degradation display can be canceled”, the electronic mirror image degradation display cancellation processing unit 45 cancels the degradation display of the vehicle left rear image P1 and restores the original display form.

また、上述したメインモニタ30は、センターコンソール50の前方上部位置、すなわち、インストルメントパネル51の車幅方向の中央位置に、運転者が表示情報を目視可能であるとともに、左手を伸ばしてメインモニタ30画面に触れることができる距離に設けられている。なお、図2に示すように、センターコンソール50は車室内の運転席と助手席との間に設けられており、変速操作を行うシフトレバー52が配設けられている。   In addition, the main monitor 30 described above can display information at the front upper position of the center console 50, that is, the center position of the instrument panel 51 in the vehicle width direction, and the main monitor 30 extends the left hand. It is provided at a distance where 30 screens can be touched. As shown in FIG. 2, the center console 50 is provided between the driver's seat and the passenger seat in the passenger compartment, and is provided with a shift lever 52 for performing a speed change operation.

このようなメインモニタ30は、例えば、Eメール送受信装置21、カーナビゲーション装置22、オーディオ装置24、及び空調装置23など車両に搭載された各種車載機器20の操作、及び情報表示を統括して行うための5〜8インチ程度の小型のタッチパネル式のモニタであり、テレビ用のモニタやカーナビゲーション装置22に具備されるモニタと兼用されている。   Such a main monitor 30 performs, for example, the operation and information display of various in-vehicle devices 20 mounted on the vehicle such as the e-mail transmission / reception device 21, the car navigation device 22, the audio device 24, and the air conditioner 23. This is a small touch panel type monitor of about 5 to 8 inches, and is also used as a monitor for a television or a car navigation device 22.

このようなメインモニタ30は、使用者がモニタの画面上を押圧、スクロールするなどして画面上に触れることで各車載機器20を操作することができるように構成されている。   Such a main monitor 30 is configured such that a user can operate each in-vehicle device 20 by touching the screen by pressing and scrolling on the screen of the monitor.

具体的に、メインモニタ30は、指などによる接触位置をロケーションデータとして出力できる感圧式や静電式の入力装置であるが、バックライトを備えた液晶式のものに限らず、CRT型のものであってもプラズマ表示型のものであってもよい。   Specifically, the main monitor 30 is a pressure-sensitive or electrostatic input device that can output a contact position by a finger or the like as location data. However, the main monitor 30 is not limited to a liquid crystal type equipped with a backlight, but a CRT type. Or a plasma display type.

さらに、メインモニタ30は、各種車載機器20の中から使用する機器を選択可能に一覧表示した最上位階層のトップ画面が表示されるとともに、該トップ画面に表示されるメニュー項目の中から選択した機器ごとに応じて具体的な情報表示、及び操作を許容する複数パターンの下位層の操作画面が表示される階層的な表示方式が採用されているが、メール受信時等、運転者に案内すべき突発的な情報がある場合は、その情報を示した案内画面が現時点の表示画面上に優先的に表示される。   Further, the main monitor 30 displays a top screen of the highest hierarchy displaying a list of devices to be used from among various in-vehicle devices 20, and selected from menu items displayed on the top screen. Hierarchical display method is adopted in which specific information display according to each device and multiple patterns of operation screens that allow operation are displayed, but it will guide the driver when receiving e-mail etc. When there is unexpected information that should be corrected, a guidance screen showing the information is preferentially displayed on the current display screen.

メール受信検出部113は、Eメール送受信装置21がメールを受信した時点で、メール受信検出信号をECU40に送信する。   The mail reception detection unit 113 transmits a mail reception detection signal to the ECU 40 when the e-mail transmission / reception device 21 receives a mail.

計時部14は、メインモニタ30等に時刻を表示するタイマー機能を利用して時間を計測するものであり、ECU40からの時間計測開始信号を受信後に、時間計測を開始し、所定時間が経過した時点でECU40に時間計測完了信号を送信する。   The time measuring unit 14 measures time using a timer function for displaying time on the main monitor 30 or the like. After receiving a time measurement start signal from the ECU 40, the time measuring unit 14 starts time measurement and a predetermined time has elapsed. At this time, a time measurement completion signal is transmitted to the ECU 40.

ウインカ装置15Aは、ステアリングコラムの左側に備え、中立位置からステアリングホイール55の回す方向に応じて上下いずれかの側に傾動操作するウインカレバーと、このようなウインカレバーの傾動に応じてONとOFFとに切り替える作動スイッチと、ウインカレバーが上方に傾動して作動スイッチがON状態になった時に点滅し、OFF状態で点滅が終了する左ウインカランプと、左ウインカON状態検出部15とを備えている。   The winker device 15A is provided on the left side of the steering column, and the winker lever is tilted up or down depending on the direction in which the steering wheel 55 rotates from the neutral position. The winker device 15A is turned on and off according to the tilt of the winker lever. An operation switch for switching to the left, a blinker when the blinker lever tilts upward and the operation switch is turned on, a left blinker lamp that blinks when the operation switch is turned off, and a left blinker ON state detection unit 15. Yes.

左ウインカON状態検出部15は、ステアリングレバーを上方に傾動操作した時点と中立位置に戻した時点における作動スイッチの切り替えを検知し、これら切り替え検知情報をECU40へ逐次出力することで、左ウインカがON状態であることを検出する。   The left turn signal ON state detection unit 15 detects switching of the operation switch at the time when the steering lever is tilted upward and returned to the neutral position, and the left turn signal is output to the ECU 40 sequentially so that the left turn signal It detects that it is in the ON state.

(実施例1)
本実施形態の車両用表示装置1は、上述した構成を備えており、次に、この両用表示装置1の実施例1における制御処理(運転支援処理)について図3に示すフローチャートを参照しながら説明する。
運転者が例えば、イグニションスイッチをON状態にしてエンジンを始動させることにより、メインモニタ30や各種車載機器20の電源が立ち上がり、メインモニタ30は、運転者への案内情報の表示を開始するとともに、運転者による操作を許容する状態となる(ステップS1)。
Example 1
The vehicle display device 1 of the present embodiment has the above-described configuration. Next, the control processing (driving support processing) in Example 1 of the dual-purpose display device 1 will be described with reference to the flowchart shown in FIG. To do.
For example, when the driver turns on the ignition switch and starts the engine, the main monitor 30 and various in-vehicle devices 20 are powered on, and the main monitor 30 starts displaying guidance information to the driver. It will be in the state which accept | permits operation by a driver | operator (step S1).

そして、左電子ミラーモニタ16には、左サイドカメラ11により撮像した車両左後方画像P1が表示される(ステップS2)。この車両左後方画像P1は、車両走行中においては、例えば、図4(a)に示すように、フロントウインドウ越しに見える景色の流れ(オプティカルフロー200a(図2参照))とは、逆方向に車両後方の風景が流れる動画像として左電子ミラーモニタ16に表示される。   The left electronic mirror monitor 16 displays the vehicle left rear image P1 captured by the left side camera 11 (step S2). For example, as shown in FIG. 4A, the vehicle left rear image P1 is in a direction opposite to the flow of the scenery seen through the front window (optical flow 200a (see FIG. 2)). It is displayed on the left electronic mirror monitor 16 as a moving image in which the scenery behind the vehicle flows.

なお、左電子ミラーモニタ16は、運転者がイグニションスイッチをON状態にしてから作動するに限らず、運転者がシフトレバー52を「D」モードや「R」モードに操作する、或いはアクセルペダルを踏み込むなど、自車両が動き出すことを検出した際に表示を開始してもよい。   The left electronic mirror monitor 16 is not limited to the operation after the driver turns on the ignition switch, but the driver operates the shift lever 52 in the “D” mode or the “R” mode, or the accelerator pedal is operated. The display may be started when it is detected that the host vehicle starts to move, such as when it is stepped on.

Eメール送受信装置21がメールを受信した場合、メール受信検出部113がその旨を検出し(ステップS3)、メール受信検出信号がECU40に送信される。ECU40がこの信号を受信することにより、判定部43による判定を行う。
具体的には、判定部43は、左ウインカON状態検出部15により左ウインカスイッチのON状態が検出されていない場合は「劣化表示可」であると判定する(ステップS4:Yes)。
When the e-mail transmission / reception device 21 receives a mail, the mail reception detection unit 113 detects that (step S3), and a mail reception detection signal is transmitted to the ECU 40. When the ECU 40 receives this signal, the determination by the determination unit 43 is performed.
Specifically, the determination unit 43 determines that “degradation display is possible” when the left turn signal ON state detection unit 15 does not detect the ON state of the left turn signal switch (step S4: Yes).

一方、判定部43は、左ウインカスイッチがON状態である間は、「劣化表示不可」であると判定する(ステップS4:No)。   On the other hand, the determination unit 43 determines that “degradation display is not possible” while the left turn signal switch is in the ON state (step S4: No).

そして、このように判定部43により「劣化表示不可」であると判定した場合にも、自車両が左折や左側への車線変更が完了するなどして左ウインカスイッチのON状態が解除された際には、判定部43は「劣化表示可」であると判定する(ステップS4:Yes)。   Even when the determination unit 43 determines that “degradation display is not possible” as described above, when the left turn signal switch is released from the ON state because the vehicle has made a left turn or lane change to the left side, etc. The determination unit 43 determines that “degradation display is possible” (step S4: Yes).

このように、ステップ4において「劣化表示可」であるとの判定がされると、図4(a),(b)に示すように、電子ミラー画像劣化表示処理部44は、左電子ミラーモニタ16に表示される動画像としての車両左後方画像P1中の運転者に目につき易い風景が流れる領域、すなわち、動的フロー成分抽出部442で動的フロー成分Dとして抽出された領域のオプティカルフロー200aを劣化表示させる(ステップS5)。   As described above, when it is determined in step 4 that “degradation display is possible”, as shown in FIGS. 4A and 4B, the electronic mirror image degradation display processing unit 44 displays the left electronic mirror monitor. 16, an area in which a landscape that is easily noticeable to the driver in the vehicle left rear image P <b> 1 as a moving image displayed as a moving image, that is, an optical flow of an area extracted as the dynamic flow component D by the dynamic flow component extraction unit 442. 200a is displayed in a degraded manner (step S5).

具体的に、図4(a)に示すように、車両左後方画像P1には、例えば、自車両Caの左側後部と、路面Rと後方車両Cb、植木や電柱などの左後方風景Lが表示されているが、これらのうち、路面Rや周囲の風景Lは、自車両Caが停車している場合には静止物体であるが、自車両Caが走行している場合には自車両Caの走行に伴って、風景の流れ(オプティカルフロー200a)が発生し、動的フロー成分Dとなる(図4(a)中の矢印で示したオプティカルフロー200a参照)。   Specifically, as shown in FIG. 4A, the vehicle left rear image P1 displays, for example, a left rear portion of the host vehicle Ca, a road surface R and a rear vehicle Cb, and a left rear landscape L such as a plant or a telephone pole. Of these, the road surface R and the surrounding landscape L are stationary objects when the host vehicle Ca is stopped, but the host vehicle Ca is traveling when the host vehicle Ca is traveling. As the vehicle travels, a landscape flow (optical flow 200a) is generated and becomes a dynamic flow component D (see the optical flow 200a indicated by the arrow in FIG. 4A).

しかも、これら路面R(路面上の凹凸)や周囲の風景L(植木や電柱など)の図2に示すようなオプティカルフロー200aは、図2に示すようなフロントガラス58越しに見える風景の流れ(オプティカルフロー200b)とは逆方向に流れるように左電子ミラーモニタ16画面に表示されることから、運転者がメインモニタ30へ視線移動する際に目を奪われ易くなる。このため、動的フロー成分除去処理部443により車両左後方画像P1中の動的フロー成分Dとして抽出された領域のオプティカルフロー200aを劣化表示させた劣化表示画像P2を左電子ミラーモニタ16画面に図4(b)に示すように表示する。
なお、オプティカルフロー200aを劣化表示させる具体的な表示態様としては、動的フロー成分Dとして抽出された領域をコマ送りして表示するなどを挙げることができる。
Moreover, the optical flow 200a as shown in FIG. 2 of the road surface R (unevenness on the road surface) and surrounding scenery L (plants, utility poles, etc.) is a flow of scenery that can be seen through the windshield 58 as shown in FIG. Since it is displayed on the screen of the left electronic mirror monitor 16 so as to flow in the opposite direction to the optical flow 200b), it is easy for the driver to take his eyes when moving his line of sight to the main monitor 30. For this reason, the degradation display image P2 in which the optical flow 200a in the region extracted as the dynamic flow component D in the vehicle left rear image P1 by the dynamic flow component removal processing unit 443 is degraded is displayed on the left electronic mirror monitor 16 screen. Displayed as shown in FIG.
As a specific display mode for displaying the optical flow 200a in a degraded manner, the area extracted as the dynamic flow component D can be displayed by frame advance.

一方、自車両Caと略同じ速度で走行している後方車両Cbは、そのオプティカルフローが小さいため、静的フロー成分として動的フロー成分抽出部442に抽出されない。車両左後方画像P1中のこのような静的フロー成分については、図4(b)に示すような劣化表示画像P2において劣化表示させずに、通常どおり表示し、メインモニタ30を視認する際においても劣化表示画像P2を通じて運転者に後方車両の存在を認識させることができる。   On the other hand, the rear vehicle Cb traveling at substantially the same speed as the host vehicle Ca has a small optical flow, and thus is not extracted as a static flow component by the dynamic flow component extraction unit 442. Such a static flow component in the vehicle left rear image P1 is displayed as usual without being deteriorated in the deterioration display image P2 as shown in FIG. 4B, and when the main monitor 30 is visually recognized. In addition, the driver can be made aware of the presence of the rear vehicle through the deterioration display image P2.

その後、メインモニタ30には、運転者によって視認可能に受信メールの概要として送信者、件名、受信日時が表示されるとともに、必要に応じて本文内容が表示される(ステップS6)。
なお、メールを受信した旨を運転者に報知する着信音は、Eメール送受信装置21がメールを受信した瞬間に報知されるに限らず、適宜、左電子ミラーモニタ16に表示される車両左後方画像を劣化表示した時点で報知する構成としてもよい。
Thereafter, on the main monitor 30, the sender, the subject, and the reception date and time are displayed as an outline of the received mail so as to be visually recognized by the driver, and the text content is displayed as necessary (step S6).
Note that the ringing tone for notifying the driver that the e-mail has been received is not limited to the e-mail transmission / reception device 21 at the moment when the e-mail transmission / reception device 21 receives the e-mail. It is good also as a structure which alert | reports at the time of displaying a deterioration image.

上述したように劣化表示を開始した後、受信メールの確認に必要な時間として予め設定したメール受信確認タスクに対応する所定時間が経過するまで劣化表示画像P2が継続表示される(ステップS7:No)。
一方、上記所定時間が経過したことを計時部14により時間計測完了信号をECU40が検出することにより、判定部43は、劣化表示画像P2による劣化表示を「解除可」と判定し(ステップS7:Yes)、電子ミラー画像劣化表示解除処理部45によって劣化表示画像P2を通常どおりの表示に復元させて(ステップS8)、本処理を終了する。
After the deterioration display is started as described above, the deterioration display image P2 is continuously displayed until a predetermined time corresponding to a mail reception confirmation task set in advance as a time necessary for confirmation of the received mail has passed (step S7: No). ).
On the other hand, when the ECU 40 detects a time measurement completion signal by the time measuring unit 14 that the predetermined time has elapsed, the determination unit 43 determines that the deterioration display by the deterioration display image P2 is “can be released” (step S7: Yes), the degraded display image P2 is restored to the normal display by the electronic mirror image degradation display cancellation processing unit 45 (step S8), and this process is terminated.

なお、所定時間は、運転者がメインモニタ30に目線を向けて送信者、件名、受信日時等の受信メールの概要を確認するのに必要と見込まれる例えば、10秒から30秒程度の時間に設定することができる。或いは本文内容を含めた受信メールの全体内容の確認に必要と見込まれる時間としてさらに長い30秒から1分程度の時間に設定してもよい。また、この時間は、運転者により任意の時間に設定可能としてもよい。   Note that the predetermined time is, for example, about 10 to 30 seconds, which is expected to be necessary for the driver to look at the main monitor 30 and check the outline of the received mail such as the sender, subject, reception date and time. Can be set. Alternatively, a longer period of time from 30 seconds to 1 minute may be set as the time expected to be necessary for checking the entire contents of the received mail including the text content. Further, this time may be set to an arbitrary time by the driver.

(実施例2)
続いて本実施形態の車両用表示装置1の実施例2における制御処理について図5に示すフローチャート、及び図6を参照しながら説明する。
但し、図5は車両用表示装置1の実施例2の制御処理を示すフローチャートであり、図6はメインモニタ30を操作する運転者を運転者撮像カメラ12により撮像する車室前側の様子を模式的に示した平面図である。
(Example 2)
Next, a control process in Example 2 of the vehicle display device 1 of the present embodiment will be described with reference to the flowchart shown in FIG. 5 and FIG.
However, FIG. 5 is a flowchart showing the control processing of the vehicle display device 1 according to the second embodiment, and FIG. 6 is a schematic view of the front side of the passenger compartment where the driver operating the main monitor 30 is imaged by the driver imaging camera 12. FIG.

運転者が例えば、イグニションスイッチをON状態にしてエンジンを始動させることにより、メインモニタ30や各種車載機器20の電源が立ち上がり、メインモニタ30は、運転者への案内情報の表示を開始するとともに、運転者による操作を許容する状態となる(ステップT1)。   For example, when the driver turns on the ignition switch and starts the engine, the main monitor 30 and various in-vehicle devices 20 are powered on, and the main monitor 30 starts displaying guidance information to the driver. It will be in the state which accept | permits operation by a driver | operator (step T1).

そして、左電子ミラーモニタ16には、左サイドカメラ11により撮像した車両左後方画像P1が表示される(ステップT2)。   Then, the left electronic mirror monitor 16 displays a vehicle left rear image P1 captured by the left side camera 11 (step T2).

それとともに、運転者撮像カメラ12が作動し、図6に示すように、運転車の撮像を開始する(ステップT3)。   At the same time, the driver imaging camera 12 operates to start imaging of the driving vehicle as shown in FIG. 6 (step T3).

判定部43は、運転者がメインモニタ30を視認する意図があると判定されるまで運転者撮像カメラ12で撮像した画像とROMに記憶されたメインモニタ視認姿勢パターンの照合を行う(ステップT4:No)。   The determination unit 43 collates the image captured by the driver imaging camera 12 with the main monitor viewing posture pattern stored in the ROM until it is determined that the driver intends to view the main monitor 30 (step T4: No).

例えば、図6中仮想線で示すように、運転者が空調装置23(エアコン)の温度調整をするために、メインモニタ30の方に頭を向けたり、タッチパネル式のメインモニタ30に表示される温度調整スイッチに向けて左手を伸ばすなどの姿勢変更が運転者撮像カメラ12により検出された場合(ステップT4:Yes)、判定部43は、その姿勢をROMに記憶されたメインモニタ視認姿勢パターンを基に運転者がメインモニタ30を視認する意図があると判定する。   For example, as shown by a virtual line in FIG. 6, the driver turns his head toward the main monitor 30 or displays it on the touch panel type main monitor 30 in order to adjust the temperature of the air conditioner 23 (air conditioner). When a posture change such as extending the left hand toward the temperature adjustment switch is detected by the driver imaging camera 12 (step T4: Yes), the determination unit 43 uses the main monitor visualizing posture pattern stored in the ROM as the posture. Based on this, it is determined that the driver intends to visually recognize the main monitor 30.

続くステップT5において、判定部43は、運転者がメインモニタ30を視認する意図があると判定した場合、実施例1のステップS4と同様に、左ウインカスイッチのON状態が検出されているか否かに応じて、車両左後方画像P1を劣化表示するか否かの判定をする。   In subsequent step T5, when the determination unit 43 determines that the driver intends to view the main monitor 30, whether or not the ON state of the left turn signal switch is detected as in step S4 of the first embodiment. Accordingly, it is determined whether or not the vehicle left rear image P1 is displayed in a degraded manner.

具体的には、判定部43は、左ウインカスイッチのON状態が検出されている間は「劣化表示不可」であると判定するが(ステップT5:No)、左ウインカスイッチのON状態が検出されていない場合は「劣化表示可」であると判定する(ステップT5:Yes)。   Specifically, the determination unit 43 determines that “degradation display is impossible” while the ON state of the left turn signal switch is detected (step T5: No), but the ON state of the left turn signal switch is detected. If not, it is determined that “degradation display is possible” (step T5: Yes).

ステップT5において、判定部43により「劣化表示可」であると判定された場合、電子ミラー画像劣化表示処理部44により左電子ミラーモニタ16に表示される車両左後方画像P1は劣化表示される(ステップT6)。なお、このステップT6の劣化表示処理は、図4(a),(b)を参照して説明した実施例1のステップS5に対応するため、その説明は省略する。   In step T5, when the determination unit 43 determines that “degradation display is possible”, the vehicle left rear image P1 displayed on the left electronic mirror monitor 16 by the electronic mirror image deterioration display processing unit 44 is displayed in a degraded manner ( Step T6). Note that the deterioration display process in step T6 corresponds to step S5 of the first embodiment described with reference to FIGS. 4A and 4B, and thus description thereof is omitted.

そして、例えば、運転者が空調装置23の温度調整スイッチを押圧するなどして温度調整するために運転者がメインモニタ30を視認する等の姿勢である間は、劣化表示画像P2を継続表示し(ステップT7:No)、空調装置23の温度調整完了後、ステアリングホイール55を握り、前方を向いた走行姿勢に戻ったことを運転者撮像カメラ12で検出した場合(ステップT7:Yes)、電子ミラー画像劣化表示解除処理部45によって劣化表示画像P2の劣化表示を解除し(ステップT8)、車両左後方画像P1のように通常どおり表示して本処理を終了する。   For example, the deterioration display image P <b> 2 is continuously displayed while the driver is viewing the main monitor 30 in order to adjust the temperature by pressing the temperature adjustment switch of the air conditioner 23. (Step T7: No), after completion of temperature adjustment of the air conditioner 23, when the driver imaging camera 12 detects that the steering wheel 55 has been gripped and returned to the traveling posture facing forward (Step T7: Yes), the electronic The degradation display of the degradation display image P2 is canceled by the mirror image degradation display cancellation processing unit 45 (step T8), and the normal display is performed as in the vehicle left rear image P1, and this processing is terminated.

以上、上述した本実施形態の車両用表示装置1は、表示部と操作部との双方の機能を有するメインモニタ30をインストルメントパネル51の車幅方向中央部に備えたセンターコンソール50と、自車両の後方を撮影する撮像手段としての左サイドカメラ11と、インストルメントパネル51の車幅方向におけるセンターコンソール50、又は該センターコンソール50とステアリングホイール55の間に設けられ、左サイドカメラ11により撮影した車両左後方画像P1を表示する左電子ミラーモニタ16とを備えた車両用表示装置であって、運転者がセンターコンソール50を視認すると推認される推認情報としてメール受信検出信号を検出する推認情報取得手段としてのメール受信検出部113、及び推認情報として運転者画像を取得する推認情報取得手段(視認動作検出手段)としての運転者撮像カメラ12と、これらメール受信検出信号、又は運転者画像に基づいて車両左後方画像P1を劣化表示させるか否かを判定する判定手段としての判定部43と、判定部43の判定結果に基づいて車両左後方画像P1の視認性を低下させる劣化表示手段としての電子ミラー画像劣化表示処理部44とを備えたものである(図1参照)。   As described above, the vehicle display device 1 according to the present embodiment described above includes the center console 50 having the main monitor 30 having the functions of both the display unit and the operation unit at the center in the vehicle width direction of the instrument panel 51, The left side camera 11 as an imaging means for photographing the rear of the vehicle and the center console 50 in the vehicle width direction of the instrument panel 51 or between the center console 50 and the steering wheel 55 and photographed by the left side camera 11 The display device for vehicles provided with the left electronic mirror monitor 16 which displays the vehicle left back image P1, Comprising: Detection information which detects a mail reception detection signal as prediction information estimated that a driver | operator visually recognizes the center console 50 Mail reception detection unit 113 as an acquisition means, and a driver image is acquired as inference information And a determination unit that determines whether or not the vehicle left rear image P1 is displayed in a degraded manner based on the driver imaging camera 12 as a recognition information acquisition unit (a visual recognition operation detection unit) and the mail reception detection signal or the driver image. And an electronic mirror image degradation display processing unit 44 as degradation display means for reducing the visibility of the vehicle left rear image P1 based on the determination result of the determination unit 43 (FIG. 1). reference).

上記構成によれば、例えば実施例1のように、Eメール送受信装置21がEメールを受信した際には、音声等で運転者にその旨が報知されるため、運転者は、運転者がメールの内容を確認するために、そのメール内容が表示されるメインモニタ画面を視認することが推認される。このため、メール受信検出部113によってEメールを受信したことを検出したとき、判定部43は、推認情報に基づいて、安全性等の観点で特に問題がなければ車両左後方画像P1を劣化表示させる判定を行うことで、電子ミラー画像劣化表示処理部44によって車両左後方画像P1の視認性が低下するように劣化表示させることができる。   According to the above configuration, for example, as in the first embodiment, when the e-mail transmitting / receiving device 21 receives an e-mail, the driver is notified by voice or the like. In order to confirm the contents of the mail, it is assumed that the main monitor screen on which the mail contents are displayed is visually recognized. For this reason, when the e-mail is detected by the e-mail reception detection unit 113, the determination unit 43 displays the vehicle left rear image P1 in a degraded manner based on the inference information if there is no particular problem in terms of safety and the like. By performing the determination, the electronic mirror image degradation display processing unit 44 can perform the degradation display so that the visibility of the vehicle left rear image P1 is lowered.

また、上述した実施例2のように、運転者がセンターコンソール50に設けられたメインモニタ30の表示内容を確認したり、操作をする際に、車両前方とメインモニタ30との間で視線を移動させる。このような視線移動動作を運転者撮像カメラ12によって検出したとき、判定部43は、運転者撮像画像の情報に基づいて安全性等の観点で特に問題がなければ車両左後方画像P1を劣化表示させる判定を行うことで、電子ミラー画像劣化表示処理部44によって車両左後方画像P1の視認性が低下するように劣化表示させることができる。   Further, as in the second embodiment described above, when the driver checks the display content of the main monitor 30 provided on the center console 50 or operates the driver, he / she looks between the front of the vehicle and the main monitor 30. Move. When such a line-of-sight movement operation is detected by the driver imaging camera 12, the determination unit 43 displays the vehicle left rear image P1 in a degraded manner if there is no particular problem in terms of safety or the like based on the information of the driver captured image. By performing the determination, the electronic mirror image degradation display processing unit 44 can perform the degradation display so that the visibility of the vehicle left rear image P1 is lowered.

このように、運転者がセンターコンソール50を視認することを推認して左電子ミラーモニタ16に表示されている車両左後方画像P1を劣化表示させることで、該画像に視線が吸い寄せられることを抑制し、センターコンソール50に設けたメインモニタ30に対して表示内容の確認や操作を素早く行うことができ、安全な運転を確保することができる。   In this way, it is assumed that the driver visually recognizes the center console 50 and the vehicle left rear image P1 displayed on the left electronic mirror monitor 16 is displayed in a degraded manner, thereby suppressing the line of sight from being sucked into the image. In addition, the display content can be quickly confirmed and operated on the main monitor 30 provided in the center console 50, and safe operation can be ensured.

さらに、運転者は、車両前方とこのメインモニタ30との間で視線移動する度に、左電子ミラーモニタ16に表示されている動画像を目障りに感じることがなく、運転者は運転に集中することができ、快適に運転することができる。   Furthermore, every time the driver moves his line of sight between the front of the vehicle and the main monitor 30, the driver does not feel uncomfortable with the moving image displayed on the left electronic mirror monitor 16, and the driver concentrates on driving. Can drive comfortably.

一方、メインモニタ30へ視線移動する際であっても、右左折時や車線変更時など、左電子ミラーモニタ16により、車両後方の状況を確認する必要性がある際には、左電子ミラーモニタ16に表示された車両左後方画像P1を劣化表示させずに、車両後方の景色を通常通り表示するため、安全性を確保することができる。   On the other hand, even when the line of sight is moved to the main monitor 30, when it is necessary to check the situation behind the vehicle by the left electronic mirror monitor 16, such as when turning right or left or changing lanes, the left electronic mirror monitor Since the vehicle rear left image P1 displayed in 16 is displayed in a normal manner without the deterioration display of the vehicle left rear image P1, the safety can be ensured.

この発明の態様によれば、劣化表示を開始して所定時間経過後に、車両左後方画像P1を劣化表示させた劣化表示画像P2を復元表示させる復元表示手段としての電子ミラー画像劣化表示解除処理部45を備えたものである(図1参照)。   According to the aspect of the present invention, the electronic mirror image deterioration display canceling processing unit as the restoration display means for restoring and displaying the deterioration display image P2 in which the deterioration display of the vehicle left rear image P1 is displayed after a predetermined time has elapsed after starting the deterioration display. 45 (see FIG. 1).

上記構成によれば、所定時間経過後に劣化表示画像P2が元の状態で表示されるため、運転者がメインモニタ30において表示内容を確認したり、操作が完了し、該メインモニタ30から車両前方へ視線を戻す度に、意識して劣化表示画像P2の表示を復元する操作を行う必要がないため、進路変更や車線変更など、安全性を優先する観点で左電子ミラーモニタ16の画面を確認する必要がある場合には、復元された車両左後方画像P1によって自車両の後方の状況を確実に確認することができる。   According to the above configuration, the deterioration display image P2 is displayed in the original state after a predetermined time has elapsed, so that the driver confirms the display content on the main monitor 30 or completes the operation. Since it is not necessary to consciously restore the display of the degraded display image P2 every time the line of sight is returned to the camera, the screen of the left electronic mirror monitor 16 is confirmed from the viewpoint of giving priority to safety, such as changing the course or changing the lane. When it is necessary to do so, the situation behind the host vehicle can be reliably confirmed by the restored vehicle left rear image P1.

またこの発明の態様によれば、判定部43は、左ウインカがON状態になったことを左ウインカON検出部15により検出した場合、車両左後方画像P1を劣化表示させない判定をする構成としたものである(図1参照)。   According to the aspect of the present invention, the determination unit 43 is configured to determine that the vehicle left rear image P1 is not deteriorated when the left turn signal ON detection unit 15 detects that the left turn signal is turned on. (See FIG. 1).

上記構成によれば、左方向へ進路変更や車線変更する際には、運転者は、ウインカレバーを上方に傾動させて左ウインカをON状態にしている間は、たとえ運転者がメインモニタ30側へ視線移動する場合であっても、車両左後方画像P1を劣化表示させないことで、運転者は、左電子ミラーモニタ16に表示される車両左後方画像P1を確実に目視しながら安全に進路変更や車線変更することができる。   According to the above configuration, when changing the course or lane in the left direction, the driver tilts the turn signal lever upward to turn the left turn signal on. Even if the line of sight is moved, the driver can safely change the course while reliably viewing the left rear vehicle image P1 displayed on the left electronic mirror monitor 16 by not displaying the left rear vehicle image P1 in a degraded manner. And can change lanes.

またこの発明の態様によれば、電子ミラー画像劣化表示処理部44は、左サイドカメラ11で異なる時間に撮像した複数の車両左後方画像P1に基づいて、オプティカルフロー200aを算出する算出手段としてのオプティカルフロー算出部441と、オプティカルフローの大きさを基に動的フロー成分Dと静的フロー成分とを有する車両左後方画像P1中から動的フロー成分Dを抽出する動的フロー成分抽出手段としての動的フロー成分抽出部442と、車両左後方画像P1中から動的フロー成分Dを除去して劣化表示する動的フロー成分除去手段としての動的フロー成分除去処理部443を備えたものである(図1参照)。   Further, according to the aspect of the present invention, the electronic mirror image deterioration display processing unit 44 serves as a calculation unit that calculates the optical flow 200a based on the plurality of vehicle left rear images P1 captured at different times by the left side camera 11. As an optical flow calculation unit 441 and dynamic flow component extraction means for extracting the dynamic flow component D from the vehicle left rear image P1 having the dynamic flow component D and the static flow component based on the magnitude of the optical flow. Dynamic flow component extraction unit 442 and a dynamic flow component removal processing unit 443 as dynamic flow component removal means for removing and displaying the dynamic flow component D from the vehicle left rear image P1. Yes (see FIG. 1).

上記構成によれば、電子ミラー画像劣化表示処理部44によって、左電子ミラーモニタ16に表示されている車両左後方画像P1中における動的フロー成分Dのみ、すなわち、車両左後方画像P1の中でも運転者が目を奪われ易いオプティカルフローが大きい領域のみを劣化表示することができるため、例えば、運転者がメインモニタ30に視線移動する際に、左電子ミラーモニタ16の映像に視線が吸い寄せられることなくメインモニタ30に対して表示内容の確認や操作を素早く行うことができる。   According to the above configuration, only the dynamic flow component D in the vehicle left rear image P1 displayed on the left electronic mirror monitor 16 by the electronic mirror image degradation display processing unit 44, that is, driving in the vehicle left rear image P1. For example, when the driver moves his / her line of sight to the main monitor 30, the line of sight is attracted to the video image of the left electronic mirror monitor 16 because the driver can display only a region where the optical flow is large. In addition, it is possible to quickly confirm and operate the display contents on the main monitor 30.

一方で、車両左後方画像P1の中でも自車両Caに近い速度で走行している後方車両Cbのような静的フロー成分については劣化表示せずに通常どおり表示するため、運転者は、たとえ車両左後方画像P1を劣化表示している間であっても後方車両Cbの存在を確実に認識することができ、安全性を確保することができる。   On the other hand, since the static flow component such as the rear vehicle Cb traveling at a speed close to the own vehicle Ca in the vehicle left rear image P1 is displayed as usual without being deteriorated, the driver may Even during the deterioration display of the left rear image P1, the existence of the rear vehicle Cb can be reliably recognized, and safety can be ensured.

この発明の構成と、上述の実施例との対応において、この発明の表示部と操作部は、この実施形態のセンターコンソール50に設けたメインモニタ30に対応し、以下、同様に、
撮像手段は、左サイドカメラ11に対応し、
車両後方画像は、車両左後方画像P1に対応し、
電子ミラーモニタは、左電子ミラーモニタ16に対応し、
推認情報は、メール受信検出信号、又は運転者画像に対応し、
推認情報取得手段は、メール受信検出部113、又は運転者撮像カメラ12に対応し、
判定手段は、判定部43に対応し、
劣化表示手段は、電子ミラー画像劣化表示処理部44に対応し、
復元表示手段は、電子ミラー画像劣化表示解除処理部45に対応し、
車幅方向における前記センターコンソール側の車両側方への方向は、左方向に対応し、
算出手段は、オプティカルフロー算出部441に対応し、
動的フロー成分抽出手段は、動的フロー成分抽出部442に対応し、
動的フロー成分除去手段は、動的フロー成分除去処理部443
車両後方画像縮小化手段は、後述する縮小表示処理部450に対応するも、この発明は、上述の実施例の構成のみに限定されるものではない。
In the correspondence between the configuration of the present invention and the above-described embodiment, the display unit and the operation unit of the present invention correspond to the main monitor 30 provided in the center console 50 of the present embodiment.
The imaging means corresponds to the left side camera 11,
The vehicle rear image corresponds to the vehicle left rear image P1,
The electronic mirror monitor corresponds to the left electronic mirror monitor 16,
The inference information corresponds to the email reception detection signal or the driver image,
The inference information acquisition means corresponds to the mail reception detection unit 113 or the driver imaging camera 12,
The determination means corresponds to the determination unit 43,
The deterioration display means corresponds to the electronic mirror image deterioration display processing unit 44,
The restoration display means corresponds to the electronic mirror image degradation display release processing unit 45,
The direction toward the vehicle side of the center console side in the vehicle width direction corresponds to the left direction,
The calculation means corresponds to the optical flow calculation unit 441,
The dynamic flow component extraction means corresponds to the dynamic flow component extraction unit 442,
The dynamic flow component removal means includes a dynamic flow component removal processing unit 443.
The vehicle rear image reduction means corresponds to a reduced display processing unit 450 described later, but the present invention is not limited to the configuration of the above-described embodiment.

例えば、他の実施形態に係る劣化表示手段として、左電子ミラーモニタ16の画面に対して縮小表示処理する縮小表示処理部450を図1中において仮想線のブロックで示すように電子ミラー画像劣化表示処理部44に備えてもよい。
縮小表示処理部450は、図7に示すように、左電子ミラーモニタ16の画面に対して車両左後方画像P1を縮小表示させるとともに、この縮小表示した劣化表示画像としての縮小車両左後方画像P3を左電子ミラーモニタ16の画面の車幅方向の中央部に対してメインモニタ30の有する側と反対側(ステアリングホイール55側)の位置に表示さている。
なお、図7は、他の劣化表示処理として縮小表示処理を行った後の左後方画像を示す模式図である。
For example, as a deterioration display unit according to another embodiment, a reduced display processing unit 450 that performs a reduction display process on the screen of the left electronic mirror monitor 16 is displayed as an electronic mirror image deterioration display as indicated by a virtual line block in FIG. The processing unit 44 may be provided.
As shown in FIG. 7, the reduced display processing unit 450 reduces the vehicle left rear image P1 on the screen of the left electronic mirror monitor 16, and reduces the vehicle left rear image P3 as a reduced display image of the reduced display. Is displayed at a position on the opposite side (the steering wheel 55 side) of the main monitor 30 with respect to the central portion of the screen of the left electronic mirror monitor 16 in the vehicle width direction.
FIG. 7 is a schematic diagram showing a left rear image after performing a reduced display process as another deterioration display process.

このように、縮小表示処理部450によって、左電子ミラーモニタ16の画面に表示される車両後方画像P1を該画面サイズに対して縮小表示することができるため、例えば、運転者がセンターコンソール50に設けたメインモニタ30に視線移動する際に、左電子ミラーモニタ16の映像に視線が吸い寄せられることなくメインモニタ30の表示内容の確認等を素早く行うことができる。   As described above, the reduced display processing unit 450 can reduce the vehicle rear image P1 displayed on the screen of the left electronic mirror monitor 16 with respect to the screen size. When moving the line of sight to the main monitor 30 provided, it is possible to quickly confirm the display content of the main monitor 30 without the line of sight being drawn into the image of the left electronic mirror monitor 16.

一方で、縮小車両後方画像P3を、左電子ミラーモニタ16の画面の車幅方向において、センターコンソール50の有する側と反対側、すなわち車両右側に表示したため、運転者は、たとえ車両後方画像P1を劣化表示している間であっても縮小車両後方画像P3を意識的に目視すれば、その内容を認識することができ、安全性を確保することができる。   On the other hand, the reduced vehicle rear image P3 is displayed on the side opposite to the side having the center console 50 in the vehicle width direction of the screen of the left electronic mirror monitor 16, that is, on the right side of the vehicle. Even while the deterioration display is being performed, if the reduced vehicle rear image P3 is consciously viewed, the contents can be recognized and safety can be ensured.

なお、車両左後方画像P1は、運転者の視線が引き寄せられることなく、しかも注視すれば後方車両の存在を確認できる程度の倍率であれば画面の大きさに対して任意の倍率で縮小表示することができ、また、この縮小率は、運転者によって任意に設定可能としてもよい。   Note that the vehicle left rear image P1 is displayed at a reduced magnification with respect to the size of the screen as long as the driver's line of sight is not attracted and the magnification is such that the presence of the rear vehicle can be confirmed by gazing. This reduction rate may be arbitrarily set by the driver.

また、さらに他の実施形態に係る劣化表示処理部として、図8に示すように、左電子ミラーモニタ16の画面に対してぼかし表示してもよい。
図8は、他の劣化表示処理としてぼかし処理を行った後の劣化表示画像P4を示す模式図である。なお、図8中ドットで示した領域はぼかし処理を行った領域を示すものとする。
Further, as a deterioration display processing unit according to still another embodiment, as shown in FIG. 8, the display may be blurred on the screen of the left electronic mirror monitor 16.
FIG. 8 is a schematic diagram showing a deteriorated display image P4 after performing a blurring process as another deteriorated display process. In addition, the area | region shown with the dot in FIG. 8 shall show the area | region which performed the blurring process.

ぼかし処理(モザイク処理)は、公知の原理を適用して行うことができるが、例えば、画像を四角形の複数の領域に区分けし、それぞれの領域に含まれる複数の画素のうちの任意の1画素の濃度値にする、所定の領域に含まれる複数の画素の平均濃度値なるように処理する、或いは、画像中の隣り合う画素間の輝度差を減少させるように処理するなど任意の手法を採用することができる。   The blurring process (mosaic process) can be performed by applying a known principle. For example, an image is divided into a plurality of rectangular areas, and one arbitrary pixel among a plurality of pixels included in each area. Arbitrary methods such as processing to reduce the luminance difference between adjacent pixels in the image, or processing to obtain an average density value of a plurality of pixels included in a predetermined area, or adopting an arbitrary method can do.

なお、劣化表示画像P4は、画像全体に対してぼかし処理してもよいが、本実施例においては、図8に示すように、動的フロー成分抽出部442によって車両左後方画像P1中の動的フロー成分Dを抽出し、該動的フロー成分Dに対して、上述した動的フロー成分除去処理部443による動的フロー成分除去処理の一態様としてぼかし処理を行うことで劣化表示させている。   Note that the degradation display image P4 may be subjected to blurring processing on the entire image, but in this embodiment, as shown in FIG. 8, the dynamic flow component extraction unit 442 performs the motion in the vehicle left rear image P1. The dynamic flow component D is extracted, and the dynamic flow component D is displayed as degraded by performing blurring processing as one aspect of the dynamic flow component removal processing by the dynamic flow component removal processing unit 443 described above. .

その他にも、例えば、図9に示す劣化表示画像P5に示すように、車両左後方画像P1の全体の明度を下げて劣化表示させてもよい。このように、車両左後方画像P1を劣化表示させる手法は特に限定しない。   In addition, for example, as shown in a degradation display image P5 shown in FIG. 9, the overall brightness of the vehicle rear left image P1 may be lowered and displayed in a degraded manner. Thus, the method of displaying the vehicle left rear image P1 in a degraded manner is not particularly limited.

さらに、車両用表示装置1の他の実施形態として、車両用表示装置1には、図1中の符号17に示す劣化表示スイッチ、符号18に示す劣化解除スイッチを適宜、備えてもよい。劣化表示スイッチ17は運転者の押圧により、運転者の意志で車両左後方画像を強制的に劣化表示させるスイッチであり、劣化解除スイッチ18は、劣化表示された車両左後方画像の劣化表示を解除するスイッチである。   Furthermore, as another embodiment of the vehicular display device 1, the vehicular display device 1 may appropriately include a deterioration display switch indicated by reference numeral 17 in FIG. 1 and a deterioration release switch indicated by reference numeral 18. The deterioration display switch 17 is a switch that forcibly displays the vehicle left rear image at the driver's will by pressing of the driver, and the deterioration cancel switch 18 cancels the deterioration display of the vehicle left rear image that has been deteriorated. It is a switch to do.

また、車両用表示装置1の他の実施形態として、判定部43が車両左後方画像P1を劣化表示するか否かを判定するにあたって用いる情報は、メール受信検出部113、運転者撮像カメラ12、左ウインカON状態検出部15から取得した情報に限らず、他の検出部から取得した情報を用いてもよく、また、判定部43は、上述した判定条件を採用するに限らず、他の判定条件を採用してもよい。   Further, as another embodiment of the vehicle display device 1, information used when the determination unit 43 determines whether or not the vehicle left rear image P <b> 1 is displayed in a degraded manner includes the mail reception detection unit 113, the driver imaging camera 12, Not only the information acquired from the left turn signal ON state detection unit 15, but information acquired from other detection units may be used, and the determination unit 43 is not limited to adopting the above-described determination condition, and may perform other determinations. Conditions may be employed.

例えば、カーナビゲーション装置22に有する、人工衛星を利用して自車両の位置を測定するためのGPS(Global Positioning System)機能を用いて自車両が左折予定の交差点に所定距離以下に近付いたことを検出した場合には、左ウインカON状態検出部15によって左ウインカON状態検出信号を取得した場合と同様に、左電子ミラーモニタ16の車両左後方画像P1を劣化表示させないと判定するなど他の判定条件を採用してもよい。   For example, using the GPS (Global Positioning System) function of the car navigation device 22 for measuring the position of the vehicle using an artificial satellite, the vehicle has approached an intersection scheduled to turn left within a predetermined distance or less. When it is detected, as in the case where the left turn signal ON state detection signal is acquired by the left turn signal ON state detection unit 15, other determinations such as determining that the vehicle left rear image P1 of the left electronic mirror monitor 16 is not deteriorated and displayed are performed. Conditions may be employed.

また、他の実施形態として運転者検出手段として上述した運転者撮像カメラ12を採用する場合には、運転者の手や頭部の動きを撮像するに限らず、例えば、運転者の眼球(黒目)の動きを撮像して運転者が注視する方向を推認してもよく、運転者がメインモニタ30を視認することを推認可能な動作であれば撮像部位は特に限定しない。   In addition, when the above-described driver imaging camera 12 is employed as the driver detection unit as another embodiment, not only the movement of the driver's hand or head is imaged but, for example, the driver's eyeball (black eyes) ) To capture the direction in which the driver is gazing, and the region to be imaged is not particularly limited as long as the driver can recognize that the driver visually recognizes the main monitor 30.

また、運転者動作検出手段としては、運転者撮像カメラ12に限らず、例えば、運転者までの距離を計測することにより運転者の動きを検出する近接センサ等を用いてもよい。
なお、本実施形態の車両用表示装置1は、車両が右ハンドル車であるため、左側に備えた機器について適用したが、左ハンドル車である場合には左側に備えた機器ではなく、右側に備えた機器に適用してもよい。また、本発明の車両用表示装置は、左右いずれか一方の機器に適用するに限らず、左右両側の機器に適用してもよい。
Further, the driver motion detection means is not limited to the driver imaging camera 12, and for example, a proximity sensor that detects a driver's movement by measuring a distance to the driver may be used.
In addition, since the vehicle is a right-hand drive vehicle, the vehicle display device 1 of the present embodiment is applied to a device provided on the left side. However, in the case of a left-hand drive vehicle, the vehicle display device 1 is not provided on the left side but on the right side. You may apply to the equipment provided. The vehicle display device of the present invention is not limited to being applied to either the left or right device, but may be applied to the left and right devices.

以上説明したように、本発明は、例えば、表示部と操作部との少なくとも一方をインストルメントパネルの車幅方向中央部に備えたセンターコンソールと、自車両の後方を撮影する撮像手段と、前記インストルメントパネルの車幅方向における、前記センターコンソール、又は、該センターコンソールとステアリングホイールとの間に設けられ、前記撮像手段により撮影した車両後方画像を表示する電子ミラーモニタとを備えた車両用表示装置について有用である。   As described above, the present invention provides, for example, a center console provided with at least one of the display unit and the operation unit in the center part in the vehicle width direction of the instrument panel, the imaging unit that captures the rear of the host vehicle, Vehicle display provided with the center console in the vehicle width direction of the instrument panel or an electronic mirror monitor provided between the center console and a steering wheel and displaying a vehicle rear image taken by the imaging means Useful for the device.

1…車両用表示装置
11…左サイドカメラ(撮像手段)
12…運転者撮像カメラ(推認情報取得手段)
15A…ウインカ装置
16…左電子ミラーモニタ(電子ミラーモニタ)
30…メインモニタ(表示部と操作部)
43…判定部(判定手段)
44…電子ミラー画像劣化表示処理部(劣化表示手段)
45…電子ミラー画像劣化表示解除処理部(復元表示手段)
51…インストルメントパネル
52…センターコンソール
55…ステアリングホイール
113…メール受信検出部(推認情報取得手段)
441…オプティカルフロー算出部(算出手段)
442…動的フロー成分抽出部(動的フロー成分抽出手段)
443…動的フロー成分除去処理部(動的フロー成分除去手段)
450…縮小表示処理部(車両後方画像縮小化手段)
D…動的フロー成分
P1…車両左後方画像(車両後方画像)
P2,P4,P5…劣化表示画像
P3…縮小車両左後方画像
DESCRIPTION OF SYMBOLS 1 ... Display apparatus 11 for vehicles ... Left side camera (imaging means)
12 ... Driver imaging camera (inference information acquisition means)
15A ... Blinker device 16 ... Left electronic mirror monitor (electronic mirror monitor)
30 ... Main monitor (display and operation unit)
43 ... determination part (determination means)
44 ... Electronic mirror image deterioration display processing section (deterioration display means)
45 ... Electronic mirror image degradation display cancellation processing unit (restoration display means)
51 ... Instrument panel 52 ... Center console 55 ... Steering wheel 113 ... Mail reception detection unit (prediction information acquisition means)
441 ... Optical flow calculation unit (calculation means)
442 ... Dynamic flow component extraction unit (dynamic flow component extraction means)
443 ... Dynamic flow component removal processing unit (dynamic flow component removal means)
450 ... Reduced display processing unit (vehicle rear image reduction means)
D ... Dynamic flow component P1 ... Vehicle left rear image (vehicle rear image)
P2, P4, P5 ... Deterioration display image P3 ... Reduced vehicle left rear image

Claims (5)

表示部と操作部との少なくとも一方をインストルメントパネルの車幅方向中央部に備えたセンターコンソールと、
自車両の後方を撮影する撮像手段と、
前記インストルメントパネルの車幅方向における、前記センターコンソール、又は、該センターコンソールとステアリングホイールとの間に設けられ、
前記撮像手段により撮影した車両後方画像を表示する電子ミラーモニタとを備えた車両用表示装置であって、
運転者が前記センターコンソールを視認すると推認される推認情報を取得する推認情報取得手段と、
前記推認情報に基づいて前記車両後方画像の視認性を劣化表示させるか否かを判定する判定手段と、
前記判定手段の判定結果に基づいて前記車両後方画像の視認性を低下させる劣化表示手段とを備えた
車両用表示装置。
A center console provided with at least one of the display unit and the operation unit in the center in the vehicle width direction of the instrument panel;
Imaging means for photographing the rear of the vehicle;
The center console in the vehicle width direction of the instrument panel, or provided between the center console and the steering wheel,
A vehicle display device comprising an electronic mirror monitor for displaying a vehicle rear image captured by the imaging means,
An inference information acquisition means for acquiring inference information inferred that the driver visually recognizes the center console;
Determining means for determining whether or not the visibility of the vehicle rear image is degraded based on the inference information;
A vehicle display device comprising deterioration display means for reducing visibility of the vehicle rear image based on a determination result of the determination means.
劣化表示を開始して所定時間経過後に、劣化表示させた劣化表示画像を復元表示させる復元表示手段を備えた
請求項1に記載の車両用表示装置。
The vehicle display device according to claim 1, further comprising a restoration display unit that restores and displays the degraded display image that has been degraded and displayed after a predetermined time has elapsed since the degradation display was started.
前記撮像手段は、車幅方向における運転席に対して前記センターコンソール側の車両側方から車両後方を撮像するように車幅方向における該助手席側の車両側方に配設され、
前記判定手段は、車幅方向における前記センターコンソール側の車両側方への方向を指示するウインカ装置をON状態にした場合、前記車両後方画像を劣化表示させない判定をする構成とした
請求項1、又は2に記載の車両用表示装置。
The imaging means is disposed on the side of the vehicle on the passenger side in the vehicle width direction so as to image the rear of the vehicle from the side of the vehicle on the center console side with respect to the driver seat in the vehicle width direction,
The determination unit is configured to determine that the vehicle rear image is not degraded when the turn signal device that indicates the direction of the center console side toward the vehicle side in the vehicle width direction is turned on. Or the display apparatus for vehicles of 2.
前記劣化表示手段は、前記撮像手段で異なる時間に撮像した複数の車両後方画像に基づいて、オプティカルフローを算出する算出手段と、
前記オプティカルフローを基に前記車両後方画像中から動的フロー成分を抽出する動的フロー成分抽出手段と、
前記車両後方画像中から前記動的フロー成分を除去して劣化表示する動的フロー成分除去手段とを備えた
請求項1乃至3のうちいずれかに記載の車両用表示装置。
The deterioration display means, a calculation means for calculating an optical flow based on a plurality of vehicle rear images taken at different times by the imaging means;
Dynamic flow component extraction means for extracting a dynamic flow component from the vehicle rear image based on the optical flow;
4. The vehicle display device according to claim 1, further comprising: a dynamic flow component removing unit that removes the dynamic flow component from the vehicle rear image and displays the deterioration. 5.
前記劣化表示手段は、前記電子ミラーモニタの画面に表示される前記車両後方画像を該画面サイズに対して縮小表示させて劣化表示させる車両後方画像縮小化手段であり、
前記車両後方画像縮小化手段により縮小表示させた縮小車両後方画像を、前記電子ミラーモニタの画面の車幅方向において、前記センターコンソールの有する側と反対側に表示した
請求項1乃至4のうちいずれかに記載の車両用表示装置。
The deterioration display means is a vehicle rear image reduction means for displaying the vehicle rear image displayed on the screen of the electronic mirror monitor in a reduced manner with respect to the screen size and displaying the deterioration.
5. The reduced vehicle rear image reduced and displayed by the vehicle rear image reduction means is displayed on the opposite side of the center console in the vehicle width direction of the screen of the electronic mirror monitor. The vehicle display device according to claim 1.
JP2015054270A 2015-03-18 2015-03-18 Vehicle display device Expired - Fee Related JP6197814B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015054270A JP6197814B2 (en) 2015-03-18 2015-03-18 Vehicle display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015054270A JP6197814B2 (en) 2015-03-18 2015-03-18 Vehicle display device

Publications (2)

Publication Number Publication Date
JP2016172526A true JP2016172526A (en) 2016-09-29
JP6197814B2 JP6197814B2 (en) 2017-09-20

Family

ID=57008506

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015054270A Expired - Fee Related JP6197814B2 (en) 2015-03-18 2015-03-18 Vehicle display device

Country Status (1)

Country Link
JP (1) JP6197814B2 (en)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018157403A (en) * 2017-03-17 2018-10-04 トヨタ自動車株式会社 On-vehicle display device, control method for on-vehicle display device, and control program for on-vehicle display device
WO2019026506A1 (en) * 2017-07-31 2019-02-07 シャープ株式会社 Control device, display system, control program, and recording medium
WO2019039406A1 (en) * 2017-08-25 2019-02-28 マツダ株式会社 Passenger compartment structure
JP2019038404A (en) * 2017-08-25 2019-03-14 マツダ株式会社 In-cabin structure
JP2019038405A (en) * 2017-08-25 2019-03-14 マツダ株式会社 In-cabin structure
KR20190029872A (en) * 2017-09-13 2019-03-21 현대자동차주식회사 Vehicle, and control method for the same
JP2019077302A (en) * 2017-10-24 2019-05-23 クラリオン株式会社 Display control device, display system, and display control method
JP2020083067A (en) * 2018-11-26 2020-06-04 本田技研工業株式会社 On-vehicle device
DE102021107847A1 (en) 2020-06-08 2021-12-09 Suzuki Motor Corporation IMAGE PROCESSING DEVICE FOR VEHICLE
JP7331731B2 (en) 2020-02-21 2023-08-23 トヨタ自動車株式会社 Vehicle electronic mirror system

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7057500B1 (en) * 2004-04-23 2006-06-06 Belloso Gregorio M Rear view monitoring system for motor vehicles
JP2013168063A (en) * 2012-02-16 2013-08-29 Fujitsu Ten Ltd Image processing device, image display system, and image processing method
JP2014229997A (en) * 2013-05-20 2014-12-08 日本精機株式会社 Display device for vehicle

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7057500B1 (en) * 2004-04-23 2006-06-06 Belloso Gregorio M Rear view monitoring system for motor vehicles
JP2013168063A (en) * 2012-02-16 2013-08-29 Fujitsu Ten Ltd Image processing device, image display system, and image processing method
JP2014229997A (en) * 2013-05-20 2014-12-08 日本精機株式会社 Display device for vehicle

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018157403A (en) * 2017-03-17 2018-10-04 トヨタ自動車株式会社 On-vehicle display device, control method for on-vehicle display device, and control program for on-vehicle display device
US10843628B2 (en) 2017-03-17 2020-11-24 Toyota Jidosha Kabushiki Kaisha Onboard display device, control method for onboard display device, and control program for onboard display device
WO2019026506A1 (en) * 2017-07-31 2019-02-07 シャープ株式会社 Control device, display system, control program, and recording medium
WO2019039406A1 (en) * 2017-08-25 2019-02-28 マツダ株式会社 Passenger compartment structure
JP2019038404A (en) * 2017-08-25 2019-03-14 マツダ株式会社 In-cabin structure
JP2019038405A (en) * 2017-08-25 2019-03-14 マツダ株式会社 In-cabin structure
CN111065538B (en) * 2017-08-25 2023-03-28 马自达汽车株式会社 Interior structure of vehicle
CN111065538A (en) * 2017-08-25 2020-04-24 马自达汽车株式会社 Interior structure of vehicle
US11465503B2 (en) 2017-08-25 2022-10-11 Mazda Motor Corporation Vehicle interior structure
KR20190029872A (en) * 2017-09-13 2019-03-21 현대자동차주식회사 Vehicle, and control method for the same
KR102403350B1 (en) * 2017-09-13 2022-06-02 현대자동차주식회사 Vehicle, and control method for the same
JP7063571B2 (en) 2017-10-24 2022-05-09 フォルシアクラリオン・エレクトロニクス株式会社 Display control device, display system and display control method
JP2019077302A (en) * 2017-10-24 2019-05-23 クラリオン株式会社 Display control device, display system, and display control method
JP7011568B2 (en) 2018-11-26 2022-01-26 本田技研工業株式会社 In-vehicle device
JP2020083067A (en) * 2018-11-26 2020-06-04 本田技研工業株式会社 On-vehicle device
JP7331731B2 (en) 2020-02-21 2023-08-23 トヨタ自動車株式会社 Vehicle electronic mirror system
DE102021107847A1 (en) 2020-06-08 2021-12-09 Suzuki Motor Corporation IMAGE PROCESSING DEVICE FOR VEHICLE

Also Published As

Publication number Publication date
JP6197814B2 (en) 2017-09-20

Similar Documents

Publication Publication Date Title
JP6197814B2 (en) Vehicle display device
EP2974909B1 (en) Periphery surveillance apparatus and program
US10166922B2 (en) On-vehicle image display device, on-vehicle image display method for vehicle, and on-vehicle image setting device
JP2010130646A (en) Vehicle periphery checking system
JP5092776B2 (en) Gaze direction detection device and gaze direction detection method
JP6410987B2 (en) Driving support device, driving support method, and driving support program
JP6264037B2 (en) Vehicle information display device and vehicle information display method
JP6072470B2 (en) In-vehicle imaging system
JP2016055801A (en) On-vehicle display device
JP5718080B2 (en) Vehicle periphery monitoring device
JP2018022958A (en) Vehicle display controller and vehicle monitor system
JP2018129732A (en) Vehicular video display device
US10596966B2 (en) Display device for vehicle and display method for vehicle
JP2010208359A (en) Display device for vehicle
JP2007290570A (en) Vehicular display device
CN111469777A (en) Vehicle display device
US10696231B2 (en) In-vehicle image display system and image processing method
JP2008162550A (en) External environment display device
JP2017125883A (en) Eyeglass information display device
WO2013114871A1 (en) Driving assistance device and driving assistance method
JP2004356731A (en) On-vehicle information providing apparatus
JP6649063B2 (en) Vehicle rear display device and display control device
JP2007017409A (en) Navigation system for vehicle
JPWO2020012992A1 (en) Vehicle display device
US20210009037A1 (en) Vehicle sighting device, and method of setting angle of view of imaging section of vehicle sighting device

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170118

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170131

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170316

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170725

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170807

R150 Certificate of patent or registration of utility model

Ref document number: 6197814

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees