JP2016172526A - Display device for vehicle - Google Patents
Display device for vehicle Download PDFInfo
- Publication number
- JP2016172526A JP2016172526A JP2015054270A JP2015054270A JP2016172526A JP 2016172526 A JP2016172526 A JP 2016172526A JP 2015054270 A JP2015054270 A JP 2015054270A JP 2015054270 A JP2015054270 A JP 2015054270A JP 2016172526 A JP2016172526 A JP 2016172526A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- display
- image
- driver
- rear image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000015556 catabolic process Effects 0.000 claims abstract description 34
- 238000006731 degradation reaction Methods 0.000 claims abstract description 34
- 230000006866 deterioration Effects 0.000 claims description 62
- 238000003384 imaging method Methods 0.000 claims description 50
- 230000003287 optical effect Effects 0.000 claims description 28
- 238000000605 extraction Methods 0.000 claims description 13
- 230000000593 degrading effect Effects 0.000 abstract 1
- 238000001514 detection method Methods 0.000 description 42
- 238000000034 method Methods 0.000 description 40
- 230000036544 posture Effects 0.000 description 18
- 230000033001 locomotion Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 230000005540 biological transmission Effects 0.000 description 9
- 230000003068 static effect Effects 0.000 description 6
- 210000003128 head Anatomy 0.000 description 5
- 210000001508 eye Anatomy 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007935 neutral effect Effects 0.000 description 2
- 230000009012 visual motion Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 235000021189 garnishes Nutrition 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Abstract
Description
この発明は、インストルメントパネル(ダッシュボード)の車幅方向中央部に表示部や操作部を備えたセンターコンソールと、自車両の後方を撮影する撮像手段と、該撮像手段により撮影した車両後方画像を表示する電子ミラーモニタとを備えた車両用表示装置に関する。 The present invention relates to a center console having a display unit and an operation unit at the center in the vehicle width direction of an instrument panel (dashboard), an imaging unit that captures the rear of the host vehicle, and a vehicle rear image captured by the imaging unit. The present invention relates to a display device for a vehicle including an electronic mirror monitor that displays the above.
車両用表示装置は、運転者が車両後方を確認するために、自車両に搭載された後方カメラ(撮像手段)によって撮像された画像を車室内に搭載されたモニタに表示し、運転者がドアサイドミラーやバックミラー等の代わりに、電子ミラーとして上記モニタを目視することにより、車両後方の様子を確認することができるものであり、このような車両用表示装置に関して、近年では、特許文献1、2に例示されるように、運転者が車両後方の様子を確認し易くするための技術が知られている。 The vehicle display device displays an image captured by a rear camera (imaging means) mounted on the host vehicle on a monitor mounted in the vehicle interior so that the driver can check the rear of the vehicle. The state behind the vehicle can be confirmed by observing the monitor as an electronic mirror instead of a side mirror, a rearview mirror, and the like. As illustrated in FIG. 2, a technique for making it easier for the driver to check the state behind the vehicle is known.
特許文献1は、電子ミラーの表示部に表示される映像が車両の右後方と左後方のいずれの映像であるかを直感的に分かり易くするために、電子ミラーの表示部を、運転者と撮像手段との位置関係に応じて運転者の正面位置から外した位置に配置させたものである。
In
特許文献2は、安全性の観点による重要度のレベルが上昇したとき、運転席の前方に配置されたパネル画面において例えば、左端側に表示された左後方画像を、該左端側から中央側へと移動させるなどして左後方の状況を運転者に素早く認識させるものである。 In Patent Document 2, when the level of importance increases from the viewpoint of safety, for example, a left rear image displayed on the left end side on the panel screen arranged in front of the driver's seat is displayed from the left end side to the center side. The driver can quickly recognize the situation on the left rear.
一方、運転席と助手席との間に配置されたセンターコンソールのインストルメントパネルには、カーナビゲーション装置、オーディオ装置、或いは空調装置等の各種機器から出力される情報を表示する表示部が設けられるとともに、これら各種機器に対して操作を行うための操作部が運転席から手が届く位置に設けられている。 On the other hand, the instrument panel of the center console arranged between the driver seat and the passenger seat is provided with a display unit for displaying information output from various devices such as a car navigation device, an audio device, or an air conditioner. In addition, an operation unit for operating these various devices is provided at a position that can be reached from the driver's seat.
ところで、上述した電子ミラーのモニタには、走行中においてフロントウインドウ越しに見える景色の流れ(オプティカルフロー)とは逆方向に車両後方の風景が流れる動画像が表示されるため、運転者の目につき易い。 By the way, the above-mentioned monitor of the electronic mirror displays a moving image in which the scenery behind the vehicle flows in the opposite direction to the scenery flow (optical flow) seen through the front window during traveling. easy.
運転者は、通常、フロントウインドウ越しに進行方向を向いており、電子ミラーモニタを常に注視しながら走行しているわけではないため、走行中に電子ミラーのモニタの映像が過度に目につくことはない。 The driver usually faces in the direction of travel through the front window and does not always drive while keeping an eye on the electronic mirror monitor. There is no.
しかし、運転者は、フロントウインドウ越しに見える景色だけでなくインストルメントパネルに配置された計器類や表示部の表示内容を見ながら走行しており、また、例えば、カーナビゲーション装置の設定変更や、空調装置の温度調整など、操作部に対して手を伸ばして操作を行う際にも操作部の位置を確認しながら操作するために、車両前方からセンターコンソールの側へ僅かな時間であるが視線移動が行われる。 However, the driver is traveling while looking at not only the scenery seen through the front window but also the instruments arranged on the instrument panel and the display contents of the display unit, and for example, changing the setting of the car navigation device, When adjusting the temperature of the air conditioner, etc., when reaching out to the operation unit, it is only a short time from the front of the vehicle to the center console to operate while checking the position of the operation unit. A move is made.
そして、運転者が車両前方とセンターコンソールに設けられた表示部に表示された画像を確認したり、操作部を操作するために、運転者が車両前方と、これら表示部や操作部との間において視線移動する際に、電子ミラーモニタを横切るように、或いは電子ミラーモニタが視界の中央視側に入り込むように視線移動するため、電子ミラーモニタの映像を注視する必要性がない状況であっても、電子ミラーモニタの映像に目を奪われ易くなる。 Then, in order for the driver to check the images displayed on the front side of the vehicle and on the display unit provided on the center console, or to operate the operation unit, the driver can move between the front side of the vehicle and the display unit and the operation unit. When moving the line of sight, the line of sight is moved so as to cross the electronic mirror monitor or so that the electronic mirror monitor enters the central view side of the field of view. However, the image of the electronic mirror monitor is easily taken away.
そうすると、センターコンソールの表示部の表示内容の確認や操作部の操作を素早く行うことができないという課題があった。 If it does so, there existed a subject that the display content of the display part of a center console and the operation of an operation part could not be performed quickly.
上述した特許文献1のように、電子ミラーを運転者と撮像手段との位置関係に応じて運転者の正面位置から外した位置として例えば、センターコンソールの上部に配置した場合や、特許文献2のように、重要度のレベルが上昇していない通常走行時に、運転席の前方に配置されたパネル画面中における左端側に左後方画像を表示させた場合であっても、運転者が車両前方と表示部との間で視線移動する際に、電子ミラーモニタの画像に目を奪われ易くなるという上述した課題が生じるおそれがあった。
As in
そこでこの発明は、電子ミラーモニタの映像に視線が吸い寄せられることを抑制し、センターコンソールに設けた表示部の表示内容の確認や操作部の操作をスムーズに行うことを目的とする。 In view of this, an object of the present invention is to suppress the line of sight from being attracted to the image of the electronic mirror monitor, and to smoothly check the display content of the display unit provided in the center console and to operate the operation unit.
この発明は、表示部と操作部との少なくとも一方をインストルメントパネルの車幅方向中央部に備えたセンターコンソールと、自車両の後方を撮影する撮像手段と、前記インストルメントパネルの車幅方向における、前記センターコンソール、又は、該センターコンソールとステアリングホイールとの間に設けられ、前記撮像手段により撮影した車両後方画像を表示する電子ミラーモニタとを備えた車両用表示装置であって、運転者が前記センターコンソールを視認すると推認される推認情報を取得する推認情報取得手段と、前記推認情報に基づいて前記車両後方画像の視認性を劣化表示させるか否かを判定する判定手段と、前記判定手段の判定結果に基づいて前記車両後方画像の視認性を低下させる劣化表示手段とを備えたことを特徴とする。 The present invention relates to a center console provided with at least one of a display unit and an operation unit in a center portion in the vehicle width direction of the instrument panel, imaging means for photographing a rear side of the own vehicle, and a vehicle width direction of the instrument panel in the vehicle width direction. A vehicle display device provided with the center console or an electronic mirror monitor provided between the center console and a steering wheel and displaying a vehicle rear image taken by the imaging means, An identification information acquisition unit that acquires the estimation information estimated to visually recognize the center console, a determination unit that determines whether or not the visibility of the vehicle rear image is degraded based on the estimation information, and the determination unit And deterioration display means for reducing the visibility of the vehicle rear image based on the determination result. .
上記構成によれば、電子ミラーモニタの映像に視線が吸い寄せられることを抑制し、センターコンソールに設けた表示部の表示内容の確認や操作部の操作をスムーズに行うことができる。 According to the above configuration, it is possible to suppress the line of sight from being attracted to the image of the electronic mirror monitor, and to confirm the display content of the display unit provided in the center console and to operate the operation unit smoothly.
ここで、前記表示部と前記操作部とはタッチパネル式のモニタなど、互いの機能を有して一体に形成したものであっても、別々に備えたものであってもよい。また、前記表示部と前記操作部とは、ナビゲーション機能とオーディオ機能など、複数の機能ごとに別々に備えてもよいが、複数の機能を兼用した表示部、或いは操作部として構成してもよい。 Here, the display unit and the operation unit may be formed integrally with each other, such as a touch panel monitor, or may be provided separately. Further, the display unit and the operation unit may be provided separately for each of a plurality of functions such as a navigation function and an audio function, but may be configured as a display unit or an operation unit that also has a plurality of functions. .
すなわち、センターコンソールにおけるインストルメントパネルの車幅方向中央部には、例えば、ナビゲーション装置、オーディオ装置、空調装置、メール送受信装置、テレビ、電話など様々な機器のうち少なくとも一つの表示部、操作部として備えることができる。 That is, at the center of the instrument panel in the center console in the vehicle width direction, for example, as a display unit or an operation unit of at least one of various devices such as a navigation device, an audio device, an air conditioner, a mail transmission / reception device, a television, and a telephone. Can be provided.
前記電子ミラーモニタは、前記センターコンソール、又は該センターコンソールとステアリングホイールとの間の箇所に設けることができ、例えば、運転者がセンターコンソールの表示部や操作部に視線移動する際に、目につき易いステアリングホイールと略同じ高さの位置に設けることができる。 The electronic mirror monitor can be provided at the center console or at a location between the center console and the steering wheel. For example, when the driver moves his eyes to the display unit or the operation unit of the center console, It can be provided at a position approximately the same height as the easy steering wheel.
前記推認情報取得手段は、車載機器や制御部(ECU)が取得した情報、又は出力した情報を、運転者が前記センターコンソールを視認すると推認される推認情報として取得可能な構成とすることができるが、これに限らず、例えば、運転者による前記センターコンソールへの視認動作を検出する視認動作検出手段であってもよい。 The said inference information acquisition means can be set as the structure which can acquire the information which the vehicle equipment and the control part (ECU) acquired, or the output information as the inference information estimated when a driver | operator visually recognizes the said center console. However, the present invention is not limited thereto, and for example, a visual motion detection means for detecting a visual motion of the center console by the driver may be used.
この発明の態様として、劣化表示を開始して所定時間経過後に、劣化表示させた劣化表示画像を復元表示させる復元表示手段を備えたものである。 As an aspect of the present invention, there is provided a restoration display means for restoring and displaying a degraded display image that has been degraded and displayed after a lapse of a predetermined time since the degradation display was started.
上記構成によれば、所定時間経過後に劣化表示された車両後方画像が元の状態で表示されるため、運転者がセンターコンソールにおいて表示内容を確認したり、操作をし、該センターコンソールから車両前方へ視線を戻す度に、意識して劣化表示画像を復元する操作を行う必要がなく、進路変更や車線変更など、安全性を優先する観点で前記車両後方画像を確認する必要がある場合には、復元された車両後方画像によって自車両の後方の状況を確実に確認することができる。 According to the above configuration, the vehicle rear image that has been degraded and displayed after the elapse of a predetermined time is displayed in its original state, so that the driver can confirm the display contents or perform operations on the center console, When it is necessary to check the rear image of the vehicle from the viewpoint of giving priority to safety, such as a course change or a lane change, without having to consciously restore the degraded display image every time the line of sight is returned to The situation behind the host vehicle can be reliably confirmed by the restored vehicle rear image.
ここで、前記所定時間とは、例えば、センターコンソールにおいて表示部の表示内容や操作部の操作箇所を確認する際に必要と見込まれる時間とすることができ、例えば、タスクメニューの内容や、表示内容の情報量(表示時間、情報の文字数等)、操作の際にスイッチを押圧する数等の操作量に応じて任意に設定することができる。 Here, the predetermined time can be, for example, a time that is expected to be necessary when confirming the display content of the display unit or the operation location of the operation unit in the center console. The amount of information (display time, number of characters of information, etc.) and the amount of operation such as the number of pressing switches during operation can be arbitrarily set.
なお、表示部の表示内容や操作部の操作箇所を確認する際に必要と見込まれる時間には、前記センターコンソールの表示部や操作部を視認している時間に限定せず、車両前方と前記センターコンソールとの間において視線を移動させている時間を含んでもよい。 It should be noted that the time expected to be required when confirming the display content of the display unit and the operation location of the operation unit is not limited to the time when the display unit and the operation unit of the center console are visually recognized, The time during which the line of sight is moved between the center console and the center console may be included.
またこの発明の態様として、前記撮像手段は、車幅方向における運転席に対して前記センターコンソール側の車両側方から車両後方を撮像するように車幅方向における該助手席側の車両側方に配設され、前記判定手段は、前記センターコンソール側の車両側方への方向を指示するウインカ装置をON状態にした場合、前記車両後方画像を劣化表示させない判定をする構成とすることができる。 Further, as an aspect of the present invention, the imaging means is arranged on the vehicle side on the passenger seat side in the vehicle width direction so as to image the rear of the vehicle from the vehicle side on the center console side with respect to the driver seat in the vehicle width direction. The determination means may be configured to determine that the vehicle rear image is not degraded when the turn signal device that indicates the direction of the center console toward the vehicle side is turned on.
上記構成によれば、一般に自車両が運転席に対して前記センターコンソール側への方向へ進路変更や車線変更する際には、前記インストルメントパネルの車幅方向における、前記センターコンソール、又は該センターコンソールとステアリングホイールとの間に設けられた電子ミラーモニタに表示される車両後方画像を視認する必要性が高いといえる。 According to the above configuration, in general, when the own vehicle changes its course or lane in the direction toward the center console with respect to the driver's seat, the center console in the vehicle width direction of the instrument panel or the center It can be said that the necessity of visually recognizing the vehicle rear image displayed on the electronic mirror monitor provided between the console and the steering wheel is high.
よって、ウインカ装置を、車幅方向における前記センターコンソール側の車両側方への方向を指示するようにON状態にした場合には、たとえ運転者が前記センターコンソールに設けた表示部の表示内容を確認したり、操作部を操作するために前記センターコンソール側へ視線移動する場合であっても、前記車両後方画像の視認性が低下しないように表示させることにより、運転者は、電子ミラーモニタに表示される車両後方画像を確実に目視しながら安全に進路変更や車線変更することができる。 Therefore, when the turn signal device is turned on so as to indicate the direction of the center console side to the vehicle side in the vehicle width direction, the display content of the display unit provided on the center console by the driver is displayed. Even when moving to the center console side for checking or operating the operation unit, the driver can display on the electronic mirror monitor by displaying so that the visibility of the vehicle rear image does not deteriorate. It is possible to safely change the course or change the lane while reliably viewing the displayed vehicle rear image.
ここで、例えば、自車両が進路変更や車線変更する際には、運転者が安全性を優先する観点で前記車両後方画像を確認する必要性が高いといえる。よって、これら進路変更や車線変更する自車両の動きを事前に検出できるのであれば、前記判定手段は、上述したようにウインカ装置をON状態にした場合に限らず、例えば、ナビゲーション装置の案内内容、運転者撮像カメラが検出した運転者の動きの変化等に基づいて、前記車両後方画像を劣化表示させないように判定してもよい。 Here, for example, when the host vehicle changes its course or lane, it can be said that the driver needs to check the vehicle rear image from the viewpoint of giving priority to safety. Therefore, if it is possible to detect in advance the movement of the host vehicle that changes the course or the lane, the determination means is not limited to the case where the turn signal device is turned on as described above. Further, based on a change in the movement of the driver detected by the driver imaging camera, the vehicle rear image may be determined not to be displayed in a degraded manner.
またこの発明の態様として、前記劣化表示手段は、前記撮像手段で異なる時間に撮像した複数の車両後方画像に基づいて、オプティカルフローを算出する算出手段と、前記オプティカルフローを基に前記車両後方画像中から動的フロー成分を抽出する動的フロー成分抽出手段と、前記車両後方画像中から前記動的フロー成分を除去して劣化表示する動的フロー成分除去手段とを備えることができる。 Further, as an aspect of the present invention, the deterioration display unit includes a calculation unit that calculates an optical flow based on a plurality of vehicle rear images captured at different times by the imaging unit, and the vehicle rear image based on the optical flow. Dynamic flow component extraction means for extracting a dynamic flow component from the inside, and dynamic flow component removal means for removing and displaying the dynamic flow component from the vehicle rear image.
上記構成によれば、前記劣化表示手段により、車両後方画像中の前記動的フロー成分のみを除去して劣化表示させるため、運転者が目を奪われ易いオプティカルフローが大きい領域のみを劣化表示する一方で、車両後方画像中の静的フロー成分は、前記劣化表示手段によって劣化表示せずに通常どおり表示するため、運転者は、例えば、後方車両等の移動物体の存在を認識することができる。 According to the above configuration, since only the dynamic flow component in the vehicle rear image is removed and the deterioration display is performed by the deterioration display means, only the region where the optical flow is likely to be taken away by the driver is displayed in a deteriorated manner. On the other hand, since the static flow component in the vehicle rear image is displayed as usual without being deteriorated by the deterioration display means, the driver can recognize the presence of a moving object such as a rear vehicle, for example. .
ここで、前記動的フロー成分は、自車両に対して相対速度が大きい物体であり、例えば、電柱など実際には静止している静止物体である。
なお、前記静的フロー成分は、自車両に対して相対速度が小さい物体であり、例えば、自車両と略同じ速度で走行している移動物体である。
またこの発明の態様として、前記劣化表示手段は、前記電子ミラーモニタの画面に表示される前記車両後方画像を該画面サイズに対して縮小表示させて劣化表示させる車両後方画像縮小化手段であり、前記車両後方画像縮小化手段により縮小表示させた縮小車両後方画像を、前記電子ミラーモニタの画面の車幅方向において、前記センターコンソールの有する側と反対側に表示したものである。
Here, the dynamic flow component is an object having a large relative speed with respect to the own vehicle, for example, a stationary object that is actually stationary, such as a utility pole.
Note that the static flow component is an object having a small relative speed with respect to the host vehicle, for example, a moving object traveling at substantially the same speed as the host vehicle.
Further, as an aspect of the present invention, the deterioration display means is a vehicle rear image reduction means for displaying the vehicle rear image displayed on the screen of the electronic mirror monitor in a reduced manner with respect to the screen size and displaying the deterioration. The reduced vehicle rear image reduced and displayed by the vehicle rear image reduction means is displayed on the opposite side of the center console in the vehicle width direction of the screen of the electronic mirror monitor.
上記構成によれば、車両後方画像縮小化手段によって、前記電子ミラーモニタの画面に表示される前記車両後方画像を該画面サイズに対して縮小表示することができるため、例えば、運転者がセンターコンソールに設けた表示部や操作部に視線移動する際に、電子ミラーモニタの映像に視線が吸い寄せられることなく表示部の表示内容の確認や操作部の操作を素早く行うことができる。 According to the above configuration, the vehicle rear image reduction means can reduce the vehicle rear image displayed on the screen of the electronic mirror monitor with respect to the screen size. When the line of sight is moved to the display unit and the operation unit provided in the display unit, the display content of the display unit can be confirmed and the operation unit can be quickly operated without drawing the line of sight to the image of the electronic mirror monitor.
一方で、縮小車両後方画像を、前記電子ミラーモニタの画面の車幅方向において、前記センターコンソールの有する側と反対側に表示したため、運転者は、たとえ前記車両後方画像を劣化表示している間であっても縮小車両後方画像を意識的に目視すれば、車両後方の様子を認識することができ、安全性を確保することができる。 On the other hand, since the reduced vehicle rear image is displayed on the side opposite to the side having the center console in the vehicle width direction of the screen of the electronic mirror monitor, the driver is displayed while the vehicle rear image is degraded. Even so, if the reduced vehicle rear image is consciously viewed, the state behind the vehicle can be recognized, and safety can be ensured.
この発明によれば、電子ミラーモニタの映像に視線が吸い寄せられることを抑制し、センターコンソールに設けた表示部の表示内容の確認や操作部の操作をスムーズに行うことができる。 According to the present invention, it is possible to suppress the line of sight from being drawn into the image of the electronic mirror monitor, and to confirm the display content of the display unit provided in the center console and to operate the operation unit smoothly.
この発明の一実施例を以下図面に基づいて詳述する。
図1は本実施形態の車両用表示装置1の概略構成を示すブロック図であり、図2は前方へ走行中の自車両の車室における前側座席よりも前方を見たときに、フロントガラス越しに見える風景と電子ミラーに表示される車両後方風景の各オプティカルフローを強調して模式的に示した説明図である。図3は本実施形態の車両用表示装置の実施例1の制御処理を示すフローチャートである。図4(a)は、実施例1のステップ5の劣化表示処理前の車両左後方画像を示す模式図であり、図4(b)は、実施例1のステップ5の劣化表示処理後の左後方画像を示す模式図である。
An embodiment of the present invention will be described in detail with reference to the drawings.
FIG. 1 is a block diagram showing a schematic configuration of a
本実施形態の車両用表示装置1を備えた車両は、右ハンドル車であり、図1に示すように、自車両の左後方を撮影する左サイドカメラ11と、該左サイドカメラ11により撮影した車両後方画像を表示する左電子ミラーモニタ16(左電子ミラーディスプレイ16)と、運転者を撮像する運転者撮像カメラ12と、メール受信検出部113と、車両用表示装置1の制御処理(運転支援処理)などの各種制御処理を行うECU40と、主にインストルメントパネル51(図2参照)内に組み込まれている各種車載機器20と、該各種車載機器20の情報表示及び操作を行うメインモニタ30(メインディスプレイ30)と、計時部14と、ウインカ装置15Aと、左ウインカON状態検出部15とを備えている。
なお、本実施形態の車両には、上述した左サイドカメラ11、左電子ミラーモニタ16、左ウインカON状態検出部15等の左側に備えた機器のそれぞれに対応する右側の機器を車両右側に備えているが、これら左右各側に備えた一対の機器のうち、右側に備えた機器は、上記左側に備えた機器と同様の構造であるとともに、本実施形態の車両用表示装置1を用いた制御処理には直接、関係しないため、その説明を省略する。
The vehicle provided with the
The vehicle according to the present embodiment includes right-side devices corresponding to the left-side devices such as the
左サイドカメラ11は、図2に示すように、自車両の左側後方を連続的に撮像可能に自車両の左側部、すなわち左フロントフェンダーにおける後側上部(左側フロントサイドウインドウの近傍)に備えている。
As shown in FIG. 2, the
この左サイドカメラ11は、左サイドカメラハウジングの内部に、車体ボディから車幅方向外側に突出するカメラブラケットを介して先端側に備え、例えば可視光領域や赤外線領域等にて撮像可能なCCDやCMOSを撮像素子とする小型のカラーカメラ等からなり、撮影した情報を動画情報としてリアルタイムに出力する(図1、及び図2参照)。
The
なお、本実施形態の車両の側部にはドアミラー(サイドミラー)を備えていないが、サイドカメラとは別途、ドアミラーを備え、ハウジングにサイドカメラを埋設したカメラ一体型のドアミラーを採用してもよい。 In addition, although the door mirror (side mirror) is not provided in the side part of the vehicle of this embodiment, even if it employ | adopts the camera integrated door mirror which provided the door mirror separately from the side camera and embedded the side camera in the housing. Good.
運転者撮像カメラ12は、運転席に着席している運転者を車両前方側から見た映像を撮像するための小型カメラであり、例えば、CCDカメラや赤外線カメラを用いることができる。この運転者撮像カメラ12は、本実施例においては図2に示すように、フロントピラー57の車室内のガーニッシュに取り付けられているが、運転者がメインモニタ30を操作する動作を含めて該メインモニタ30を視認する動作を検出するために、運転者の例えば頭部や左手の動きを撮像できるのであれば、インストルメントパネル51やセンターコンソール50等に配置してもよい。
The
左電子ミラーモニタ16は、液晶モニタ等で構成し、後述する画像生成部42で生成した自車両の左後方の様子を示す画像を表示する。このような左電子ミラーモニタ16は、運転者から視認できるようインストルメントパネル51に配置されている。
The left electronic mirror monitor 16 is composed of a liquid crystal monitor or the like, and displays an image showing a left rear state of the host vehicle generated by the
具体的には、左電子ミラーモニタ16は、図2に示すように、インストルメントパネル51の車幅方向のメインモニタ30と運転席の正面側のメーターパネル56との間位置に、ステアリングホイール55と略同じ高さで設置されている。
なお、本実施例において、インストルメントパネル51は、車室の前席前方部分の車幅方向の全体に亘って配設されているダッシュボードを示すものとする。
Specifically, as shown in FIG. 2, the left electronic mirror monitor 16 has a
In addition, in a present Example, the
ECU40は、各種処理を制御するためのCPUと、このCPUで行う処理を実行するプログラムやパラメータ等を格納するROMと、その処理過程で生成されるデータを一時格納する作業領域としてのRAM等を備えた周知のマイクロコンピュータで構成している。さらに、ECU40は、外部機器との接続を行なうインターフェース部等を有しており、車載機器20としての例えば、図1に示すようなEメール送受信装置21、カーナビゲーション装置22、空調装置23、オーディオ装置24、さらに図示省略するが電話装置等から取得した表示情報をメインモニタ30に表示するとともに、メインモニタ30のスイッチ操作により入力された情報を各種車載機器20に出力する。
The
このようなECU40には、本実施形態の車両用表示装置1を用いた制御処理を行う画像生成部41,42と判定部43と電子ミラー画像劣化表示処理部44と電子ミラー画像劣化表示解除処理部45とを備えている(図1参照)。
In such an
画像生成部41,42は、各種の画像処理を行う機能を有し、左サイドカメラ11用の画像生成部41と運転者撮像カメラ12用の画像生成部42とを備えている(同図参照)。左サイドカメラ11用の画像生成部41は、左サイドカメラ11で撮像した車両左後方風景の撮像データを基に生成した生成過程画像を左右反転させ、左右反転した像に対応する車両左後方画像P1(図4参照)に加工して左電子ミラーモニタ16に表示する機能を有する。
運転者撮像カメラ12用の画像生成部42は、運転者撮像カメラ12で撮像した運転者撮像データを基に運転者画像を生成する。
The
The
判定部43は、後述するメール受信検出部113、運転者撮像カメラ12用の画像生成部42、計時部14、及び左ウインカON状態検出部15など複数の情報取得部を介して取得した情報を包括して車両左後方画像P1を劣化表示するか否かを複数パターンの判定条件に対応する判定プログラムに基づいて判定する。
The
例えば、判定部43は、Eメール送受信装置21がメールを受信したか否かに基づいて車両左後方画像P1を劣化表示するか否かの判定をする。
この場合の具体的な判定条件として、判定部43は、Eメール送受信装置21がメールを受信した際に、メール受信検出部113により出力されたメール受信検出信号を取得した時点において、左ウインカON状態検出部15により、左ウインカON状態検出信号を取得していない場合には、左電子ミラーモニタ16の車両左後方画像P1を「劣化表示可」と判定する。その一方で、判定部43は、メール受信検出部113により出力されたメール受信検出信号を取得した時点において、左ウインカON状態検出部15により、左ウインカON状態検出信号を取得している場合には、左電子ミラーモニタ16の車両左後方画像P1を「劣化表示不可」と判定する。
For example, the
As a specific determination condition in this case, when the e-mail transmission /
或いは、判定部43は、運転者撮像カメラ12により撮像された運転者の姿勢を基に車両左後方画像P1を劣化表示するか否かの判定をする。
この場合の具体的な判定条件として、判定部43は、運転者撮像カメラ12の撮像により取得した運転者画像を基に運転者の姿勢がメインモニタ30を視認する意図が推認される姿勢であると判定した時点で、左ウインカON状態検出部15により、左ウインカON状態検出信号を取得していない場合には、左電子ミラーモニタ16の車両左後方画像P1を「劣化表示可」と判定する。その一方で、判定部43は、運転者の姿勢がメインモニタ30を視認する意図が推認される姿勢であると判定された時点で、左ウインカON状態検出部15により、左ウインカON状態検出信号を取得している場合には、左電子ミラーモニタ16の車両左後方画像P1を「劣化表示不可」と判定する。
Alternatively, the
As a specific determination condition in this case, the
なお、運転者撮像カメラ12の撮像により取得した運転者画像を基に運転者の姿勢がメインモニタ30を視認する意図が推認される姿勢であると判定する手法としては、例えば、運転者がメインモニタ30を操作するために、該メインモニタ30に向けて左手を伸ばした姿勢、或いは頭部をメインモニタ30に向けた姿勢(頭部を車両前方から左側へ所定角度傾けた姿勢)など、メインモニタ30を視認する意図が推測される複数の姿勢パターンをメインモニタ視認姿勢パターンとしてECU40のROMなどに記憶して予めデータベース化して登録しておき、運転者撮像カメラ12の撮像により取得した運転者画像に表示される運転者の姿勢と、登録されたメインモニタ視認姿勢パターンとを照合して、双方の姿勢の位置情報や角度情報の差異が所定の閾値内に含まれる場合には、運転者がメインモニタ30を視認する意図があると判定する手法を採用することができるが、この手法に限らず、他の手法を用いてもよい。
In addition, as a method of determining that the driver's posture is the posture in which the intention of visually recognizing the
また、判定部43は、劣化表示開始時点から後述する計時部14により計測した時間が、ROMに記憶されている所定の劣化表示時間を経過した経過情報を受信したとき、「劣化表示解除可」と判定する。
Further, when the
ここで、劣化表示時間は、左電子ミラーモニタ16に表示されている車両左後方画像P1の劣化表示を開始してから解除するまでの時間であり、車載機器20を用いて運転者が行う所定のタスク内容に応じて運転者が完了するまでに必要と見込まれるタスク完了想定時間を設定している。例えば、メール受信時における左電子ミラーモニタ16画面の劣化表示時間は、着信メールを確認する際に運転者が必要と見込まれる時間である。このような劣化表示時間は、タスクの項目に対応付けたデータベースとしてECU40に備えたROMに記憶されている。
Here, the deterioration display time is the time from the start of the deterioration display of the vehicle left rear image P1 displayed on the left electronic mirror monitor 16 to the cancellation, and is a predetermined performed by the driver using the in-
なお、この劣化表示時間は、タスク内容ごとに運転者により変更可能に構成してもよい。 The deterioration display time may be configured to be changeable by the driver for each task content.
また、電子ミラー画像劣化表示処理部44は、図1に示すように、車両左後方画像P1を左電子ミラーモニタ16画面に劣化表示する処理を行うために、オプティカルフロー算出部441、動的フロー成分抽出部442、及び動的フロー成分除去処理部443とで構成している。
オプティカルフロー算出部441は、例えば、異なる時刻に撮像した複数の画像間において、同一の部位として認識可能な点を特徴点として設定し、この特徴点の移動をフローベクトルとして該画像を複数に分類した群ごとに算出する。このようなフローベクトルを、撮像した画像内の全領域において算出する。
Further, as shown in FIG. 1, the electronic mirror image deterioration
For example, the optical
ここで、オプティカルフローの具体的な算出方法は、マッチング法や勾配法などの代表的な公知の手法を用いることができるが、特に限定しない。また、オプティカルフローは、フィルタ処理を施して得られた特徴点を基に算出してもよい。フィルタ処理としては、例えば、画像内において中心部分より周辺部分の方がオプティカルフローの特徴がより明確に表すことができるという人間の受容野の特性に似せるガボールフィルタ(gabor-filter)による公知の処理を適用できるが、特に限定しない。 Here, a specific known method such as a matching method or a gradient method can be used as a specific method for calculating the optical flow, but is not particularly limited. Further, the optical flow may be calculated based on feature points obtained by performing the filtering process. As a filtering process, for example, a known process using a Gabor filter (gabor-filter) that resembles the characteristics of a human receptive field that the optical flow characteristics can be expressed more clearly in the peripheral part than in the central part in the image. Can be applied, but is not particularly limited.
さらに、動的フロー成分抽出部442は、撮像した画像内の全領域において算出したフローベクトルを基に、画像内の移動物体の位置および移動方向等の情報を検出するが、自車両が走行中においては左サイドカメラ11自体が移動しているため、自車両の移動により生じるフローベクトルを差し引いて、左サイドカメラ11自体の移動量の影響を除去することにより、自車両が走行中において左サイドカメラ11で撮像した車両左後方画像P1の中から背景などの静止物体と、他車両などの移動物体とを検出し、左サイドカメラ11自体が移動する場合には、左電子ミラーモニタ16画面において流れるように表示される静止物体を動的フロー成分Dとして抽出する。
Furthermore, the dynamic flow
なお、自車両が走行中に撮像した車両左後方画像P1の中から静止物体と移動物体とを検出する技術は、例えば、「特開2004−56763」等の文献に開示されている公知の技術であるため、ここではその説明は省略する。 A technique for detecting a stationary object and a moving object from the vehicle left rear image P1 captured while the host vehicle is traveling is, for example, a known technique disclosed in a document such as “Japanese Unexamined Patent Application Publication No. 2004-56763”. Therefore, the description thereof is omitted here.
動的フロー成分除去処理部443は、車両左後方画像P1中において、静止物体が表示される部分のオプティカルフロー200bを除去する、すなわち、該部分のフローを停止させるなどして車両左後方画像P1中の動的フロー成分Dを除去することにより、運転者の視線が奪われないように劣化表示する。
The dynamic flow component
また、電子ミラー画像劣化表示解除処理部45は、判定部43が「劣化表示解除可」と判定したとき、車両左後方画像P1の劣化表示を解除して元の表示形態に復元する。
Further, when the
また、上述したメインモニタ30は、センターコンソール50の前方上部位置、すなわち、インストルメントパネル51の車幅方向の中央位置に、運転者が表示情報を目視可能であるとともに、左手を伸ばしてメインモニタ30画面に触れることができる距離に設けられている。なお、図2に示すように、センターコンソール50は車室内の運転席と助手席との間に設けられており、変速操作を行うシフトレバー52が配設けられている。
In addition, the
このようなメインモニタ30は、例えば、Eメール送受信装置21、カーナビゲーション装置22、オーディオ装置24、及び空調装置23など車両に搭載された各種車載機器20の操作、及び情報表示を統括して行うための5〜8インチ程度の小型のタッチパネル式のモニタであり、テレビ用のモニタやカーナビゲーション装置22に具備されるモニタと兼用されている。
Such a
このようなメインモニタ30は、使用者がモニタの画面上を押圧、スクロールするなどして画面上に触れることで各車載機器20を操作することができるように構成されている。
Such a
具体的に、メインモニタ30は、指などによる接触位置をロケーションデータとして出力できる感圧式や静電式の入力装置であるが、バックライトを備えた液晶式のものに限らず、CRT型のものであってもプラズマ表示型のものであってもよい。
Specifically, the
さらに、メインモニタ30は、各種車載機器20の中から使用する機器を選択可能に一覧表示した最上位階層のトップ画面が表示されるとともに、該トップ画面に表示されるメニュー項目の中から選択した機器ごとに応じて具体的な情報表示、及び操作を許容する複数パターンの下位層の操作画面が表示される階層的な表示方式が採用されているが、メール受信時等、運転者に案内すべき突発的な情報がある場合は、その情報を示した案内画面が現時点の表示画面上に優先的に表示される。
Further, the
メール受信検出部113は、Eメール送受信装置21がメールを受信した時点で、メール受信検出信号をECU40に送信する。
The mail
計時部14は、メインモニタ30等に時刻を表示するタイマー機能を利用して時間を計測するものであり、ECU40からの時間計測開始信号を受信後に、時間計測を開始し、所定時間が経過した時点でECU40に時間計測完了信号を送信する。
The
ウインカ装置15Aは、ステアリングコラムの左側に備え、中立位置からステアリングホイール55の回す方向に応じて上下いずれかの側に傾動操作するウインカレバーと、このようなウインカレバーの傾動に応じてONとOFFとに切り替える作動スイッチと、ウインカレバーが上方に傾動して作動スイッチがON状態になった時に点滅し、OFF状態で点滅が終了する左ウインカランプと、左ウインカON状態検出部15とを備えている。
The
左ウインカON状態検出部15は、ステアリングレバーを上方に傾動操作した時点と中立位置に戻した時点における作動スイッチの切り替えを検知し、これら切り替え検知情報をECU40へ逐次出力することで、左ウインカがON状態であることを検出する。
The left turn signal ON
(実施例1)
本実施形態の車両用表示装置1は、上述した構成を備えており、次に、この両用表示装置1の実施例1における制御処理(運転支援処理)について図3に示すフローチャートを参照しながら説明する。
運転者が例えば、イグニションスイッチをON状態にしてエンジンを始動させることにより、メインモニタ30や各種車載機器20の電源が立ち上がり、メインモニタ30は、運転者への案内情報の表示を開始するとともに、運転者による操作を許容する状態となる(ステップS1)。
Example 1
The
For example, when the driver turns on the ignition switch and starts the engine, the
そして、左電子ミラーモニタ16には、左サイドカメラ11により撮像した車両左後方画像P1が表示される(ステップS2)。この車両左後方画像P1は、車両走行中においては、例えば、図4(a)に示すように、フロントウインドウ越しに見える景色の流れ(オプティカルフロー200a(図2参照))とは、逆方向に車両後方の風景が流れる動画像として左電子ミラーモニタ16に表示される。
The left electronic mirror monitor 16 displays the vehicle left rear image P1 captured by the left side camera 11 (step S2). For example, as shown in FIG. 4A, the vehicle left rear image P1 is in a direction opposite to the flow of the scenery seen through the front window (
なお、左電子ミラーモニタ16は、運転者がイグニションスイッチをON状態にしてから作動するに限らず、運転者がシフトレバー52を「D」モードや「R」モードに操作する、或いはアクセルペダルを踏み込むなど、自車両が動き出すことを検出した際に表示を開始してもよい。
The left electronic mirror monitor 16 is not limited to the operation after the driver turns on the ignition switch, but the driver operates the
Eメール送受信装置21がメールを受信した場合、メール受信検出部113がその旨を検出し(ステップS3)、メール受信検出信号がECU40に送信される。ECU40がこの信号を受信することにより、判定部43による判定を行う。
具体的には、判定部43は、左ウインカON状態検出部15により左ウインカスイッチのON状態が検出されていない場合は「劣化表示可」であると判定する(ステップS4:Yes)。
When the e-mail transmission /
Specifically, the
一方、判定部43は、左ウインカスイッチがON状態である間は、「劣化表示不可」であると判定する(ステップS4:No)。
On the other hand, the
そして、このように判定部43により「劣化表示不可」であると判定した場合にも、自車両が左折や左側への車線変更が完了するなどして左ウインカスイッチのON状態が解除された際には、判定部43は「劣化表示可」であると判定する(ステップS4:Yes)。
Even when the
このように、ステップ4において「劣化表示可」であるとの判定がされると、図4(a),(b)に示すように、電子ミラー画像劣化表示処理部44は、左電子ミラーモニタ16に表示される動画像としての車両左後方画像P1中の運転者に目につき易い風景が流れる領域、すなわち、動的フロー成分抽出部442で動的フロー成分Dとして抽出された領域のオプティカルフロー200aを劣化表示させる(ステップS5)。
As described above, when it is determined in step 4 that “degradation display is possible”, as shown in FIGS. 4A and 4B, the electronic mirror image degradation
具体的に、図4(a)に示すように、車両左後方画像P1には、例えば、自車両Caの左側後部と、路面Rと後方車両Cb、植木や電柱などの左後方風景Lが表示されているが、これらのうち、路面Rや周囲の風景Lは、自車両Caが停車している場合には静止物体であるが、自車両Caが走行している場合には自車両Caの走行に伴って、風景の流れ(オプティカルフロー200a)が発生し、動的フロー成分Dとなる(図4(a)中の矢印で示したオプティカルフロー200a参照)。
Specifically, as shown in FIG. 4A, the vehicle left rear image P1 displays, for example, a left rear portion of the host vehicle Ca, a road surface R and a rear vehicle Cb, and a left rear landscape L such as a plant or a telephone pole. Of these, the road surface R and the surrounding landscape L are stationary objects when the host vehicle Ca is stopped, but the host vehicle Ca is traveling when the host vehicle Ca is traveling. As the vehicle travels, a landscape flow (
しかも、これら路面R(路面上の凹凸)や周囲の風景L(植木や電柱など)の図2に示すようなオプティカルフロー200aは、図2に示すようなフロントガラス58越しに見える風景の流れ(オプティカルフロー200b)とは逆方向に流れるように左電子ミラーモニタ16画面に表示されることから、運転者がメインモニタ30へ視線移動する際に目を奪われ易くなる。このため、動的フロー成分除去処理部443により車両左後方画像P1中の動的フロー成分Dとして抽出された領域のオプティカルフロー200aを劣化表示させた劣化表示画像P2を左電子ミラーモニタ16画面に図4(b)に示すように表示する。
なお、オプティカルフロー200aを劣化表示させる具体的な表示態様としては、動的フロー成分Dとして抽出された領域をコマ送りして表示するなどを挙げることができる。
Moreover, the
As a specific display mode for displaying the
一方、自車両Caと略同じ速度で走行している後方車両Cbは、そのオプティカルフローが小さいため、静的フロー成分として動的フロー成分抽出部442に抽出されない。車両左後方画像P1中のこのような静的フロー成分については、図4(b)に示すような劣化表示画像P2において劣化表示させずに、通常どおり表示し、メインモニタ30を視認する際においても劣化表示画像P2を通じて運転者に後方車両の存在を認識させることができる。
On the other hand, the rear vehicle Cb traveling at substantially the same speed as the host vehicle Ca has a small optical flow, and thus is not extracted as a static flow component by the dynamic flow
その後、メインモニタ30には、運転者によって視認可能に受信メールの概要として送信者、件名、受信日時が表示されるとともに、必要に応じて本文内容が表示される(ステップS6)。
なお、メールを受信した旨を運転者に報知する着信音は、Eメール送受信装置21がメールを受信した瞬間に報知されるに限らず、適宜、左電子ミラーモニタ16に表示される車両左後方画像を劣化表示した時点で報知する構成としてもよい。
Thereafter, on the
Note that the ringing tone for notifying the driver that the e-mail has been received is not limited to the e-mail transmission /
上述したように劣化表示を開始した後、受信メールの確認に必要な時間として予め設定したメール受信確認タスクに対応する所定時間が経過するまで劣化表示画像P2が継続表示される(ステップS7:No)。
一方、上記所定時間が経過したことを計時部14により時間計測完了信号をECU40が検出することにより、判定部43は、劣化表示画像P2による劣化表示を「解除可」と判定し(ステップS7:Yes)、電子ミラー画像劣化表示解除処理部45によって劣化表示画像P2を通常どおりの表示に復元させて(ステップS8)、本処理を終了する。
After the deterioration display is started as described above, the deterioration display image P2 is continuously displayed until a predetermined time corresponding to a mail reception confirmation task set in advance as a time necessary for confirmation of the received mail has passed (step S7: No). ).
On the other hand, when the
なお、所定時間は、運転者がメインモニタ30に目線を向けて送信者、件名、受信日時等の受信メールの概要を確認するのに必要と見込まれる例えば、10秒から30秒程度の時間に設定することができる。或いは本文内容を含めた受信メールの全体内容の確認に必要と見込まれる時間としてさらに長い30秒から1分程度の時間に設定してもよい。また、この時間は、運転者により任意の時間に設定可能としてもよい。
Note that the predetermined time is, for example, about 10 to 30 seconds, which is expected to be necessary for the driver to look at the
(実施例2)
続いて本実施形態の車両用表示装置1の実施例2における制御処理について図5に示すフローチャート、及び図6を参照しながら説明する。
但し、図5は車両用表示装置1の実施例2の制御処理を示すフローチャートであり、図6はメインモニタ30を操作する運転者を運転者撮像カメラ12により撮像する車室前側の様子を模式的に示した平面図である。
(Example 2)
Next, a control process in Example 2 of the
However, FIG. 5 is a flowchart showing the control processing of the
運転者が例えば、イグニションスイッチをON状態にしてエンジンを始動させることにより、メインモニタ30や各種車載機器20の電源が立ち上がり、メインモニタ30は、運転者への案内情報の表示を開始するとともに、運転者による操作を許容する状態となる(ステップT1)。
For example, when the driver turns on the ignition switch and starts the engine, the
そして、左電子ミラーモニタ16には、左サイドカメラ11により撮像した車両左後方画像P1が表示される(ステップT2)。 Then, the left electronic mirror monitor 16 displays a vehicle left rear image P1 captured by the left side camera 11 (step T2).
それとともに、運転者撮像カメラ12が作動し、図6に示すように、運転車の撮像を開始する(ステップT3)。
At the same time, the
判定部43は、運転者がメインモニタ30を視認する意図があると判定されるまで運転者撮像カメラ12で撮像した画像とROMに記憶されたメインモニタ視認姿勢パターンの照合を行う(ステップT4:No)。
The
例えば、図6中仮想線で示すように、運転者が空調装置23(エアコン)の温度調整をするために、メインモニタ30の方に頭を向けたり、タッチパネル式のメインモニタ30に表示される温度調整スイッチに向けて左手を伸ばすなどの姿勢変更が運転者撮像カメラ12により検出された場合(ステップT4:Yes)、判定部43は、その姿勢をROMに記憶されたメインモニタ視認姿勢パターンを基に運転者がメインモニタ30を視認する意図があると判定する。
For example, as shown by a virtual line in FIG. 6, the driver turns his head toward the
続くステップT5において、判定部43は、運転者がメインモニタ30を視認する意図があると判定した場合、実施例1のステップS4と同様に、左ウインカスイッチのON状態が検出されているか否かに応じて、車両左後方画像P1を劣化表示するか否かの判定をする。
In subsequent step T5, when the
具体的には、判定部43は、左ウインカスイッチのON状態が検出されている間は「劣化表示不可」であると判定するが(ステップT5:No)、左ウインカスイッチのON状態が検出されていない場合は「劣化表示可」であると判定する(ステップT5:Yes)。
Specifically, the
ステップT5において、判定部43により「劣化表示可」であると判定された場合、電子ミラー画像劣化表示処理部44により左電子ミラーモニタ16に表示される車両左後方画像P1は劣化表示される(ステップT6)。なお、このステップT6の劣化表示処理は、図4(a),(b)を参照して説明した実施例1のステップS5に対応するため、その説明は省略する。
In step T5, when the
そして、例えば、運転者が空調装置23の温度調整スイッチを押圧するなどして温度調整するために運転者がメインモニタ30を視認する等の姿勢である間は、劣化表示画像P2を継続表示し(ステップT7:No)、空調装置23の温度調整完了後、ステアリングホイール55を握り、前方を向いた走行姿勢に戻ったことを運転者撮像カメラ12で検出した場合(ステップT7:Yes)、電子ミラー画像劣化表示解除処理部45によって劣化表示画像P2の劣化表示を解除し(ステップT8)、車両左後方画像P1のように通常どおり表示して本処理を終了する。
For example, the deterioration display image P <b> 2 is continuously displayed while the driver is viewing the
以上、上述した本実施形態の車両用表示装置1は、表示部と操作部との双方の機能を有するメインモニタ30をインストルメントパネル51の車幅方向中央部に備えたセンターコンソール50と、自車両の後方を撮影する撮像手段としての左サイドカメラ11と、インストルメントパネル51の車幅方向におけるセンターコンソール50、又は該センターコンソール50とステアリングホイール55の間に設けられ、左サイドカメラ11により撮影した車両左後方画像P1を表示する左電子ミラーモニタ16とを備えた車両用表示装置であって、運転者がセンターコンソール50を視認すると推認される推認情報としてメール受信検出信号を検出する推認情報取得手段としてのメール受信検出部113、及び推認情報として運転者画像を取得する推認情報取得手段(視認動作検出手段)としての運転者撮像カメラ12と、これらメール受信検出信号、又は運転者画像に基づいて車両左後方画像P1を劣化表示させるか否かを判定する判定手段としての判定部43と、判定部43の判定結果に基づいて車両左後方画像P1の視認性を低下させる劣化表示手段としての電子ミラー画像劣化表示処理部44とを備えたものである(図1参照)。
As described above, the
上記構成によれば、例えば実施例1のように、Eメール送受信装置21がEメールを受信した際には、音声等で運転者にその旨が報知されるため、運転者は、運転者がメールの内容を確認するために、そのメール内容が表示されるメインモニタ画面を視認することが推認される。このため、メール受信検出部113によってEメールを受信したことを検出したとき、判定部43は、推認情報に基づいて、安全性等の観点で特に問題がなければ車両左後方画像P1を劣化表示させる判定を行うことで、電子ミラー画像劣化表示処理部44によって車両左後方画像P1の視認性が低下するように劣化表示させることができる。
According to the above configuration, for example, as in the first embodiment, when the e-mail transmitting / receiving
また、上述した実施例2のように、運転者がセンターコンソール50に設けられたメインモニタ30の表示内容を確認したり、操作をする際に、車両前方とメインモニタ30との間で視線を移動させる。このような視線移動動作を運転者撮像カメラ12によって検出したとき、判定部43は、運転者撮像画像の情報に基づいて安全性等の観点で特に問題がなければ車両左後方画像P1を劣化表示させる判定を行うことで、電子ミラー画像劣化表示処理部44によって車両左後方画像P1の視認性が低下するように劣化表示させることができる。
Further, as in the second embodiment described above, when the driver checks the display content of the
このように、運転者がセンターコンソール50を視認することを推認して左電子ミラーモニタ16に表示されている車両左後方画像P1を劣化表示させることで、該画像に視線が吸い寄せられることを抑制し、センターコンソール50に設けたメインモニタ30に対して表示内容の確認や操作を素早く行うことができ、安全な運転を確保することができる。
In this way, it is assumed that the driver visually recognizes the
さらに、運転者は、車両前方とこのメインモニタ30との間で視線移動する度に、左電子ミラーモニタ16に表示されている動画像を目障りに感じることがなく、運転者は運転に集中することができ、快適に運転することができる。
Furthermore, every time the driver moves his line of sight between the front of the vehicle and the
一方、メインモニタ30へ視線移動する際であっても、右左折時や車線変更時など、左電子ミラーモニタ16により、車両後方の状況を確認する必要性がある際には、左電子ミラーモニタ16に表示された車両左後方画像P1を劣化表示させずに、車両後方の景色を通常通り表示するため、安全性を確保することができる。
On the other hand, even when the line of sight is moved to the
この発明の態様によれば、劣化表示を開始して所定時間経過後に、車両左後方画像P1を劣化表示させた劣化表示画像P2を復元表示させる復元表示手段としての電子ミラー画像劣化表示解除処理部45を備えたものである(図1参照)。 According to the aspect of the present invention, the electronic mirror image deterioration display canceling processing unit as the restoration display means for restoring and displaying the deterioration display image P2 in which the deterioration display of the vehicle left rear image P1 is displayed after a predetermined time has elapsed after starting the deterioration display. 45 (see FIG. 1).
上記構成によれば、所定時間経過後に劣化表示画像P2が元の状態で表示されるため、運転者がメインモニタ30において表示内容を確認したり、操作が完了し、該メインモニタ30から車両前方へ視線を戻す度に、意識して劣化表示画像P2の表示を復元する操作を行う必要がないため、進路変更や車線変更など、安全性を優先する観点で左電子ミラーモニタ16の画面を確認する必要がある場合には、復元された車両左後方画像P1によって自車両の後方の状況を確実に確認することができる。
According to the above configuration, the deterioration display image P2 is displayed in the original state after a predetermined time has elapsed, so that the driver confirms the display content on the
またこの発明の態様によれば、判定部43は、左ウインカがON状態になったことを左ウインカON検出部15により検出した場合、車両左後方画像P1を劣化表示させない判定をする構成としたものである(図1参照)。
According to the aspect of the present invention, the
上記構成によれば、左方向へ進路変更や車線変更する際には、運転者は、ウインカレバーを上方に傾動させて左ウインカをON状態にしている間は、たとえ運転者がメインモニタ30側へ視線移動する場合であっても、車両左後方画像P1を劣化表示させないことで、運転者は、左電子ミラーモニタ16に表示される車両左後方画像P1を確実に目視しながら安全に進路変更や車線変更することができる。 According to the above configuration, when changing the course or lane in the left direction, the driver tilts the turn signal lever upward to turn the left turn signal on. Even if the line of sight is moved, the driver can safely change the course while reliably viewing the left rear vehicle image P1 displayed on the left electronic mirror monitor 16 by not displaying the left rear vehicle image P1 in a degraded manner. And can change lanes.
またこの発明の態様によれば、電子ミラー画像劣化表示処理部44は、左サイドカメラ11で異なる時間に撮像した複数の車両左後方画像P1に基づいて、オプティカルフロー200aを算出する算出手段としてのオプティカルフロー算出部441と、オプティカルフローの大きさを基に動的フロー成分Dと静的フロー成分とを有する車両左後方画像P1中から動的フロー成分Dを抽出する動的フロー成分抽出手段としての動的フロー成分抽出部442と、車両左後方画像P1中から動的フロー成分Dを除去して劣化表示する動的フロー成分除去手段としての動的フロー成分除去処理部443を備えたものである(図1参照)。
Further, according to the aspect of the present invention, the electronic mirror image deterioration
上記構成によれば、電子ミラー画像劣化表示処理部44によって、左電子ミラーモニタ16に表示されている車両左後方画像P1中における動的フロー成分Dのみ、すなわち、車両左後方画像P1の中でも運転者が目を奪われ易いオプティカルフローが大きい領域のみを劣化表示することができるため、例えば、運転者がメインモニタ30に視線移動する際に、左電子ミラーモニタ16の映像に視線が吸い寄せられることなくメインモニタ30に対して表示内容の確認や操作を素早く行うことができる。
According to the above configuration, only the dynamic flow component D in the vehicle left rear image P1 displayed on the left electronic mirror monitor 16 by the electronic mirror image degradation
一方で、車両左後方画像P1の中でも自車両Caに近い速度で走行している後方車両Cbのような静的フロー成分については劣化表示せずに通常どおり表示するため、運転者は、たとえ車両左後方画像P1を劣化表示している間であっても後方車両Cbの存在を確実に認識することができ、安全性を確保することができる。 On the other hand, since the static flow component such as the rear vehicle Cb traveling at a speed close to the own vehicle Ca in the vehicle left rear image P1 is displayed as usual without being deteriorated, the driver may Even during the deterioration display of the left rear image P1, the existence of the rear vehicle Cb can be reliably recognized, and safety can be ensured.
この発明の構成と、上述の実施例との対応において、この発明の表示部と操作部は、この実施形態のセンターコンソール50に設けたメインモニタ30に対応し、以下、同様に、
撮像手段は、左サイドカメラ11に対応し、
車両後方画像は、車両左後方画像P1に対応し、
電子ミラーモニタは、左電子ミラーモニタ16に対応し、
推認情報は、メール受信検出信号、又は運転者画像に対応し、
推認情報取得手段は、メール受信検出部113、又は運転者撮像カメラ12に対応し、
判定手段は、判定部43に対応し、
劣化表示手段は、電子ミラー画像劣化表示処理部44に対応し、
復元表示手段は、電子ミラー画像劣化表示解除処理部45に対応し、
車幅方向における前記センターコンソール側の車両側方への方向は、左方向に対応し、
算出手段は、オプティカルフロー算出部441に対応し、
動的フロー成分抽出手段は、動的フロー成分抽出部442に対応し、
動的フロー成分除去手段は、動的フロー成分除去処理部443
車両後方画像縮小化手段は、後述する縮小表示処理部450に対応するも、この発明は、上述の実施例の構成のみに限定されるものではない。
In the correspondence between the configuration of the present invention and the above-described embodiment, the display unit and the operation unit of the present invention correspond to the
The imaging means corresponds to the
The vehicle rear image corresponds to the vehicle left rear image P1,
The electronic mirror monitor corresponds to the left
The inference information corresponds to the email reception detection signal or the driver image,
The inference information acquisition means corresponds to the mail
The determination means corresponds to the
The deterioration display means corresponds to the electronic mirror image deterioration
The restoration display means corresponds to the electronic mirror image degradation display
The direction toward the vehicle side of the center console side in the vehicle width direction corresponds to the left direction,
The calculation means corresponds to the optical
The dynamic flow component extraction means corresponds to the dynamic flow
The dynamic flow component removal means includes a dynamic flow component
The vehicle rear image reduction means corresponds to a reduced
例えば、他の実施形態に係る劣化表示手段として、左電子ミラーモニタ16の画面に対して縮小表示処理する縮小表示処理部450を図1中において仮想線のブロックで示すように電子ミラー画像劣化表示処理部44に備えてもよい。
縮小表示処理部450は、図7に示すように、左電子ミラーモニタ16の画面に対して車両左後方画像P1を縮小表示させるとともに、この縮小表示した劣化表示画像としての縮小車両左後方画像P3を左電子ミラーモニタ16の画面の車幅方向の中央部に対してメインモニタ30の有する側と反対側(ステアリングホイール55側)の位置に表示さている。
なお、図7は、他の劣化表示処理として縮小表示処理を行った後の左後方画像を示す模式図である。
For example, as a deterioration display unit according to another embodiment, a reduced
As shown in FIG. 7, the reduced
FIG. 7 is a schematic diagram showing a left rear image after performing a reduced display process as another deterioration display process.
このように、縮小表示処理部450によって、左電子ミラーモニタ16の画面に表示される車両後方画像P1を該画面サイズに対して縮小表示することができるため、例えば、運転者がセンターコンソール50に設けたメインモニタ30に視線移動する際に、左電子ミラーモニタ16の映像に視線が吸い寄せられることなくメインモニタ30の表示内容の確認等を素早く行うことができる。
As described above, the reduced
一方で、縮小車両後方画像P3を、左電子ミラーモニタ16の画面の車幅方向において、センターコンソール50の有する側と反対側、すなわち車両右側に表示したため、運転者は、たとえ車両後方画像P1を劣化表示している間であっても縮小車両後方画像P3を意識的に目視すれば、その内容を認識することができ、安全性を確保することができる。
On the other hand, the reduced vehicle rear image P3 is displayed on the side opposite to the side having the
なお、車両左後方画像P1は、運転者の視線が引き寄せられることなく、しかも注視すれば後方車両の存在を確認できる程度の倍率であれば画面の大きさに対して任意の倍率で縮小表示することができ、また、この縮小率は、運転者によって任意に設定可能としてもよい。 Note that the vehicle left rear image P1 is displayed at a reduced magnification with respect to the size of the screen as long as the driver's line of sight is not attracted and the magnification is such that the presence of the rear vehicle can be confirmed by gazing. This reduction rate may be arbitrarily set by the driver.
また、さらに他の実施形態に係る劣化表示処理部として、図8に示すように、左電子ミラーモニタ16の画面に対してぼかし表示してもよい。
図8は、他の劣化表示処理としてぼかし処理を行った後の劣化表示画像P4を示す模式図である。なお、図8中ドットで示した領域はぼかし処理を行った領域を示すものとする。
Further, as a deterioration display processing unit according to still another embodiment, as shown in FIG. 8, the display may be blurred on the screen of the left
FIG. 8 is a schematic diagram showing a deteriorated display image P4 after performing a blurring process as another deteriorated display process. In addition, the area | region shown with the dot in FIG. 8 shall show the area | region which performed the blurring process.
ぼかし処理(モザイク処理)は、公知の原理を適用して行うことができるが、例えば、画像を四角形の複数の領域に区分けし、それぞれの領域に含まれる複数の画素のうちの任意の1画素の濃度値にする、所定の領域に含まれる複数の画素の平均濃度値なるように処理する、或いは、画像中の隣り合う画素間の輝度差を減少させるように処理するなど任意の手法を採用することができる。 The blurring process (mosaic process) can be performed by applying a known principle. For example, an image is divided into a plurality of rectangular areas, and one arbitrary pixel among a plurality of pixels included in each area. Arbitrary methods such as processing to reduce the luminance difference between adjacent pixels in the image, or processing to obtain an average density value of a plurality of pixels included in a predetermined area, or adopting an arbitrary method can do.
なお、劣化表示画像P4は、画像全体に対してぼかし処理してもよいが、本実施例においては、図8に示すように、動的フロー成分抽出部442によって車両左後方画像P1中の動的フロー成分Dを抽出し、該動的フロー成分Dに対して、上述した動的フロー成分除去処理部443による動的フロー成分除去処理の一態様としてぼかし処理を行うことで劣化表示させている。
Note that the degradation display image P4 may be subjected to blurring processing on the entire image, but in this embodiment, as shown in FIG. 8, the dynamic flow
その他にも、例えば、図9に示す劣化表示画像P5に示すように、車両左後方画像P1の全体の明度を下げて劣化表示させてもよい。このように、車両左後方画像P1を劣化表示させる手法は特に限定しない。 In addition, for example, as shown in a degradation display image P5 shown in FIG. 9, the overall brightness of the vehicle rear left image P1 may be lowered and displayed in a degraded manner. Thus, the method of displaying the vehicle left rear image P1 in a degraded manner is not particularly limited.
さらに、車両用表示装置1の他の実施形態として、車両用表示装置1には、図1中の符号17に示す劣化表示スイッチ、符号18に示す劣化解除スイッチを適宜、備えてもよい。劣化表示スイッチ17は運転者の押圧により、運転者の意志で車両左後方画像を強制的に劣化表示させるスイッチであり、劣化解除スイッチ18は、劣化表示された車両左後方画像の劣化表示を解除するスイッチである。
Furthermore, as another embodiment of the
また、車両用表示装置1の他の実施形態として、判定部43が車両左後方画像P1を劣化表示するか否かを判定するにあたって用いる情報は、メール受信検出部113、運転者撮像カメラ12、左ウインカON状態検出部15から取得した情報に限らず、他の検出部から取得した情報を用いてもよく、また、判定部43は、上述した判定条件を採用するに限らず、他の判定条件を採用してもよい。
Further, as another embodiment of the
例えば、カーナビゲーション装置22に有する、人工衛星を利用して自車両の位置を測定するためのGPS(Global Positioning System)機能を用いて自車両が左折予定の交差点に所定距離以下に近付いたことを検出した場合には、左ウインカON状態検出部15によって左ウインカON状態検出信号を取得した場合と同様に、左電子ミラーモニタ16の車両左後方画像P1を劣化表示させないと判定するなど他の判定条件を採用してもよい。
For example, using the GPS (Global Positioning System) function of the
また、他の実施形態として運転者検出手段として上述した運転者撮像カメラ12を採用する場合には、運転者の手や頭部の動きを撮像するに限らず、例えば、運転者の眼球(黒目)の動きを撮像して運転者が注視する方向を推認してもよく、運転者がメインモニタ30を視認することを推認可能な動作であれば撮像部位は特に限定しない。
In addition, when the above-described
また、運転者動作検出手段としては、運転者撮像カメラ12に限らず、例えば、運転者までの距離を計測することにより運転者の動きを検出する近接センサ等を用いてもよい。
なお、本実施形態の車両用表示装置1は、車両が右ハンドル車であるため、左側に備えた機器について適用したが、左ハンドル車である場合には左側に備えた機器ではなく、右側に備えた機器に適用してもよい。また、本発明の車両用表示装置は、左右いずれか一方の機器に適用するに限らず、左右両側の機器に適用してもよい。
Further, the driver motion detection means is not limited to the
In addition, since the vehicle is a right-hand drive vehicle, the
以上説明したように、本発明は、例えば、表示部と操作部との少なくとも一方をインストルメントパネルの車幅方向中央部に備えたセンターコンソールと、自車両の後方を撮影する撮像手段と、前記インストルメントパネルの車幅方向における、前記センターコンソール、又は、該センターコンソールとステアリングホイールとの間に設けられ、前記撮像手段により撮影した車両後方画像を表示する電子ミラーモニタとを備えた車両用表示装置について有用である。 As described above, the present invention provides, for example, a center console provided with at least one of the display unit and the operation unit in the center part in the vehicle width direction of the instrument panel, the imaging unit that captures the rear of the host vehicle, Vehicle display provided with the center console in the vehicle width direction of the instrument panel or an electronic mirror monitor provided between the center console and a steering wheel and displaying a vehicle rear image taken by the imaging means Useful for the device.
1…車両用表示装置
11…左サイドカメラ(撮像手段)
12…運転者撮像カメラ(推認情報取得手段)
15A…ウインカ装置
16…左電子ミラーモニタ(電子ミラーモニタ)
30…メインモニタ(表示部と操作部)
43…判定部(判定手段)
44…電子ミラー画像劣化表示処理部(劣化表示手段)
45…電子ミラー画像劣化表示解除処理部(復元表示手段)
51…インストルメントパネル
52…センターコンソール
55…ステアリングホイール
113…メール受信検出部(推認情報取得手段)
441…オプティカルフロー算出部(算出手段)
442…動的フロー成分抽出部(動的フロー成分抽出手段)
443…動的フロー成分除去処理部(動的フロー成分除去手段)
450…縮小表示処理部(車両後方画像縮小化手段)
D…動的フロー成分
P1…車両左後方画像(車両後方画像)
P2,P4,P5…劣化表示画像
P3…縮小車両左後方画像
DESCRIPTION OF
12 ... Driver imaging camera (inference information acquisition means)
15A ...
30 ... Main monitor (display and operation unit)
43 ... determination part (determination means)
44 ... Electronic mirror image deterioration display processing section (deterioration display means)
45 ... Electronic mirror image degradation display cancellation processing unit (restoration display means)
51 ...
441 ... Optical flow calculation unit (calculation means)
442 ... Dynamic flow component extraction unit (dynamic flow component extraction means)
443 ... Dynamic flow component removal processing unit (dynamic flow component removal means)
450 ... Reduced display processing unit (vehicle rear image reduction means)
D ... Dynamic flow component P1 ... Vehicle left rear image (vehicle rear image)
P2, P4, P5 ... Deterioration display image P3 ... Reduced vehicle left rear image
Claims (5)
自車両の後方を撮影する撮像手段と、
前記インストルメントパネルの車幅方向における、前記センターコンソール、又は、該センターコンソールとステアリングホイールとの間に設けられ、
前記撮像手段により撮影した車両後方画像を表示する電子ミラーモニタとを備えた車両用表示装置であって、
運転者が前記センターコンソールを視認すると推認される推認情報を取得する推認情報取得手段と、
前記推認情報に基づいて前記車両後方画像の視認性を劣化表示させるか否かを判定する判定手段と、
前記判定手段の判定結果に基づいて前記車両後方画像の視認性を低下させる劣化表示手段とを備えた
車両用表示装置。 A center console provided with at least one of the display unit and the operation unit in the center in the vehicle width direction of the instrument panel;
Imaging means for photographing the rear of the vehicle;
The center console in the vehicle width direction of the instrument panel, or provided between the center console and the steering wheel,
A vehicle display device comprising an electronic mirror monitor for displaying a vehicle rear image captured by the imaging means,
An inference information acquisition means for acquiring inference information inferred that the driver visually recognizes the center console;
Determining means for determining whether or not the visibility of the vehicle rear image is degraded based on the inference information;
A vehicle display device comprising deterioration display means for reducing visibility of the vehicle rear image based on a determination result of the determination means.
請求項1に記載の車両用表示装置。 The vehicle display device according to claim 1, further comprising a restoration display unit that restores and displays the degraded display image that has been degraded and displayed after a predetermined time has elapsed since the degradation display was started.
前記判定手段は、車幅方向における前記センターコンソール側の車両側方への方向を指示するウインカ装置をON状態にした場合、前記車両後方画像を劣化表示させない判定をする構成とした
請求項1、又は2に記載の車両用表示装置。 The imaging means is disposed on the side of the vehicle on the passenger side in the vehicle width direction so as to image the rear of the vehicle from the side of the vehicle on the center console side with respect to the driver seat in the vehicle width direction,
The determination unit is configured to determine that the vehicle rear image is not degraded when the turn signal device that indicates the direction of the center console side toward the vehicle side in the vehicle width direction is turned on. Or the display apparatus for vehicles of 2.
前記オプティカルフローを基に前記車両後方画像中から動的フロー成分を抽出する動的フロー成分抽出手段と、
前記車両後方画像中から前記動的フロー成分を除去して劣化表示する動的フロー成分除去手段とを備えた
請求項1乃至3のうちいずれかに記載の車両用表示装置。 The deterioration display means, a calculation means for calculating an optical flow based on a plurality of vehicle rear images taken at different times by the imaging means;
Dynamic flow component extraction means for extracting a dynamic flow component from the vehicle rear image based on the optical flow;
4. The vehicle display device according to claim 1, further comprising: a dynamic flow component removing unit that removes the dynamic flow component from the vehicle rear image and displays the deterioration. 5.
前記車両後方画像縮小化手段により縮小表示させた縮小車両後方画像を、前記電子ミラーモニタの画面の車幅方向において、前記センターコンソールの有する側と反対側に表示した
請求項1乃至4のうちいずれかに記載の車両用表示装置。 The deterioration display means is a vehicle rear image reduction means for displaying the vehicle rear image displayed on the screen of the electronic mirror monitor in a reduced manner with respect to the screen size and displaying the deterioration.
5. The reduced vehicle rear image reduced and displayed by the vehicle rear image reduction means is displayed on the opposite side of the center console in the vehicle width direction of the screen of the electronic mirror monitor. The vehicle display device according to claim 1.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015054270A JP6197814B2 (en) | 2015-03-18 | 2015-03-18 | Vehicle display device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015054270A JP6197814B2 (en) | 2015-03-18 | 2015-03-18 | Vehicle display device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016172526A true JP2016172526A (en) | 2016-09-29 |
JP6197814B2 JP6197814B2 (en) | 2017-09-20 |
Family
ID=57008506
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015054270A Expired - Fee Related JP6197814B2 (en) | 2015-03-18 | 2015-03-18 | Vehicle display device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6197814B2 (en) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018157403A (en) * | 2017-03-17 | 2018-10-04 | トヨタ自動車株式会社 | On-vehicle display device, control method for on-vehicle display device, and control program for on-vehicle display device |
WO2019026506A1 (en) * | 2017-07-31 | 2019-02-07 | シャープ株式会社 | Control device, display system, control program, and recording medium |
WO2019039406A1 (en) * | 2017-08-25 | 2019-02-28 | マツダ株式会社 | Passenger compartment structure |
JP2019038404A (en) * | 2017-08-25 | 2019-03-14 | マツダ株式会社 | In-cabin structure |
JP2019038405A (en) * | 2017-08-25 | 2019-03-14 | マツダ株式会社 | In-cabin structure |
KR20190029872A (en) * | 2017-09-13 | 2019-03-21 | 현대자동차주식회사 | Vehicle, and control method for the same |
JP2019077302A (en) * | 2017-10-24 | 2019-05-23 | クラリオン株式会社 | Display control device, display system, and display control method |
JP2020083067A (en) * | 2018-11-26 | 2020-06-04 | 本田技研工業株式会社 | On-vehicle device |
DE102021107847A1 (en) | 2020-06-08 | 2021-12-09 | Suzuki Motor Corporation | IMAGE PROCESSING DEVICE FOR VEHICLE |
JP7331731B2 (en) | 2020-02-21 | 2023-08-23 | トヨタ自動車株式会社 | Vehicle electronic mirror system |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7057500B1 (en) * | 2004-04-23 | 2006-06-06 | Belloso Gregorio M | Rear view monitoring system for motor vehicles |
JP2013168063A (en) * | 2012-02-16 | 2013-08-29 | Fujitsu Ten Ltd | Image processing device, image display system, and image processing method |
JP2014229997A (en) * | 2013-05-20 | 2014-12-08 | 日本精機株式会社 | Display device for vehicle |
-
2015
- 2015-03-18 JP JP2015054270A patent/JP6197814B2/en not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7057500B1 (en) * | 2004-04-23 | 2006-06-06 | Belloso Gregorio M | Rear view monitoring system for motor vehicles |
JP2013168063A (en) * | 2012-02-16 | 2013-08-29 | Fujitsu Ten Ltd | Image processing device, image display system, and image processing method |
JP2014229997A (en) * | 2013-05-20 | 2014-12-08 | 日本精機株式会社 | Display device for vehicle |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018157403A (en) * | 2017-03-17 | 2018-10-04 | トヨタ自動車株式会社 | On-vehicle display device, control method for on-vehicle display device, and control program for on-vehicle display device |
US10843628B2 (en) | 2017-03-17 | 2020-11-24 | Toyota Jidosha Kabushiki Kaisha | Onboard display device, control method for onboard display device, and control program for onboard display device |
WO2019026506A1 (en) * | 2017-07-31 | 2019-02-07 | シャープ株式会社 | Control device, display system, control program, and recording medium |
WO2019039406A1 (en) * | 2017-08-25 | 2019-02-28 | マツダ株式会社 | Passenger compartment structure |
JP2019038404A (en) * | 2017-08-25 | 2019-03-14 | マツダ株式会社 | In-cabin structure |
JP2019038405A (en) * | 2017-08-25 | 2019-03-14 | マツダ株式会社 | In-cabin structure |
CN111065538B (en) * | 2017-08-25 | 2023-03-28 | 马自达汽车株式会社 | Interior structure of vehicle |
CN111065538A (en) * | 2017-08-25 | 2020-04-24 | 马自达汽车株式会社 | Interior structure of vehicle |
US11465503B2 (en) | 2017-08-25 | 2022-10-11 | Mazda Motor Corporation | Vehicle interior structure |
KR20190029872A (en) * | 2017-09-13 | 2019-03-21 | 현대자동차주식회사 | Vehicle, and control method for the same |
KR102403350B1 (en) * | 2017-09-13 | 2022-06-02 | 현대자동차주식회사 | Vehicle, and control method for the same |
JP7063571B2 (en) | 2017-10-24 | 2022-05-09 | フォルシアクラリオン・エレクトロニクス株式会社 | Display control device, display system and display control method |
JP2019077302A (en) * | 2017-10-24 | 2019-05-23 | クラリオン株式会社 | Display control device, display system, and display control method |
JP7011568B2 (en) | 2018-11-26 | 2022-01-26 | 本田技研工業株式会社 | In-vehicle device |
JP2020083067A (en) * | 2018-11-26 | 2020-06-04 | 本田技研工業株式会社 | On-vehicle device |
JP7331731B2 (en) | 2020-02-21 | 2023-08-23 | トヨタ自動車株式会社 | Vehicle electronic mirror system |
DE102021107847A1 (en) | 2020-06-08 | 2021-12-09 | Suzuki Motor Corporation | IMAGE PROCESSING DEVICE FOR VEHICLE |
Also Published As
Publication number | Publication date |
---|---|
JP6197814B2 (en) | 2017-09-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6197814B2 (en) | Vehicle display device | |
EP2974909B1 (en) | Periphery surveillance apparatus and program | |
US10166922B2 (en) | On-vehicle image display device, on-vehicle image display method for vehicle, and on-vehicle image setting device | |
JP2010130646A (en) | Vehicle periphery checking system | |
JP5092776B2 (en) | Gaze direction detection device and gaze direction detection method | |
JP6410987B2 (en) | Driving support device, driving support method, and driving support program | |
JP6264037B2 (en) | Vehicle information display device and vehicle information display method | |
JP6072470B2 (en) | In-vehicle imaging system | |
JP2016055801A (en) | On-vehicle display device | |
JP5718080B2 (en) | Vehicle periphery monitoring device | |
JP2018022958A (en) | Vehicle display controller and vehicle monitor system | |
JP2018129732A (en) | Vehicular video display device | |
US10596966B2 (en) | Display device for vehicle and display method for vehicle | |
JP2010208359A (en) | Display device for vehicle | |
JP2007290570A (en) | Vehicular display device | |
CN111469777A (en) | Vehicle display device | |
US10696231B2 (en) | In-vehicle image display system and image processing method | |
JP2008162550A (en) | External environment display device | |
JP2017125883A (en) | Eyeglass information display device | |
WO2013114871A1 (en) | Driving assistance device and driving assistance method | |
JP2004356731A (en) | On-vehicle information providing apparatus | |
JP6649063B2 (en) | Vehicle rear display device and display control device | |
JP2007017409A (en) | Navigation system for vehicle | |
JPWO2020012992A1 (en) | Vehicle display device | |
US20210009037A1 (en) | Vehicle sighting device, and method of setting angle of view of imaging section of vehicle sighting device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170118 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170131 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170316 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170725 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170807 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6197814 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |