JP6879132B2

JP6879132B2 - Electronic mirror display device, vehicle display system

Info

Publication number: JP6879132B2
Application number: JP2017168015A
Authority: JP
Inventors: 勇希舛屋
Original assignee: Nippon Seiki Co Ltd
Current assignee: Nippon Seiki Co Ltd
Priority date: 2017-08-31
Filing date: 2017-08-31
Publication date: 2021-06-02
Anticipated expiration: 2037-08-31
Also published as: JP2019043342A

Description

本発明は、例えば自動車等の車両に搭載される電子ミラー表示装置、及び車両用表示システム等に関する。 The present invention relates to, for example, an electronic mirror display device mounted on a vehicle such as an automobile, a display system for a vehicle, and the like.

近年、従来の車両用ミラーが電子ミラー（電子ドアミラーを含む）に置き換えられた、ミラーレスの車両の研究、開発が行われている。電子ミラーは、例えば、車両の後方及び後側方を確認するサイドミラーを含む車両用ミラーの役割を果たし、かつ、車両に備わる撮像部による撮像画像を表示するモニターとしての機能を有する、一種の表示部である。 In recent years, research and development of mirrorless vehicles in which conventional vehicle mirrors have been replaced with electronic mirrors (including electronic door mirrors) have been carried out. The electronic mirror is a kind of mirror that functions as a vehicle mirror including a side mirror that confirms the rear side and the rear side of the vehicle, and also has a function as a monitor that displays an image captured by an imaging unit provided in the vehicle. It is a display unit.

特許文献１には、車両の左右のＡピラー付近、又は運転席前方のインストルメントパネル上に電子ミラーを配置した運転支援表示システムが開示されている。 Patent Document 1 discloses a driving support display system in which an electronic mirror is arranged near the A pillars on the left and right sides of the vehicle or on an instrument panel in front of the driver's seat.

特開２０１７−２８３４９号公報Japanese Unexamined Patent Publication No. 2017-28349

しかしながら、電子ミラーによって、車両の後側方の撮像画像を表示した場合であっても、車両の真横（運転者から見た側方）や前側方（運転者から見た斜め前方）などは、運転者の目視動作による安全確認を行う必要がある。電子ミラーが運転席前方に配置されている場合、運転席前方に配置された電子ミラーの表示で車両の後側方を確認し、運転席の左又は右の目視で車両の真横や前側方を確認する場合、視線を大きく移動させる必要があり、運転者による車両周辺確認の負荷が大きかった。 However, even when the image captured on the rear side of the vehicle is displayed by the electronic mirror, the side of the vehicle (side seen from the driver) and the front side (diagonally forward seen from the driver) are displayed. It is necessary to confirm the safety by visual operation of the driver. When the electronic mirror is placed in front of the driver's seat, check the rear side of the vehicle on the display of the electronic mirror placed in front of the driver's seat, and visually check the left or right side of the driver's seat to the side or front of the vehicle. When checking, it was necessary to move the line of sight significantly, and the load of checking the surroundings of the vehicle by the driver was heavy.

また、電子ミラーが左右のピラー付近に配置されている場合、暗い環境下で、運転席の左又は右の目視で車両の真横や前側方を確認する際、ピラー付近に配置された電子ミラーの表示が眩しく感じられ、左右の目視確認がしづらくなるおそれがあった。 In addition, when the electronic mirrors are placed near the left and right pillars, when visually checking the side or front side of the vehicle on the left or right of the driver's seat in a dark environment, the electronic mirrors placed near the pillars The display was dazzling, and there was a risk that it would be difficult to visually check the left and right sides.

本発明の１つの目的は、運転者による車両周辺確認の負荷を軽減することである。 One object of the present invention is to reduce the load of the driver checking the surroundings of the vehicle.

本発明の電子ミラー表示装置の第１の態様は、車両の左後側方及び右後側方を撮像した撮像画像を取得する撮像画像取得部（４０）と、前記撮像画像取得部（４０）から取得した左後側方の撮像画像である左撮像画像を表示する第１の表示部（１１）と、前記撮像画像取得部（４０）から取得した右後側方の撮像画像である右撮像画像を表示する第２の表示部（１２）と、前記第１の表示部（１１）及び前記第２の表示部（１２）を制御する表示制御部（３０）と、車両周囲の明るさを判定可能な明るさ情報を取得する明るさ情報取得部（５０）と、を備え、前記表示制御部（３０）は、前記明るさ情報取得部（５０）が取得した前記明るさ情報に基づき、前記車両周囲の明るさが明るいと判定される場合、前記第１の表示部（１１）を車両の左ピラー（５）に近い第１表示位置（Ｐ１）に、前記第２の表示部（１２）を車両の右ピラー（７）に近い第２表示位置（Ｐ２）に、表示させ、前記車両周囲の明るさが暗いと判定される場合、左右ピラー（５，７）のうち車両の運転席から離れたピラーの近傍に表示される前記第１の表示部（１１）又は前記第２の表示部（１２）の表示位置を、前記第１の表示部（１１）においては前記第１表示位置（Ｐ１）より車両の運転席に近い第３表示位置（Ｐ３）に、前記第２の表示部（１２）においては前記第２表示位置（Ｐ２）より車両の運転席に近い第４表示位置（Ｐ４）に、変更する、ものである。 A first aspect of the electronic mirror display device of the present invention is an image acquisition unit (40) that acquires an image captured by capturing images of the left rear side and the right rear side of the vehicle, and the image acquisition unit (40). The first display unit (11) that displays the left captured image, which is the left rear side captured image acquired from, and the right imaging, which is the right rear side captured image acquired from the captured image acquisition unit (40). A second display unit (12) for displaying an image, a display control unit (30) for controlling the first display unit (11) and the second display unit (12), and the brightness around the vehicle. A brightness information acquisition unit (50) for acquiring determinationable brightness information is provided, and the display control unit (30) is based on the brightness information acquired by the brightness information acquisition unit (50). When it is determined that the brightness around the vehicle is bright, the first display unit (11) is placed at the first display position (P1) near the left pillar (5) of the vehicle, and the second display unit (12) is placed. ) Is displayed at the second display position (P2) near the right pillar (7) of the vehicle, and when it is determined that the brightness around the vehicle is dark, the driver's seat of the vehicle among the left and right pillars (5, 7) The display position of the first display unit (11) or the second display unit (12) displayed in the vicinity of the pillar away from the pillar is set as the first display position in the first display unit (11). The third display position (P3) closer to the driver's seat of the vehicle than (P1), and the fourth display position (P2) closer to the driver's seat of the vehicle than the second display position (P2) in the second display unit (12). It is to be changed to P4).

第１の態様では、車両周囲の明るさを推定可能な情報（例えば、照度情報、時刻情報、前照灯の動作情報等）に基づいて、車両周囲の明るさを推定し、車両周辺が明るいと推定できれば、少なくとも車両の運転席から離れたピラーの近傍に表示される電子ミラー画像（撮像画像）を表示する表示部を、車両のＡピラーの近傍（車両の運転席の左右の窓の近傍とも言える）に配置し、車両周辺が暗いと推定されれば、車両のＡピラーから離れた位置（車両の運転席の左右の窓から離れた位置とも言える）に配置する。よって、明るい環境下では、電子ミラー画像は、ピラー近傍（言い換えると、運転席左右の窓近傍）に配置されることになり、電子ミラー画像による車両の後側方の確認と、運転席の左右の窓を介した車両の側方及び前側方の目視確認と、の間の視線移動距離が少なくなるため、運転者による車両周辺確認の負荷が軽減される。また、暗い環境下では、電子ミラー画像は、ピラーから離れた位置（言い換えると、運転席左右の窓から離れた位置）に配置されることになり、運転席の左右の窓を介した車両の側方及び前側方の目視確認の際に、電子ミラー画像の表示光が視線に入りにくく、目視確認をしやすくすることができる。 In the first aspect, the brightness around the vehicle is estimated based on the information that can estimate the brightness around the vehicle (for example, illuminance information, time information, operation information of the headlights, etc.), and the surroundings of the vehicle are bright. If it can be estimated, at least the display unit that displays the electronic mirror image (captured image) displayed near the pillar away from the driver's seat of the vehicle is located near the A pillar of the vehicle (near the left and right windows of the driver's seat of the vehicle). If it is estimated that the area around the vehicle is dark, it will be placed at a position away from the A pillar of the vehicle (it can be said that it is located away from the left and right windows of the driver's seat of the vehicle). Therefore, in a bright environment, the electronic mirror image is placed near the pillars (in other words, near the windows on the left and right of the driver's seat), and the electronic mirror image confirms the rear side of the vehicle and the left and right of the driver's seat. Since the moving distance between the visual confirmation of the side and the front side of the vehicle through the window is reduced, the load of the driver's confirmation of the surroundings of the vehicle is reduced. Further, in a dark environment, the electronic mirror image is arranged at a position away from the pillar (in other words, a position away from the left and right windows of the driver's seat), and the vehicle is placed through the left and right windows of the driver's seat. At the time of visual confirmation of the side and the front side, the display light of the electronic mirror image is hard to enter the line of sight, and the visual confirmation can be facilitated.

また、第１の態様に従属する第２の態様において、前記表示制御部（３０）は、前記車両周囲の明るさが暗いと判定される場合、左右ピラー（５，７）のうち車両の運転席から近いピラーの近傍に表示される前記第１の表示部（１１）又は前記第２の表示部（１２）の表示位置も、前記第１の表示部（１１）においては前記第１表示位置（Ｐ１）より車両の運転席に近い第３表示位置（Ｐ３）に、前記第２の表示部（１２）においては前記第２表示位置（Ｐ２）より車両の運転席に近い第４表示位置（Ｐ４）に、変更してもよい。 Further, in the second aspect, which is subordinate to the first aspect, the display control unit (30) operates the vehicle among the left and right pillars (5, 7) when it is determined that the brightness around the vehicle is dark. The display position of the first display unit (11) or the second display unit (12) displayed in the vicinity of the pillar near the seat is also the first display position in the first display unit (11). The third display position (P3) closer to the driver's seat of the vehicle than (P1), and the fourth display position (P2) closer to the driver's seat of the vehicle than the second display position (P2) in the second display unit (12). It may be changed to P4).

第２の態様では、車両の運転席から近いピラーの近傍に表示される電子ミラー画像（撮像画像）を表示する表示部についても、車両周辺の明るさに応じて、位置を変更することができるため、運転席から近い方（左右方向の一方）の車両周辺確認においても負荷を軽減することができる。 In the second aspect, the position of the display unit that displays the electronic mirror image (captured image) displayed in the vicinity of the pillar near the driver's seat of the vehicle can also be changed according to the brightness around the vehicle. Therefore, the load can be reduced even when checking the vicinity of the vehicle closer to the driver's seat (one in the left-right direction).

また、第１の態様に従属する第２の態様において、前記表示制御部（３０）は、前記車両周囲が明るいと判定される場合、左右ピラー（５，７）のうち車両の運転席から離れたピラーの近傍に表示される前記第１の表示部（１１）又は前記第２の表示部（１２）の輝度を、もう一方の輝度より高くし、前記車両周囲の明るさが暗いと判定される場合、左右ピラー（５，７）のうち車両の運転席から離れたピラーの近傍に表示される前記第１の表示部（１１）又は前記第２の表示部（１２）の輝度を、もう一方の輝度と同じにしてもよい。 Further, in the second aspect subordinate to the first aspect, the display control unit (30) is separated from the driver's seat of the vehicle among the left and right pillars (5, 7) when it is determined that the surroundings of the vehicle are bright. The brightness of the first display unit (11) or the second display unit (12) displayed in the vicinity of the pillar is made higher than the brightness of the other, and it is determined that the brightness around the vehicle is dark. In this case, the brightness of the first display unit (11) or the second display unit (12) displayed in the vicinity of the pillars away from the driver's seat of the vehicle among the left and right pillars (5, 7) is already increased. It may be the same as one brightness.

第３の態様では、運転席から離れた位置に表示される電子ミラー画像（撮像画像）の輝度を高く設定するため、運転者から離れた画像を認識させやすくすることができる。 In the third aspect, since the brightness of the electronic mirror image (captured image) displayed at a position away from the driver's seat is set high, it is possible to easily recognize the image away from the driver.

また、本発明の車両用表示システムの第１の態様は、第１乃至第３のいずれかに記載の電子ミラー表示装置（１００ａ）と、車両に備わる被投影部材に投影することで運転者に虚像（Ｖ）を視認させる虚像表示部（２０）と、を備え、前記表示制御部（３０）は、前記虚像表示部（２０）の表示を制御し、前記車両周囲の明るさが暗いと判定される場合、前記虚像（Ｖ）を、前記車両周囲の明るさが明るい際の奥行方向の表示位置（Ｚ１）より運転者に近い奥行き方向の表示位置（Ｚ２）に表示させる。 A first aspect of the vehicle display system of the present invention is to project to the electronic mirror display device (100a) according to any one of the first to third aspects and a projected member provided on the vehicle to the driver. A virtual image display unit (20) for visually recognizing the virtual image (V) is provided, and the display control unit (30) controls the display of the virtual image display unit (20) and determines that the brightness around the vehicle is dark. If so, the virtual image (V) is displayed at a display position (Z2) in the depth direction closer to the driver than the display position (Z1) in the depth direction when the brightness around the vehicle is bright.

本発明では、運転席から離れた位置に表示されていた電子ミラー画像（撮像画像）の表示部は、暗い環境下では、運転席の近くに配置される。すなわち、電子ミラー画像（撮像画像）と運転者との距離が短くなるため、運転者の目の焦点は、近傍に合わせる頻度が多くなる。車両用表示システムの第１の態様では、虚像表示部が表示する虚像の表示位置を、暗い環境下では運転者に近づけるため、電子ミラー表示装置を視認する際の目の焦点の短縮に合わせることができ、車両用表示システム全体（電子ミラー表示装置が表示する電子ミラー画像と虚像表示部が表示する虚像）で、目の焦点の調整量を抑えることができ、運転者の負荷を軽減することが出来る。 In the present invention, the display unit of the electronic mirror image (captured image) displayed at a position away from the driver's seat is arranged near the driver's seat in a dark environment. That is, since the distance between the electronic mirror image (captured image) and the driver is shortened, the focus of the driver's eyes is often adjusted to the vicinity. In the first aspect of the vehicle display system, the display position of the virtual image displayed by the virtual image display unit is adjusted to shorten the focus of the eyes when visually recognizing the electronic mirror display device in order to bring the virtual image displayed closer to the driver in a dark environment. The entire vehicle display system (the electronic mirror image displayed by the electronic mirror display device and the virtual image displayed by the virtual image display unit) can reduce the amount of adjustment of the focus of the eyes and reduce the load on the driver. Can be done.

本発明の実施形態における車両用表示システムのシステム構成図である。It is a system block diagram of the display system for a vehicle in embodiment of this invention. 図２（Ａ）〜図２（Ｄ）は、上記実施形態の車両用表示システムの、電子ミラー表示部としての表示部（電子ミラー表示装置）及び虚像表示部としてのヘッドアップディスプレイ（ＨＵＤ）装置各々について、表示変更を実施する場合の一例を説明するための説明図である。2 (A) to 2 (D) show a display unit (electronic mirror display device) as an electronic mirror display unit and a head-up display (HUD) device as a virtual image display unit of the vehicle display system of the above embodiment. It is explanatory drawing for demonstrating an example in the case of carrying out display change for each.

以下に説明する最良の実施形態は、本発明を容易に理解するために用いられている。従って、当業者は、本発明が、以下に説明される実施形態によって不当に限定されないことを留意すべきである。 The best embodiments described below have been used to facilitate understanding of the present invention. Therefore, one of ordinary skill in the art should note that the present invention is not unreasonably limited by the embodiments described below.

図１は、本実施形態の車両用表示システム１００のシステム構成を示すブロック図である。車両１に備わる車両用表示システム１００は、電子ミラー表示部１０と、虚像表示部（ＨＵＤ装置）２０と、表示制御部３０と、撮像画像取得部４０と、明るさ情報取得部５０と、を備えている。なお、虚像表示部２０は、省略されてもよい。この場合、電子ミラー表示部１０と、表示制御部３０と、撮像画像取得部４０と、明るさ情報取得部５０と、により、電子ミラー表示装置１００ａを構成する。 FIG. 1 is a block diagram showing a system configuration of the vehicle display system 100 of the present embodiment. The vehicle display system 100 provided in the vehicle 1 includes an electronic mirror display unit 10, a virtual image display unit (HUD device) 20, a display control unit 30, a captured image acquisition unit 40, and a brightness information acquisition unit 50. I have. The virtual image display unit 20 may be omitted. In this case, the electronic mirror display unit 10, the display control unit 30, the captured image acquisition unit 40, and the brightness information acquisition unit 50 constitute the electronic mirror display device 100a.

図１において、本実施形態の車両用表示システム１００は、通信インターフェース２００に通信可能に連結されている。通信インターフェース２００は、例えば、ＵＳＢポート、シリアルポート、パラレルポート、ＯＢＤＩＩ、及び／又は他の任意の適切な有線通信ポートなどの有線通信機能を含むことができる。車両１からのデータケーブルは、車両用表示システム１００に情報を伝達するために、通信インターフェース２００を介して、車両用表示システム１００の撮像画像取得部４０，明るさ情報取得部５０に連結される。なお、他の実施形態では、通信インターフェース２００は、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）通信プロトコル、ＩＥＥＥ８０２．１１プロトコル、ＩＥＥＥ８０２．１６プロトコル、共有無線アクセスプロトコル、ワイヤレスＵＳＢプロトコル、及び／又は他の任意の適切な無線電信技術を用いた無線通信インターフェースを含むことができる。通信インターフェース２００には、車両１の左後側方を撮像するカメラと、車両１の右後側方を撮像するカメラと、を有し、左右後側方のそれぞれの撮像データを出力する撮像部２１０と、車両１が位置する地域の標準電波を受信することで時刻を取得可能な時刻取得部２２０と、ＧＰＳ等により車両１の位置情報を取得する位置情報取得部２３０と、車両１の周囲の照度を検出する照度センサ２４０と、車両１に設けられた車両ＥＣＵ、車載カメラ、センサ、他の車載機器、携帯機器、他車両、路上の通信インフラ、などが情報を授受可能に接続される。車両用表示システム１００は、通信インターフェース２００に接続された撮像画像取得部４０、明るさ情報取得部５０から各種情報を入力し、電子ミラー表示部１０及び虚像表示部２０の表示に反映する。 In FIG. 1, the vehicle display system 100 of the present embodiment is communicably connected to the communication interface 200. The communication interface 200 can include wired communication functions such as, for example, a USB port, a serial port, a parallel port, an OBDII, and / or any other suitable wired communication port. The data cable from the vehicle 1 is connected to the captured image acquisition unit 40 and the brightness information acquisition unit 50 of the vehicle display system 100 via the communication interface 200 in order to transmit information to the vehicle display system 100. .. In other embodiments, the communication interface 200 may include, for example, the Bluetooth® communication protocol, the 802.11 protocol, the 802.16 protocol, the shared wireless access protocol, the wireless USB protocol, and / or any other suitable. It can include a wireless communication interface using various wireless communication technologies. The communication interface 200 includes a camera that images the left rear side of the vehicle 1 and a camera that images the right rear side of the vehicle 1, and an imaging unit that outputs the respective imaging data of the left and right rear sides. 210, a time acquisition unit 220 that can acquire the time by receiving standard radio waves in the area where the vehicle 1 is located, a position information acquisition unit 230 that acquires the position information of the vehicle 1 by GPS or the like, and the surroundings of the vehicle 1. The illuminance sensor 240 that detects the illuminance of the vehicle and the vehicle ECU, in-vehicle camera, sensor, other in-vehicle device, mobile device, other vehicle, communication infrastructure on the road, etc. provided in the vehicle 1 are connected so as to be able to exchange information. .. The vehicle display system 100 inputs various information from the captured image acquisition unit 40 and the brightness information acquisition unit 50 connected to the communication interface 200, and reflects the information on the display of the electronic mirror display unit 10 and the virtual image display unit 20.

表示制御部３０は、明るさ判定部３１と、表示位置調整部３２と、駆動部３３と、を有する。表示制御部３０は、撮像画像取得部４０及び明るさ情報取得部５０から取得した情報に基づいて、表示データを生成し、この表示データに基づいて電子ミラー表示部１０（第１、第２の表示部１１，１２）及び虚像表示部２０を駆動する。特に、本実施形態における表示制御部３０は、車両１の周囲の環境の明るさに応じて、第１、第２の表示部１１，１２、及び虚像表示部２０が表示する虚像Ｖの位置を調整することが可能である。 The display control unit 30 includes a brightness determination unit 31, a display position adjustment unit 32, and a drive unit 33. The display control unit 30 generates display data based on the information acquired from the captured image acquisition unit 40 and the brightness information acquisition unit 50, and the electronic mirror display unit 10 (first and second) is based on the display data. It drives the display units 11 and 12) and the virtual image display unit 20. In particular, the display control unit 30 in the present embodiment determines the position of the virtual image V displayed by the first and second display units 11 and 12 and the virtual image display unit 20 according to the brightness of the environment around the vehicle 1. It is possible to adjust.

明るさ判定部３１は、明るさ情報取得部５０が照度センサ２４０から取得した照度が示す明るさＬが、表示位置を変更する条件を満たしているかを判定する。具体的には、明るさ判定部３１は、明るさＬが予め定めた閾値Ｌｔｈ未満であるか否かを判定し、この判定結果を表示位置調整部３２に出力する。 The brightness determination unit 31 determines whether the brightness L indicated by the illuminance acquired by the brightness information acquisition unit 50 from the illuminance sensor 240 satisfies the condition for changing the display position. Specifically, the brightness determination unit 31 determines whether or not the brightness L is less than a predetermined threshold value Lth, and outputs this determination result to the display position adjustment unit 32.

表示位置調整部３２は、明るさ判定部３１からの判定結果に基づき、電子ミラー表示部１０における第１、第２の表示部１１，１２の表示位置と、虚像表示部２０における虚像Ｖの奥行き方向の表示位置Ｚを調整する表示データを生成し、該表示データを駆動部３３に出力する。具体的には、明るさ判定部３１が、周囲の明るさＬが予め定めた閾値Ｌｔｈ以上である（周囲が明るい環境である）と判定した場合、第１の表示部１１を、車両１の左ピラー５に近い表示位置Ｐ１に表示させ、第２の表示部１２を、車両１の右ピラー７に近い表示位置Ｐ２に表示させ、虚像Ｖを、奥行き方向の表示位置Ｚ１に表示させる。一方、周囲の明るさＬが予め定めた閾値Ｌｔｈ未満である（周囲が暗い環境である）と判定した場合、第１の表示部１１を、車両１の左ピラー５に近い表示位置Ｐ１から車両１のステアリング４に近い表示位置Ｐ３に移動させ、第２の表示部１２を、車両１の右ピラー７に近い表示位置Ｐ２から車両１のステアリング４に近い表示位置Ｐ４に移動させ、虚像Ｖを、奥行き方向の表示位置Ｚ１から運転者ＯＰに近い奥行き方向の表示位置Ｚ２に移動させるように表示データを生成する。すなわち、表示位置調整部３２は、明るい環境では、電子ミラー表示部１０における第１，第２の表示部１１，１２を、左右のピラー５，７（言い換えると、左右の窓６，８）に近い表示位置Ｐ１，Ｐ２に調整し、虚像表示部２０における虚像Ｖを、奥行き方向の奥側（言い換えると、運転者ＯＰから離れた）の表示位置Ｚ１に調整し、暗い環境では、電子ミラー表示部１０における第１，第２の表示部１１，１２を、左右のピラー５，７（言い換えると、左右の窓６，８）から離れた表示位置Ｐ３，Ｐ４に調整し、虚像表示部２０における虚像Ｖを、奥行き方向の手前側（言い換えると、運転者ＯＰに近い）の表示位置Ｚ２に調整する。 The display position adjusting unit 32 determines the display positions of the first and second display units 11 and 12 on the electronic mirror display unit 10 and the depth of the virtual image V on the virtual image display unit 20 based on the determination result from the brightness determination unit 31. Display data for adjusting the display position Z in the direction is generated, and the display data is output to the drive unit 33. Specifically, when the brightness determination unit 31 determines that the ambient brightness L is equal to or higher than a predetermined threshold value Lth (the surrounding environment is bright), the first display unit 11 is set to the vehicle 1. The display is displayed at the display position P1 near the left pillar 5, the second display unit 12 is displayed at the display position P2 near the right pillar 7 of the vehicle 1, and the virtual image V is displayed at the display position Z1 in the depth direction. On the other hand, when it is determined that the ambient brightness L is less than the predetermined threshold Lth (the surroundings are dark), the first display unit 11 is displayed from the display position P1 near the left pillar 5 of the vehicle 1. The display position P3 close to the steering wheel 4 of 1 is moved, the second display unit 12 is moved from the display position P2 close to the right pillar 7 of the vehicle 1 to the display position P4 close to the steering wheel 4 of the vehicle 1, and the virtual image V is moved. , Display data is generated so as to move from the display position Z1 in the depth direction to the display position Z2 in the depth direction close to the driver OP. That is, in a bright environment, the display position adjusting unit 32 uses the first and second display units 11 and 12 of the electronic mirror display unit 10 on the left and right pillars 5 and 7 (in other words, the left and right windows 6 and 8). Adjust to closer display positions P1 and P2, adjust the virtual image V in the virtual image display unit 20 to the display position Z1 on the back side in the depth direction (in other words, away from the driver OP), and display in an electronic mirror in a dark environment. The first and second display units 11 and 12 in the unit 10 are adjusted to display positions P3 and P4 away from the left and right pillars 5 and 7 (in other words, the left and right windows 6 and 8), and the virtual image display unit 20 is used. The virtual image V is adjusted to the display position Z2 on the front side in the depth direction (in other words, close to the driver OP).

上記実施形態においては、明るさ判定部３１は、明るさ情報取得部５０により検出された照度に応じて周囲の明るさを判定していたが、これに限らず、現在の位置と現在の時刻に基づき周囲の明るさＬを判定してもよい。詳しくは、車両１の通信インターフェース２００には、図１に示すように、さらに、現在の時刻を検出する時刻取得部２２０と、車両１の位置情報を取得する位置情報取得部２３０と、が接続され、虚像表示部２０は、撮像画像取得部４０を介して、現在の時刻及び車両１の位置情報を取得する。位置情報取得部２３０は、ＧＮＳＳ(Global Navigation Satellite System)衛生から随時ＧＮＳＳ情報を取得する。明るさ判定部３１のメモリ（図示略）には、車両１の位置（例えば国、都道府県、区市町村）及び時刻に明るさが関連づけられたデータテーブルが記憶されている。そして、明るさ判定部３１は、記憶されたデータテーブルを参照しつつ、位置情報取得部２３０により取得された車両１の位置と時刻取得部２２０により検出された時刻に基づき現在の周囲の明るさを判定する。この時刻には年月日に係る情報が付加されてもよい。また、明るさ判定部３１は、インターネットを介して天気等の情報を取得し、その取得した情報に基づき周囲の明るさを判定してもよい。 In the above embodiment, the brightness determination unit 31 determines the ambient brightness according to the illuminance detected by the brightness information acquisition unit 50, but the present position and the current time are not limited to this. The ambient brightness L may be determined based on the above. Specifically, as shown in FIG. 1, the communication interface 200 of the vehicle 1 is further connected with a time acquisition unit 220 for detecting the current time and a position information acquisition unit 230 for acquiring the position information of the vehicle 1. Then, the virtual image display unit 20 acquires the current time and the position information of the vehicle 1 via the captured image acquisition unit 40. The position information acquisition unit 230 acquires GNSS information from GNSS (Global Navigation Satellite System) hygiene at any time. In the memory (not shown) of the brightness determination unit 31, a data table in which the brightness is associated with the position (for example, country, prefecture, ward, city, town, or village) and time of the vehicle 1 is stored. Then, the brightness determination unit 31 refers to the stored data table, and based on the position of the vehicle 1 acquired by the position information acquisition unit 230 and the time detected by the time acquisition unit 220, the current ambient brightness. To judge. Information on the date may be added to this time. Further, the brightness determination unit 31 may acquire information such as the weather via the Internet and determine the brightness of the surroundings based on the acquired information.

また、明るさ判定部３１は、時刻取得部２２０により検出された時刻に基づき、現在が昼、夜の何れであるかを判別してもよい。例えば、現在の時刻が昼の時間帯（例えば６時〜１７時）である場合には昼であると判別し、夜の時間帯（例えば１７時〜６時）である場合には夜であると判別してもよい。昼の時間帯及び夜の時間帯は、季節に応じて変更されてもよいし、視認者により調整されてもよい。また、明るさ判定部３１は、明るさ情報取得部５０から取得した照度と、位置情報取得部２３０により取得された車両１の位置と時刻取得部２２０により検出された年月日及び時刻とに基づき、判定の精度を向上させてもよい。詳しくは、明るさ判定部３１は、明るさ情報取得部５０が検出した照度に基づく最新の明るさＬが閾値Ｌｔｈ未満であり、かつ現在が年月日や時刻から夜である場合、最新の明るさＬに基づく判定を行い、一方、明るさ情報取得部５０が検出した照度に基づく最新の明るさＬが閾値Ｌｔｈ未満であり、かつ現在が年月日や時刻から昼である場合、車両１が一時的に暗い環境を走行しているに過ぎないと判定し、以前の状態を保持するような判定を行う。これにより、例えば、昼に車両１が構造物の影に入り、明るさＬが一時的に閾値Ｌｔｈ未満となった場合であっても表示位置が維持され、短時間で表示位置が切り替わることが抑制される。 Further, the brightness determination unit 31 may determine whether the current time is daytime or nighttime based on the time detected by the time acquisition unit 220. For example, if the current time is in the daytime zone (for example, 6:00 to 17:00), it is determined to be noon, and if it is in the night time zone (for example, 17:00 to 6:00), it is night. May be determined. The daytime and nighttime hours may be changed according to the season or adjusted by the viewer. Further, the brightness determination unit 31 sets the illuminance acquired from the brightness information acquisition unit 50, the position of the vehicle 1 acquired by the position information acquisition unit 230, and the date and time detected by the time acquisition unit 220. Based on this, the accuracy of the determination may be improved. Specifically, the brightness determination unit 31 is the latest when the latest brightness L based on the illuminance detected by the brightness information acquisition unit 50 is less than the threshold Lth and the current time is night from the date or time. When the determination is made based on the brightness L, while the latest brightness L based on the illuminance detected by the brightness information acquisition unit 50 is less than the threshold Lth and the current time is noon from the date or time, the vehicle It is determined that 1 is merely traveling in a dark environment temporarily, and a determination is made so as to maintain the previous state. As a result, for example, even when the vehicle 1 enters the shadow of the structure in the daytime and the brightness L temporarily falls below the threshold value Lth, the display position is maintained and the display position is switched in a short time. It is suppressed.

明るさ判定部３１は、明るさ情報取得部５０が検出した照度に基づく最新の明るさＬが閾値Ｌｔｈ以上であり、かつ現在が年月日や時刻から昼である場合、最新の明るさＬに基づく判定を行い、一方、明るさ情報取得部５０が検出した照度に基づく最新の明るさＬが閾値Ｌｔｈ以上であり、かつ現在が年月日や時刻から夜である場合、車両１が一時的に明るい環境を走行しているに過ぎないと判定し、以前の状態を保持するような判定を行ってもよい。 The brightness determination unit 31 has the latest brightness L when the latest brightness L based on the illuminance detected by the brightness information acquisition unit 50 is equal to or greater than the threshold Lth and the current date is daytime from the date or time. On the other hand, if the latest brightness L based on the illuminance detected by the brightness information acquisition unit 50 is equal to or greater than the threshold Lth and the current date is night from the date or time, the vehicle 1 is temporarily set. It may be determined that the vehicle is merely traveling in a bright environment, and a determination may be made to maintain the previous state.

図２（Ａ）〜図２（Ｄ）は、本実施形態の車両用表示システム１００の、電子ミラー表示部１０（電子ミラー表示装置）及び虚像表示部２０（ＨＵＤ装置）の各々について、表示変更を実施する場合の一例を説明するための説明図である。 2 (A) to 2 (D) show display changes for each of the electronic mirror display unit 10 (electronic mirror display device) and the virtual image display unit 20 (HUD device) of the vehicle display system 100 of the present embodiment. It is explanatory drawing for demonstrating an example in the case of carrying out.

図２（Ａ）では、例えば、日が暮れる直前（明るい環境）において、車両１が、直線状の道路を走行している。 In FIG. 2A, for example, the vehicle 1 is traveling on a straight road just before sunset (a bright environment).

電子ミラー表示部１０は、第１、第２の表示部１１，１２が設けられている。第１、第２の表示部１１，１２は、ウインドシールド２の下側のインストルメントパネル３に設けられており、例えば、液晶表示装置等で構成される。第１、第２の表示部１１，１２は、車両１の後方及び後側方を確認するサイドミラーを含む車両用ミラーの役割を果たし、かつ、車両に備わる撮像部による撮像画像を表示するモニターとしての機能を有する電子ミラー（電子ドアミラー）である。具体的には、第１、第２の表示部１１，１２は、それぞれ、左用、右用のサイドミラーとして機能する電子ミラー（左用電子サイドミラー、右用電子サイドミラー）である。図２（Ａ）では、第１、第２の表示部（具体的には、左用電子サイドミラー、右用電子サイドミラー）１１，１２は、それぞれ、インストルメントパネル３の左右の端部に配置されている。 The electronic mirror display unit 10 is provided with first and second display units 11 and 12. The first and second display units 11 and 12 are provided on the instrument panel 3 below the windshield 2, and are composed of, for example, a liquid crystal display device or the like. The first and second display units 11 and 12 serve as vehicle mirrors including side mirrors for confirming the rear and rear sides of the vehicle 1, and are monitors that display images captured by the image pickup unit provided in the vehicle. It is an electronic mirror (electronic door mirror) having the function of. Specifically, the first and second display units 11 and 12 are electronic mirrors (left electronic side mirrors and right electronic side mirrors) that function as left and right side mirrors, respectively. In FIG. 2A, the first and second display units (specifically, the left electronic side mirror and the right electronic side mirror) 11 and 12 are arranged at the left and right ends of the instrument panel 3, respectively. Has been done.

図２（Ｂ）は、図２（Ａ）同様、日が暮れる直前（明るい環境）における虚像表示部２０が表示する虚像Ｖの位置を示す図である。虚像表示部２０は、画像（画像の表示光）を、被投影部材（透光部材）としてのウインドシールド（フロントガラス）２に投影し、これによって、ハンドル（例えばステアリングホイール）４を握る運転者ＯＰの前方の表示位置Ｚ１に、虚像Ｖを結像する。なお、被投影部材としては、ウインドシールド２以外に、コンバイナ等、種々の部材を用いることができる。 FIG. 2B is a diagram showing the position of the virtual image V displayed by the virtual image display unit 20 immediately before sunset (bright environment), as in FIG. 2A. The virtual image display unit 20 projects an image (display light of the image) onto a windshield (windshield) 2 as a projected member (transmissive member), whereby the driver holding the steering wheel (for example, steering wheel) 4. A virtual image V is formed at the display position Z1 in front of the OP. As the projected member, various members such as a combiner can be used in addition to the windshield 2.

次に、図２（Ｃ）を参照する。図２（Ｃ）では、例えば、日が落ちた夜（暗い環境）において、車両１が、直線状の道路を走行している。昼間（明るい環境）では、運転者ＯＰの注視点（代表的な視点位置）は、比較的遠方にあり、左右の視野（車両１の幅方向の視界の広がり）も比較的広いが、夜になる（暗くなる）と、運転者ＯＰの注視点は、車両の前照灯の光が照射されている範囲の付近に集まる傾向があり、したがって、運転者ＯＰの注視点は、昼の場合に比べて、車両１に近い範囲に移動し、また、左右の視野（視野角）も狭くなる。 Next, refer to FIG. 2 (C). In FIG. 2C, for example, the vehicle 1 is traveling on a straight road at night when the sun goes down (dark environment). In the daytime (bright environment), the driver OP's gaze point (typical viewpoint position) is relatively far away, and the left and right fields of view (expansion of the field of view in the width direction of the vehicle 1) are relatively wide, but at night. When it becomes (darker), the gaze point of the driver OP tends to gather near the range illuminated by the headlight of the vehicle, and therefore the gaze point of the driver OP tends to gather in the daytime. In comparison, the vehicle moves to a range closer to the vehicle 1, and the left and right visual fields (viewing angles) are also narrowed.

そこで、このような運転者ＯＰの視野範囲の変更に対応（適応）するように、車両用表示システムでは、虚像表示部２０が表示する虚像Ｖの表示距離を短縮し、また、電子ミラー表示部１０としての第１、第２の表示部（左用電子サイドミラー、右用電子サイドミラー）１１，１２の各々を、ステアリング４に近づくように（言い換えれば、各表示部間の間隔が短くなるように）移動させる。これによって、運転者ＯＰは、各表示部１１，１２，及び虚像Ｖを見る場合の、視点移動の負担が軽減され、視覚的な利便性が向上する。なお、虚像Ｖの表示距離は、例えば、所定の位置（例えば運転者ＯＰの視点の位置）を基準とした、虚像Ｖまでの距離ということができる。 Therefore, in order to respond (adapt) to such a change in the viewing range of the driver OP, in the vehicle display system, the display distance of the virtual image V displayed by the virtual image display unit 20 is shortened, and the electronic mirror display unit is also used. The first and second display units (left electronic side mirror, right electronic side mirror) 11 and 12 as 10 should be brought closer to the steering wheel 4 (in other words, the distance between the display units should be shortened). To) move. As a result, the driver OP reduces the burden of moving the viewpoint when viewing the display units 11, 12, and the virtual image V, and improves visual convenience. The display distance of the virtual image V can be said to be, for example, the distance to the virtual image V based on a predetermined position (for example, the position of the viewpoint of the driver OP).

電子ミラー表示部１０は、第１、第２の表示部（左用電子サイドミラー、右用電子サイドミラー）１１，１２の移動を行う。第１の表示部１１は、位置Ｐ１から位置Ｐ３に移動され、また、第２の表示部１２は、位置Ｐ２から位置Ｐ４へと移動されている。なお、図２（Ｃ）において、第１、第２の表示部１１，１２の移動が矢印で示されている。 The electronic mirror display unit 10 moves the first and second display units (left electronic side mirror, right electronic side mirror) 11 and 12. The first display unit 11 is moved from the position P1 to the position P3, and the second display unit 12 is moved from the position P2 to the position P4. In FIG. 2C, the movements of the first and second display units 11 and 12 are indicated by arrows.

次に、図２（Ｄ）を参照する。図２（Ｄ）では、虚像Ｖを、奥行き方向の表示位置Ｚ１から、奥行き方向の表示位置Ｚ２へと移動する。言い換えれば、虚像表示部２０の表示としての虚像Ｖが、運転者ＯＰに近づくように移動する。 Next, refer to FIG. 2 (D). In FIG. 2D, the virtual image V is moved from the display position Z1 in the depth direction to the display position Z2 in the depth direction. In other words, the virtual image V as a display of the virtual image display unit 20 moves so as to approach the driver OP.

以上、本発明をその実施形態を用いて説明したが、本発明はこれらの実施形態に限定されるものではなく、種々、変形、応用が可能である。上記実施形態では、昼から夜に移行したときに表示位置の変更が実施されている（言い換えれば、周囲環境の変化に対応して実施されている）が、これに限定されるものではない。例えば、前照灯がオン／オフ（前照灯の動作情報）に切り換えられたときには、周囲環境が変化したと推定し、表示位置の変更を実行してもよい。 Although the present invention has been described above using the embodiments thereof, the present invention is not limited to these embodiments, and various modifications and applications are possible. In the above embodiment, the display position is changed (in other words, it is carried out in response to a change in the surrounding environment) when shifting from day to night, but the present invention is not limited to this. For example, when the headlight is switched on / off (operation information of the headlight), it may be estimated that the surrounding environment has changed and the display position may be changed.

また、第１、第２の表示部１１，１２は、共通の表示装置でなくてもよい。すなわち、電子ミラー表示部１０は、第１の表示部１１を有する第１の表示パネルと、第２の表示部１２を有する第２の表示パネルと、で構成されてもよい。また、第１の表示部１１（第２の表示部１２）を、左ピラー５（右ピラー７）付近の表示位置Ｐ１（表示位置Ｐ２）に表示する表示パネルと、左ピラー５（右ピラー７）から離れた表示位置Ｐ３（表示位置Ｐ４）に表示する表示パネルと、を別々に設けてもよい。 Further, the first and second display units 11 and 12 do not have to be common display devices. That is, the electronic mirror display unit 10 may be composed of a first display panel having the first display unit 11 and a second display panel having the second display unit 12. Further, a display panel for displaying the first display unit 11 (second display unit 12) at the display position P1 (display position P2) near the left pillar 5 (right pillar 7) and the left pillar 5 (right pillar 7). ) May be provided separately from the display panel for displaying at the display position P3 (display position P4).

また、第１、第２の表示部１１，１２は、双方とも表示が移動する必要はなく、車両の運転席から近いピラーの近傍に表示される第１の表示部１１又は第２の表示部１２（上記実施形態では、第２の表示部１２）は、明るさに応じて表示位置が変化しなくてもよい。 Further, the displays of the first and second display units 11 and 12 do not need to be moved, and the first display unit 11 or the second display unit displayed in the vicinity of the pillar near the driver's seat of the vehicle is displayed. The display position of the 12 (second display unit 12 in the above embodiment) does not have to change according to the brightness.

本発明は、上述の例示的な実施形態に限定されず、また、当業者は、上述の例示的な実施形態を特許請求の範囲に含まれる範囲まで、容易に変更することができるであろう。 The present invention is not limited to the above-mentioned exemplary embodiments, and those skilled in the art will be able to easily modify the above-mentioned exemplary embodiments to the extent included in the claims. ..

１：車両
２：ウインドシールド
３：インストルメントパネル
４：ステアリング
５：左ピラー
６：窓
７：右ピラー
８：窓
１０：電子ミラー表示部
１１：第１の表示部
１２：第２の表示部
２０：虚像表示部
３０：表示制御部
３１：明るさ判定部
３２：表示位置調整部
３３：駆動部
４０：撮像画像取得部
５０：明るさ情報取得部
１００：車両用表示システム
１００ａ：電子ミラー表示装置
２００：通信インターフェース
２１０：撮像部
２２０：時刻取得部
２３０：位置情報取得部
２４０：照度センサ
Ｌ：明るさ
Ｌｔｈ：閾値
ＯＰ：運転者
Ｐ１：表示位置
Ｖ：虚像 1: Vehicle 2: Windshield 3: Instrument panel 4: Steering 5: Left pillar 6: Window 7: Right pillar 8: Window 10: Electronic mirror display 11: First display 12: Second display 20 : Virtual image display unit 30: Display control unit 31: Brightness determination unit 32: Display position adjustment unit 33: Drive unit 40: Captured image acquisition unit 50: Brightness information acquisition unit 100: Vehicle display system 100a: Electronic mirror display device 200: Communication interface 210: Imaging unit 220: Time acquisition unit 230: Position information acquisition unit 240: Illuminance sensor L: Brightness Lth: Threshold OP: Driver P1: Display position V: Virtual image

Claims

An image acquisition unit (40) that acquires an image of the left rear side and the right rear side of the vehicle, and an image acquisition unit (40).
A first display unit (11) for displaying a left captured image, which is a left rear side captured image acquired from the captured image acquisition unit (40), and a first display unit (11).
A second display unit (12) that displays a right captured image, which is a captured image on the right rear side acquired from the captured image acquisition unit (40), and a second display unit (12).
A display control unit (30) that controls the first display unit (11) and the second display unit (12),
It is equipped with a brightness information acquisition unit (50) that acquires brightness information that can determine the brightness around the vehicle.
When the display control unit (30) determines that the brightness around the vehicle is bright based on the brightness information acquired by the brightness information acquisition unit (50), the display control unit (30) determines that the brightness around the vehicle is bright, the first display unit (11). ) Is displayed at the first display position (P1) near the left pillar (5) of the vehicle, and the second display unit (12) is displayed at the second display position (P2) near the right pillar (7) of the vehicle. When it is determined that the brightness around the vehicle is dark, the first display unit (11) or the first display unit (11) displayed near the pillar away from the driver's seat of the vehicle among the left and right pillars (5, 7). The display position of the display unit (12) of 2 is set to the third display position (P3) closer to the driver's seat of the vehicle than the first display position (P1) in the first display unit (11). The display unit (12) is changed from the second display position (P2) to the fourth display position (P4) closer to the driver's seat of the vehicle.
An electronic mirror display device characterized by this.

When it is determined that the brightness around the vehicle is dark, the display control unit (30) displays the first display of the left and right pillars (5, 7) near the pillar near the driver's seat of the vehicle. The display position of the unit (11) or the second display unit (12) is also the third display position (11) closer to the driver's seat of the vehicle than the first display position (P1) in the first display unit (11). In P3), the second display unit (12) is changed to a fourth display position (P4) closer to the driver's seat of the vehicle than the second display position (P2).
The electronic mirror display device according to claim 1.

When it is determined that the brightness around the vehicle is bright, the display control unit (30) displays the first left and right pillars (5, 7) in the vicinity of the pillar away from the driver's seat of the vehicle. When the brightness of the display unit (11) or the second display unit (12) is made higher than the brightness of the other, and it is determined that the brightness around the vehicle is dark, the left and right pillars (5, 7) The brightness of the first display unit (11) or the second display unit (12) displayed in the vicinity of the pillar away from the driver's seat of the vehicle is made the same as the brightness of the other display unit (12).
The electronic mirror display device according to claim 1 or 2.

The electronic mirror display device (100a) according to any one of claims 1 to 3.
It is equipped with a virtual image display unit (20) that allows the driver to visually recognize the virtual image (V) by projecting it onto a projected member provided on the vehicle.
The display control unit (30) controls the display of the virtual image display unit (20), and when it is determined that the brightness around the vehicle is dark, the virtual image (V) is changed to the brightness around the vehicle. Display at the display position (Z2) in the depth direction closer to the driver than the display position (Z1) in the depth direction when it is bright.
A display system for vehicles that features this.