WO2021065617A1 - 車両用表示システム及び車両 - Google Patents

車両用表示システム及び車両 Download PDF

Info

Publication number
WO2021065617A1
WO2021065617A1 PCT/JP2020/035783 JP2020035783W WO2021065617A1 WO 2021065617 A1 WO2021065617 A1 WO 2021065617A1 JP 2020035783 W JP2020035783 W JP 2020035783W WO 2021065617 A1 WO2021065617 A1 WO 2021065617A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
occupant
control unit
display
hud
Prior art date
Application number
PCT/JP2020/035783
Other languages
English (en)
French (fr)
Inventor
政昭 中林
佳典 柴田
美紗子 神谷
滝井　直樹
Original Assignee
株式会社小糸製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社小糸製作所 filed Critical 株式会社小糸製作所
Priority to US17/765,229 priority Critical patent/US20220350155A1/en
Priority to JP2021550656A priority patent/JPWO2021065617A1/ja
Priority to EP20871876.7A priority patent/EP4039519B1/en
Priority to CN202080061107.0A priority patent/CN114302828A/zh
Publication of WO2021065617A1 publication Critical patent/WO2021065617A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60—Instruments characterised by their location or relative disposition in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/02—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments
    • B60Q1/04—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights
    • B60Q1/06—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights adjustable, e.g. remotely-controlled from inside vehicle
    • B60Q1/08—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights adjustable, e.g. remotely-controlled from inside vehicle automatically
    • B60Q1/085—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights adjustable, e.g. remotely-controlled from inside vehicle automatically due to special conditions, e.g. adverse weather, type of road, badly illuminated road signs or potential dangers
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/002—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to project the image of a two-dimensional display, such as an array of light emitting or modulating elements or a CRT
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/177—Augmented reality
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/33—Illumination features
    • B60K2360/334—Projection means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77—Instrument locations other than the dashboard
    • B60K2360/797—Instrument locations other than the dashboard at the vehicle exterior
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00—Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/40—Indexing codes relating to other road users or special conditions
    • B60Q2300/45—Special conditions, e.g. pedestrians, road signs or potential dangers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2400/00—Special features or arrangements of exterior signal lamps for vehicles
    • B60Q2400/50—Projected symbol or information, e.g. onto the road or car body
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0185—Displaying image at variable distance
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0464—Positioning
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications

Definitions

  • This disclosure relates to a vehicle display system and a vehicle equipped with the vehicle display system.
  • Japanese Patent Application Laid-Open No. 2016-55691 uses a road surface drawing device to irradiate a road surface with a light pattern to the driver (occupant) himself or another person (object) such as a pedestrian or an oncoming vehicle.
  • a vehicle display system that notifies and warns of vehicle information.
  • this vehicle display system notifies and warns the driver of vehicle information by projecting a predetermined image onto the windshield of the vehicle using a head-up display (HUD) device. ..
  • HUD head-up display
  • the driver recognizes a predetermined image projected on the windshield or the like of the vehicle as a virtual image formed at a predetermined position in front of the windshield or the like.
  • the present disclosure includes a vehicle display system capable of improving the visibility of a occupant with respect to a light pattern irradiated on a road surface and a predetermined image displayed toward the occupant, and a vehicle provided with the vehicle display system.
  • the purpose is to provide.
  • the vehicle display system of one aspect of the present disclosure is provided in the vehicle.
  • a first display device configured to emit a light pattern toward the road surface outside the vehicle.
  • a second display device located inside the vehicle and configured to display the predetermined image toward the occupants of the vehicle so that the predetermined image is superimposed on the real space outside the vehicle.
  • It includes a first display device and a control unit configured to control the second display device.
  • the control unit matches the distance from the occupant to the predetermined image and the distance from the occupant to the light pattern.
  • the occupant since the distance from the occupant to the predetermined image and the distance from the occupant to the light pattern match, the occupant can simultaneously grasp the information shown by the predetermined image and the information shown by the light pattern. it can. That is, it is possible to improve the visibility of the occupant with respect to the light pattern and the predetermined image.
  • the distances match means that the range of the distance at which the predetermined image is displayed and the range of the distance at which the light pattern is displayed overlap at least partially in the front-rear direction of the vehicle.
  • the range of the distance at which a predetermined image is displayed is the display position in the case of a predetermined image displayed in a plane, and the display distance in the case of a predetermined image displayed in three dimensions. The range. Further, if the occupant can visually recognize the predetermined image and the light pattern without changing the focal length, the display distance range of the predetermined image and the display distance range of the light pattern do not overlap in the front-rear direction of the vehicle. May be good.
  • the display distance range of the predetermined image and the display distance range of the light pattern do not overlap, but the predetermined distance. If the deviation is about 10%, it is included in the case where the distances match.
  • displaying both means that both a predetermined image and an optical pattern are displayed at a certain point in time. Therefore, there is a case where the display periods of the predetermined image and the optical pattern partially overlap even though the display timings are different.
  • a vehicle capable of improving the visibility of the occupant with respect to the light pattern irradiated on the road surface and the predetermined image displayed toward the occupant is provided.
  • the vehicle display system and the vehicle display system capable of improving the visibility of the occupant with respect to the light pattern irradiated on the road surface and the predetermined image displayed toward the occupant are provided.
  • Vehicles can be provided.
  • FIG. 1 is a front view of the vehicle 1 on which the vehicle system 2 is mounted.
  • FIG. 2 is a block diagram of the vehicle system 2.
  • the vehicle 1 is a vehicle (automobile) capable of traveling in the automatic driving mode.
  • the vehicle system 2 includes a vehicle control unit 3, a vehicle display system 4 (hereinafter, simply referred to as “display system 4”), a sensor 5, a camera 6, and a radar 7. .. Further, the vehicle system 2 includes an HMI (Human Machine Interface) 8, a GPS (Global Positioning System) 9, a wireless communication unit 10, a storage device 11, a steering actuator 12, a steering actuator 13, and a brake actuator 14. , A brake device 15, an accelerator actuator 16, and an accelerator device 17.
  • HMI Human Machine Interface
  • GPS Global Positioning System
  • the vehicle control unit 3 is configured to control the running of the vehicle 1.
  • the vehicle control unit 3 is composed of, for example, at least one electronic control unit (ECU: Electronic Control Unit).
  • the electronic control unit includes a computer system including one or more processors and one or more memories (for example, SoC (System on a Chip) or the like), and an electronic circuit composed of active elements such as transistors and passive elements.
  • the processor includes, for example, at least one of a CPU (Central Processing Unit), an MPU (Micro Processing Unit), a GPU (Graphics Processing Unit), and a TPU (Tensor Processing Unit).
  • the CPU may be composed of a plurality of CPU cores.
  • the GPU may be composed of a plurality of GPU cores.
  • the memory includes a ROM (Read Only Memory) and a RAM (Random Access Memory).
  • the vehicle control program may be stored in the ROM.
  • the vehicle control program may include an artificial intelligence (AI) program for autonomous driving.
  • AI is a program (trained model) constructed by supervised or unsupervised machine learning (particularly deep learning) using a multi-layer neural network.
  • the RAM may temporarily store a vehicle control program, vehicle control data, and / or peripheral environment information indicating the surrounding environment of the vehicle.
  • the processor may be configured to expand a program designated from various vehicle control programs stored in the ROM on the RAM and execute various processes in cooperation with the RAM.
  • the computer system may be configured by a non-Von Neumann computer such as an ASIC (Application Specific Integrated Circuit) or an FPGA (Field-Programmable Gate Array). Further, the computer system may be composed of a combination of a von Neumann computer and a non-Von Neumann computer.
  • a non-Von Neumann computer such as an ASIC (Application Specific Integrated Circuit) or an FPGA (Field-Programmable Gate Array).
  • the computer system may be composed of a combination of a von Neumann computer and a non-Von Neumann computer.
  • the display system 4 includes a left side headlamp 20L, a right side headlamp 20R, a left side road surface drawing device 45L, and a right side road surface drawing device 45R. Further, the display system 4 includes a head-up display (HUD) 42 and a display control unit 43.
  • HUD head-up display
  • the left headlamp 20L is arranged on the left front surface of the vehicle 1, and irradiates a low beam lamp configured to irradiate the low beam in front of the vehicle 1 and a high beam in front of the vehicle 1. It is equipped with a high beam lamp configured to do so.
  • the right headlamp 20R is arranged on the front right side of the vehicle 1, and includes a low beam lamp configured to irradiate the low beam in front of the vehicle 1 and a high beam configured to irradiate the high beam in front of the vehicle 1. Equipped with a lamp.
  • Each of the low beam lamp and the high beam lamp has one or more light emitting elements such as an LED (Light Emitting Diode) and an LD (Laser Diode), and an optical member such as a lens and a reflector.
  • the left headlamp 20L and the right headlamp 20R may be collectively referred to as the headlamp 20.
  • the left side road surface drawing device 45L (an example of the first display device) is arranged in the lighting chamber of the left side headlamp 20L.
  • the left side road surface drawing device 45L is configured to emit an optical pattern toward the road surface outside the vehicle 1.
  • the left side road surface drawing device 45L includes, for example, a light source unit, a drive mirror, an optical system such as a lens and a mirror, a light source drive circuit, and a mirror drive circuit.
  • the light source unit is a laser light source or an LED light source.
  • the laser light source is an RGB laser light source configured to emit a red laser light, a green laser light, and a blue laser light, respectively.
  • the drive mirror is, for example, a MEMS (Microelectric Mechanical Systems) mirror, a DMD (Digital Mirror Device), a galvano mirror, a polygon mirror, or the like.
  • the light source drive circuit is configured to drive and control the light source unit.
  • the light source drive circuit generates a control signal for controlling the operation of the light source unit based on a signal related to a predetermined light pattern transmitted from the display control unit 43, and then uses the generated control signal as a light source. It is configured to send to the unit.
  • the mirror drive circuit is configured to drive and control the drive mirror.
  • the mirror drive circuit generates a control signal for controlling the operation of the drive mirror based on a signal related to a predetermined optical pattern transmitted from the display control unit 43, and then drives the generated control signal. It is configured to send to the mirror.
  • the light source unit is an RGB laser light source
  • the left side road surface drawing device 45L can draw light patterns of various colors on the road surface by scanning the laser light.
  • the right road surface drawing device 45R (an example of the first display device) is arranged in the lighting chamber of the right headlamp 20R.
  • the right side road surface drawing device 45R is configured to emit an optical pattern toward the road surface outside the vehicle 1. Similar to the left side road surface drawing device 45L, the right side road surface drawing device 45R includes a light source unit, a drive mirror, an optical system such as a lens, a light source drive circuit, and a mirror drive circuit.
  • the drawing method of the left side road surface drawing device 45L and the right side road surface drawing device 45R may be a raster scan method, a DLP (Digital Light Processing) method, or an LCOS (Liquid Crystal on Silicon) method.
  • the light source unit may be an LED light source.
  • a projection method may be adopted as the drawing method of the left side road surface drawing device 45L and the right side road surface drawing device 45R.
  • the light source unit may be a plurality of LED light sources arranged in a matrix.
  • the left side road surface drawing device 45L and the right side road surface drawing device 45R may be arranged on the vehicle body roof 100A.
  • one road surface drawing device may be arranged on the vehicle body roof 100A.
  • the left side road surface drawing device 45L and the right side road surface drawing device 45R may be collectively referred to simply as the road surface drawing device 45.
  • the road surface drawing device 45 shall indicate a combination of the left side road surface drawing device 45L, the right side road surface drawing device 45R, or the left side road surface drawing device 45L and the right side road surface drawing device 45R.
  • HUD42 (an example of the second display device) is located inside the vehicle 1. Specifically, the HUD 42 is installed at a predetermined position in the interior of the vehicle 1. For example, the HUD 42 may be located within the dashboard of vehicle 1. The HUD 42 functions as a visual interface between the vehicle 1 and the occupants. The HUD 42 displays the HUD information to the occupants so that the predetermined information (hereinafter referred to as HUD information) is superimposed on the real space outside the vehicle 1 (particularly, the surrounding environment in front of the vehicle 1). It is configured in. In this way, the HUD 42 functions as an AR (Augmented Reality) display.
  • the HUD information displayed by the HUD 42 is, for example, related to vehicle running information related to the running of the vehicle 1 and / or surrounding environment information related to the surrounding environment of the vehicle 1 (particularly, related to an object existing outside the vehicle 1). Information).
  • the HUD 42 includes a HUD main body 420.
  • the HUD main body 420 has a housing 421 and an exit window 422.
  • the exit window 422 is made of a transparent plate that allows light to pass through.
  • the HUD main body 420 has an image generation unit (PGU: Picture Generation Unit) 423, a lens 424, a concave mirror 425, and a control board 426 inside the housing 421.
  • PGU Picture Generation Unit
  • the image generation unit 423 is configured to emit light for generating a predetermined image to be displayed toward the occupant of the vehicle 1.
  • the image generation unit 423 includes a light source, an optical component, and a display device, although detailed illustration is omitted.
  • the light source is, for example, a laser light source or an LED light source.
  • the laser light source is, for example, an RGB laser light source configured to emit a red laser light, a green light laser light, and a blue laser light, respectively.
  • the optical component appropriately includes a prism, a lens, a diffuser plate, a magnifying glass, and the like. The optical component transmits the light emitted from the light source and emits the light toward the display device.
  • the display device is a liquid crystal display, a DMD (Digital Mirror Device), or the like.
  • the drawing method of the image generation unit 423 may be a raster scan method, a DLP method, or an LCOS method.
  • the light source of the HUD 42 may be an LED light source.
  • the light source of the HUD 42 may be a white LED light source.
  • the lens 424 is arranged between the image generation unit 423 and the concave mirror 425.
  • the lens 424 is configured to change the focal length of the light emitted from the image generation unit 423.
  • the lens 424 is provided at a position where light emitted from the image generation unit 423 and directed toward the concave mirror 425 passes through.
  • the lens 424 may include, for example, a drive unit, and may be configured so that the distance from the image generation unit 423 can be changed by a control signal generated by the control board 426.
  • the movement of the lens 424 changes the focal length (apparent optical path length) of the light emitted from the image generator 423, and the distance between the windshield 18 and the predetermined image displayed by the HUD 42.
  • a mirror may be used as an optical element instead of the lens.
  • the concave mirror 425 is arranged on the optical path of the light emitted from the image generation unit 423.
  • the concave mirror 425 is configured to emit light from the image generation unit 423 and reflect the light toward the windshield 18 (for example, the front window of the vehicle 1).
  • the concave mirror 425 has a reflecting surface that is curved in a concave shape in order to form a predetermined image, and reflects an image of light emitted from the image generation unit 423 and formed at a predetermined magnification.
  • the concave mirror 425 has a drive mechanism (not shown), and can rotate the direction of the concave mirror 425 based on a control signal transmitted from the control board 426.
  • the control board 426 is configured to control the operation of the image generation unit 423.
  • the control board 426 is equipped with a processor such as a CPU (Central Processing Unit) and a memory, and the processor executes a computer program read from the memory to control the operation of the image generation unit 423.
  • the control board 426 generates a control signal for controlling the operation of the image generation unit 423 based on the vehicle travel information, the surrounding environment information, and the like transmitted from the vehicle control unit 3 via the display control unit 43. Then, the generated control signal is transmitted to the image generation unit 423. Further, the control board 426 may be controlled so as to change the direction of the concave mirror 425.
  • control board 426 and the display control unit 43 are provided as separate configurations in the present embodiment, the control board 426 may be configured as a part of the display control unit 43.
  • the light emitted from the image generation unit 423 is reflected by the concave mirror 425 and emitted from the exit window 422 of the HUD main body unit 420.
  • the light emitted from the exit window 422 of the HUD main body 420 is applied to the windshield 18.
  • a part of the light emitted to the windshield 18 is reflected toward the occupant's viewpoint E.
  • the occupant recognizes the light emitted from the HUD main body 420 as a virtual image (an example of a predetermined image) formed at a predetermined distance in front of the windshield 18.
  • the occupant floats the virtual image object I formed by the virtual image on the road located outside the vehicle. It can be visually recognized as if it were.
  • the distance of the virtual image object I can be appropriately adjusted by adjusting the position of the lens 424.
  • a 2D image plane image
  • a predetermined image is projected so as to be a virtual image of an arbitrarily determined single distance.
  • a 3D image stereo image
  • a plurality of predetermined images that are the same as or different from each other are projected so as to be virtual images at different distances.
  • the display control unit 43 (an example of the control unit) includes a road surface drawing device 45 (specifically, a left side road surface drawing device 45L and a right side road surface drawing device 45R) and a headlamp 20 (specifically, a left side headlamp 20L and a right side). It is configured to control the operation of the headlamp 20R) and the HUD42.
  • the display control unit 43 operates the road surface drawing device 45 (specifically, the left side road surface drawing device 45L and the right side road surface drawing device 45R) so that the light pattern is irradiated to a predetermined position on the road surface. It is configured to control. Further, the display control unit 43 is configured to control the operation of the HUD 42 so that the HUD information is displayed in a predetermined display area of the windshield 18.
  • the display control unit 43 is composed of an electronic control unit (ECU).
  • the electronic control unit includes a computer system (for example, SoC) including one or more processors and one or more memories, and an electronic circuit composed of active elements such as transistors and passive elements.
  • the processor includes at least one of a CPU, MPU, GPU and TPU.
  • the memory includes a ROM and a RAM.
  • the computer system may be composed of a non-Von Neumann computer such as an ASIC or FPGA.
  • the vehicle control unit 3 and the display control unit 43 are provided as separate configurations, but the vehicle control unit 3 and the display control unit 43 may be integrally configured.
  • the display control unit 43 and the vehicle control unit 3 may be composed of a single electronic control unit.
  • the display control unit 43 has two electronic controls, an electronic control unit configured to control the operation of the headlamp 20 and the road surface drawing device 45, and an electronic control unit configured to control the operation of the HUD 42. It may be composed of units.
  • the sensor 5 includes at least one of an acceleration sensor, a speed sensor, and a gyro sensor.
  • the sensor 5 is configured to detect the running state of the vehicle 1 and output the running state information to the vehicle control unit 3.
  • the sensor 5 includes a seating sensor that detects whether the driver is sitting in the driver's seat, a face orientation sensor that detects the direction of the driver's face, an external weather sensor that detects the external weather condition, and whether or not there is a person in the vehicle.
  • a motion sensor or the like for detecting may be further provided.
  • the camera 6 is, for example, a camera including an image sensor such as a CCD (Charge-Coupled Device) or a CMOS (Complementary MOS).
  • the camera 6 includes one or more external cameras 6A and an internal camera 6B.
  • the external camera 6A is configured to acquire image data indicating the surrounding environment of the vehicle 1 and then transmit the image data to the vehicle control unit 3.
  • the vehicle control unit 3 acquires the surrounding environment information based on the transmitted image data.
  • the surrounding environment information may include information on an object (pedestrian, other vehicle, sign, etc.) existing outside the vehicle 1.
  • the surrounding environment information may include information on the attributes of the object existing outside the vehicle 1 and information on the distance and position of the object with respect to the vehicle 1.
  • the external camera 6A may be configured as a monocular camera or a stereo camera.
  • the internal camera 6B is arranged inside the vehicle 1 and is configured to acquire image data indicating an occupant.
  • the internal camera 6B functions as a tracking camera that tracks the viewpoint E of the occupant.
  • the occupant's viewpoint E may be either the occupant's left eye viewpoint or the right eye viewpoint.
  • the viewpoint E may be defined as the midpoint of a line segment connecting the viewpoint of the left eye and the viewpoint of the right eye.
  • the display control unit 43 may specify the position of the occupant's viewpoint E based on the image data acquired by the internal camera 6B.
  • the position of the viewpoint E of the occupant may be updated at a predetermined cycle based on the image data, or may be determined only once when the vehicle 1 is started.
  • the radar 7 includes at least one of a millimeter wave radar, a microwave radar and a laser radar (for example, a LiDAR unit).
  • the LiDAR unit is configured to detect the surrounding environment of the vehicle 1.
  • the LiDAR unit is configured to acquire 3D mapping data (point cloud data) indicating the surrounding environment of the vehicle 1 and then transmit the 3D mapping data to the vehicle control unit 3.
  • the vehicle control unit 3 identifies the surrounding environment information based on the transmitted 3D mapping data.
  • the HMI 8 is composed of an input unit that receives an input operation from the driver and an output unit that outputs driving information and the like to the driver.
  • the input unit includes a steering wheel, an accelerator pedal, a brake pedal, an operation mode changeover switch for switching the operation mode of the vehicle 1, and the like.
  • the output unit is a display (excluding the HUD) that displays various driving information.
  • the GPS 9 is configured to acquire the current position information of the vehicle 1 and output the acquired current position information to the vehicle control unit 3.
  • the wireless communication unit 10 receives information about another vehicle around the vehicle 1 (for example, driving information) from the other vehicle, and transmits information about the vehicle 1 (for example, driving information) to the other vehicle. It is configured (vehicle-to-vehicle communication). Further, the wireless communication unit 10 is configured to receive infrastructure information from infrastructure equipment such as traffic lights and indicator lights and to transmit traveling information of vehicle 1 to the infrastructure equipment (road-to-vehicle communication). Further, the wireless communication unit 10 receives information about the pedestrian from the portable electronic device (smartphone, tablet, wearable device, etc.) carried by the pedestrian, and transmits the own vehicle traveling information of the vehicle 1 to the portable electronic device. It is configured to do (pedestrian-to-vehicle communication).
  • the vehicle 1 may directly communicate with another vehicle, infrastructure equipment, or a portable electronic device in an ad hoc mode, or may communicate via an access point. Further, the vehicle 1 may communicate with another vehicle, infrastructure equipment, or a portable electronic device via a communication network (not shown).
  • the communication network includes at least one of the Internet, a local area network (LAN), a wide area network (WAN) and a radio access network (RAN).
  • Wireless communication standards are, for example, Wi-Fi®, Bluetooth®, ZigBee®, LPWA, DSRC® or Li-Fi.
  • the vehicle 1 may communicate with another vehicle, infrastructure equipment, or a portable electronic device by using a fifth generation mobile communication system (5G).
  • 5G fifth generation mobile communication system
  • the storage device 11 is an external storage device such as a hard disk drive (HDD) or SSD (Solid State Drive).
  • the storage device 11 may store two-dimensional or three-dimensional map information and / or a vehicle control program.
  • the three-dimensional map information may be composed of 3D mapping data (point cloud data).
  • the storage device 11 is configured to output map information and a vehicle control program to the vehicle control unit 3 in response to a request from the vehicle control unit 3.
  • the map information and the vehicle control program may be updated via the wireless communication unit 10 and the communication network.
  • the vehicle control unit 3 determines at least one of the steering control signal, the accelerator control signal, and the brake control signal based on the traveling state information, the surrounding environment information, the current position information, the map information, and the like. Generate one automatically.
  • the steering actuator 12 is configured to receive a steering control signal from the vehicle control unit 3 and control the steering device 13 based on the received steering control signal.
  • the brake actuator 14 is configured to receive a brake control signal from the vehicle control unit 3 and control the brake device 15 based on the received brake control signal.
  • the accelerator actuator 16 is configured to receive an accelerator control signal from the vehicle control unit 3 and control the accelerator device 17 based on the received accelerator control signal.
  • the vehicle control unit 3 automatically controls the travel of the vehicle 1 based on the travel state information, the surrounding environment information, the current position information, the map information, and the like. That is, in the automatic driving mode, the traveling of the vehicle 1 is automatically controlled by the vehicle system 2.
  • the vehicle control unit 3 when the vehicle 1 travels in the manual driving mode, the vehicle control unit 3 generates a steering control signal, an accelerator control signal, and a brake control signal according to the manual operation of the driver on the accelerator pedal, the brake pedal, and the steering wheel.
  • the steering control signal, the accelerator control signal, and the brake control signal are generated by the manual operation of the driver, so that the driving of the vehicle 1 is controlled by the driver.
  • the operation mode includes an automatic operation mode and a manual operation mode.
  • the automatic driving mode includes a fully automatic driving mode, an advanced driving support mode, and a driving support mode.
  • the vehicle system 2 automatically performs all driving controls such as steering control, brake control, and accelerator control, and the driver is not in a state where the vehicle 1 can be driven.
  • the vehicle system 2 automatically performs all driving controls of steering control, brake control, and accelerator control, and the driver does not drive the vehicle 1 although he / she is in a state where he / she can drive the vehicle 1.
  • the vehicle system 2 In the driving support mode, the vehicle system 2 automatically performs some driving control of steering control, brake control, and accelerator control, and the driver drives the vehicle 1 under the driving support of the vehicle system 2.
  • the vehicle system 2 In the manual driving mode, the vehicle system 2 does not automatically control the driving, and the driver drives the vehicle 1 without the driving support of the vehicle system 2.
  • the driving mode of the vehicle 1 may be switched by operating the driving mode changeover switch.
  • the vehicle control unit 3 sets the driving mode of the vehicle 1 into four driving modes (fully automatic driving mode, advanced driving support mode, driving support mode, manual driving mode) according to the driver's operation on the driving mode changeover switch. ).
  • the driving mode of the vehicle 1 is automatically set based on the information on the travelable section in which the autonomous vehicle can travel, the travel prohibited section in which the autonomous vehicle is prohibited, or the information on the external weather condition. It may be switched.
  • the vehicle control unit 3 switches the driving mode of the vehicle 1 based on this information.
  • the driving mode of the vehicle 1 may be automatically switched by using a seating sensor, a face orientation sensor, or the like. In this case, the vehicle control unit 3 switches the driving mode of the vehicle 1 based on the output signals from the seating sensor and the face orientation sensor.
  • FIG. 4 is a flowchart for explaining an example of the operation of the display control unit 43.
  • FIG. 5 is a diagram showing HUD information (specifically, frame pattern M1) in the field of view of the occupant.
  • FIG. 6 is a diagram showing HUD information (specifically, frame pattern M2) and light pattern L1 in the field of view of the occupant.
  • FIG. 7 is a schematic view showing the distance from the viewpoint E of the occupant of the vehicle 1 to the formation position of the frame pattern M2 (display position of the virtual image forming the frame pattern M2) and the formation position (display position) of the light pattern L1. ..
  • a frame pattern is shown as an example of a virtual image object showing HUD information.
  • the display control unit 43 determines whether or not the HUD display instruction signal has been received from the vehicle control unit 3 (step S1).
  • the vehicle control unit 3 confirms the existence of a pedestrian based on the surrounding environment information
  • the vehicle control unit 3 transmits a HUD display instruction signal instructing the HUD 42 to display the HUD information to the display control unit 43.
  • the HUD display instruction signal includes the position information of the object (pedestrian) and the position information of the viewpoint E of the occupant.
  • step S1 When the HUD display instruction signal is received (YES in step S1), the display control unit 43 determines whether the road surface drawing is performed by the road surface drawing device 45 (step S2). On the other hand, if the HUD display instruction signal has not been received (NO in step S1), this process ends.
  • the display control unit 43 controls the HUD 42 so as to display the HUD information according to the received HUD display instruction signal (step S3).
  • the display control unit 43 displays the frame pattern M1 so as to surround the pedestrian P1 based on the position information of the pedestrian P1 and the position information of the occupant's viewpoint E. Controls the HUD 42.
  • the frame pattern M1 is formed at a position separated from the viewpoint E of the occupant by a predetermined distance in the front-rear direction of the vehicle 1. That is, the virtual image forming the frame pattern M1 is displayed at a position separated from the viewpoint E of the occupant by a predetermined distance.
  • the frame pattern M1 is formed at a predetermined position in the front-rear direction of the vehicle 1 determined by the optical path length of the light emitted from the image generation unit 423 of the HUD 42. Further, the frame pattern M1 is set to a position that substantially coincides with the position of the pedestrian P1 in the front-rear direction of the vehicle 1 by moving the position of the optical system of the HUD 42 (for example, the lens 424) to change the optical path length of the light. It may be formed.
  • the formation position of the frame pattern M1 in the front-rear direction of the vehicle 1 substantially coincides with the position of the pedestrian P1, even if the occupant's viewpoint E moves, the frame pattern M1 and the pedestrian P1 in the occupant's view can be seen. It is possible to maintain the positional relationship.
  • the display control unit 43 displays the HUD 42 so as to display the HUD information according to the received HUD display instruction signal and the light pattern display position information on the road surface. Is controlled (step S4). For example, as illustrated in FIG. 6, the display control unit 43 displays the frame pattern M2 so as to surround the pedestrian P2 based on the position information of the pedestrian P2 and the position information of the occupant's viewpoint E. Controls the HUD 42. Further, the display control unit 43 makes the distance from the occupant's viewpoint E to the position where the frame pattern M2 is formed coincide with the distance from the occupant's viewpoint E to the position of the light pattern L1 displayed on the road surface. Controls the operation of the HUD 42.
  • the frame pattern M2 moves the position of the optical system (for example, the lens 424) of the HUD 42 to change the optical path length of the light.
  • the light pattern L1 displayed on the road surface is formed within the distance range (RL1).
  • the distance from the occupant's viewpoint E to the virtual image forming the frame pattern M2 is D M2 and the distance from the occupant's viewpoint E to the rear end of the light pattern L1 is D L1 , D L1 ⁇ D M2 ⁇ D L1 + R L1
  • the frame pattern M2 is formed so that
  • the display control unit 43 determines the distance from the occupant to the virtual image of the HUD information and the distance from the occupant to the light pattern. Matching. As a result, the occupant can simultaneously grasp the HUD information and the information indicated by the optical pattern. That is, it is possible to improve the visibility of the occupant with respect to the light pattern and the HUD information.
  • the display control unit 43 controls the HUD 42 so that the distance from the occupant to the virtual image of the HUD information matches the distance from the occupant to the light pattern displayed on the road surface.
  • the position on the road surface to irradiate the light pattern can be set regardless of the position of the virtual image of the HUD information displayed by the HUD 42.
  • the light pattern indicates information directed to the occupant
  • the light pattern can be formed at a position on the road surface that is easy for the occupant to check.
  • the occupant can quickly grasp the HUD information displayed later without changing the focal length.
  • FIG. 8 is a flowchart for explaining an example of the operation of the display control unit 43.
  • FIG. 9 is a diagram showing HUD information (specifically, frame pattern M3) and light pattern L2 in the field of view of the occupant.
  • FIG. 10 is a schematic view showing the distance from the viewpoint E of the occupant of the vehicle to the formation position of the frame pattern M3 (display position of the virtual image forming the frame pattern M3) and the formation position (display position) of the optical pattern L2.
  • the display control unit 43 determines whether or not the road surface drawing instruction signal has been received from the vehicle control unit 3 (step S11).
  • the vehicle control unit 3 transmits a road surface drawing instruction signal instructing the road surface drawing device 45 to display a predetermined light pattern based on the traveling state information and / or the surrounding environment information of the vehicle 1 to the display control unit 43. ..
  • step S11 When the road surface drawing instruction signal is received (YES in step S11), the display control unit 43 determines whether the HUD information is displayed by the HUD 42 (step S12). On the other hand, when the road surface drawing instruction signal is not received (NO in step S11), this process ends.
  • the display control unit 43 controls the road surface drawing device 45 so as to display the optical pattern according to the received road surface drawing instruction signal (step S13). For example, the display control unit 43 displays a predetermined light pattern on the road surface at a position separated from the occupant's viewpoint E in the front-rear direction of the vehicle 1 based on the traveling state information and / or the surrounding environment information of the vehicle 1.
  • the road surface drawing device 45 is controlled so as to be drawn.
  • the display control unit 43 displays a predetermined light pattern according to the received road surface drawing instruction signal and the virtual image display position information of the HUD information.
  • the road surface drawing device 45 is controlled (step S14). In the front-rear direction of the vehicle 1, the display control unit 43 matches the distance from the occupant's viewpoint E to the position of the light pattern displayed on the road surface from the occupant's viewpoint E to the display position of the virtual image of the HUD information. The operation of the road surface drawing device 45 is controlled in this way. For example, as illustrated in FIGS.
  • the optical pattern L2 is driven and controlled by driving and controlling the optical system of the road surface drawing device 45 in the front-rear direction of the vehicle 1.
  • range of distances to be displayed (R L2) is formed at least partially overlapping positions in a range of distances being displayed virtual image to form a frame pattern M3 (R M3).
  • the distance from the occupant's viewpoint E to the virtual image on the rear end side forming the frame pattern M3 is D M3 and the distance from the occupant's viewpoint E to the rear end of the light pattern L2 is D L2 , DL2 ⁇ D M3 + R
  • the light pattern L2 is formed so that M3 and D M3 ⁇ D L2 + R L2 are established.
  • the display control unit 43 controls the road surface drawing device 45 so that the distance from the occupant to the light pattern matches the distance from the occupant to the virtual image of the HUD information. ..
  • the display position of the virtual image of the HUD information can be set regardless of the position on the road surface where the light pattern is irradiated.
  • the HUD information is an image (for example, an arrow or a frame pattern) for notifying the occupant of the existence of an object (for example, a pedestrian)
  • the position substantially matches the position of the object (for example, a pedestrian).
  • a virtual image can be displayed.
  • a predetermined image virtual image
  • the occupant can quickly grasp the information of the light pattern displayed later without changing the focal length.
  • the range of the distance where the virtual image of the HUD information is displayed and the range of the distance where the light pattern is displayed overlap at least partially in the front-rear direction of the vehicle is described. Not limited. As long as the occupant can visually recognize the HUD information and the light pattern without changing the focal length, the display distance range of the virtual image and the display distance range of the light pattern may not overlap in the front-rear direction of the vehicle.
  • the display distance range of the virtual image and the display distance range of the optical pattern do not overlap, but the predetermined distance If the deviation is about 10%, it is included in the case of "matching distances".
  • the above embodiment describes a case where one of the HUD information and the optical pattern is displayed and the other of the HUD information and the optical pattern is displayed, but the present invention is not limited to this.
  • the display control unit 43 simultaneously receives the HUD display instruction signal and the road surface drawing display signal from the vehicle control unit 3 and displays both the HUD information and the light pattern
  • the display position of the virtual image of the HUD information and the light pattern is displayed.
  • the display position of the other display position of the virtual image of the HUD information and the light pattern may be adjusted according to one. In this case as well, the same effect as that of the above embodiment can be obtained.
  • the concave mirror 425 reflects the light emitted from the image generation unit 423 toward the windshield 18, but the present invention is not limited to this.
  • the concave mirror 425 may reflect light toward a combiner provided inside the windshield 18. Further, although the concave mirror 425 is used as the reflecting portion, the reflecting portion may be formed by other members.
  • the HUD 42 has a lens 424 as an optical system member that changes the optical path length of the light emitted from the image generation unit 423, but is not limited thereto.
  • the HUD 42 may change the optical path length by using, for example, an optical system member composed of a plurality of lenses or plane mirrors, or other members.

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Instrument Panels (AREA)
  • Traffic Control Systems (AREA)

Abstract

車両用表示システム（４）は、路面に向けて光パターンを出射するように構成された路面描画装置（４５）と、ＨＵＤ情報を乗員に向けて表示するように構成されたＨＵＤ（４２）と、路面描画装置（４５）およびＨＵＤ（４２）を制御するように構成されている表示制御部（４３）とを備えている。表示制御部（４３）は、ＨＵＤ情報および光パターンの両方を表示させる場合、乗員からＨＵＤ情報までの距離と乗員から光パターンまでの距離とを一致させる。

Description

車両用表示システム及び車両
　本開示は、車両用表示システム及び当該車両用表示システムを備えた車両に関する。
　日本国特開２０１６－５５６９１号公報は、路面描画装置を用いて路面上に光パターンを照射することで、運転者（乗員）自身または歩行者・対向車等の他者（対象物）に対して車両の情報を通知および警告する車両用表示システムを開示している。また、この車両用表示システムは、ヘッドアップディスプレイ（ＨＵＤ）装置を用いて車両のフロントガラス等上に所定の画像を投影することで、運転者に対して車両の情報を通知および警告している。運転者は、車両のフロントガラス等に投影された所定の画像をフロントガラス等の前方の所定の位置において形成された虚像として認識する。
　ところで、乗員から虚像までの位置が乗員から路面上の光パターンまでの位置と異なる場合、乗員は虚像および光パターンの一方に焦点を合わせると、他方により示される情報を把握することが難しくなる場合がある。すなわち、このような状況下では、虚像および光パターンのいずれか一方に対する乗員の視認性が低下してしまう。
　本開示は、路面上に照射される光パターンおよび乗員に向けて表示された所定の画像に対する乗員の視認性を向上させることが可能な車両用表示システムおよび当該車両用表示システムを備えた車両を提供することを目的とする。
　本開示の一態様の車両用表示システムは、車両に設けられており、
　前記車両の外部の路面に向けて光パターンを出射するように構成された第一表示装置と、
　前記車両の内部に位置すると共に、所定の画像が前記車両の外部の現実空間と重畳されるように前記所定の画像を前記車両の乗員に向けて表示するように構成された第二表示装置と、
　前記第一表示装置および前記第二表示装置を制御するように構成されている制御部と、を備えている。
　前記制御部は、前記所定の画像および前記光パターンの両方を表示させる場合、前記乗員から前記所定の画像までの距離と前記乗員から前記光パターンまでの距離とを一致させる。
　上記構成によれば、乗員から所定の画像までの距離と乗員から光パターンまでの距離が一致するため、乗員は、所定の画像により示される情報および光パターンにより示される情報を同時に把握することができる。すなわち、光パターンおよび所定の画像に対する乗員の視認性を向上させることができる。
　なお、「距離が一致する」とは、車両の前後方向において、所定の画像が表示される距離の範囲と光パターンが表示される距離の範囲が少なくとも部分的に重複している場合である。所定の画像が表示される距離の範囲とは、平面的に表示される所定の画像の場合にはその表示位置であり、また、立体的に表示される所定の画像の場合にはその表示距離範囲である。さらに、実質的には乗員が焦点距離を変更せずに所定の画像および光パターンを視認できれば、車両の前後方向において所定の画像の表示距離範囲と光パターンの表示距離範囲が重複していなくてもよい。例えば、車両の前後方向において乗員から所定の距離離れた位置付近に所定の画像および光パターンを表示する場合、所定の画像の表示距離範囲と光パターンの表示距離範囲が重複しないものの所定の距離の１０％ずれた程度であれば、「距離が一致する」場合に含まれる。
　また、「両方を表示させる」とは、ある時点において所定の画像および光パターンの両方が表示されている場合である。したがって、表示させるタイミングが異なっているものの所定の画像および光パターンの表示期間が一部重なっているような場合も含まれる。
　また、車両用表示システムを備えた車両が提供される。
　上記構成によれば、路面上に照射される光パターンおよび乗員に向けて表示された所定の画像に対する乗員の視認性を向上させることが可能な車両が提供される。
　本開示によれば、路面上に照射される光パターンおよび乗員に向けて表示された所定の画像に対する乗員の視認性を向上させることが可能な車両用表示システムおよび当該車両用表示システムを備えた車両を提供することができる。
車両システムが搭載された車両の正面図である。 車両システムのブロック図である。 車両システムに含まれるヘッドアップディスプレイの模式図である。 第一実施形態に係る表示制御部の動作の一例を説明するためのフローチャートである。 乗員の視界におけるＨＵＤ情報を示す図である。 乗員の視界におけるＨＵＤ情報と光パターンを示す図である。 車両の乗員の視点から枠パターンの形成位置および光パターンの形成位置までの距離を示す模式図である。 第二実施形態に係る表示制御部の動作の一例を説明するためのフローチャートである。 乗員の視界におけるＨＵＤ情報と光パターンを示す図である。 車両の乗員の視点から枠パターンの形成位置および光パターンの形成位置までの距離を示す模式図である。
　以下、本開示の実施形態（以下、本実施形態という。）について図面を参照しながら説明する。本図面に示された各部材の寸法は、説明の便宜上、実際の各部材の寸法とは異なる場合がある。
　また、本実施形態の説明では、説明の便宜上、「左右方向」、「上下方向」、「前後方向」について適宜言及する場合がある。これらの方向は、図１に示す車両１について設定された相対的な方向である。ここで、「左右方向」は、「左方向」及び「右方向」を含む方向である。「上下方向」は、「上方向」及び「下方向」を含む方向である。「前後方向」は、「前方向」及び「後方向」を含む方向である。
　最初に、図１及び図２を参照して、本実施形態に係る車両システム２について以下に説明する。図１は、車両システム２が搭載された車両１の正面図である。図２は、車両システム２のブロック図である。車両１は、自動運転モードで走行可能な車両（自動車）である。
　図２に示すように、車両システム２は、車両制御部３と、車両用表示システム４（以下、単に「表示システム４」という。）と、センサ５と、カメラ６と、レーダ７とを備える。さらに、車両システム２は、ＨＭＩ（Ｈｕｍａｎ　Ｍａｃｈｉｎｅ　Ｉｎｔｅｒｆａｃｅ）８と、ＧＰＳ（Ｇｌｏｂａｌ　Ｐｏｓｉｔｉｏｎｉｎｇ　Ｓｙｓｔｅｍ）９と、無線通信部１０と、記憶装置１１と、ステアリングアクチュエータ１２と、ステアリング装置１３と、ブレーキアクチュエータ１４と、ブレーキ装置１５と、アクセルアクチュエータ１６と、アクセル装置１７とを備える。
　車両制御部３は、車両１の走行を制御するように構成されている。車両制御部３は、例えば、少なくとも一つの電子制御ユニット（ＥＣＵ：Ｅｌｅｃｔｒｏｎｉｃ　Ｃｏｎｔｒｏｌ　Ｕｎｉｔ）により構成されている。電子制御ユニットは、１以上のプロセッサと１以上のメモリを含むコンピュータシステム（例えば、ＳｏＣ（Ｓｙｓｔｅｍ　ｏｎ　ａ　Ｃｈｉｐ）等）と、トランジスタ等のアクティブ素子及びパッシブ素子から構成される電子回路を含む。プロセッサは、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＭＰＵ（Ｍｉｃｒｏ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）及びＴＰＵ（Ｔｅｎｓｏｒ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）のうちの少なくとも一つを含む。ＣＰＵは、複数のＣＰＵコアによって構成されてもよい。ＧＰＵは、複数のＧＰＵコアによって構成されてもよい。メモリは、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）と、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）を含む。ＲＯＭには、車両制御プログラムが記憶されてもよい。例えば、車両制御プログラムは、自動運転用の人工知能（ＡＩ）プログラムを含んでもよい。ＡＩプログラムは、多層のニューラルネットワークを用いた教師有り又は教師なし機械学習（特に、ディープラーニング）によって構築されたプログラム（学習済みモデル）である。ＲＡＭには、車両制御プログラム、車両制御データ及び/又は車両の周辺環境を示す周辺環境情報が一時的に記憶されてもよい。プロセッサは、ＲＯＭに記憶された各種車両制御プログラムから指定されたプログラムをＲＡＭ上に展開し、ＲＡＭとの協働で各種処理を実行するように構成されてもよい。また、コンピュータシステムは、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ　Ｓｐｅｃｉｆｉｃ　Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）等の非ノイマン型コンピュータによって構成されてもよい。さらに、コンピュータシステムは、ノイマン型コンピュータと非ノイマン型コンピュータの組み合わせによって構成されてもよい。
　表示システム４は、左側ヘッドランプ２０Ｌと、右側ヘッドランプ２０Ｒと、左側路面描画装置４５Ｌと、右側路面描画装置４５Ｒとを備える。さらに、表示システム４は、ヘッドアップディスプレイ（ＨＵＤ）４２と、表示制御部４３とを備える。
　図１に示すように、左側ヘッドランプ２０Ｌは、車両１の左側前面に配置されており、ロービームを車両１の前方に照射するように構成されたロービームランプと、ハイビームを車両１の前方に照射するように構成されたハイビームランプとを備える。右側ヘッドランプ２０Ｒは、車両１の右側前面に配置されており、ロービームを車両１の前方に照射するように構成されたロービームランプと、ハイビームを車両１の前方に照射するように構成されたハイビームランプとを備える。ロービームランプとハイビームランプの各々は、ＬＥＤ（Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）やＬＤ（Ｌａｓｅｒ　Ｄｉｏｄｅ）等の１以上の発光素子と、レンズ及びリフレクタ等の光学部材を有する。また、以降では、説明の便宜上、左側ヘッドランプ２０Ｌ及び右側ヘッドランプ２０Ｒを単にヘッドランプ２０と総称する場合がある。
　左側路面描画装置４５Ｌ（第１表示装置の一例）は、左側ヘッドランプ２０Ｌの灯室内に配置されている。左側路面描画装置４５Ｌは、車両１の外部の路面に向けて光パターンを出射するように構成されている。左側路面描画装置４５Ｌは、例えば、光源部と、駆動ミラーと、レンズやミラー等の光学系と、光源駆動回路と、ミラー駆動回路とを有する。光源部は、レーザ光源又はＬＥＤ光源である。例えば、レーザ光源は、赤色レーザ光と、緑色レーザ光と、青色レーザ光をそれぞれ出射するように構成されたＲＧＢレーザ光源である。駆動ミラーは、例えば、ＭＥＭＳ（ＭｉｃｒｏＥｌｅｃｔｒｏ Ｍｅｃｈａｎｉｃａｌ Ｓｙｓｔｅｍｓ）ミラー、ＤＭＤ（Ｄｉｇｉｔａｌ　Ｍｉｒｒｏｒ　Ｄｅｖｉｃｅ）、ガルバノミラー、ポリゴンミラー等である。光源駆動回路は、光源部を駆動制御するように構成されている。光源駆動回路は、表示制御部４３から送信された所定の光パターンに関連する信号に基づいて、光源部の動作を制御するための制御信号を生成した上で、当該生成された制御信号を光源部に送信するように構成されている。ミラー駆動回路は、駆動ミラーを駆動制御するように構成されている。ミラー駆動回路は、表示制御部４３から送信された所定の光パターンに関連する信号に基づいて、駆動ミラーの動作を制御するための制御信号を生成した上で、当該生成された制御信号を駆動ミラーに送信するように構成されている。光源部がＲＧＢレーザ光源である場合、左側路面描画装置４５Ｌは、レーザ光を走査することで様々の色の光パターンを路面上に描画することが可能となる。
　右側路面描画装置４５Ｒ（第１表示装置の一例）は、右側ヘッドランプ２０Ｒの灯室内に配置されている。右側路面描画装置４５Ｒは、車両１の外部の路面に向けて光パターンを出射するように構成されている。左側路面描画装置４５Ｌと同様に、右側路面描画装置４５Ｒは、光源部と、駆動ミラーと、レンズ等の光学系と、光源駆動回路と、ミラー駆動回路とを有する。
　また、左側路面描画装置４５Ｌ及び右側路面描画装置４５Ｒの描画方式は、ラスタースキャン方式、ＤＬＰ（Ｄｉｇｉｔａｌ　Ｌｉｇｈｔ　Ｐｒｏｃｅｓｓｉｎｇ）方式又はＬＣＯＳ（Ｌｉｑｕｉｄ　Ｃｒｙｓｔａｌ　ｏｎ　Ｓｉｌｉｃｏｎ）方式であってもよい。ＤＬＰ方式又はＬＣＯＳ方式が採用される場合、光源部はＬＥＤ光源であってもよい。また、左側路面描画装置４５Ｌ及び右側路面描画装置４５Ｒの描画方式として、プロジェクション方式が採用されてもよい。プロジェクション方式が採用される場合、光源部は、マトリクス状に並んだ複数のＬＥＤ光源であってもよい。さらに、本実施形態では、左側路面描画装置４５Ｌ及び右側路面描画装置４５Ｒは、車体ルーフ１００Ａ上に配置されてもよい。この点において、１つの路面描画装置が車体ルーフ１００Ａ上に配置されてもよい。以降では、説明の便宜上、左側路面描画装置４５Ｌ及び右側路面描画装置４５Ｒを単に路面描画装置４５と総称する場合がある。また、以降の説明において、路面描画装置４５は、左側路面描画装置４５Ｌ、右側路面描画装置４５Ｒ又は左側路面描画装置４５Ｌと右側路面描画装置４５Ｒの組み合わせを示すものとする。
　ＨＵＤ４２（第２表示装置の一例）は、車両１の内部に位置する。具体的には、ＨＵＤ４２は、車両１の室内の所定箇所に設置されている。例えば、ＨＵＤ４２は、車両１のダッシュボード内に配置されてもよい。ＨＵＤ４２は、車両１と乗員との間の視覚的インターフェースとして機能する。ＨＵＤ４２は、所定の情報（以下、ＨＵＤ情報という。）が車両１の外部の現実空間（特に、車両１の前方の周辺環境）と重畳されるように当該ＨＵＤ情報を乗員に向けて表示するように構成されている。このように、ＨＵＤ４２は、ＡＲ（Ａｕｇｍｅｎｔｅｄ　Ｒｅａｌｉｔｙ）ディスプレイとして機能する。ＨＵＤ４２よって表示されるＨＵＤ情報は、例えば、車両１の走行に関連した車両走行情報及び／又は車両１の周辺環境に関連した周辺環境情報（特に、車両１の外部に存在する対象物に関連した情報）である。
　図３に示すように、ＨＵＤ４２は、ＨＵＤ本体部４２０を備えている。ＨＵＤ本体部４２０は、ハウジング４２１と、出射窓４２２とを有する。出射窓４２２は光を透過させる透明板で構成されている。ＨＵＤ本体部４２０は、ハウジング４２１の内部に、画像生成部（ＰＧＵ：Ｐｉｃｔｕｒｅ　Ｇｅｎｅｒａｔｉｏｎ　Ｕｎｉｔ）４２３と、レンズ４２４と、凹面鏡４２５と、制御基板４２６とを有する。
　画像生成部４２３は、車両１の乗員に向けて表示する所定の画像を生成するための光を出射するように構成されている。画像生成部４２３は、詳細な図示は省略するが、光源と、光学部品と、表示デバイスとを有する。光源は、例えば、レーザ光源またはＬＥＤ光源である。レーザ光源は、例えば、赤色レーザ光と、緑光レーザ光と、青色レーザ光をそれぞれ出射するように構成されたＲＧＢレーザ光源である。光学部品は、プリズム、レンズ、拡散板、拡大鏡等を適宜有する。光学部品は、光源から出射された光を透過して表示デバイスに向けて出射する。表示デバイスは、液晶ディスプレイ、ＤＭＤ（Ｄｉｇｉｔａｌ　Ｍｉｒｒｏｒ　Ｄｅｖｉｃｅ）等である。画像生成部４２３の描画方式は、ラスタースキャン方式、ＤＬＰ方式またはＬＣＯＳ方式であってもよい。ＤＬＰ方式またはＬＣＯＳ方式が採用される場合、ＨＵＤ４２の光源はＬＥＤ光源であってもよい。なお、液晶ディスプレイ方式が採用される場合、ＨＵＤ４２の光源は白色ＬＥＤ光源であってもよい。
　レンズ４２４は、画像生成部４２３と凹面鏡４２５との間に配置されている。レンズ４２４は、画像生成部４２３から出射された光の焦点距離を変化させるように構成されている。レンズ４２４は、画像生成部４２３から出射されて凹面鏡４２５に向かう光が通る位置に設けられている。レンズ４２４は、例えば、駆動部を含み、制御基板４２６により生成される制御信号によって画像生成部４２３との距離を変更できるように構成されていてもよい。レンズ４２４の移動により、画像生成部４２３から出射された光の焦点距離（見かけの光路長）が変化し、ウインドシールド１８とＨＵＤ４２によって表示される所定の画像との間の距離が変化する。なお、レンズに代わる光学要素として、例えばミラーを用いてもよい。
　凹面鏡４２５は、画像生成部４２３から出射される光の光路上に配置されている。凹面鏡４２５は、画像生成部４２３から出射され光をウインドシールド１８（例えば、車両１のフロントウィンドウ）に向けて反射するように構成されている。凹面鏡４２５は、所定の画像を形成するために凹状に湾曲した反射面を有し、画像生成部４２３から出射されて結像された光の像を所定の倍率で反射させる。凹面鏡４２５は、駆動機構（図示省略）を有し、制御基板４２６から送信される制御信号に基づいて凹面鏡４２５の向きを回転させうる。
　制御基板４２６は、画像生成部４２３の動作を制御するように構成されている。制御基板４２６は、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）等のプロセッサとメモリが搭載され、メモリから読みだしたコンピュータプログラムをプロセッサが実行して、画像生成部４２３の動作を制御する。例えば、制御基板４２６は、表示制御部４３を介して車両制御部３から送信されてくる車両走行情報や周辺環境情報等に基づいて、画像生成部４２３の動作を制御するための制御信号を生成し、当該生成された制御信号を画像生成部４２３に送信する。また、制御基板４２６は、凹面鏡４２５の向きを変更するように制御してもよい。
　なお、本実施形態では、制御基板４２６と表示制御部４３は別個の構成として設けられているが、制御基板４２６が表示制御部４３の一部として構成されていてもよい。
　画像生成部４２３から出射された光は、凹面鏡４２５で反射されてＨＵＤ本体部４２０の出射窓４２２から出射される。ＨＵＤ本体部４２０の出射窓４２２から出射された光は、ウインドシールド１８に照射される。ウインドシールド１８に照射された光の一部は、乗員の視点Ｅに向けて反射される。この結果、乗員は、ＨＵＤ本体部４２０から出射された光をウインドシールド１８の前方の所定の距離において形成される虚像（所定の画像の一例）として認識する。このように、ＨＵＤ４２によって表示される画像がウインドシールド１８を通して車両１の前方の現実空間に重畳される結果、乗員は、虚像により形成される虚像オブジェクトＩが車両外部に位置する道路上に浮いているように視認することができる。
　また、虚像オブジェクトＩの距離（乗員の視点Ｅから虚像までの距離）は、レンズ４２４の位置を調整することによって適宜調整可能である。虚像オブジェクトＩとして２Ｄ画像（平面画像）を形成する場合には、所定の画像を任意に定めた単一距離の虚像となるように投影する。虚像オブジェクトＩとして３Ｄ画像（立体画像）を形成する場合には、互いに同一または互いに異なる複数の所定の画像をそれぞれ異なる距離の虚像となるように投影する。
　表示制御部４３（制御部の一例）は、路面描画装置４５（具体的には、左側路面描画装置４５Ｌと右側路面描画装置４５Ｒ）、ヘッドランプ２０（具体的には、左側ヘッドランプ２０Ｌと右側ヘッドランプ２０Ｒ）及びＨＵＤ４２の動作を制御するように構成されている。この点において、表示制御部４３は、路面上の所定の位置に光パターンが照射されるように路面描画装置４５（具体的には、左側路面描画装置４５Ｌと右側路面描画装置４５Ｒ）の動作を制御するように構成されている。さらに、表示制御部４３は、ＨＵＤ情報がウインドシールド１８の所定の表示領域に表示されるようにＨＵＤ４２の動作を制御するように構成されている。
　表示制御部４３は、電子制御ユニット（ＥＣＵ）により構成されている。電子制御ユニットは、１以上のプロセッサと１以上のメモリを含むコンピュータシステム（例えば、ＳｏＣ等）と、トランジスタ等のアクティブ素子及びパッシブ素子から構成される電子回路を含む。プロセッサは、ＣＰＵ、ＭＰＵ、ＧＰＵ及びＴＰＵのうちの少なくとも一つを含む。メモリは、ＲＯＭと、ＲＡＭを含む。また、コンピュータシステムは、ＡＳＩＣやＦＰＧＡ等の非ノイマン型コンピュータによって構成されてもよい。
　本実施形態では、車両制御部３と表示制御部４３は、別個の構成として設けられているが、車両制御部３と表示制御部４３は一体的に構成されてもよい。この点において、表示制御部４３と車両制御部３は、単一の電子制御ユニットにより構成されていてもよい。また、表示制御部４３は、ヘッドランプ２０と路面描画装置４５の動作を制御するように構成された電子制御ユニットと、ＨＵＤ４２の動作を制御するように構成された電子制御ユニットの２つの電子制御ユニットによって構成されてもよい。
　センサ５は、加速度センサ、速度センサ及びジャイロセンサのうち少なくとも一つを含む。センサ５は、車両１の走行状態を検出して、走行状態情報を車両制御部３に出力するように構成されている。センサ５は、運転者が運転席に座っているかどうかを検出する着座センサ、運転者の顔の方向を検出する顔向きセンサ、外部天候状態を検出する外部天候センサ及び車内に人がいるかどうかを検出する人感センサ等をさらに備えてもよい。
　カメラ６は、例えば、ＣＣＤ（Ｃｈａｒｇｅ－Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）やＣＭＯＳ（相補型ＭＯＳ）等の撮像素子を含むカメラである。カメラ６は、一以上の外部カメラ６Ａと、内部カメラ６Ｂとを含む。外部カメラ６Ａは、車両１の周辺環境を示す画像データを取得した上で、当該画像データを車両制御部３に送信するように構成されている。車両制御部３は、送信された画像データに基づいて、周辺環境情報を取得する。ここで、周辺環境情報は、車両１の外部に存在する対象物（歩行者、他車両、標識等）に関する情報を含んでもよい。例えば、周辺環境情報は、車両１の外部に存在する対象物の属性に関する情報と、車両１に対する対象物の距離や位置に関する情報とを含んでもよい。外部カメラ６Ａは、単眼カメラとしても構成されてもよいし、ステレオカメラとして構成されてもよい。
　内部カメラ６Ｂは、車両１の内部に配置されると共に、乗員を示す画像データを取得するように構成されている。内部カメラ６Ｂは、乗員の視点Ｅをトラッキングするトラッキングカメラとして機能する。ここで、乗員の視点Ｅは、乗員の左目の視点又は右目の視点のいずれかであってもよい。または、視点Ｅは、左目の視点と右目の視点を結んだ線分の中点として規定されてもよい。表示制御部４３は、内部カメラ６Ｂによって取得された画像データに基づいて、乗員の視点Ｅの位置を特定してもよい。乗員の視点Ｅの位置は、画像データに基づいて、所定の周期で更新されてもよいし、車両１の起動時に一回だけ決定されてもよい。
　レーダ７は、ミリ波レーダ、マイクロ波レーダ及びレーザーレーダ（例えば、ＬｉＤＡＲユニット）のうちの少なくとも一つを含む。例えば、ＬｉＤＡＲユニットは、車両１の周辺環境を検出するように構成されている。特に、ＬｉＤＡＲユニットは、車両１の周辺環境を示す３Ｄマッピングデータ（点群データ）を取得した上で、当該３Ｄマッピングデータを車両制御部３に送信するように構成されている。車両制御部３は、送信された３Ｄマッピングデータに基づいて、周辺環境情報を特定する。
　ＨＭＩ８は、運転者からの入力操作を受付ける入力部と、走行情報等を運転者に向けて出力する出力部とから構成される。入力部は、ステアリングホイール、アクセルペダル、ブレーキペダル、車両１の運転モードを切替える運転モード切替スイッチ等を含む。出力部は、各種走行情報を表示するディスプレイ（ＨＵＤを除く）である。ＧＰＳ９は、車両１の現在位置情報を取得し、当該取得された現在位置情報を車両制御部３に出力するように構成されている。
　無線通信部１０は、車両１の周囲にいる他車に関する情報（例えば、走行情報等）を他車から受信すると共に、車両１に関する情報（例えば、走行情報等）を他車に送信するように構成されている（車車間通信）。また、無線通信部１０は、信号機や標識灯等のインフラ設備からインフラ情報を受信すると共に、車両１の走行情報をインフラ設備に送信するように構成されている（路車間通信）。また、無線通信部１０は、歩行者が携帯する携帯型電子機器（スマートフォン、タブレット、ウェアラブルデバイス等）から歩行者に関する情報を受信すると共に、車両１の自車走行情報を携帯型電子機器に送信するように構成されている（歩車間通信）。車両１は、他車両、インフラ設備又は携帯型電子機器とアドホックモードにより直接通信してもよいし、アクセスポイントを介して通信してもよい。さらに、車両１は、図示しない通信ネットワークを介して他車両、インフラ設備又は携帯型電子機器と通信してもよい。通信ネットワークは、インターネット、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）及び無線アクセスネットワーク（ＲＡＮ）のうちの少なくとも一つを含む。無線通信規格は、例えば、Ｗｉ－Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＺｉｇＢｅｅ（登録商標）、ＬＰＷＡ、ＤＳＲＣ（登録商標）又はＬｉ－Ｆｉである。また、車両１は、他車両、インフラ設備又は携帯型電子機器と第５世代移動通信システム（５Ｇ）を用いて通信してもよい。
　記憶装置１１は、ハードディスクドライブ（ＨＤＤ）やＳＳＤ（Ｓｏｌｉｄ　Ｓｔａｔｅ　Ｄｒｉｖｅ）等の外部記憶装置である。記憶装置１１には、２次元又は３次元の地図情報及び／又は車両制御プログラムが記憶されてもよい。例えば、３次元の地図情報は、３Ｄマッピングデータ（点群データ）によって構成されてもよい。記憶装置１１は、車両制御部３からの要求に応じて、地図情報や車両制御プログラムを車両制御部３に出力するように構成されている。地図情報や車両制御プログラムは、無線通信部１０と通信ネットワークを介して更新されてもよい。
　車両１が自動運転モードで走行する場合、車両制御部３は、走行状態情報、周辺環境情報、現在位置情報、地図情報等に基づいて、ステアリング制御信号、アクセル制御信号及びブレーキ制御信号のうち少なくとも一つを自動的に生成する。ステアリングアクチュエータ１２は、ステアリング制御信号を車両制御部３から受信して、受信したステアリング制御信号に基づいてステアリング装置１３を制御するように構成されている。ブレーキアクチュエータ１４は、ブレーキ制御信号を車両制御部３から受信して、受信したブレーキ制御信号に基づいてブレーキ装置１５を制御するように構成されている。アクセルアクチュエータ１６は、アクセル制御信号を車両制御部３から受信して、受信したアクセル制御信号に基づいてアクセル装置１７を制御するように構成されている。このように、車両制御部３は、走行状態情報、周辺環境情報、現在位置情報、地図情報等に基づいて、車両１の走行を自動的に制御する。つまり、自動運転モードでは、車両１の走行は車両システム２により自動制御される。
　一方、車両１が手動運転モードで走行する場合、車両制御部３は、アクセルペダル、ブレーキペダル及びステアリングホイールに対する運転者の手動操作に従って、ステアリング制御信号、アクセル制御信号及びブレーキ制御信号を生成する。このように、手動運転モードでは、ステアリング制御信号、アクセル制御信号及びブレーキ制御信号が運転者の手動操作によって生成されるので、車両１の走行は運転者により制御される。
　次に、車両１の運転モードについて説明する。運転モードは、自動運転モードと手動運転モードとからなる。自動運転モードは、完全自動運転モードと、高度運転支援モードと、運転支援モードとからなる。完全自動運転モードでは、車両システム２がステアリング制御、ブレーキ制御及びアクセル制御の全ての走行制御を自動的に行うと共に、運転者は車両１を運転できる状態にはない。高度運転支援モードでは、車両システム２がステアリング制御、ブレーキ制御及びアクセル制御の全ての走行制御を自動的に行うと共に、運転者は車両１を運転できる状態にはあるものの車両１を運転しない。運転支援モードでは、車両システム２がステアリング制御、ブレーキ制御及びアクセル制御のうち一部の走行制御を自動的に行うと共に、車両システム２の運転支援の下で運転者が車両１を運転する。一方、手動運転モードでは、車両システム２が走行制御を自動的に行わないと共に、車両システム２の運転支援なしに運転者が車両１を運転する。
　また、車両１の運転モードは、運転モード切替スイッチを操作することで切り替えられてもよい。この場合、車両制御部３は、運転モード切替スイッチに対する運転者の操作に応じて、車両１の運転モードを４つの運転モード（完全自動運転モード、高度運転支援モード、運転支援モード、手動運転モード）の間で切り替える。また、車両１の運転モードは、自動運転車が走行可能である走行可能区間や自動運転車の走行が禁止されている走行禁止区間についての情報または外部天候状態についての情報に基づいて自動的に切り替えられてもよい。この場合、車両制御部３は、これらの情報に基づいて車両１の運転モードを切り替える。さらに、車両１の運転モードは、着座センサや顔向きセンサ等を用いることで自動的に切り替えられてもよい。この場合、車両制御部３は、着座センサや顔向きセンサからの出力信号に基づいて、車両１の運転モードを切り替える。
（第一実施形態）
　次に、図４から図７を参照して第一実施形態に係る表示制御部４３の動作の一例について以下に説明する。図４は、表示制御部４３の動作の一例を説明するためのフローチャートである。図５は、乗員の視界におけるＨＵＤ情報（具体的には、枠パターンＭ１）を示す図である。図６は、乗員の視界におけるＨＵＤ情報（具体的には、枠パターンＭ２）と光パターンＬ１を示す図である。図７は、車両１の乗員の視点Ｅから枠パターンＭ２の形成位置（枠パターンＭ２を形成する虚像の表示位置）および光パターンＬ１の形成位置（表示位置）までの距離を示す模式図である。図５から図７では、ＨＵＤ情報を示す虚像オブジェクトの一例として枠パターンを示している。
　図４に示すように、表示制御部４３は、車両制御部３からＨＵＤ表示指示信号を受信したかを判断する（ステップＳ１）。車両制御部３は、周辺環境情報に基づいて歩行者の存在を確認した場合、ＨＵＤ情報をＨＵＤ４２に表示させることを指示するＨＵＤ表示指示信号を表示制御部４３へ送信する。ＨＵＤ表示指示信号には、対象物（歩行者）の位置情報および乗員の視点Ｅの位置情報が含まれている。
　ＨＵＤ表示指示信号が受信された場合（ステップＳ１でＹＥＳ）、表示制御部４３は、路面描画装置４５により路面描画が実施されているかを判断する（ステップＳ２）。一方、ＨＵＤ表示指示信号が受信されていない場合（ステップＳ１でＮＯ）、本処理が終了する。
　路面描画が実施されていない場合（ステップＳ２でＮＯ）、表示制御部４３は、受信したＨＵＤ表示指示信号に応じて、ＨＵＤ情報を表示するようにＨＵＤ４２を制御する（ステップＳ３）。例えば、図５に例示されるように、表示制御部４３は、歩行者Ｐ１の位置情報および乗員の視点Ｅの位置情報に基づいて、枠パターンＭ１が歩行者Ｐ１を囲むように表示されるようにＨＵＤ４２を制御する。また、枠パターンＭ１は、車両１の前後方向において乗員の視点Ｅから所定の距離離れた位置に形成される。すなわち、枠パターンＭ１を形成する虚像が乗員の視点Ｅから所定の距離離れた位置に表示される。例えば、枠パターンＭ１は、ＨＵＤ４２の画像生成部４２３から出射された光の光路長によって決定される車両１の前後方向における所定の位置に形成される。また、枠パターンＭ１は、ＨＵＤ４２の光学系の位置（例えば、レンズ４２４）を移動させて光の光路長を変化させることにより、歩行者Ｐ１の車両１の前後方向における位置と略一致する位置に形成されてもよい。車両１の前後方向における枠パターンＭ１の形成位置が歩行者Ｐ１の位置と略一致する場合は、乗員の視点Ｅが移動したとしても、乗員の視界における枠パターンＭ１と歩行者Ｐ１との間の位置関係を維持することが可能となる。
　一方、路面描画が実施されている場合（ステップＳ２でＹＥＳ）、表示制御部４３は、受信したＨＵＤ表示指示信号および路面上の光パターン表示位置情報に応じて、ＨＵＤ情報を表示するようにＨＵＤ４２を制御する（ステップＳ４）。例えば、図６に例示されるように、表示制御部４３は、歩行者Ｐ２の位置情報および乗員の視点Ｅの位置情報に基づいて、枠パターンＭ２が歩行者Ｐ２を囲むように表示されるようにＨＵＤ４２を制御する。また、表示制御部４３は、乗員の視点Ｅから枠パターンＭ２が形成される位置までの距離が乗員の視点Ｅから路面上に表示されている光パターンＬ１の位置までの距離と一致するようにＨＵＤ４２の動作を制御する。例えば、図７に例示されるように、枠パターンＭ２が２Ｄ画像の場合、枠パターンＭ２は、ＨＵＤ４２の光学系（例えば、レンズ４２４）の位置を移動させて光の光路長を変化させることにより、車両１の前後方向において、路面上に表示されている光パターンＬ１の距離の範囲（ＲＬ１）内に形成される。乗員の視点Ｅから枠パターンＭ２を形成する虚像までの距離をＤＭ２、乗員の視点Ｅから光パターンＬ１の後端までの距離をＤＬ１とすると、ＤＬ１≦ＤＭ２≦ＤＬ１+ＲＬ１ が成立するように枠パターンＭ２が形成される。
　上述のように、第一実施形態によれば、表示制御部４３は、ＨＵＤ情報および光パターンの両方を表示させる場合、乗員からＨＵＤ情報の虚像までの距離と乗員から光パターンまでの距離とを一致させている。これにより、乗員は、ＨＵＤ情報および光パターンにより示される情報を同時に把握することができる。すなわち、光パターンおよびＨＵＤ情報に対する乗員の視認性を向上させることができる。
　また、表示制御部４３は、乗員からＨＵＤ情報の虚像までの距離を乗員から路面上に表示されている光パターンまでの距離に一致させるようにＨＵＤ４２を制御している。これにより、光パターンを照射する路面上の位置を、ＨＵＤ４２により表示されるＨＵＤ情報の虚像の位置に関係なく設定することができる。例えば、光パターンが乗員に向けた情報を示している場合は、乗員が確認しやすい路面上の位置に光パターンを形成することができる。また、乗員は、光パターンを視認している状態でＨＵＤ情報が表示された場合でも、乗員が焦点距離を変更することなく、後から表示されたＨＵＤ情報を素早く把握することができる。
（第二実施形態）
　次に、図８から図１０を参照して第二実施形態に係る表示制御部４３の動作の一例について以下に説明する。図８は、表示制御部４３の動作の一例を説明するためのフローチャートである。図９は、乗員の視界におけるＨＵＤ情報（具体的には、枠パターンＭ３）と光パターンＬ２を示す図である。図１０は、車両の乗員の視点Ｅから枠パターンＭ３の形成位置（枠パターンＭ３を形成する虚像の表示位置）および光パターンＬ２の形成位置（表示位置）までの距離を示す模式図である。
　図８に示すように、表示制御部４３は、車両制御部３から路面描画指示信号を受信したかを判断する（ステップＳ１１）。車両制御部３は、車両１の走行状態情報および/または周辺環境情報に基づいて、所定の光パターンを路面描画装置４５に表示させることを指示する路面描画指示信号を表示制御部４３へ送信する。
　路面描画指示信号が受信された場合（ステップＳ１１でＹＥＳ）、表示制御部４３は、ＨＵＤ４２によりＨＵＤ情報が表示されているかを判断する（ステップＳ１２）。一方、路面描画指示信号が受信されていない場合（ステップＳ１１でＮＯ）、本処理が終了する。
　ＨＵＤ情報が表示されていない場合（ステップＳ１２でＮＯ）、表示制御部４３は、受信した路面描画指示信号に応じて、光パターンを表示するように路面描画装置４５を制御する（ステップＳ１３）。例えば、表示制御部４３は、車両１の走行状態情報および/または周辺環境情報に基づいて、車両１の前後方向において乗員の視点Ｅから所定の距離離れた位置の路面上に所定の光パターンが描画されるように路面描画装置４５を制御する。
　一方、ＨＵＤ情報が表示されている場合（ステップＳ１２でＹＥＳ）、表示制御部４３は、受信した路面描画指示信号およびＨＵＤ情報の虚像表示位置情報に応じて、所定の光パターンを表示するように路面描画装置４５を制御する（ステップＳ１４）。表示制御部４３は、車両１の前後方向において、乗員の視点Ｅから路面上に表示される光パターンの位置までの距離が乗員の視点ＥからＨＵＤ情報の虚像の表示位置までの距離と一致するように路面描画装置４５の動作を制御する。例えば、図９よび図１０に例示されるように、枠パターンＭ３が３Ｄ画像の場合、光パターンＬ２は、路面描画装置４５の光学系を駆動制御することにより、車両１の前後方向において、その表示される距離の範囲（ＲＬ２）が枠パターンＭ３を形成する虚像が表示されている距離の範囲（ＲＭ３）に少なくとも部分的に重複する位置に形成される。乗員の視点Ｅから枠パターンＭ３を形成する後端側の虚像までの距離をＤＭ３、乗員の視点Ｅから光パターンＬ２の後端までの距離をＤＬ２とすると、ＤＬ２≦ＤＭ３+ＲＭ３、ＤＭ３≦ＤＬ２+ＲＬ２ が成立するように光パターンＬ２が形成される。
　上述のように、第二実施形態によれば、表示制御部４３は、乗員から光パターンまでの距離を乗員からＨＵＤ情報の虚像までの距離に一致させるように路面描画装置４５を制御している。これにより、ＨＵＤ情報の虚像の表示位置を、光パターンを照射する路面上の位置に関係なく設定することができる。例えば、ＨＵＤ情報が対象物（例えば、歩行者等）の存在を乗員に通知する画像（例えば、矢印や枠パターン）である場合は、対象物（歩行者等）の位置と略一致する位置に虚像を表示させることができる。これにより、乗員の視点の位置に依存せずに所定の画像（虚像）を表示させることができる。また、乗員は、ＨＵＤ情報を視認している状態で光パターンが表示された場合でも、乗員が焦点距離を変更することなく、後から表示された光パターンの情報を素早く把握することができる。
　以上、本開示の実施形態について説明をしたが、本発明の技術的範囲が本実施形態の説明によって限定的に解釈されるべきではないのは言うまでもない。本実施形態は単なる一例であって、請求の範囲に記載された発明の範囲内において、様々な実施形態の変更が可能であることが当業者によって理解されるところである。本発明の技術的範囲は請求の範囲に記載された発明の範囲及びその均等の範囲に基づいて定められるべきである。
　上記実施形態では、車両の前後方向において、ＨＵＤ情報の虚像が表示される距離の範囲と光パターンが表示される距離の範囲が少なくとも部分的に重複している場合について述べているが、これに限られない。実質的には乗員が焦点距離を変更せずにＨＵＤ情報および光パターンを視認できれば、車両の前後方向において虚像の表示距離範囲と光パターンの表示距離範囲が重複していなくてもよい。例えば、車両の前後方向において乗員から所定の距離離れた位置付近にＨＵＤ情報の虚像および光パターンを表示する場合、虚像の表示距離範囲と光パターンの表示距離範囲が重複しないものの、所定の距離の１０％ずれた程度であれば、「距離が一致する」場合に含まれる。
　上記実施形態では、ＨＵＤ情報および光パターンの一方が表示されている状態で、ＨＵＤ情報および光パターンの他方を表示する場合について述べているが、これに限られない。例えば、表示制御部４３は、車両制御部３からＨＵＤ表示指示信号および路面描画表示信号を同時に受信し、ＨＵＤ情報および光パターンの両方を表示する場合、ＨＵＤ情報の虚像および光パターンの表示位置の一方に合わせて、ＨＵＤ情報の虚像および光パターンの他方の表示位置を調整してもよい。この場合も、上記実施形態と同様の効果を得ることができる。
　上記実施形態では、凹面鏡４２５は、画像生成部４２３から出射された光をウインドシールド１８に向けて反射しているが、これに限られない。凹面鏡４２５は、ウインドシールド１８の内側に設けられているコンバイナに向けて光を反射してもよい。また、反射部として凹面鏡４２５を使用しているが、その他の部材で反射部を形成してもよい。
　上記実施形態では、ＨＵＤ４２は、画像生成部４２３から出射された光の光路長を変化させる光学系部材としてレンズ４２４を有しているが、これに限定されない。ＨＵＤ４２は、例えば、複数のレンズや平面鏡から構成される光学系部材や、その他の部材を用いて光路長を変化させてもよい。
　本出願は、２０１９年９月３０日出願の日本特許出願２０１９－１７９４８３号に基づくものであり、その内容はここに参照として取り込まれる。

Claims (5)

  1. 　車両に設けられた車両用表示システムであって、
    　前記車両の外部の路面に向けて光パターンを出射するように構成された第一表示装置と、
    　前記車両の内部に位置すると共に、所定の画像が前記車両の外部の現実空間と重畳されるように前記所定の画像を前記車両の乗員に向けて表示するように構成された第二表示装置と、
    　前記第一表示装置および前記第二表示装置を制御するように構成されている制御部と、を備えており、
    　前記制御部は、前記所定の画像および前記光パターンの両方を表示させる場合、前記乗員から前記所定の画像までの距離と前記乗員から前記光パターンまでの距離とを一致させる、車両用表示システム。
  2. 　前記制御部は、前記乗員から前記所定の画像までの距離を前記乗員から前記光パターンまでの距離に一致させるように前記第二表示装置を制御する、請求項１に記載の車両用表示システム。
  3. 　前記制御部は、前記乗員から前記光パターンまでの距離を前記乗員から前記所定の画像までの距離に一致させるように前記第一表示装置を制御する、請求項１に記載の車両用表示システム。
  4. 　前記制御部は、前記所定の画像および前記光パターンの一方を表示している状態で前記所定の画像および前記光パターンの他方を表示させる場合、前記乗員から前記所定の画像および前記光パターンの他方までの距離を前記乗員から前記所定の画像および前記光パターンの一方までの距離に一致させる、請求項１に記載の車両用表示システム。
  5. 　請求項１から４のうちいずれか一項に記載の車両用表示システムを備えた車両。
     
     
PCT/JP2020/035783 2019-09-30 2020-09-23 車両用表示システム及び車両 WO2021065617A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
US17/765,229 US20220350155A1 (en) 2019-09-30 2020-09-23 Vehicle display system and vehicle
JP2021550656A JPWO2021065617A1 (ja) 2019-09-30 2020-09-23
EP20871876.7A EP4039519B1 (en) 2019-09-30 2020-09-23 Vehicular display system and vehicle
CN202080061107.0A CN114302828A (zh) 2019-09-30 2020-09-23 车辆用显示系统及车辆

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019179483 2019-09-30
JP2019-179483 2019-09-30

Publications (1)

Publication Number Publication Date
WO2021065617A1 true WO2021065617A1 (ja) 2021-04-08

Family

ID=75337275

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/035783 WO2021065617A1 (ja) 2019-09-30 2020-09-23 車両用表示システム及び車両

Country Status (5)

Country Link
US (1) US20220350155A1 (ja)
EP (1) EP4039519B1 (ja)
JP (1) JPWO2021065617A1 (ja)
CN (1) CN114302828A (ja)
WO (1) WO2021065617A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11620522B2 (en) * 2019-12-31 2023-04-04 Magna Electronics Inc. Vehicular system for testing performance of headlamp detection systems
JPWO2021166814A1 (ja) * 2020-02-17 2021-08-26
US11794641B2 (en) * 2021-05-26 2023-10-24 International Electronic Machines Corp. System and method for roadway user safety
KR20230023330A (ko) * 2021-08-10 2023-02-17 현대모비스 주식회사 차량의 표시 장치 및 그것의 동작 방법, 차량

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016055691A (ja) 2014-09-08 2016-04-21 株式会社小糸製作所 車両用表示システム
JP2018149856A (ja) * 2017-03-10 2018-09-27 株式会社Ｓｕｂａｒｕ 画像表示装置
JP2019094021A (ja) * 2017-11-27 2019-06-20 株式会社小糸製作所 車両用ヘッドアップディスプレイ装置
JP2019179483A (ja) 2018-03-30 2019-10-17 パーク二四株式会社 精算機用モジュールおよび精算機

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017019725A1 (en) * 2015-07-28 2017-02-02 Wenasont Dynamics Llc System and method for light and image projection
US20170148216A1 (en) * 2015-11-25 2017-05-25 Continental Automotive Systems, Inc. Display system adjustable based on background
KR101750178B1 (ko) * 2015-12-02 2017-06-22 엘지전자 주식회사 차량 외부 알람방법, 이를 실행하는 차량 운전 보조장치 및 이를 포함하는 차량
KR101770642B1 (ko) * 2016-05-16 2017-09-05 엘지전자 주식회사 차량용 조명 장치 및 차량
DE102017203717A1 (de) * 2017-03-07 2018-09-13 Audi Ag Bereitstellen einer Lichtfunktion zum Unterstützen eines Fahrers beim Führen eines Kraftfahrzeuges
JP6860384B2 (ja) * 2017-03-10 2021-04-14 株式会社Ｓｕｂａｒｕ 画像表示装置
KR102372566B1 (ko) * 2017-08-16 2022-03-08 제트카베 그룹 게엠베하 차량용 조명 장치 및 차량
JP7240208B2 (ja) * 2019-03-07 2023-03-15 株式会社豊田中央研究所 車載表示装置、車載表示方法、および、コンピュータプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016055691A (ja) 2014-09-08 2016-04-21 株式会社小糸製作所 車両用表示システム
JP2018149856A (ja) * 2017-03-10 2018-09-27 株式会社Ｓｕｂａｒｕ 画像表示装置
JP2019094021A (ja) * 2017-11-27 2019-06-20 株式会社小糸製作所 車両用ヘッドアップディスプレイ装置
JP2019179483A (ja) 2018-03-30 2019-10-17 パーク二四株式会社 精算機用モジュールおよび精算機

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP4039519A4

Also Published As

Publication number Publication date
EP4039519A4 (en) 2022-11-23
EP4039519A1 (en) 2022-08-10
CN114302828A (zh) 2022-04-08
EP4039519B1 (en) 2024-03-13
JPWO2021065617A1 (ja) 2021-04-08
US20220350155A1 (en) 2022-11-03

Similar Documents

Publication Publication Date Title
JP7254832B2 (ja) ヘッドアップディスプレイ、車両用表示システム、及び車両用表示方法
WO2021065617A1 (ja) 車両用表示システム及び車両
US11597316B2 (en) Vehicle display system and vehicle
JP7241081B2 (ja) 車両用表示システム及び車両
JP7282789B2 (ja) 車両用表示システム、車両システム及び車両
WO2021054277A1 (ja) ヘッドアップディスプレイおよび画像表示システム
JP7295863B2 (ja) 車両用表示システム及び車両
WO2021015171A1 (ja) ヘッドアップディスプレイ
WO2020110598A1 (ja) ヘッドアップディスプレイ
JP7492971B2 (ja) ヘッドアップディスプレイ
JP7429689B2 (ja) 車両用ヘッドアップディスプレイおよびそれに用いられる光源ユニット
WO2023190338A1 (ja) 画像照射装置
US20240069335A1 (en) Head-up display
WO2022102374A1 (ja) 車両用表示システム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20871876

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021550656

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2020871876

Country of ref document: EP

Effective date: 20220502