WO2016143412A1 - 投写型表示装置及び運転支援方法 - Google Patents

投写型表示装置及び運転支援方法 Download PDF

Info

Publication number
WO2016143412A1
WO2016143412A1 PCT/JP2016/052934 JP2016052934W WO2016143412A1 WO 2016143412 A1 WO2016143412 A1 WO 2016143412A1 JP 2016052934 W JP2016052934 W JP 2016052934W WO 2016143412 A1 WO2016143412 A1 WO 2016143412A1
Authority
WO
WIPO (PCT)
Prior art keywords
image information
unit
display device
projection
image
Prior art date
Application number
PCT/JP2016/052934
Other languages
English (en)
French (fr)
Inventor
広大 藤田
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to JP2017504905A priority Critical patent/JP6175588B2/ja
Priority to DE112016000237.8T priority patent/DE112016000237T5/de
Priority to CN201680006058.4A priority patent/CN107107761B/zh
Publication of WO2016143412A1 publication Critical patent/WO2016143412A1/ja
Priority to US15/638,344 priority patent/US10336192B2/en

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60—Instruments characterised by their location or relative disposition in or on vehicles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191—Testing thereof
    • H04N9/3194—Testing thereof including sensor feedback
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B60Q9/008—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for anti-collision purposes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/02—Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
    • B60W50/029—Adapting to failures or work around with other constraints, e.g. circumvention by avoiding use of failed parts
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/002—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to project the image of a two-dimensional display, such as an array of light emitting or modulating elements or a CRT
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/74—Projection arrangements for image reproduction, e.g. using eidophor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/33—Illumination features
    • B60K2360/334—Projection means
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/10—Special adaptations of display systems for operation with variable images
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications

Definitions

  • the present invention relates to a projection display device and a driving support method using the projection display device.
  • HUD Head-Up Display
  • the user can visually recognize the image displayed on the windshield or the like by the projection light projected from the HUD by superimposing it on the front landscape on the windshield side.
  • Patent Document 1 describes a HUD that detects an abnormality such as being caught in a combiner or mechanical interference, and notifies the passenger of the abnormality.
  • Patent Document 2 when a driver operates an electronic device such as a car navigation system or an audio device with a finger while driving, the movement of the finger is detected by a sensor, and the information displayed on the HUD until then is instrumented.
  • a technique for preventing an erroneous operation of an electronic device by a driver by displaying on a meter display unit in the panel is described.
  • Patent Document 3 includes two projection units that display the same warning image in a superimposed manner, and when one of the projection units malfunctions, the other normally operated projection unit supplements the display. HUD is described.
  • Patent Document 4 describes a HUD that prevents a driver from visually recognizing an erroneous display image by turning off a light source of a display element when an abnormality is detected in a signal that drives a pixel of the display element. ing.
  • Patent Document 5 describes a vehicle display device that includes a HUD having a self-diagnosis function and a liquid crystal display unit different from the HUD, and displays the fact on the liquid crystal display unit when the HUD becomes unusable. Has been.
  • Patent Document 6 describes a vehicle display system that includes a plurality of information display means including a HUD and displays information on an optimal information display means according to the type and importance of information.
  • the HUD is spatially modulated by a light source unit, a light modulation unit that spatially modulates light emitted from the light source unit according to image information, an image information input unit that sends image information to the light modulation unit, and a light modulation unit. And a projection unit that projects the emitted light onto the combiner.
  • vehicle HUDs represented by automobiles not only display vehicle travel speed and guide information for performing navigation to destinations, but also obstacles such as pedestrians, utility poles, street trees, and accident vehicles.
  • a driving support function that detects the presence of a dangerous substance and alerts the driver.
  • Patent Documents 1 and 5 disclose a technique for notifying the driver that an abnormality has occurred in the HUD. However, with this technique, the driver can only recognize that an abnormality has occurred, and cannot enjoy the driving support function of the HUD.
  • Patent Document 4 discloses a technique for preventing erroneous display by turning off the light source when an abnormality occurs in the HUD.
  • this technique there is a possibility that the forward visual field may be disturbed for a short time after the abnormality occurs until the light source is turned off. And since a picture is not displayed on a combiner even after the visual field of the front is recovered, the driver cannot enjoy the driving support function of HUD.
  • Patent Documents 2 and 6 disclose a technique that enables an image to be displayed on a HUD combiner to be displayed on another image display device. However, Patent Document 2 and Patent Document 6 do not consider the operation when the HUD fails.
  • the HUD described in Patent Document 3 maintains the display by the other HUD when one of the two HUDs fails.
  • the warning image displayed by the HUD is an image indicating lighting of the headlamp, an image indicating a hydraulic pressure warning, and an image indicating a brake warning, all of which are images for warning an abnormality of the vehicle itself. Therefore, the problem that it becomes impossible to enjoy the driving support function of the HUD does not occur.
  • An object of the present invention is to provide a projection display device and a driving support method that can be used.
  • the projection display device of the present invention includes an image information generation unit that generates image information, a light modulation unit that spatially modulates light emitted from the light source unit according to the image information, and the image information in the light modulation unit.
  • An image information input unit that inputs the light, a projection unit that projects light spatially modulated by the light modulation unit onto a projection surface provided on a windshield of a vehicle, and at least one of the light modulation unit and the image information input unit
  • the image information generated by the image information generator includes image information that alerts the driver of the vehicle regarding the field of view in the traveling direction of the vehicle. , In which and a control unit for performing an output to alert regarding the visibility to the driver.
  • the driving support method of the present invention is a driving support method using a projection display device mounted on a vehicle, and the projection display device is emitted from an image information generation unit that generates image information and a light source unit.
  • a light modulation unit that spatially modulates light according to the image information, an image information input unit that inputs the image information to the light modulation unit, and a windshield of the vehicle that modulates the light spatially modulated by the light modulation unit
  • a projection unit that projects onto a projection plane provided on the optical modulation unit, an abnormality detection step for detecting an abnormality of at least one of the light modulation unit and the image information input unit, and the abnormality detection step, the light modulation unit and the When at least one abnormality of the image information input unit is detected, at least one of the light modulation unit and the light source unit is stopped, and further generated by the image information generation unit.
  • a control step for performing an output for alerting the driver with respect to the field of view when the image information includes image information for alerting the driver of the vehicle with respect
  • the projection display apparatus and the driving support method that allow the driver to enjoy the driving support function Can be provided.
  • FIG. 1 is a diagram showing a schematic configuration of a HUD which is an embodiment of the projection display device of the present invention.
  • the HUD is used by being mounted on an automobile, but can be mounted on a vehicle such as a train, a heavy machine, and a ship in addition to the automobile.
  • the HUD shown in FIG. 1 includes a combiner 2 attached to the inner or outer surface of a windshield 1 of an automobile, a light source unit 4 built in the dashboard 3, a diffuser plate 5 built in the dashboard 3, and a reflection.
  • a mirror 6 and a magnifying mirror 7 and an imaging unit 9 attached to the back side of the rearview mirror 8 above the windshield 1 are provided.
  • the diffusion plate 5 diffuses the light emitted from the light source unit 4 to form a surface light source.
  • the reflection mirror 6 reflects the light converted into the surface light source by the diffusion plate 5 toward the magnifier 7.
  • the magnifier 7 enlarges the reflected light and projects it onto the combiner 2.
  • the combiner 2 constitutes a projection surface on which the light projected from the magnifier 7 is projected.
  • a driver of an automobile can view information such as pictures and characters related to driving by viewing the image light projected onto the combiner 2 and reflected here.
  • the combiner 2 has a function of transmitting light from the outside (outside) of the windshield 1. For this reason, the driver
  • the image pickup unit 9 attached to the rearview mirror 8 picks up a scene in front of the windshield 1 (the traveling direction of the car), and is connected to the light source unit 4 by wire or wirelessly.
  • the captured image information of the scenery in the traveling direction of the automobile obtained by the imaging unit 9 is transferred to the light source unit 4 by wire or wireless.
  • the imaging unit 9 may be dedicated to the HUD, or may be an imaging unit mounted on a vehicle for another purpose such as a collision prevention system.
  • the imaging unit 9 may be attached to a place other than the rearview mirror 8, for example, near the dashboard 3 or the headlight of an automobile.
  • the imaging range by the imaging unit 9 is set so as to include all the external world images that can be seen through the combiner 2 from the driver, and the captured image information obtained by imaging by the imaging unit 9 includes a portion corresponding to the external world image. Will be included. That is, at least a part of the captured image information corresponds to a range where the combiner 2 is provided.
  • a liquid crystal display device 61 which is a display device different from HUD, is provided in the meter cluster area of the dashboard 3 (front portion of the driving handle) in front of the driver's seat.
  • This liquid crystal display device 61 is connected to the HUD in a wired or wireless manner, and only displays images of various instruments such as a speedometer, a tachometer, a fuel meter, a water temperature meter and the like arranged on a general meter cluster panel. Instead, an image corresponding to the image projected on the HUD combiner 2 is displayed.
  • the liquid crystal display device 61 is not limited to one using a liquid crystal display element, and may be one using a display element based on an organic electroluminescent element.
  • FIG. 2 is a schematic diagram showing a detailed configuration example of the HUD shown in FIG.
  • the light source unit 4 of the HUD includes a light source unit 40, a light modulation element 44, a drive unit 45 that drives the light modulation element 44, and a system control unit 47 that performs overall control of the HUD.
  • the light source unit 40 includes a light source controller 40A, an R light source 41r that is a red light source that emits red light, a G light source 41g that is a green light source that emits green light, and a B light source that is a blue light source that emits blue light. 41b, dichroic prism 43, collimator lens 42r provided between R light source 41r and dichroic prism 43, collimator lens 42g provided between G light source 41g and dichroic prism 43, B light source 41b and dichroic prism 43, a collimator lens 42b provided between the two.
  • the dichroic prism 43 is an optical member for guiding light emitted from each of the R light source 41r, the G light source 41g, and the B light source 41b to the same optical path. That is, the dichroic prism 43 transmits the red light that has been collimated by the collimator lens 42 r and emits the red light to the light modulation element 44. The dichroic prism 43 reflects the green light that has been collimated by the collimator lens 42 g and emits it to the light modulation element 44. Further, the dichroic prism 43 reflects the blue light that has been collimated by the collimator lens 42b and emits it to the light modulation element.
  • the optical member having such a function is not limited to the dichroic prism. For example, a cross dichroic mirror may be used.
  • a light emitting element such as a laser or LED (Light Emitting Diode) is used for the R light source 41r, the G light source 41g, and the B light source 41b of the light source unit 40.
  • a light source of the light source unit 40 an HUD including three light sources of an R light source 41r, a G light source 41g, and a B light source 41b is taken as an example, but the number of light sources may be two or four or more. Good.
  • the light source control unit 40A sets the light emission amounts of the R light source 41r, the G light source 41g, and the B light source 41b to a predetermined light emission amount pattern, and the R light source 41r, the G light source 41g, and the B light source are set according to the light emission amount pattern. Control is performed to sequentially emit light from the light source 41b.
  • the light modulation element 44 spatially modulates the light emitted from the dichroic prism 43, and projects light (red image light, blue image light, and green image light) according to projection image information that is image information. To exit.
  • LCOS Liquid crystal on silicon
  • DMD Digital Micromirror Device
  • MEMS Micro Electro Mechanical Systems
  • the drive unit 45 drives the light modulation element 44 according to the projection image information input from the system control unit 47, and emits light (red image light, blue image light, and green image light) according to the projection image information.
  • the light is emitted to the projection optical system 46.
  • the light modulation element 44 and the drive unit 45 constitute a light modulation unit that spatially modulates light emitted from the light source unit 40 in accordance with projection image information.
  • the projection optical system 46 is an optical system for projecting the light emitted from the light modulation element 44 onto the diffusion plate 5.
  • the projection optical system 46, the diffusing plate 5, the reflection mirror 6, and the magnifying mirror 7 constitute a projection unit that projects light spatially modulated by the light modulation unit onto a projection surface provided on the windshield 1 of the automobile.
  • the system control unit 47 controls the light source control unit 40A of the light source unit 40, the drive unit 45, and the liquid crystal display device 61 built in the meter cluster of the dashboard 3 shown in FIG.
  • FIG. 3 is a diagram showing functional blocks of the system control unit 47 of the light source unit 4 shown in FIG.
  • the system control unit 47 of the light source unit 4 includes a captured image information acquisition unit 51, a projection image information generation unit 52, an abnormality detection unit 53, and a control unit 54.
  • the system control unit 47 is a computer mainly including a processor, and each of these units is a functional block that is expressed when the computer executes a program.
  • the captured image information acquisition unit 51 acquires captured image information obtained by imaging with the imaging unit 9 from the imaging unit 9 and outputs the acquired image information to the projection image information generation unit 52.
  • the projection image information generation unit 52 analyzes the captured image information acquired from the captured image information acquisition unit 51 by a known image analysis process, and generates projection image information.
  • the projection image information generation unit 52 detects obstacles or dangerous objects such as pedestrians, power poles, street trees, and accident vehicles from the captured image information acquired from the captured image information acquisition unit 51. When an obstacle or dangerous object is detected, first projection image information for notifying the driver of the presence or position of the detected obstacle or dangerous object is generated. The projection image information generation unit 52 inputs the first projection image information to the drive unit 45.
  • obstacles or dangerous objects such as pedestrians, power poles, street trees, and accident vehicles from the captured image information acquired from the captured image information acquisition unit 51.
  • first projection image information for notifying the driver of the presence or position of the detected obstacle or dangerous object is generated.
  • the projection image information generation unit 52 inputs the first projection image information to the drive unit 45.
  • This first image information for projection is image information for alerting the driver of the vehicle regarding the field of view in the traveling direction of the vehicle (in front of the windshield 1).
  • the captured image information obtained by imaging with the imaging unit 9 corresponds to the scenery in front of the windshield 1. Then, if which pixel of the light modulation element 44 is made effective (a state in which light is reflected or transmitted and emitted to the projection optical system 46), the relationship in which region of the combiner 2 the image is projected is determined in advance. It has been. For this reason, if the area of the obstacle or the dangerous object detected from the captured image information is known, it is possible to determine what kind of first projection image information should be output to the drive unit 45.
  • the projection image information generation unit 52 generates second projection image information indicating guide information for performing navigation to the traveling speed of the automobile and the destination, and the second projection image information is supplied to the drive unit. 45.
  • the projection image information generation unit 52 functions as an image information generation unit and an image information input unit.
  • the abnormality detection unit 53 constantly monitors whether each of the light modulation unit composed of the light modulation element 44 and the drive unit 45 and the projection image information generation unit 52 is operating normally, and when there is an abnormality. Detect this.
  • the abnormality of the light modulation unit means a state in which the light modulation element 44 does not perform spatial modulation as instructed by the drive unit 45.
  • the abnormality detection unit 53 acquires a signal indicating the state of each pixel of the light modulation element 44 from the light modulation element 44, is generated by the projection image information generation unit 52, and is input to the drive unit 45. Get information.
  • the abnormality detection unit 53 then reversely calculates the projection image information from the signal indicating the state of each pixel acquired from the light modulation element 44, and the projection image information calculated from the reverse calculation and the projection image information generation unit 52 acquires the projection image information.
  • the degree of coincidence with the image information for use exceeds the threshold value, it is determined that there is no abnormality in the light modulation unit.
  • the abnormality of the projection image information generation unit 52 refers to a state in which the projection image information input from the projection image information generation unit 52 to the drive unit 45 has contents that are impossible in a normal operation state.
  • the abnormality detection unit 53 acquires the projection image information input from the projection image information generation unit 52 to the drive unit 45, and the values of the pixels constituting the acquired projection image information are all equal to or greater than the threshold value. If it is determined that there is an abnormality in the projection image information generation unit 52.
  • the image based on the light spatially modulated according to the projection image information is obtained by displaying a monochromatic image on the entire surface of the combiner 2. Become. Since any kind of obstacle cannot exist, it is possible to detect an abnormality in the projection image information generation unit 52 by detecting this state.
  • an imaging unit for imaging the entire combiner 2 is provided in the automobile (for example, above the driver's seat). Then, the abnormality detection unit 53 projects the image information for projection obtained by imaging the combiner 2 with the imaging unit and the image information for projection calculated from the signal indicating the state of each pixel of the light modulation element 44, or the driving unit 45. Is compared with the projection image information input to the projector, and if the degree of coincidence between both exceeds a threshold, it is detected that there is no abnormality in at least one of the light modulation unit and the projection image information generation unit 52. When the degree of coincidence is equal to or smaller than the threshold value, it may be detected that at least one of the light modulation unit and the projection image information generation unit 52 is abnormal.
  • the control unit 54 stops at least one of the light modulation unit and the light source unit 40 when the abnormality detection unit 53 detects at least one abnormality of the light modulation unit and the projection image information generation unit 52. Further, the control unit 54 includes first projection image information, which is image information that the projection image information generated by the projection image information generation unit 52 alerts the driver of the vehicle regarding the field of view in the traveling direction of the vehicle. Is included, an output is made to alert the driver about the forward field of view.
  • FIG. 4 is a flowchart for explaining the operation of the HUD shown in FIG.
  • the projection image information generation unit 52 When the power of the HUD is turned on, the projection image information generation unit 52 generates projection image information (step S1), and light that is spatially modulated in accordance with the projection image information is projected onto the combiner 2. (Step S2).
  • the abnormality detection unit 53 detects the abnormality (step S3: YES).
  • the system control unit 47 performs control to stop at least one of the light modulation element 44, the driving unit 45, and the light source unit 40 (step S4).
  • control unit 54 instructs the drive unit 45 to put all the pixels of the light modulation element into a non-transmission state, for example, so that the light from the light source unit 40 does not reach the combiner 2.
  • control unit 54 instructs the light source control unit 40A of the light source unit 40 to stop the R light source 41r, the G light source 41g, and the B light source 41b, so that light enters the light modulation element 44 from the light source unit 40.
  • the state is not allowed. As a result, no light is projected onto the combiner 2.
  • control unit 54 acquires the projection image information generated by the projection image information generation unit 52, and determines whether or not the acquired projection image information includes the first projection image information (step). S5).
  • step S5 When the determination in step S5 is YES, the control unit 54 outputs image information corresponding to the first projection image information to the liquid crystal display device 61.
  • image information corresponding to the first projection image information is input to the liquid crystal display device 61, the liquid crystal display device 61 displays a warning image based on this image information (step S6).
  • FIG. 5 shows an example of an image displayed on the liquid crystal display device 61 in step S6 of FIG.
  • images other than the warning image including the speed meter 61b and the tachometer 61a are always displayed.
  • the warning image corresponding to the first image information for projection displayed on the liquid crystal display device 61 is an icon or a message that alerts the driver.
  • the first projection image information is information for notifying the presence of a pedestrian
  • a warning image 61c including an icon indicating the pedestrian and a message prompting the pedestrian to be alerted is displayed on the liquid crystal. It is displayed on the display device 61.
  • the HUD of FIG. 1 allows the driver through the liquid crystal display device 61 even when an image is not displayed on the combiner 2 due to an abnormality in at least one of the light modulation unit and the projection image information generation unit 52.
  • the driver can know the situation of the forward field of view from when at least one of the light modulation unit and the light source unit 40 stops until the image actually displayed on the combiner 2 disappears. It is possible to enjoy the support function.
  • the display position of the warning image corresponding to the first projection image information on the liquid crystal display device 61 corresponds to the projection position of the light combiner 2 corresponding to the first projection image information.
  • the first projection image For example, when a pedestrian exists on the left side in front of the windshield 1 and information for notifying the presence of the pedestrian is generated as the first projection image information, the first projection image The position where the light corresponding to the information is projected is on the left side of the center of the combiner 2. Therefore, as shown in FIG. 6, a warning image 61 c is displayed at an arbitrary position on the left side of the center of the liquid crystal display device 61. If the position at which light corresponding to the first image information for projection is projected is on the right side of the center of the combiner 2, the warning image 61c is displayed at an arbitrary position on the right side of the center of the liquid crystal display device 61. As a result, the driver can quickly grasp the actual position of the pedestrian, and thus can quickly perform the driving operation to avoid the pedestrian.
  • the warning image 61c is displayed at a position that does not overlap with other images of the instrument.
  • a part of an image displayed on the liquid crystal display device 61 may be replaced with a warning image 61c for display.
  • warning image corresponding to the first image information for projection is displayed on the liquid crystal display device 61 for displaying information of various instruments, the present invention is not limited to this.
  • a warning image corresponding to the first projection image information is displayed on the display device 70. It may be displayed.
  • the combiner 2 of this one HUD It is also possible to hide the image display to secure the forward field of view and to display a warning image corresponding to the first projection image information on the other HUD combiner 2. In this case, since the movement of the line of sight is reduced compared to the case where image information is displayed on the liquid crystal display device 61 or the display device 70 of the meter cluster, the driving operation for avoiding an obstacle or a dangerous object can be performed more quickly. Can do.
  • a dedicated display device for displaying a warning image corresponding to the first projection image information may be provided in the automobile, and the control unit 54 may display the warning image on the display device. According to the configuration in which the warning image is displayed on the liquid crystal display device 61 in front of the driving handle, it is possible to alert the driver without shifting the driver's line of sight.
  • the control unit 54 outputs sound information for alerting the driver through a car radio or car stereo speaker according to the first projection image information. It is also effective to display the warning image 61c on the liquid crystal display device 61 and output audio information.
  • the control unit 54 may cause the liquid crystal display device 61 to display an image for notifying the abnormality detected by the abnormality detection unit 53 (for example, an icon indicating that the light modulation element 44 has failed).
  • an image for notifying the abnormality detected by the abnormality detection unit 53 for example, an icon indicating that the light modulation element 44 has failed.
  • the disclosed projection display device includes an image information generation unit that generates image information, a light modulation unit that spatially modulates light emitted from the light source unit according to the image information, and the image information in the light modulation unit.
  • An image information input unit that inputs the light, a projection unit that projects light spatially modulated by the light modulation unit onto a projection surface provided on a windshield of a vehicle, and at least one of the light modulation unit and the image information input unit
  • the image information generated by the image information generator includes image information that alerts the driver of the vehicle regarding the field of view in the traveling direction of the vehicle. The one in which and a control unit for performing an output to alert regarding the visibility to the driver.
  • control unit causes the display device mounted on the vehicle to display an image corresponding to the image information for calling attention.
  • the control unit responds to the image information to call attention at a position corresponding to the projection position on the projection plane of light corresponding to the image information to call attention in the display device.
  • the displayed image is displayed.
  • control unit causes the display device to display an icon for alerting and a message for alerting as an image corresponding to the image information to alert.
  • the display device further displays an image other than the image corresponding to the image information to call attention, and the control unit displays the image information to call attention displayed on the display device.
  • a part of the image other than the image corresponding to the image is replaced with an image corresponding to the image information for calling attention.
  • the disclosed projection display device includes a projection display device including the image information generation unit, the light modulation unit, the image information input unit, the projection unit, the abnormality detection unit, and the control unit. It is what is.
  • control unit further causes the display device to display an image for notifying the abnormality detected by the abnormality detection unit.
  • control unit outputs a sound to alert the driver about the field of view.
  • the disclosed projection display device includes one in which the vehicle is an automobile.
  • the disclosed driving support method is a driving support method using a projection display device mounted on a vehicle, and the projection display device is emitted from an image information generation unit that generates image information and a light source unit.
  • a light modulation unit that spatially modulates light according to the image information, an image information input unit that inputs the image information to the light modulation unit, and a windshield of the vehicle that modulates the light spatially modulated by the light modulation unit
  • a projection unit that projects onto a projection plane provided on the optical modulation unit, an abnormality detection step for detecting an abnormality of at least one of the light modulation unit and the image information input unit, and the abnormality detection step, the light modulation unit and the When at least one abnormality of the image information input unit is detected, at least one of the light modulation unit and the light source unit is stopped, and further generated by the image information generation unit.
  • a control step for performing an output for alerting the driver with respect to the field of view when the image information includes image information for alerting the driver of the vehicle with respect to the field
  • an image corresponding to the image information to call attention is displayed on a display device mounted on the vehicle.
  • the display device responds to the image information to call attention to a position corresponding to the projection position on the projection plane of the light corresponding to the image information to call attention. An image is displayed.
  • the disclosed driving support method displays an icon for alerting and a message for alerting on the display device as an image corresponding to the image information to alert.
  • the display device further displays an image other than the image corresponding to the image information to call attention.
  • the image information to call attention displayed on the display device is displayed. A part of the image other than the corresponding image is replaced with an image corresponding to the image information for calling attention.
  • the display device is a projection display device having the image information generation unit, the light modulation unit, the image information input unit, and the projection unit.
  • an image for notifying the abnormality detected in the abnormality detection step is further displayed on the display device.
  • the disclosed driving support method performs voice output to alert the driver about the field of view in the control step.
  • the disclosed driving support method includes a method in which the vehicle is an automobile.
  • the present invention is particularly convenient and effective when applied to an automobile HUD having a driving support function.

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Optics & Photonics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Instrument Panels (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

運転中に光変調部や画像情報入力部に異常が発生した場合でも、運転者が運転支援機能を享受することのできる投写型表示装置及び運転支援方法を提供する。ＨＵＤのシステム制御部（４７）は、光変調素子（４４）及び駆動部（４５）の異常を検知すると、光源ユニット（４０）を停止させ、更に、投写用画像情報生成部（５２）により生成された画像情報が運転者に対し前方視界に関して注意喚起する画像情報を含む場合に、この画像情報に基づく警告画像を、メータークラスタの液晶表示装置（６１）に表示させる。

Description

投写型表示装置及び運転支援方法
　本発明は、投写型表示装置及び投写型表示装置を用いた運転支援方法に関する。
　自動車、電車、重機、飛行機、及び船舶等の人が運転する乗り物のウィンドシールドや、ウィンドシールドの手前付近に配置されるコンバイナをスクリーンとして用い、これに投写光を投写して画像を表示させる乗り物用のＨＵＤ（Ｈｅａｄ－Ｕｐ　Ｄｉｓｐｌａｙ）装置が知られている（特許文献１～６参照）。
　このＨＵＤによれば、利用者は、ＨＵＤから投写された投写光によってウィンドシールド等に表示される画像を、そのウィンドシールド側の前方風景に重畳させて視認することができる。
　特許文献１には、コンバイナに挟み込みや機械的な干渉等の異常が発生した場合に、この異常を検知して乗員に報知するＨＵＤが記載されている。
　特許文献２には、運転者が運転中にカーナビゲーションやオーディオ装置等の電子機器を指で操作した時に、この指の動きをセンサで検出し、それまでＨＵＤに表示していた情報をインストルメントパネル内のメータ表示部に表示することよって、運転者による電子機器の誤操作を防止する技術が記載されている。
　特許文献３には、同一の警告画像を重ねて表示させる二つの投写部を備え、一方の投写部に故障があった場合に、もう一方の正常に動作する投写部で表示を補うようにしたＨＵＤが記載されている。
　特許文献４には、表示素子の画素を駆動させる信号に異常が検出された場合に、表示素子の光源を消灯させることによって、運転者に誤った表示像を視認させないようにしたＨＵＤが記載されている。
　特許文献５には、自己診断機能を持つＨＵＤと、このＨＵＤとは別の液晶表示部とを備え、ＨＵＤが使用不能になった時にその旨を液晶表示部に表示する車両用表示装置が記載されている。
　特許文献６には、ＨＵＤを含む複数の情報表示手段を備え、情報の種類や重要度等に応じて最適な情報表示手段に情報を表示する車両用表示システムが記載されている。
特開２０１４－２３４０８８号公報 特開２０１４－１４４６９３号公報 特開２０１３－１３７３５５号公報 特開２０１０－０６４６３３号公報 特開２００５－３４３３４３号公報 特開２００５－２９７８１０号公報
　一般に、ＨＵＤは、光源ユニットと、光源ユニットから出射された光を画像情報に応じて空間変調する光変調部と、光変調部に画像情報を送る画像情報入力部と、光変調部により空間変調された光をコンバイナに投写する投写部と、を含む。
　また、自動車に代表される車両用ＨＵＤは、車両の走行速度や、目的地へのナビゲーションを行うためのガイド情報を表示するだけでなく、歩行者、電柱、街路樹、事故車両等の障害物または危険物の存在を検知し、運転者に注意を喚起する運転支援機能を付加することも考えられている。
　このようなＨＵＤにおいて、装置内の光変調部や画像情報入力部に異常が発生すると、コンバイナに誤った画像が表示されたり、場合によっては、コンバイナに過剰な光が投写されて前方の視野が妨げられたりする可能性がある。
　そこで、このような異常が発生した場合には、例えば、ＨＵＤの電源をオフにすることによって、コンバイナに表示され得る誤った画像を非表示にしたり、コンバイナに投写され得る過剰な光を消して前方の視野を回復したりする必要がある。
　ところが、運転支援機能を備えたＨＵＤの場合、光変調部や画像情報入力部の異常に起因してコンバイナに異常な画像光が投写されると、これによって前方の視野が妨げられる。運転者は、コンバイナに異常な画像光が投写されてからこの画像光が消えて前方の視野が回復するまでの間は、障害物または危険物の存在を認識することができなくなる。
　また、コンバイナに投写された異常な画像光が消えて前方の視野が回復した後も、ＨＵＤの電源がオフになっていると、コンバイナには画像が表示されないので、運転者は、ＨＵＤの運転支援機能を享受することができず、障害物または危険物の存在を目視で視認しなければならない。
　特許文献１及び特許文献５には、ＨＵＤに異常が発生したことを運転者に報知する技術が開示されている。しかし、この技術では、異常が発生したことを運転者が認識できるだけであり、ＨＵＤの運転支援機能を享受することはできない。
　特許文献４には、ＨＵＤに異常が発生した時に光源をオフにすることで誤表示を防ぐ技術が開示されている。しかし、この技術では、異常が発生してから光源がオフになるまでの僅かな間は、前方の視野が妨げられる可能性がある。そして、前方の視野が回復した後も、コンバイナには画像が表示されないので、運転者は、ＨＵＤの運転支援機能を享受することができない。
　特許文献２及び特許文献６には、ＨＵＤのコンバイナに表示させる画像を別の画像表示装置にも表示できるようにする技術が開示されている。しかし、特許文献２及び特許文献６では、ＨＵＤが故障したときの動作については考慮されていない。
　特許文献３に記載のＨＵＤは、２つのＨＵＤのうちの一方が故障したときに、もう一方のＨＵＤによって表示を維持するものである。しかし、このＨＵＤが画像表示する領域は、ウィンドシールドを想定しているか不明であり、上述した課題の認識はない。また、ＨＵＤが表示する警告画像は、前照灯の点灯を示す画像、油圧警告を示す画像、及びブレーキ警告を示す画像であり、いずれも、車両そのものの異常を警告するための画像である。したがって、ＨＵＤの運転支援機能を享受することができなくなるといった課題は生じない。
　ここでは自動車等の車両用のＨＵＤについての課題として述べたが、この課題は、自動車、電車、重機、飛行機、及び船舶等を含む人が運転する乗り物全般に発生しうるものである。
　本発明は、上記事情に鑑みてなされたものであり、乗り物の運転中に光変調部と画像情報入力部の少なくとも一方に異常が発生した場合でも、運転者が運転支援機能を享受することのできる投写型表示装置及び運転支援方法を提供することを目的とする。
　本発明の投写型表示装置は、画像情報を生成する画像情報生成部と、光源ユニットから出射される光を上記画像情報に応じて空間変調する光変調部と、上記光変調部に上記画像情報を入力する画像情報入力部と、上記光変調部により空間変調された光を乗り物のウィンドシールドに設けられる投写面に投写する投写部と、上記光変調部と上記画像情報入力部の少なくとも一方の異常を検知する異常検知部と、上記異常検知部により、上記光変調部と上記画像情報入力部の少なくとも一方の異常が検知された場合に、上記光変調部と上記光源ユニットの少なくとも一方を停止させ、更に、上記画像情報生成部により生成された画像情報が上記乗り物の運転者に対し上記乗り物の進行方向における視界に関して注意喚起する画像情報を含む場合に、運転者に上記視界に関して注意喚起するための出力を行う制御部と、を備えるものである。
　本発明の運転支援方法は、乗り物に搭載される投写型表示装置を用いた運転支援方法であって、上記投写型表示装置は、画像情報を生成する画像情報生成部と、光源ユニットから出射される光を上記画像情報に応じて空間変調する光変調部と、上記光変調部に上記画像情報を入力する画像情報入力部と、上記光変調部により空間変調された光を上記乗り物のウィンドシールドに設けられる投写面に投写する投写部と、を含み、上記光変調部と上記画像情報入力部の少なくとも一方の異常を検知する異常検知ステップと、上記異常検知ステップにより、上記光変調部と上記画像情報入力部の少なくとも一方の異常が検知された場合に、上記光変調部と上記光源ユニットの少なくとも一方を停止させ、更に、上記画像情報生成部により生成された画像情報が上記乗り物の運転者に対し上記乗り物の進行方向における視界に関して注意喚起する画像情報を含む場合に、運転者に上記視界に関して注意喚起するための出力を行う制御ステップと、を備えるものである。
　本発明によれば、乗り物の運転中に光変調部と画像情報入力部の少なくとも一方に異常が発生した場合でも、運転者が運転支援機能を享受することのできる投写型表示装置及び運転支援方法を提供することができる。
本発明の投写型表示装置の一実施形態であるＨＵＤの概略構成を示す図である。 図１に示すＨＵＤの詳細な構成例を示す模式図である。 図２に示す光源部４のシステム制御部４７の機能ブロックを示す図である。 図１に示すＨＵＤの動作を説明するためのフローチャートである。 図４のステップＳ６において液晶表示装置６１に表示される画像の一例を示す図である。 図４のステップＳ６において液晶表示装置６１に表示される画像の一例を示す図である。 図４のステップＳ６において液晶表示装置６１に表示される画像の一例を示す図である。 本発明の投写型表示装置の一実施形態であるＨＵＤの他の構成例を示す概念図である。
　以下、本発明の実施形態について図面を参照して説明する。
　図１は、本発明の投写型表示装置の一実施形態であるＨＵＤの概略構成を示す図である。このＨＵＤは、自動車に搭載されて用いられるものであるが、自動車以外に、電車や重機や船舶等の乗り物に搭載することもできる。
　図１に示すＨＵＤは、自動車のウィンドシールド１の内面又は外面に貼り付けられたコンバイナ２と、ダッシュボード３に内蔵された光源部４と、同じくダッシュボード３に内蔵された拡散板５、反射ミラー６、及び拡大鏡７と、ウィンドシールド１上方のバックミラー８の裏側に取り付けられた撮像部９と、を備えている。
　拡散板５は、光源部４から出射された光を拡散させて面光源化する。反射ミラー６は、拡散板５によって面光源化された光を拡大鏡７側に反射させる。拡大鏡７は、この反射光を拡大してコンバイナ２に投写する。
　コンバイナ２は、拡大鏡７から投写された光が投写される投写面を構成する。自動車の運転者は、コンバイナ２に投写され、ここで反射された画像光を見ることで、運転に関する絵や文字等の情報を視認することができる。また、コンバイナ２は、ウィンドシールド１の外部（外界）からの光を透過する機能を持つ。このため、運転者は、拡大鏡７から投写された光に基づく画像と外界の景色とが重畳した像を視認することができる。
　バックミラー８に取り付けられた撮像部９は、ウィンドシールド１の前方（自動車の進行方向）の景色を撮像するものであり、有線又は無線で光源部４と接続されている。撮像部９で得られた自動車の進行方向の景色の撮像画像情報は、有線又は無線で光源部４に転送される。
　撮像部９は、ＨＵＤ専用のものであってもよいし、例えば衝突防止システム等の別の目的で自動車に搭載されている撮像部であってもよい。また、撮像部９は、バックミラー８以外の場所、例えばダッシュボード３や自動車のヘッドライト近傍等に取り付けてあってもよい。
　撮像部９による撮像範囲は、運転者からコンバイナ２を通して見える外界像を全て含むように設定されており、撮像部９によって撮像して得られる撮像画像情報には、上記外界像に対応する部分が含まれることになる。つまり、この撮像画像情報の少なくとも一部は、コンバイナ２が設けられる範囲に対応している。
　運転席正面のダッシュボード３（運転ハンドルの前方部分）のメータークラスタ領域には、ＨＵＤとは異なる表示装置である液晶表示装置６１が設けられている。この液晶表示装置６１は、ＨＵＤと有線又は無線で接続されており、一般的なメータークラスタパネルに配置されるスピードメータ、タコメータ、燃料計、水温計等の各種計器類の画像が表示されるだけでなく、ＨＵＤのコンバイナ２に投写される画像に応じた画像が表示される。液晶表示装置６１は、液晶表示素子を用いたものに限らず、有機電界発光素子による表示素子を用いたものであってもよい。
　図２は、図１に示すＨＵＤの詳細な構成例を示す模式図である。
　ＨＵＤの光源部４は、光源ユニット４０と、光変調素子４４と、光変調素子４４を駆動する駆動部４５と、ＨＵＤの全体を統括制御するシステム制御部４７と、を備えている。
　光源ユニット４０は、光源制御部４０Ａと、赤色光を出射する赤色光源であるＲ光源４１ｒと、緑色光を出射する緑色光源であるＧ光源４１ｇと、青色光を出射する青色光源であるＢ光源４１ｂと、ダイクロイックプリズム４３と、Ｒ光源４１ｒとダイクロイックプリズム４３の間に設けられたコリメータレンズ４２ｒと、Ｇ光源４１ｇとダイクロイックプリズム４３の間に設けられたコリメータレンズ４２ｇと、Ｂ光源４１ｂとダイクロイックプリズム４３の間に設けられたコリメータレンズ４２ｂと、を備えている。
　ダイクロイックプリズム４３は、Ｒ光源４１ｒ、Ｇ光源４１ｇ、及びＢ光源４１ｂの各々から出射される光を同一光路に導くための光学部材である。すなわち、ダイクロイックプリズム４３は、コリメータレンズ４２ｒによって平行光化された赤色光を透過させて光変調素子４４に出射する。また、ダイクロイックプリズム４３は、コリメータレンズ４２ｇによって平行光化された緑色光を反射させて光変調素子４４に出射する。さらに、ダイクロイックプリズム４３は、コリメータレンズ４２ｂによって平行光化された青色光を反射させて光変調素子に出射する。このような機能を持つ光学部材としては、ダイクロイックプリズムに限らない。例えば、クロスダイクロイックミラーを用いてもよい。
　光源ユニット４０のＲ光源４１ｒ、Ｇ光源４１ｇ、及びＢ光源４１ｂには、レーザ、ＬＥＤ（Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）等の発光素子が用いられる。本実施形態では、光源ユニット４０の光源として、Ｒ光源４１ｒとＧ光源４１ｇとＢ光源４１ｂの３つの光源を含むＨＵＤを例にするが、光源の数は２つまたは４つ以上であってもよい。
　光源制御部４０Ａは、Ｒ光源４１ｒ、Ｇ光源４１ｇ、及びＢ光源４１ｂの各々の発光量を予め決められた発光量パターンに設定し、この発光量パターンに従ってＲ光源４１ｒ、Ｇ光源４１ｇ、及びＢ光源４１ｂから光を順次出射させる制御を行う。
　光変調素子４４は、ダイクロイックプリズム４３から出射された光を空間変調し、画像情報である投写用画像情報に応じた光（赤色画像光、青色画像光、及び緑色画像光）を投写光学系４６に出射する。
　光変調素子４４としては、例えば、ＬＣＯＳ（Ｌｉｑｕｉｄ　ｃｒｙｓｔａｌ　ｏｎ　ｓｉｌｉｃｏｎ）、ＤＭＤ（Ｄｉｇｉｔａｌ　Ｍｉｃｒｏｍｉｒｒｏｒ　Ｄｅｖｉｃｅ）、ＭＥＭＳ（Ｍｉｃｒｏ　Ｅｌｅｃｔｒｏ　Ｍｅｃｈａｎｉｃａｌ　Ｓｙｓｔｅｍｓ）素子、及び液晶表示素子等を用いることができる。
　駆動部４５は、システム制御部４７から入力される投写用画像情報にしたがって光変調素子４４を駆動し、投写用画像情報に応じた光（赤色画像光、青色画像光、及び緑色画像光）を投写光学系４６に出射させる。光変調素子４４と駆動部４５により、光源ユニット４０から出射される光を投写用画像情報に応じて空間変調する光変調部が構成される。
　投写光学系４６は、光変調素子４４から出射された光を拡散板５に投写するための光学系である。投写光学系４６、拡散板５、反射ミラー６、及び拡大鏡７により、光変調部により空間変調された光を自動車のウィンドシールド１に設けられる投写面に投写する投写部が構成される。
　システム制御部４７は、光源ユニット４０の光源制御部４０Ａと、駆動部４５と、図１に示すダッシュボード３のメータークラスタに内蔵されている液晶表示装置６１とを制御する。
　図３は、図２に示す光源部４のシステム制御部４７の機能ブロックを示す図である。
　光源部４のシステム制御部４７は、撮像画像情報取得部５１と、投写用画像情報生成部５２と、異常検知部５３と、制御部５４と、を備えている。システム制御部４７は、プロセッサを主体とするコンピュータであり、これらの各部は、このコンピュータがプログラムを実行することで発現する機能ブロックである。
　撮像画像情報取得部５１は、撮像部９で撮像して得られた撮像画像情報を撮像部９から取得し、投写用画像情報生成部５２に出力する。
　投写用画像情報生成部５２は、撮像画像情報取得部５１から取得した撮像画像情報を公知の画像解析処理により解析し、投写用画像情報を生成する。
　具体的には、投写用画像情報生成部５２は、撮像画像情報取得部５１から取得した撮像画像情報の中から、歩行者、電柱、街路樹、事故車両等の障害物または危険物を検知し、障害物または危険物を検知した場合には、検知した障害物または危険物の有無やその位置を運転者に報知するための第一の投写用画像情報を生成する。投写用画像情報生成部５２は、この第一の投写用画像情報を駆動部４５に入力する。
　この第一の投写用画像情報は、自動車の運転者に対し自動車の進行方向（ウィンドシールド１の前方）における視界に関して注意喚起を行うための画像情報である。
　撮像部９で撮像して得られた撮像画像情報は、ウィンドシールド１の前方の景色に相当する。そして、光変調素子４４のどの画素を有効（光を反射又は透過させて投写光学系４６に出射させる状態）にすれば、コンバイナ２のどの領域に画像が投写されるかの関係は、予め決められている。このため、撮像画像情報から検出された障害物または危険物の領域が分かれば、駆動部４５にどのような第一の投写用画像情報を出力すべきかを決めることができる。
　また、投写用画像情報生成部５２は、自動車の走行速度及び目的地へのナビゲーションを行うためのガイド情報を示す第二の投写用画像情報を生成し、第二の投写用画像情報を駆動部４５に入力する。投写用画像情報生成部５２は、画像情報生成部と画像情報入力部として機能する。
　異常検知部５３は、光変調素子４４及び駆動部４５で構成される光変調部と投写用画像情報生成部５２の各々が正常に動作しているか否かを常時監視し、異常があった場合にこれを検知する。
　光変調部の異常とは、光変調素子４４が駆動部４５から指示された通りに空間変調を行わなくなった状態を言う。
　例えば、異常検知部５３は、光変調素子４４の各画素の状態を示す信号を光変調素子４４から取得し、投写用画像情報生成部５２で生成されて駆動部４５に入力された投写用画像情報を取得する。そして、異常検知部５３は、光変調素子４４から取得した各画素の状態を示す信号から投写用画像情報を逆算し、逆算した投写用画像情報と、投写用画像情報生成部５２から取得した投写用画像情報との一致度が閾値を超える場合に光変調部の異常なしと判断し、この一致度が閾値以下の場合に光変調部の異常ありと判定する。
　投写用画像情報生成部５２の異常とは、投写用画像情報生成部５２から駆動部４５に入力された投写用画像情報が、通常の運転状態では有りえない内容になっている状態をいう。
　例えば、異常検知部５３は、投写用画像情報生成部５２から駆動部４５に入力された投写用画像情報を取得し、取得した投写用画像情報を構成する各画素の値が全て閾値以上になっている場合は、投写用画像情報生成部５２の異常ありと判定する。投写用画像情報を構成する各画素の値が全て閾値以上になっている場合、この投写用画像情報にしたがって空間変調した光に基づく画像は、コンバイナ２の全面に単色画像が表示されたものになる。どのような障害物であっても、このような状態はありえないため、この状態にあることを検知することで、投写用画像情報生成部５２の異常を検知することができる。
　なお、自動車内（例えば運転席の上方）に、コンバイナ２全体を撮像する撮像部を設けておく。そして、異常検知部５３は、この撮像部でコンバイナ２を撮像して得られる撮像画像情報と、光変調素子４４の各画素の状態を示す信号から逆算した投写用画像情報、又は、駆動部４５に入力された投写用画像情報とを比較し、両者の一致度が閾値を超える場合には、光変調部と投写用画像情報生成部５２の少なくとも一方に異常がないことを検知し、両者の一致度が閾値以下の場合には、光変調部と投写用画像情報生成部５２の少なくとも一方に異常があることを検知してもよい。
　制御部５４は、異常検知部５３により、光変調部と投写用画像情報生成部５２の少なくとも一方の異常が検知された場合に、光変調部と光源ユニット４０の少なくとも一方を停止させる。更に、制御部５４は、投写用画像情報生成部５２により生成された投写用画像情報が自動車の運転者に対し自動車の進行方向における視界に関して注意喚起する画像情報である第一の投写用画像情報を含む場合に、運転者に前方の視界に関して注意喚起するための出力を行う。
　次に、以上のように構成されたＨＵＤの動作について説明する。
　図４は、図１に示すＨＵＤの動作を説明するためのフローチャートである。
　ＨＵＤの電源が投入されると、投写用画像情報生成部５２によって投写用画像情報の生成が行われ（ステップＳ１）、この投写用画像情報に応じて空間変調された光がコンバイナ２に投写される（ステップＳ２）。
　自動車の運転中に、光変調部と投写用画像情報生成部５２の少なくとも一方に異常が発生すると、異常検知部５３がその異常を検知する（ステップＳ３：ＹＥＳ）。
　システム制御部４７は、異常検知部５３によって異常が検知されると、光変調素子４４及び駆動部４５と光源ユニット４０の少なくとも一方の動作を停止させる制御を行う（ステップＳ４）。
　例えば、制御部５４は、光源ユニット４０からの光がコンバイナ２に到達しないように、駆動部４５に対し、光変調素子の全画素を例えば非透過状態とさせる指示を行う。または、制御部５４は、光源ユニット４０の光源制御部４０Ａに対し、Ｒ光源４１ｒ、Ｇ光源４１ｇ、及びＢ光源４１ｂを停止させる指示を行って、光源ユニット４０から光変調素子４４に光を入射させない状態とする。これにより、コンバイナ２には光が投写されなくなる。
　次に、制御部５４は、投写用画像情報生成部５２が生成した投写用画像情報を取得し、取得した投写用画像情報が第一の投写用画像情報を含むか否かを判定する（ステップＳ５）。
　ステップＳ５の判定がＹＥＳのとき、制御部５４は、第一の投写用画像情報に応じた画像情報を液晶表示装置６１に出力する。第一の投写画像情報に応じた画像情報が液晶表示装置６１に入力されると、液晶表示装置６１は、この画像情報に基づく警告画像を表示する（ステップＳ６）。
　図５は、図４のステップＳ６において液晶表示装置６１に表示される画像の一例を示している。液晶表示装置６１には、速度メータ６１ｂと、タコメータ６１ａとを含む警告画像以外の画像が常時表示される。
　この液晶表示装置６１に表示される第一の投写用画像情報に応じた警告画像は、運転者に注意を喚起するアイコンやメッセージである。例えば、第一の投写用画像情報が、歩行者の存在を報知するための情報である場合には、歩行者を示すアイコンと、歩行者に注意するよう促すメッセージとを含む警告画像６１ｃが液晶表示装置６１に表示される。
　以上のように、図１のＨＵＤは、光変調部と投写用画像情報生成部５２の少なくとも一方の異常に起因してコンバイナ２に画像が表示されなくなっても、液晶表示装置６１を通じて運転者に対し、前方視界に関して注意喚起する警告画像を表示することができる。このため、光変調部と光源ユニット４０の少なくとも一方が停止してから、実際にコンバイナ２に表示される画像が消えるまでの間における前方視界の状況を運転者が知ることができ、ＨＵＤの運転支援機能を享受することが可能となる。
　第一の投写用画像情報に応じた警告画像の液晶表示装置６１における表示位置は、第一の投写用画像情報に応じた光のコンバイナ２における投写位置と対応させるのが好ましい。
　例えば、ウィンドシールド１前方の左側に歩行者が存在しており、この歩行者の存在を報知するための情報が第一の投写用画像情報として生成された場合は、この第一の投写用画像情報に応じた光が投写される位置はコンバイナ２の中央よりも左側となる。したがって、図６に示すように、液晶表示装置６１の中央よりも左側の任意の位置に警告画像６１ｃを表示する。第一の投写用画像情報に応じた光が投写される位置がコンバイナ２の中央よりも右側であれば、液晶表示装置６１の中央よりも右側の任意の位置に警告画像６１ｃを表示する。これにより、運転者は、実際の歩行者の位置を速やかに把握することができるので、この歩行者を回避する運転操作を迅速に行うことができる。
　図５及び図６に示す表示例では、警告画像６１ｃを、計器類の他の画像と重ならない位置に表示させるものとした。この変形例として、図７に示すように、液晶表示装置６１に表示される画像の一部（スピードメータ、タコメータ、燃料計、水温計等の計器類のうち、一時的に非表示になっても運転に支障をきたさない計器類（例えば、燃料計、タコメーター等）の画像）を警告画像６１ｃに置き換えて表示してもよい。
　また、各種計器類の情報を表示するための液晶表示装置６１に、第一の投写用画像情報に応じた警告画像を表示させるものとしたが、これに限らない。
　例えば、図８に示すように、ダッシュボード３やセンターコンソール等にカーナビゲーション装置用の表示装置７０が取り付けられている場合は、表示装置７０に第一の投写用画像情報に応じた警告画像を表示させてもよい。
　また、図１に示したＨＵＤを自動車に２つ設け、一方のＨＵＤの光変調部と投写用画像情報生成部５２の少なくとも一方に異常が発生した場合には、この一方のＨＵＤのコンバイナ２における画像表示を非表示にして前方の視界を確保すると共に、第一の投写用画像情報に応じた警告画像を他方のＨＵＤのコンバイナ２に表示させてもよい。この場合は、メータークラスタの液晶表示装置６１や表示装置７０に画像情報を表示させる場合に比べて視線の移動が少なくなるので、障害物または危険物を回避する運転操作をより一層迅速に行うことができる。
　また、第一の投写用画像情報に応じた警告画像を表示するための専用の表示装置を自動車内に設けておき、制御部５４がこの表示装置に警告画像を表示させてもよい。運転ハンドル前方にある液晶表示装置６１に警告画像を表示させる構成によれば、運転者の視線をずらすことなく、運転者に対して注意喚起を行うことができる。
　ここまでは、警告画像の表示によって運転者に注意喚起を行うものとしたが、注意喚起は音声出力によって行ってもよい。例えば、制御部５４は、第一の投写用画像情報にしたがって、運転者に注意喚起する音声情報をカーラジオやカーステレオのスピーカを通じて出力する。液晶表示装置６１への警告画像６１ｃの表示と、音声情報の出力とを併せて行うのも効果的である。
　制御部５４は、異常検知部５３によって検知された異常を通知するための画像（例えば、光変調素子４４が故障したことを示すアイコン）を液晶表示装置６１に表示させてもよい。このようにすることで、運転者は、ＨＵＤが故障したことをすぐに知ることができ、修理対応などを迅速に行うことができる。また、運転者は、ＨＵＤによるコンバイナ２への画像表示が行われなくなった理由を知ることができ、運転に集中することができる。
　以上説明してきたように、本明細書には以下の事項が開示されている。
　開示された投写型表示装置は、画像情報を生成する画像情報生成部と、光源ユニットから出射される光を上記画像情報に応じて空間変調する光変調部と、上記光変調部に上記画像情報を入力する画像情報入力部と、上記光変調部により空間変調された光を乗り物のウィンドシールドに設けられる投写面に投写する投写部と、上記光変調部と上記画像情報入力部の少なくとも一方の異常を検知する異常検知部と、上記異常検知部により、上記光変調部と上記画像情報入力部の少なくとも一方の異常が検知された場合に、上記光変調部と上記光源ユニットの少なくとも一方を停止させ、更に、上記画像情報生成部により生成された画像情報が上記乗り物の運転者に対し上記乗り物の進行方向における視界に関して注意喚起する画像情報を含む場合に、運転者に上記視界に関して注意喚起するための出力を行う制御部と、を備えるものである。
　開示された投写型表示装置は、上記制御部は、上記乗り物に搭載される表示装置に上記注意喚起する画像情報に応じた画像を表示させるものである。
　開示された投写型表示装置は、上記制御部は、上記表示装置において、上記注意喚起する画像情報に応じた光の上記投写面における投写位置と対応する位置に、上記注意喚起する画像情報に応じた画像を表示させるものである。
　開示された投写型表示装置は、上記制御部は、上記注意喚起する画像情報に応じた画像として、注意喚起を行うアイコンと、注意喚起を行うメッセージとを上記表示装置に表示させるものである。
　開示された投写型表示装置は、上記表示装置は、上記注意喚起する画像情報に応じた画像以外の画像を更に表示し、上記制御部は、上記表示装置に表示される上記注意喚起する画像情報に応じた画像以外の画像の一部を上記注意喚起する画像情報に応じた画像に置き換えるものである。
　開示された投写型表示装置は、上記表示装置は、上記画像情報生成部、上記光変調部、上記画像情報入力部、上記投写部、上記異常検知部、及び上記制御部を有する投写型表示装置であるものである。
　開示された投写型表示装置は、上記制御部は、上記異常検知部によって検知された異常を通知するための画像を更に上記表示装置に表示させるものである。
　開示された投写型表示装置は、上記制御部は、運転者に上記視界に関して注意喚起するための音声出力を行うものである。
　開示された投写型表示装置は、上記乗り物が自動車であるものを含む。
　開示された運転支援方法は、乗り物に搭載される投写型表示装置を用いた運転支援方法であって、上記投写型表示装置は、画像情報を生成する画像情報生成部と、光源ユニットから出射される光を上記画像情報に応じて空間変調する光変調部と、上記光変調部に上記画像情報を入力する画像情報入力部と、上記光変調部により空間変調された光を上記乗り物のウィンドシールドに設けられる投写面に投写する投写部と、を含み、上記光変調部と上記画像情報入力部の少なくとも一方の異常を検知する異常検知ステップと、上記異常検知ステップにより、上記光変調部と上記画像情報入力部の少なくとも一方の異常が検知された場合に、上記光変調部と上記光源ユニットの少なくとも一方を停止させ、更に、上記画像情報生成部により生成された画像情報が上記乗り物の運転者に対し上記乗り物の進行方向における視界に関して注意喚起する画像情報を含む場合に、運転者に上記視界に関して注意喚起するための出力を行う制御ステップと、を備えるものである。
　開示された運転支援方法は、上記制御ステップでは、上記乗り物に搭載される表示装置に上記注意喚起する画像情報に応じた画像を表示させるものである。
　開示された運転支援方法は、上記制御ステップでは、上記表示装置において、上記注意喚起する画像情報に応じた光の上記投写面における投写位置と対応する位置に、上記注意喚起する画像情報に応じた画像を表示させるものである。
　開示された運転支援方法は、上記制御ステップでは、上記注意喚起する画像情報に応じた画像として、注意喚起を行うアイコンと、注意喚起を行うメッセージとを上記表示装置に表示させるものである。
　開示された運転支援方法は、上記表示装置は、上記注意喚起する画像情報に応じた画像以外の画像を更に表示し、上記制御ステップでは、上記表示装置に表示される上記注意喚起する画像情報に応じた画像以外の画像の一部を上記注意喚起する画像情報に応じた画像に置き換えるものである。
　開示された運転支援方法は、上記表示装置は、上記画像情報生成部、上記光変調部、上記画像情報入力部、及び上記投写部を有する投写型表示装置であるものである。
　開示された運転支援方法は、上記制御ステップでは、上記異常検知ステップによって検知された異常を通知するための画像を更に上記表示装置に表示させるものである。
　開示された運転支援方法は、上記制御ステップでは、運転者に上記視界に関して注意喚起するための音声出力を行うものである。
　開示された運転支援方法は、上記乗り物が自動車であるものを含む。
　本発明は、特に運転支援機能を備えた自動車用のＨＵＤに適用して利便性が高く、有効である。
１　ウィンドシールド
２　コンバイナ
３　ダッシュボード
４　光源部
９　撮像部
４０　光源ユニット
４４　光変調素子
４５　駆動部
４６　投写光学系
４７　システム制御部
５２　投写用画像情報生成部
５３　異常検知部
５４　制御部
６１　液晶表示装置
７０　表示装置

Claims (18)

  1. 　画像情報を生成する画像情報生成部と、
    　光源ユニットから出射される光を前記画像情報に応じて空間変調する光変調部と、
    　前記光変調部に前記画像情報を入力する画像情報入力部と、
    　前記光変調部により空間変調された光を乗り物のウィンドシールドに設けられる投写面に投写する投写部と、
    　前記光変調部と前記画像情報入力部の少なくとも一方の異常を検知する異常検知部と、
    　前記異常検知部により、前記光変調部と前記画像情報入力部の少なくとも一方の異常が検知された場合に、前記光変調部と前記光源ユニットの少なくとも一方を停止させ、更に、前記画像情報生成部により生成された画像情報が前記乗り物の運転者に対し前記乗り物の進行方向における視界に関して注意喚起する画像情報を含む場合に、運転者に前記視界に関して注意喚起するための出力を行う制御部と、を備える投写型表示装置。
  2. 　請求項１記載の投写型表示装置であって、
    　前記制御部は、前記乗り物に搭載される表示装置に前記注意喚起する画像情報に応じた画像を表示させる投写型表示装置。
  3. 　請求項２記載の投写型表示装置であって、
    　前記制御部は、前記表示装置において、前記注意喚起する画像情報に応じた光の前記投写面における投写位置と対応する位置に、前記注意喚起する画像情報に応じた画像を表示させる投写型表示装置。
  4. 　請求項２又は３記載の投写型表示装置であって、
    　前記制御部は、前記注意喚起する画像情報に応じた画像として、注意喚起を行うアイコンと、注意喚起を行うメッセージとを前記表示装置に表示させる投写型表示装置。
  5. 　請求項２～４のいずれか１項記載の投写型表示装置であって、
    　前記表示装置は、前記注意喚起する画像情報に応じた画像以外の画像を更に表示し、
    　前記制御部は、前記表示装置に表示される前記注意喚起する画像情報に応じた画像以外の画像の一部を前記注意喚起する画像情報に応じた画像に置き換える投写型表示装置。
  6. 　請求項２～５のいずれか１項記載の投写型表示装置であって、
    　前記表示装置は、前記画像情報生成部、前記光変調部、前記画像情報入力部、前記投写部、前記異常検知部、及び前記制御部を有する投写型表示装置である投写型表示装置。
  7. 　請求項２～６のいずれか１項記載の投写型表示装置であって、
    　前記制御部は、前記異常検知部によって検知された異常を通知するための画像を更に前記表示装置に表示させる投写型表示装置。
  8. 　請求項１～７のいずれか１項記載の投写型表示装置であって、
    　前記制御部は、運転者に前記視界に関して注意喚起するための音声出力を行う投写型表示装置。
  9. 　請求項１～８のいずれか１項記載の投写型表示装置であって、
    　前記乗り物は自動車である投写型表示装置。
  10. 　乗り物に搭載される投写型表示装置を用いた運転支援方法であって、
    　前記投写型表示装置は、画像情報を生成する画像情報生成部と、光源ユニットから出射される光を前記画像情報に応じて空間変調する光変調部と、前記光変調部に前記画像情報を入力する画像情報入力部と、前記光変調部により空間変調された光を前記乗り物のウィンドシールドに設けられる投写面に投写する投写部と、を含み、
    　前記光変調部と前記画像情報入力部の少なくとも一方の異常を検知する異常検知ステップと、
    　前記異常検知ステップにより、前記光変調部と前記画像情報入力部の少なくとも一方の異常が検知された場合に、前記光変調部と前記光源ユニットの少なくとも一方を停止させ、更に、前記画像情報生成部により生成された画像情報が前記乗り物の運転者に対し前記乗り物の進行方向における視界に関して注意喚起する画像情報を含む場合に、運転者に前記視界に関して注意喚起するための出力を行う制御ステップと、を備える運転支援方法。
  11. 　請求項１０記載の運転支援方法であって、
    　前記制御ステップでは、前記乗り物に搭載される表示装置に前記注意喚起する画像情報に応じた画像を表示させる運転支援方法。
  12. 　請求項１１記載の運転支援方法であって、
    　前記制御ステップでは、前記表示装置において、前記注意喚起する画像情報に応じた光の前記投写面における投写位置と対応する位置に、前記注意喚起する画像情報に応じた画像を表示させる運転支援方法。
  13. 　請求項１１又は１２記載の運転支援方法であって、
    　前記制御ステップでは、前記注意喚起する画像情報に応じた画像として、注意喚起を行うアイコンと、注意喚起を行うメッセージとを前記表示装置に表示させる運転支援方法。
  14. 　請求項１１～１３のいずれか１項記載の運転支援方法であって、
    　前記表示装置は、前記注意喚起する画像情報に応じた画像以外の画像を更に表示し、
    　前記制御ステップでは、前記表示装置に表示される前記注意喚起する画像情報に応じた画像以外の画像の一部を前記注意喚起する画像情報に応じた画像に置き換える運転支援方法。
  15. 　請求項１１～１４のいずれか１項記載の運転支援方法であって、
    　前記表示装置は、前記画像情報生成部、前記光変調部、前記画像情報入力部、及び前記投写部を有する投写型表示装置である運転支援方法。
  16. 　請求項１１～１５のいずれか１項記載の運転支援方法であって、
    　前記制御ステップでは、前記異常検知ステップによって検知された異常を通知するための画像を更に前記表示装置に表示させる運転支援方法。
  17. 　請求項１０～１６のいずれか１項記載の運転支援方法であって、
    　前記制御ステップでは、運転者に前記視界に関して注意喚起するための音声出力を行う運転支援方法。
  18. 　請求項１０～１７のいずれか１項記載の運転支援方法であって、
    　前記乗り物は自動車である運転支援方法。
PCT/JP2016/052934 2015-03-12 2016-02-01 投写型表示装置及び運転支援方法 WO2016143412A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2017504905A JP6175588B2 (ja) 2015-03-12 2016-02-01 投写型表示装置及び運転支援方法
DE112016000237.8T DE112016000237T5 (de) 2015-03-12 2016-02-01 Projektionstypdisplayvorrichtung und Betriebsassistenzverfahren
CN201680006058.4A CN107107761B (zh) 2015-03-12 2016-02-01 投影型显示装置以及驾驶辅助方法
US15/638,344 US10336192B2 (en) 2015-03-12 2017-06-29 Projection type display device and operation assistance method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015049626 2015-03-12
JP2015-049626 2015-03-12

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/638,344 Continuation US10336192B2 (en) 2015-03-12 2017-06-29 Projection type display device and operation assistance method

Publications (1)

Publication Number Publication Date
WO2016143412A1 true WO2016143412A1 (ja) 2016-09-15

Family

ID=56879982

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/052934 WO2016143412A1 (ja) 2015-03-12 2016-02-01 投写型表示装置及び運転支援方法

Country Status (5)

Country Link
US (1) US10336192B2 (ja)
JP (1) JP6175588B2 (ja)
CN (1) CN107107761B (ja)
DE (1) DE112016000237T5 (ja)
WO (1) WO2016143412A1 (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018025475A1 (ja) * 2016-08-02 2018-02-08 株式会社デンソー 車両用映像表示システム
WO2018051734A1 (ja) * 2016-09-16 2018-03-22 富士フイルム株式会社 投写型表示装置及びその制御方法
WO2018055947A1 (ja) * 2016-09-21 2018-03-29 富士フイルム株式会社 投写型表示装置
WO2019058645A1 (ja) * 2017-09-21 2019-03-28 マクセル株式会社 ヘッドアップディスプレイ装置
JPWO2018179786A1 (ja) * 2017-03-28 2020-02-13 株式会社村上開明堂 情報表示装置
WO2020049881A1 (ja) * 2018-09-07 2020-03-12 マクセル株式会社 ヘッドアップディスプレイ装置
JP2022008673A (ja) * 2017-09-08 2022-01-13 ローム株式会社 映像表示システム及び車両

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019054395A (ja) * 2017-09-14 2019-04-04 オムロン株式会社 表示装置
US10682953B1 (en) * 2017-09-28 2020-06-16 Evan W. Mills Device providing sensory feedback for vehicle pedal selection
JP6928570B2 (ja) * 2018-03-22 2021-09-01 マクセル株式会社 情報表示装置
CN108608863A (zh) * 2018-05-03 2018-10-02 江苏新通达电子科技股份有限公司 虚拟仪表监测应急系统及工作方法、虚拟仪表盘、汽车
CN108845199A (zh) * 2018-05-03 2018-11-20 江苏新通达电子科技股份有限公司 虚拟仪表故障检测系统及检测方法、虚拟仪表盘、汽车
JP2023035243A (ja) * 2021-08-31 2023-03-13 トヨタ自動車株式会社 車両用表示制御装置、車両用表示制御方法及び車両用表示制御プログラム

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001315547A (ja) * 2000-05-09 2001-11-13 Honda Motor Co Ltd 車両用ヘッドアップディスプレイ装置
JP2004249836A (ja) * 2003-02-20 2004-09-09 Denso Corp 車両用表示制御システム
JP2010064633A (ja) * 2008-09-11 2010-03-25 Nippon Seiki Co Ltd 車両用ヘッドアップディスプレイ装置
US7772995B2 (en) * 2006-07-06 2010-08-10 Airbus France Display system for aircraft
JP2013137355A (ja) * 2011-12-28 2013-07-11 Nippon Seiki Co Ltd 表示装置およびその表示方法
JP2014125006A (ja) * 2012-12-25 2014-07-07 Denso Corp 車両用表示制御装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2812435B1 (fr) * 2000-07-12 2006-12-15 Alstom Procede et dispositif de surveillance d'un appareil electrique sous tension, en particulier d'un appareil electrique haute ou moyenne tension
US6812942B2 (en) * 2000-12-28 2004-11-02 International Business Machines Corporation Context-responsive in-vehicle display system
US6937377B1 (en) * 2003-11-12 2005-08-30 Rockwell Collins Dual lamp projection system
JP2005297810A (ja) 2004-04-13 2005-10-27 Denso Corp 車両用表示システム及びプログラム
JP4373282B2 (ja) 2004-06-04 2009-11-25 本田技研工業株式会社 車両用表示装置
FR2922323B1 (fr) * 2007-10-12 2012-08-03 Airbus France Dispositif de surveillance croisee pour afficheurs dits tete haute
US20110025584A1 (en) * 2009-07-29 2011-02-03 Gm Global Technology Operations, Inc. Light-emitting diode heads-up display for a vehicle
US20120026826A1 (en) * 2010-05-18 2012-02-02 Scotsman Industries, Inc. Blending assembly with automated dispensing valve
US20120224060A1 (en) * 2011-02-10 2012-09-06 Integrated Night Vision Systems Inc. Reducing Driver Distraction Using a Heads-Up Display
US8947219B2 (en) * 2011-04-22 2015-02-03 Honda Motors Co., Ltd. Warning system with heads up display
JP5988074B2 (ja) * 2012-01-27 2016-09-07 日本精機株式会社 車両用ヘッドアップディスプレイ装置およびそのセルフチェック方法
JP6135048B2 (ja) * 2012-04-24 2017-05-31 日本精機株式会社 ヘッドアップディスプレイ装置
KR101960306B1 (ko) * 2012-07-13 2019-03-20 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
US9073435B2 (en) * 2012-12-21 2015-07-07 Toyota Motor Engineering & Manufacturing North America, Inc. Vehicle display systems with visual warning management
JP6322364B2 (ja) 2013-01-29 2018-05-09 矢崎総業株式会社 電子制御装置
JP6313933B2 (ja) 2013-06-03 2018-04-18 矢崎総業株式会社 ヘッドアップディスプレイ装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001315547A (ja) * 2000-05-09 2001-11-13 Honda Motor Co Ltd 車両用ヘッドアップディスプレイ装置
JP2004249836A (ja) * 2003-02-20 2004-09-09 Denso Corp 車両用表示制御システム
US7772995B2 (en) * 2006-07-06 2010-08-10 Airbus France Display system for aircraft
JP2010064633A (ja) * 2008-09-11 2010-03-25 Nippon Seiki Co Ltd 車両用ヘッドアップディスプレイ装置
JP2013137355A (ja) * 2011-12-28 2013-07-11 Nippon Seiki Co Ltd 表示装置およびその表示方法
JP2014125006A (ja) * 2012-12-25 2014-07-07 Denso Corp 車両用表示制御装置

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018025475A1 (ja) * 2016-08-02 2018-02-08 株式会社デンソー 車両用映像表示システム
JPWO2018051734A1 (ja) * 2016-09-16 2019-04-04 富士フイルム株式会社 投写型表示装置及びその制御方法
WO2018051734A1 (ja) * 2016-09-16 2018-03-22 富士フイルム株式会社 投写型表示装置及びその制御方法
US10795155B2 (en) 2016-09-16 2020-10-06 Fujifilm Corporation Projection display device and control method for the same
JP6464326B2 (ja) * 2016-09-16 2019-02-06 富士フイルム株式会社 投写型表示装置及びその制御方法
CN109789780A (zh) * 2016-09-21 2019-05-21 富士胶片株式会社 投影型显示装置
JPWO2018055947A1 (ja) * 2016-09-21 2019-06-27 富士フイルム株式会社 投写型表示装置
CN109789780B (zh) * 2016-09-21 2021-10-29 富士胶片株式会社 投影型显示装置
US10746984B2 (en) 2016-09-21 2020-08-18 Fujifilm Corporation Projection display device with cover
WO2018055947A1 (ja) * 2016-09-21 2018-03-29 富士フイルム株式会社 投写型表示装置
JPWO2018179786A1 (ja) * 2017-03-28 2020-02-13 株式会社村上開明堂 情報表示装置
US11922840B2 (en) 2017-09-08 2024-03-05 Rohm Co., Ltd. Liquid crystal display device, image display system and vehicle
JP2022008673A (ja) * 2017-09-08 2022-01-13 ローム株式会社 映像表示システム及び車両
WO2019058645A1 (ja) * 2017-09-21 2019-03-28 マクセル株式会社 ヘッドアップディスプレイ装置
US11039112B2 (en) 2017-09-21 2021-06-15 Maxell, Ltd. Head up display apparatus
JPWO2019058645A1 (ja) * 2017-09-21 2020-10-15 マクセル株式会社 ヘッドアップディスプレイ装置
CN110754082A (zh) * 2017-09-21 2020-02-04 麦克赛尔株式会社 平视显示装置
CN110754082B (zh) * 2017-09-21 2022-03-29 麦克赛尔株式会社 平视显示装置
WO2020049881A1 (ja) * 2018-09-07 2020-03-12 マクセル株式会社 ヘッドアップディスプレイ装置
JP7053857B2 (ja) 2018-09-07 2022-04-12 マクセル株式会社 ヘッドアップディスプレイ装置
JPWO2020049881A1 (ja) * 2018-09-07 2021-08-12 マクセル株式会社 ヘッドアップディスプレイ装置

Also Published As

Publication number Publication date
DE112016000237T5 (de) 2017-09-28
CN107107761B (zh) 2018-11-13
JPWO2016143412A1 (ja) 2017-09-14
US10336192B2 (en) 2019-07-02
US20170355265A1 (en) 2017-12-14
JP6175588B2 (ja) 2017-08-02
CN107107761A (zh) 2017-08-29

Similar Documents

Publication Publication Date Title
JP6175588B2 (ja) 投写型表示装置及び運転支援方法
JP6462194B2 (ja) 投写型表示装置、投写表示方法、及び、投写表示プログラム
JP6175589B2 (ja) 投写型表示装置及び投写表示方法
US10450728B2 (en) Projection type display device and projection control method
WO2016103937A1 (ja) 投写型表示装置、安全運転支援方法、及び安全運転支援プログラム
JP6446595B2 (ja) 投写型表示装置、投写表示方法、及び、投写表示プログラム
US10630946B2 (en) Projection type display device, display control method of projection type display device, and program
US10412354B2 (en) Projection type display device and projection control method
CN107851423B (zh) 投影型显示装置及投影控制方法
US11176749B2 (en) In-vehicle display device three-dimensional image generation
US10795155B2 (en) Projection display device and control method for the same
US20170269363A1 (en) Projection-type display device, electronic device, driver viewing image sharing method, and driver viewing image sharing program
JP6515250B2 (ja) 投写型表示装置、表示制御方法、及び表示制御プログラム
WO2017145565A1 (ja) 投写型表示装置、投写表示方法、及び、投写表示プログラム
KR20210147186A (ko) 사각지대경고장치를 결합한 사각지대 감시장치 및 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16761384

Country of ref document: EP

Kind code of ref document: A1

DPE2 Request for preliminary examination filed before expiration of 19th month from priority date (pct application filed from 20040101)
ENP Entry into the national phase

Ref document number: 2017504905

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 112016000237

Country of ref document: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16761384

Country of ref document: EP

Kind code of ref document: A1