WO2017018027A1 - 投写型表示装置及び投写制御方法 - Google Patents

投写型表示装置及び投写制御方法 Download PDF

Info

Publication number
WO2017018027A1
WO2017018027A1 PCT/JP2016/064712 JP2016064712W WO2017018027A1 WO 2017018027 A1 WO2017018027 A1 WO 2017018027A1 JP 2016064712 W JP2016064712 W JP 2016064712W WO 2017018027 A1 WO2017018027 A1 WO 2017018027A1
Authority
WO
WIPO (PCT)
Prior art keywords
projection
condition
line
light
sight
Prior art date
Application number
PCT/JP2016/064712
Other languages
English (en)
French (fr)
Inventor
広大 藤田
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to JP2017531043A priority Critical patent/JP6387465B2/ja
Priority to CN201680042497.0A priority patent/CN107851423B/zh
Publication of WO2017018027A1 publication Critical patent/WO2017018027A1/ja
Priority to US15/861,663 priority patent/US10502962B2/en

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • B60K35/81Arrangements for controlling instruments for controlling displays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/48Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus
    • G03B17/54Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus with projector
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10Intensity circuits
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191Testing thereof
    • H04N9/3194Testing thereof including sensor feedback
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149Instrument input by detecting viewing direction not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/186Displaying information according to relevancy
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/33Illumination features
    • B60K2360/334Projection means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/213Virtual instruments
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0118Head-up displays characterised by optical features comprising devices for improving the contrast of the display / brillance control visibility
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0181Adaptation to the pilot/driver
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0261Improving the quality of display appearance in the context of movement of objects on the screen or movement of the observer relative to the screen
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/10Automotive applications

Definitions

  • the present invention relates to a projection display device and a projection control method.
  • HUD Head-up Display
  • a user for example, a driver
  • a vehicle can visually recognize an image based on the projection light projected from the HUD as a real image on the screen or as a virtual image in front of the screen. it can.
  • Patent Document 1 describes a vehicle HUD that detects a driver's line of sight and projects light based on image information on a projection surface only when the line-of-sight direction is on the forward path of the vehicle.
  • Patent Document 2 describes a HUD that controls the spatial frequency of an image based on projection light so as not to induce a driver's focus adjustment reaction.
  • HUD assumes a certain area centered on the position of the eyes of a typical driver, and within this certain area. As long as the driver's eyes are present, the projection range of the projection light onto the projection surface is set so that a real image or a virtual image can be visually recognized.
  • the driver In a state where the light projection range and the driver's line of sight intersect, the driver can visually recognize a real image or a virtual image. On the other hand, in a state where the projection range of the projection light and the driver's line of sight do not intersect, the driver cannot visually recognize a real image or a virtual image. While driving the vehicle, it is necessary to pay attention to a wide range in front of the traveling direction, and there may be a situation where the projection range of the projection light does not intersect the driver's line of sight.
  • the real image or virtual image based on the light projected in the projection range is more focused than the situation in front of the projection range. Therefore, it may take time to grasp the situation ahead.
  • the HUD described in Patent Document 1 has a configuration in which light based on image information is immediately projected onto a projection surface when the line of sight is directed to the vehicle forward path from a state where the line of sight is other than the vehicle forward path. For this reason, when the driver's line of sight returns to the forward path of the vehicle, it is inevitable that the real image or virtual image that is immediately visible will be in focus, and it takes time to grasp the situation of the forward path of the vehicle. There is such a possibility.
  • Patent Document 2 does not consider the operation when the line of sight departs from the projection range.
  • the present invention has been made in view of the above circumstances, and provides a projection display device and a projection control method capable of accurately grasping a situation in a traveling direction even in a situation where a driver's line of sight changes in a complicated manner.
  • the purpose is to do.
  • the projection display device of the present invention includes a light source, a light modulation element that spatially modulates light emitted from the light source, and a projection surface that is mounted on a vehicle as projection light using light that is spatially modulated by the light modulation element.
  • a projection display unit including a projection unit for projecting, a gaze detection unit for detecting the gaze of the driver of the vehicle, and the projection display unit in a state where the gaze detected by the gaze detection unit is outside the projection plane
  • the projection A projection control unit configured to control the condition to a second condition where the visibility of the image based on the projection light is higher than that of the first condition.
  • the projection control method of the present invention projects a light source, a light modulation element that spatially modulates light emitted from the light source, and light that is spatially modulated by the light modulation element as projection light onto a projection surface mounted on a vehicle.
  • a projection display unit including a projection display unit, and a gaze detection unit that detects a gaze of a driver of the vehicle, wherein the gaze detected by the gaze detection unit is In the state outside the projection plane, the projection condition of the projection light onto the projection plane by the projection display unit is controlled to a first condition, and the line of sight detected by the line-of-sight detection unit is In a state where it has been determined that the projection surface has been moved, a projection control step is provided for controlling the projection condition to a second condition in which the visibility of the image based on the projection light is higher than the first condition.
  • the present invention it is possible to provide a projection display device and a projection control method capable of accurately grasping the situation in the traveling direction even in a situation where the driver's line of sight changes in a complicated manner.
  • HUD which is one Embodiment of the projection type display apparatus of this invention. It is a schematic diagram which shows the detailed structure of HUD shown in FIG. It is a figure which shows an example of projection conditions. It is an image figure of the projection image projected by the 1st condition when the projection condition is the position of a projection image, and the 2nd condition. It is a flowchart for demonstrating operation
  • FIG. 1 is a diagram showing a schematic configuration of a HUD which is an embodiment of the projection display device of the present invention.
  • This HUD is mounted on an automobile, and a part of the front windshield 1 of the automobile is set as a light projection surface 2, and a virtual image formed by the light projected on the projection surface 2 is visually recognized by an automobile driver. enable.
  • the HUD of FIG. 1 can be used by being mounted on vehicles such as trains, heavy machinery, construction machinery, aircraft, and ships in addition to automobiles.
  • the HUD shown in FIG. 1 includes a light source unit 4 built in a dashboard 3 of an automobile, a diffuser plate 5, a reflection mirror 6, and a magnifying mirror 7 built in the dashboard 3, and a driver seat side of the dashboard 3. And an imaging unit 10 attached to an instrument panel 9 provided in the instrument panel.
  • the diffusion plate 5 diffuses the light emitted from the light source unit 4 to form a surface light source.
  • the reflection mirror 6 reflects the light converted into the surface light source by the diffusion plate 5 toward the magnifier 7.
  • the magnifying mirror 7 enlarges the light from the reflecting mirror 6 and projects it onto the projection plane 2 that is a partial range of the front windshield 1.
  • the projection surface 2 is processed so that the light projected from the magnifying mirror 7 is reflected toward the eyes of the driver.
  • the light is projected onto the front windshield 1, but the light may be projected onto a combiner disposed near the front windshield 1. In this case, the combiner constitutes the projection plane 2.
  • the driver of the car can visually recognize pictures, characters, etc. of driving information by a virtual image based on the light projected on the projection plane 2 and reflected by the projection plane 2.
  • the projection surface 2 has a function of transmitting light from outside (outside the vehicle) of the front windshield 1. For this reason, the driver
  • the imaging unit 10 attached to the instrument panel 9 images the face of the driver in the driver's seat, and is connected to the light source unit 4 using wired or wireless.
  • the captured image data of the driver's face obtained by the imaging unit 10 is transferred to the light source unit 4 by wire or wireless.
  • the imaging unit 10 may be attached to a location other than the instrument panel 9 as long as it can capture the driver's face.
  • the imaging unit 10 may use what is provided as an application different from HUD in an automobile.
  • FIG. 2 is a schematic diagram showing a detailed configuration of the HUD shown in FIG.
  • the HUD includes a projection surface 2, a light source unit 4, a projection unit 50, an imaging unit 10, and an operation unit 80.
  • the light source unit 4 includes a light source unit 40, a drive unit 45 that drives a light modulation element 44 included in the light source unit 40, a system control unit 60 that performs overall control, and a line-of-sight detection unit 70.
  • the system control unit 60 functions as a projection control unit.
  • the light source unit 40 includes a light source controller 40A, an R light source 41r that is a red light source that emits red light, a G light source 41g that is a green light source that emits green light, and a B light source that is a blue light source that emits blue light. 41b, dichroic prism 43, collimator lens 42r provided between R light source 41r and dichroic prism 43, collimator lens 42g provided between G light source 41g and dichroic prism 43, B light source 41b and dichroic prism A collimator lens 42 b provided between the light source 43 and the light modulation element 44.
  • the R light source 41r, the G light source 41g, and the B light source 41b constitute a HUD light source.
  • Each of the R light source 41r, the G light source 41g, and the B light source 41b uses a light emitting element such as a laser or an LED (Light Emitting Diode).
  • a light emitting element such as a laser or an LED (Light Emitting Diode).
  • an HUD including three light sources, that is, an R light source 41r, a G light source 41g, and a B light source 41b is taken as an example, but the number of the light sources may be one, two, or four or more.
  • the light source control unit 40A sets the light emission amounts of the R light source 41r, the G light source 41g, and the B light source 41b to a predetermined light emission amount pattern, and the R light source 41r, the G light source 41g, and the B light source are set according to the light emission amount pattern. Control is performed to sequentially emit light from the light source 41b.
  • the dichroic prism 43 is an optical member for guiding light emitted from each of the R light source 41r, the G light source 41g, and the B light source 41b to the same optical path.
  • the dichroic prism 43 transmits the red light collimated by the collimator lens 42 r and emits the red light to the light modulation element 44.
  • the dichroic prism 43 reflects the green light that has been collimated by the collimator lens 42 g and emits it to the light modulation element 44. Further, the dichroic prism 43 reflects the blue light that has been collimated by the collimator lens 42 b and emits it to the light modulation element 44.
  • the optical member having the function of guiding light to the same optical path is not limited to the dichroic prism. For example, a cross dichroic mirror may be used.
  • the light modulation element 44 spatially modulates the light emitted from the dichroic prism 43 based on the projection image data that is image information, and generates light corresponding to the projection image data (red image light, blue image light, and green image light). ) To the projection unit 50.
  • This image information is, for example, information indicating the traveling speed of the automobile, information for notifying the driver, navigation information, and the like.
  • LCOS Liquid crystal on silicon
  • DMD Digital Micromirror Device
  • MEMS Micro Electro Mechanical Systems
  • the driving unit 45 drives the light modulation element 44 according to the projection image data input from the system control unit 60 and causes the projection unit 50 to emit light according to the projection image data.
  • the projection unit 50 includes a projection optical system 46, a diffusion plate 5, a reflection mirror 6, and a magnifying mirror 7.
  • the projection optical system 46 is an optical system for projecting the light spatially modulated by the light modulation element 44 onto the diffusion plate 5.
  • the optical system is not limited to a lens, and a scanner can also be used.
  • the projection unit 50 constitutes a projection unit that projects light spatially modulated by the light modulation element 44 onto the projection plane 2.
  • the projection surface 2 is a projection range of light projected by the projection unit 50 (hereinafter also referred to as projection light).
  • the projection unit 50 is optically designed so that an image based on the light projected on the projection surface 2 is visible to the driver as a virtual image at a position in front of the front windshield 1.
  • the light source including the R light source 41r, the G light source 41g, and the B light source 41b, the light modulation element 44, and the projection unit 50 constitute a projection display unit.
  • the system control unit 60 controls the light source control unit 40A and the drive unit 45 to cause the light source unit 40 to emit light based on the projection image data to the projection unit 50.
  • the line-of-sight detection unit 70 acquires captured image data obtained by imaging with the imaging unit 10, and performs a known line-of-sight detection process on the acquired captured image data, so that the line of sight of the driver of the automobile on which the HUD is mounted Is detected.
  • the line-of-sight detection unit 70 notifies the system control unit 60 of the line-of-sight detection result.
  • the operation unit 80 is a display unit (for example, a display with a touch panel in the center console) and operation buttons mounted on the automobile, and is an interface for giving various instructions to the system control unit 60.
  • the system control unit 60 determines whether or not the driver's line of sight exists within the projection range (projection plane 2) of light onto the front windshield 1 by the projection unit 50. To do.
  • the presence of a line of sight within the projection plane 2 refers to a state where the line of sight detected by the line-of-sight detection unit 70 intersects the projection plane 2.
  • the presence of a line of sight outside the projection plane 2 refers to a state where the line of sight detected by the line-of-sight detection unit 70 does not intersect the projection plane 2.
  • the projection control unit 60 determines that the driver's line of sight is outside the projection surface 2, the projection control unit controls the projection condition of the projection light on the projection surface 2 to the first condition. Projection light is projected by the projection display unit according to one condition.
  • the system control unit 60 determines that the driver's line of sight is within the projection plane 2, the system control unit 60 sets an image based on light projected on the projection plane 2 by the projection display unit (hereinafter referred to as a projection image). The visibility is controlled to a second condition that is higher than the first condition, and projection light is projected by the projection display unit in accordance with the second condition.
  • the system control unit 60 selects the first condition or the second condition depending on whether or not the driver's line of sight is within the projection plane 2, and the light projected onto the light projected by the projection display unit. Control is performed so that the visibility of the projected image based on the change is changed.
  • FIG. 3 is a diagram illustrating an example of the first condition and the second condition of the projection condition set by the system control unit 60.
  • the projection conditions include the brightness of the projected image, the saturation of the projected image, the size of the projected image, and the distance between the imaging position of the virtual image and the projection plane 2 in a state where the projected image can be viewed as a virtual image (up to the virtual image). At least one of a distance) and a position of a projected image.
  • the size of the projected image refers to the size of individual images such as various icons and characters included in the projected image.
  • the position of the projected image refers to the position of individual images such as various icons and characters included in the projected image in the entire projected image.
  • the projection condition of each of the projection image brightness, the saturation of the projection image, the size of the projection image, the distance to the virtual image, and the position of the projection image includes the first condition and the second condition. Conditions are included.
  • the second condition includes three sub-conditions (a), (b), and (c) in which the visibility of the projected image is different.
  • a first condition in which the brightness of the projected image is 10% of a predetermined reference brightness and a second condition in which the brightness of the projected image is 30% of the reference brightness (sub-condition (a ))
  • a second condition (subcondition (c)) in which the luminance of the projected image is the reference luminance. Can be set.
  • the visibility of the projected image increases as the luminance increases. For this reason, the sub-conditions included in the second condition for luminance increase the visibility of the projected image in the order of sub-condition (a), sub-condition (b), and sub-condition (c).
  • the system control unit 60 sets the brightness of the projection image to the first condition or the second condition by changing the brightness in the projection image data corresponding to the virtual image to be presented to the driver. Alternatively, the system control unit 60 does not change the projection image data corresponding to the virtual image to be presented to the driver, and changes the luminance of the projection image to the first condition or the second condition by changing the light emission amount of the light source. It may be set.
  • a first condition in which the saturation of the projection image is 10% of a predetermined reference saturation and a second condition in which the saturation of the projection image is 30% of the reference saturation (Sub condition (a)), a second condition (sub condition (b)) in which the saturation of the projected image is 60% of the reference saturation, and a second condition in which the saturation of the projected image is the reference saturation.
  • Conditions (sub-condition (c)) can be set.
  • the visibility of the projected image increases as the saturation increases. Therefore, the sub-conditions included in the second condition for saturation increase the visibility of the projected image in the order of sub-condition (a), sub-condition (b), and sub-condition (c).
  • the system control unit 60 sets the saturation of the projection image to the first condition or the second condition by changing the saturation in the projection image data corresponding to the virtual image to be presented to the driver.
  • the system control unit 60 controls the amount of light emitted from the light source without changing the projection image data corresponding to the virtual image to be presented to the driver, thereby adjusting the saturation of the projection image to the first condition or the second condition. You may set it as a condition.
  • a first condition in which the size of the projected image is 10% of a predetermined reference size and a second condition in which the size of the projected image is 30% of the reference size (sub Condition (a))
  • a second condition (subcondition) in which the size of the projected image is the reference size. (C)) can be set.
  • the visibility of the individual images included in the projected image increases as the size increases. Accordingly, the sub-conditions included in the second condition for the size of the projected image increase the visibility of the projected image in the order of the sub-condition (a), the sub-condition (b), and the sub-condition (c).
  • the system control unit 60 generates projection image data in which the sizes of various icons and the like are changed in the projection image data corresponding to the virtual image to be presented to the driver, and inputs the projection image data to the drive unit 45 to thereby increase the size of the projection image. Is set to the first condition or the second condition.
  • b) and a second condition (sub-condition (c)) using the distance to the virtual image as a reference distance can be set. Visibility is improved because the virtual image appears larger as the virtual image is positioned closer to the projection plane 2. Therefore, the sub-conditions included in the second condition regarding the distance to the virtual image have higher visibility in the order of the sub-condition (a), the sub-condition (b), and the sub-condition (c).
  • the system control unit 60 sets the distance to the virtual image to the first condition or the second condition by controlling the optical path length.
  • the first condition is that the position of individual images such as various icons included in the projected image is a position where a predetermined reference position is brought closer to the end of the projection plane 2 by the distance ⁇ 1.
  • the second condition (subcondition (a)) in which the position of the individual image is a position where the reference position is brought closer to the end of the projection plane 2 by the distance ⁇ 2 ( ⁇ 1), and the position of the individual image Is a second condition (subcondition (b)) in which the reference position is close to the end of the projection plane 2 by a distance ⁇ 3 ( ⁇ 2), and a second condition with the position of an individual image as the reference position.
  • Sub-condition (c)) can be set.
  • FIG. 4 is an image diagram of a projected image projected under the first condition and the second condition when the projection condition is the position of the projected image.
  • the icon 41 is at the reference position.
  • the projected image projected under the sub condition (b) has an icon 41 at a position moved by ⁇ 3 in the horizontal direction toward the end of the projection plane 2 with respect to the reference position.
  • the projected image projected under the sub condition (a) has an icon 41 at a position moved by ⁇ 2 in the horizontal direction toward the end of the projection plane 2 with respect to the reference position.
  • the projected image projected under the first condition has an icon 41 at a position moved by ⁇ 1 in the horizontal direction toward the end of the projection plane 2 with respect to the reference position.
  • the individual images included in the projected image are less likely to enter the driver's field of view as shown in FIG. 4 as they approach the end (the end of the projection surface 2) in the entire projected image, and thus visibility decreases. Accordingly, the sub-conditions included in the second condition for the position of the projected image have higher visibility in the order of the sub-condition (a), the sub-condition (b), and the sub-condition (c).
  • the system control unit 60 generates projection image data in which positions of various icons and the like are changed with respect to the projection image data corresponding to the virtual image to be presented to the driver, and inputs the projection image data to the driving unit 45 to thereby change the position of the projection image. Is set to the first condition or the second condition.
  • the system control unit 60 sequentially changes the sub-condition (a) having low visibility to the sub-condition (c) having high visibility, Control to gradually increase visibility.
  • FIG. 5 is a flowchart for explaining the operation of the HUD shown in FIG.
  • the system control unit 60 When the HUD is activated, the system control unit 60 starts projection of light onto the projection plane 2 by the projection display unit. The system control unit 60 sets the projection condition to the second condition (sub condition (c)) at the time of activation. After the start of light projection, the line-of-sight detection unit 70 acquires captured image data captured by the imaging unit 10 (step S1).
  • the line-of-sight detection unit 70 detects the driver's line of sight based on the captured image data acquired in step S1 (step S2).
  • step S2 the system control unit 60 determines whether the driver's line of sight detected by the line-of-sight detection unit 70 is within the projection plane 2 (step S3). When it is determined that the driver's line of sight is outside the projection plane 2 (step S3: NO), the system control unit 60 resets a built-in timer (step S4).
  • step S4 the system control unit 60 sets the flag stored in the internal memory to the flag o indicating that the line of sight is outside the projection plane 2 (step S5), and sets the projection condition to the first condition. Then, the projection display unit projects light according to the first condition (step S6). After the process of step S6, the process returns to step S1.
  • step S3 When it is determined in step S3 that the driver's line of sight is within the projection plane 2 (step S3: YES), the system control unit 60 determines whether or not the flag of the internal memory is set to the flag o. (Step S7).
  • step S7 NO
  • the process returns to step S1.
  • step S7 When the flag of the built-in memory is set to the flag o (step S7: YES), the system control unit 60 starts time measurement by the built-in timer (step S8).
  • the system control unit 60 refers to the measurement time of the built-in timer and determines whether or not the measurement time is equal to or longer than a second time (for example, 1 second) (step S9).
  • step S9 NO
  • the process returns to step S1 and the above-described processing is repeated.
  • step S9 When the time measured by the built-in timer is equal to or longer than the second time (step S9: YES), the system control unit 60 determines that the driver's line of sight has moved from outside the projection surface 2 into the projection surface 2 (step S10). ), The flag of the internal memory is set to the flag i (step S11).
  • the driver may check the rearview mirror and the side mirror when changing lanes. Under such circumstances where the line of sight changes in a complicated manner, the line of sight may enter the projection plane 2 within a short time. Repeatedly go out of the projection plane 2.
  • the system control unit 60 enters the projection surface 2 from a state where the driver's line of sight is outside the projection surface 2 and the state where the line of sight is inside the projection surface 2 is the second state. Only when the time has continued (step S9: YES), it is determined that the driver's line of sight has moved from outside the projection plane 2 into the projection plane 2.
  • system control unit 60 determines the projection condition after a first time (for example, about 1 second to 4 seconds) has elapsed since it has been determined that the driver's line of sight has moved from outside the projection surface 2 into the projection surface 2.
  • the projection condition is changed from the first condition to the second condition, and the projection display unit projects projection light under the second condition (step S12).
  • step S12 the system control unit 60 first sets the second condition sub-condition (a), then sets the second condition sub-condition (b), and finally sets the second condition sub-condition (b). (C) is set.
  • the projection condition is, for example, luminance
  • the virtual image visually recognized by the projected image gradually increases in luminance of the virtual image and returns to the reference luminance.
  • the first time can be determined as an appropriate value based on ergonomics, and is preferably set to a time of about 1 second to 4 seconds as described above.
  • the visibility for example, the luminance
  • the power consumption and heat generation of the HUD can be reduced.
  • step S9 when the driver's line of sight enters the projection plane 2 from a state outside the projection plane 2 and the line of sight remains within the projection plane 2 continues for a second time (step S9). Only: YES), the projection condition of the light onto the projection surface 2 is changed after the first time has elapsed.
  • the second time described above may be a time enough to determine that the line of sight is stable, may be determined experimentally, or may be changed in real time based on the driver's line of sight history. Also good.
  • step S7 when the determination in step S7 is YES, the process may immediately move to step S10. In this case, step S8 is deleted, and when the determination in step S7 is NO, the process proceeds to step S1.
  • the first time is preferably set to about 1 to 5 seconds. Even in such an operation, when the line of sight is moved from outside the projection plane 2 into the projection plane 2, a virtual image with high visibility is not immediately presented to the driver. For this reason, it can be avoided that the virtual image is in focus and the background becomes difficult to pay attention to, and the situation in the traveling direction can be accurately grasped.
  • step S12 of FIG. 5 the system control unit 60 may change the projection condition to the second condition without waiting for the first time from the process of step S10.
  • the projection light is projected on the projection surface 2 according to the second condition, and it takes some time until the virtual image based on the projection light becomes visible to the driver. It takes. During this time, a virtual image with low visibility is in a visible state, so it is possible to avoid focusing on the virtual image and making it difficult to pay attention to the background, and accurately grasp the situation in the direction of travel It becomes possible.
  • the second condition is divided into a plurality of sub-conditions, and first, the sub-condition (a) having the lowest visibility is set. It is possible to suppress a change in the visibility of a virtual image due to instantaneous switching. As a result, it is possible to avoid focusing on the virtual image and making it difficult to pay attention to the background, and it is possible to accurately grasp the situation in the traveling direction.
  • the first time in step S12 in FIG. 5 can be set manually.
  • a display restart time setting screen is displayed on a display unit (touch panel) as the operation unit 80, and the first time can be arbitrarily set by operating a button on this screen.
  • the shortest time (for example, 1 second) of the first time is determined in advance, and cannot be set to a shorter time. By doing so, it is possible to prevent the image projection condition from being changed immediately after it is determined that the driver's line of sight is within the light projection range.
  • the visibility of the virtual image gradually increases with the passage of time when the projection condition is changed from the first condition to the second condition. Can be restored to its maximum.
  • a screen as shown in FIG. 3 is displayed on the display unit (with touch panel) of the operation unit 80, one can be selected from five among luminance, saturation, size, distance, and position. Good.
  • the operation unit 80 is a display unit (for example, a display with a touch panel in the center console) and operation buttons mounted on the vehicle, a communication unit that communicates with an electronic device owned by the driver or the passenger is provided in the vehicle.
  • the signal operated by the electronic device may be received by the communication unit and output to the system control unit 60.
  • This communication unit may be built in the HUD.
  • the electronic device is a portable computer such as a smartphone, a camera-equipped mobile phone, and a tablet terminal (portable information terminal), and may be any device that can display various types of information by displaying the screen shown in FIG. 3 on the electronic device. . Thereby, an operation equivalent to that of the operation unit 80 can be performed.
  • the projection unit 50 uses an optical system that is optically designed so that an image based on the light projected on the projection plane 2 is visible to the driver as a real image on the projection plane 2. Also good. Also in this case, when the driver moves his / her line of sight from outside the projection surface 2 into the projection surface 2, if a real image with the maximum visibility is seen, it is difficult to accurately grasp the situation in the traveling direction. Therefore, it is effective to apply the present invention.
  • the disclosed projection display device includes a light source, a light modulation element that spatially modulates light emitted from the light source, and a projection surface that is mounted on a vehicle as projection light using light that is spatially modulated by the light modulation element.
  • a projection display unit including a projection unit for projecting, a gaze detection unit for detecting the gaze of the driver of the vehicle, and the projection display unit in a state where the gaze detected by the gaze detection unit is outside the projection plane
  • the projection condition of the projection light onto the projection plane is controlled to the first condition and the line of sight detected by the line-of-sight detection unit is determined to have moved from outside the projection plane into the projection plane, the projection And a projection control unit that controls the condition to a second condition in which the visibility of an image based on the projection light is higher than that of the first condition.
  • the second condition includes a plurality of sub-conditions in which the image visibility is different, and the projection control unit detects that the line of sight detected by the line-of-sight detection unit is out of the projection plane. If it is determined that the projection condition has moved into the projection plane, the projection condition is changed sequentially from the sub condition with low visibility to the sub condition with high visibility.
  • the projection condition is the luminance, saturation, or size of the image based on the projection light
  • the first condition is higher than the second condition in brightness, saturation,
  • it is a projection type display apparatus which is a large condition.
  • the projection condition is a distance from the projection plane of a virtual image formed by the projection light, and the first condition is greater than the second condition.
  • This is a projection display device that is a condition.
  • the projection condition is an image position based on the projection light
  • the first condition is that the position of the image is closer to the end of the projection plane than the second condition.
  • It is a projection type display apparatus which is the condition brought to the point.
  • the projection control unit may project the projection after a lapse of a first time from a point in time when it is determined that the line of sight detected by the line-of-sight detection unit has moved from outside the projection plane to the projection plane.
  • the projection display device changes the condition from the first condition to the second condition.
  • the disclosed projection display device is a projection display device in which the first time can be manually set.
  • the projection control unit shifts the line of sight detected by the line-of-sight detection unit from the state outside the projection plane into the projection plane, and the line of sight is second within the projection plane.
  • the projection display apparatus determines that the line of sight has shifted from the outside of the projection surface to the inside of the projection surface when the image is continuously present for a predetermined time.
  • the disclosed projection display device is a projection display device in which the projection conditions can be set manually.
  • the disclosed projection control method includes: a light source; a light modulation element that spatially modulates light emitted from the light source; and light that is spatially modulated by the light modulation element is projected onto a projection surface mounted on a vehicle as projection light.
  • a projection display unit including a projection display unit, and a gaze detection unit that detects a gaze of a driver of the vehicle, wherein the gaze detected by the gaze detection unit is In the state outside the projection plane, the projection condition of the projection light onto the projection plane by the projection display unit is controlled to a first condition, and the line of sight detected by the line-of-sight detection unit is
  • a projection control method comprising a projection control step for controlling the projection condition to be a second condition in which the visibility of an image based on the projection light is higher than the first condition in a state where it is determined that the projection plane has been moved. .
  • the second condition includes a plurality of sub-conditions having different image visibility.
  • the line of sight detected by the line-of-sight detection unit is from outside the projection plane.
  • the projection control method sequentially changes the projection condition from a sub condition with low visibility to a sub condition with high visibility.
  • the projection condition is brightness, saturation, or size of an image based on the projection light
  • the first condition is brightness, saturation, or This is a projection control method that is a condition for reducing the size.
  • the projection condition is a distance of the virtual image visually recognized by the projection light from the projection plane
  • the first condition is a condition in which the distance is larger than the second condition. It is a certain projection control method.
  • the projection condition is an image position based on the projection light
  • the first condition is that the position of the image is closer to the end of the projection plane than the second condition.
  • the projection condition is determined after the first time has elapsed from the time when it is determined that the line of sight detected by the line-of-sight detection unit has moved from outside the projection plane into the projection plane. Is a projection control method that changes from the first condition to the second condition.
  • the line of sight detected by the line-of-sight detection unit shifts from the state outside the projection plane to the projection plane, and the line of sight enters the projection plane.
  • This is a projection control method for determining that the line of sight has moved from the outside of the projection surface to the inside of the projection surface when it exists for a long time.
  • the projection display device of the present invention is particularly convenient when mounted on an automobile and is effective.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Computer Hardware Design (AREA)
  • Optics & Photonics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Instrument Panels (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本発明は、運転者の視線が複雑に変化する状況においても、進行方向の状況を正確に把握することのできる投写型表示装置及び投写制御方法を提供することを目的とする。本発明の投写型表示装置は、光源(41r、41g、41b)と、光源から出射される光を空間変調する光変調素子(44)と、光変調素子により空間変調された光を投写光として乗り物に搭載された投写面(2)に投写する投写ユニット(50)とを含む投写表示部と、乗り物の運転者の視線を検出する視線検出部(70)と、視線検出部により検出される視線が投写面外にある状態では、投写面への投写光の投写条件を第一の条件に制御し、視線が投写面外から投写面内に移ったと判断すると、投写面への投写光の投写条件を、投写光に基づく画像の視認性が第一の条件より高い第二の条件に変更するシステム制御部(60)と、を備える。

Description

投写型表示装置及び投写制御方法
 本発明は、投写型表示装置及び投写制御方法に関する。
 自動車、電車、重機、航空機、及び船舶等の乗り物内において、フロントウィンドシールドに、或いは、フロントウィンドシールドの付近に配置されるコンバイナをスクリーンとして用い、これに光を投写して画像を表示させる乗り物用のHUD(Head-up Display)が知られている(特許文献1、2参照)。このHUDを用いれば、乗り物内にいる利用者(例えば、運転者)は、HUDから投写された投写光に基づく画像を、スクリーン上で実像として、又は、スクリーン前方において虚像として、視認することができる。
 特許文献1には、運転者の視線を検出し、視線方向が車両前方進路にある場合にのみ投写面に画像情報に基づく光を投写する車両用のHUDが記載されている。
 特許文献2には、運転者の焦点調節反応を誘発しないように、投写光に基づく画像の空間周波数を制御するHUDが記載されている。
特開平7-257228号公報 特開2006-327310号公報
 人の身長や運転席に着座したときの姿勢などは運転者によって違うことに対して、HUDでは、代表的な運転者の目の位置を中心とする一定領域を想定して、この一定領域内に運転者の目がある限りは良好に実像又は虚像を視認できるように、投写面への投写光の投写範囲が設定されている。
 光の投写範囲と運転者の視線とが交差している状態では、運転者は実像又は虚像を視認することができる。一方、投写光の投写範囲と運転者の視線とが交差していない状態では、運転者は実像又は虚像を視認することはできない。乗り物の運転中は、進行方向前方の広い範囲に気を配る必要があり、投写光の投写範囲と運転者の視線とが交差しない状態も起こり得る。
 運転者が、投写範囲から視線を外した後、視線を投写範囲に戻した場合には、投写範囲における前方の状況よりも、投写範囲に投写される光に基づく実像又は虚像に焦点が合ってしまい、前方の状況を把握するまでに時間がかかる可能性がある。
 特許文献1に記載のHUDは、視線が車両前方進路以外にある状態から、視線が車両前方進路に向くと、画像情報に基づく光が投写面にすぐに投写される構成である。このため、運転者の視線が車両前方進路に戻ったときに、すぐに視認可能となる実像又は虚像に焦点が合ってしまうことは避けられず、車両前方進路の状況を把握するまでに時間がかかる可能性がある。
 特許文献2は、視線が投写範囲から外れたときの動作について考慮していない。
 本発明は、上記事情に鑑みてなされたものであり、運転者の視線が複雑に変化する状況においても、進行方向の状況を正確に把握することのできる投写型表示装置及び投写制御方法を提供することを目的とする。
 本発明の投写型表示装置は、光源と、上記光源から出射される光を空間変調する光変調素子と、上記光変調素子により空間変調された光を投写光として乗り物に搭載された投写面に投写する投写部とを含む投写表示部と、上記乗り物の運転者の視線を検出する視線検出部と、上記視線検出部により検出される視線が上記投写面外にある状態では、上記投写表示部による上記投写面への上記投写光の投写条件を第一の条件に制御し、上記視線検出部により検出される視線が上記投写面外から上記投写面内に移ったと判断した状態では、上記投写条件を上記第一の条件よりも上記投写光に基づく画像の視認性が高い第二の条件に制御する投写制御部と、を備える。
 本発明の投写制御方法は、光源と、上記光源から出射される光を空間変調する光変調素子と、上記光変調素子により空間変調された光を投写光として乗り物に搭載された投写面に投写する投写部とを含む投写表示部と、上記乗り物の運転者の視線を検出する視線検出部と、を有する投写型表示装置による投写制御方法であって、上記視線検出部により検出される視線が上記投写面外にある状態では、上記投写表示部による上記投写面への上記投写光の投写条件を第一の条件に制御し、上記視線検出部により検出される視線が上記投写面外から上記投写面内に移ったと判断した状態では、上記投写条件を上記第一の条件よりも上記投写光に基づく画像の視認性が高くなる第二の条件に制御する投写制御ステップを備える。
 本発明によれば、運転者の視線が複雑に変化する状況においても、進行方向の状況を正確に把握することのできる投写型表示装置及び投写制御方法を提供することができる。
本発明の投写型表示装置の一実施形態であるHUDの構成を示す概念図である。 図1に示すHUDの詳細構成を示す模式図である。 投写条件の一例を示す図である。 投写条件が投写画像の位置であるときの第一の条件と第二の条件によって投写される投写画像のイメージ図である。 図1に示すHUDの動作を説明するためのフローチャートである。
 以下、本発明の実施形態について図面を参照して説明する。
 図1は、本発明の投写型表示装置の一実施形態であるHUDの概略構成を示す図である。このHUDは、自動車に搭載され、自動車のフロントウィンドシールド1の一部の範囲を光の投写面2とし、投写面2に投写される光により結像された虚像を、自動車の運転者によって視認可能にする。図1のHUDは、自動車以外に、電車、重機、建機、航空機、及び船舶等の乗り物に搭載して用いることができる。
 図1に示すHUDは、自動車のダッシュボード3に内蔵された光源部4と、同じくダッシュボード3に内蔵された拡散板5、反射ミラー6、及び拡大鏡7と、ダッシュボード3の運転席側に設けられた計器板9に取り付けられた撮像部10と、を備えている。
 拡散板5は、光源部4から出射された光を拡散させて面光源化する。反射ミラー6は、拡散板5によって面光源化された光を拡大鏡7側に反射させる。拡大鏡7は、反射ミラー6からの光を拡大し、フロントウィンドシールド1の一部の範囲である投写面2に投写する。投写面2は、拡大鏡7から投写された光が運転者の目の方向に反射するような加工がなされている。ここではフロントウィンドシールド1に対して光を投写する構成としているが、フロントウィンドシールド1付近に配置されるコンバイナに光を投写する構成としてもよい。この場合は、コンバイナが投写面2を構成する。
 自動車の運転者は、投写面2に投写され、投写面2によって反射された光に基づく虚像により、運転に関する情報の絵や文字等を視認することができる。また、投写面2は、フロントウィンドシールド1の外部(車外)からの光を透過する機能を持つ。このため、運転者は、拡大鏡7から投写された光に基づく虚像と外界の景色とが重畳された像を視認することができる。
 計器板9に取り付けられた撮像部10は、運転席にいる運転者の顔を撮像するものであり、有線又は無線を用いて光源部4と接続されている。撮像部10により得られた運転者の顔の撮像画像データは、有線又は無線によって光源部4に転送される。
 撮像部10は、運転者の顔を撮像することができる場所であれば、計器板9以外の場所に取り付けてあってもよい。なお、撮像部10は、自動車においてHUDとは別の用途として設けられているものを利用してもよい。
 図2は、図1に示すHUDの詳細構成を示す模式図である。
 図2に示すように、HUDは、投写面2と、光源部4と、投写ユニット50と、撮像部10と、操作部80と、を備える。
 光源部4は、光源ユニット40と、光源ユニット40に含まれる光変調素子44を駆動する駆動部45と、全体を統括制御するシステム制御部60と、視線検出部70と、を備えている。システム制御部60は投写制御部として機能する。
 光源ユニット40は、光源制御部40Aと、赤色光を出射する赤色光源であるR光源41rと、緑色光を出射する緑色光源であるG光源41gと、青色光を出射する青色光源であるB光源41bと、ダイクロイックプリズム43と、R光源41rとダイクロイックプリズム43の間に設けられたコリメータレンズ42rと、G光源41gとダイクロイックプリズム43の間に設けられたコリメータレンズ42gと、B光源41bとダイクロイックプリズム43の間に設けられたコリメータレンズ42bと、光変調素子44と、を備えている。R光源41rとG光源41gとB光源41bはHUDの光源を構成する。
 R光源41r、G光源41g、及びB光源41bは、それぞれ、レーザ、LED(Light Emitting Diode)等の発光素子が用いられる。本実施形態では、R光源41rとG光源41gとB光源41bの3つの光源を含むHUDを例にするが、この光源の数は1つ、2つ、または4つ以上であってもよい。
 光源制御部40Aは、R光源41r、G光源41g、及びB光源41bの各々の発光量を予め決められた発光量パターンに設定し、この発光量パターンに従ってR光源41r、G光源41g、及びB光源41bから光を順次出射させる制御を行う。
 ダイクロイックプリズム43は、R光源41r、G光源41g、及びB光源41bの各々から出射される光を同一光路に導くための光学部材である。ダイクロイックプリズム43は、コリメータレンズ42rによって平行光化された赤色光を透過させて光変調素子44に出射する。また、ダイクロイックプリズム43は、コリメータレンズ42gによって平行光化された緑色光を反射させて光変調素子44に出射する。さらに、ダイクロイックプリズム43は、コリメータレンズ42bによって平行光化された青色光を反射させて光変調素子44に出射する。光を同一光路に導く機能を持つ光学部材としては、ダイクロイックプリズムに限らない。例えば、クロスダイクロイックミラーを用いてもよい。
 光変調素子44は、ダイクロイックプリズム43により出射された光を、画像情報である投写画像データに基づいて空間変調し、投写画像データに応じた光(赤色画像光、青色画像光、及び緑色画像光)を投写ユニット50に出射する。この画像情報は、例えば自動車の走行速度を示す情報、運転者への通知を行うための情報、ナビゲーション情報等である。
 光変調素子44としては、例えば、LCOS(Liquid crystal on silicon)、DMD(Digital Micromirror Device)、MEMS(Micro Electro Mechanical Systems)素子、及び液晶表示素子等を用いることができる。
 駆動部45は、システム制御部60から入力される投写画像データにしたがって光変調素子44を駆動し、投写画像データに応じた光を投写ユニット50に出射させる。
 投写ユニット50は、投写光学系46と、拡散板5と、反射ミラー6と、拡大鏡7と、を備えている。
 投写光学系46は、光変調素子44によって空間変調された光を、拡散板5に投写するための光学系である。この光学系は、レンズに限らず、スキャナを用いることもできる。
 投写ユニット50は、光変調素子44により空間変調された光を投写面2に投写する投写部を構成する。投写面2は、投写ユニット50により投写される光(以下、投写光ともいう)の投写範囲となる。投写ユニット50は、投写面2に投写された光に基づく画像がフロントウィンドシールド1前方の位置において虚像として運転者に視認可能となるように光学設計がなされている。
 R光源41r、G光源41g、及びB光源41bを含む光源と、光変調素子44と、投写ユニット50とにより、投写表示部が構成される。
 システム制御部60は、光源制御部40A及び駆動部45を制御して、光源ユニット40から、投写画像データに基づく光を投写ユニット50に出射させる。
 視線検出部70は、撮像部10で撮像して得られた撮像画像データを取得し、取得した撮像画像データに周知の視線検出処理を施すことによって、HUDが搭載された自動車の運転者の視線を検出する。視線検出部70は、視線検出結果をシステム制御部60に通知する。
 操作部80は、自動車に搭載される表示部(例えば、センターコンソールにあるタッチパネル付ディスプレイ)及び操作ボタン等であり、システム制御部60に各種指示を行うためのインターフェースである。
 システム制御部60は、視線検出部70の視線検出結果に基づき、投写ユニット50によるフロントウィンドシールド1への光の投写範囲(投写面2)内に運転者の視線が存在するか否かを判定する。
 投写面2内に視線が存在するとは、視線検出部70により検出された視線が投写面2と交わっている状態を言う。投写面2外に視線が存在するとは、視線検出部70により検出された視線が投写面2と交わっていない状態を言う。
 システム制御部60は、運転者の視線が投写面2外にあると判断した場合には、投写表示部による投写面2への投写光の投写条件を第一の条件に制御して、この第一の条件に従って投写表示部によって投写光を投写させる。また、システム制御部60は、運転者の視線が投写面2内にあると判断した場合には、投写条件を、投写表示部によって投写面2に投写される光に基づく画像(以下、投写画像という)の視認性が第一の条件よりも高い第二の条件に制御して、この第二の条件に従って投写表示部によって投写光を投写させる。
 このように、システム制御部60は、運転者の視線が投写面2内にあるか否かに応じて、第一の条件または第二の条件を選択し、投写表示部によって投写された光に基づく投写画像の視認性が変更されるように制御する。
 図3は、システム制御部60が設定する投写条件の第一の条件と第二の条件の一例を示す図である。
 投写条件には、投写画像の輝度、投写画像の彩度、投写画像の大きさ、投写画像が虚像として視認できる状態においてこの虚像の結像位置と投写面2との間の距離(虚像までの距離)、及び、投写画像の位置の少なくともいずれか1つが含まれる。
 投写画像の大きさとは、投写画像に含まれる各種アイコンや文字等の個別の画像の大きさのことを言う。
 投写画像の位置とは、投写画像に含まれる各種アイコンや文字等の個別の画像が投写画像全体における位置のことを言う。
 図3に示すように、投写画像の輝度、投写画像の彩度、投写画像の大きさ、虚像までの距離、及び、投写画像の位置の各々の投写条件には第一の条件と第二の条件が含まれる。また、第二の条件は、投写画像の視認性が異なる3つのサブ条件(a)、(b)、(c)を含む。
 投写画像の輝度については、投写画像の輝度を予め決められた基準輝度の10%とした第一の条件と、投写画像の輝度を基準輝度の30%とした第二の条件(サブ条件(a))と、投写画像の輝度を基準輝度の60%とした第二の条件(サブ条件(b))と、投写画像の輝度を基準輝度とした第二の条件(サブ条件(c))と、が設定可能である。投写画像は、輝度が高くなるほど視認性は向上する。このため、輝度についての第二の条件に含まれるサブ条件は、サブ条件(a)、サブ条件(b)、サブ条件(c)の順に投写画像の視認性が高くなる。
 システム制御部60は、運転者に提示すべき虚像に対応する投写画像データにおいて、輝度を変えることによって、投写画像の輝度を第一の条件または第二の条件に設定する。または、システム制御部60は、運転者に提示すべき虚像に対応する投写画像データは変更せずに、光源の発光量を変えることによって投写画像の輝度を第一の条件または第二の条件に設定してもよい。
 投写画像の彩度については、投写画像の彩度を予め決められた基準彩度の10%とした第一の条件と、投写画像の彩度を基準彩度の30%とした第二の条件(サブ条件(a))と、投写画像の彩度を基準彩度の60%とした第二の条件(サブ条件(b))と、投写画像の彩度を基準彩度とした第二の条件(サブ条件(c))と、が設定可能である。投写画像は、彩度が高くなるほど視認性は向上する。従って、彩度についての第二の条件に含まれるサブ条件は、サブ条件(a)、サブ条件(b)、サブ条件(c)の順に投写画像の視認性が高くなる。
 システム制御部60は、運転者に提示すべき虚像に対応する投写画像データにおいて、彩度を変えることによって、投写画像の彩度を第一の条件または第二の条件に設定する。または、システム制御部60は、運転者に提示すべき虚像に対応する投写画像データは変更せずに、光源の発光量を制御することによって投写画像の彩度を第一の条件または第二の条件に設定してもよい。
 投写画像の大きさについては、投写画像の大きさを予め決められた基準サイズの10%とした第一の条件と、投写画像の大きさを基準サイズの30%とした第二の条件(サブ条件(a))と、投写画像の大きさを基準サイズの60%とした第二の条件(サブ条件(b))と、投写画像の大きさを基準サイズとした第二の条件(サブ条件(c))と、が設定可能である。投写画像に含まれる個別の画像は、サイズが大きくなるほど視認性は向上する。従って、投写画像の大きさについての第二の条件に含まれるサブ条件は、サブ条件(a)、サブ条件(b)、サブ条件(c)の順に投写画像の視認性が高くなる。
 システム制御部60は、運転者に提示すべき虚像に対応する投写画像データにおいて、各種アイコン等の大きさを変えた投写画像データを生成して駆動部45に入力することによって、投写画像の大きさを第一の条件または第二の条件に設定する。
 虚像までの距離については、虚像までの距離を予め決められた基準距離に対して距離α1を加えた値とした第一の条件と、虚像までの距離を基準距離に対して距離α2(<α1)を加えた値とした第二の条件(サブ条件(a))と、虚像までの距離を基準距離に対して距離α3(<α2)を加えた値とした第二の条件(サブ条件(b))と、虚像までの距離を基準距離とした第二の条件(サブ条件(c))と、が設定可能である。虚像の結像位置は、投写面2の近くにあるほど、虚像が大きく見えるため、視認性は向上する。従って、虚像までの距離についての第二の条件に含まれるサブ条件は、サブ条件(a)、サブ条件(b)、サブ条件(c)の順に視認性が高くなる。
 虚像までの距離を変える場合には、投写ユニット50内の光学系の光路長を可変とする。従って、システム制御部60は、この光路長を制御することによって、虚像までの距離を第一の条件または第二の条件に設定する。
 投写画像の位置については、投写画像に含まれる各種アイコン等の個別の画像の位置を、予め決められた基準位置を投写面2の端部側に距離β1だけ近づけた位置とした第一の条件と、個別の画像の位置を、基準位置を投写面2の端部側に距離β2(<β1)だけ近づけた位置とした第二の条件(サブ条件(a))と、個別の画像の位置を、基準位置を投写面2の端部側に距離β3(<β2)だけ近づけた位置とした第二の条件(サブ条件(b))と、個別の画像の位置を基準位置とした第二の条件(サブ条件(c))と、が設定可能である。
 図4は、投写条件が投写画像の位置である場合の第一の条件と第二の条件によって投写される投写画像のイメージ図である。図4に示すように、サブ条件(c)によって投写される投写画像は、アイコン41が基準位置にある。サブ条件(b)によって投写される投写画像は、基準位置に対して投写面2の端部側に水平方向にβ3だけ移動した位置にアイコン41がある。サブ条件(a)によって投写される投写画像は、基準位置に対して投写面2の端部側に水平方向にβ2だけ移動した位置にアイコン41がある。第一の条件によって投写される投写画像は、基準位置に対して投写面2の端部側に水平方向にβ1だけ移動した位置にアイコン41がある。
 投写画像に含まれる個別の画像は、投写画像全体において端部(投写面2の端部)に近づくほど、図4に示すように運転者の視界に入りにくくなるため、視認性は低下する。従って、投写画像の位置についての第二の条件に含まれるサブ条件は、サブ条件(a)、サブ条件(b)、サブ条件(c)の順に視認性が高くなる。
 システム制御部60は、運転者に提示すべき虚像に対応する投写画像データに対して各種アイコン等の位置を変えた投写画像データを生成して駆動部45に入力することによって、投写画像の位置を第一の条件または第二の条件に設定する。
 システム制御部60は、投写条件を第一の条件から第二の条件に変更する場合は、視認性が低いサブ条件(a)から視認性が高いサブ条件(c)へと順次変更して、視認性を徐々に高める制御を行う。
 図5は、図1に示すHUDの動作を説明するためのフローチャートである。
 HUDが起動すると、システム制御部60は投写表示部による投写面2への光の投写を開始させる。システム制御部60は、起動時には、投写条件を第二の条件(サブ条件(c))に設定する。光の投写開始後、視線検出部70は、撮像部10で撮像された撮像画像データを取得する(ステップS1)。
 次に、視線検出部70は、ステップS1で取得した撮像画像データに基づき、運転者の視線を検出する(ステップS2)。
 ステップS2の後、システム制御部60は、視線検出部70により検出された運転者の視線が、投写面2内にあるか否かを判定する(ステップS3)。システム制御部60は、運転者の視線が投写面2外にあると判定した場合(ステップS3:NO)は、内蔵するタイマをリセットする(ステップS4)。
 ステップS4の後、システム制御部60は、内部メモリに記憶しているフラグを視線が投写面2外にある状態を示すフラグoにセットし(ステップS5)、投写条件を第一の条件に設定して、この第一の条件に従って投写表示部に光の投写を行わせる(ステップS6)。ステップS6の処理の後は、ステップS1に処理が戻る。
 システム制御部60は、ステップS3において、運転者の視線が投写面2内にあると判定した場合(ステップS3:YES)は、内部メモリのフラグがフラグoにセットされているか否かを判定する(ステップS7)。
 内蔵メモリのフラグが、視線が投写面2内にある状態を示すフラグiにセットされている場合(ステップS7:NO)は、ステップS1に処理が戻る。
 内蔵メモリのフラグがフラグoにセットされている場合(ステップS7:YES)、システム制御部60は、内蔵タイマによる時間計測を開始する(ステップS8)。
 次に、システム制御部60は、内蔵タイマの計測時間を参照し、計測時間が第二の時間(例えば1秒)以上か否かを判定する(ステップS9)。
 内蔵タイマの計測時間が第二の時間未満である場合(ステップS9:NO)は、ステップS1に戻り、上述した処理が繰り返される。
 システム制御部60は、内蔵タイマの計測時間が第二の時間以上である場合(ステップS9:YES)は、運転者の視線が投写面2外から投写面2内に移ったと判断し(ステップS10)、内蔵メモリのフラグをフラグiにセットする(ステップS11)。
 例えば、運転者は、車線変更等において、バックミラーやサイドミラーを確認することがあり、そのような視線が複雑に変化する状況下では、視線が短時間のうちに投写面2内に入ったり、投写面2外に出たりを繰り返す。
 このように視線が大きく動いている状況において、視線が投写面2外から投写面2内に移動したからとして投写表示部による光の投写条件が変更されてしまうと、その後すぐに視線が投写面2外に出た場合に投写条件が再度変わることになる。つまり、光の投写条件が頻繁に切り替わることになる。
 このような事態を避けるために、システム制御部60は、運転者の視線が投写面2外にある状態から投写面2内に入り、かつ、投写面2内に視線がある状態が第二の時間継続した場合(ステップS9:YES)にのみ、運転者の視線が投写面2外から投写面2内に移ったと判断する。
 また、システム制御部60は、運転者の視線が投写面2外から投写面2内に移ったと判断してから、さらに第一の時間(例えば1秒~4秒程度)経過後に、投写条件を第一の条件から第二の条件に変更して、この第二の条件で投写表示部に投写光の投写を行わせる(ステップS12)。
 ステップS12において、システム制御部60は、まずは第二の条件のサブ条件(a)を設定し、その後、第二の条件のサブ条件(b)を設定し、最後に第二の条件のサブ条件(c)を設定する。これにより、投写画像によって視認される虚像は、投写条件が例えば輝度であれば、虚像の輝度が徐々に高くなって基準輝度に戻ることになる。ステップS12の処理の後は、ステップS1に処理が戻る。
 以上のように、図1に示すHUDを用いれば、運転者の視線が投写面2外にある場合は、第一の投写条件によって投写面2への投写光の投写が行われる。また、運転者の視線が投写面2外から投写面2内に移った瞬間には、視認性の低い状態で虚像が運転者に提示された状態とである。このため、虚像に焦点が合う可能性を減らすことができ、進行方向の状況を運転者に正確に把握させることができる。
 また、図1のHUDを用いれば、運転者が視線を投写面2外から投写面2内に移した場合でも、第一の時間が経過するまでは、投写条件が変わることはない。このため、視認性の低い虚像が提示されている第一の時間の間に、運転者は前方視野を十分に確認することができ、進行方向の状況を正確に把握することが可能となる。この第一の時間は、人間工学に基づいて適当な値を決めておくことができ、上述したように1秒~4秒程度の時間とすることがよい。
 また、図1のHUDを用いれば、投写面2外に視線がある状態では、視認性、例えば輝度、を低下させることができる。輝度の低下として光源の発光量を制御する方式を採用した場合には、HUDの消費電力と発熱を低減することができる。
 また、図1のHUDでは、運転者の視線が投写面2外にある状態から投写面2内に入り、かつ、投写面2内に視線がある状態が第二の時間継続した場合(ステップS9:YES)にのみ、第一の時間経過後に投写面2への光の投写条件を変更するものとしている。
 このため、運転者が視線を激しく動かしている状況において、投写条件が頻繁に切り替わることを防ぐことができる。したがって、HUDの耐久性を向上させたり、運転者或いは同乗者にとってHUDの使用感を向上させたりすることができる。上記の第二の時間は、視線が安定したと判断できる程度の時間であればよく、実験的に求めて決めてもよいし、運転者の視線の履歴に基づいて値をリアルタイムで変化させてもよい。
 なお、図5においてステップS7の判定がYESのときに、すぐにステップS10に移行するようにしてもよい。この場合は、ステップS8は削除し、ステップS7の判定がNOのときにはステップS1に処理を移行させる。また、この場合は、第一の時間を1秒~5秒程度としておくのが好ましい。このような動作であっても、視線を投写面2外から投写面2内に移したときに、運転者にすぐに視認性の高い虚像が提示されることはない。このため、虚像に焦点が合ってしまって背景に注意がいきにくくなるのを避けることができ、進行方向の状況を正確に把握することが可能となる。
 また、図5のステップS12において、システム制御部60は、ステップS10の処理から第一の時間経過を待たずに、投写条件を第二の条件に変更してもよい。
 投写条件が第二の条件に変更された場合、この第二の条件にしたがって投写面2に投写光が投写され、この投写光に基づく虚像が運転者に視認可能になるまでには若干の時間がかかる。この時間においては、視認性の低い虚像が視認可能な状態となるため、虚像に焦点が合ってしまって背景に注意がいきにくくなるのを避けることができ、進行方向の状況を正確に把握することが可能となる。
 また、上記の若干の時間が非常に短時間であっても、第二の条件を複数のサブ条件に分けておき、まずは視認性が最も低いサブ条件(a)を設定することで、投写条件が瞬時に切り替わることによる、虚像の視認性の変化を抑えることができる。この結果、虚像に焦点が合ってしまって背景に注意がいきにくくなるのを避けることができ、進行方向の状況を正確に把握することが可能となる。
 なお、図5のステップS12における第一の時間はマニュアル設定可能にしておくことが好ましい。具体的には、操作部80としての表示部(タッチパネル)に表示再開時間設定画面を表示させ、この画面上においてボタン操作により、第一の時間を任意に設定できるようにする。ただし、第一の時間の最短時間(例えば1秒)は予め決められており、それより短い時間に設定することはできない。そのようにすることで、運転者の視線が光の投写範囲内にあると判断してから、すぐに画像の投写条件が変更されてしまうことを防止することができる。
 また、図1のHUDに用いれば、投写条件を第一の条件から第二の条件に変更するときに、虚像の視認性が時間経過と共に徐々に高くなるため、自然な形で虚像を視認性が最大の状態に戻すことができる。
 図3に示した輝度、彩度、大きさ、距離、及び位置のうちのどれを投写条件として設定するかは、HUDの利用者によってマニュアルで設定可能としてもよい。
 例えば、操作部80の表示部(タッチパネル付)に、図3に示すような画面を表示させ、輝度、彩度、大きさ、距離、位置の5つの中から1つを選択できるようにすればよい。
 操作部80は、自動車に搭載される表示部(例えば、センターコンソールにあるタッチパネル付のディスプレイ)及び操作ボタン等としたが、運転者又は同乗者が所持する電子機器と通信する通信部を自動車内に設け、電子機器で操作された信号をこの通信部で受信してシステム制御部60に出力するようにしてもよい。この通信部はHUDに内蔵してもよい。
 電子機器は、スマートフォン、カメラ付き携帯電話機、タブレット端末(携帯情報端末)等の携帯型コンピュータであって、電子機器上で図3に示す画面を表示させて各種情報を入力できるものであればよい。これにより、操作部80と同等の操作を行うことができる。
 なお、図1のHUDでは、投写ユニット50として、投写面2に投写された光に基づく画像が投写面2において実像として運転者に視認可能となるように光学設計を行った光学系を用いてもよい。この場合も、運転者が視線を投写面2外から投写面2内に移した場合に、視認性が最大となる実像が見えてしまうと、進行方向の状況を正確に把握することが難しくなるため、本発明を適用することが有効となる。
 以上説明してきたように、本明細書には以下の事項が開示されている。
 開示された投写型表示装置は、光源と、上記光源から出射される光を空間変調する光変調素子と、上記光変調素子により空間変調された光を投写光として乗り物に搭載された投写面に投写する投写部とを含む投写表示部と、上記乗り物の運転者の視線を検出する視線検出部と、上記視線検出部により検出される視線が上記投写面外にある状態では、上記投写表示部による上記投写面への上記投写光の投写条件を第一の条件に制御し、上記視線検出部により検出される視線が上記投写面外から上記投写面内に移ったと判断した状態では、上記投写条件を上記第一の条件より上記投写光に基づく画像の視認性が高い第二の条件に制御する投写制御部と、を備える投写型表示装置である。
 開示された投写型表示装置は、上記第二の条件は、上記画像の視認性が異なる複数のサブ条件を含み、上記投写制御部は、上記視線検出部により検出される視線が上記投写面外から上記投写面内に移ったと判断すると、上記投写条件を視認性が低いサブ条件から視認性が高いサブ条件へと順次変更する投写型表示装置である。
 開示された投写型表示装置は、上記投写条件は、上記投写光に基づく画像の輝度、彩度、又は大きさであり、上記第一の条件は、上記第二の条件より輝度、彩度、又は大きさい条件である投写型表示装置である。
 開示された投写型表示装置は、上記投写条件は、上記投写光によって結像される虚像の上記投写面からの距離であり、上記第一の条件は、上記第二の条件より上記距離が大きい条件である投写型表示装置である。
 開示された投写型表示装置は、上記投写条件は、上記投写光に基づく画像の位置であり、上記第一の条件は、上記画像の位置を上記第二の条件より上記投写面の端部側に寄せた条件である投写型表示装置である。
 開示された投写型表示装置は、上記投写制御部は、上記視線検出部により検出される視線が上記投写面外から上記投写面内に移ったと判断した時点から第一の時間経過後に、上記投写条件を上記第一の条件から上記第二の条件に変更する投写型表示装置である。
 開示された投写型表示装置は、上記第一の時間がマニュアル設定可能である投写型表示装置である。
 開示された投写型表示装置は、上記投写制御部は、上記視線検出部により検出される視線が上記投写面外にある状態から上記投写面内に移り、上記視線が上記投写面内に第二の時間継続して存在する場合に、上記視線が上記投写面外から上記投写面内に移ったと判断する投写型表示装置である。
 開示された投写型表示装置は、上記投写条件をマニュアル設定可能である投写型表示装置である。
 開示された投写制御方法は、光源と、上記光源から出射される光を空間変調する光変調素子と、上記光変調素子により空間変調された光を投写光として乗り物に搭載された投写面に投写する投写部とを含む投写表示部と、上記乗り物の運転者の視線を検出する視線検出部と、を有する投写型表示装置による投写制御方法であって、上記視線検出部により検出される視線が上記投写面外にある状態では、上記投写表示部による上記投写面への上記投写光の投写条件を第一の条件に制御し、上記視線検出部により検出される視線が上記投写面外から上記投写面内に移ったと判断した状態では、上記投写条件を上記第一の条件より上記投写光に基づく画像の視認性が高くなる第二の条件に制御する投写制御ステップを備える投写制御方法である。
 開示された投写制御方法は、上記第二の条件は、上記画像の視認性が異なる複数のサブ条件を含み、上記投写制御ステップでは、上記視線検出部により検出される視線が上記投写面外から上記投写面内に移ったと判断すると、上記投写条件を視認性が低いサブ条件から視認性が高いサブ条件へと順次変更する投写制御方法である。
 開示された投写制御方法は、上記投写条件は、上記投写光に基づく画像の輝度、彩度、又は大きさであり、上記第一の条件は、上記第二の条件より輝度、彩度、又は大きさを小さくした条件である投写制御方法である。
 開示された投写制御方法は、上記投写条件は、上記投写光によって視認される虚像の上記投写面からの距離であり、上記第一の条件は、上記第二の条件より上記距離が大きい条件である投写制御方法である。
 開示された投写制御方法は、上記投写条件は、上記投写光に基づく画像の位置であり、上記第一の条件は、上記画像の位置を上記第二の条件より上記投写面の端部側に寄せた条件である投写制御方法である。
 開示された投写制御方法は、上記投写制御ステップでは、上記視線検出部により検出される視線が上記投写面外から上記投写面内に移ったと判断した時点から第一の時間経過後に、上記投写条件を上記第一の条件から上記第二の条件に変更する投写制御方法である。
 開示された投写制御方法は、上記投写制御ステップでは、上記視線検出部により検出される視線が上記投写面外にある状態から上記投写面内に移り、上記視線が上記投写面内に第二の時間継続して存在する場合に、上記視線が上記投写面外から上記投写面内に移ったと判断する投写制御方法である。
 本発明の投写型表示装置は、特に自動車に搭載して利便性が高く、有効である。
2 投写面
10 撮像部
40 光源ユニット
44 光変調素子
45 駆動部
50 投写ユニット
60 システム制御部
70 視線検出部

Claims (16)

  1.  光源と、前記光源から出射される光を空間変調する光変調素子と、前記光変調素子により空間変調された光を投写光として乗り物に搭載された投写面に投写する投写部とを含む投写表示部と、
     前記乗り物の運転者の視線を検出する視線検出部と、
     前記視線検出部により検出される視線が前記投写面外にある状態では、前記投写表示部による前記投写面への前記投写光の投写条件を第一の条件に制御し、前記視線検出部により検出される視線が前記投写面外から前記投写面内に移ったと判断した状態では、前記投写条件を前記第一の条件より前記投写光に基づく画像の視認性が高い第二の条件に制御する投写制御部と、を備える投写型表示装置。
  2.  請求項1記載の投写型表示装置であって、
     前記第二の条件は、前記画像の視認性が異なる複数のサブ条件を含み、
     前記投写制御部は、前記視線検出部により検出される視線が前記投写面外から前記投写面内に移ったと判断すると、前記投写条件を視認性が低いサブ条件から視認性が高いサブ条件へと順次変更する投写型表示装置。
  3.  請求項1又は2記載の投写型表示装置であって、
     前記投写条件は、前記投写光に基づく画像の輝度、彩度、及び大きさの少なくとも一つであり、
     前記第一の条件は、前記第二の条件より輝度、彩度、及び大きさの少なくとも一つが小さい条件である投写型表示装置。
  4.  請求項1又は2記載の投写型表示装置であって、
     前記投写条件は、前記投写光によって結像される虚像の前記投写面からの距離であり、
     前記第一の条件は、前記第二の条件より前記距離が大きい条件である投写型表示装置。
  5.  請求項1又は2記載の投写型表示装置であって、
     前記投写条件は、前記投写光に基づく画像の位置であり、
     前記第一の条件は、前記画像の位置を前記第二の条件より前記投写面の端部側に寄せた条件である投写型表示装置。
  6.  請求項1~5のいずれか1項記載の投写型表示装置であって、
     前記投写制御部は、前記視線検出部により検出される視線が前記投写面外から前記投写面内に移ったと判断した時点から第一の時間経過後に、前記投写条件を前記第一の条件から前記第二の条件に変更する投写型表示装置。
  7.  請求項6記載の投写型表示装置であって、
     前記第一の時間がマニュアル設定可能である投写型表示装置。
  8.  請求項1~7のいずれか1項記載の投写型表示装置であって、
     前記投写制御部は、前記視線検出部により検出される視線が前記投写面外にある状態から前記投写面内に移り、前記視線が前記投写面内に第二の時間継続して存在する場合に、前記視線が前記投写面外から前記投写面内に移ったと判断する投写型表示装置。
  9.  請求項1~8のいずれか1項記載の投写型表示装置であって、
     前記投写条件をマニュアル設定可能である投写型表示装置。
  10.  光源と、前記光源から出射される光を空間変調する光変調素子と、前記光変調素子により空間変調された光を投写光として乗り物に搭載された投写面に投写する投写部とを含む投写表示部と、前記乗り物の運転者の視線を検出する視線検出部と、を有する投写型表示装置による投写制御方法であって、
     前記視線検出部により検出される視線が前記投写面外にある状態では、前記投写表示部による前記投写面への前記投写光の投写条件を第一の条件に制御し、前記視線検出部により検出される視線が前記投写面外から前記投写面内に移ったと判断した状態では、前記投写条件を前記第一の条件より前記投写光に基づく画像の視認性が高くなる第二の条件に制御する投写制御ステップを備える投写制御方法。
  11.  請求項10記載の投写制御方法であって、
     前記第二の条件は、前記画像の視認性が異なる複数のサブ条件を含み、
     前記投写制御ステップでは、前記視線検出部により検出される視線が前記投写面外から前記投写面内に移ったと判断すると、前記投写条件を視認性が低いサブ条件から視認性が高いサブ条件へと順次変更する投写制御方法。
  12.  請求項10又は11記載の投写制御方法であって、
     前記投写条件は、前記投写光に基づく画像の輝度、彩度、及び大きさの少なくとも一つであり、
     前記第一の条件は、前記第二の条件より輝度、彩度、及び大きさの少なくとも一つを小さくした条件である投写制御方法。
  13.  請求項10又は11記載の投写制御方法であって、
     前記投写条件は、前記投写光によって結像される虚像の前記投写面からの距離であり、
     前記第一の条件は、前記第二の条件より前記距離が大きい条件である投写制御方法。
  14.  請求項10又は11記載の投写制御方法であって、
     前記投写条件は、前記投写光に基づく画像の位置であり、
     前記第一の条件は、前記画像の位置を前記第二の条件より前記投写面の端部側に寄せた条件である投写制御方法。
  15.  請求項10~14のいずれか1項記載の投写制御方法であって、
     前記投写制御ステップでは、前記視線検出部により検出される視線が前記投写面外から前記投写面内に移ったと判断した時点から第一の時間経過後に、前記投写条件を前記第一の条件から前記第二の条件に変更する投写制御方法。
  16.  請求項10~15のいずれか1項記載の投写制御方法であって、
     前記投写制御ステップでは、前記視線検出部により検出される視線が前記投写面外にある状態から前記投写面内に移り、前記視線が前記投写面内に第二の時間継続して存在する場合に、前記視線が前記投写面外から前記投写面内に移ったと判断する投写制御方法。
PCT/JP2016/064712 2015-07-29 2016-05-18 投写型表示装置及び投写制御方法 WO2017018027A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2017531043A JP6387465B2 (ja) 2015-07-29 2016-05-18 投写型表示装置及び投写制御方法
CN201680042497.0A CN107851423B (zh) 2015-07-29 2016-05-18 投影型显示装置及投影控制方法
US15/861,663 US10502962B2 (en) 2015-07-29 2018-01-03 Projection type display device and projection control method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-149989 2015-07-29
JP2015149989 2015-07-29

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/861,663 Continuation US10502962B2 (en) 2015-07-29 2018-01-03 Projection type display device and projection control method

Publications (1)

Publication Number Publication Date
WO2017018027A1 true WO2017018027A1 (ja) 2017-02-02

Family

ID=57884631

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/064712 WO2017018027A1 (ja) 2015-07-29 2016-05-18 投写型表示装置及び投写制御方法

Country Status (4)

Country Link
US (1) US10502962B2 (ja)
JP (1) JP6387465B2 (ja)
CN (1) CN107851423B (ja)
WO (1) WO2017018027A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018171954A (ja) * 2017-03-31 2018-11-08 三菱重工業株式会社 情報投影システム及び情報投影方法
JP2019159216A (ja) * 2018-03-16 2019-09-19 株式会社豊田中央研究所 車載表示装置、車載表示装置を制御する方法及びコンピュータプログラム
WO2024203229A1 (ja) * 2023-03-29 2024-10-03 株式会社小糸製作所 画像投影装置

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11119315B2 (en) * 2015-10-15 2021-09-14 Maxell, Ltd. Information display apparatus
GB2567164A (en) * 2017-10-04 2019-04-10 Continental Automotive Gmbh Display system in a vehicle
CN111258158B (zh) * 2018-11-30 2022-10-25 中强光电股份有限公司 投影机及亮度调整方法
CN111258157B (zh) 2018-11-30 2023-01-10 中强光电股份有限公司 投影机及亮度调整方法
JP2020136909A (ja) * 2019-02-20 2020-08-31 セイコーエプソン株式会社 投写画像の調整方法、及び投写装置
EP3771595A1 (en) 2019-07-30 2021-02-03 Coretronic Corporation Projection device and control method thereof, vehicle comprising the same
GB2595889A (en) * 2020-06-10 2021-12-15 Daimler Ag Methods and systems for displaying visual content on a motor vehicle and method for providing a motor vehicle

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05124457A (ja) * 1991-11-05 1993-05-21 Nippondenso Co Ltd 車両用表示装置
JPH06233306A (ja) * 1993-02-03 1994-08-19 Nissan Motor Co Ltd 車両用表示装置
JPH07144557A (ja) * 1993-11-19 1995-06-06 Nippon Seiki Co Ltd 車両用表示装置
JP2003004460A (ja) * 2001-06-19 2003-01-08 Nissan Motor Co Ltd 画面表示装置
JP2012029216A (ja) * 2010-07-27 2012-02-09 Sony Corp 再生装置、再生方法、およびプログラム
JP2012030703A (ja) * 2010-07-30 2012-02-16 Nippon Seiki Co Ltd 車両用表示装置
JP2012226067A (ja) * 2011-04-19 2012-11-15 Nippon Seiki Co Ltd 表示装置
JP2015101189A (ja) * 2013-11-25 2015-06-04 パイオニア株式会社 車載表示装置、ヘッドアップディスプレイ、制御方法、プログラム、及び記憶媒体

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07257228A (ja) 1994-03-18 1995-10-09 Nissan Motor Co Ltd 車両用表示装置
EP1083076A3 (en) 1999-09-07 2005-01-12 Mazda Motor Corporation Display apparatus for vehicle
JP3877116B2 (ja) * 1999-09-07 2007-02-07 マツダ株式会社 車両の表示装置
US6809704B2 (en) * 2002-02-08 2004-10-26 Charles J. Kulas Reduction of blind spots by using display screens
JP2006106254A (ja) * 2004-10-04 2006-04-20 Denso Corp 車両用ヘッドアップディスプレイ
JP4501778B2 (ja) 2005-05-24 2010-07-14 日産自動車株式会社 車両用情報表示方法及び車両用情報表示装置
JP4466580B2 (ja) 2005-10-13 2010-05-26 株式会社デンソー 車両用表示装置
JP2010262161A (ja) * 2009-05-08 2010-11-18 Toshiba Corp 表示装置、表示方法及び車両
CN102779502A (zh) * 2011-05-11 2012-11-14 中兴通讯股份有限公司 一种控制终端屏幕的方法及终端
US9383579B2 (en) * 2011-10-12 2016-07-05 Visteon Global Technologies, Inc. Method of controlling a display component of an adaptive display system
DE102012206030A1 (de) * 2012-04-13 2013-10-17 Robert Bosch Gmbh Verfahren und Vorrichtung zum Steuern zumindest einer Funktion zumindest eines Anzeigegerätes für einen Innenraum eines Fahrzeugs
KR102118438B1 (ko) * 2013-01-28 2020-06-04 한국전자통신연구원 차량용 헤드업 디스플레이 장치 및 그 방법
JP2014153867A (ja) * 2013-02-07 2014-08-25 Aisin Aw Co Ltd 走行支援システム、走行支援方法及びコンピュータプログラム
CN104076898B (zh) * 2013-03-27 2018-10-26 腾讯科技(深圳)有限公司 一种控制移动终端屏幕亮度的方法和装置
CN105474287A (zh) * 2013-08-19 2016-04-06 三菱电机株式会社 车载显示控制装置
JP5825328B2 (ja) * 2013-11-07 2015-12-02 コニカミノルタ株式会社 透過型hmdを有する情報表示システム及び表示制御プログラム

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05124457A (ja) * 1991-11-05 1993-05-21 Nippondenso Co Ltd 車両用表示装置
JPH06233306A (ja) * 1993-02-03 1994-08-19 Nissan Motor Co Ltd 車両用表示装置
JPH07144557A (ja) * 1993-11-19 1995-06-06 Nippon Seiki Co Ltd 車両用表示装置
JP2003004460A (ja) * 2001-06-19 2003-01-08 Nissan Motor Co Ltd 画面表示装置
JP2012029216A (ja) * 2010-07-27 2012-02-09 Sony Corp 再生装置、再生方法、およびプログラム
JP2012030703A (ja) * 2010-07-30 2012-02-16 Nippon Seiki Co Ltd 車両用表示装置
JP2012226067A (ja) * 2011-04-19 2012-11-15 Nippon Seiki Co Ltd 表示装置
JP2015101189A (ja) * 2013-11-25 2015-06-04 パイオニア株式会社 車載表示装置、ヘッドアップディスプレイ、制御方法、プログラム、及び記憶媒体

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018171954A (ja) * 2017-03-31 2018-11-08 三菱重工業株式会社 情報投影システム及び情報投影方法
JP2019159216A (ja) * 2018-03-16 2019-09-19 株式会社豊田中央研究所 車載表示装置、車載表示装置を制御する方法及びコンピュータプログラム
JP7182368B2 (ja) 2018-03-16 2022-12-02 株式会社豊田中央研究所 車載表示装置、車載表示装置を制御する方法及びコンピュータプログラム
WO2024203229A1 (ja) * 2023-03-29 2024-10-03 株式会社小糸製作所 画像投影装置

Also Published As

Publication number Publication date
US10502962B2 (en) 2019-12-10
US20180143443A1 (en) 2018-05-24
JPWO2017018027A1 (ja) 2018-06-21
JP6387465B2 (ja) 2018-09-12
CN107851423B (zh) 2020-09-22
CN107851423A (zh) 2018-03-27

Similar Documents

Publication Publication Date Title
JP6387465B2 (ja) 投写型表示装置及び投写制御方法
JP6255537B2 (ja) 投写型表示装置及び投写制御方法
JP6462194B2 (ja) 投写型表示装置、投写表示方法、及び、投写表示プログラム
JP6439052B2 (ja) 投写型表示装置
JP6175589B2 (ja) 投写型表示装置及び投写表示方法
JP6175588B2 (ja) 投写型表示装置及び運転支援方法
US10746988B2 (en) Projection display device, projection control method, and non-transitory computer readable medium storing projection control program
US10630946B2 (en) Projection type display device, display control method of projection type display device, and program
US10412354B2 (en) Projection type display device and projection control method
CN108702488B (zh) 投影型显示装置、投影显示方法、计算机可读取存储介质
JP6464326B2 (ja) 投写型表示装置及びその制御方法
WO2017051655A1 (ja) 投写型表示装置及び投写制御方法
JP2020144247A (ja) 車載表示装置、車載表示方法、および、コンピュータプログラム
US20170269363A1 (en) Projection-type display device, electronic device, driver viewing image sharing method, and driver viewing image sharing program
WO2017145565A1 (ja) 投写型表示装置、投写表示方法、及び、投写表示プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16830132

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017531043

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16830132

Country of ref document: EP

Kind code of ref document: A1