CN111038402A - 用于控制车辆的显示的装置和方法 - Google Patents

用于控制车辆的显示的装置和方法 Download PDF

Info

Publication number
CN111038402A
CN111038402A CN201811424558.7A CN201811424558A CN111038402A CN 111038402 A CN111038402 A CN 111038402A CN 201811424558 A CN201811424558 A CN 201811424558A CN 111038402 A CN111038402 A CN 111038402A
Authority
CN
China
Prior art keywords
driver
eyes
vehicle
image
controller
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811424558.7A
Other languages
English (en)
Inventor
李炯锡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hyundai Motor Co
Kia Corp
Original Assignee
Hyundai Motor Co
Kia Motors Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hyundai Motor Co, Kia Motors Corp filed Critical Hyundai Motor Co
Publication of CN111038402A publication Critical patent/CN111038402A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B60R11/0229—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for displays, e.g. cathodic tubes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/015—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting the presence or position of passengers, passenger seats or child seats, and the related safety parameters therefor, e.g. speed or timing of airbag inflation in relation to occupant position or seat belt use
    • B60R21/01554—Seat position sensors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/193—Preprocessing; Feature extraction
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149—Instrument input by detecting viewing direction not otherwise provided for
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/33—Illumination features
    • B60K2360/334—Projection means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B60K35/654—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0881—Seat occupation; Driver or passenger presence
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0181—Adaptation to the pilot/driver
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0464—Positioning
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Transportation (AREA)
  • General Physics & Mathematics (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Instrument Panels (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本公开提供了用于控制车辆的显示的装置和方法，该装置包括：获得驾驶员的面部图像的相机、感测驾驶员就座的座位的位置的传感器、以及控制器。控制器被配置为基于面部图像和座位的位置确定驾驶员的眼睛的位置，以及基于眼睛的位置校正投影到显示设备上的虚拟图像的投影位置。该装置通过根据驾驶员眼睛的高度改变虚拟图像的投影位置，允许虚拟图像与道路精确匹配，从而向驾驶员提供不失真的图像。

Description

用于控制车辆的显示的装置和方法
相关申请的交叉引用
本申请基于并要求2018年10月11日向韩国知识产权局提交的韩国专利申请No.10-2018-0121245的优先权，其全部内容通过引用结合于此。
技术领域
本公开涉及用于控制车辆的显示的装置和方法。
背景技术
如今，随着电子设备的发展，正在开发用于方便驾驶员的装置以改善与车辆的性能和安全性相关的功能。特别地，人们对车辆的平视显示器(HUD)越来越感兴趣。
HUD被设计成在车辆或飞机的挡风玻璃上显示驾驶信息。最初，已经引入了HUD以确保飞行员能够在前方视野中查看信息。然而，最近已经在车辆中引入了HUD以减少事故。
车辆的HUD在挡风玻璃上或以增强现实的形式超越挡风玻璃显示各种车辆信息，例如用于引导与导航设备一起操作的路径改变的箭头信息，以及指示车辆速度的文本信息，从而防止驾驶员的目光被分散。换句话说，为了核实车辆信息，驾驶员可能不需要在提供相应信息的终端的方向上移动他/她的眼睛。因为驾驶员可以在查看其中显示平视显示图像的前方视野时驾驶，所以HUD有助于提高驾驶员的安全性。
此外，因为为了方便驾驶员而将更多的设备安装在车辆中，所以需要能够显示越来越多的车辆信息的单独的显示装置。因此，因为需要用于单独容纳这些显示装置的空间，所以对HUD越来越感兴趣。
普通HUD可以包括图像生成器、镜像设备、和控制器。在从镜像设备反射之后，由图像生成器显示的视频图像(例如，对应于从车辆中的电子控制单元(ECU)接收的各种车辆信息的视频图像)被投影到驾驶员座位的挡风玻璃上。
这样，在驾驶时，车辆的驾驶员不仅可以保持他/她的眼睛向前，而且还可以通过在不脱离视野的范围内投影的虚拟图像的同时，核实驾驶车辆所需的各种信息，例如车辆的驾驶信息或导航信息。
然而，由于普通平视显示器将虚拟图像固定地投影在特定预设位置，因此没考虑驾驶员的身体状况或驾驶员的移动。因此，由平视显示系统投影的图像与道路不完全匹配。
发明内容
本公开旨在解决相关技术的上述问题，同时保持现有技术实现的优点不受影响。在整个本公开中，诸如“眼睛”或“驾驶员眼睛”的术语指的是驾驶员的眼睛。另外，诸如“双眼”或“驾驶员的双眼”之类的术语指的是驾驶员的双眼。
本公开涉及用于控制车辆的显示的装置和方法。即使驾驶员眼睛的高度可以改变，通过根据驾驶员眼睛的改变的高度来改变虚拟图像的投影位置，该装置和方法允许虚拟图像与道路精确匹配。由于驾驶员的移动、驾驶员的位置或附近的环境，驾驶员眼睛的高度可能已经改变。
本公开要解决的技术问题不限于上述问题。本公开所属领域的普通技术人员从以下描述中将清楚地理解此处未提及的任何其他技术问题。
根据本公开的实施例，用于控制车辆的显示的装置包括：获得驾驶员的面部图像的相机、感测驾驶员就座的座位的位置的传感器、以及控制器。控制器被配置为基于面部图像和座位的位置确定驾驶员的眼睛的位置。控制器还被配置为基于眼睛的位置校正投影到显示设备上的虚拟图像的投影位置。
根据实施例，控制器被配置为通过使用基于面部图像计算的驾驶员的眼睛的高度以及从车辆的前端到座位的距离来确定驾驶员的位置，该距离是基于座位的位置计算的。
根据实施例，控制器被配置为基于所获得的面部图像检测双眼的中心，以及基于双眼的中心计算驾驶员的眼睛的高度。
根据实施例，控制器被配置为当检测到的双眼中心位于有效区域内时校正虚拟图像的投影位置。
根据实施例，有效区域的水平范围被定义为相机的有效视角的范围。有效区域的竖直范围被定义为座位的竖直移动范围。
根据实施例，通过投影到显示设备上的虚拟图像在车辆前方显示增强现实图像。
根据实施例，控制器被配置为基于驾驶员的眼睛的位置来校正虚拟图像的投影位置，使得增强现实图像与和车辆间隔预定距离的虚拟位置相匹配。
根据实施例，控制器被配置为当驾驶员的眼睛的位置高于预定位置时，向上调整投影位置以便高于预定投影位置。
根据实施例，控制器被配置为当驾驶员的眼睛的位置低于预定位置时，向下调整投影位置以便低于预定投影位置。
根据实施例，显示设备包括平视显示器。
根据本公开的另一方面，用于控制车辆的显示的方法包括获得驾驶员的面部图像、感测驾驶员就座的座位的位置、基于面部图像和座位的位置确定驾驶员眼睛的位置、以及基于驾驶员的眼睛的位置校正投影到显示设备上的虚拟图像的投影位置。
根据实施例，驾驶员眼睛的位置的确定包括基于面部图像计算驾驶员的眼睛的高度以及确定从车辆的前端到座位的距离，该距离是根据座位的位置计算的。
根据实施例，驾驶员眼睛的高度的计算包括基于所获得的面部图像检测双眼的中心以及基于双眼的中心计算驾驶员的眼睛的高度。
根据实施例，虚拟图像的投影位置的校正包括确定检测到的双眼中心是否位于有效区域内以及当检测到的双眼中心位于有效区域内时校正虚拟图像的投影位置。
根据实施例，有效区域的水平范围被定义为相机的有效视角的范围。有效区域的竖直范围被定义为座位的竖直移动范围。
根据实施例，通过投影到显示设备上的虚拟图像在车辆前方显示增强现实图像。
根据实施例，校正虚拟图像的投影位置包括基于驾驶员的眼睛的位置来校正虚拟图像的投影位置，使得增强现实图像与和车辆间隔预定距离的虚拟位置相匹配。
根据实施例，虚拟图像的投影位置的校正包括当驾驶员的眼睛的位置高于预定位置时，校正投影位置以便高于预定的投影位置。
根据实施例，虚拟图像的投影位置的校正包括当驾驶员的眼睛的位置低于预定位置时，校正投影位置以便低于预定的投影位置。
根据实施例，显示设备包括平视显示器。
附图说明
通过以下结合附图的详细描述，本公开的上述和其他目的、特征和优点将更加明显：
图1是示出根据本公开的实施例的用于控制车辆的显示的装置的框图；
图2是示出根据本公开的实施例的用于控制车辆的显示的方法的流程图；
图3是示出根据本公开的实施例的用于控制车辆的显示的方法的流程图；
图4是示出根据本公开的实施例的检测到的面部图像的视图；
图5是示出根据本公开的实施例的检测到的双眼中心的视图；
图6是示出根据本公开的实施例的显示的增强现实图像的视图；
图7是示出根据本公开的实施例的虚拟图像和道路匹配位置的投影位置的视图；
图8是示出根据本公开的实施例的根据眼睛的改变的高度和道路匹配位置的虚拟图像的投影位置的视图；
图9是示出根据本公开另一实施例的根据眼睛的高度和道路匹配位置的虚拟图像的投影位置的视图；以及
图10是示出根据本公开的实施例的执行一方法的计算系统的配置的框图。
具体实施方式
在下文中，参考附图详细描述本公开的各种实施例。在附图中，始终使用相同的附图标记来表示相同或等同的元件。另外，将排除对众所周知的特征或功能的详细描述以免不必要地模糊本公开的主旨。
在描述本公开的各种实施例的元件时，本文可以使用术语第一、第二、A、B、(a)、(b)等。这些术语仅用于将一个元件与另一个元件区分开，但不限制相应的元件，而与相应元件的顺序或优先级无关。此外，除非另外定义，否则本文中使用的包括技术和科学术语的所有术语将被解释为本公开所属领域中惯用的。应理解，本文使用的术语应被解释为具有与其在本公开和相关领域的上下文中的含义一致的含义，并且除非在本文中明确定义，否则将不以理想化或过于正式的含义解释。
图1是示出根据本公开的实施例的用于控制车辆的显示的装置的框图。
如图1中所示，车辆10的显示控制装置可包括相机11、传感器13、显示设备15和控制器17。
相机11可被包括在车辆中以获得驾驶员的图像。更具体地，相机11可以安装在方向盘或车辆的仪表(cluster)中以获得驾驶员的面部图像。
根据本公开的实施例，相机11可以包括红外相机并且可以通过使用红外线获得驾驶员的面部图像和眼睛图像。
传感器13可以感测驾驶员就座的座位位置的变化。根据本公开的实施例，传感器13可以包括座位电机中包括的霍尔传感器。当座位电机被驱动以移动座位时，霍尔传感器可输出感测信号。
显示设备15可以包括平视显示器，即HUD，并且可以包括在其上投影虚拟图像的车辆前表面的玻璃(挡风玻璃)、组合器(透明板)等。这里，虚拟图像可以包括提供给驾驶员的车辆信息，诸如车辆速度、里程数或每分钟转数(RPM)、路径信息等。
在下文中，为了便于描述，在显示设备15上显示虚拟图像的位置可以被称为“投影位置”，并且在车辆前方的道路上作为增强现实图像显示的投影到显示设备15上的虚拟图像的位置可以被称为“虚拟位置”。
控制器17可以控制根据本公开的实施例的车辆的显示控制装置的整体操作。
控制器17从相机11获得驾驶员的面部图像。控制器17可以确定从驾驶员的面部图像中是否检测到双眼之间的中心。当确定未检测到双眼之间的中心时，控制器17可以允许虚拟图像投影在预定投影位置处。
当确定检测到双眼的中心时，控制器17可以确定双眼的中心是否存在于有效区域内。当确定双眼的中心存在于有效区域内时，控制器17可以计算驾驶员眼睛的高度。这里，有效区域的水平范围可以被定义为相机11的有效视角的范围。有效区域的竖直范围可以被定义为座位的竖直移动范围。另外，驾驶员眼睛的高度可以是从地面到双眼中心的距离。
根据实施例，相机11的有效视角可以相对于相机的中心具有14°和-14°之间的范围。此外，座位的竖直移动范围可以具有从座位的默认高度向上110mm和向下70mm的范围(在工厂设定的默认值)。
当确定双眼的中心不存在于有效区域内时，控制器17可以允许虚拟图像投影在预定的投影位置。
在该示例中，在驾驶员能够注视在间隔预定距离的虚拟位置处显示的无失真的增强现实图像状态下，预定投影位置可以表示虚拟图像的投影位置。
控制器17可以基于从传感器13接收的感测信号计算从车辆前端到座位的距离。
控制器17可以基于所计算的驾驶员眼睛的高度以及从车辆的前端到座位的距离来计算驾驶员的眼睛的位置。
控制器17可以确定所计算的驾驶员眼睛的位置是否改变。例如，控制器17可以通过将驾驶员眼睛的位置与预定位置进行比较来确定驾驶员眼睛的位置是否改变。
在该示例中，预定位置可以包括眼睛的高度和座位距离(从车辆前端到座位的距离)，在该距离处显示增强现实图像的虚拟位置与车辆的前方视野相匹配。因此，当在预定投影位置处投影的虚拟图像作为增强现实图像显示时，驾驶员可以核实作为增强现实显示的无失真的虚拟图像。
当确定在所计算的驾驶员眼睛的位置与预定位置之间存在差异时，控制器17可以根据所计算的驾驶员眼睛的位置来改变虚拟图像的投影位置。
更详细地，控制器17可以基于所计算的驾驶员眼睛的高度和从车辆的前端到座位的距离来调整虚拟图像的投影位置，以便高于预定的投影位置。当确定所计算的驾驶员眼睛的位置高于预定位置时，控制器17则可以允许投影虚拟图像。
此外，控制器17可以基于所计算的驾驶员眼睛的高度和从车辆的前端到座位的距离来调整虚拟图像的投影位置，以便低于预定的投影位置。当确定所计算的驾驶员眼睛的位置低于预定位置时，控制器17则可以允许投影虚拟图像。
当确定在所计算的驾驶员眼睛的位置与预定位置之间没有差异时，控制器17可以允许虚拟图像投影在预定投影位置处。
图2是示出根据本公开的实施例的用于控制车辆的显示的方法的流程图。
参考图2中的根据本公开的实施例的用于控制车辆的显示的方法，在操作S21中，控制器17获得驾驶员的面部图像。
在操作S22中，控制器17可以基于所获得的驾驶员的面部图像来确定是否检测到驾驶员双眼的中心。在操作S23中，当在操作S22中确定检测到驾驶员双眼的中心时(Y)，控制器17可以确定驾驶员双眼的中心是否存在于有效区域内。在操作S28中，当在操作S22中确定未检测到驾驶员双眼的中心时(N)，控制器17可以允许虚拟图像投影在预定的投影位置。
在操作S23中，有效区域的水平范围可以被定义为相机11的有效视角的范围。有效区域的竖直范围可以被定义为座位的竖直移动范围。
在操作S24中，当在操作S23中确定双眼的中心存在于有效区域内时(Y)，控制器17计算驾驶员眼睛的高度。
在操作S25中，控制器17基于从传感器13接收的感测信号计算从车辆的前端到座位的距离。在操作S25中，控制器17可以基于所计算的驾驶员眼睛的高度以及从车辆前端到座位的距离位置来确定驾驶员眼睛的位置。
在操作S26中，控制器17确定驾驶员眼睛的位置是否改变。
在操作S26中，控制器17可以将所计算的驾驶员眼睛的位置与预定位置进行比较以确定驾驶员眼睛的位置是否改变。
在操作S26中，预定位置可以包括眼睛的高度和座位距离，在该距离处作为增强现实显示的虚拟图像的虚拟位置与车辆的前方视野相匹配，并且因此当在预定投影位置处投影的虚拟图像被显示为增强现实时，驾驶员可以核实作为增强现实显示的无失真的虚拟图像。
在操作S27中，当在操作S26中确定所计算的驾驶员眼睛的位置改变时(是)，控制器17可以根据所计算的驾驶员眼睛的位置来改变虚拟图像的投影位置。
在操作S28中，当在操作S26中确定所计算的驾驶员眼睛的位置未被改变时，控制器17可以允许虚拟图像投影在预定投影位置处。
图3是示出根据本公开的实施例的用于控制车辆的显示的方法的流程图。
参考示出根据本公开的实施例的用于控制车辆的显示的方法的图3的流程图，可以指定根据驾驶员眼睛的高度的改变来确定投影的虚拟图像的位置的方法。
在操作S31中，控制器17可以基于所计算的驾驶员眼睛的高度和从车辆的前端到座位的距离来确定驾驶员眼睛的位置。控制器17还可以确定眼睛的位置是否在预定位置处改变。
在操作S32中，当在操作S31中确定所计算的驾驶员眼睛的位置在预定位置处改变时(Y)，控制器17可以确定所计算的驾驶员眼睛的位置是否高于预定位置。
在操作S33中，控制器17可以基于所计算的驾驶员眼睛的高度和从车辆的前端到座位的距离来调整虚拟图像的投影位置，以便高于预定的投影位置。在操作S32中，当确定所计算的驾驶员眼睛的位置高于预定位置时(Y)，控制器17则可以允许投影虚拟图像。
此外，在操作S34中，控制器17可以基于所计算的驾驶员的眼睛的高度和从车辆的前端到座位的距离来调整虚拟图像的投影位置，以便低于预定的投影位置。当确定所计算的驾驶员眼睛的位置低于预定位置时(N)，控制器17则可以允许投影虚拟图像。
在操作S35中，当在操作S31中确定所计算的驾驶员眼睛的位置与预定位置之间没有差异时(N)，控制器17可以允许虚拟图像投影在预定投影位置处。
图4是示出根据本公开的实施例的检测到的面部图像的视图。
如图4中所示，控制器17可以根据从相机11获得的驾驶员的面部图像来检测驾驶员的面部41。根据本公开的实施例，检测到的面部图像可以是红外图像并且可以使用一相机来获得，该相机能够通过将红外光照射在面部上同时该相机与面部间隔预定距离并且没有光而仅捕获红外区域。因此，即使当车辆内部较暗时，也可以容易地获得驾驶员的面部图像并且控制器17可以容易地从面部图像中检测驾驶员的面部41。
图5是示出根据本公开的实施例的检测到的双眼中心的视图。
如图5中所示，控制器17可以基于从相机11获得的驾驶员的面部图像来感测双眼51并且可以检测双眼51的中心52，即，驾驶员的双眼之间的中心点。
图6是示出根据本公开的实施例的显示的增强现实图像的视图。
如图6中所示，通过显示设备15投影的虚拟图像可以包括路径信息61和速度信息62。
根据实施例，路径信息61可以用图形实现，用于引导车辆将要沿着从当前位置到设定目的地的路径移动的方向。此外，速度信息62可以用指示车辆当前行驶的道路上的速度限制的图形来实现。
然而，虚拟图像不限于上述实施例。虚拟图像可以示出与车辆相关联的信息(诸如里程、到目的地的剩余距离、RPM、加油信息等)以图形方式实现。
图7是示出根据本公开的实施例的虚拟图像和道路匹配位置的投影位置的视图。
如图7所示，控制器17可以允许虚拟图像A投影在车辆的显示设备15的投影位置P0处。控制器17可以允许增强现实图像AR(图6的61或62)显示在间隔预定距离D的道路R上的虚拟位置VP处。在该实施例中，预定距离D通常可以表示驾驶员能够注视车辆前方的无失真的增强现实图像的距离并且可以根据实施例设置为任意值。
当在驾驶员注视通过投影到显示设备15上的无失真的虚拟图像A在间隔预定距离D的虚拟位置VP处显示的增强现实图像的状态下假设驾驶员双眼的中心为O时，控制器17可以测量驾驶员眼睛的高度H并且可以测量从车辆的前端到座位的距离S。
控制器17可以确定驾驶员眼睛的高度H是驾驶员眼睛的预定高度。控制器17可以确定从车辆的前端到座位的距离S是预定的座位距离。控制器17还可以确定虚拟图像的投影位置P0是预定的投影位置。此外，控制器17可以确定双眼的中心O是驾驶员眼睛的预定位置。
因此，当驾驶员眼睛的高度为H并且从车辆前端到座位的距离为S时，驾驶员可以注视通过投影到显示设备15上的无失真虚拟图像A在与车辆间隔预定距离D的虚拟位置VP处显示的增强现实图像AR。
图8是示出根据本公开的实施例的根据眼睛的改变的高度和道路匹配位置的虚拟图像的投影位置的视图。
如图8中所示，控制器17可以将驾驶员眼睛的高度H'与眼睛的预定高度H进行比较以确定驾驶员眼睛的位置是否改变。
当驾驶员眼睛的高度H'高于驾驶员眼睛的预定高度H时并且当从车辆的前端到座位的距离S'在预定的座位距离处改变时，控制器17可以确定驾驶员眼睛的位置O'高于眼睛的预定位置O(参考图7)。
在驾驶员眼睛的位置O'高于眼睛的预定位置O的状态下，当驾驶员注视通过投影在显示设备15的预定投影位置P0处的虚拟图像A所显示的增强现实图像AR'时，增强现实图像AR'可以显示在与车辆10间隔第一距离D'的道路R上的虚拟位置VP'处。
换句话说，增强现实图像似乎是失真的，因为在驾驶员眼睛的高度H'高于驾驶员眼睛的预定高度H的状态下，当驾驶员注视增强现实图像AR'时，增强现实图像显示在比距离车辆间隔预定距离D的位置VP更近的位置VP'处。因此，难以将准确的信息传送给驾驶员。
根据本公开的实施例，控制器17可以允许虚拟图像A投影在P1处，该P1通过从预定投影位置P0向上调整显示设备15的投影位置而获得，使得即使驾驶员眼睛的高度H'高于眼睛的预定高度H，驾驶员注视无失真的增强现实图像AR。
控制器17可以允许虚拟图像A投影在从预定投影位置P0向上调整的投影位置P1处。通过虚拟图像A显示的增强现实图像AR'可以与虚拟位置VP相匹配，而不是与虚拟位置VP'相匹配。因此，驾驶员可以注视车辆前方的无失真的增强现实图像。
根据实施例，为了使驾驶员注视无失真的增强现实图像，控制器17可以设置第二距离D1，使得第一距离D'和第二距离D1的总和是预定距离D，并且然后可以基于总和计算投影位置的向上范围。
图9是示出根据本公开另一实施例的根据眼睛的高度和道路匹配位置的虚拟图像的投影位置的视图。
如图9中所示，控制器17可以将驾驶员眼睛的高度H”与眼睛的预定高度H进行比较以确定是否存在变化。
当驾驶员眼睛的高度H”低于驾驶员眼睛的预定高度H时并且当从车辆的前端到座位的距离S”在预定的座位距离处改变时，控制器17可以确定驾驶员眼睛的位置O”低于眼睛的预定位置O(参考图7)。
当在驾驶员的眼睛的位置O”低于眼睛的预定位置O的状态下，驾驶员注视通过投影在显示设备15的预定投影位置P0处的虚拟图像A显示的增强现实图像AR”时，增强现实图像AR”可以在与车辆10间隔第三距离D”的道路R上的虚拟位置VP”处显示。
换句话说，增强现实图像似乎是失真的，因为在驾驶员眼睛的高度H”低于驾驶员眼睛的预定高度H的状态下，当驾驶员注视增强现实图像AR”时，增强现实图像显示在比距离车辆间隔预定距离D的位置VP更远的位置VP”处。因此，难以将准确的信息传送给驾驶员。
根据本公开的实施例，控制器17可以允许虚拟图像A投影在P2处，该P2通过从预定投影位置P0向下调整显示设备15的投影位置而获得，使得即使驾驶员眼睛的高度H”低于眼睛的预定高度H，驾驶员注视无失真的增强现实图像AR。
控制器17可以允许虚拟图像A投影在从预定投影位置P0向下调整的投影位置P2处。通过虚拟图像A显示的增强现实图像AR”可以与虚拟位置VP相匹配，而不是与虚拟位置VP”相匹配。因此，驾驶员可以注视车辆前方的无失真的增强现实图像。
根据实施例，为了使驾驶员注视无失真的增强现实图像，控制器17可以设置第四距离D2，使得第三距离D”和第四距离D2之间的差值是预定距离D。然后，控制器17可以基于该差值计算投影位置的向下范围。
图10是示出根据本公开的实施例的执行一方法的计算系统的配置的框图。
参考图10，计算系统1000可以包括至少一个处理器1100、内存1300、用户界面输入设备1400、用户界面输出设备1500、存储器1600、和网络接口1700，它们通过总线1200彼此连接。
处理器1100可以是中央处理单元(CPU)或处理存储在内存1300和/或存储器1600中的指令的半导体设备。内存1300和存储器1600中的每一个可以包括各种类型的易失性或非易失性存储介质。例如，内存1300可以包括只读存储器(ROM)和随机存取存储器(RAM)。
因此，结合本说明书中公开的实施例描述的方法或算法的操作可以直接用硬件模块、软件模块、或硬件模块和软件模块的组合来实现，该操作被处理器1100执行。软件模块可以驻留在存储介质(即，内存1300和/或存储器1600)上，诸如随机存取存储器(RAM)、闪存、只读存储器(ROM)、可擦除可编程ROM(EPROM)、电子EPROM(EEPROM)、寄存器、硬盘驱动器、可移动盘、或光盘ROM(CD-ROM)。存储介质可以耦合到处理器1100。处理器1100可以从存储介质读出信息并且可以在存储介质中写入信息。或者，存储介质可以与处理器1100集成。处理器和存储介质可以驻留在专用集成电路(ASIC)中。ASIC可以驻留在用户终端中。或者，处理器和存储介质可以作为单独的组件驻留在用户终端中。
在上文中，尽管已经参考各种实施例和附图描述了本公开，但是本公开不限于此，而是可以在不脱离权利要求中要求保护的本公开的精神和范围的情况下由本公开所属领域的普通技术人员进行各种修改和改变。
因此，本公开的实施例不旨在限制本公开的技术精神，而是仅出于说明性目的而提供。本公开的保护范围应由所附权利要求来解释，并且其所有等同物应被解释为包括在本公开的范围内。
根据本公开的实施例，用于控制车辆的显示的装置和方法可以通过根据驾驶员眼睛的高度改变虚拟图像的投影位置来允许虚拟图像与道路精确匹配，从而为驾驶员提供未失真的图像。
在上文中，尽管已经参考各种实施例和附图描述了本公开，但是本公开不限于此，而是可以在不背离以下权利要求中要求保护的本公开的精神和范围的情况下由本公开所属领域的技术人员进行各种修改和改变。

Claims (20)

1.一种用于控制车辆的显示的装置，所述装置包括：
相机，被配置为获得驾驶员的面部图像；
传感器，被配置为感测所述驾驶员就座的座位的位置；以及
控制器，
其中，所述控制器被配置为
基于所述面部图像和所述座位的位置确定所述驾驶员的眼睛的位置，以及
基于所述眼睛的位置校正投影到显示设备上的虚拟图像的投影位置。
2.根据权利要求1所述的装置，其中，所述控制器被配置为通过使用基于所述面部图像计算的所述驾驶员的眼睛的高度以及从所述车辆的前端到所述座位的距离来确定所述驾驶员的位置，所述距离是基于所述座位的位置计算的。
3.根据权利要求2所述的装置，其中，所述控制器被配置为基于所获得的面部图像检测双眼的中心，以及基于所述双眼的中心计算所述驾驶员的眼睛的高度。
4.根据权利要求3所述的装置，其中，所述控制器被配置为当所检测到的所述双眼的中心位于有效区域内时校正所述虚拟图像的投影位置。
5.根据权利要求4所述的装置，其中，所述有效区域的水平范围被定义为所述相机的有效视角的范围，并且
其中，所述有效区域的竖直范围被定义为所述座位的竖直移动范围。
6.根据权利要求1所述的装置，其中，通过投影到所述显示设备上的所述虚拟图像在所述车辆前方显示增强现实图像。
7.根据权利要求6所述的装置，其中，所述控制器被配置为基于所述驾驶员的眼睛的位置来校正所述虚拟图像的投影位置，使得所述增强现实图像与和所述车辆间隔预定距离的虚拟位置相匹配。
8.根据权利要求1所述的装置，其中，所述控制器被配置为当所述驾驶员的眼睛的位置高于预定位置时，向上调整所述投影位置以便高于预定投影位置。
9.根据权利要求1所述的装置，其中，所述控制器被配置为当所述驾驶员的眼睛的位置低于预定位置时，向下调整所述投影位置以便低于预定的投影位置。
10.根据权利要求1所述的装置，其中，所述显示设备包括平视显示器。
11.一种用于控制车辆的显示的方法，所述方法包括：
获得驾驶员的面部图像；
感测所述驾驶员就座的座位的位置；
基于所述面部图像和所述座位的位置确定所述驾驶员的眼睛的位置；以及
基于所述驾驶员的眼睛的位置校正投影到显示设备上的虚拟图像的投影位置。
12.根据权利要求11所述的方法，其中，确定所述驾驶员的眼睛的位置包括：
基于所述面部图像计算所述驾驶员的眼睛的高度；以及
确定从所述车辆的前端到所述座位的距离，所述距离是基于所述座位的位置计算的。
13.根据权利要求12所述的方法，其中计算所述驾驶员的眼睛的高度包括：
基于所获得的面部图像检测双眼中心；以及
基于所述双眼的中心计算所述驾驶员的眼睛的高度。
14.根据权利要求13所述的方法，其中，校正所述虚拟图像的投影位置包括：
确定所检测到的所述双眼的中心是否位于有效区域内；以及
当所检测到的所述双眼中心位于所述有效区域内时，校正所述虚拟图像的投影位置。
15.根据权利要求14所述的方法，其中，所述有效区域的水平范围被定义为用于获得驾驶员的面部图像的相机的有效视角的范围，并且
其中，所述有效区域的竖直范围被定义为所述座位的竖直移动范围。
16.根据权利要求11所述的方法，其中，通过投影到所述显示设备上的所述虚拟图像在所述车辆前方显示增强现实图像。
17.根据权利要求16所述的方法，其中，校正所述虚拟图像的投影位置包括基于所述驾驶员的眼睛的位置来校正所述虚拟图像的投影位置，使得所述增强现实图像与和所述车辆间隔预定距离的虚拟位置相匹配。
18.根据权利要求11所述的方法，其中，校正所述虚拟图像的投影位置包括当所述驾驶员的眼睛的位置高于预定位置时，校正所述投影位置以便高于预定的投影位置。
19.根据权利要求11所述的方法，其中，校正所述虚拟图像的投影位置包括当所述驾驶员的眼睛的位置低于预定位置时，校正所述投影位置以便低于预定的投影位置。
20.根据权利要求11所述的方法，其中，所述显示设备包括平视显示器。
CN201811424558.7A 2018-10-11 2018-11-27 用于控制车辆的显示的装置和方法 Pending CN111038402A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2018-0121245 2018-10-11
KR1020180121245A KR102673292B1 (ko) 2018-10-11 2018-10-11 차량의 표시 제어 장치 및 방법

Publications (1)

Publication Number Publication Date
CN111038402A true CN111038402A (zh) 2020-04-21

Family

ID=68841617

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811424558.7A Pending CN111038402A (zh) 2018-10-11 2018-11-27 用于控制车辆的显示的装置和方法

Country Status (4)

Country Link
US (1) US10510276B1 (zh)
KR (1) KR102673292B1 (zh)
CN (1) CN111038402A (zh)
DE (1) DE102018129741A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112164377A (zh) * 2020-08-27 2021-01-01 江苏泽景汽车电子股份有限公司 一种hud图像矫正的自适配方法
CN112947761A (zh) * 2021-03-26 2021-06-11 芜湖汽车前瞻技术研究院有限公司 Ar-hud系统的虚像位置调整方法、装置及存储介质
CN112991229A (zh) * 2021-04-26 2021-06-18 湖北亿咖通科技有限公司 增强现实投影的校准方法、电子设备、系统及存储介质
CN113064279A (zh) * 2021-03-26 2021-07-02 芜湖汽车前瞻技术研究院有限公司 Ar-hud系统的虚像位置调整方法、装置及存储介质
CN113682315A (zh) * 2020-05-15 2021-11-23 华为技术有限公司 座舱系统调节装置和用于调节座舱系统的方法
CN114019686A (zh) * 2021-11-23 2022-02-08 芜湖汽车前瞻技术研究院有限公司 抬头显示器的虚像显示方法、装置、设备和介质
CN116170747A (zh) * 2023-02-13 2023-05-26 重庆蓝鲸智联科技有限公司 一种车载多媒体与手机互联的测试方法

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI642972B (zh) * 2018-03-07 2018-12-01 和碩聯合科技股份有限公司 抬頭顯示系統及其控制方法
KR20200042660A (ko) * 2018-10-16 2020-04-24 현대자동차주식회사 차량 디스플레이 제어 장치, 그를 포함한 시스템 및 그 방법
CN111071187A (zh) * 2018-10-19 2020-04-28 上海商汤智能科技有限公司 驾驶环境智能调整及驾驶员注册方法和装置、车辆、设备
DE102020209971A1 (de) * 2020-08-06 2022-02-10 Volkswagen Aktiengesellschaft Intelligentes Head-Up-Display
KR20220123927A (ko) * 2021-03-02 2022-09-13 삼성전자주식회사 차량의 윈드 쉴드에 이미지를 투사하는 전자 장치 및 그 동작 방법
DE102021202666A1 (de) * 2021-03-18 2022-09-22 Volkswagen Aktiengesellschaft Dynamischer AR-Hinweis
CN114779470A (zh) * 2022-03-16 2022-07-22 青岛虚拟现实研究院有限公司 一种增强现实抬头显示系统的显示方法
US20230316914A1 (en) * 2022-04-01 2023-10-05 GM Global Technology Operations LLC System and method for providing platooning information using an augmented reality display
US12026306B2 (en) * 2022-07-28 2024-07-02 Rivian Ip Holdings, Llc Systems and methods for displaying information on a driver's display
KR20240079697A (ko) * 2022-11-29 2024-06-05 현대자동차주식회사 모빌리티용 헤드램프 에이밍 조정 시스템 및 방법
FR3145046A1 (fr) * 2023-01-18 2024-07-19 Psa Automobiles Sa Gestion automatisée du positionnement de l’emplacement d’affichage d’un appareillage d’affichage tête haute d’un véhicule automobile

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006163900A (ja) * 2004-12-08 2006-06-22 Nissan Motor Co Ltd ドライバモニタシステムおよびその処理方法
DE102015008887A1 (de) * 2015-07-09 2016-03-24 Daimler Ag Verfahren und Vorrichtung zur Kalibrierung eines Headup-Displays in einem Fahrzeug
KR20160069451A (ko) * 2014-12-08 2016-06-16 현대자동차주식회사 차량의 증강현실 hud 표시 방법 및 그 표시 장치
CN106226910A (zh) * 2016-09-08 2016-12-14 邹文韬 Hud系统及其影像调整方法
US20170329142A1 (en) * 2014-12-25 2017-11-16 Byd Company Limited Vehicle, head-up displaying system and method for adjusting height of projection image thereof
CN108473054A (zh) * 2016-02-05 2018-08-31 麦克赛尔株式会社 平视显示器装置
CN108473055A (zh) * 2016-02-05 2018-08-31 麦克赛尔株式会社 平视显示器装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100026466A (ko) 2008-08-29 2010-03-10 엘지전자 주식회사 헤드 업 디스플레이 시스템과 그에 따른 비디오 디스플레이각도 조정 방법
KR101544524B1 (ko) * 2010-12-16 2015-08-17 한국전자통신연구원 차량용 증강현실 디스플레이 시스템 및 차량용 증강현실 디스플레이 방법
JP2013237320A (ja) 2012-05-14 2013-11-28 Toshiba Alpine Automotive Technology Corp 違和感軽減表示装置およびその表示制御方法
KR102321095B1 (ko) * 2015-03-26 2021-11-04 현대모비스 주식회사 차량용 헤드업 디스플레이 장치 및 그 제어 방법
KR102440574B1 (ko) * 2016-03-21 2022-09-05 현대자동차 주식회사 차량의 디스플레이 제어 장치 및 방법
JP6486565B2 (ja) 2016-08-29 2019-03-20 三菱電機株式会社 表示制御装置及び表示制御方法
FR3067309B1 (fr) * 2017-06-09 2020-02-07 STMicroelectronics (Grand Ouest) SAS Procede et systeme de reglage automatique d'au moins un equipement d'un vehicule automobile
JP6626069B2 (ja) * 2017-11-10 2019-12-25 矢崎総業株式会社 車両用表示装置
JP7071173B2 (ja) * 2018-03-13 2022-05-18 本田技研工業株式会社 車両制御装置、車両制御方法、およびプログラム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006163900A (ja) * 2004-12-08 2006-06-22 Nissan Motor Co Ltd ドライバモニタシステムおよびその処理方法
KR20160069451A (ko) * 2014-12-08 2016-06-16 현대자동차주식회사 차량의 증강현실 hud 표시 방법 및 그 표시 장치
US20170329142A1 (en) * 2014-12-25 2017-11-16 Byd Company Limited Vehicle, head-up displaying system and method for adjusting height of projection image thereof
DE102015008887A1 (de) * 2015-07-09 2016-03-24 Daimler Ag Verfahren und Vorrichtung zur Kalibrierung eines Headup-Displays in einem Fahrzeug
CN108473054A (zh) * 2016-02-05 2018-08-31 麦克赛尔株式会社 平视显示器装置
CN108473055A (zh) * 2016-02-05 2018-08-31 麦克赛尔株式会社 平视显示器装置
CN106226910A (zh) * 2016-09-08 2016-12-14 邹文韬 Hud系统及其影像调整方法

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113682315A (zh) * 2020-05-15 2021-11-23 华为技术有限公司 座舱系统调节装置和用于调节座舱系统的方法
CN114407903A (zh) * 2020-05-15 2022-04-29 华为技术有限公司 座舱系统调节装置和用于调节座舱系统的方法
CN114407903B (zh) * 2020-05-15 2022-10-28 华为技术有限公司 座舱系统调节装置和用于调节座舱系统的方法
CN112164377A (zh) * 2020-08-27 2021-01-01 江苏泽景汽车电子股份有限公司 一种hud图像矫正的自适配方法
CN112164377B (zh) * 2020-08-27 2022-04-01 江苏泽景汽车电子股份有限公司 一种hud图像矫正的自适配方法
CN112947761A (zh) * 2021-03-26 2021-06-11 芜湖汽车前瞻技术研究院有限公司 Ar-hud系统的虚像位置调整方法、装置及存储介质
CN113064279A (zh) * 2021-03-26 2021-07-02 芜湖汽车前瞻技术研究院有限公司 Ar-hud系统的虚像位置调整方法、装置及存储介质
CN112991229A (zh) * 2021-04-26 2021-06-18 湖北亿咖通科技有限公司 增强现实投影的校准方法、电子设备、系统及存储介质
CN114019686A (zh) * 2021-11-23 2022-02-08 芜湖汽车前瞻技术研究院有限公司 抬头显示器的虚像显示方法、装置、设备和介质
CN116170747A (zh) * 2023-02-13 2023-05-26 重庆蓝鲸智联科技有限公司 一种车载多媒体与手机互联的测试方法

Also Published As

Publication number Publication date
KR102673292B1 (ko) 2024-06-10
US10510276B1 (en) 2019-12-17
DE102018129741A1 (de) 2020-04-16
KR20200044212A (ko) 2020-04-29

Similar Documents

Publication Publication Date Title
US10510276B1 (en) Apparatus and method for controlling a display of a vehicle
EP3312658B1 (en) Virtual image presentation system and virtual image presentation method
US9690104B2 (en) Augmented reality HUD display method and device for vehicle
EP2891953B1 (en) Eye vergence detection on a display
JP6369106B2 (ja) ヘッドアップディスプレイ装置
CN107848415B (zh) 显示控制装置、显示装置及显示控制方法
US20080151048A1 (en) Driving supporting apparatus
US20160041386A1 (en) Dynamically calibrated head-up display
EP3536533B1 (en) Vehicular projection display apparatus
US11216906B2 (en) Display apparatus to control display form of virtual object
JP2010018201A (ja) 運転者支援装置、運転者支援方法および運転者支援処理プログラム
TW201520673A (zh) 自動調整可視範圍之資訊顯示系統及其顯示方法
JP7005115B2 (ja) 車両用表示装置
KR102463688B1 (ko) 증강현실 헤드업 디스플레이 시스템에서 월드좌표를 활용한 정보 표시 방법
JP7450230B2 (ja) 表示システム
JP2020032864A (ja) ヘッドアップディスプレイ装置
CN111801239A (zh) 显示系统
US11276378B2 (en) Vehicle operation system and computer readable non-transitory storage medium
KR20160110725A (ko) 헤드업 디스플레이 및 그 제어방법
JP2007280203A (ja) 情報提示装置、自動車、及び情報提示方法
CN115320374A (zh) 显示控制装置、车辆、显示控制方法以及非暂时性计算机可读记录介质
WO2020195430A1 (ja) 画像表示システム、移動体、画像表示方法及びプログラム
KR102324280B1 (ko) 차량 주행방향 기반 hud 시스템
JP6813437B2 (ja) 表示システム
KR101628688B1 (ko) 헤드업 디스플레이 영상의 출력 제어 방법 및 그 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination