CN105917401A - 用于在车辆仪表控制台上显示三维图像的系统和方法 - Google Patents

用于在车辆仪表控制台上显示三维图像的系统和方法 Download PDF

Info

Publication number
CN105917401A
CN105917401A CN201480069018.5A CN201480069018A CN105917401A CN 105917401 A CN105917401 A CN 105917401A CN 201480069018 A CN201480069018 A CN 201480069018A CN 105917401 A CN105917401 A CN 105917401A
Authority
CN
China
Prior art keywords
display
operator
rendering
data
visual field
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201480069018.5A
Other languages
English (en)
Inventor
L·R·哈梅林科
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Visteon Global Technologies Inc
Original Assignee
Visteon Global Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Visteon Global Technologies Inc filed Critical Visteon Global Technologies Inc
Publication of CN105917401A publication Critical patent/CN105917401A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Arrangement of adaptations of instruments
    • B60K35/10—
    • B60K35/211—
    • B60K35/23—
    • B60K35/29—
    • B60K35/654—
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/373—Details of the operation on graphic patterns for modifying the size of the graphic pattern
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • B60K2360/149—
    • B60K2360/18—
    • B60K2360/334—
    • B60K2360/66—
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/14—Solving problems related to the presentation of information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user

Abstract

一种系统，其包括注视跟踪器，所述注视跟踪器配置成提供对应于操作者查看方向的注视数据。一个或多个处理器配置成分析注视数据以确定显示器是否处于操作者的中央视野内或显示器是否处于操作者的周边视野内。所述处理器进一步配置成在显示器处于操作者的中央视野内的情况下将第一类型的图像数据提供到显示器，以及在显示器处于操作者的周边视野内的情况下将第二类型的图像数据提供到显示器。第一类型的图像数据包括第一三维(3D)图像数据，当显示器处于操作者的中央视野内时其产生第一三维图像。第二类型的图像数据包括第二三维图像数据，当显示器处于操作者的周边视野内时其产生第二三维图像。

Description

用于在车辆仪表控制台上显示三维图像的系统和方法
技术领域
本发明总体涉及机动车辆，以及更具体而言，涉及用于在车辆仪器控制台上显示三维图像的系统和方法。
背景技术
车辆通常包括给驾驶员提供信息的各种显示器。例如，某些车辆包括在车辆仪表控制台中的显示器,其给驾驶员提供有关车辆速度、每分钟转数、汽油量、发动机温度、安全带状态等等的信息。此外，某些车辆包括在车辆仪表控制台中的显示器，其给驾驶员提供有关时间、广播电台、空调等等的信息。此外，显示器可用于显示三维(3D)图像。如可以理解到的那样，只有当驾驶员直视显示器时才可以辨别在显示器上的3D图像。其结果是，当驾驶员没有直视显示器时给驾驶员显示3D图像可给驾驶员提供较少的信息。例如，当驾驶员正在注视道路、专注于前面的远处对象时，3D图像因为它们处于驾驶员的周边视野下可能难以察觉。在某些配置中，在驾驶员周边视野内的三维图像将变得模糊和/或重影。此外，3D图像会在驾驶员的周边视野下太小而无法准确辨别。
发明内容
本发明涉及一种系统，其包括注视跟踪器，所述注视跟踪器配置成提供对应于操作者查看方向的注视数据。该系统还包括一个或多个处理器，其配置成分析注视数据以确定显示器是否处于操作者的中央视野内或显示器是否处于操作者的周边视野内。所述处理器进一步配置成在显示器处于操作者的中央视野内的情况下将第一类型的图像数据提供到显示器。以及在显示器处于操作者的周边视野内的情况下将第二类型的图像数据提供到显示器。第一类型的图像数据包括第一三维(3D)图像数据，当显示器处于操作者的中央视野内时其产生第一三维图像。第二类型的图像数据包括第二三维图像数据，当显示器处于操作者的周边视野内时其产生第二三维图像。
本发明还涉及一种非临时性计算机可读计算机介质，其包括计算机指令，所述计算机指令配置成接收注视数据并分析注视数据以确定显示器是否处于操作者的中央视野内或显示器是否处于操作者的周边视野内。计算机指令进一步配置成在显示器处于操作者的中央视野内的情况下将第一类型的图像数据提供到显示器，以及在显示器处于操作者的周边视野内的情况下将第二类型的图像数据提供到显示器。第一类型的图像数据包括第一三维(3D)图像数据，当显示器处于操作者的中央视野内时其产生第一三维图像。第二类型的图像数据包括第二三维图像数据，当显示器处于操作者的周边视野内时其产生第二三维图像。
本发明还涉及一种方法，其包括由一个或多个处理器接收注视数据并分析注视数据以确定显示器是否处于操作者的中央视野内或显示器是否处于操作者的周边视野内。所述方法还包括在显示器处于操作者的中央视野内的情况下使用一个或多个处理器将第一类型的图像数据提供到显示器，以及在显示器处于操作者的周边视野内的情况下将第二类型的图像数据提供到显示器。第一类型的图像数据包括第一三维(3D)图像数据，当显示器处于操作者的中央视野内时其产生第一三维图像。第二类型的图像数据包括第二三维图像数据，当显示器处于操作者的周边视野内时其产生第二三维图像。
附图说明
图1是车辆的一个实施例的透视图，其包括注视跟踪器和基于操作者所查看的位置用于显示不同三维(3D)图像的显示器。
图2是系统实施例的框图，其基于操作者所查看的位置用于改变提供给显示器的3D图像以补偿周边视差。
图3是操作者的中央视野和周边视野的实施例的侧视图。
图4是操作者一个实施例的透视图，其直接注视显示器，以及第一三维图像显示在显示器上。
图5是操作者一个实施例的透视图，其注视远离显示器，以及第二3D图像显示在显示器上。
图6是用于补偿周边视差的系统实施例的视图。
图7是方法实施例的流程图，用于基于显示器是否处于中央视野内或操作者的周边视野内而显示第一三维图像或第二三维图像。
具体实施方式
图1是车辆10的一个实施例的透视图，其包括注视跟踪器和基于操作者所查看的位置用于显示不同三维(3D)图像的显示器。如图所示，车辆10包括内部12，其具有在仪器控制台16上的显示器14。显示器14可包括能够显示3D图像的电子接口，诸如通过使用自动立体镜学(autostereoscopy)。这样，显示器14可显示3D图像并且可能不需要3D眼镜以感知3D图像。如图所示，显示器14在速度计和/或每分钟转数计通常位于其中的位置内安装在仪器控制台16内。在其它实施例中，显示器14可耦联到平视显示器，仪器控制台16的另一部分和/或显示器14可投射到车辆10的挡风玻璃上。
车辆10包括注视跟踪器18。在示出的实施例中，注视跟踪器18安装到仪表控制台16。然而，在其它实施例中，注视跟踪器18可安装到显示器14，转向柱，框架20，遮阳板，后视镜，车门等。如下面详细描述的那样，注视跟踪器18配置成监测其中操作者查看的方向，并将注视数据提供到处理装置。处理装置配置成确定操作者的注视方向，并且基于操作者的注视方向将第一或第二类型的图像数据提供到显示器14上。第一类型的图像数据包括产生将要被显示的第一三维图像的第一三维图像数据以及第二类型的图像数据包括产生将要被显示的第二三维图像的第二三维图像数据。第一和第二三维图像基于所述显示器是否处于操作者的中央或周边视野内。基于操作者查看位置而具有单独的三维图像是有益的，因为它可使得操作者能够辨别在显示器上的在操作者周边视野内的否则可能不可辨别的信息。这可通过当显示器处于周边视野内时所显示的3D图像来实现，所述三维图像去除周边视差，并且比当显示器处于操作者的中央视野内时所显示的三维图像更大和更简单。
图2是系统22实施例的框图，其基于操作者所查看的位置用于改变提供给显示器14的3D图像以补偿周边视差。如图所示，系统22包括注视跟踪器18，处理装置26，以及显示器14，除其它事项之外。注视跟踪器18可配置成提供对应于操作者查看方向的注视数据24。如可以理解的那样，注视数据24可包括方向性信息，其包括对于每个操作者的眼睛而言相对于所述注视跟踪器18的注视角度。因此，在某些实施例中，注视跟踪器18可配置成相关于注视跟踪器18相对于操作者的位置来分析注视数据24。
处理装置26包括一个或多个处理器28，存储器装置30和存储设备32。处理器28可用于执行软件，诸如注视数据分析软件，图像数据汇编软件等。此外，处理器28可包括一个或多个微处理器，诸如一个或多个“通用目的”的微处理器，一个或多个特殊用途的微处理器和/或特定应用集成电路(ASIC)，或它们的一些组合。例如，处理器28可包括一个或多个精简指令集(RISC)处理器。
存储装置30可包括易失性存储器，诸如随机存取存储器(RAM)，和/或非易失性存储器，诸如只读存储器(ROM)。存储器装置30可存储各种信息，并且可用于各种用途。例如，存储器装置30可存储适于处理器28的处理器可执行指令(例如，固件或软件)，以便执行诸如用于注视数据分析软件的指令，图像数据汇编软件等等。
存储装置32(例如，非易失性存储器)可包括ROM，闪存，硬盘驱动器，或任何其它适当的光学、磁性或固态存储介质，或它们的组合。所述存储装置32可存储数据(例如，注视数据24，图像数据等)，指令(例如，用于注视数据分析、图像汇编的软件或固件等)，以及任何其它合适的数据。
在某些实施例中，处理装置26配置成使用所述注视数据24以确定显示器14是否处于中央视野内或操作者的周边视野内。例如，处理装置26可配置成存储一个或多个注视角度，其中眼睛可查看将处于操作者的中央视野内显示器14。此外，处理装置26可配置成将注视数据24与一个或多个存储的注视角度进行比较。在注视数据24指示显示器14处于操作者的中中央视野的情况下，处理装置26可产生第一类型的图像数据34以提供到显示器14。相反，在注视数据24指示显示器14不处于操作者的中央视野内的情况下，处理装置26可确定显示器处于操作者的周边视野内，并且可产生第二类型的图像数据36以提供给显示器14。
注视数据24可以各种标准和/或非标准的数据格式(例如，二进制数据，文本数据，XML数据等)流式或以其它方式从注视跟踪器提供到处理装置26，并且数据可以包括不同的详细程度。如上所论述的那样，处理装置26分析注视数据24以确定显示器14是否处于操作者的中央视野内或是否显示器14处于操作者的周边视野内，以及处理装置26相应地将图像数据提供到显示器14。
在显示器14处于操作者的中央视野内的情况下，处理装置26将第一类型的图像数据34发送到显示器14。第一类型的图像数据34可包括第一三维图像数据。显示器14可使用第一三维图像数据以产生第一三维图像。在显示器14处于操作者的周边视野内的情况下，处理装置26将第二类型的图像数据36发送到显示器14。第二类型的图像数据36包括第二三维图像数据。显示器14可使用第二三维图像数据以产生第二三维图像。虽然发送到显示器14的两种类型的图像数据(例如，第一和第二类型的图像数据34和36)之间有许多差异，但在某些实施例中，第二类型的图像数据36可包含指令，以便显示器14通过补偿周边视差的图形显示第二三维图像。如下面详细论述的那样，补偿可通过显示第二三维图像中的图像来完成，所述图像从彼此偏移，使得由操作者的左眼查看的第一图像和由操作者的右眼查看的第二图像汇聚以便在操作者的周边视野内产生单一图像。
处理装置26可包括软件，诸如存储在非临时性计算机可读计算机介质上的计算机指令(例如，存储器装置30和/或存储装置32)。计算机指令可配置成从注视跟踪器18(或从任何其它源)接收注视数据24，以分析注视数据24，以确定显示器14是否处于操作者的中央视野内或是否显示器14处于操作者的周边视野内，以便在显示器14处于操作者的中央视野内的情况下将第一类型的图像数据34提供给显示器14，以及在显示器14处于操作者的周边视野内的情况下将第二类型的图像数据36提供到显示器14。由计算机指令提供的第一类型的图像数据34包括当显示器14处于操作者的中央视野内时产生第一三维图像的第一三维图像数据，以及由计算机指令提供的第二种类型的图像数据36包括当显示器14处于操作者的周边视野内时产生第二三维图像的第二三维图像数据。虽然只有一个处理装置26在图示的实施例中进行说明，但是其它实施例可使用一个以上的处理装置来接收注视数据，分析注视数据以确定显示器是否处于操作者的中央视野内或操作者的周边视野内，并将包括不同三维图像的图像数据提供到显示器。
图3是操作者42的中央视野38和周边视野40的实施例的侧视图。如可以理解的那样，一个操作者42的中央视野38可被认为是另一个操作者的周边视野。通常情况下，操作者42的中央视野38可被广义地限定为操作者42直接查看或凝视的位置。换言之，中央视野38可包括在操作者42的直接视线44内的东西。此外，操作者42的中央视野38还可指代操作者42的注视(或视线)。例如，操作者42正在注视的对象(例如，显示器14或道路)也处于操作者42的直接视线44内，因此在操作者42的中央视野38内。如可以理解到的那样，中央视野38可包括不为周边视野40的视野范围。
因此，在操作者42的注视或中央视野38之外的任何注视或视野可被认为是在操作者42的周边视野40内。当操作者42注视对象时，由操作者42的右眼和由操作者42的左眼48接收的图像46汇聚以在操作者42的脑海中产生对象的单个感知图像。由此，操作者42的右眼46和左眼48都不凝视到在周边视野内的对象，因为每只眼睛正注视操作者42的中央视野38内的对象。此外，右眼46和左眼48分别以不同的角度看到周边对象，这可导致周边对象显现为模糊和/或重影(例如，周边视差)。如在下面详细论述的那样，显示器14上的三维图像的布局和/或尺寸的变化可补偿这样的周边视差。
在图示的实施例中，中央视野38包括在操作者42的直接视线44每侧上的中央视野角度50。此外，周边视野40包括在操作者42的中央视野38每侧上的周边视野角度52。但是，应该指出的是，每个操作者42的视野可能会发生变化，因此中央视野角度50和周边视野角度52可能会发生变化。在一个典型的操作者42中，操作者42可具有大约一百八十度的向前面向视域。一百八十度可由操作者的42的直接视线44一分为二。因此，可存在包围直接视线44的九十度。例如，在一些操作者42中，中央视野角度50可弥补包围直接视线44的九十度的大约十到二十度，以及在该范围内可见的任何可被认为是处于操作者42的中央视野38内。其余的七十度到八十度可被认为是周边视野角度52，以及在该范围内可见的任何可被认为是处于操作者42的周边视野40内。如可以理解到的那样，本文提供的范围是示例性的以说明在某些实施例中可如何使用角度范围来确定何时对象处于操作者的中央视野38内或周边视野40内。
图4是操作者42的一个实施例的透视图，其直接注视显示器14，以及第一三维图像显示在显示器14上。在所示的实施例中，操作者42的右眼46和左眼48都在查看车辆10中的显示器14。如图所示，注视跟踪器18发出信号58(例如，红外信号等)，其反射离开操作者42的右眼46和左眼48。注视跟踪器18使用反射来检测每只眼睛正看向哪个方向。注视跟踪器18将对应于每只眼睛正看向的方向的数据作为注视数据存储。在某些实施例中，注视数据可除其它信息之外包括对应于相对于注视追踪器18的每只眼睛的空间位置和/或每只眼睛注视方向的数据。注视跟踪器18将注视数据提供到处理装置(例如，处理装置26)以确定显示器14是否处于操作者42的中央视野38内或显示器14是否处于操作者的周边视野4042内。
在图示的实施例中，显示器14处于操作者42的中央视野38内，这样处理装置将第一三维图像数据提供到显示所述第一三维图像56的显示器14。因为第一三维图像数据的三维自动立体镜学性质，第一三维图像56不需要三维眼镜来在显示器14上查看。如可以理解到的那样，第一三维图像56可包括适于速度，汽油水平，安全带指示器，气囊指示器，每分钟转数等等的图形。在某些实施例中，第一三维图像56可包含比第二三维图像更大数量的图形。此外，第一三维图像56可包含在尺寸上比第二三维图像的图形更小的图形。在其它实施例中，第一三维图像56和第二三维图像可包括相同数量的图形和/或相同尺寸的图形。
在某些实施例中，图形可意味着在显示器14上显示的或者作为数据存储的图形项。例如，图形可包括指示汽车行驶时的速度的数值，指示每分钟转数的数字，或诸如安全带指示器、汽油水平指示器的图像等等。此外，根据某些实施例，图形可以是任何尺寸、形状或颜色的。
图5是操作者42的一个实施例的透视图，其注视远离显示器14，以及第二三维图像显示在显示器14上。在所示的实施例中，操作者42的右眼46和左眼48都没有查看显示器14，而是集中在通过车辆10的挡风玻璃查看。在所示的实施例中，显示器14不处于操作者42的中央视野38内。相反，操作者42的中央视野38集中在通过挡风玻璃查看。因此，在操作者42的右眼46和左眼48之间的在中央视野38和直接视线66之间的角度64将显示器14置于操作者12的中央视野38之外。从而，处理装置可确定显示器14在操作者42的周边视野40内，并且可将第二三维图像数据提供到显示器14。因此，显示器14示出第二三维图像62。同样，因为第二三维图像数据的三维自动立体镜学性质，第二三维图像62不需要三维眼镜来在显示器14上查看。如可以理解到的那样，第二维图像62可包括适于速度，汽油水平，安全带指示器，气囊指示器，每分钟转数等等的图形。在某些实施例中，第二三维图像62可包含比第一三维图像56更少的图形。此外，第二三维图像62可包含在尺寸上比第一三维图像56的图形更大的图形。在其它实施例中，第一三维图像56和第二三维图像62可包括相同数量的图形和/或相同尺寸的图形。所述第二三维图像可不同于第一三维图像以便解释显示器在操作者的周边视野之内。例如，所述第二三维图像可以消除周边视差并显示更大和更简单的图像，这可能使得操作者能够辨别存在于第二三维图像中的否则当显示器处于操作者的周边视野内时将不可辨别的信息。
图6是用于补偿周边视差的系统22的一个实施例的视图。在图示的实施例中，操作者42的中央视野38不朝向显示器14。因此，在显示器14上的三维图像的未改变的图形因为周边视差而不能由操作者42辨别。为了补偿该周边视差，一对偏移的图形或图像72被定位在显示器14上，第一图像配置成由操作者42的右眼46接收，以及第二图像配置成由操作者42的左眼48接收。因此，第二三维图像62通过偏移的图形或图像72产生，所述偏移的图形或图像72汇聚以便在操作者42的周边视野40内产生单一图像。
图7是方法实施例的流程图，用于基于显示器是否处于中央视野38内或操作者的周边视野40内而显示第一三维图像或第二三维图像。所述方法包括接收注视数据的一个或多个处理器(方框82)。注视数据可由注视跟踪器18或由任何其它源来发送，例如由中间组件发送(例如中间件应用)。注视数据对应于操作者查看的方向。接下来，方法80包括分析所述注视数据以确定显示器14是否处于操作者42的中央视野38内或显示器14是否处于操作者42的周边视野40内(方框84)。然后，方法80包括将第一或第二种类型的图像数据提供到显示器14(方框86)。在显示器14处于操作者42的中央视野38内的情况下，可将第一类型的图像数据提供到显示器14。在显示器14处于操作者42的周边视野40内的情况下，可将第二类型的图像数据提供到显示器14。此外，第一类型的图像数据包括产生第一三维图像的第一三维图像数据，以及所述第二类型的图像数据包括产生第二三维图像的第二三维图像数据。第一和/或所述第二三维图像由显示器14显示(方框88)。该方法80然后返回到方框82以重复方框82至88。该方法提供使得操作者能够辨别当显示器处于操作者的周边视野内时否则可不可辨别的在第二三维图像中的相关信息的益处。
虽然已经示出和描述了本发明的仅仅某些特征和实施例，但是对于本领域的那些技术人员而言在实质上不偏离在权利要求中所述主题的新颖性教导和优点的情况下可进行许多修改和变化(例如，在下述上的改变：各种元件的大小，维度，结构，形状和比例，参数值(例如温度，压力等)，安装布置，材料的使用，颜色，取向等)。根据替代性实施例任何过程或方法步骤的次序或顺序可被改变或进行重新排序。因此应当理解所附的权利要求书意图涵盖落入本发明真实精神内的所有这些修改和变化。此外，在试图提供对示例性实施例的简要说明时，可以不对实际实施方式的所有特征进行描述(即与实施本发明的当前预期的最佳模式无关的那些，或那些与所要求保护的本发明使能不相关的那些)。但是应当意识到在任何这种实际实施方式的改进中，如在任何工程或设计项目中，可以做出许多具体的实施决策。这种改进工作会是复杂和耗时的，但对于受益于本公开的那些普通技术人员而言是无需过多的实验就可设计、制造和制备的常规事务。

Claims (20)

1.一种系统，其包括：
注视跟踪器，其配置成提供对应于操作者查看方向的注视数据；以及
一个或多个处理器，其配置成分析注视数据以确定显示器是否处于操作者的中央视野内或显示器是否处于操作者的周边视野内，在显示器处于操作者的中央视野内的情况下将第一类型的图像数据提供到显示器，以及在显示器处于操作者的周边视野内的情况下将第二类型的图像数据提供到显示器，其中所述第一类型的图像数据包括第一3D图像数据，当显示器处于操作者的中央视野内时，所述第一3D图像数据产生第一3D图像，以及所述第二类型的图像数据包括第二3D图像数据，当显示器处于操作者的周边视野内时，所述第二3D图像数据产生第二3D图像。
2.根据权利要求1所述的系统，其包括显示器。
3.根据权利要求2所述的系统，其中显示器安装在仪表控制台上。
4.根据权利要求2所述的系统，其中显示器是平视显示器的一部分。
5.根据权利要求1所述的系统，其中所述第一和第二3D图像是不用3D眼镜可见的。
6.根据权利要求1所述的系统，其中所述第一3D图像的第一图形是所述第二3D图像的第二图形的较小表示。
7.根据权利要求1所述的系统，其中所述第二3D图像包括来自第一3D图像的图形的子集。
8.根据权利要求1所述的系统，其中所述第二3D图像通过将第一图像和第二图像显示在所述显示器上而产生，其中第一和第二图像从彼此偏移，第一图像配置成由操作者的左眼查看，第二图像配置成由操作者的右眼查看，并且第一和第二图像汇聚以便在操作者的周边视野内产生单一图像。
9.根据权利要求1所述的系统，其中所述第二3D图像包括速度、汽油水平、安全带指示器、气囊指示器、发动机冷却剂温度指示器、每分钟转数中的至少一个或者其任意组合。
10.根据权利要求1所述的系统，其中分析所述注视数据包括针对注视跟踪器相对于操作者的位置来分析注视数据。
11.根据权利要求1所述的系统，其中注视跟踪器安装到显示器、转向柱、仪表控制台、框架、遮阳板、后视镜、车门或其某些组合。
12.一种非临时性计算机可读计算机介质，其包括计算机指令，所述计算机指令配置成：
接收注视数据；
分析注视数据以确定显示器是否处于操作者的中央视野内或显示器是否处于操作者的周边视野内；以及
在显示器处于操作者的中央视野内的情况下将第一类型的图像数据提供到显示器，在显示器处于操作者的周边视野内的情况下将第二类型的图像数据提供到显示器，其中第一类型的图像数据包括第一3D图像数据，当显示器处于操作者的中央视野内时，所述第一3D图像数据产生第一3D图像，以及第二类型的图像数据包括第二3D图像数据，当显示器处于操作者的周边视野内时，所述第二3D图像数据产生第二3D图像。
13.根据权利要求12所述的非临时性计算机可读计算机介质，其中注视数据对应于操作者查看的方向。
14.根据权利要求13所述的非临时性计算机可读计算机介质，其中所述计算机指令配置成针对注视跟踪器相对于操作者的位置来分析注视数据。
15.根据权利要求12所述的非临时性计算机可读计算机介质，其中所述第一3D图像的第一图形是所述第二3D图像的第二图形的更小表示。
16.根据权利要求12所述的非临时性计算机可读计算机介质，其中所述第二3D图像包括来自第一3D图像的图形的子集。
17.根据权利要求12所述的非临时性计算机可读计算机介质，其中所述第二3D图像通过将第一图像和第二图像显示在所述显示器上而产生，其中第一和第二图像从彼此偏移，第一图像配置成由操作者的左眼查看，第二图像配置成由操作者的右眼查看，并且第一和第二图像汇聚以便在操作者的周边视野内产生单一图像。
18.根据权利要求12所述的非临时性计算机可读计算机介质，其中第一和第二3D图像是不用3D眼镜可见的。
19.一种方法，其包括：
由一个或多个处理器接收注视数据；
分析注视数据以确定显示器是否处于操作者的中央视野内或显示器是否处于操作者的周边视野内；以及
在显示器处于操作者的中央视野内的情况下使用一个或多个处理器将第一类型的图像数据提供到显示器，在显示器处于操作者的周边视野内的情况下将第二类型的图像数据提供到显示器，其中第一类型的图像数据包括第一3D图像数据，当显示器处于操作者的中央视野内时，所述第一3D图像数据产生第一3D图像，以及第二类型的图像数据包括第二3D图像数据，当显示器处于操作者的周边视野内时，所述第二3D图像数据产生第二3D图像。
20.根据权利要求19所述的方法，其中所述第一3D图像的第一图形是所述第二3D图像的第二图形的较小表示。
CN201480069018.5A 2013-10-24 2014-10-22 用于在车辆仪表控制台上显示三维图像的系统和方法 Pending CN105917401A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/062,086 2013-10-24
US14/062,086 US20150116197A1 (en) 2013-10-24 2013-10-24 Systems and methods for displaying three-dimensional images on a vehicle instrument console
PCT/US2014/061819 WO2015061486A2 (en) 2013-10-24 2014-10-22 Systems and methods for displaying three-dimensional images on a vehicle instrument console

Publications (1)

Publication Number Publication Date
CN105917401A true CN105917401A (zh) 2016-08-31

Family

ID=51868336

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480069018.5A Pending CN105917401A (zh) 2013-10-24 2014-10-22 用于在车辆仪表控制台上显示三维图像的系统和方法

Country Status (5)

Country Link
US (1) US20150116197A1 (zh)
JP (2) JP2017504981A (zh)
CN (1) CN105917401A (zh)
DE (1) DE112014004889T5 (zh)
WO (1) WO2015061486A2 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018227597A1 (en) * 2017-06-16 2018-12-20 Boe Technology Group Co., Ltd. Vision-based interactive control apparatus and method of controlling rear-view mirror for vehicle

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9922651B1 (en) * 2014-08-13 2018-03-20 Rockwell Collins, Inc. Avionics text entry, cursor control, and display format selection via voice recognition
US9308439B2 (en) * 2012-04-10 2016-04-12 Bally Gaming, Inc. Controlling three-dimensional presentation of wagering game content
KR101970197B1 (ko) * 2012-10-29 2019-04-18 에스케이 텔레콤주식회사 복수의 카메라 제어 방법과 그를 위한 카메라 제어 장치
KR102071693B1 (ko) * 2014-02-07 2020-01-30 엘지전자 주식회사 헤드 업 디스플레이 장치
US9756319B2 (en) * 2014-02-27 2017-09-05 Harman International Industries, Incorporated Virtual see-through instrument cluster with live video
DE102014204800A1 (de) * 2014-03-14 2015-09-17 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zum Bereitstellen einer graphischen Nutzerschnittstelle in einem Fahrzeug
JPWO2015145933A1 (ja) * 2014-03-26 2017-04-13 パナソニックＩｐマネジメント株式会社 虚像表示装置、ヘッドアップディスプレイシステム及び乗物
JP6917708B2 (ja) * 2016-02-29 2021-08-11 株式会社デンソー 運転者監視システム
EP3369602A1 (en) * 2017-03-02 2018-09-05 Ricoh Company Ltd. Display controller, display control method, and carrier means
DE102017213177A1 (de) 2017-07-31 2019-01-31 Audi Ag Verfahren zum Betreiben eines Bildschirms eines Kraftfahrzeugs sowie Kraftfahrzeug
JP6968676B2 (ja) * 2017-12-06 2021-11-17 矢崎総業株式会社 車両用表示装置
US10845595B1 (en) * 2017-12-28 2020-11-24 Facebook Technologies, Llc Display and manipulation of content items in head-mounted display
ES2718429B2 (es) * 2017-12-29 2019-11-18 Seat Sa Método y dispositivo asociado para controlar al menos un parámetro de un vehículo
KR102531313B1 (ko) * 2018-09-04 2023-05-12 현대자동차주식회사 디스플레이 장치, 그를 가지는 차량 및 그 제어 방법
DE102018008553A1 (de) * 2018-10-30 2020-04-30 Psa Automobiles Sa Verfahren zum Betreiben einer Instrumentenanzeige
US20230286437A1 (en) * 2022-03-09 2023-09-14 Toyota Research Institute, Inc. Vehicular warning system and method based on gaze abnormality

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010028352A1 (en) * 2000-01-11 2001-10-11 Naegle N. David Graphics system having a super-sampled sample buffer and having single sample per pixel support
US20090005961A1 (en) * 2004-06-03 2009-01-01 Making Virtual Solid, L.L.C. En-Route Navigation Display Method and Apparatus Using Head-Up Display
US20110164032A1 (en) * 2010-01-07 2011-07-07 Prime Sense Ltd. Three-Dimensional User Interface
JP2011150105A (ja) * 2010-01-21 2011-08-04 Fuji Heavy Ind Ltd 情報表示装置
CN102293001A (zh) * 2009-01-21 2011-12-21 株式会社尼康 图像处理装置、程序、图像处理方法、记录方法及记录介质
CN103129466A (zh) * 2011-12-02 2013-06-05 通用汽车环球科技运作有限责任公司 在全挡风玻璃平视显示器上的驾驶操纵辅助

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5883739A (en) * 1993-10-04 1999-03-16 Honda Giken Kogyo Kabushiki Kaisha Information display device for vehicle
US6346950B1 (en) * 1999-05-20 2002-02-12 Compaq Computer Corporation System and method for display images using anamorphic video
US7068813B2 (en) * 2001-03-28 2006-06-27 Koninklijke Philips Electronics N.V. Method and apparatus for eye gazing smart display
US6890077B2 (en) * 2002-11-27 2005-05-10 The Boeing Company Method and apparatus for high resolution video image display
WO2005055189A1 (en) * 2003-12-01 2005-06-16 Volvo Technology Corporation Perceptual enhancement displays based on knowledge of head and/or eye and/or gaze position
US7090358B2 (en) * 2004-03-04 2006-08-15 International Business Machines Corporation System, apparatus and method of displaying information for foveal vision and peripheral vision
JP4367212B2 (ja) * 2004-04-15 2009-11-18 株式会社デンソー 虚像表示装置およびプログラム
KR20120005328A (ko) * 2010-07-08 2012-01-16 삼성전자주식회사 입체 안경 및 이를 포함하는 디스플레이장치
JP5849628B2 (ja) * 2011-11-11 2016-01-27 株式会社デンソー 車両用表示装置
JP2013187763A (ja) * 2012-03-08 2013-09-19 Toshiba Corp 視差補正処理装置
JP6007600B2 (ja) * 2012-06-07 2016-10-12 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
US10339711B2 (en) * 2013-03-15 2019-07-02 Honda Motor Co., Ltd. System and method for providing augmented reality based directions based on verbal and gestural cues

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010028352A1 (en) * 2000-01-11 2001-10-11 Naegle N. David Graphics system having a super-sampled sample buffer and having single sample per pixel support
US20090005961A1 (en) * 2004-06-03 2009-01-01 Making Virtual Solid, L.L.C. En-Route Navigation Display Method and Apparatus Using Head-Up Display
CN102293001A (zh) * 2009-01-21 2011-12-21 株式会社尼康 图像处理装置、程序、图像处理方法、记录方法及记录介质
US20110164032A1 (en) * 2010-01-07 2011-07-07 Prime Sense Ltd. Three-Dimensional User Interface
JP2011150105A (ja) * 2010-01-21 2011-08-04 Fuji Heavy Ind Ltd 情報表示装置
CN103129466A (zh) * 2011-12-02 2013-06-05 通用汽车环球科技运作有限责任公司 在全挡风玻璃平视显示器上的驾驶操纵辅助

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018227597A1 (en) * 2017-06-16 2018-12-20 Boe Technology Group Co., Ltd. Vision-based interactive control apparatus and method of controlling rear-view mirror for vehicle
US11400862B2 (en) 2017-06-16 2022-08-02 Boe Technology Group Co., Ltd. Vision-based interactive control apparatus and method of controlling rear-view mirror for vehicle

Also Published As

Publication number Publication date
DE112014004889T5 (de) 2016-08-04
JP2017504981A (ja) 2017-02-09
WO2015061486A3 (en) 2015-07-16
JP2019064580A (ja) 2019-04-25
WO2015061486A2 (en) 2015-04-30
US20150116197A1 (en) 2015-04-30

Similar Documents

Publication Publication Date Title
CN105917401A (zh) 用于在车辆仪表控制台上显示三维图像的系统和方法
EP3461129B1 (en) Method and apparatus for rendering image
JP6289498B2 (ja) 車両内の３次元ディスプレイの角度を自動的に調整するためのシステム及び方法
US9547172B2 (en) Vehicle image display
EP3387483B1 (en) An adjustable head-up display arrangement for a vehicle
US20140070934A1 (en) Methods and systems for monitoring driver object detection
CN109314765B (zh) 车辆用显示控制装置、显示系统、显示控制方法以及程序
US9096129B2 (en) Method and system for facilitating viewing of information in a machine
US9823735B2 (en) Method for selecting an information source from a plurality of information sources for display on a display of smart glasses
KR20150139610A (ko) 부품 조립 작업 지원 시스템 및 부품 조립 방법
US20160267336A1 (en) Method for calibrating a camera for a gaze direction detection in a vehicle, device for a motor vehicle having a camera and at least one further element, and computer program product
CN109788243B (zh) 识别和可视化地呈现显示增强图像内容时的系统不可靠性
US20160379422A1 (en) Systems and methods for displaying vehicle information with see-through effect
US10274726B2 (en) Dynamic eyebox correction for automotive head-up display
JP6265713B2 (ja) グラフィックメータ装置
CN110824709B (zh) 平视显示器
US11100718B2 (en) Method for operating a display device in a motor vehicle
WO2017133140A1 (zh) 一种行车辅助装置及行车辅助方法
US20160124224A1 (en) Dashboard system for vehicle
US20190166357A1 (en) Display device, electronic mirror and method for controlling display device
US9159301B2 (en) Slanted map
CN109415018B (zh) 用于数字后视镜的方法和控制单元
CN107850989A (zh) 用于在车辆中呈现信息的方法、装置和系统
US20190166358A1 (en) Display device, electronic mirror and method for controlling display device
JP2010208359A (ja) 車両用表示装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160831

WD01 Invention patent application deemed withdrawn after publication