CN109070804A - 视觉校正车辆显示器 - Google Patents

视觉校正车辆显示器 Download PDF

Info

Publication number
CN109070804A
CN109070804A CN201780027688.4A CN201780027688A CN109070804A CN 109070804 A CN109070804 A CN 109070804A CN 201780027688 A CN201780027688 A CN 201780027688A CN 109070804 A CN109070804 A CN 109070804A
Authority
CN
China
Prior art keywords
image data
occupant
display
display system
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780027688.4A
Other languages
English (en)
Other versions
CN109070804B (zh
Inventor
W·L·托纳尔
A·J·里德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gentex Corp
Original Assignee
Gentex Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gentex Corp filed Critical Gentex Corp
Publication of CN109070804A publication Critical patent/CN109070804A/zh
Application granted granted Critical
Publication of CN109070804B publication Critical patent/CN109070804B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/327—Calibration thereof
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Arrangement of adaptations of instruments
    • B60K35/65—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/31—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing stereoscopic vision
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/305—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using lenticular lenses, e.g. arrangements of cylindrical lenses
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/31—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using parallax barriers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/398—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • B60K2360/21—
    • B60K2360/31—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]

Abstract

本公开提供一种用于车辆的显示系统，所述显示系统包括至少一个图像传感器、图像处理器和显示设备。所述图像传感器被配置成捕获图像数据。所述图像处理器与所述图像传感器通信，且被配置成从所述图像数据生成经扩增图像数据。所述经扩增图像数据被配置成抵消所述车辆的乘员的远视。所述显示设备与所述图像处理器通信，且被配置成将所述经扩增图像数据分别传送到所述乘员的右眼和左眼中的每一个。

Description

视觉校正车辆显示器
技术领域
本发明大体上涉及用于车辆的显示装置，且更具体地说，涉及被配置成生成车辆显示器的视觉校正图像数据的显示装置。
发明内容
根据本公开的一个方面，本公开提供一种用于车辆的显示系统，所述显示系统包括至少一个图像传感器、图像处理器和显示设备。所述图像传感器被配置成捕获图像数据。所述图像处理器与所述图像传感器通信，且被配置成从所述图像数据生成经扩增图像数据。所述经扩增图像数据被配置成抵消所述车辆的乘员的远视。所述显示设备与所述图像处理器通信，且被配置成将所述经扩增图像数据分别传送到所述乘员的右眼和左眼中的每一个。
根据本公开的另一方面，公开一种车辆显示装置。所述装置包括被配置成捕获图像数据的至少一个图像传感器和被配置成识别乘员位置的跟踪传感器。图像处理器与所述图像传感器和所述跟踪传感器通信。所述图像处理器被配置成从所述图像数据生成经扩增图像数据。所述经扩增图像数据被配置成抵消所述车辆的乘员的远视。所述装置还包括与所述图像处理器通信的显示设备。所述显示设备包括光学阵列，所述光学阵列被配置成基于所述乘员的位置，将所述经扩增图像数据分别传送到所述乘员的右眼和左眼中的每一个。
根据本公开的另一方面，公开一种车辆显示装置。所述装置包括被配置成捕获图像数据的至少一个图像传感器和被配置成识别乘员位置的跟踪传感器。图像处理器与所述图像传感器和所述跟踪传感器通信。所述图像处理器被配置成从所述图像数据生成经扩增图像数据。所述经扩增图像数据被配置成抵消所述车辆的乘员的远视。所述装置还包括与所述图像处理器通信的显示设备。所述显示设备包括像素阵列和双凸透镜，所述像素阵列和双凸透镜被配置成分别将所述经扩增图像数据作为右侧图像数据传送到所述乘员的右眼并将所述经扩增图像数据作为左侧图像数据传送到所述乘员的左眼。所述显示器被配置成基于所述乘员的所述位置，选择性地启动所述像素阵列中通过双凸透镜分别与所述乘员的所述右眼和所述左眼对准的像素。
通过参考所附说明书、权利要求书和附图，所属领域的技术人员将进一步理解和了解本发明的这些和其它特征、优势和目标。
附图说明
在附图中：
图1是显示车辆的显示系统的投影视图；
图2是车辆的正视图，其显示车辆的成像设备；
图3是用于生成经扩增图像数据的图像处理方法的框图；
图4是供车辆乘员观看从经扩增图像数据转换的经恢复图像数据的图像处理方法的示意图；
图5是车辆乘员观看从经扩增图像转换的经恢复图像数据的顶部示意图；以及
图6是根据本公开的显示系统的框图。
具体实施方式
出于本文中描述的目的，用语“上部”、“下部”、“右侧”、“左侧”、“后”、“前”、“竖直”、“水平”和其派生词应与本发明在图1中的定向有关。除非另有说明，否则用语“前”应指更靠近显示器的预期观看者的元件的表面，且用语“后”应指更远离显示器的预期观看者的元件的表面。然而，应理解，除明确指定相反方向外，本发明可采用各种替代定向。还应理解，附图中说明且在下文说明书中描述的特定装置和过程仅仅是所附权利要求书中定义的发明性概念的示范性实施例。因此，除非权利要求书另有明确说明，否则与本文中所公开的实施例有关的特定尺寸和其它物理特性不应被视为限制性的。
用语“包含(including)”、“包括(comprises、comprising)”或其任何其它变化意图涵盖非排他性包含内容，使得包括一系列要素的过程、方法、物件或设备并不仅包含那些要素，而是可以包含并未明确地列出或并非此类过程、方法、物件或设备固有的其它要素。在“包括”后面的要素并不会以任何约束来杜绝包括所述要素的过程、方法、物件或设备中的额外相同要素的存在。
参考图1，本公开提供车辆12的显示系统10。显示系统10可用于在显示屏14上显示图像数据。图像数据可进行扩增，以便恢复或调节乘员16的视觉校正。本文中所描述的视觉校正可对应于各种验光视力(prescription)增强装置和/或外科手术。此类装置可包含但不限于校正透镜、眼镜、隐形眼镜、假体等。外科手术可包含激光原位角膜磨削术(laser-assisted in situ keratomileusis，LASIK)和各种外科技术。在一些情况下，显示系统还可用于为远视(远视眼)乘员生成经增强或经扩增图像数据。因此，所公开的系统可以向乘员16显示图像数据，这种显示校正或抵消了与近距离在显示屏14上观察图像数据相关的负面效果。
例如，如图1中所显示，乘员16可能佩戴着校正透镜18来校正数种视觉条件。在操作车辆12时可与校正透镜18的使用相关的条件可对应于近视(短视)、散光、角膜症、老花眼等。当使用校正透镜18可以增强乘员16识别相对于车辆12的远处区域20中的遥远对象的能力时，校正透镜18在观看车辆12的乘客室22中的附近对象方面可能会产生挑战。并且，类似问题对于具有远视的那些乘员来说可能也存在。例如，在显示系统10的显示屏14上展示的一个或多个图像可能显得模糊。
远处区域20和乘客室22中的附近对象之间的焦距差异对于车辆12的年长乘员16或操作员来说可能更加普遍。由于调节能力逐步丧失，年长者可能通常更难将焦点从远处区域20改变到附近对象。如本文中所论述，附近对象可对应于距离乘员16大致1m内的对象。远处区域20可对应于与乘员16相距大于2m的距离。因此，如果乘员16在操作车辆12时观看乘客室22中的附近对象，他可能会面临视觉疲劳以及放大率校正的难题。
本公开可提供用于生成并在显示屏14上显示经扩增图像数据的显示系统10。经扩增图像数据可被配置成通过特定乘员16的校正透镜18更改，使得经恢复图像数据被发射给乘员16。经恢复图像数据可对应于就像乘员16以前没有佩戴校正透镜18时呈现给乘员的图像数据。例如，经恢复图像数据可焦点对准地呈现给短视乘员，即使乘员是通过校正透镜18观看经恢复图像数据也如此。通过这种方式，显示系统10可使得图像数据能够进行逆校正(counter-correct)以调节图像数据，从而焦点对准地呈现给佩戴校正透镜的乘员。
如另外参考图3到5所论述，显示系统10可被配置成捕获并在显示屏14上显示图像数据。图像数据可包括呈右眼图像数据或帧和左眼图像数据或帧的图像数据形式。可从显示屏14发射右眼图像数据，使得右眼图像数据被乘员16的右眼接收。可从显示屏14发射左眼图像数据，使得左眼图像数据被乘员16的左眼接收。因此，显示屏14可形成显示设备24中被配置成将图像数据的特定帧投射到乘员16的左眼和右眼中的每一个的一部分。
根据多个实施例，显示设备24可包括与自动立体或自动多视点(automultiscopic)显示器类似的特征。以下参考文献可包含被配置成提供自动立体和/或自动多视点功能性的显示系统和相机系统的各种实施方案，并且以全文引用的方式并入本文中：Ranieri等人在2012年11月27日提交的标题为“组合多个发射和光调制平面的多层全光显示器(MULTI-LAYER PLENOPTIC DISPLAYS THAT COMBINE MULTIPLE EMISSIVE ANDLIGHT MODULATING PLANES)的第9,179,134B2号美国专利；Lin Du等人在2012年12月24日提交的标题为“用于可旋转地显示自动立体演示的显示单元(DISPLAY UNIT FORROTATABLY DISPLAYING AN AUTOSTEREOSCOPIC PRESENTATION)”的第2015/0334379A1号美国公开案；Graham Woodgate等人在2002年4月23日提交的标题为“观察者跟踪定向显示器(OBSERVER TRACKING DIRECTIONAL DISPLAY)”的第6,377,295B1号美国专利；Changil Kim等人在2015年7月15日提交的标题为“来自光场的多视角体视学(MULTI-PERSPECTIVESTEREOSCOPY FROM LIGHT FIELDS)”的第2015/0319423 A1号美国公开案；Bogyun Chung等人在2013年11月6日提交的标题为“自动立体图像显示器及其驱动方法(AUTOSTEREOSCOPICIMAGE DISPLAY AND METHOD FOR DRIVING THE SAME)”的第2014/0125783A1号美国公开案；Jesse B.Eichenlaub在2012年9月13日提交的标题为“经时间复用自动立体显示器的图像数据放置方法(IMAGE DATA PLACEMENT METHOD FOR A TIME MULTIPLEXEDAUTOSTEREOSCOPIC DISPLAY)”的第8,947,605B2号美国专利；以及Stefan Olsson等人在2008年5月7日提交的标题为“用于显示三维视图的观看者跟踪(VIEWER TRACKING FORDISPLAYING THREE DIMENSIONAL VIEWS)”的第2009/0282429A1号美国公开案。
如本文所论述，显示系统10可被配置成生成分别用于乘员16的右眼和左眼的图像。另外，显示系统10可被配置成生成可与多个图像传感器相关联的多个视图。被配置成提供多个视图的显示系统10的实施例可利用一个或多个立体显示方法将图像数据分别传送到左眼和右眼。在此配置中，显示设备24可提供可以正常展示在后视镜和常规侧镜上的视图。
在一些实施例中，显示设备可被配置成跟踪乘员16在乘客室22中的位置。例如，显示设备24可包括被配置成跟踪乘员16的面部和/或眼睛的位置的传感器。通过这种方式，显示设备24可用于跟踪乘员16的眼睛的位置，以控制像素阵列中被配置成对准左眼或右眼的特定像素。操作员的眼睛可以通过可并入到显示设备24中的一个或多个跟踪传感器跟踪。参考图6进一步论述跟踪传感器。
在各种实施例中，显示设备24可利用基于视差的显示器和/或全景成像(双凸透镜板(lenticular sheet)或鱼眼阵列)。此类显示技术可用于为乘员16提供自动立体或自动多视点体验或使显示屏14的视图成为自动立体或自动多视点的。基于视差的显示器可并有视差屏障和/或采用水平调制的分块图案(blocking pattern)来将图像数据的不同帧传送到乘员16的第一只眼和第二只眼。视差屏障可对应于可放置在例如液晶显示器(LCD)或其它显示器的显示屏14前方的装置，以允许显示屏14展示或显示立体或3D图像而不需要观看者佩戴3D眼镜。视差屏障可包含一层材料，其中具有一连串精密狭缝以使得观看者的每一只眼睛能够看到一组不同的像素。
显示系统10可被配置成捕获对应于一个或多个相机的图像数据，并生成经扩增图像数据，所述经扩增图像数据被配置成在它通过校正透镜18变换时恢复。通过这种方式，显示系统10可提供灵活的系统，所述系统被配置成显示右眼图像数据和左眼图像数据，所述右眼图像数据和左眼图像数据定制成抵消校正透镜18的第一校正镜片和第二校正镜片的校正。针对乘员16的左眼和右眼的经扩增图像数据可通过一个或多个处理器、微处理器、图形处理单元(GPU)等生成，这些装置可与显示系统10通信和/或并入在显示系统10中。
在示例性实施例中，显示系统10的显示设备24可并入在内部后视组合件26中。显示设备24可安装或以其它方式附接到车辆12的各个位置上。例如，显示设备24可集成到车辆12的仪表组27、仪表盘28、中控面板30(例如，信息娱乐中心)或车顶衬中。显示设备24可位于其它外围位置。例如，显示设备24可安装到遮阳板上。显示设备24可安装到车辆12的其它表面(例如，挡风玻璃、门板或其它车辆部件)上。
现在参考图2，示出了车辆12的成像设备32的图。在示例性实施例中，成像设备32的多个图像传感器33可对应于第一图像传感器C1、第二图像传感器C2和第三图像传感器C3。每一个图像传感器33可具有聚焦于接近车辆12的环境的视场34。在本文中所论述的各个实施方案中，图像传感器C1到C3可以被实施以提供接近车辆12的环境的视图，所述视图可在显示屏14或任何形式的显示装置上显示。
图像传感器33可被布置在车辆12上的各个位置中。在示例性实施例中，图像传感器33可被布置成使得图像传感器C1到C3的多个视场34中的每一个被配置成捕获周围环境的显著不同部分。每一个图像传感器33可包括被配置成捕获图像数据的任何形式的装置，例如电荷耦合装置(CCD)和互补金属氧化物半导体(CMOS)图像传感器。尽管参考本实施方案论述了三个图像传感器C1、C2和C3，但是图像传感器的数目可基于特定图像传感器的规范和/或显示系统10的视场34的所要数目而变化。
图像传感器C1、C2和C3被安置在车辆12上，且被定向成使得图像传感器33的每一视场34指向显著不同的区域。第一图像传感器C1可居中安置在车辆12的后向部分上并接近车辆12的后挡板或类似区域。在一些实施例中，图像传感器C1可安置成接近后保险杠和/或第三刹车灯(CHMSL)。第二图像传感器C2和第三图像传感器C3可分别安置在车辆12的乘客侧36和驾驶员侧38上。第二图像传感器C2和第三图像传感器C3可被配置成捕获对应于接近车辆12的侧面区域的环境的图像数据。
在一些实施方案中，第二图像传感器C2和第三图像传感器C3可安置在车辆12的侧镜40中。图像传感器C2和C3以及第一图像传感器C1可被配置成捕获与相对于车辆12的前向方向指向后向的区域相对应的图像数据。在一些实施例中，图像传感器33可被配置成依据特定应用捕获增大的或减小的观看角度。在一些实施例中，图像传感器可被配置成捕获车辆12周围的大致整个环境。
如参考图3进一步论述，图像传感器33可与图像处理器通信，所述图像处理器被配置成处理来自由图像传感器33捕获的每一个视场34的图像数据。图像处理器可被配置成针对乘员16的右眼和左眼中的每一个从视场34生成经扩增图像数据。在此配置中，显示系统10可提供增强的观看体验，这种体验可使在显示屏14上显示的图像数据聚焦地呈现给乘员16，即使在乘员16通过校正透镜18观看时也如此。尽管参考内部后视组合件26详细地论述，但显示系统10可用于车辆的各个部分(例如，车辆控制台、仪表组、侧镜等)。由此，本公开提供可用于各种应用的车辆显示器的各种实施例。
现在参考图3，示出了可通过图像处理器完成的图像处理方法的框图。图像处理器可从图像传感器C1、C2和C3中的一个或多个接收图像数据，并对图像数据进行编码或处理以在显示屏14上显示。例如，第一图像传感器C1可提供第一视图(视图1)，所述第二图像传感器C2可提供第二视图(视图2)，且第三图像传感器C3可提供第三视图(视图3)。图像视图可由图像处理器处理，所述处理可包括每一个视图进行裁剪、增强和/或合成以供在显示屏14上显示(42)。
从图像处理器接收的图像数据还可根据右侧逆校正(44)和左侧逆校正(46)进行处理。图像数据的逆校正处理可包括针对乘员16的每一只眼睛进行放大率和/或图像调整。因此，显示系统10还可用于接收对应于乘员的校正透镜18和/或一个或多个视力缺陷(例如，远视)的视觉校正信息。视觉校正信息可供图像处理器用于调整右眼图像数据(48)和左眼图像数据(50)，以抵消校正透镜18的校正或远视。通过这种方式，当乘员16佩戴会以其它方式使图像数据的形态变形的校正透镜18时，显示设备24可被配置成以焦点对准的形态显示乘客室22内的附近图像数据。
右侧逆校正44和左侧逆校正46可对应于调适图像数据以补偿乘员的视觉校正信息的过程。基于视觉校正信息，可扭曲或以其它方式操控图像数据来抵消校正透镜18的校正。图像数据的操控可包含将光场射线和视网膜位置配对，以及对图像数据的视网膜“像素”进行归一化。通过这种方式，基于乘员16的右眼和左眼中的每一个的特定校正，可操控图像数据对校正透镜18的校正进行逆校正。在以下文件中公开关于用于提供特制显示器的校正方法的细节，所述特制显示器被配置成显示图像数据且可以不需要视觉校正，所述文件中的每一个以全文引用的方式并入本文中：Pamplona等人的“用于补偿视觉像差的特制显示器”，计算机图形学会刊(ACM Trans.on Graph.)31(4)，第87页：1-12；以及Huang等人的“无眼镜式显示器：针对用计算光场显示器校正视觉像差(Eyeglasses-free Display:Towards Correcting Visual Aberrations with Computational Light FieldDisplays)”，ACMSIGGRAPH 2014，温哥华。
现在参考图4，示出了用于车辆12的乘员16的图像处理方法的示意图。如本文所论述，显示系统10可被配置成显示经扩增图像数据70，所述经扩增图像数据70可通过校正透镜18进行变换以向乘员16提供经恢复图像数据72。观看从经扩增图像数据70转换的经恢复图像数据72可使得乘员16能够观看在显示设备24的显示屏14上显示的呈焦点对准的图像数据。例如，经扩增图像数据70可被配置成在通过校正透镜18的第一校正透镜18a和第二校正透镜18b中的每一个之后呈现为焦点对准的。第一校正透镜18a和第二校正透镜18b可将经扩增图像数据70弯曲并变换成经恢复图像数据72。
现在参考图4和5，为了实现经扩增图像数据70针对乘员16的右眼74和左眼76进行独立校正，显示系统10可被配置成将右眼图像数据82(R)传送到右眼，并将左眼图像数据84(L)传送到左眼76。如本文所论述，显示设备24可对应于被配置成将右眼图像数据82投射到右眼74并将左眼图像数据84投射到左眼76的自动立体显示装置。在此配置中，显示系统10可基于左眼校正和右眼校正而将经扩增图像数据70传送到乘员。
如图5所示，参考车辆12的挡风玻璃90来示出显示设备24。为提供此类功能性，显示设备24可包括对应于像素阵列94的显示面板92和在显示面板92上形成的双凸透镜96。显示屏14的后表面可面向双凸透镜96。显示面板92可为具有像素阵列94的各种显示器类型，像素阵列94可被布置成行和列形式。例如，显示面板92可对应于液晶显示器(LCD)、等离子显示器、有机发光二极管(OLED)显示器、场发射显示器(FED)面板或各种其它显示器。
双凸透镜96可包括长柱面透镜元件98。透镜元件98可平行布置，并且可与像素阵列94的列对准。因此，双凸透镜96可安置在显示面板92上。双凸透镜96可基于每个像素相对于柱面元件98的位置而将右眼图像数据82与左眼图像数据84分开。通过这种方式，显示设备24可被配置成将右眼图像数据82引导到第一校正透镜18a(例如，右眼74)，并将左眼图像数据84引导到第二校正透镜18b(例如，左眼76)。
如本文所论述，显示系统10可用于接收对应于接近车辆12的场景的一个或多个图像的图像数据。系统10可应用一个或多个算法或图像处理技术来产生经扩增图像数据70，所述经扩增图像数据70被配置成分别逆转第一校正透镜18a和第二校正透镜18b的视觉效果。车辆12的乘员16可将经扩增图像数据70视为经恢复图像数据72，因为图像数据已通过校正透镜18进行变换。因此，在显示屏14上显示的右眼图像数据82和左眼图像数据84可以就像乘员以前在没有佩戴校正透镜18时观看显示屏14上的图像数据一样呈现给乘员16。通过这种方式，本公开提供一种系统，所述系统被配置成缓解乘员16(例如，操作员)利用校正透镜18观看远处区域20中的遥远对象100和观看显示屏14上的图像数据时存在的问题。简单地说，系统10可使得远处区域20中的遥远对象100和乘客室22中的显示屏14能够焦点对准地呈现给乘员16，即使乘员16使用了校正透镜18也如此。
现在参考图6，示出了显示系统10的框图。显示系统10可包含与控制电路104通信的呈一个或多个按钮形式的用户接口102。用户接口102可被配置成接收关于抵消乘员16的远视所需的校正透镜18和/或验光视力的信息。在此配置中，系统10可被配置成接收并存储被配置成逆校正校正透镜18的效果和/或校正视觉缺陷(例如，远视)的信息。显示设备24的示例性实施例可并有在虚线框中示出的指定为显示设备24的元件。在一些实施例中，用户接口102可包含例如触摸屏显示器、开关、麦克风、旋钮、触摸传感器(例如，基于投射式电容传感器电阻的触摸传感器、电阻式触摸传感器或其它触摸传感器)、接近传感器(例如，投射式电容、红外、超声波、红外或其它接近传感器)等输入装置，或被配置成从用户动作生成输入的其它硬件。
显示系统10可包括显示设备24。显示设备24可包括对应于像素阵列94的显示面板92和在显示面板92上形成的双凸透镜96。背离乘员16的显示屏14的后表面可面向双凸透镜96。显示面板92可为具有像素阵列94的各种显示器类型，像素阵列94可被布置成行和列形式。例如，显示面板92可对应于液晶显示器(LCD)、等离子显示器、有机发光二极管(OLED)显示器、场发射显示器(FED)面板或各种其它显示器。显示设备24还可并有扬声器、触觉反馈装置(例如，振动马达)、LED或用于提供输出的其它硬件部件。
控制电路104可包含各种类型的数字和/或模拟控制电路，且可包含微处理器、微控制器、专用集成电路(ASIC)、图形处理单元(GPU)，或被配置成执行各种输入/输出、控制、分析和本文中所描述的其它功能的其它电路。在其它实施例中，控制电路104可单独地为片上系统(SoC)或与本文中所描述的额外硬件部件一起形成片上系统(SoC)。控制电路104还可包含存储器106(例如，随机存取存储器、只读存储器、快闪存储器、硬盘存储装置、快闪存储器存储装置、固态驱动器存储器等)。在其它实施例中，控制电路104可充当用于包含在显示系统10中的一个或多个硬件部件的控制器。例如，控制电路104可充当用于触摸屏显示器或其它操作员输入装置的控制器、用于收发器、发射器、接收器或其它通信装置(例如，实施蓝牙通信协议)的控制器。
在一些实施例中，控制电路104可被配置成从用户接口102接收输入。输入可被转换成控制信号，所述控制信号可进行识别和利用以输出一个或多个控制信号和/或发射数据。在此配置中，显示系统10可进行通信(例如，发送和/或接收信号和/或数据)以控制显示器的各种功能或车辆12的设置或功能。
存储器106可用于促进如本文中所描述的显示系统10的功能。存储器106可包含计算机代码模块、数据、计算机指令或其它信息，所述其它信息可由控制电路104执行或以其它方式促进本文中所描述的显示系统10的功能。例如，存储器106可包含加密代码、配对信息、识别信息、装置注册表配置、图像扩增信息、乘员特定的校正透镜信息等。存储器106和/或控制电路104可使用一个或多个编程技术、数据操控技术和/或处理技术，例如使用算法、例程、查询表、阵列、搜索、数据库、比较、指令等促进本文中所描述的功能。
显示系统10还可包括通信电路108。通信电路108可对应于耦合到控制电路104的收发器电路或发射器电路。收发器电路可允许显示系统10以发射和/或接收无线通信信号。无线通信信号可被发射到各种无线装置(例如，原始发射器、家庭电子装置、移动通信装置和/或远程装置)或从各种无线装置接收。通信电路108可受控制电路104控制。例如，控制电路104可使通信电路108接通或断开，控制电路104可使用通信电路108发送数据，格式信息、启动信号、控制信号和/或用于通过通信电路108发射的其它信号或数据，或以其它方式控制通信电路108。来自通信电路108的输入也可由控制电路104接收。例如，验光视力视觉校正和/或限定校正透镜18的校正的信息可由通信电路108接收并通过控制电路104存储在存储器106中。
在一些实施例中，通信电路108可包含额外硬件，例如处理器、存储器、集成电路、天线等。通信电路108可在发射之前或在接收之后以及在将信息传递到控制电路104之前处理信息。在一些实施例中，通信电路108可直接耦合到存储器106(例如，以存储加密数据、检索加密数据等)。在其它实施例中，通信电路108可包含一个或多个收发器、发射器、接收器等。例如，通信电路108可包含光收发器、近场通信(NFC)收发器等。在一些实施例中，通信电路108可实施为SoC。
控制电路104还可耦合到网络适配器110、接收器和/或发射器。在一些实施例中，网络适配器110可被配置成与图像传感器33通信。在一些实施例中，网络适配器110可以是或包含蜂窝式收发器。在此配置中，显示系统10可使用网络适配器110和/或额外收发器(例如，蜂窝式收发器)来接入因特网、其它网络和/或网络硬件。在一些实施例中，显示系统10可通过与显示系统10通信的例如移动装置的中间装置来接入因特网、其它网络和/或网络硬件。
在示例性实施例中，网络适配器110可被配置成将数据和/或控制信号发送到移动装置/从移动装置接收数据和/或控制信号。网络适配器110可通过各种无线通信协议进行通信。例如，通信协议可包含但不限于BluetoothTM(例如，低功耗蓝牙(BLE)、WiFi(IEEE802.11)、ZigBee、蜂窝等)、有线接口和/或协议(例如，以太网、通用串行总线(USB)、火线等)，或其它通信连接(例如，红外、光学、超声波等)。
在一些实施例中，显示系统10可以用跟踪传感器112跟踪乘员16或观看者的位置(例如，乘员16的眼睛的位置)。跟踪传感器112可实施为超声波传感器、红外传感器、相机传感器/成像器、热检测器等。一般来说，跟踪传感器112可识别乘员16的位置，以生成来自图像传感器33的图像数据(例如，经扩增图像数据)的视图。经扩增图像数据可对应于就像成焦点对准的那样呈现给乘员16的视图，即使乘员16通过校正透镜18观看或乘员16在没有校正远视的情况下观看也是如此。经扩增图像数据可分开传送到右眼18a和左眼18b，以适应每一只眼睛的校正差异。
在一些实施例中，显示系统10可包括位置传感器114，所述位置传感器114被配置成识别显示设备24相对于车辆12的前向方向的位置或定向。位置传感器114可对应于电气或机电传感器(例如，编码器、电位计、接近传感器、指南针、陀螺仪等)，并且可被配置成识别显示设备24或显示屏14相对于车辆12的前向方向的角度。通过这种方式，图像处理器115可用于处理图像数据，以基于显示屏14的角度选择多个场景来生成图像数据。
控制电路104可通过车辆12的通信总线118与车辆控制模块116通信。通信总线118可被配置成将识别车辆12的各个状态的信号递送到控制电路104。例如，通信总线118可被配置成传送车辆的操作条件(例如，点火处于活动状态、档位选择、照明启动或设置等)、环境光水平、座位占用情况、门微开信号、驾驶员/乘员身份或可通过通信总线118传送的任何其它信息或控制信号。以此方式，控制电路104可与车辆控制模块116通信以识别车辆12的各种条件和/或设置。
在一些实施例中，显示系统10可并入于类似于以下参考文献中所公开的那些的显示器中。可结合本公开利用的显示组合件的实例可包含标题为“后视显示镜(Rearviewdisplay mirror)”的第6,572,233号美国专利、标题为“包含用于液晶显示器(LCD)的集成式背光的车辆后视镜组合件(Vehicular rearview mirror assembly includingintegrated backlighting for a liquid crystal display(LCD))”的第8,237,909号美国专利、标题为“多显示镜系统和用于扩大车辆周围视角的方法(Multi-display mirrorsystem and method for expanded view around a vehicle)”的第8,411,245号美国专利以及标题为“包含高强度显示器的车辆后视镜组合件(Vehicle rearview mirrorassembly including a high intensity display)”的第8,339,526号美国专利，所述专利均以全文引用的方式并入本文中。
以下参考文献可包含用于提供后向面向的全景视图的成像器系统的各个实施方案，并且以全文引用的方式并入本文中：John B.Ostreko等人在2009年2月6日提交的标题为“包含用于液晶显示器(LCD)的集成式背光的车辆后视镜组合件(Vehicle RearviewMirror Assembly Including Integrated Backlighting for a Liquid CrystalDisplay(LCD))”的第8,237,909 B2号美国专利；和Ethan J.Lee等人在2009年9月30日提交的标题为“多显示镜系统和用于扩大车辆周围视角的方法(MULTI-DISPLAY MIRROR SYSTEMAND METHOD FOR EXPANDED VIEW AROUND A VEHICLE)”的第2010/0201816 A1号美国公开案。尽管本文中所公开的各个实施方案中的显示系统10被示出为并入在后视显示系统中，但显示器可类似地并入在车辆前向中心控制台、抬头显示器或可对车辆12的操作员可见的任何其它位置中。
所属领域的技术人员应理解，所描述的发明和其它部件的构造不限于任何特定材料。除非在本文中另外描述，否则本文中所公开的本发明的其它示例性实施例可由广泛多种材料形成。
出于本公开的目的，用语“联接”(以其所有形式)通常意味着两个部件(电气的或机械的)与彼此直接或间接接合。此类接合在本质上可以是静止的或在本质上可以是可移动的。此类接合可使用两个部件(电气的或机械的)和任何额外的中间构件来实现，所述中间构件彼此一体地形成为单个整体或与所述两个部件一体地形成为单个整体。除非另外说明，否则此类接合在本质上可以是永久性的，或在本质上可以是可移除或可释放的。
另外值得注意的是，如在示例性实施例中所示的本发明的元件的构造和布置仅仅是说明性的。尽管在本公开中仅详细地描述了本创新的少数实施例，但审阅本公开的所属领域的技术人员应容易了解，在没有实质脱离所陈述主题的新颖教示和优点的情况下，许多修改是可能的(例如，各种元件的大小、尺寸、结构、形状和比例、参数值、安装布置、材料的使用、色彩、定向等的变化)。例如，示出为一体地形成的元件可由多个部分构造而成，或示出为多个部分的元件可一体地形成，可颠倒或以其它方式改变接口的操作，可改变结构的长度或宽度和/或系统的构件或连接器或其它元件，可改变设置在元件之间的调节位置的性质或数目。应注意，系统的元件和/或组合件可由具有足够强度或耐久性的广泛多种材料中的任一种构造而成，且可呈广泛多种色彩、纹理和组合中的任一种。因此，所有此类修改希望包含在本创新的范围内。可在不脱离本创新的精神的情况下在所要和其它示例性实施例的设计、操作条件和布置方面进行其它替代、修改、改变和省略。
应理解，任何所描述的过程或所描述过程内的步骤可与所公开的其它过程或步骤组合以形成在本发明的范围内的结构。本文中所公开的示例性结构和过程用于说明性目的，而不应该被理解为具有限制性。
还应理解，在不脱离本发明的概念的情况下，可对上述结构和方法做出变化和修改，且另外应理解，此类概念意在被所附权利要求涵盖，除非这些权利要求的措辞明确说明并非如此。

Claims (20)

1.一种车辆显示装置：
至少一个图像传感器，其被配置成捕获图像数据；
跟踪传感器，其被配置成识别乘员的位置；
图像处理器，其与所述图像传感器和所述跟踪传感器通信，所述图像处理器被配置成从所述图像数据生成经扩增图像数据，其中所述经扩增图像数据被配置成抵消所述车辆的乘员的远视；以及
显示设备，其与所述图像处理器通信，所述显示设备包括光学阵列，所述光学阵列被配置成基于所述乘员的所述位置将所述经扩增图像数据分别传送到所述乘员的右眼和左眼中的每一个。
2.根据权利要求1所述的显示系统，其中所述经扩增图像数据被配置成抵消所述乘员佩戴的至少一个校正透镜的视觉校正。
3.根据权利要求2所述的显示系统，其中所述视觉校正包括对应于所述校正透镜的特定验光视力。
4.根据权利要求2所述的显示系统，其中所述至少一个校正透镜包括第一校正透镜和第二校正透镜，并且其中所述经扩增图像数据包括被配置成校正所述第一透镜的第一验光视力的右侧图像数据和被配置成校正所述第二透镜的第二验光视力的左侧图像数据。
5.根据权利要求4所述的显示系统，其中所述显示设备包括像素阵列和双凸透镜。
6.根据权利要求5所述的显示系统，其中所述图像处理器通过将所述像素阵列的像素的光场射线与所述乘员的视网膜位置配对来操控所述图像数据。
7.根据权利要求5所述的显示系统，其中通过选择性地启动所述像素阵列中通过所述双凸透镜分别与所述乘员的所述右眼和所述左眼对准的像素，向所述乘员传送所述右侧图像数据和所述左侧图像数据。
8.根据权利要求7所述的显示系统，其中所述显示设备被配置成基于通过所述跟踪传感器识别的所述位置，将所述右侧图像数据引导到所述右眼并将所述左侧图像数据引导到所述左眼。
9.根据权利要求1到8中任一项所述的显示系统，其中所述显示设备对应于自动立体显示器。
10.根据权利要求1到9中任一项所述的显示系统，其中所述显示设备对应于后视显示设备。
11.一种用于车辆的显示系统，其包括：
至少一个图像传感器，其被配置成捕获图像数据；
图像处理器，其与所述图像传感器通信且被配置成从所述图像数据生成经扩增图像数据，其中所述经扩增图像数据被配置成抵消所述车辆的乘员的远视；
显示设备，其与所述图像处理器通信且被配置成将所述经扩增图像数据传送到所述乘员。
12.根据权利要求11所述的显示系统，其中所述经扩增图像数据通过所述图像处理器处理以提供放大感知。
13.根据权利要求11到12中任一项所述的显示系统，其中所述经扩增图像数据被配置成抵消所述车辆的操作员的远视。
14.根据权利要求13所述的显示系统，其中所述远视包括特定验光视力，并且其中所述经扩增图像数据由所述处理器操控以校正所述远视。
15.根据权利要求14所述的显示系统，其中所述图像数据通过所述操作员的所述远视转换，从而恢复所述经扩增图像数据以焦点对准地呈现给所述操作员。
16.根据权利要求11到15中任一项所述的显示系统，其中所述显示设备包括光学阵列，所述光学阵列被配置成将所述经扩增图像数据作为右侧图像数据传送到右眼并将所述经扩增图像数据作为左侧图像数据传送到左眼。
17.根据权利要求16所述的显示系统，其中所述光学阵列包括双凸透镜，所述双凸透镜被配置成在第一方向上投射所述右侧图像数据，并在第二方向上投射所述左侧图像数据。
18.一种车辆显示装置：
至少一个图像传感器，其被配置成捕获图像数据；
跟踪传感器，其被配置成识别乘员的位置；
图像处理器，其与所述图像传感器和所述跟踪传感器通信，所述图像处理器被配置成从所述图像数据生成经扩增图像数据，其中所述经扩增图像数据被配置成抵消所述车辆的乘员的远视；以及
显示设备，其与所述图像处理器通信，所述显示设备包括像素阵列和双凸透镜，所述像素阵列和双凸透镜被配置成分别将所述经扩增图像数据作为右侧图像数据传送到所述乘员的右眼，并将所述经扩增图像数据作为左侧图像数据传送到所述乘员的左眼，其中所述显示器被配置成基于所述乘员的所述位置，选择性地启动所述像素阵列中通过所述双凸透镜分别与所述乘员的所述右眼和所述左眼对准的像素。
19.根据权利要求18所述的显示系统，其中所述经扩增图像数据被配置成抵消所述乘员的校正透镜的视觉校正，包括特定验光视力。
20.根据权利要求18到19中任一项所述的显示系统，其中所述图像处理器通过将所述像素阵列的所述像素的光场射线与所述乘员的视网膜位置配对来操控所述图像数据，其中所述视网膜位置由所述跟踪传感器识别。
CN201780027688.4A 2016-04-14 2017-04-13 视觉校正车辆显示器 Active CN109070804B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201662322325P 2016-04-14 2016-04-14
US62/322,325 2016-04-14
PCT/US2017/027413 WO2017180869A1 (en) 2016-04-14 2017-04-13 Vision correcting vehicle display

Publications (2)

Publication Number Publication Date
CN109070804A true CN109070804A (zh) 2018-12-21
CN109070804B CN109070804B (zh) 2021-09-21

Family

ID=60039605

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201780027688.4A Active CN109070804B (zh) 2016-04-14 2017-04-13 视觉校正车辆显示器
CN201780027687.XA Active CN109070803B (zh) 2016-04-14 2017-04-13 提供深度信息的车辆显示系统

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201780027687.XA Active CN109070803B (zh) 2016-04-14 2017-04-13 提供深度信息的车辆显示系统

Country Status (4)

Country Link
US (2) US10321122B2 (zh)
EP (2) EP3442827A1 (zh)
CN (2) CN109070804B (zh)
WO (2) WO2017180885A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109633906A (zh) * 2019-01-02 2019-04-16 京东方科技集团股份有限公司 虚拟现实设备及其图像校正方法
CN111726602A (zh) * 2019-03-22 2020-09-29 舜宇光学（浙江）研究院有限公司 异视场角摄像-显像系统的匹配方法及其系统和计算系统

Families Citing this family (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2901477C (en) 2015-08-25 2023-07-18 Evolution Optiks Limited Vision correction system, method and graphical user interface for implementation on electronic devices having a graphical display
US10885676B2 (en) * 2016-12-27 2021-01-05 Samsung Electronics Co., Ltd. Method and apparatus for modifying display settings in virtual/augmented reality
DE102017202257B4 (de) * 2017-02-13 2021-08-05 Ford Global Technologies, Llc Anzeigevorrichtung für ein Kraftfahrzeug, Kraftfahrzeug und Verfahren zur individuellen Einstellung eines Displays
US11203295B2 (en) * 2017-04-14 2021-12-21 Panasonic Automotive Svstems Company of America, Division of Panasonic Corporation of North America Rearview head up display
US20180304814A1 (en) * 2017-04-24 2018-10-25 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Rear view mirror-like perspective change system and method
CN111225830B (zh) * 2017-09-27 2023-05-05 金泰克斯公司 带有调节校正的全显示镜
US10930709B2 (en) 2017-10-03 2021-02-23 Lockheed Martin Corporation Stacked transparent pixel structures for image sensors
US10510812B2 (en) 2017-11-09 2019-12-17 Lockheed Martin Corporation Display-integrated infrared emitter and sensor structures
US10951883B2 (en) 2018-02-07 2021-03-16 Lockheed Martin Corporation Distributed multi-screen array for high density display
US10979699B2 (en) 2018-02-07 2021-04-13 Lockheed Martin Corporation Plenoptic cellular imaging system
US10594951B2 (en) 2018-02-07 2020-03-17 Lockheed Martin Corporation Distributed multi-aperture camera array
US11616941B2 (en) 2018-02-07 2023-03-28 Lockheed Martin Corporation Direct camera-to-display system
US10690910B2 (en) 2018-02-07 2020-06-23 Lockheed Martin Corporation Plenoptic cellular vision correction
US10652529B2 (en) 2018-02-07 2020-05-12 Lockheed Martin Corporation In-layer Signal processing
US10838250B2 (en) 2018-02-07 2020-11-17 Lockheed Martin Corporation Display assemblies with electronically emulated transparency
US11353699B2 (en) 2018-03-09 2022-06-07 Evolution Optiks Limited Vision correction system and method, light field display and light field shaping layer and alignment therefor
US11693239B2 (en) 2018-03-09 2023-07-04 Evolution Optiks Limited Vision correction system and method, light field display and light field shaping layer and alignment therefor
CA3021636A1 (en) 2018-10-22 2020-04-22 Evolution Optiks Limited Light field display, adjusted pixel rendering method therefor, and vision correction system and method using same
TWI637289B (zh) * 2018-05-18 2018-10-01 緯創資通股份有限公司 基於眼球追蹤的顯示控制系統
KR102506873B1 (ko) * 2018-07-18 2023-03-08 현대자동차주식회사 차량 입체 클러스터, 그를 포함한 시스템 및 그 입체 화면 제공 방법
US10936064B2 (en) 2018-10-22 2021-03-02 Evolution Optiks Limited Light field display, adjusted pixel rendering method therefor, and adjusted vision perception system and method using same addressing astigmatism or similar conditions
US10860099B2 (en) 2018-10-22 2020-12-08 Evolution Optiks Limited Light field display, adjusted pixel rendering method therefor, and adjusted vision perception system and method using same addressing astigmatism or similar conditions
US10636116B1 (en) 2018-10-22 2020-04-28 Evolution Optiks Limited Light field display, adjusted pixel rendering method therefor, and vision correction system and method using same
US11966507B2 (en) 2018-10-22 2024-04-23 Evolution Optiks Limited Light field vision testing device, adjusted pixel rendering method therefor, and vision testing system and method using same
US11500460B2 (en) 2018-10-22 2022-11-15 Evolution Optiks Limited Light field device, optical aberration compensation or simulation rendering
US11327563B2 (en) 2018-10-22 2022-05-10 Evolution Optiks Limited Light field vision-based testing device, adjusted pixel rendering method therefor, and online vision-based testing management system and method using same
US10761604B2 (en) 2018-10-22 2020-09-01 Evolution Optiks Limited Light field vision testing device, adjusted pixel rendering method therefor, and vision testing system and method using same
US10696239B2 (en) 2018-11-28 2020-06-30 Toyota Motor Engineering & Manufacturing North America, Inc. Use of a lenticular lens array to apply a display inside of a vehicle
US10866413B2 (en) 2018-12-03 2020-12-15 Lockheed Martin Corporation Eccentric incident luminance pupil tracking
CN109784374A (zh) * 2018-12-21 2019-05-21 西北工业大学 基于自适应邻近点的多视角聚类方法
US11500461B2 (en) 2019-11-01 2022-11-15 Evolution Optiks Limited Light field vision-based testing device, system and method
US11789531B2 (en) 2019-01-28 2023-10-17 Evolution Optiks Limited Light field vision-based testing device, system and method
US10698201B1 (en) 2019-04-02 2020-06-30 Lockheed Martin Corporation Plenoptic cellular axis redirection
US11635617B2 (en) 2019-04-23 2023-04-25 Evolution Optiks Limited Digital display device comprising a complementary light field display or display portion, and vision correction system and method using same
US11902498B2 (en) 2019-08-26 2024-02-13 Evolution Optiks Limited Binocular light field display, adjusted pixel rendering method therefor, and vision correction system and method using same
US11487361B1 (en) 2019-11-01 2022-11-01 Evolution Optiks Limited Light field device and vision testing system using same
US11823598B2 (en) 2019-11-01 2023-11-21 Evolution Optiks Limited Light field device, variable perception pixel rendering method therefor, and variable perception system and method using same
US11094295B2 (en) 2019-12-10 2021-08-17 Volvo Car Corporation Automated adjustment of head up display image in a vehicle
DE102019220205A1 (de) * 2019-12-19 2021-06-24 Volkswagen Aktiengesellschaft Adaptive Anpassung einer optischen Ausgabe an Sehstärke
CN111277796A (zh) * 2020-01-21 2020-06-12 深圳市德赛微电子技术有限公司 图像处理方法、车载视觉辅助系统及存储设备
JP7346331B2 (ja) * 2020-03-03 2023-09-19 アルパイン株式会社 近接検出装置及び情報処理システム

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102246085A (zh) * 2008-12-11 2011-11-16 阿卡特朗讯美国公司 经改善三维显示技术的方法
US20130113786A1 (en) * 2011-11-09 2013-05-09 Qualcomm Incorporated Systems and methods for mask adjustment in 3d display technology
US20130342913A1 (en) * 2012-06-26 2013-12-26 GM Global Technology Operations LLC System for highlighting targets on head up displays with near focus plane
US20140320656A1 (en) * 2012-04-25 2014-10-30 Gentex Corporation Multi-focus optical system
US20140327771A1 (en) * 2013-05-01 2014-11-06 Nvidia Corporation System, method, and computer program product for displaying a scene as a light field
CN104597601A (zh) * 2013-10-31 2015-05-06 阿尔卑斯电气株式会社 车载用投影装置
CN104685867A (zh) * 2012-07-23 2015-06-03 瑞尔D股份有限公司 观察者跟踪自动立体显示器
WO2015168464A1 (en) * 2014-04-30 2015-11-05 Visteon Global Technologies, Inc. System and method for calibrating alignment of a three-dimensional display within a vehicle
WO2016006946A1 (ko) * 2014-07-09 2016-01-14 정지연 증강현실 컨텐츠의 생성 및 재생 시스템과 이를 이용한 방법

Family Cites Families (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6501536B1 (en) * 1995-01-18 2002-12-31 Ronald J. Fredricks Method and apparatus for determining the location of an occupant of a vehicle
US7762582B2 (en) * 1995-06-07 2010-07-27 Automotive Technologies International, Inc. Vehicle component control based on occupant morphology
GB2317291A (en) 1996-09-12 1998-03-18 Sharp Kk Observer tracking directional display
US6170956B1 (en) 1998-10-14 2001-01-09 Gentex Corporation Rearview mirror with display
US20070018970A1 (en) 2000-12-22 2007-01-25 Logitech Europe S.A. Optical slider for input devices
US8491118B2 (en) * 2001-11-07 2013-07-23 Michael Waters Lighted reading glasses
EP1639394A2 (en) * 2003-06-10 2006-03-29 Elop Electro-Optics Industries Ltd. Method and system for displaying an informative image against a background image
DE102005001973A1 (de) 2005-01-15 2006-07-20 Bayerische Motoren Werke Ag Vorrichtung zur Anzeige visueller Informationen
DE102005017313A1 (de) * 2005-04-14 2006-10-19 Volkswagen Ag Verfahren zur Darstellung von Informationen in einem Verkehrsmittel und Kombiinstrument für ein Kraftfahrzeug
KR100727947B1 (ko) 2005-07-11 2007-06-14 삼성전자주식회사 2차원/3차원 영상 호환용 입체영상 디스플레이 장치
US20070035694A1 (en) * 2005-08-15 2007-02-15 Keller Carolyn S Light filtering nonprescription temporary reading glasses
EP1991905B1 (en) * 2006-03-09 2011-05-11 Gentex Corporation Vehicle rearview assembly including a high intensity display
JP2007316036A (ja) * 2006-05-29 2007-12-06 Honda Motor Co Ltd 車両の乗員検知装置
US8009178B2 (en) * 2007-06-29 2011-08-30 Microsoft Corporation Augmenting images for panoramic display
US20090096937A1 (en) * 2007-08-16 2009-04-16 Bauer Frederick T Vehicle Rearview Assembly Including a Display for Displaying Video Captured by a Camera and User Instructions
DE102007044536A1 (de) * 2007-09-18 2009-03-19 Bayerische Motoren Werke Aktiengesellschaft Vorrichtung zum Überwachen der Umgebung eines Kraftfahrzeugs
US20090282429A1 (en) 2008-05-07 2009-11-12 Sony Ericsson Mobile Communications Ab Viewer tracking for displaying three dimensional views
US8947605B2 (en) 2008-11-07 2015-02-03 Dimension Technologies, Inc. Image data placement method for a time multiplexed autostereoscopic display
US8411245B2 (en) 2009-02-06 2013-04-02 Gentex Corporation Multi-display mirror system and method for expanded view around a vehicle
US8237909B2 (en) 2009-02-06 2012-08-07 Gentex Corporation Vehicular rearview mirror assembly including integrated backlighting for a liquid crystal display (LCD)
WO2011047214A2 (en) * 2009-10-14 2011-04-21 Optimum Technologies, Inc. Portable retinal camera and image acquisition method
KR20120088754A (ko) * 2009-11-21 2012-08-08 더글라스 피터 마기아리 헤드 마운티드 디스플레이 장치
CN102428707B (zh) * 2010-03-19 2015-03-11 松下电器产业株式会社 立体视用图像对位装置和立体视用图像对位方法
JP5891424B2 (ja) * 2010-09-17 2016-03-23 パナソニックＩｐマネジメント株式会社 立体映像作成装置および立体映像作成方法
US20120092329A1 (en) * 2010-10-13 2012-04-19 Qualcomm Incorporated Text-based 3d augmented reality
WO2012053030A1 (ja) * 2010-10-19 2012-04-26 三菱電機株式会社 ３次元立体表示装置
US9179140B2 (en) * 2010-10-19 2015-11-03 Mitsubishi Electric Corporation 3dimension stereoscopic display device
US9179134B2 (en) 2011-01-18 2015-11-03 Disney Enterprises, Inc. Multi-layer plenoptic displays that combine multiple emissive and light modulating planes
EP2724544B1 (en) * 2011-06-22 2017-02-22 Koninklijke Philips N.V. Autostereoscopic display apparatus having optical magnification
US9113043B1 (en) 2011-10-24 2015-08-18 Disney Enterprises, Inc. Multi-perspective stereoscopy from light fields
US20130127861A1 (en) * 2011-11-18 2013-05-23 Jacques Gollier Display apparatuses and methods for simulating an autostereoscopic display device
JP5510431B2 (ja) * 2011-11-21 2014-06-04 株式会社デンソー 車両用表示装置
US9321329B2 (en) * 2012-05-10 2016-04-26 Chris Beckman Glare elimination and image enhancement system improving lenses, windows and displays
US9550455B2 (en) * 2012-04-25 2017-01-24 Gentex Corporation Multi-focus optical system
JP6121131B2 (ja) * 2012-10-16 2017-04-26 アルパイン株式会社 多重表示装置
KR101981527B1 (ko) 2012-11-08 2019-05-23 엘지디스플레이 주식회사 무안경 입체 영상 표시장치와 그 구동 방법
BR112015011996B1 (pt) 2012-12-24 2022-11-22 Interdigital Madison Patent Holdings, Sas Aparelho eletrônico e mídia de armazenamento não transitório legível por computador para exibir rotativamente uma apresentação autoestereoscópica
US20140310277A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc Suspending user profile modification based on user context
WO2015017242A1 (en) * 2013-07-28 2015-02-05 Deluca Michael J Augmented reality based user interfacing
DE202013007159U1 (de) * 2013-08-12 2014-11-17 GM Global Technology Operations LLC (n. d. Gesetzen des Staates Delaware) Panoramaprojektionsvorrichtung für ein Kraftfahrzeug
US9986225B2 (en) * 2014-02-14 2018-05-29 Autodesk, Inc. Techniques for cut-away stereo content in a stereoscopic display
US10017114B2 (en) * 2014-02-19 2018-07-10 Magna Electronics Inc. Vehicle vision system with display
US9756319B2 (en) * 2014-02-27 2017-09-05 Harman International Industries, Incorporated Virtual see-through instrument cluster with live video
EP3114769B1 (en) * 2014-03-03 2022-06-29 LG Electronics Inc. Mobile device and method of controlling the same
DE102014205519A1 (de) 2014-03-25 2015-10-01 Robert Bosch Gmbh Verfahren und Vorrichtung zum Anpassen einer Anzeige eines autostereoskopischen Displays für ein Fahrzeug
US9428054B2 (en) * 2014-04-04 2016-08-30 Here Global B.V. Method and apparatus for identifying a driver based on sensor information
US10529059B2 (en) * 2014-08-11 2020-01-07 The Regents Of The University Of California Vision correcting display with aberration compensation using inverse blurring and a light field display
US10247941B2 (en) * 2015-01-19 2019-04-02 Magna Electronics Inc. Vehicle vision system with light field monitor
KR101663511B1 (ko) * 2015-04-30 2016-10-14 엘지전자 주식회사 차량 운전 보조 장치, 차량 운전 보조 장치의 제어 방법 및 차량

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102246085A (zh) * 2008-12-11 2011-11-16 阿卡特朗讯美国公司 经改善三维显示技术的方法
US20130113786A1 (en) * 2011-11-09 2013-05-09 Qualcomm Incorporated Systems and methods for mask adjustment in 3d display technology
US20140320656A1 (en) * 2012-04-25 2014-10-30 Gentex Corporation Multi-focus optical system
US20130342913A1 (en) * 2012-06-26 2013-12-26 GM Global Technology Operations LLC System for highlighting targets on head up displays with near focus plane
CN104685867A (zh) * 2012-07-23 2015-06-03 瑞尔D股份有限公司 观察者跟踪自动立体显示器
US20140327771A1 (en) * 2013-05-01 2014-11-06 Nvidia Corporation System, method, and computer program product for displaying a scene as a light field
CN104597601A (zh) * 2013-10-31 2015-05-06 阿尔卑斯电气株式会社 车载用投影装置
WO2015168464A1 (en) * 2014-04-30 2015-11-05 Visteon Global Technologies, Inc. System and method for calibrating alignment of a three-dimensional display within a vehicle
WO2016006946A1 (ko) * 2014-07-09 2016-01-14 정지연 증강현실 컨텐츠의 생성 및 재생 시스템과 이를 이용한 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109633906A (zh) * 2019-01-02 2019-04-16 京东方科技集团股份有限公司 虚拟现实设备及其图像校正方法
CN111726602A (zh) * 2019-03-22 2020-09-29 舜宇光学（浙江）研究院有限公司 异视场角摄像-显像系统的匹配方法及其系统和计算系统

Also Published As

Publication number Publication date
US10321122B2 (en) 2019-06-11
WO2017180869A1 (en) 2017-10-19
CN109070803B (zh) 2021-10-08
WO2017180885A1 (en) 2017-10-19
CN109070803A (zh) 2018-12-21
CN109070804B (zh) 2021-09-21
US20170302913A1 (en) 2017-10-19
EP3442826A1 (en) 2019-02-20
EP3442826A4 (en) 2019-02-20
EP3442827A4 (en) 2019-02-20
EP3442827A1 (en) 2019-02-20
US20170302914A1 (en) 2017-10-19
US10404973B2 (en) 2019-09-03

Similar Documents

Publication Publication Date Title
CN109070804A (zh) 视觉校正车辆显示器
US9720231B2 (en) Display, imaging system and controller for eyewear display device
US20080007511A1 (en) Image display device and image display method
US20210044789A1 (en) Electronic visual headset with vision correction
US9563058B2 (en) Display device, display method, and readable medium
WO2016098412A1 (ja) 頭部装着型表示装置、及び映像表示システム
US11092819B2 (en) Full display mirror with accommodation correction
JP2014010418A (ja) 立体表示装置及び立体表示方法
CN110114711B (zh) 包括投影系统的车辆显示器
WO2011102136A1 (ja) 立体画像表示システム及び立体視メガネ
US20140293024A1 (en) Foldable display and method and apparatus for controlling the same
JP2018203245A (ja) 表示システム、電子ミラーシステム及び移動体
KR100751290B1 (ko) 헤드 마운티드 디스플레이용 영상 시스템
KR20190069480A (ko) 융합기능 개선을 위한 시력훈련장치
US10684471B2 (en) Vehicle display comprising focal distance correction feature
CN110192142B (zh) 显示装置及其显示方法、显示系统
JP6915368B2 (ja) 多焦点視覚出力方法、多焦点視覚出力装置
EP2717582B1 (en) Camera module and apparatus for calibrating position thereof
US11758119B2 (en) Low cost HUD using stereo and head tracking
KR20240062865A (ko) 웨어러블 전자 장치 및 그 동작 방법
JP2023048008A (ja) ヘッドマウントディスプレイおよびクロスリアリティシステム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant