CN108427197B - 用于控制增强现实平视显示器设备的显示的方法和设备 - Google Patents

用于控制增强现实平视显示器设备的显示的方法和设备 Download PDF

Info

Publication number
CN108427197B
CN108427197B CN201810149290.4A CN201810149290A CN108427197B CN 108427197 B CN108427197 B CN 108427197B CN 201810149290 A CN201810149290 A CN 201810149290A CN 108427197 B CN108427197 B CN 108427197B
Authority
CN
China
Prior art keywords
virtual object
display
motor vehicle
augmented reality
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810149290.4A
Other languages
English (en)
Other versions
CN108427197A (zh
Inventor
R.J.维斯卡
V.扎多维奇
M.维特肯佩尔
J.蒂姆勒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Volkswagen AG
Original Assignee
Volkswagen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Volkswagen AG filed Critical Volkswagen AG
Publication of CN108427197A publication Critical patent/CN108427197A/zh
Application granted granted Critical
Publication of CN108427197B publication Critical patent/CN108427197B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/365Guidance using head up displays or projectors, e.g. virtual vehicles or arrows projected on the windscreen or on the road itself
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Arrangement of adaptations of instruments
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3632Guidance using simplified or iconic instructions, e.g. using arrows
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3658Lane guidance
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0141Head-up displays characterised by optical features characterised by the informative content of the display

Abstract

本发明涉及一种用于控制机动车的增强现实平视显示器设备的显示的方法、设备和一种具有用于控制用于机动车的增强现实平视显示器设备的显示的指令的计算机可读的存储介质,以及一种用于机动车的增强现实平视显示器设备。在第一步骤中,确定(20)用于在机动车之前展示虚拟对象的位置。然后,虚拟对象根据确定的位置通过成像单元在投影面上淡入(21)。为了提高观察者处的记录质量的主观感受,虚拟对象在此设计成关于记录错误是容错的。

Description

用于控制增强现实平视显示器设备的显示的方法和设备
技术领域
本发明涉及一种用于控制机动车的增强现实平视显示器设备的显示的方法、设备和一种具有用于控制机动车的增强现实平视显示器设备的显示的指令的计算机可读的存储介质。本发明还涉及一种用于机动车的增强现实平视显示器设备以及一种机动车,在所述机动车中使用根据本发明的方法、根据本发明的设备或根据本发明的增强现实平视显示器设备。
背景技术
随着虚拟&增强现实技术和应用的持续发展,所述虚拟&增强现实技术和应用也进入汽车领域中。增强现实(AR)、德语为“erweiterte Realität”为通过虚拟元素来丰富真实世界,所述虚拟元素在三维空间中以地点正确的方式记录,并且允许实时交互。因为在德语地区中的学术界中表达方式“增强显示”相对于表达方式“erweiterte Realität”已经贯彻,所述在下文中使用前者。
平视显示器(HUD)提供用于相应地用透视正确的虚拟扩展来丰富驾驶员驾驶位置的一种可能的实现方案。在此,安装在仪表板中的显示器的光束经由多个镜和透镜交叠并且经由投影面反射到驾驶员的眼睛中,使得所述驾驶员感受到在车辆之外的虚拟图像。作为投影面在汽车领域中通常使用前窗玻璃,所述前窗玻璃的弯曲的形状在显示时必须考虑。作为替代方案,一方面也使用由玻璃或塑料构成的附加玻璃,所述附加玻璃在驾驶员和前窗玻璃之间布置在仪表板上。通过显示和驾驶场景的叠加,为了读取信息需要少量的头部和眼睛运动。此外,眼睛的适应耗费降低,因为根据显示的虚拟距离,必须进行少量的视力调节或根本不必进行视力调节。然而,当前的HUD系列限制于直接在驾驶员的初级视野之下的显示并且包含冗余信息、诸如速度显示,所述冗余信息也可以在驾驶舱中的其他部位处重新发现。该显示技术虽然降低街道妨碍目光,但是此外具有下述缺点:必须对呈现的信息进行解释并且转换成真实情形,因为所述信息没有记录在真实场景中。这在复杂情形中能够是造成精神负担的认知过程。通过标记对象和将信息在其真实参考地点处淡入,即通过接触模拟的展示,环境相关的信息能够在驾驶员的视野中直接地展示。以增强现实的形式对环境的所述直接图形丰富能够明显地降低认知的转化要求。
增强现实提供用于通过接触模拟地标记车行道和对象来支持驾驶员的多个应用可能性。相对接近的示例大多涉及导航的领域。在传统的HUD中的经典的导航显示通常显示示意图,例如直角向右伸展的箭头作为在下一场合应向右转的标志,而AR显示提供明显更有效的可能性。因为显示可以作为“环境的部分”展示,所以通过用户的极其快的且直观的解释是可能的。
在虚拟现实的意义上在驾驶员的真实视野中记录虚拟信息对技术实现提出非常高的要求。为了能够位置准确地并且透视正确地在现实中展示虚拟内容,对车辆的周边和自身运动的非常详细的认知是必需的。
环境认知例如以数字地图的形式存在,并且能够附加地通过车辆或其他车辆的感测的环境检测来生成,其中对于其他车辆的感测的环境检测而言,需要车辆间通信。在这两种情况下,将精度的限制考虑在内。因此,地图材料现今主要是二维的并且不包含街道的高度轮廓或仅包含街道的非常不准确的高度轮廓。对环境的感测检测又承受传感器的限制以及周边和环境影响。因此,例如车道的宽度仅在存在车道标记的情况下才能够相当精确地确定。
车辆的定位例如也与GPS质量(GPS:Global Positioning System;全球定位系统)相关。差分GPS仅提供大约3m的精度。此外,对于透视正确的虚拟淡入而言,车辆在三维空间中的位置也是重要的,所述位置通过俯仰运动、摆动运动和偏航运动持久改变。通过转速和加速度传感器的检测可能是足够精确的。然而,所述认知仅在与关于街道的弯曲轮廓的详细认知组合的情况下是有帮助的,因为对于AR显示必须补偿与车道的相对车辆运动。
存在一系列沿着信息处理链的影响因素,所述影响因素引起虚拟淡入和真实对象之间的差异,进而降低真实场景的叠加或扩展的质量。特别是应该列举:在感测的环境检测的范围中的检测错误,在追踪时、例如在定位车辆或驾驶员观察时的错误,在渲染时、即在生成要淡入的虚拟对象时的错误,在投影时、例如通过HUD中的错误校准的部件造成的错误,或还有在由驾驶员观察时、例如通过驾驶员的虚拟感觉、注意力或预期造成的错误。
由于所描述的影响因素而出现并且反映在虚拟内容在真实场景中的错误定位的所谓的记录错误能够以六重自由度出现:
- 定位的自由度:X,Y,Z
- 定向的自由度:偏航、俯仰、滚动(偏航角、俯仰角、滚动角)。
所述错误类型能够静态地、在自身车辆或场景中的对象不进行任何运动的情况下出现。然而由于信息处理链中的潜伏期,当场景中的对象或自身车辆运动时,动态的出现也是可能的。潜伏期视作为记录错误的最强的影响因素。
在所述背景下,WO 2017/079162 A1描述一种用于在增强现实系统、虚拟现实系统或用于逼真地描绘广阔视野的拟真显示系统中展示虚拟对象的方法,其中能够修正虚拟对象的图像,以便能够实现降低关于真实对象或地点的记录错误。修正尤其基于光学失真进行。
文献R. L. Holloway的“Registration Error Analysis for AugmentedReality”,存在于:Teleoperators and Virtual Environments,Jg.6(1997),第413-432页,描述了一种用于手术规划的工具的端对端错误分析,该工具基于透视头戴式显示器。分析利用系统的数学模型并且能够实现,相对于系统的每个部分中的错误来分析系统记录错误的敏感性。
典型地尝试,客观可测量的静态的或动态的记录错误通过优化硬件或软件减少。这种优化通常与高的成本关联。
例如,构成权利要求1的前序部分的基础的DE 10 2014 013 408 A1描述一种用于展示车辆的周边信息的方法,其中真实的视觉周边信息与虚拟的图像数据叠加。借助于至少一个检测单元,检测沿行驶方向处于车辆之前的行车道表面并且识别行车道表面的高度变化。根据高度变化,评价车辆的未来的自身运动,并且根据未来的自身运动,将虚拟的图像数据位置正确地叠加真实的视觉周边信息的方式展示。
发明内容
本发明的目的是,说明用于控制机动车的虚拟现实平视显示器设备的显示的替代的解决方案,所述解决方案以成本有益的方式提高在观察者处的记录质量的主观感受。
所述目的通过具有权利要求1的特征的方法、通过具有权利要求6的特征的设备、通过根据权利要求11的具有指令的计算机可读的存储介质和通过根据权利要求12的虚拟现实平视显示器设备来实现。本发明的优选的设计方案是从属权利要求的主题。
根据本发明的第一方面,用于控制机动车的虚拟现实平视显示器设备的显示的方法包括如下步骤:
- 确定用于在机动车之前展示虚拟对象的位置;和
- 根据确定的位置淡入虚拟对象,其中虚拟对象如下设计成关于记录错误是容错的:记录错误不那么突出表现。
根据本发明的另一方面,用于控制机动车的虚拟现实平视显示器设备的显示的设备具有:
- 定位单元,用于确定用于在机动车之前展示虚拟对象的位置;和
- 渲染单元,用于根据确定的位置淡入虚拟对象,其中虚拟对象如下设计成关于记录错误是容错的:记录错误不那么突出表现。
根据本发明的另一方面,计算机可读的存储介质包含如下指令,所述指令在通过计算机执行时推动计算机执行如下步骤以控制车辆的虚拟现实平视显示器设备的显示:
- 确定用于在机动车之前展示虚拟对象的位置;和
- 根据确定的位置淡入虚拟对象,其中虚拟对象如下设计成关于记录错误是容错的:记录错误不那么突出显示。
术语计算机在此可以宽泛地理解。所述计算机尤其也包括控制仪器和其他基于处理器的数据处理设备。
与可客观测量的记录错误通过优化硬件或软件来降低的已知方案不同地,在根据本发明的解决方案中,针对观察者的感觉,并且提高记录质量的主观感受。对此,记录质量的主观印象通过匹配的、容错的显示设计影响。AR内容的容错的设计相对于记录错误是更容许的,并且在观察者的主观感觉中对记录错误进行补偿。
根据本发明的一个方面,虚拟对象标记导航路径,其中虚拟对象的宽度比由导航路径强调的车道的宽度更窄。通过减小虚拟元素的宽度,实现真实的车道几何形状的一定的抽象。这引起,虚拟对象的轮廓、例如导航路径的面状展示在记录错误更强的情况下才与车道标记相交。此外,虚拟对象以所述方式占据更小面积进而在记录错误的情况下也以小的面积超出要标记的车道。这引起,错误不那么突出表现,即不那么引人注目。
根据本发明的一个方面,虚拟对象标记导航路径,其中虚拟对象分成离散元素。通过虚拟对象分成多个离散元素或子区域,能够实现减小由虚拟对象占据的面积。例如,导航路径的面状展示能够分成一系列条带。此外,这种划分的虚拟对象由观察者感觉成连贯的对象,因为人的大脑能够无意识地补足连贯的图案。所述虚拟的感觉现象能够以感觉心理学的格式塔学派为基础。该展示中的优点在于,在虚拟对象的宽度保持不变的情况下更小的面积,所述面积在出现记录错误时位于相邻车道上。附加地,当然也还能够减小虚拟对象的宽度。
根据本发明的一个方面,离散元素促成(vermitteln)附加的信息。划分虚拟对象的方案能够通过如下方式扩展:虚拟对象借助于各个部分的符号配备有附加的信息内容。例如,离散元素能够箭头形地设计。附加的符号有助于对显示的直观理解。此外,这种类型的显示也相对于其他的记录错误、即显示的上下运动是容错的,所述上下运动通过车辆的俯仰运动造成。因为车行道上的人认识绘制的符号,所以他依靠经验得知,这些符号通常稳定地附着在车行道上。驾驶员主观更少地感觉虚拟符号的运动,因为所述运动与其所习惯的行为相矛盾。
根据本发明的一个方面,虚拟对象或离散元素具有扩散边缘。对改变虚拟对象的几何形状的可能性附加地或替代地,此外可能的是,虚拟对象或离散元素的轮廓更柔和地设计。轮廓的扩散展示在虚拟对象的相同大小的情况下虽然引起相同大的面积,所述面积伸出到相邻车道上。然而, 在此相交也不那么突出。
优选地,根据本发明的增强现实平视显示器设备、根据本发明的方法或根据本发明的设备在自主或手动控制的车辆、尤其机动车中使用。
附图说明
本发明的其他特征从下面的说明书和所附的权利要求中结合附图可见。
图1示意地示出机动车的平视显示器设备的一般构造;
图2示意地示出用于控制机动车的增强现实平视显示器设备的显示的方法;
图3示出用于控制机动车的增强现实平视显示器设备的显示的设备的第一实施方式;
图4示出用于控制机动车的增强现实平视显示器设备的显示的设备的第二实施方式;
图5示意地示出一种机动车,在所述机动车中实现根据本发明的解决方案;
图6说明具有和不具有记录错误的导航路径的平面图;
图7说明具有和不具有记录错误的具有减小的宽度的导航路径的平面图;
图8说明具有和不具有记录错误的由离散元素构成的导航路径的平面图;
图9说明具有和不具有记录错误的由离散元素构成的并且具有减小的宽度的导航路径的平面图,其中离散元素促成附加的信息;
图10说明具有和不具有记录错误的具有扩散边缘的导航路径的平面图;
图11说明具有和不具有记录错误的具有扩散边缘和减小的宽度的导航路径的平面图;并且
图12示意地示出驾驶员的视角中的图11中的平面图。
具体实施方式
为了更好地理解本发明的原理,下面根据附图详细阐述本发明的实施方式。易于理解的是,本发明不局限于所述实施方式,并且所述特征也能够组合或修改,而不脱离本发明的如在所附的权利要求中限定的保护范围。
图1示意地示出机动车1的增强现实平视显示器设备2,借助于所述增强现实平视显示器设备能够在机动车1的投影面5上显示内容,例如在前窗玻璃上或在由玻璃或塑料构成的附加玻璃上,所述附加玻璃在驾驶员和前窗玻璃之间布置在仪表板上。展示的内容通过成像单元3产生并且借助于光学模块4投影到投影面5上。典型地,投影在此在方向盘上方在前窗玻璃的区域中进行。成像单元3例如能够是LCD-TFT显示器。增强现实平视显示器设备2通常安装在机动车1的仪表板中。
图2示意地示出用于控制机动车的增强现实平视显示器设备的显示的方法。在第一步骤中,确定20用于在机动车之前展示虚拟对象的位置。随后将虚拟对象根据确定的位置通过成像元件在投影面上淡入21。为了提高观察者处的记录质量的主观感受,虚拟对象在此设计成关于记录错误是容错的。
图3示出用于控制机动车的增强现实平视显示器设备的显示的设备30的第一实施方式的简化的示意图。设备30能够是增强现实平视显示器设备的组成部分或者与增强现实平视显示器设备经由数据连接相连接。设备30具有用于接收数据的输入端31,所述数据允许确定用于在机动车之前展示虚拟对象的期望的位置。从接收到的数据中,定位单元32确定用于虚拟对象的期望的位置。渲染单元33随后借助于成像单元根据所确定的位置在投影面上淡入虚拟对象。由渲染单元33生成的数据对此经由设备30的输出端35提供给成像单元。定位单元32和渲染单元33能够由控制单元34控制。经由用户接口37,必要时能够改变定位单元32、渲染单元33或控制单元34的设定。在设备30中积聚的数据此外能够保存在设备30的存储器36中,例如用于随后的分析。定位单元32、渲染单元33以及控制单元34能够实现为专用的硬件、例如实现为集成电路。但是,所述定位单元32、渲染单元33以及控制单元34自然也能够部分地或完全地组合或作为软件实现,所述软件在适当的处理器上运行。输入端31和输出端35能够作为分离的接口或组合的双向接口实现。
图4示出用于控制机动车的增强现实平视显示器设备的显示的设备40的第二实施方式的简化的示意图。设备40在该情况下也能够是增强现实平视显示器设备的组成部分或者经由数据连接与增强现实平视显示器设备连接。设备40具有处理器42和存储器41。例如,设备40为计算机或控制仪器。在存储器41中保存有指令,所述指令在通过处理器42执行时推动设备40,执行根据所描述的方法之一的步骤。在存储器41中保存的指令因此体现可通过处理器42执行的程序,所述程序实现根据本发明的方法。设备具有用于接收信息的输入端43。由处理器42生成的数据经由输出端44提供。此外,所述数据可以在存储器41中保存。输入端43和输出端44能够综合成双向接口。
处理器42能够包括一个或多个处理器单元,例如微处理器、数字信号处理器或其组合。
所描述的实施方式的存储器36、41不仅能够具有易失性的而且能够具有非易失性的存储区域并且包括极不同的存储仪器和存储介质,例如硬盘、光学存储介质或半导体存储器。
图5示意地示出一种机动车1,在所述机动车中实现根据本发明的解决方案。机动车具有增强现实平视显示器设备2,借助所述增强现实平视显示器设备在机动车1的前窗玻璃上或在驾驶员和前窗玻璃之间布置的附加玻璃(未示出)上展示信息。增强现实平视显示器设备2由用于控制增强现实平视显示器设备2的显示的设备30控制。附加地,机动车1具有导航系统50和周边传感装置51,例如相机系统。根据导航系统50的导航数据或周边传感装置51的数据,确定虚拟对象,所述虚拟对象应由增强现实平视显示器设备2显示。设备30根据为展示虚拟对象确定的位置来控制增强现实平视显示器设备2。数据在机动车1之内的传输借助于网络53进行,在所述网络上能够连接有其他控制仪器52。
图6鸟瞰地说明呈导航路径的平面图形式的已知的接触模拟的导航显示。对导航路径的这类展示也作为地毯式展示已知,其中虚拟对象10作为导航指示标记在车辆1之前的在其整个宽度中的要驶过的车道11。图6a)示出理想状态下的情形,即没有记录错误。在图6b)中存在记录错误,在该示例中呈围绕车辆1的Z轴线的小的转动和相对于车辆1的侧向偏差的形式。由于记录错误,虚拟对象10与车行道上的车道标记13相交。因为展示的该形式强烈地面向车道的真实几何形状,所以记录错误显得非常突出和干扰。
下面,应该根据图7至12说明如何能够实现虚拟对象关于记录错误的容错的不同的可能性。
图7说明具有减小的宽度的导航路径的平面图。图7a)示出在理想状态下的情形,即没有记录错误。在图7b)中存在已经从图6b)中已知的记录错误。通过相对于图6中的地毯式展示减小虚拟对象10的宽度,实现真实的车道几何形状的一定的抽象。这引起,虚拟对象10的轮廓在记录错误更强的情况下才与车道标记13相交。虽然图6b)和图7b)中的记录错误是相同的,但是图7b)中的虚拟对象10仍完全地处于要标记的车道11之内。此外,在这种类型的展示中,虚拟对象10占据更小的面积,进而在记录错误的情况下也以更小的面积超出要标记的车道11。这引起,错误不那么突出表现。
图8说明由离散元素构成的导航路径的平面图。图8a)示出在理想状态下的情形,即没有记录错误。在图8b)中又存在从图6b)中已知的记录错误。在虚拟对象10的轮廓和宽度与图6中的地毯式展示相比保持不变的情况下,虚拟对象10的面积通过将虚拟对象10分成多个子区域而减小。对此,虚拟对象10由多个元素12组成。因为人类大脑能够无意识地补足连贯的图案,所以虚拟对象10在适当划分的情况下此外感觉成连贯的对象。所述虚拟的感觉现象能够以感觉心理学的格式塔学派为基础(良好继续法则,接近法则等)。在展示的该形式中的优点相对于图6中的地毯式展示在于由于记录错误位于相邻车道上的更小的面积。附加地,当然也还能够减小虚拟对象10或其元素12的宽度。
图9说明由离散元素构成并且具有减小的宽度的导航路径的平面图,其中离散元素促成附加的信息。图9a)示出理想状态下的情形,即没有记录错误。在图9b)中在此也存在从图6b)中已知的记录错误。将虚拟对象10分成离散元素12能够通过下述方式扩展:虚拟对象10不仅分解成子区域,而且借助于各个元素12中的一个给位于其中的符号配备附加的信息内容。在图9中,元素12的符号基于元素12的箭头状的设计。各个箭头状的元素12在此优选定向成,使得所述元素跟随要标记的车道11的走向,因此尤其也描绘车道11的弯曲的走向。展示的该形式同样引起与宽度的单纯减小相比更小的遮盖或者将虚拟对象10分解成离散部分。附加的符号此外有助于直观地理解该展示。附加地,所述显示也相对于通过车辆1的俯仰运动造成的记录错误是容错的,在所述记录错误的情况下出现显示的上下运动。因为人信任在车行道上绘制的箭头,所以他根据经验得知,所述箭头通常稳定地附着在车行道上。驾驶员主观更少地感觉虚拟箭头的运动,因为所述运动与其习惯的行为相矛盾。
图10说明具有扩散边缘的导航路径的平面图。图10a)示出在理想状态下的情形,即没有记录错误。在图10b)中再次存在从图6b)中已知的记录错误。替代改变虚拟对象10的几何形状同样可行的是,将虚拟对象10的轮廓更柔和地设计,即虚拟对象10配备有扩散的边缘区域。在图10中这以虚线表明。轮廓的扩散展示在虚拟对象10同样大小的情况下虽然引起与车道标记13相交并且伸出到相邻车道上的同样大的面积。然而在此相交也明显不那么突出。当然可能的是,仅将虚拟对象10的所选择的边缘扩散地构成。
扩散边缘的在图10中示出的应用能够有利地与虚拟对象10的减小的宽度组合。具有扩散边缘和减小的宽度的导航路径的这种平面图在图11中描绘。图11a)示出理想状态下的情形,即不具有记录错误。在图11b)中再次存在从图6b)中已知的记录错误。在该示例中,一方面宽度强烈地偏离实际的车道宽度,另一方面丝毫不存在清晰的轮廓,这又通过虚线表明。展示的该形式能够称作为管状展示。所述管状展示相对于在图10中示出的展示具有附加的优点,即仅现实的非常窄的区域由虚拟叠化部分遮盖,并且虚拟对象10在记录错误更强的情况下才与车道标记13相交。在规定虚拟对象10的宽度时,应该考虑一些边缘条件。原则上适用的是,虚拟对象10越窄,增强现实显示就越容错。此外适用的是,虚拟对象10越窄,真实环境的视线通过淡入的遮盖就越小。当然,在减小的宽度下可能忍受信息的可读取性和主观感觉的图形观感。在测试驾驶时,40cm的宽度证明为适合于管状展示。在所述测试驾驶时,此外规定,在使用管状展示时为了展示导航路径仅出现少量转弯错误。管状展示此外尤其在传感器质量受限或波动的情况下相对于地毯式展示为测试人员提供优势。
图12示意地示出驾驶员视角中的图11中的管状展示(没有记录错误)。在车辆前存在右转弯。其扩散边缘如前面那样通过虚线表明的虚拟对象10跟随车道11的走向,即所述虚拟对象具有向右的弯曲进而标记车辆的面临的行驶路径。
三个描述的因素、即车道的真实几何形状的抽象、虚拟对象的划分和轮廓的扩散展示也能够合理地组合。由此形成如下显示,所述显示具有附加的优点并且在导航显示的范围中在趋势上更容易由驾驶员接受。例如,图8和图9中的各个元素12就其而言全方位地或也仅在一些侧上具有扩散轮廓,例如仅在平行于车道标记13的边缘上。
附图标记列表:
1 机动车
2 增强现实平视显示器设备
3 成像单元
4 光学模块
6 投影面
10 虚拟对象
11 车道
12 虚拟对象的元素
13 车道标记
20 确定虚拟对象的位置
21 根据确定的位置淡入虚拟对象
30 设备
31 输入端
32 定位单元
33 渲染单元
34 控制单元
35 输出端
36 存储器
37 用户接口
40 设备
41 存储器
42 处理器
43 输入端
44 输出端
50 导航系统
51 周边传感装置
52 控制仪器
53 网络

Claims (7)

1.一种用于控制机动车(1)的增强现实平视显示器设备(2)的显示的方法,所述方法具有下述步骤:
- 确定(20)用于在所述机动车(1)之前展示虚拟对象(10)的位置;和
- 根据所确定的位置淡入(21)所述虚拟对象(10),
其特征在于,
所述虚拟对象(10)如下设计成关于记录错误是容错的:记录错误不那么突出表现,
其中所述虚拟对象(10)标记导航路径,并且所述虚拟对象(10)的宽度比由所述导航路径强调的车道(11)的宽度窄,
其中所述虚拟对象(10)标记导航路径,并且被分成离散元素(12),并且
其中所述虚拟对象(10)或所述离散元素(12)具有扩散边缘(13)。
2.根据权利要求1所述的方法,
其中所述离散元素(12)促成附加的信息。
3.一种用于控制机动车(1)的增强现实平视 显示器设备(2)的显示的设备(30),其中所述设备(30)具有:
- 用于确定用于在所述机动车(1)之前展示虚拟对象(10)的位置的定位单元(32);和
- 用于根据所确定的位置淡入(11)所述虚拟对象(10)的渲染单元(33);
其特征在于,
所述虚拟对象(10)如下设计成关于记录错误是容错的:记录错误不那么突出表现,
其中所述虚拟对象(10)标记导航路径,并且所述虚拟对象(10)的宽度比由所述导航路径强调的车道(11)的宽度窄,
其中所述虚拟对象(10)标记导航路径,并且被分成离散元素(12),并且
其中所述虚拟对象(10)或所述离散元素(12)具有扩散边缘(13)。
4.根据权利要求3所述的设备(30),
其中所述离散元素(12)促成附加的信息。
5.一种计算机可读的存储介质,所述存储介质具有以下指令,所述指令在通过计算机执行时推动计算机执行根据权利要求1或2所述的用于控制机动车(1)的增强现实平视显示器设备(2)的显示的方法的步骤。
6.一种用于机动车(1)的增强现实平视显示器设备(2),
其特征在于,
所述增强现实平视显示器设备(2)具有根据权利要求3或4所述的设备(30),或者被设立用于执行根据权利要求1或2所述的用于控制机动车( 1 )的 增强现实平视显示器设备(2)的显示的方法。
7.一种机动车(40),
其特征在于,
所述机动车具有根据权利要求6所述的增强现实平视显示器设备(2)或者根据权利要求3或4所述的设备(30),或者被设立用于执行根据权利要求1或2所述的用于控制机动车(1 )的 增强现实平视显示器设备(2)的显示的方法。
CN201810149290.4A 2017-02-13 2018-02-13 用于控制增强现实平视显示器设备的显示的方法和设备 Active CN108427197B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102017202225.6 2017-02-13
DE102017202225.6A DE102017202225A1 (de) 2017-02-13 2017-02-13 Verfahren, vorrichtung und computerlesbares speichermedium mit instruktionen zur steuerung einer anzeige einer augmented-reality-head-up-display-vorrichtung

Publications (2)

Publication Number Publication Date
CN108427197A CN108427197A (zh) 2018-08-21
CN108427197B true CN108427197B (zh) 2022-01-18

Family

ID=61189206

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810149290.4A Active CN108427197B (zh) 2017-02-13 2018-02-13 用于控制增强现实平视显示器设备的显示的方法和设备

Country Status (5)

Country Link
US (1) US11049320B2 (zh)
EP (1) EP3361355A1 (zh)
KR (2) KR102321852B1 (zh)
CN (1) CN108427197B (zh)
DE (1) DE102017202225A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10332292B1 (en) * 2017-01-17 2019-06-25 Zoox, Inc. Vision augmentation for supplementing a person's view
KR20210131129A (ko) * 2020-04-23 2021-11-02 현대자동차주식회사 이동 수단용 ui 생성 장치 및 ui 생성 방법

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08253059A (ja) 1995-03-17 1996-10-01 Honda Motor Co Ltd 車両用運転支援システム
US20030210228A1 (en) * 2000-02-25 2003-11-13 Ebersole John Franklin Augmented reality situational awareness system and method
JP3932127B2 (ja) 2004-01-28 2007-06-20 マツダ株式会社 車両用画像表示装置
ATE552478T1 (de) * 2004-06-03 2012-04-15 Making Virtual Solid L L C Navigationsanzeigeverfahren und vorrichtung für unterwegs unter verwendung eines head-up-displays
EP1712981A1 (en) * 2005-04-15 2006-10-18 Herman Bailey Interactive augmented reality system
JP5150106B2 (ja) * 2006-06-05 2013-02-20 本田技研工業株式会社 車両用視認補助装置
KR20120113579A (ko) 2011-04-05 2012-10-15 현대자동차주식회사 길안내 정보의 윈드쉴드 표시 장치 및 그 방법
CN102759360B (zh) 2011-04-28 2015-06-17 昆达电脑科技(昆山)有限公司 整合行车影像记录及导航信息的导航装置
KR101921969B1 (ko) * 2012-02-01 2018-11-28 한국전자통신연구원 차량용 증강현실 헤드업 디스플레이 장치 및 방법
KR101957943B1 (ko) * 2012-08-31 2019-07-04 삼성전자주식회사 정보 제공 방법 및 이를 위한 정보 제공 차량
EP2967297B1 (en) * 2013-03-15 2022-01-05 Synaptive Medical Inc. System for dynamic validation, correction of registration for surgical navigation
JP2015065614A (ja) 2013-09-26 2015-04-09 日産自動車株式会社 情報表示制御装置
KR101558353B1 (ko) * 2013-09-26 2015-10-07 현대자동차 주식회사 증강 현실을 이용한 차량용 헤드 업 디스플레이 장치
DE102013016244A1 (de) * 2013-10-01 2015-04-02 Daimler Ag Verfahren und Vorrichtung zur augmentierten Darstellung
KR20150055183A (ko) 2013-11-12 2015-05-21 현대오트론 주식회사 헤드업 디스플레이를 이용한 차선 표시 장치 및 방법
US9481287B2 (en) 2014-01-21 2016-11-01 Harman International Industries, Inc. Roadway projection system
JP6287351B2 (ja) 2014-03-04 2018-03-07 アイシン・エィ・ダブリュ株式会社 ヘッドアップディスプレイ装置
DE102014013408A1 (de) 2014-09-10 2015-04-02 Daimler Ag Verfahren zur Darstellung von Umgebungsinformationen eines Fahrzeugs
EP3300941B1 (en) 2014-12-10 2020-05-13 Ricoh Company, Ltd. Information provision device, and information provision method
CN107615755B (zh) 2015-05-19 2020-07-03 麦克赛尔株式会社 头戴式显示器、平视显示器和影像显示方法
JP2017013590A (ja) 2015-06-30 2017-01-19 日本精機株式会社 ヘッドアップディスプレイ装置
WO2017079162A1 (en) 2015-11-02 2017-05-11 Castar, Inc Method of immersive rendering for wide field of view
US20170169612A1 (en) * 2015-12-15 2017-06-15 N.S. International, LTD Augmented reality alignment system and method
US10248124B2 (en) * 2016-07-21 2019-04-02 Mobileye Vision Technologies, Inc. Localizing vehicle navigation using lane measurements
US10499997B2 (en) * 2017-01-03 2019-12-10 Mako Surgical Corp. Systems and methods for surgical navigation

Also Published As

Publication number Publication date
US20180232956A1 (en) 2018-08-16
DE102017202225A1 (de) 2018-08-16
KR102321852B1 (ko) 2021-11-05
KR20180093829A (ko) 2018-08-22
KR20200001584A (ko) 2020-01-06
EP3361355A1 (de) 2018-08-15
CN108427197A (zh) 2018-08-21
US11049320B2 (en) 2021-06-29

Similar Documents

Publication Publication Date Title
CN109484299B (zh) 控制增强现实显示装置的显示的方法、装置、存储介质
US7936489B2 (en) Holographic information display
US11250816B2 (en) Method, device and computer-readable storage medium with instructions for controlling a display of an augmented-reality head-up display device for a transportation vehicle
US20120224060A1 (en) Reducing Driver Distraction Using a Heads-Up Display
US20200406754A1 (en) Method, device and computer-readable storage medium with instructions for controlling a display of an augmented reality display device for a motor vehicle
EP3536533B1 (en) Vehicular projection display apparatus
CN111094898B (zh) 控制机动车辆增强现实抬头显示设备的显示的方法和设备
KR102593383B1 (ko) 운송 수단을 위한 증강 현실 헤드 업 디스플레이 장치의 디스플레이 제어
CN109788243B (zh) 识别和可视化地呈现显示增强图像内容时的系统不可靠性
CN108427197B (zh) 用于控制增强现实平视显示器设备的显示的方法和设备
CN114222679A (zh) 用于机动车的增强现实抬头显示器的显示的生成
CN111655528B (zh) 控制用于机动车的增强现实平视显示器设备的显示的方法、设备和具有指令的计算机可读的存储介质
JP7310560B2 (ja) 表示制御装置及び表示制御プログラム
JP6631572B2 (ja) 車両用表示制御装置及び車両用表示ユニット
JP2021135933A (ja) 表示方法、表示装置及び表示システム
CN113767026A (zh) 用于运行机动车的方法
CN114127614B (zh) 平视显示装置
CN116963926A (zh) 使用增强现实平视显示器的改善的可视化显示
CN114537277A (zh) 用于显示虚拟元素的方法
CN114241163A (zh) 用于呈现虚拟元素的方法
CN114236822A (zh) 用于呈现虚拟元素的方法
CN113924518A (zh) 控制机动车的增强现实平视显示器装置的显示内容
WO2021200913A1 (ja) 表示制御装置、画像表示装置、及び方法
JP7014206B2 (ja) 表示制御装置および表示制御プログラム
CN117115007A (zh) 抬头显示处理方法、设备、交通工具及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant