CN115220227A - 一种增强现实抬头显示方法、装置及终端设备 - Google Patents
一种增强现实抬头显示方法、装置及终端设备 Download PDFInfo
- Publication number
- CN115220227A CN115220227A CN202210404377.8A CN202210404377A CN115220227A CN 115220227 A CN115220227 A CN 115220227A CN 202210404377 A CN202210404377 A CN 202210404377A CN 115220227 A CN115220227 A CN 115220227A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- image
- target object
- information
- augmented reality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 89
- 238000000034 method Methods 0.000 title claims abstract description 71
- 230000016776 visual perception Effects 0.000 claims abstract description 37
- 238000012545 processing Methods 0.000 claims abstract description 8
- 238000005286 illumination Methods 0.000 claims description 22
- 238000004590 computer program Methods 0.000 claims description 21
- 238000009877 rendering Methods 0.000 claims description 15
- 241000251468 Actinopterygii Species 0.000 claims description 4
- 240000002836 Ipomoea tricolor Species 0.000 claims description 3
- 230000009182 swimming Effects 0.000 claims description 2
- 230000006870 function Effects 0.000 description 16
- 230000008569 process Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 230000001133 acceleration Effects 0.000 description 6
- 210000003128 head Anatomy 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000003825 pressing Methods 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000007792 addition Methods 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008685 targeting Effects 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/001—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles integrated in the windows, e.g. Fresnel lenses
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Mechanical Engineering (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Transportation (AREA)
- Multimedia (AREA)
- Traffic Control Systems (AREA)
Abstract
本申请适用于图像处理技术领域，提供了一种增强现实抬头显示方法、装置及终端设备，该方法包括：获取第一信息，第一信息包括第一车辆所在道路的视觉感知信息、第一车辆的行驶状态和第一车辆所在区域的地貌特征中的至少一种；基于获取到的第一信息，确定道路上需要增强显示的第二目标物，生成第二目标物的增强现实图像，最后将第二目标物的增强现实图像投射在前挡风玻璃上。相较于现有技术中仅显示车速、导航线等简单信息，本申请根据第一信息确定第二目标物，第二目标物随着第一信息的不同而变化，使增强现实抬头显示的内容丰富、可变，提高了车辆的智能化程度，增加了用户的趣味性体验。
Description
技术领域
本申请属于图像处理技术领域，尤其涉及一种增强现实抬头显示方法、装置及终端设备。
背景技术
抬头显示(Head Up Display，HUD)又被叫做平视显示系统，是把时速、导航等重要的行车信息，投影到驾驶员前面的挡风玻璃上，让驾驶员尽量做到不低头、不转头就能看到时速、导航等重要的驾驶信息。增强现实(Augmented Reality，AR)是一种将虚拟信息与真实世界巧妙融合的技术，将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后，应用到真实世界中，两种信息互为补充，从而实现对真实世界的“增强”。
随着汽车的发展，抬头显示和增强现实技术已经在汽车中得到应用。将抬头显示和增强现实技术相结合应用在汽车上，可以使驾驶员在不低头的情况下，看到虚拟图像与真实环境相融合的图像，为驾驶员开车提供便利。但是，目前汽车上仅能利用增强现实抬头显示技术显示导航路线、车速等，汽车的智能化程度低。
发明内容
本申请实施例提供了一种增强现实抬头显示方法、装置及终端设备，可以解决汽车智能化程度低的问题。
第一方面，本申请实施例提供了一种增强现实抬头显示方法，包括：
获取第一信息，所述第一信息包括第一车辆所在道路的视觉感知信息、所述第一车辆的行驶状态和所述第一车辆所在区域的地貌特征中的至少一种，所述视觉感知信息包括能见度和/或光照强度，所述行驶状态包括拥堵系数和/或所述第一车辆与第一目标物发生碰撞的碰撞系数，所述第一目标物为检测到的与所述第一车辆的距离小于或等于第一距离的第二车辆和/或第一行人；
基于所述第一信息，确定所述第一车辆所在道路上需要增强显示的第二目标物；
生成所述第二目标物的增强现实图像；
将所述第二目标物的增强现实图像投射在所述第一车辆的前挡风玻璃上。
第二方面，本申请实施例提供了一种增强现实抬头显示装置，包括：
信息获取模块，用于获取第一信息，所述第一信息包括第一车辆所在道路的视觉感知信息、所述第一车辆的行驶状态和所述第一车辆所在区域的地貌特征中的至少一种，所述视觉感知信息包括能见度和/或光照强度，所述行驶状态包括拥堵系数和/或所述第一车辆与第一目标物发生碰撞的碰撞系数，所述第一目标物为检测到的与所述第一车辆的距离小于或等于第一距离的第二车辆和/或第一行人；
目标确定模块，用于基于所述第一信息，确定所述第一车辆所在道路上需要增强显示的第二目标物；
图像生成模块，用于生成所述第二目标物的增强现实图像；
图像显示模块，用于将所述第二目标物的增强现实图像投射在所述第一车辆的前挡风玻璃上。
第三方面，本申请实施例提供了一种终端设备，包括：存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述第一方面中任一项所述的增强现实抬头显示方法。
第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述第一方面中任一项所述的增强现实抬头显示方法。
第五方面，本申请实施例提供了一种计算机程序产品，当计算机程序产品在终端设备上运行时，使得终端设备执行上述第一方面中任一项所述的增强现实抬头显示方法。
本申请第一方面实施例与现有技术相比存在的有益效果是：本申请先获取第一信息，第一信息包括第一车辆所在道路的视觉感知信息、第一车辆的行驶状态和第一车辆所在区域的地貌特征中的至少一种；基于获取到的第一信息，确定道路上需要增强显示的第二目标物，生成第二目标物的增强现实图像，最后将第二目标物的增强现实图像投射在前挡风玻璃上。相较于现有技术中仅显示车速、导航线等简单信息，本申请根据第一信息确定第二目标物，第二目标物随着第一信息的不同而变化，使增强现实抬头显示的内容丰富、可变，提高了车辆的智能化程度。
可以理解的是，上述第二方面至第五方面的有益效果可以参见上述第一方面中的相关描述，在此不再赘述。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本申请一实施例提供的增强现实抬头显示方法的应用场景示意图；
图2是本申请一实施例提供的增强现实抬头显示方法的流程示意图；
图3是本申请一实施例提供的增强现实抬头显示的应用示意图；
图4是本申请一实施例提供的基于能见度确定第二目标物的方法的流程示意图；
图5是本申请一实施例提供的增强现实抬头显示的效果示意图；
图6是本申请另一实施例提供的增强现实抬头显示的效果示意图；
图7是本申请一实施例提供的增强现实抬头显示装置的结构示意图；
图8是本申请一实施例提供的终端设备的结构示意图。
具体实施方式
应当理解，当在本申请说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
另外，在本申请说明书和所附权利要求书的描述中，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。
HUD是利用光学反射原理，在前挡风玻璃上显示车速、油量等常规信息，驾驶员不低头即可看到车速、油量等信息，使驾驶员在开车时精力更集中，提高了驾车的安全性。随着AR技术的发展，通过HUD界面以最直接、最便捷的显示模式将信息传达给驾驶员，使驾驶员的人眼、车外环境和AR图像达到三点一线，实现数字与现实的融合。
目前HUD显示的信息比较单一，内容比较简单，不能满足用户的娱乐需求。本申请提供一种增强现实抬头显示方法，可以在不同情况下显示不同的图像或信息，增加了娱乐性能，为用户带来更好的娱乐体验。
图1为本申请实施例提供的增强现实抬头显示方法的应用场景示意图，上述增强现实抬头显示方法可以用于合成增强现实图像并进行抬头显示。其中，信息采集设备10用于采集第一信息，并向HUD设备20发送第一信息。HUD设备20在接收到第一信息后，生成外部环境中的第二目标物的增强现实图像，并将第二目标物的增强现实图像投射在车辆的前挡风玻璃上，以使得用户在驾驶车辆时可以透过前挡风玻璃看到外部环境中第二目标物匹配的增强现实图像。
图2示出了本申请提供的增强现实抬头显示方法的示意性流程图，参照图2，对该方法的详述如下：
S101，获取第一信息，所述第一信息包括第一车辆所在道路的视觉感知信息、所述第一车辆的行驶状态和所述第一车辆所在区域的地貌特征中的至少一种。
在本实施例中，视觉感知信息包括能见度和/或光照强度，所述行驶状态包括拥堵系数和/或所述第一车辆与第一目标物发生碰撞的碰撞系数，所述第一目标物为检测到的与所述第一车辆的距离小于或等于第一距离的第二车辆和/或第一行人。第一车辆为自身车辆。
视觉感知信息为人眼所能感知的信息。其中，能见度可以通过能见度传感器进行检测。光照强度可以通过光照强度传感器进行检测。能见度和光照强度还可以根据天气预报确定。具体的，获取第一车辆的位置，第一车辆的位置可以采用全球定位系统(GlobalPositioning System，GPS)确定，根据第一车辆的位置，确定第一车辆所在区域的天气预报，根据天气预报确定能见度和光照强度。天气预报中可以包括能见度和光照强度。
拥堵系数可以通过第一车辆的车速、加速度、制动次数和预设距离的行驶时间中的一种或多种确定。具体的，若第一车辆的车速小于预设车速，则确定第一车辆处于拥堵路段，根据第一车辆的车速所在的区间，确定拥堵系数，不同的区间对应不同的拥堵系数。利用加速度确定拥堵系数的方法与利用车速确定拥堵系数的方法相同，在此不再赘述。检测第一车辆在一段时间或一段距离内的制动次数，若制动次数大于预设次数，则确定第一车辆处于拥堵路段。再根据制动次数所在的制动区间确定拥堵系数，不同的制动区间对应不同的拥堵系数。利用行驶时间确定拥堵系数的方法与利用制动次数确定拥堵系数的方法相似，在此不再赘述。
另外，还可以根据第一车辆的车速、加速度、制动次数和预设距离的行驶时间，以及各自对应的权重计算拥堵系数。具体的，计算第一车辆的车速与第一权重的乘积，得到第一值。计算加速度与第二权重的乘积，得到第二值。计算制动次数与第三权重的乘积，得到第三值。计算行驶时间与第四权重的乘积，得到第四值。计算第一值、第二值、第三值和第四值之和，得到拥堵系数。
利用第一车辆中安装的前视摄像头采集第一图像，计算第一图像中各个车辆和/或行人距离第一车辆的距离，将与第一车辆的距离小于或等于第一距离的车辆和/或行人记为第一目标物。另外，还可以通过雷达确定第一目标物。第一距离可以根据需要进行设置，例如，第一距离可以为10米、9米或8米等。
在第一目标物包括第二车辆时，获取第二车辆的行驶速度、转向角、转向灯状态，利用第二车辆的行驶速度、第二车辆的转向角、第二车辆的转向灯状态、第一车辆的行驶速度和第一车辆的路径规划确定第一车辆与第二车辆的碰撞系数。具体的，将第二车辆的行驶速度、第二车辆的转向角、第二车辆的转向灯状态、第一车辆的行驶速度和第一车辆的路径规划输入至碰撞系数计算模型中，得到第一车辆与第二车辆的碰撞系数。可选的，还可以获取第二车辆的车牌信息，从云端存储的数据中查找第二车辆的历史驾驶行为，确定第一车辆与第二车辆的碰撞系数。历史驾驶行为可以包括加塞次数、超车次数、撞车次数等。第一车辆与云端可以进行通信。
在第一目标物包括第一行人时，获取第一行人的行走速度和行走方向，根据第一行人的行走速度和行走方向，确定第一行人与第一车辆的碰撞系数。可选的，对第一行人进行面部识别，从云端存储的数据中查找第一行人的历史行人信息。历史行人信息包括闯红灯数、出事故次数等。根据历史行人信息确定第一行人与第一车辆的碰撞系数。
在本实施例中，地貌特征可以包括荒漠、山地、森林、平原、丘陵、草原等。地貌特征可以根据第一车辆所在位置查找云端存储的数据确定，或者从预设地图中确定。地貌特征还可以通过第一车辆上安装的摄像头采集的图像确定。
在本实施例中，第一信息可以为实时获得的信息，还可以是按照预设时间间隔采集第一车辆的外部环境生成的信息。
S102，基于所述第一信息，确定所述第一车辆所在道路上需要增强显示的第二目标物。
在本实施例中，根据第一信息可以确定第二目标物，随着第一信息的不同，第二目标物可能不同。第二目标物可以包括车道线、围挡、路肩、楼宇、行人、车辆等。每种第一信息对应一组需要增强显示的物体，例如，地貌特征对应的需要增强显示的物体包括：山地、森林等，拥堵系数对应的需要增强显示的物体包括楼宇、行人、车辆等。在确定第一信息对应的增强显示的物体后，确定第一车辆所在道路上是否包括需要增强显示的物体。若第一车辆所在道路上包括需要增强显示的物体，则第一车辆所在道路上包括的需要增强显示的物体为第二目标物。
具体的，确定第一车辆所在道路上是否包括需要增强显示的物体的方法包括：
获取第二信息，所述第二信息包括所述第一车辆上安装的前视摄像头采集的第一图像、安装在所述第一车辆上的雷达采集的信息和预设地图中的至少一种；基于所述第二信息，确定所述道路上是否存在需要增强显示的物体。
雷达可以检测第一车辆所在道路上的行人、车辆、指示灯、建筑等信息。预设地图中可以包括车道线、车道走向、建筑位置等。
若使用第一图像、预设地图和雷达采集的信息共同确定道路上是否存在需要增强显示的物体，可以使确定的道路上包括的需要增强显示的物体更准确。
根据不同的视觉感知信息，使用的第二信息可以不同。具体的，若在视觉感知信息满足预设要求时，根据第一图像确定第一车辆所在道路上是否存在需要增强显示的物体。视觉感知信息满足预设要求包括：能见度大于第一阈值和/或光照强度大于第二阈值。视觉感知信息不满足预设要求包括：能见度小于或等于第一阈值和/或光照强度小于或等于第二阈值。
若视觉感知信息不满足预设要求，根据安装在所述第一车辆上的雷达采集的信息和/或预设地图，确定第一车辆所在道路上是否存在需要增强显示的物体。
具体的，根据第一信息自动匹配显示模式，不同的第一信息匹配不同的显示模式，例如，视觉感知信息与视觉感知显示模式相匹配，地貌特征与地理环境显示模式相匹配，行驶状态与行驶状态显示模式相匹配。在确定显示模式后，展示显示模式。展示显示模式的作用是为了让用户确定是否使用该显示模式。在检测到第一指令后，获取显示模式包括的物体。第一指令表征用户确定使用该显示模式。第一指令可以为用户点击确定按键后生成的指令。
各个显示模式中包括需要增强显示的物体。在第一车辆所在道路上查找显示模式对应的物体，若第一车辆所在道路上存在显示模式包括的物体，则第一车辆所在道路上存在的显示模式中的物体为第二目标物。
作为举例，若视觉感知显示模式包括的需要增强显示的物体为车道线、路肩。第一车辆所在道路中包括车道线，不包括路肩，则第一车辆所在道路中的车道线为第二目标物。不同的显示模式具有不同的作用，例如，视觉感知显示模式的作用为重建道路显示信息，地理环境显示模式的作用为丰富道路显示信息，行驶状态显示模式的作用为优化道路显示信息。
在本实施例中，显示模式还可以包括用户定义的显示模式，例如，简约模式、音乐模式、导航模式和性能模式等。简约模式可以包括显示车速和耗油量等。音乐模式可以包括显示正在播放的歌曲、歌词，以及该歌曲对应的动画等。导航模式可以包括导航路线、距离目的地的剩余时间等。性能模式可以包括档位信息、加速度信息等。
S103，生成所述第二目标物的增强现实图像。
S104，将所述第二目标物的增强现实图像投射在第一车辆的前挡风玻璃上。
在本实施例中，通过HUD设备将所述第二目标物的增强现实图像投射在所述车辆的前挡风玻璃上，以使得用户在驾驶车辆时，透过前挡风玻璃可以看到第二目标物的增强现实图像，且第二目标物的增强显示图像与第二目标物相匹配。在通过HUD设备投射增强显示图像时，需要根据HUD的分辨率、显示尺寸等信息进行投射。
作为举例，如图3所示，图中HUD设备20将第二目标物的增强现实图像投射在前挡风玻璃40上，用户透过前挡风玻璃40看到道路上的第二目标物60，以及第二目标物60的增强现实图像50。用户看到的第二目标物60和第二目标物的增强现实图像50相匹配。
本申请实施例中，先获取第一信息，第一信息包括第一车辆所在道路的视觉感知信息、第一车辆的行驶状态和第一车辆所在区域的地貌特征中的至少一种；基于获取到的第一信息，确定道路上需要增强显示的第二目标物，生成第二目标物的增强现实图像，最后将第二目标物的增强现实图像投射在前挡风玻璃上。相较于现有技术中仅显示车速、导航线等简单信息，本申请根据第一信息确定第二目标物，第二目标物随着第一信息的不同而变化，使增强现实抬头显示的内容丰富、可变，提高了车辆的智能化程度，同时增加了用户体验的趣味性。
如图4所示，在一种可能的实现方式中，所述第一信息包括所述视觉感知信息，所述视觉感知信息包括所述能见度，基于所述视觉感知信息，确定所述第一车辆所在道路上需要增强显示的第二目标物，包括：
S201，在所述能见度小于或等于第一阈值时，确定所述能见度所在的区间。
在本实施例中，第一阈值可以根据需要进行设置。预先设置不同的区间，每个区间对应一组需要增强显示的物体。例如，预先设置的区间包括第一区间[0，20]、第二区间(20，50]和第三区间(50，100]。
S202，确定所述能见度所在的区间对应的第一物体，所述道路上存在所述第一物体时，所述道路上存在的所述第一物体为所述第二目标物。
在本实施例中，在能见度在第三区间内时，第三区间对应的第一物体包括车道线、路肩和道路围栏中的一种或多种。
在能见度在第二区间内时，第二区间对应的第一物体包括车道线、路肩和道路围栏中的一种或多种，以及人行横道、绿化带、电线杆、道路指示灯中的一种或多种。
在能见度在第一区间内时，第一区间对应的第一物体包括车道线、路肩和道路围栏中的一种或多种，人行横道、绿化带、电线杆、道路指示灯中的一种或多种，以及在第一车辆前方、与第一车辆的距离小于或等于第四距离的行人和/或车辆。
在本实施例中，在确定所述能见度所在的区间对应的第一物体之后，需要确定道路上是否存在第一物体。具体的，确定道路上是否存在第一物体方法请参照上述步骤S102中，确定第一车辆所在道路上是否包括需要增强显示的物体的方法，在此不再赘述。
在本实施例中，若能见度大于第一阈值，则显示基本信息的增强现实图像，基本信息可以包括车速、加速度、导航路线等。
本申请实施例中，通过能见度所在区间可以确定第二目标物，因此，随着能见度的改变，第二目标物会随之改变，能见度越小显示的内容越多，可以为用户提供更多的信息，为用户驾驶车辆提供便利，保证用户的行车安全。
在一种可能的实现方式中，若第二目标物包括第一车辆所在道路上的第一物体时，根据道路上该第一物体的几何图像(尺寸和/或走向)，重建该第一物体的图像。重建的第一物体的图像为第一物体的增强显示图像。重建该第一物体的图像为沿着第一物体的几何图像重新绘制第一物体的图像。重新绘制的第一物体的图像与第一物体的几何图像相同。根据预设地图和雷达采集的信息得到第一物体的几何图像。
在一种可能的实现方式中，在所述第一信息包括所述视觉感知信息、所述视觉感知信息包括所述光照强度、且所述光照强度小于或等于第二阈值时，所述第二目标物包括目标区域内的车道线，所述目标区域为在所述第一车辆的前方、所述第一车辆的前车灯的照明灯光未覆盖的区域。
在本实施例中，第二阈值可以根据需要进行设置。例如，光照强度小于或等于第二阈值的环境可以包括黑暗的隧道、阴雨天气、乡村道路等。
目标区域内的车道线可以为目标区域内第一车辆所在车道的车道线，还可以包括第一车辆所在车道的两侧车道的车道线。第一车辆所在车道的两侧车道为与第一车辆所在车道相邻的车道。
在光照强度小于或等于第二阈值时，对前车灯照不到的地方的道路进行重建，可以指引车辆安全行驶出黑暗区域，提高用户的行车安全性。具体的，基于预设地图对前车灯照不到的道路进行重建。预设地图中包括第一车辆所在道路的车道线、走向等信息。
在本实施例中，若光照强度大于第二阈值，则显示基本信息的增强现实图像。
在一种可能的实现方式中，在所述第一信息包括所述地貌特征、所述地貌特征为预设地貌、且所述第一车辆处于自动驾驶状态时，所述第二目标物包括第三目标物，所述第三目标物包括检测到的与所述第一车辆的距离小于或等于第二距离的山地、森林和沙漠中的至少一种。
第一车辆的驾驶状态可以包括自动驾驶状态和手动驾驶状态，自动驾驶状态为不需要人为操控车辆自己行驶的状态，手动驾驶状态为需要人为操控车辆使车辆行驶的状态。第一车辆的驾驶状态可以通过检测第一车辆中的自动驾驶功能的开启或关闭确定，若自动驾驶功能为开启状态，则确定第一车辆为自动驾驶状态。若自动驾驶功能为关闭状态，则确定第一车辆为手动驾驶状态。自动驾驶功能为开启状态可以为自动驾驶开启按钮按下的状态。通过检测自动驾驶开启按钮的状态确定自动驾驶功能是否开启。
在本实施例中，第三目标物的确定方法与第一目标物的确定方法相似，请参照第一目标物的确定方法，在此不再赘述。
本申请实施例中，在第一车辆处于自动驾驶状态时，为用户显示更丰富的内容，可以缓解用户的疲劳，改善单调的驾驶环境。
在一种可能的实现方式中，在所述第一信息包括所述地貌特征、所述地貌特征为预设地貌、第一车辆所在道路为高速道路、且所述第一车辆处于自动驾驶状态时，所述第二目标物包括第三目标物，所述第三目标物包括检测到的与所述第一车辆的距离小于或等于第二距离的山地、森林和沙漠中的至少一种。
在一种可能的实现方式中，在所述第一信息包括所述行驶状态、所述行驶状态包括所述拥堵系数、且所述拥堵系数大于或等于第三阈值时，所述第二目标物包括第四目标物，所述第四目标物为检测到的与所述第一车辆的距离小于或等于第三距离的第二行人、建筑和第三车辆中的至少一种。
在一种可能的实现方式中，在所述第一信息包括所述行驶状态、所述行驶状态包括所述碰撞系数、且所述碰撞系数大于或等于第四阈值时，所述第二目标物包括第一目标物中碰撞系数大于或等于第四阈值的第一目标物。
在本实施例中，第三阈值和第四阈值均可以根据需要进行设置。第四目标物的确定方法与第一目标物的确定方法相似，在此不再赘述。
作为举例，若第一目标物包括A、B和C，A对应的碰撞系数为a，B对应的碰撞系数包括b，C对应的碰撞系数为c。a和b大于第四阈值，c小于第四阈值，则第二目标物包括A和B。
在本实施例中，在碰撞系数大于或等于第四阈值时，将第一目标物中碰撞系数大于或等于第四阈值的第一目标物进行增强显示，有利于提醒用户注意避让，保持距离，进而保证用户驾车的安全。
在一种可能的实现方式中，步骤S103的实现过程可以包括：
S1031，根据所述第二信息，得到所述第二目标物的几何图像。
具体的，若第二信息包括第一图像，从第一图像中可以确定第二目标物的几何图像，例如，第二目标物为车道线时，从第一图像中可以得到车道线的走向、尺寸、位置等。
若第二信息包括雷达采集的信息和预设地图，根据雷达采集的信息和预设地图可以生成第二目标物的几何图像。
S1032，获得所述第二目标物匹配的渲染图像。
在本实施例中，根据第二目标物的确定方式，得到第二目标物的渲染图像的获得途径。若第二目标物是根据视觉感知信息确定的，第二目标物的渲染图像的获得途径为：根据第二目标物的几何图像，重建第二目标物的轮廓，重建的第二目标物的轮廓为第二目标物匹配的渲染图像。
作为举例，若第二目标物是根据视觉感知信息确定的车道线，按照车道线的几何图像(几何图像包括车道线的走向、位置等)重建车道线的轮廓。
若第二目标物是根据行驶状态和地貌特征确定的，第二目标物的渲染图像的获得途径可以为：从预存图像中获取与第二目标物匹配的渲染图像。
预存图像可以包括文字图像、动漫人物图像、动漫动物图像、山水图像、神话故事人物图像等。
S1033，将所述第二目标物的几何图像与所述第二目标物匹配的渲染图像进行融合，得到所述第二目标物的增强现实图像。
在一种可能的实现方式中，在所述第二目标物的几何图像和/或所述第二目标物匹配的渲染图像为彩色图像时，在步骤1033之前，上述方法还可以包括：
获取所述第一车辆上安装的HUD设备的显示特性，其中，所述显示特性包括单色显示或彩色显示。
步骤1033具体可以包括：
若所述HUD设备的显示特性为所述彩色显示，将所述第二目标物的几何图像与所述第二目标物匹配的渲染图像进行融合，得到所述第二目标物的增强现实图像。
若所述HUD设备的显示特性为所述单色显示，将所述第二目标物的几何图像与所述第二目标物匹配的渲染图像进行融合。对融合后的图像进行灰度化处理，得到所述第二目标的增强现实图像。
在一种可能的实现方式中，在所述第二目标物包括所述第三目标物、且所述第三目标物包括山地时，所述山地的渲染图像包括流水图像。
在一种可能的实现方式中，在所述第二目标物包括所述第三目标物、且所述第三目标物包括所述森林时，所述森林的渲染图像包括飞鸟图像。
在一种可能的实现方式中，在所述第二目标物包括所述第三目标物、且所述第三目标物包括所述沙漠时，所述沙漠的渲染图像包括绿洲图像。
在一种可能的实现方式中，在所述第二目标物包括所述第四目标物、且所述第四目标物包括所述第二行人时，所述第二行人的渲染图像包括动漫人物图像。
在一种可能的实现方式中，在所述第二目标物包括所述第四目标物、且所述第四目标物包括所述建筑时，所述建筑的渲染图像包括飞碟图像或游鱼图像。
在一种可能的实现方式中，在所述第二目标物包括所述第四目标物、且所述第四目标物包括所述第三车辆时，所述第三车辆的渲染图像包括卡通车图像。
在一种可能的实现方式中，在所述第二目标物包括所述第一目标物时，所述第一目标物的渲染图像包括警示图像。
警示图像可以包括动画图像或文字图像等。
作为举例，如图5中三角形标注的部分为警示图像，用于提醒用户注意警示标志下方的车辆。
如图6中标注的动漫人物1和动漫人物2为给行人添加了动漫人物图像。飞鱼图像3为在楼宇间添加了飞鱼图像，可以缓解用户的驾驶疲劳，使车辆行驶过程中更具有趣味性。
在一种可能的实现方式中，上述方法还可以包括：
获取与第一车辆的距离小于预设距离的第五车辆的行车状态，行车状态包括压线情况。若第五车辆存在压线情况，确定所述第五车辆的连续压线的时长。若第五车辆连续压线的时长大于预设时长，发送报警信息。
应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。
对应于上文实施例所述的增强现实抬头显示方法，图7示出了本申请实施例提供的增强现实抬头显示装置的结构框图，为了便于说明，仅示出了与本申请实施例相关的部分。
参照图7，该装置300可以包括：信息获取模块310、目标确定模块320、图像生成模块330和图像显示模块340。
其中，信息获取模块310，用于获取第一信息，所述第一信息包括第一车辆所在道路的视觉感知信息、所述第一车辆的行驶状态和所述第一车辆所在区域的地貌特征中的至少一种，所述视觉感知信息包括能见度和/或光照强度，所述行驶状态包括拥堵系数和/或所述第一车辆与第一目标物发生碰撞的碰撞系数，所述第一目标物为检测到的与所述第一车辆的距离小于或等于第一距离的第二车辆和/或第一行人；
目标确定模块320，用于基于所述第一信息，确定所述第一车辆所在道路上需要增强显示的第二目标物；
图像生成模块330，用于生成所述第二目标物的增强现实图像；
图像显示模块340，用于将所述第二目标物的增强现实图像投射在所述第一车辆的前挡风玻璃上。
在一种可能的实现方式中，所述第一信息包括所述视觉感知信息，所述视觉感知信息包括所述能见度，目标确定模块320具体可以用于：
在所述能见度小于或等于第一阈值时，确定所述能见度所在的区间；
确定所述能见度所在的区间对应的第一物体，所述道路上存在所述第一物体时，所述道路上存在的所述第一物体为所述第二目标物。
在一种可能的实现方式中，在所述第一信息包括所述视觉感知信息、所述视觉感知信息包括所述光照强度、且所述光照强度小于或等于第二阈值时，所述第二目标物包括目标区域内的车道线，所述目标区域为在所述第一车辆的前方、所述第一车辆的前车灯的照明灯光未覆盖的区域。
在一种可能的实现方式中，在所述第一信息包括所述地貌特征、所述地貌特征为预设地貌、且所述第一车辆处于自动驾驶状态时，所述第二目标物包括第三目标物，所述第三目标物包括检测到的与所述第一车辆的距离小于或等于第二距离的山地、森林和沙漠中的至少一种。
在一种可能的实现方式中，在所述第一信息包括所述行驶状态、所述行驶状态包括所述拥堵系数、且所述拥堵系数大于或等于第三阈值时，所述第二目标物包括第四目标物，所述第四目标物为检测到的与所述第一车辆的距离小于或等于第三距离的第二行人、建筑和第三车辆中的至少一种；
在所述第一信息包括所述行驶状态、所述行驶状态包括所述碰撞系数、且所述碰撞系数大于或等于第四阈值时，所述第二目标物包括所述第一目标物中碰撞系数大于或等于第四阈值的第一目标物。
在一种可能的实现方式中，目标确定模块320具体可以用于：
获取第二信息，所述第二信息包括所述第一车辆上安装的前视摄像头采集的第一图像、安装在所述第一车辆上的雷达采集的信息和预设地图中的至少一种；
基于所述第二信息，确定所述道路上是否存在所述第一物体。相应的，图像生成模块330具体可以用于：
根据所述第二信息，得到所述第二目标物的几何图像；
获得所述第二目标物匹配的渲染图像；
将所述第二目标物的几何图像与所述第二目标物匹配的渲染图像进行融合，得到所述第二目标物的增强现实图像。
在一种可能的实现方式中，在所述第二目标物的几何图像和/或所述第二目标物匹配的渲染图像为彩色图像时，图像生成模块330具体可以用于：
获取所述第一车辆上安装的HUD设备的显示特性，其中，所述显示特性包括单色显示或彩色显示；
若所述HUD设备的显示特性为所述彩色显示，将所述第二目标物的几何图像与所述第二目标物匹配的渲染图像进行融合，得到所述第二目标物的增强现实图像；
若所述HUD设备的显示特性为所述单色显示，将所述第二目标物的几何图像与所述第二目标物匹配的渲染图像进行融合；
对融合后的图像进行灰度化处理，得到所述第二目标的增强现实图像。
在一种可能的实现方式中，在所述第二目标物包括所述第三目标物、且所述第三目标物包括山地时，所述山地的渲染图像包括流水图像；
在所述第二目标物包括所述第三目标物、且所述第三目标物包括所述森林时，所述森林的渲染图像包括飞鸟图像；
在所述第二目标物包括所述第三目标物、且所述第三目标物包括所述沙漠时，所述沙漠的渲染图像包括绿洲图像；
在所述第二目标物包括所述第四目标物、且所述第四目标物包括所述第二行人时，所述第二行人的渲染图像包括动漫人物图像；
在所述第二目标物包括所述第四目标物、且所述第四目标物包括所述建筑时，所述建筑的渲染图像包括飞碟图像或游鱼图像；
在所述第二目标物包括所述第四目标物、且所述第四目标物包括所述第三车辆时，所述第三车辆的渲染图像包括卡通车图像；
在所述第二目标物包括所述第一目标物时，所述第一目标物的渲染图像包括警示图像。
需要说明的是，上述装置/单元之间的信息交互、执行过程等内容，由于与本申请方法实施例基于同一构思，其具体功能及带来的技术效果，具体可参见方法实施例部分，此处不再赘述。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
本申请实施例还提供了一种终端设备，参见图8，该终端设备400可以包括：至少一个处理器410、存储器420以及存储在所述存储器420中并可在所述至少一个处理器410上运行的计算机程序，所述处理器410执行所述计算机程序时实现上述任意各个方法实施例中的步骤，例如图2所示实施例中的步骤S101至步骤S104。或者，处理器410执行所述计算机程序时实现上述各装置实施例中各模块/单元的功能，例如图7所示模块310至模块340的功能。
示例性的，计算机程序可以被分割成一个或多个模块/单元，一个或者多个模块/单元被存储在存储器420中，并由处理器410执行，以完成本申请。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序段，该程序段用于描述计算机程序在终端设备400中的执行过程。
本领域技术人员可以理解，图8仅仅是终端设备的示例，并不构成对终端设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如输入输出设备、网络接入设备、总线等。
处理器410可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器420可以是终端设备的内部存储单元，也可以是终端设备的外部存储设备，例如插接式硬盘，智能存储卡(Smart Media Card，SMC)，安全数字(Secure Digital，SD)卡，闪存卡(Flash Card)等。所述存储器420用于存储所述计算机程序以及终端设备所需的其他程序和数据。所述存储器420还可以用于暂时地存储已经输出或者将要输出的数据。
总线可以是工业标准体系结构(Industry Standard Architecture，ISA)总线、外部设备互连(Peripheral Component，PCI)总线或扩展工业标准体系结构(ExtendedIndustry Standard Architecture，EISA)总线等。总线可以分为地址总线、数据总线、控制总线等。为便于表示，本申请附图中的总线并不限定仅有一根总线或一种类型的总线。
本申请实施例提供的增强现实抬头显示方法可以应用于计算机、平板电脑、笔记本电脑、上网本、个人数字助理(personal digital assistant，PDA)等终端设备上，本申请实施例对终端设备的具体类型不作任何限制。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中，应该理解到，所揭露的终端设备、装置和方法，可以通过其它的方式实现。例如，以上所描述的终端设备实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被一个或多个处理器执行时，可实现上述各个方法实施例的步骤。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被一个或多个处理器执行时，可实现上述各个方法实施例的步骤。
同样，作为一种计算机程序产品，当计算机程序产品在终端设备上运行时，使得终端设备执行时实现可实现上述各个方法实施例中的步骤。
其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random AccessMemory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括是电载波信号和电信信号。
以上所述实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围，均应包含在本申请的保护范围之内。
Claims (10)
1.一种增强现实抬头显示方法，其特征在于，包括：
获取第一信息，所述第一信息包括第一车辆所在道路的视觉感知信息、所述第一车辆的行驶状态和所述第一车辆所在区域的地貌特征中的至少一种，所述视觉感知信息包括能见度和/或光照强度，所述行驶状态包括拥堵系数和/或所述第一车辆与第一目标物发生碰撞的碰撞系数，所述第一目标物为检测到的与所述第一车辆的距离小于或等于第一距离的第二车辆和/或第一行人；
基于所述第一信息，确定所述第一车辆所在道路上需要增强显示的第二目标物；
生成所述第二目标物的增强现实图像；
将所述第二目标物的增强现实图像投射在所述第一车辆的前挡风玻璃上。
2.如权利要求1所述的增强现实抬头显示方法，其特征在于，所述第一信息包括所述视觉感知信息，所述视觉感知信息包括所述能见度，基于所述视觉感知信息，确定所述第一车辆所在道路上需要增强显示的第二目标物，包括：
在所述能见度小于或等于第一阈值时，确定所述能见度所在的区间；
确定所述能见度所在的区间对应的第一物体，所述道路上存在所述第一物体时，所述道路上存在的所述第一物体为所述第二目标物。
3.如权利要求1所述的增强现实抬头显示方法，其特征在于，在所述第一信息包括所述视觉感知信息、所述视觉感知信息包括所述光照强度、且所述光照强度小于或等于第二阈值时，所述第二目标物包括目标区域内的车道线，所述目标区域为在所述第一车辆的前方、所述第一车辆的前车灯的照明灯光未覆盖的区域。
4.如权利要求1至3任一项所述的增强现实抬头显示方法，其特征在于，在所述第一信息包括所述地貌特征、所述地貌特征为预设地貌、且所述第一车辆处于自动驾驶状态时，所述第二目标物包括第三目标物，所述第三目标物包括检测到的与所述第一车辆的距离小于或等于第二距离的山地、森林和沙漠中的至少一种。
5.如权利要求4所述的增强现实抬头显示方法，其特征在于，在所述第一信息包括所述行驶状态、所述行驶状态包括所述拥堵系数、且所述拥堵系数大于或等于第三阈值时，所述第二目标物包括第四目标物，所述第四目标物为检测到的与所述第一车辆的距离小于或等于第三距离的第二行人、建筑和第三车辆中的至少一种；
在所述第一信息包括所述行驶状态、所述行驶状态包括所述碰撞系数、且所述碰撞系数大于或等于第四阈值时，所述第二目标物包括所述第一目标物中碰撞系数大于或等于第四阈值的第一目标物。
6.如权利要求2所述的增强现实抬头显示方法，其特征在于，在所述确定所述能见度所在的区间对应的第一物体之后，包括：
获取第二信息，所述第二信息包括所述第一车辆上安装的前视摄像头采集的第一图像、安装在所述第一车辆上的雷达采集的信息和预设地图中的至少一种；
基于所述第二信息，确定所述道路上是否存在所述第一物体；
相应的，所述生成所述第二目标物的增强现实图像，包括：
根据所述第二信息，得到所述第二目标物的几何图像；
获得所述第二目标物匹配的渲染图像；
将所述第二目标物的几何图像与所述第二目标物匹配的渲染图像进行融合，得到所述第二目标物的增强现实图像。
7.如权利要求6所述的增强现实抬头显示方法，其特征在于，在所述第二目标物的几何图像和/或所述第二目标物匹配的渲染图像为彩色图像时，在所述将所述第二目标物的几何图像与所述第二目标物匹配的渲染图像进行融合，得到所述第二目标物的增强现实图像之前，所述方法还包括：
获取所述第一车辆上安装的HUD设备的显示特性，其中，所述显示特性包括单色显示或彩色显示；
相应的，所述将所述第二目标物的几何图像与所述第二目标物匹配的渲染图像进行融合，得到所述第二目标物的增强现实图像，包括：
若所述HUD设备的显示特性为所述彩色显示，将所述第二目标物的几何图像与所述第二目标物匹配的渲染图像进行融合，得到所述第二目标物的增强现实图像；
若所述HUD设备的显示特性为所述单色显示，将所述第二目标物的几何图像与所述第二目标物匹配的渲染图像进行融合；
对融合后的图像进行灰度化处理，得到所述第二目标的增强现实图像。
8.如权利要求5所述的增强现实抬头显示方法，其特征在于，在所述第二目标物包括所述第三目标物、且所述第三目标物包括山地时，所述山地的渲染图像包括流水图像；
在所述第二目标物包括所述第三目标物、且所述第三目标物包括所述森林时，所述森林的渲染图像包括飞鸟图像；
在所述第二目标物包括所述第三目标物、且所述第三目标物包括所述沙漠时，所述沙漠的渲染图像包括绿洲图像；
在所述第二目标物包括所述第四目标物、且所述第四目标物包括所述第二行人时，所述第二行人的渲染图像包括动漫人物图像；
在所述第二目标物包括所述第四目标物、且所述第四目标物包括所述建筑时，所述建筑的渲染图像包括飞碟图像或游鱼图像；
在所述第二目标物包括所述第四目标物、且所述第四目标物包括所述第三车辆时，所述第三车辆的渲染图像包括卡通车图像；
在所述第二目标物包括所述第一目标物时，所述第一目标物的渲染图像包括警示图像。
9.一种增强现实抬头显示装置，其特征在于，包括：
信息获取模块，用于获取第一信息，所述第一信息包括第一车辆所在道路的视觉感知信息、所述第一车辆的行驶状态和所述第一车辆所在区域的地貌特征中的至少一种，所述视觉感知信息包括能见度和/或光照强度，所述行驶状态包括拥堵系数和/或所述第一车辆与第一目标物发生碰撞的碰撞系数，所述第一目标物为检测到的与所述第一车辆的距离小于或等于第一距离的第二车辆和/或第一行人；
目标确定模块，用于基于所述第一信息，确定所述第一车辆所在道路上需要增强显示的第二目标物；
图像生成模块，用于生成所述第二目标物的增强现实图像；
图像显示模块，用于将所述第二目标物的增强现实图像投射在所述第一车辆的前挡风玻璃上。
10.一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至8任一项所述的增强现实抬头显示方法。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210404377.8A CN115220227A (zh) | 2022-04-18 | 2022-04-18 | 一种增强现实抬头显示方法、装置及终端设备 |
| PCT/CN2023/086569 WO2023202384A1 (zh) | 2022-04-18 | 2023-04-06 | 一种增强现实抬头显示方法、装置、终端设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210404377.8A CN115220227A (zh) | 2022-04-18 | 2022-04-18 | 一种增强现实抬头显示方法、装置及终端设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115220227A true CN115220227A (zh) | 2022-10-21 |
Family
ID=83606920
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210404377.8A Pending CN115220227A (zh) | 2022-04-18 | 2022-04-18 | 一种增强现实抬头显示方法、装置及终端设备 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN115220227A (zh) |
| WO (1) | WO2023202384A1 (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115540898A (zh) * | 2022-12-02 | 2022-12-30 | 泽景(西安)汽车电子有限责任公司 | 前方车辆的标记方法、装置、抬头显示器和存储介质 |
| WO2023202384A1 (zh) * | 2022-04-18 | 2023-10-26 | 长城汽车股份有限公司 | 一种增强现实抬头显示方法、装置、终端设备及存储介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109668575A (zh) * | 2019-01-29 | 2019-04-23 | 苏州车萝卜汽车电子科技有限公司 | 用于增强现实抬头显示装置的导航信息处理方法及装置、设备、系统 |
| CN110775063A (zh) * | 2019-09-25 | 2020-02-11 | 华为技术有限公司 | 一种车载设备的信息显示方法、装置及车辆 |
| CN111886154A (zh) * | 2018-03-12 | 2020-11-03 | 三菱电机株式会社 | 驾驶辅助装置、驾驶辅助方法和驾驶辅助程序 |
| CN113109941A (zh) * | 2020-01-10 | 2021-07-13 | 未来（北京）黑科技有限公司 | 一种分层成像的抬头显示系统 |
| CN113183758A (zh) * | 2021-04-28 | 2021-07-30 | 昭通亮风台信息科技有限公司 | 一种基于增强现实的辅助驾驶方法及系统 |
| CN113474787A (zh) * | 2019-01-22 | 2021-10-01 | 阿达姆认知科技有限公司 | 驾驶员的认知状态的检测 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101916993B1 (ko) * | 2015-12-24 | 2018-11-08 | 엘지전자 주식회사 | 차량용 디스플레이 장치 및 그 제어방법 |
| CN107554422B (zh) * | 2016-07-01 | 2020-02-14 | 华为终端有限公司 | 汽车安全警示装置和汽车安全警示的方法 |
| CN108515909B (zh) * | 2018-04-04 | 2021-04-20 | 京东方科技集团股份有限公司 | 一种汽车抬头显示系统及其障碍物提示方法 |
| KR20210087271A (ko) * | 2020-01-02 | 2021-07-12 | 삼성전자주식회사 | 3ｄ 증강 현실 내비게이션 정보 표시 방법 및 장치 |
| CN113401054A (zh) * | 2021-07-22 | 2021-09-17 | 上汽通用五菱汽车股份有限公司 | 车辆的防碰撞方法、车辆和可读存储介质 |
| CN115220227A (zh) * | 2022-04-18 | 2022-10-21 | 长城汽车股份有限公司 | 一种增强现实抬头显示方法、装置及终端设备 |
-
2022
- 2022-04-18 CN CN202210404377.8A patent/CN115220227A/zh active Pending
-
2023
- 2023-04-06 WO PCT/CN2023/086569 patent/WO2023202384A1/zh unknown
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111886154A (zh) * | 2018-03-12 | 2020-11-03 | 三菱电机株式会社 | 驾驶辅助装置、驾驶辅助方法和驾驶辅助程序 |
| CN113474787A (zh) * | 2019-01-22 | 2021-10-01 | 阿达姆认知科技有限公司 | 驾驶员的认知状态的检测 |
| CN109668575A (zh) * | 2019-01-29 | 2019-04-23 | 苏州车萝卜汽车电子科技有限公司 | 用于增强现实抬头显示装置的导航信息处理方法及装置、设备、系统 |
| CN110775063A (zh) * | 2019-09-25 | 2020-02-11 | 华为技术有限公司 | 一种车载设备的信息显示方法、装置及车辆 |
| CN113109941A (zh) * | 2020-01-10 | 2021-07-13 | 未来（北京）黑科技有限公司 | 一种分层成像的抬头显示系统 |
| CN113183758A (zh) * | 2021-04-28 | 2021-07-30 | 昭通亮风台信息科技有限公司 | 一种基于增强现实的辅助驾驶方法及系统 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023202384A1 (zh) * | 2022-04-18 | 2023-10-26 | 长城汽车股份有限公司 | 一种增强现实抬头显示方法、装置、终端设备及存储介质 |
| CN115540898A (zh) * | 2022-12-02 | 2022-12-30 | 泽景(西安)汽车电子有限责任公司 | 前方车辆的标记方法、装置、抬头显示器和存储介质 |
| CN115540898B (zh) * | 2022-12-02 | 2023-04-28 | 泽景(西安)汽车电子有限责任公司 | 前方车辆的标记方法、装置、抬头显示器和存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2023202384A1 (zh) | 2023-10-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111566664B (zh) | 用于生成用于机器学习的合成图像数据的方法、设备和系统 | |
| US10453256B2 (en) | Lane boundary detection data generation in virtual environment | |
| US10809090B2 (en) | Electronic map display method and apparatus | |
| WO2023202384A1 (zh) | 一种增强现实抬头显示方法、装置、终端设备及存储介质 | |
| CN108931927B (zh) | 无人驾驶仿真场景的创建方法及装置 | |
| JP2021530820A (ja) | 車両を含む３次元拡張現実 | |
| US8775073B2 (en) | Data mining in a digital map database to identify insufficient merge lanes along roads and enabling precautionary actions in a vehicle | |
| US8009061B2 (en) | Data mining for traffic signals or signs along road curves and enabling precautionary actions in a vehicle | |
| EP2689213B1 (en) | Management of icons for digital maps | |
| US20170109458A1 (en) | Testbed for lane boundary detection in virtual driving environment | |
| US20090299624A1 (en) | Data mining in a digital map database to identify speed changes on upcoming curves along roads and enabling precautionary actions in a vehicle | |
| CN114385005B (zh) | 个性化虚拟试驾装置、方法和存储介质 | |
| US7286930B2 (en) | Ghost following | |
| CN110675476A (zh) | 一种直观传达自动驾驶场景定义的方法和装置 | |
| CN112005082A (zh) | 为导航和地理编码寻找局部突出的语义特征 | |
| KR20230009338A (ko) | 차량-인프라 협력 정보를 처리하는 방법, 장치 및 시스템 | |
| Galazka et al. | CiThruS2: Open-source photorealistic 3D framework for driving and traffic simulation in real time | |
| CN113715817B (zh) | 车辆控制方法、装置、计算机设备及存储介质 | |
| JP7333445B2 (ja) | 画像生成装置 | |
| CN118334934A (zh) | 一种模拟驾驶方法、装置、电子设备及存储介质 | |
| Silvéria | Virtual windshields: merging reality and digital content to improve the driving experience | |
| TWI731925B (zh) | 電子地圖顯示方法、電子地圖顯示設備及用以顯示電子地圖的設備 | |
| CN117037523A (zh) | 导航方法、装置、系统及存储介质 | |
| Li | Safe training of traffic assistants for detection of dangerous accidents | |
| JP2022175071A (ja) | 検証装置、方法及びプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |