CN114842172A - 显示控制方法、装置、介质、抬头显示系统和车辆 - Google Patents

显示控制方法、装置、介质、抬头显示系统和车辆 Download PDF

Info

Publication number
CN114842172A
CN114842172A CN202210347592.9A CN202210347592A CN114842172A CN 114842172 A CN114842172 A CN 114842172A CN 202210347592 A CN202210347592 A CN 202210347592A CN 114842172 A CN114842172 A CN 114842172A
Authority
CN
China
Prior art keywords
building
information
display
vehicle
virtual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210347592.9A
Other languages
English (en)
Inventor
宋嘉玮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hozon New Energy Automobile Co Ltd
Original Assignee
Hozon New Energy Automobile Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hozon New Energy Automobile Co Ltd filed Critical Hozon New Energy Automobile Co Ltd
Priority to CN202210347592.9A priority Critical patent/CN114842172A/zh
Publication of CN114842172A publication Critical patent/CN114842172A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Navigation (AREA)

Abstract

本申请公开了一种显示控制方法、装置、介质、抬头显示系统和车辆。显示控制方法用于控制设置在车辆的抬头显示系统。显示控制方法包括:根据高精度地图数据和当前位置信息获取视野地图,视野地图包括建筑物信息。获取用户人眼位置信息。根据建筑物信息和人眼位置信息确定建筑物显示信息。根据建筑物显示信息生成虚拟视野地图,虚拟视野地图中覆盖有建筑物虚拟皮肤。控制抬头显示系统显示虚拟视野地图以使建筑物虚拟皮肤覆盖用户视野中对应的建筑物。如此,通过抬头显示系统显示虚拟视野地图,利用虚拟视野地图中的建筑物虚拟皮肤覆盖视野中对应的建筑物,让司乘人员看到想看的以及现实中没有的虚拟街景,如此可以增加司乘乐趣,提升司乘体验。

Description

显示控制方法、装置、介质、抬头显示系统和车辆
技术领域
本申请涉及车辆控制技术领域,特别涉及一种显示控制方法、装置、介质、抬头显示系统和车辆。
背景技术
车辆行驶在老城区会因建筑物破旧、杂乱,影响司乘人员看到的景观,司乘体验差。
发明内容
本申请的实施方式提供一种显示控制方法、装置、介质、抬头显示系统和车辆。
本申请的实施方式的显示控制方法用于控制设置在车辆的抬头显示系统。所述显示控制方法包括:根据高精度地图数据和当前位置信息获取视野地图,所述视野地图包括建筑物信息。获取用户的人眼位置信息。根据所述建筑物信息和所述人眼位置信息确定建筑物显示信息。根据所述建筑物显示信息生成虚拟视野地图,所述虚拟视野地图中覆盖有建筑物虚拟皮肤。控制所述抬头显示系统显示所述虚拟视野地图以使所述建筑物虚拟皮肤覆盖用户视野中对应的建筑物。
在某些实施方式中,所述抬头显示系统包括固定在所述车辆上的成像模组,所述成像模组用于拍摄用户的人脸图像,所述获取用户的人眼位置信息的步骤包括:识别所述人脸图像的人眼部分;根据所述成像模组和所述车辆的第一位置关系确定所述人眼部分与所述车辆的第二位置关系,所述人眼位置信息包括所述第二位置关系。
在某些实施方式中,所述抬头显示系统包括设置在所述车辆上的定位传感器和设置在所述车辆前挡风玻璃上的透明显示屏。所述定位传感器用于获取当前位置信息,所述透明显示屏用于显示所述虚拟视野地图。所述根据所述建筑物信息和所述人眼位置信息确定建筑物显示信息的步骤包括:根据所述定位传感器与所述车辆的第三位置关系和所述建筑物信息确定所述建筑物信息对应的建筑物与所述车辆的第四位置关系;根据所述第四位置关系与所述第二位置关系确定所述建筑物投影到人眼在所述透明显示屏上形成的投影轮廓信息;根据所述建筑物信息与所述投影轮廓信息确定所述建筑物显示信息以使得所述视野地图中的建筑物部分与对应的建筑物投影轮廓对应。
在某些实施方式中,所述根据所述建筑物信息与所述投影轮廓信息确定所述建筑物显示信息以使得所述视野地图中的建筑物部分与对应的建筑物投影轮廓对应的步骤包括:根据所述投影轮廓信息和所述透明显示屏的分辨率确定所述投影轮廓信息的像素坐标信息;根据所述像素坐标信息确定所述建筑物显示信息以使得所述视野地图中的建筑物部分与对应的建筑物投影轮廓对应。
在某些实施方式中,所述建筑物虚拟皮肤包括第一虚拟皮肤和第二虚拟皮肤,所述显示控制方法包括:根据预设信息将所述建筑物显示信息划分为目标建筑物显示信息和非目标建筑物显示信息,所述目标建筑物显示信息对应位置覆盖有所述第一虚拟皮肤,所述非目标建筑物显示信息对应位置覆盖有所述第二虚拟皮肤。
本申请的实施方式的显示控制装置用于抬头显示系统。显示控制装置包括第一获取模块、第二获取模块、确定模块、生成模块和显示模块。第一获取模块用于根据高精度地图数据和当前位置信息获取视野地图,所述视野地图包括建筑物信息。第二获取模块用于获取用户的人眼位置信息。确定模块用于根据所述建筑物信息和所述人眼位置信息确定建筑物显示信息。生成模块用于根据所述建筑物显示信息生成虚拟视野地图,所述虚拟视野地图中覆盖有建筑物虚拟皮肤。显示模块用于控制所述抬头显示系统显示所述虚拟视野地图以使所述建筑物虚拟皮肤覆盖用户视野中对应的建筑物。
本申请的实施方式的计算机可读存储介质其上存储有计算机程序,所述程序被处理器执行时实现上述任一实施方式的显示控制方法。
本申请的实施方式的抬头显示系统包括处理器和存储器,所述存储器存储有计算机程序,所述计算机程序被所述处理器执行的情况下,实现上述任一实施方式的显示控制方法。
本申请的实施方式的车辆包括上述实施方式的抬头显示系统。
在某些实施方式中,所述车辆包括车辆前挡风玻璃,所述抬头显示系统包括透明显示屏。所述透明显示屏设置在所述车辆前挡风玻璃内侧,所述透明显示屏用于显示所述虚拟视野地图。
在某些实施方式中,所述车辆包括车辆前挡风玻璃,所述抬头显示系统包括透明显示屏。所述车辆前挡风玻璃包括第一玻璃层和第二玻璃层。所述透明显示屏夹设在所述第一玻璃层和所述第二玻璃层之间,所述透明显示屏用于显示所述虚拟视野地图。
本申请实施方式的显示控制方法、装置、介质、抬头显示系统和车辆,通过抬头显示系统显示虚拟视野地图,利用虚拟视野地图中的建筑物虚拟皮肤覆盖视野中对应的建筑物,让司乘人员能够看到想看的以及现实中没有的虚拟街景,如此可以增加司乘乐趣,提升司乘体验。
本申请的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本申请的实践了解到。
附图说明
本申请的上述和/或附加的方面和优点从结合下面附图对实施方式的描述中将变得明显和容易理解,其中:
图1是本申请实施方式的显示控制方法的流程图;
图2是本申请实施方式的车辆的示意图;
图3是本申请实施方式的显示控制装置的示意图;
图4是本申请实施方式的抬头显示系统的示意图;
图5至图8是本申请实施方式的显示控制方法的场景示意图;
图9是本申请实施方式的显示控制方法的另一流程图;
图10是本申请实施方式的建筑物和车辆的位置关系示意图;
图11至图14是本申请实施方式的建筑物显示信息位置示意图;
图15是本申请实施方式的显示控制方法的又一流程图;
图16是本申请实施方式的显示控制方法的场景示意图;
图17至图19是本申请实施方式的建筑物和车辆的位置关系示意图;
图20是本申请实施方式的显示控制方法的再一流程图;
图21是本申请实施方式的透明显示屏和视野地图中的建筑物的场景示意图;和
图22是本申请实施方式的抬头显示系统和计算机可读存储介质的连接示意图。
主要元件符号说明:
显示控制装置100、第一获取模块10、第二获取模块20、确定模块30、生成模块40、显示模块50、抬头显示系统200、处理器210、存储器220、成像模组230、定位传感器240、透明显示屏250、计算机可读存储介质300、车辆1000。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本申请,而不能理解为对本申请的限制。
请参考图1和图2,本申请实施方式提供的一种显示控制方法,用于控制设置在车辆1000的抬头显示系统200,显示控制方法包括:
01:根据高精度地图数据和当前位置信息获取视野地图,视野地图包括建筑物信息;
02:获取用户的人眼位置信息;
03:根据建筑物信息和人眼位置信息确定建筑物显示信息;
04:根据建筑物显示信息生成虚拟视野地图,虚拟视野地图中覆盖有建筑物虚拟皮肤;
05:控制抬头显示系统200显示虚拟视野地图以使建筑物虚拟皮肤覆盖用户视野中对应的建筑物。
请参阅图3,本申请实施方式的显示控制装置100包括第一获取模块10、第二获取模块20、确定模块30、生成模块40和显示模块50。本申请实施方式的显示控制方法可以由本申请实施方式的显示控制装置100实现,其中,步骤01可以由第一获取模块10实现,步骤02可以由第二获取模块20实现,步骤03可以由确定模块30实现,步骤04可以由生成模块40实现,步骤05可以由显示模块50实现,也即是说,第一获取模块10用于根据高精度地图数据和当前位置信息获取视野地图,视野地图包括建筑物信息。第二获取模块20用于获取用户的人眼位置信息。确定模块30用于根据建筑物信息和人眼位置信息确定建筑物显示信息。生成模块40用于根据建筑物显示信息生成虚拟视野地图,虚拟视野地图中覆盖有建筑物虚拟皮肤。显示模块50用于控制抬头显示系统200显示虚拟视野地图以使建筑物虚拟皮肤覆盖用户视野中对应的建筑物。
请参阅图4,本申请实施方式的抬头显示系统200包括处理器210和存储器220,存储器220存储有计算机程序,计算机程序被处理器210执行的情况下实现上述任一实施方式的显示控制方法。本申请实施方式的显示控制方法可以由本申请实施方式的抬头显示系统200实现,其中,步骤01、步骤02、步骤03、步骤04和步骤05均可以由处理器210实现,也即是说,处理器210可用于:根据高精度地图数据和当前位置信息获取视野地图,视野地图包括建筑物信息;获取用户的人眼位置信息;根据建筑物信息和人眼位置信息确定建筑物显示信息;根据建筑物显示信息生成虚拟视野地图,虚拟视野地图中覆盖有建筑物虚拟皮肤;控制抬头显示系统200显示虚拟视野地图以使建筑物虚拟皮肤覆盖用户视野中对应的建筑物。
本申请实施方式的显示控制方法、显示控制装置100和抬头显示系统200,通过抬头显示系统200显示虚拟视野地图,利用虚拟视野地图中的建筑物虚拟皮肤覆盖视野中对应的建筑物,让司乘人员能够看到想看的以及现实中没有的虚拟街景,如此可以增加司乘乐趣,提升司乘体验。
具体地,建筑物信息可以通过超高清地图获得。超高清地图与相关技术中的高清地图并不相同,相关技术中的高清地图只能提供道路级的导航信息,导航信息包括车道的连接关系。相关技术中的高清地图没有对周围的环境进行描述。本申请实施方式的超高清地图可以获取周围的环境。
具体地,超高精度地图可包括道路信息、建筑物信息、围栏信息等。道路信息可包括道路关键点经纬度、道路边界、道路车道数量、道路车道信息等。建筑物信息可包括建筑物坐标原点、建筑物最大尺寸、建筑物分类、建筑物重要程度等。其中,建筑物最大尺寸包括建筑物的长度、宽度和高度;建筑物分类包括公共设施(例如医院,消防,警局等)、有风险地点(例如小区出入口,学校等)、停车场标识、娱乐设施标识等。
值得一提的是,建筑物重要程度可以根据用户的目的地、需求、喜好等进行划分的。在一个实施例中,用户的目的地设置的是用户的公司,那么可以将用户公司所在的建筑判断为重要建筑物。用户在行驶去公司的路途中想要购买咖啡,那么可以将沿途的咖啡店判断为重要建筑物。若用户认为前往公司的必要的,购买咖啡是非必要的情况下,用户公司所在的建筑物可以判断为一级重要建筑物,沿途的咖啡店可以判断为二级重要建筑物,并且一级重要建筑物的重要程度大于二级重要建筑物。建筑物重要程度可以是用户手动设置的,也可以是出厂设置的。在一个实施例中,在出厂前可以设置当车辆1000的油箱内油量较少时,可以将加油站设置为重要建筑物。
需要说明的是,上述所举例的例子是为方便说明本申请的实施,不应理解为对本申请保护范围的限定。
获取建筑物信息和人眼位置后就可以计算出建筑物显示信息,处理建筑物显示信息就可以生成虚拟视野地图,虚拟视野地图是指用户乘坐在车辆1000的情况下能看到的外部环境对应的虚拟外部环境。可以理解为,用户乘坐在车辆1000内,用户的当前的视野是有一定范围的。用户当前的视野范围能看到部分建筑物,可以利用超高精度地图获得这部分建筑物的建筑物信息。根据建筑物信息和用户的人眼位置就能够生成建筑物显示信息,处理建筑物显示信息就可以生成虚拟视野地图,虚拟视野地图中覆盖有建筑物虚拟皮肤。抬头显示系统200显示建筑物虚拟皮肤,建筑物虚拟皮肤可以用于覆盖用户视野中对应的建筑物。
在某些实施方式中,建筑物虚拟皮肤可以根据建筑物重要程度对建筑物进行覆盖。
请参阅图5,在一个实施例中,用户的目的地设置的是用户的家,在行驶途中前方有多栋写字楼,多栋写字楼与本次行程或车辆1000无关。可以使用建筑物虚拟皮肤对多栋写字楼进行单一皮肤元素覆盖,建筑物虚拟皮肤可以是用户喜欢的植物图案。
请参阅图6,在另一个实施例中,用户在行驶途中前方的建筑物均与本次行程或车辆1000无关。可以使用建筑物虚拟皮肤将前方的建筑物进行场景全覆盖,建筑物虚拟皮肤可以是森林、天空的部分图案。
在某些实施方式中,可以预先对超高精度地图中的要素进行分类,根据要素分类预先设置多种虚拟皮肤以形成虚拟皮肤数据库。例如将超高精度地图中的水泥道路对应生成透明栈道皮肤,以提高用户体验。
请参阅图7,在某些实施方式中,虚拟皮肤数据库包括障碍物虚拟皮肤,障碍物虚拟皮肤可以覆盖用户视野中对应的障碍物,提升用户体验。
请参阅图8,在某些实施方式中,虚拟皮肤数据库包括科幻场景虚拟皮肤,抬头显示系统200显示虚拟视野地图以使科幻场景虚拟皮肤覆盖用户视野中对应的建筑物,提升用户体验。
在某些实施方式中,抬头显示系统200包括设置在车辆1000上的定位传感器240,可以利用定位传感器240将车辆1000定位在超高精度地图内的正确位置。再向抬头显示系统200发送预设范围内的超高精度地图的建筑物信息,以及与建筑物信息对应的虚拟皮肤数据库内的虚拟皮肤。预设范围可以包括:以定位传感器240为原点半径为15KM的范围、以定位传感器240为原点半径为20KM的范围、以定位传感器240为原点半径为25KM的范围。
需要说明的是,上述所举例的例子以及具体数值是为方便说明本申请的实施,不应理解为对本申请保护范围的限定。
请一并参阅图9和图10,在某些实施方式中,抬头显示系统200包括固定在车辆1000上的成像模组230,成像模组230用于拍摄用户的人脸图像,步骤02包括:
021:识别人脸图像的人眼部分;和
022:根据成像模组230和车辆1000的第一位置关系确定人眼部分与车辆1000的第二位置关系,人眼位置信息包括第二位置关系。
在某些实施方式中,第二获取模块20包括获取单元和获取单元,其中,步骤021可以由获取单元实现,步骤022可以由获取单元实现,也即是说,获取单元用于识别人脸图像的人眼部分。获取单元用于根据成像模组230和车辆1000的第一位置关系确定人眼部分与车辆1000的第二位置关系,人眼位置信息包括第二位置关系。
在某些实施方式中,本申请实施方式的显示控制方法可以由本申请实施方式的抬头显示系统200实现,其中,步骤021和步骤022均可以由处理器210实现,也即是说,处理器210可用于:识别人脸图像的人眼部分;根据成像模组230和车辆1000的第一位置关系确定人眼部分与车辆1000的第二位置关系,人眼位置信息包括第二位置关系。
具体地,在实际行驶过程中人眼在车辆1000内的位置是会发生变化的。如图10所示,人眼部分与车辆1000的第一位置关系可以理解为人眼部分与车辆1000的中心点A的位置关系。其中,人眼部分与中心点A的位置关系(即第一位置关系)可以通过成像模组230与中心点A的位置关系、成像模组230与人眼部分的位置关系获得。
请再次参阅图10,在一个实施例中,以车辆1000的中心点A为原点,车辆1000中线为x轴,垂直于中线的车辆1000的前轴为y轴,建立车辆1000的xy平面坐标系。成像模组230与中心点A的位置关系为x1,x1可以理解为成像模组230到中心点A、沿x轴距离。成像模组230与人眼部分的位置关系为x2,x2可以理解为人眼部分到成像模组230沿x轴距离,如此可以获得人眼部分与中心点A位置关系(即第二位置关系),人眼位置信息包括第二位置关系。
在某些实施方式中,可以利用面部识别系统追踪人眼部分在三维空间坐标内的位置,再经过坐标系转换计算与车辆1000的xy平面坐标系配合,此处不作限定。
可以理解的是,根据建筑物信息和人眼位置信息才能够确定建筑物显示信息。建筑物信息可以包括建筑物的大小、形状。获取人眼位置信息十分重要,人眼位置发生改变,人眼位置信息也会发生变化,人眼位置信息发生变化可能会使得建筑物显示信息发生变化。
具体地,请参阅图11,人眼部分发生上下位置变化时,会导致建筑物显示信息发生变化。当人眼部分处于N1位置时,建筑物显示信息显示的区域为L1和L2之间;当人眼部分处于N2位置时,建筑物显示信息显示的区域为L3和L4之间。
请参阅图12,人眼部分发生前后位置变化时,会导致建筑物显示信息发生变化,当人眼部分处于N3位置时,建筑物显示信息显示的区域为L5和L6之间;当人眼部分处于N4位置时,建筑物显示信息显示的区域为L7和L8之间。
请参阅图13,人眼部分发生左右位置变化时,会导致建筑物显示信息发生变化。当人眼部分在N5位置时,建筑物显示信息显示的区域为L9和L10之间;当人眼部分处于N6位置时,建筑物显示信息显示的区域为L11和L12之间。
如此,可以利用成像模组230获取实时的人脸图像,及时更新人眼位置信息,提升用户体验。
值得一提的是,建筑物与车辆1000之间的角度发生变化也可能导致建筑物显示信息发生变化。请参阅图14,建筑物与车辆1000之间的角度发生变化,人眼部分处于N7位置,在建筑物位于Q1位置时,建筑物显示信息显示的区域为L13和L14之间;在建筑物位于Q2位置时,建筑物显示信息显示的区域为L15和L16之间。
请一并参阅图10和图15,在某些实施方式中,抬头显示系统200包括设置在车辆1000上的定位传感器240和设置在车辆前挡风玻璃上的透明显示屏250,定位传感器240用于获取当前位置信息,透明显示屏250用于显示虚拟视野地图,步骤03包括:
031:根据定位传感器240与车辆1000的第三位置关系和建筑物信息确定建筑物信息对应的建筑物与车辆1000的第四位置关系;
032:根据第四位置关系与第二位置关系确定建筑物投影到人眼在透明显示屏250上形成的投影轮廓信息;
033:根据建筑物信息与投影轮廓信息确定建筑物显示信息以使得视野地图中的建筑物部分与对应的建筑物投影轮廓对应。
在某些实施方式中,确定模块30包括第一确定单元、第二确定单元和第三确定单元,其中,步骤031可以由第一确定单元实现,步骤032可以由第二确定单元实现,步骤033可以由第三确定单元实现,也即是说,第一确定单元用于根据定位传感器240与车辆1000的第三位置关系和建筑物信息确定建筑物信息对应的建筑物与车辆1000的第四位置关系。第二确定单元用于根据第四位置关系与第二位置关系确定建筑物投影到人眼在透明显示屏250上形成的投影轮廓信息。第三确定单元用于根据建筑物信息与投影轮廓信息确定建筑物显示信息以使得视野地图中的建筑物部分与对应的建筑物投影轮廓对应。
在某些实施方式中,本申请实施方式的显示控制方法可以由本申请实施方式的抬头显示系统200实现,其中,步骤031、步骤032和步骤033均可以由处理器210实现,也即是说,处理器210可用于:根据定位传感器240与车辆1000的第三位置关系和建筑物信息确定建筑物信息对应的建筑物与车辆1000的第四位置关系;根据第四位置关系与第二位置关系确定建筑物投影到人眼在透明显示屏250上形成的投影轮廓信息;根据建筑物信息与投影轮廓信息确定建筑物显示信息以使得视野地图中的建筑物部分与对应的建筑物投影轮廓对应。
具体地,定位传感器240包括但不仅限于激光雷达定位传感器和视觉定位传感器。在一个实施例中,定位传感器240能够实时获取车辆1000四周的动态变化的数据信息并生成相应的电信号,通过处理电信号,可以获取车辆1000的周围环境数据,进而能够直接获取到车辆1000周围的环境信息。可以将获得到的车辆1000周围的环境信息与超高清地图进行特征匹配,从而获取车辆1000的精确位置。
具体地,定位传感器240与车辆1000的第三位置关系可以理解为定位传感器240与车辆1000的中心点A的位置关系。建筑物信息对应的建筑物与车辆1000的第四位置关系可以理解为建筑物与车辆1000的中心点A的位置关系。
请再次参阅图10,在一个实施例中,以车辆1000的中心点A为原点,车辆1000中线为x轴,垂直于中线的车辆1000的前轴为y轴,建立车辆1000的xy平面坐标系。
定位传感器240与中心点A的位置关系(即第三位置关系)为x3,x3可以理解为定位传感器240到中心点A沿x轴距离。建筑物信息可以通过超高精度地图获得,建筑物信息包括建筑物与定位传感器240的位置关系,如此可以获得建筑物与中心点A的第四位置关系。
请参阅图16,通过第四位置关系与第二位置关系就能够确定建筑物投影到人眼在透明显示屏250上形成的投影轮廓信息,建筑物信息与投影轮廓信息能够确定建筑物显示信息。建筑物显示信息可以使得视野地图中的建筑物部分与对应的建筑物投影轮廓对应,提升用户的视觉感受。
请一并参阅图10和图17,在某些实施方式中,可以利用建筑物的标识点确定投影轮廓信息。具体地,首先以车辆1000的中心点A为原点,车辆1000中线为x轴,垂直于中线的车辆1000的前轴为y轴,建立车辆1000的xy平面坐标系。建筑物可以包括多个标识点,本申请以建筑物包括4个标识点为例进行举例说明,4个标识点分别为:第一标识点E、第二标识点F、第三标识点G、第四标识点H。4个标识点可以是建筑物在xy平面上的4个顶点。以车辆1000的中心点A为原点,以竖直垂直xy平面的轴为z轴,建立车辆1000的xz平面坐标系,如此,利用xy平面坐标系与xz平面坐标系形成三维车辆坐标系。
具体地,x1为成像模组230到中心点A沿x轴距离;x2为人眼部分到成像模组230沿x轴距离;x3为定位传感器240到中心点A沿x轴距离;a为建筑物宽度;b为建筑物长度;B点为建筑物原点,x4为定位传感器240到B点沿x轴距离;θ为建筑物的中轴线与车辆1000的前轴y之间的夹角;y1为成像模组230到中心点A沿y轴距离;y2为人眼部分到成像模组230沿y轴距离;y3为定位传感器240到中心点A沿y轴距离;y4为定位传感器240到B点沿y轴距离。z1为成像模组230到中心点A沿z轴距离;z2为人眼部分到成像模组230沿z轴距离;z3为中心点A到地面沿z轴距离。
可以利用公式分别计算出4个标识点到人眼部分在三维车辆坐标系的距离,以第三标识点G为例进行举例说明,具体公式为:
Figure BDA0003577460960000091
Figure BDA0003577460960000092
zG=c-z1-z2-z3
如此,可以计算出第三标识点G到人眼部分在三维车辆坐标系的距离,第一标识点E、第二标识点F、第四标识点H以此类推,此处不作赘述。
请一并参阅图18和图19,计算出第三标识点G到人眼部分在三维车辆坐标系的距离后,再计算第三标识点G到人眼位置在透明显示屏250上形成的轮廓点I的位置。
具体地,轮廓点I为人眼视线出现在透明显示屏250上的点;xK为透明显示屏250底部到人眼部分沿x轴的距离;xF为人眼部分到透明显示屏250水平点的距离;δ为透明显示屏250与水平面的角度;zK为人眼部分到透明显示屏250底部沿z轴的距离;xI为轮廓点I到人眼部分沿x轴的距离;sI为轮廓点I到透明显示屏250底部沿透明显示屏250的距离;yI为轮廓点I人眼部分沿Y轴的距离。
可以利用公式计算出第三标识点G对应的轮廓点I在透明显示屏250上的位置,具体公式为:
Figure BDA0003577460960000093
Figure BDA0003577460960000101
Figure BDA0003577460960000102
Figure BDA0003577460960000103
如此,可以计算出第三标识点G对应的轮廓点I在透明显示屏250上的位置。第一标识点E对应的轮廓点、第二标识点F对应的轮廓点和第四标识点H对应的轮廓点均可以以此类推,,此处不作赘述。如此可以计算出多个轮廓点在透明显示屏250上的位置以确定投影轮廓信息。
请参阅图20,在某些实施方式中,步骤033包括:
0331:根据投影轮廓信息和透明显示屏250的分辨率确定投影轮廓信息的像素坐标信息;
0332:根据像素坐标信息确定建筑物显示信息以使得视野地图中的建筑物部分与对应的建筑物投影轮廓对应。
在某些实施方式中,第三确定单元包括第一确定子单元和第二确定子单元,其中,步骤0331可以由第一确定子单元实现,步骤0332可以由第二确定子单元实现,也即是说,第一确定子单元用于根据投影轮廓信息和透明显示屏250的分辨率确定投影轮廓信息的像素坐标信息。第二确定子单元用于根据像素坐标信息确定建筑物显示信息以使得视野地图中的建筑物部分与对应的建筑物投影轮廓对应。
在某些实施方式中,本申请实施方式的显示控制方法可以由本申请实施方式的抬头显示系统200实现,其中,步骤0331和步骤0332均可以由处理器210实现,也即是说,处理器210可用于:根据投影轮廓信息和透明显示屏250的分辨率确定投影轮廓信息的像素坐标信息;根据像素坐标信息确定建筑物显示信息以使得视野地图中的建筑物部分与对应的建筑物投影轮廓对应。
具体地,投影轮廓信息可以包括多个轮廓点,轮廓点可以是指轮廓中的角点或用户感兴趣点,例如建筑物的轮廓为矩形,则轮廓点I可以为矩形的四个角。
请参阅图21,在一个实施例中,以透明显示屏250的左下角为坐标原点(原点O),以水平方向为x轴,竖直方向为y轴建立屏幕坐标系,轮廓点I在屏幕坐标系中的坐标为(xS,yS),其中,yS=sI,xS=wS/2-(yI-y1-y2),透明显示屏250的分辨率例如为PX*PY,透明显示屏250在屏幕坐标系的x轴的长度为R,在屏幕坐标系的y轴的长度为T,则该轮廓点I的像素坐标为(PX/R*xS,PY/T*yS),获取投影轮廓信息的各个轮廓点的像素坐标,根据各个轮廓点I的像素坐标即可得到投影轮廓信息的像素坐标信息,进而可以根据像素坐标信息确定建筑物显示信息以使得视野地图中的建筑物部分与对应的建筑物投影轮廓对应。
在某些实施方式中,建筑物虚拟皮肤包括第一虚拟皮肤和第二虚拟皮肤,显示控制方法还包括:
根据预设信息将建筑物显示信息划分为目标建筑物显示信息和非目标建筑物显示信息,目标建筑物显示信息对应位置覆盖有第一虚拟皮肤,非目标建筑物显示信息对应位置覆盖有第二虚拟皮肤。
在某些实施方式中,上述步骤可以由显示控制装置100实现,也即是说,显示控制装置100用于根据预设信息将建筑物显示信息划分为目标建筑物显示信息和非目标建筑物显示信息,目标建筑物显示信息对应位置覆盖有第一虚拟皮肤,非目标建筑物显示信息对应位置覆盖有第二虚拟皮肤。
在某些实施方式中,本申请实施方式的显示控制方法可以由本申请实施方式的抬头显示系统200实现,上述步骤可以由处理器210实现,也即是说,处理器210可用于:根据预设信息将建筑物显示信息划分为目标建筑物显示信息和非目标建筑物显示信息,目标建筑物显示信息对应位置覆盖有第一虚拟皮肤,非目标建筑物显示信息对应位置覆盖有第二虚拟皮肤。
如此,建筑物虚拟皮肤具有提醒的效果,提升用户体验。
具体地,预设信息可以是用户手动设置的信息,也可以是出厂设置的,此处不作限定。第一虚拟皮肤用于覆盖目标建筑物显示信息,第一虚拟皮肤具有醒目的特点,可以吸引用户的注意力;第二虚拟皮肤用于覆盖非目标建筑物,第二虚拟皮肤可以提升用户的观感,提升用户的使用体验。
在一个实施例中,用户的目的地信息为预设信息,用户的目的地为目标建筑物,其它建筑物为非目标建筑物。在用户的目标建筑物是呈落地玻璃外墙的建筑时,第一虚拟皮肤可以是呈红砖外墙的建筑物皮肤,目标建筑物显示信息对应位置覆盖有第一虚拟皮肤,因此第一虚拟皮肤具有提醒的效果。非目标建筑物显示信息对应位置覆盖有第二虚拟皮肤,第二虚拟皮肤可以是天空、森林等,因此在出现第一虚拟皮肤时,可以将用户的注意力转移在第一虚拟皮肤处,提升用户体验。
请参阅图22,本申请实施方式的计算机可读存储介质300,其上存储有计算机程序,该程序被处理器210执行时实现上述任一实施方式的显示控制方法。
本申请实施方式的计算机可读存储介质300通过抬头显示系统200显示虚拟视野地图,利用虚拟视野地图中的建筑物虚拟皮肤覆盖视野中对应的建筑物,让司乘人员能够看到想看的以及现实中没有的虚拟街景,如此可以增加司乘乐趣,提升司乘体验。
值得一提的是,本申请实施方式的计算机可读存储介质300存储的计算机程序可以被抬头显示系统200的处理器210执行,需要指出的是,计算机可读存储介质300可以是内置在抬头显示系统200或车辆1000中的存储介质,也可以是能够插拔地插接在抬头显示系统200或车辆1000的存储介质,因此,本申请实施方式的计算机可读存储介质300具有较高的灵活性和可靠性。
请再次参阅图2,本申请实施方式的车辆1000包括上述任一实施方式的抬头显示系统200。
本申请实施方式的车辆1000通过抬头显示系统200显示虚拟视野地图,利用虚拟视野地图中的建筑物虚拟皮肤覆盖视野中对应的建筑物,让司乘人员能够看到想看的以及现实中没有的虚拟街景,如此可以增加司乘乐趣,提升司乘体验。
具体地,车辆1000包括能够实现自动驾驶的汽车,也包括普通的燃油汽车和新能源电动汽车等,此处不作限定。本申请实施方式以车辆1000为实现自动驾驶的汽车为例进行举例说明,以自动驾驶的汽车为例进行举例说明是为方便说明本申请的实施,不应理解为对本申请保护范围的限定。
请一并参阅图17和图18,在某些实施方式中,车辆1000包括车辆前挡风玻璃,抬头显示系统200包括透明显示屏250,透明显示屏250设置在车辆前挡风玻璃内侧,透明显示屏250用于显示虚拟视野地图。
如此,车辆前挡风玻璃可以保护透明显示屏250,有效避免受到外侧的外力导致透明显示屏250破碎。
具体地,车辆前挡风玻璃可以是夹层玻璃、钢化玻璃、区域钢化玻璃等,此处不作限定。透明显示屏250可以通过粘合的方式设置在车辆前挡风玻璃内侧。透明显示屏250的形状、大小可以与车辆前挡风玻璃相同。
透明显示屏250包括有机发光二极管(Organic Light-Emitting Diode,OLED)透明屏,又被称为OLED透明屏。OLED透明屏运用了自发光技术,OLED透明屏采用透明工艺,在不使用本申请实施方式的显示控制方法时不会阻碍用户的视野。在OLED透明屏的像素处于发光状态下,OLED透明屏正反两个方向均可看到显示的内容。OLED透明屏未发光像素呈现高透明状态,可实现用户视野中的建筑物与虚拟视野地图叠加显示。
车辆前挡风玻璃通常为曲面玻璃,OLED透明屏具有柔性、可弯曲性的特性,OLED透明屏能够与车辆前挡风玻璃紧密贴合。车辆前挡风玻璃外侧坚硬耐磨,能承受较强的冲击力,透明显示屏250设置在车辆前挡风玻璃内侧,有效避免透明显示屏250受到外侧的外力导致破碎。
在某些实施方式中,车辆1000包括车辆前挡风玻璃,抬头显示系统200包括透明显示屏250,车辆前挡风玻璃包括第一玻璃层和第二玻璃层,透明显示屏250夹设在第一玻璃层和第二玻璃层之间,透明显示屏250用于显示虚拟视野地图。
如此,第一玻璃层和第二玻璃层可以保护透明显示屏250。
具体地,车辆前挡风玻璃可以是多层钢化玻璃,也可以是多层夹层玻璃,此处不作限定。第一玻璃层与第二玻璃层的材质可以相同也可以不同,第一玻璃层为车辆前挡风玻璃外侧玻璃,第二玻璃层为车辆前挡风玻璃内侧玻璃,透明显示屏250夹设在第一玻璃层和第二玻璃层之间。第一玻璃层的抗冲击性、坚固性可以略强于第二玻璃层,如此,第一玻璃层能承受较强的冲击力,第二玻璃层可以便于用户在逃生时击碎。第一玻璃层和第二玻璃层共同保护透明显示屏250,能够降低透明显示屏250破碎的概率。
在本说明书的描述中,参考术语“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”或“一些示例”等的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施方式或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本申请的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理模块的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
处理器220可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
应当理解,本申请的实施方式的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本申请的各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施方式进行变化、修改、替换和变型。

Claims (11)

1.一种显示控制方法,用于控制设置在车辆的抬头显示系统,其特征在于,所述显示控制方法包括:
根据高精度地图数据和当前位置信息获取视野地图,所述视野地图包括建筑物信息;
获取用户的人眼位置信息;
根据所述建筑物信息和所述人眼位置信息确定建筑物显示信息;
根据所述建筑物显示信息生成虚拟视野地图,所述虚拟视野地图中覆盖有建筑物虚拟皮肤;和
控制所述抬头显示系统显示所述虚拟视野地图以使所述建筑物虚拟皮肤覆盖用户视野中对应的建筑物。
2.根据权利要求1所述的显示控制方法,其特征在于,所述抬头显示系统包括固定在所述车辆上的成像模组,所述成像模组用于拍摄用户的人脸图像,所述获取用户的人眼位置信息的步骤包括:
识别所述人脸图像的人眼部分;和
根据所述成像模组和所述车辆的第一位置关系确定所述人眼部分与所述车辆的第二位置关系,所述人眼位置信息包括所述第二位置关系。
3.根据权利要求1所述的显示控制方法,其特征在于,所述抬头显示系统包括设置在所述车辆上的定位传感器和设置在所述车辆前挡风玻璃上的透明显示屏,所述定位传感器用于获取当前位置信息,所述透明显示屏用于显示所述虚拟视野地图,所述根据所述建筑物信息和所述人眼位置信息确定建筑物显示信息的步骤包括:
根据所述定位传感器与所述车辆的第三位置关系和所述建筑物信息确定所述建筑物信息对应的建筑物与所述车辆的第四位置关系;
根据所述第四位置关系与所述第二位置关系确定所述建筑物投影到人眼在所述透明显示屏上形成的投影轮廓信息;和
根据所述建筑物信息与所述投影轮廓信息确定所述建筑物显示信息以使得所述视野地图中的建筑物部分与对应的建筑物投影轮廓对应。
4.根据权利要求3所述的显示控制方法,其特征在于,所述根据所述建筑物信息与所述投影轮廓信息确定所述建筑物显示信息以使得所述视野地图中的建筑物部分与对应的建筑物投影轮廓对应的步骤包括:
根据所述投影轮廓信息和所述透明显示屏的分辨率确定所述投影轮廓信息的像素坐标信息;和
根据所述像素坐标信息确定所述建筑物显示信息以使得所述视野地图中的建筑物部分与对应的建筑物投影轮廓对应。
5.根据权利要求1所述的显示控制方法,其特征在于,所述建筑物虚拟皮肤包括第一虚拟皮肤和第二虚拟皮肤,所述显示控制方法包括:
根据预设信息将所述建筑物显示信息划分为目标建筑物显示信息和非目标建筑物显示信息,所述目标建筑物显示信息对应位置覆盖有所述第一虚拟皮肤,所述非目标建筑物显示信息对应位置覆盖有所述第二虚拟皮肤。
6.一种显示控制装置,用于抬头显示系统,其特征在于,包括:
第一获取模块,用于根据高精度地图数据和当前位置信息获取视野地图,所述视野地图包括建筑物信息;
第二获取模块,用于获取用户的人眼位置信息;
确定模块,用于根据所述建筑物信息和所述人眼位置信息确定建筑物显示信息;
生成模块,用于根据所述建筑物显示信息生成虚拟视野地图,所述虚拟视野地图中覆盖有建筑物虚拟皮肤;和
显示模块,用于控制所述抬头显示系统显示所述虚拟视野地图以使所述建筑物虚拟皮肤覆盖用户视野中对应的建筑物。
7.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现权利要求1-5任一项所述的显示控制方法。
8.一种抬头显示系统,其特征在于,所述抬头显示系统包括处理器和存储器,所述存储器存储有计算机程序,所述计算机程序被所述处理器执行的情况下,实现权利要求1-5任一项所述的显示控制方法。
9.一种车辆,其特征在于,包括权利要求8所述的抬头显示系统。
10.根据权利要求9所述的车辆,其特征在于,所述车辆包括车辆前挡风玻璃,所述抬头显示系统包括透明显示屏,所述透明显示屏设置在所述车辆前挡风玻璃内侧,所述透明显示屏用于显示所述虚拟视野地图。
11.根据权利要求9所述的车辆,其特征在于,所述车辆包括车辆前挡风玻璃,所述抬头显示系统包括透明显示屏,所述车辆前挡风玻璃包括第一玻璃层和第二玻璃层,所述透明显示屏夹设在所述第一玻璃层和所述第二玻璃层之间,所述透明显示屏用于显示所述虚拟视野地图。
CN202210347592.9A 2022-04-01 2022-04-01 显示控制方法、装置、介质、抬头显示系统和车辆 Pending CN114842172A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210347592.9A CN114842172A (zh) 2022-04-01 2022-04-01 显示控制方法、装置、介质、抬头显示系统和车辆

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210347592.9A CN114842172A (zh) 2022-04-01 2022-04-01 显示控制方法、装置、介质、抬头显示系统和车辆

Publications (1)

Publication Number Publication Date
CN114842172A true CN114842172A (zh) 2022-08-02

Family

ID=82564203

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210347592.9A Pending CN114842172A (zh) 2022-04-01 2022-04-01 显示控制方法、装置、介质、抬头显示系统和车辆

Country Status (1)

Country Link
CN (1) CN114842172A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115933881A (zh) * 2022-12-14 2023-04-07 小米汽车科技有限公司 车辆控制方法、装置、介质及车辆

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115933881A (zh) * 2022-12-14 2023-04-07 小米汽车科技有限公司 车辆控制方法、装置、介质及车辆
CN115933881B (zh) * 2022-12-14 2024-03-12 小米汽车科技有限公司 车辆控制方法、装置、介质及车辆

Similar Documents

Publication Publication Date Title
US9459113B2 (en) Visual guidance for vehicle navigation system
US10600250B2 (en) Display system, information presentation system, method for controlling display system, computer-readable recording medium, and mobile body
US10242457B1 (en) Augmented reality passenger experience
US9671243B2 (en) Vision augmented navigation
US11535155B2 (en) Superimposed-image display device and computer program
JP4696248B2 (ja) 移動体ナビゲート情報表示方法および移動体ナビゲート情報表示装置
US8536995B2 (en) Information display apparatus and information display method
CN109427199A (zh) 用于辅助驾驶的增强现实的方法及装置
US20110103651A1 (en) Computer arrangement and method for displaying navigation data in 3d
US20150331487A1 (en) Infotainment system
US20120087546A1 (en) Method and device for determining processed image data about a surround field of a vehicle
US11525694B2 (en) Superimposed-image display device and computer program
US20110109618A1 (en) Method of displaying navigation data in 3d
US10732420B2 (en) Head up display with symbols positioned to augment reality
US11325470B2 (en) Method, device and computer-readable storage medium with instructions for controlling a display of an augmented-reality head-up display device for a transportation vehicle
CN102555905B (zh) 产生车辆周围环境中至少一个物体的影像的方法和设备
CN102235869A (zh) 用于标记汽车目的地的方法和信息系统
GB2510698A (en) Driver assistance system
US11525695B2 (en) Smart glass for vehicles
JP2019156048A (ja) 駐車支援装置
CN114842172A (zh) 显示控制方法、装置、介质、抬头显示系统和车辆
CN115088028B (zh) 绘制系统、显示系统、移动体、绘制方法以及程序
US10864856B2 (en) Mobile body surroundings display method and mobile body surroundings display apparatus
US20240101138A1 (en) Display system
Cheng et al. Enhancing a driver's situation awareness using a global view map

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 314500 988 Tong Tong Road, Wu Tong Street, Tongxiang, Jiaxing, Zhejiang

Applicant after: United New Energy Automobile Co.,Ltd.

Address before: 314500 988 Tong Tong Road, Wu Tong Street, Tongxiang, Jiaxing, Zhejiang

Applicant before: Hozon New Energy Automobile Co., Ltd.