CN114019686A - 抬头显示器的虚像显示方法、装置、设备和介质 - Google Patents

抬头显示器的虚像显示方法、装置、设备和介质 Download PDF

Info

Publication number
CN114019686A
CN114019686A CN202111393211.2A CN202111393211A CN114019686A CN 114019686 A CN114019686 A CN 114019686A CN 202111393211 A CN202111393211 A CN 202111393211A CN 114019686 A CN114019686 A CN 114019686A
Authority
CN
China
Prior art keywords
target
virtual image
display
determining
curvature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111393211.2A
Other languages
English (en)
Inventor
张淑芳
米德旺
赛影辉
阴山慧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhu Automotive Prospective Technology Research Institute Co ltd
Chery Automobile Co Ltd
Original Assignee
Wuhu Automotive Prospective Technology Research Institute Co ltd
Chery Automobile Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhu Automotive Prospective Technology Research Institute Co ltd, Chery Automobile Co Ltd filed Critical Wuhu Automotive Prospective Technology Research Institute Co ltd
Priority to CN202111393211.2A priority Critical patent/CN114019686A/zh
Publication of CN114019686A publication Critical patent/CN114019686A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B60R11/0229—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for displays, e.g. cathodic tubes
    • B60R11/0235—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for displays, e.g. cathodic tubes of flat type, e.g. LCD
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0136—Head-up displays characterised by optical features comprising binocular systems with a single image source for both eyes

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Instrument Panels (AREA)

Abstract

本公开提供了一种抬头显示器的虚像显示方法、装置、设备和存储介质，属于智能汽车驾驶技术领域。所述方法包括：确定目标对象的第一双眼中心位置；根据所述第一双眼中心位置，确定虚像在前挡风玻璃上的目标显示位置；确定所述目标显示位置对应的目标玻璃曲率；根据所述目标玻璃曲率，在所述目标显示位置显示所述虚像。由于相同的虚像在前挡风玻璃的不同位置会存在差异，并且，目标玻璃曲率为目标对象的第一双眼中心位置对应的目标显示位置的玻璃曲率。根据目标玻璃曲率在目标显示位置显示虚像，能够在目标对象的第一双眼中心位置变化时，使目标对象看到的是差异小的虚像，提高了虚像的显示效果。

Description

抬头显示器的虚像显示方法、装置、设备和介质
技术领域
本公开涉及智能汽车驾驶技术领域，特别涉及一种抬头显示器的虚像显示方法、装置、设备和存储介质。
背景技术
抬头显示器又称平视显示器，其作用是将驾驶员驾驶时需要的一些重要信息，例如时速、导航等信息，投射到驾驶员前面的前挡风玻璃上，让驾驶员尽量做到不低头、不转头就能看到驾驶信息。避免驾驶员分散对前方道路的注意力，增强了驾驶的安全性。
相关技术中，抬头显示器的虚像显示方法包括：确定目标对象的双眼中心位置；根据目标对象的双眼中心位置，确定虚像在前挡风玻璃上的目标显示位置；在目标显示位置显示虚像，以使虚像始终对应目标对象的双眼中心位置的正前方。
采用该种虚像显示方法，虚像的显示位置随驾驶员的双眼位置变化而变化，但随着显示位置的变化，虚像本身也会发生变化，虚像的显示效果差。
发明内容
本公开实施例提供了一种抬头显示器的虚像显示方法、装置、设备和存储介质，能够提高虚像的显示效果。所述技术方案如下：
第一方面，提供了一种抬头显示器的虚像显示方法，所述方法包括：确定目标对象的第一双眼中心位置；根据所述第一双眼中心位置，确定虚像在前挡风玻璃上的目标显示位置；确定所述目标显示位置对应的目标玻璃曲率；根据所述目标玻璃曲率，在所述目标显示位置显示所述虚像。
可选地，所述确定所述目标显示位置对应的目标玻璃曲率，包括：根据所述目标显示位置以及第一对应关系，确定所述目标显示位置对应的目标玻璃曲率，所述第一对应关系为显示位置与玻璃曲率之间的对应关系。
可选地，所述根据所述目标玻璃曲率，在所述目标显示位置显示所述虚像，包括：根据所述目标玻璃曲率以及第二对应关系，确定所述虚像的畸变参数，所述第二对应关系为玻璃曲率与畸变参数之间的对应关系；根据所述畸变参数，在所述目标显示位置显示所述虚像。
可选地，所述根据所述畸变参数，在所述目标显示位置显示所述虚像，包括：根据第一像素坐标和所述畸变参数，确定第二像素坐标，所述第一像素坐标为所述虚像无畸变时，所述虚像对应的显示图像的坐标；根据所述第二像素坐标，在所述目标显示位置显示所述虚像。
可选地，所述确定目标对象的第一双眼中心位置，包括：获取所述目标对象的至少一帧面部图像；确定每帧所述面部图像对应的双眼中心位置；将所述至少一帧面部图像对应的平均双眼中心位置，确定为所述第一双眼中心位置。
第二方面，提供了一种抬头显示器的虚像显示装置，所述装置包括：第一确定模块，用于确定目标对象的第一双眼中心位置；第二确定模块，用于根据所述第一双眼中心位置，确定虚像在前挡风玻璃上的目标显示位置；第三确定模块，用于确定所述目标显示位置对应的目标玻璃曲率；虚像显示模块，用于根据所述目标玻璃曲率，在所述目标显示位置显示所述虚像。
可选地，所述第三确定模块用于根据所述目标显示位置以及第一对应关系，确定所述目标显示位置对应的目标玻璃曲率，所述第一对应关系为显示位置与玻璃曲率之间的对应关系。
可选地，所述虚像显示模块用于根据所述目标玻璃曲率以及第二对应关系，确定所述虚像的畸变参数，所述第二对应关系为玻璃曲率与畸变参数之间的对应关系；根据所述畸变参数，在所述目标显示位置显示所述虚像。
可选地，所述虚像显示模块用于根据第一像素坐标和所述畸变参数，确定第二像素坐标，所述第一像素坐标为所述虚像无畸变时，所述虚像对应的显示图像的坐标；根据所述第二像素坐标，在所述目标显示位置显示所述虚像。
可选地，第一确定模块用于获取所述目标对象的至少一帧面部图像；确定每帧所述面部图像对应的双眼中心位置；将所述至少一帧面部图像对应的平均双眼中心位置，确定为所述第一双眼中心位置。
第三方面，提供了一种计算机设备，包括：处理器；用于存储处理器可执行指令的存储器；其中，所述处理器被配置为执行第一方面所述的方法。
第四方面，提供了一种计算机可读介质，当计算机可读介质中的指令由计算机设备的处理器执行时，使得计算机设备能够执行第一方面所述的方法。
第五方面，提供了一种计算机程序产品，包括计算机程序/指令，其特征在于，所述计算机程序/指令被处理器执行时实现第一方面所述的方法。
本公开实施例提供的技术方案带来的有益效果是：
本公开实施例中，确定目标对象的第一双眼中心位置；根据第一双眼中心位置，确定虚像在前挡风玻璃上的目标显示位置；确定目标显示位置对应的目标玻璃曲率；根据目标玻璃曲率，在目标显示位置显示所述虚像。由于相同的虚像在前挡风玻璃的不同位置会存在差异，并且，目标玻璃曲率为目标对象的第一双眼中心位置对应的目标显示位置的玻璃曲率。根据目标玻璃曲率在目标显示位置显示虚像，能够在目标对象的第一双眼中心位置变化时，使目标对象看到的是差异小的虚像，提高了虚像的显示效果。
附图说明
为了更清楚地说明本公开实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本公开实施例提供的一种显示系统的结构示意图；
图2是本公开实施例提供的一种抬头显示器的虚像显示方法的流程图；
图3是本公开实施例提供的另一种抬头显示器的虚像显示方法的流程图；
图4是本公开实施例提供的一种抬头显示器的虚像显示装置的结构框图；
图5是本公开实施例提供的一种计算机设备的结构框图。
具体实施方式
为使本公开的目的、技术方案和优点更加清楚，下面将结合附图对本公开实施方式作进一步地详细描述。
图1是本公开实施例提供的一种显示系统的结构示意图。参见图1，该显示系统包括：摄像头10、控制器20、抬头显示器30以及电源40。
其中，摄像头10的信号输出端与控制器20的信号输入端连接。摄像头10用于获取目标对象的面部图像，并将拍摄到的面部图像按照指定速度发送至控制器20。示例性地，摄像头10按照30ms每帧的速度将目标对象的面部图像传输给控制器20。
在一些实施方式中，摄像头10为DMS(Driver Monitor System，驾驶员检测系统)摄像头。在另一些实施方式中，摄像头20为其他带有红外功能的摄像头。如果摄像头10不带有红外功能，在特殊情况下，例如目标对象带有眼镜的情况下，无法识别出目标对象的眼睛位置。示例性地，摄像头可以安装在前挡风玻璃两旁的A柱上或者安装在仪表盘上方。
控制器20的信号输出端与抬头显示器30中光机控制器31的信号输入端连接。
控制器20中存储有车辆的前挡风玻璃的玻璃曲率数据。示例性地，该玻璃曲率数据为前挡风玻璃装车前，通过玻璃面型扫描仪扫描前挡风玻璃得到，然后存储到服务站中的。控制器20在前挡风玻璃装车前通过4G(Fourth Generation，第四代移动通信技术)与服务站通信获取前挡风玻璃的玻璃曲率数据，并存储在内部的存储单元中。
控制器20用于从摄像头10传输的面部图像中识别出目标对象的双眼中心位置，并且根据目标对象的双眼中心位置向光机控制器30发送调节信号以调节虚像。
示例性地，控制器20可以是音响主机控制器、车身控制器或者抬头显示器自带的控制器。
抬头显示器30可以为AR-HUD(Augmented Reality Head Up Display，增强现实抬头显示器)、W-HUD(Windshield Head Up Display，挡风玻璃抬头显示器)。抬头显示器30包括光机控制器31、PGU(Picture Generating Unit，图像生成单元)32、调节电机33和曲面镜34。
光机控制器31的信号输出端与PGU 32的信号输入端连接，用于根据控制器20发送的调节信号控制PGU 32改变当前投射的虚像的显示内容。
光机控制器31的信号输出端还与调节电机33的信号输入端连接，用于根据控制器20发送的调节信号控制调节电机33。
调节电机33与曲面镜34连接，用于根据光机控制器31发送的调节信号带动曲面镜移动，以调节虚像在前挡风玻璃上的显示位置。
在一些实施方式中，调节电机50包括第一调节电机和第二调节电机。其中第一调节电机用于带动曲面镜在左右方向移动，第二调节电机用于带动曲面镜在上下方向移动。示例性地，调节电机33为步进电机。
电源40用于为显示系统的各器件供电。示例性地，电源40为开关电源。
图2是本公开实施例提供的一种抬头显示器的虚像显示方法的流程图，该方法可以由图1中的控制器20执行。参见图2，该方法包括：
在步骤201中，确定目标对象的第一双眼中心位置。
示例性地，目标对象可以是驾驶员、副驾驶员。
在一些示例中，通过获取目标对象的面部图像来确定目标对象的第一双眼中心位置，第一双眼中心位置可以是目标对象的双眼中心在面部图像中的位置。在另一些示例中，第一双眼中心位置还可以是穿过目标对象的双眼中心的参考线与前挡风玻璃相交的位置，参考线与目标对象的两只眼球中心所在的竖直水平面呈预设角度。示例性地，该预设角度为90°。也即是，第一双眼中心位置为目标对象的双眼中心在前挡风玻璃上的位置。
在骤202中，根据第一双眼中心位置，确定虚像在前挡风玻璃上的目标显示位置。
目标显示位置为目标对象的双眼中心在前挡风玻璃上的位置。第一双眼中心位置与虚像在前挡风玻璃上的目标显示位置一一对应。
在步骤203中，确定目标显示位置对应的目标玻璃曲率。
前挡风玻璃上，不同的显示位置对应的玻璃曲率相同或不同。
在步骤204中，根据目标玻璃曲率，在目标显示位置显示虚像。
本公开实施例中，确定目标对象的第一双眼中心位置；根据第一双眼中心位置，确定虚像在前挡风玻璃上的目标显示位置；确定目标显示位置对应的目标玻璃曲率；根据目标玻璃曲率，在目标显示位置显示所述虚像。由于相同的虚像在前挡风玻璃的不同位置会存在差异，并且，目标玻璃曲率为目标对象的第一双眼中心位置对应的目标显示位置的玻璃曲率。根据目标玻璃曲率在目标显示位置显示虚像，能够在目标对象的第一双眼中心位置变化时，使目标对象看到的是差异小的虚像，提高了虚像的显示效果。
可选地，本公开实施例中，确定目标显示位置对应的目标玻璃曲率，包括：根据目标显示位置以及第一对应关系，确定目标显示位置对应的目标玻璃曲率，第一对应关系为显示位置与玻璃曲率之间的对应关系。
可选地，本公开实施例中，根据目标玻璃曲率，在目标显示位置显示虚像，包括：根据目标玻璃曲率以及第二对应关系，确定虚像的畸变参数，第二对应关系为玻璃曲率与畸变参数之间的对应关系；根据畸变参数，在目标显示位置显示虚像。
可选地，本公开实施例中，根据畸变参数，在目标显示位置显示虚像，包括：根据第一像素坐标和畸变参数，确定第二像素坐标，第一像素坐标为虚像无畸变时，虚像对应的显示图像的坐标；根据第二像素坐标，在目标显示位置显示虚像。
可选地，本公开实施例中，确定目标对象的第一双眼中心位置，包括：获取目标对象的至少一帧面部图像；确定每帧面部图像对应的双眼中心位置；将至少一帧面部图像对应的平均双眼中心位置，确定为第一双眼中心位置。
图3是本公开实施例提供的另一种抬头显示器的虚像显示方法的流程图，该方法可以由图1中的控制器20执行。参见图3，该方法包括：
在步骤301中，获取至少一帧面部图像。
控制器可以从摄像头中获取至少一帧面部图像。摄像头传输面部图像的相关内容，参见图1所示的实施例，在此省略详细描述。示例性地，至少一帧面部图像为100帧。
在步骤302中，确定每帧面部图像对应的双眼中心位置。
双眼中心指的是与目标对象的两只眼球中心之间的距离相等的位置。双眼中心、两只眼球的中心在同一水平线。
在一些实施方式中，每帧面部图像对应的双眼中心位置指的是目标对象的双眼中心在每帧面部图像中的位置。示例性地，双眼中心位置为目标对象的双眼中心距离参考边界的位置，参考边界为每帧面部图像的四个边界中的任一边界。控制器可以根据图像识别算法识别出每帧面部图像中目标对象的双眼中心距离参考边界的位置。
在另一些实施方式中，每帧面部图像对应的双眼中心位置指的是目标对象的双眼中心在前挡风玻璃上的位置。相关内容参见前述步骤201，在此省略详细描述。
示例性地，确定目标对象的双眼中心在前挡风玻璃上的位置，包括：确定每帧面部图像中目标对象的双眼中心位置；根据每帧面部图像中目标对象的双眼中心位置以及第一映射关系，确定每帧面部图像对应的目标对象的双眼中心在前档风玻璃上的位置，第一映射关系为双眼中心位置与前挡风玻璃上的位置之间的映射关系。
由于摄像头的安装位置以及拍摄的面部图像的大小是固定不变的，汽车的前挡风玻璃的位置也是固定不变的，目标对象的双眼中心在面部图像中的位置与目标对象的双眼中心在前挡风玻璃上的位置存在一定的对应关系。因此，根据面部图像中目标对象的双眼中心位置以及第一映射关系，可以确定出对应的目标对象的双眼中心位置在前挡风玻璃上的位置。
在步骤303中，将至少一帧面部图像对应的平均双眼中心位置，确定为第一双眼中心位置。
第一双眼中心位置可以为至少一帧面部图像中目标对象的双眼中心平均位置，或者至少一帧面部图像对应的目标对象的双眼中心在前挡风玻璃上的平均位置。
在一些示例中，控制器在确定出至少一帧面部图像对应的双眼中心位置之后，将该至少一帧面部图像对应的双眼中心位置的平均双眼中心位置作为目标对象当前的第一双眼中心位置。
在另一些示例中，控制器在对至少一帧面部图像进行识别的过程中，能够事先对该至少一帧面部图像进行筛选，以滤除该至少一帧面部图像中的特异图像。然后将除了特异图像之外的所有面部图像对应的平均双眼中心位置作为目标对象当前的第一双眼中心位置。特异图像指无法识别双眼的图像等。示例性地，100帧图像中存在10帧图像无法识别出双眼，则根据该10％特异图像之外的面部图像确定目标对象的第一双眼中心位置。
步骤301至步骤303中，将至少一帧面部图像对应的平均双眼中心位置确定为目标对象的第一双眼中心位置，能够使得当前确定出的目标对象的第一双眼中心位置更准确。
在步骤304中，根据第一双眼中心位置，确定虚像在前挡风玻璃上的目标显示位置。
虚像在前挡风玻璃上的目标显示位置为目标对象的双眼中心在前挡风玻璃上的位置。
在一些实施方式中，第一双眼中心位置为面部图像中目标对象的双眼中心位置。确定虚像在前挡风玻璃上的目标显示位置包括：根据第一双眼中心位置以及第一映射关系，确定第一双眼中心位置在前档风玻璃上的位置。该位置即为虚像在前挡风玻璃上的目标显示位置。第一映射关系的相关内容，参见前述步骤302，在此省略详细描述。
在另一些实施方式中，第一双眼中心位置为目标对象的双眼中心在前挡风玻璃上的位置。则直接将该位置确定为虚像在前挡风玻璃上的目标显示位置。
在步骤305中，根据目标显示位置以及第一对应关系，确定目标显示位置对应的目标玻璃曲率。
第一对应关系为显示位置与玻璃曲率之间的对应关系。第一对应关系可以由相关技术人员根据实验进行测定，然后存储在控制器的存储单元中。
根据目标显示位置和第一对应关系，可以确定出目标显示位置对应的目标玻璃曲率。
在步骤306中，根据目标玻璃曲率以及第二对应关系，确定虚像的畸变参数。
第二对应关系为玻璃曲率与畸变参数之间的对应关系。根据确定出的目标玻璃曲率以及第二对应关系，可以确定出目标玻璃曲率对应的畸变参数。
示例性地，第二对应关系由相关技术人员根据实验进行确定。
在步骤307中，根据畸变参数，在目标显示位置显示虚像。
在一些实施方式中，步骤307包括以下步骤：
第一步，根据第一像素坐标和目标玻璃曲率对应的畸变参数，确定第二像素坐标。
PGU在接收到显示图像的图像数据后，会根据图像数据对光源产生的光束进行调制，从而将图像信息携带在光束上，然后将携带有图像信息的光束透射到挡风玻璃上。
显示图像包括多个像素，显示图像的图像数据包括每个像素点对应的像素数据，即包括像素坐标和对应的像素值。
在本公开实施例中，第一像素坐标为虚像无畸变时，虚像对应的显示图像的各个像素的坐标。第二像素坐标为对显示图像的图像数据进行畸变校正后，得到的显示图像的各个像素的坐标。在一些示例中，可以通过调整显示图像中部分像素点对应的像素值的位置，来对显示图像进行畸变校正。
示例性地，可以根据以下公式，确定第二像素坐标。
Figure BDA0003369471580000091
公式(1)中，X表示第二像素的行坐标，Y表示第二像素的列坐标；x表示第一像素的行坐标，y表示第一像素的列坐标；r2＝x2+y2；畸变参数包括径向畸变参数k1和k2以及切向畸变参数p1和p2，畸变参数可由相关技术人员根据实验进行确定。示例性地，相关技术人员调整虚像的显示位置后，根据前挡风玻璃上的虚像的畸变形态进行修改控制器存储的代码中的畸变参数，然后将虚像无明显畸变时的畸变参数，确定为该显示位置对应的畸变参数。
第一像素坐标可以用(x，y)表示，第二像素坐标可以用(X，Y)表示。根据公式(1)可以确定每个第一像素坐标(x，y)对应的第二像素坐标(X，Y)。
在进行显示时，将第一像素坐标对应的像素值转移到显示图像中的第二像素坐标。
需要说明的是，本公开实施例对虚像的畸变校正方法不做限制，可以采用任何能够对虚像进行畸变校正的方式。
第二步，根据第二像素坐标，在目标显示位置显示虚像。
该第二步包括：根据第二像素坐标控制PGU输出的光束，即根据第二像素坐标控制PGU中的光调制器对光束进行调制；将PGU输出的光束投射到目标显示位置。
本公开实施例中，控制器向光机控制器发送第一调节信号，第一调节信号包括第二像素坐标和对应的像素值。光机控制器根据该第一调节信号控制PGU中的光调制器对光束进行调制；同时，控制器向光机控制器发送第二调节信号，第二调节信号包括调节电机的转动方向和转动距离。光机控制器用于根据该第二调节信号控制调节电机将PGU输出的光束调整至目标显示位置，得到目标显示位置对应的虚像。
按照第二像素坐标生成的显示图像是畸变的图像，该畸变的图像投射到前挡风玻璃上的目标显示位置后，前挡风玻璃上显示的是无畸变的图像。
本公开实施例中，将PGU输出的光束投射到目标显示位置，包括：根据目标对象的面部图像，确定第二双眼中心位置；响应于确定第一双眼中心位置与第二双眼中心位置之间的距离差值大于差值阈值，根据距离差值将PGU输出的光束投射到目标显示位置。
第二双眼中心位置为目标对象在第一双眼中心位置之前的双眼中心位置。第二双眼中心位置的确定方法与第一双眼中心位置的确定方法相同。第一双眼中心位置的确定，参见前述步骤303，在此省略详细描述。
第一双眼中心位置与第二双眼中心位置之间的距离差值包括第一双眼中心位置与第二双眼中心位置之间的水平距离和第一双眼中心位置与第二双眼中心位置之间的竖直距离。差值阈值由相关技术人员根据实际需要进行设定。
当水平距离差值大于差值阈值或者竖直距离大于差值阈值时，控制器输出调节信号，以调节虚像在前挡风玻璃上的显示位置。
在一些示例中，当水平距离小于0且水平距离大于差值阈值，竖直距离等于0时，表示第一双眼中心位置向左偏移该水平距离。控制器根据该水平距离输出调节信号调节虚像向左偏移。
在另一些示例中，当水平距离小于0且水平距离大于差值阈值，竖直距离小于0且竖直距离大于差值阈值时，表示第一双眼中心位置向左下方偏移。控制器根据该水平距离和竖直距离输出调节信号调节虚像向左下方偏移。
在一些实施方式中，第一双眼中心位置为面部图像中目标对象的双眼中心位置。此时，根据水平距离、竖直距离以及第二映射关系，调整虚像在前挡风玻璃上的显示位置。第二映射关系为水平距离或竖直距离与曲面镜移动距离之间的线性映射关系。第二映射关系由相关技术人员根据实验得到。
控制器根据水平距离、竖直距离和第二映射关系，确定出水平距离对应的第一曲面镜水平移动距离以及竖直距离对应的第一曲面镜竖直移动距离。然后，控制器向光机控制器输出第二调节信号，光机控制器根据该第二调节信号，控制第一调节电机带动曲面镜向左或者向右移动该第一曲面镜水平移动距离，以及控制第二调节电机带动曲面镜向上或者向下移动该第一曲面镜竖直移动距离。
在另一些实施方式中，第一双眼中心位置为目标对象的双眼中心在前挡风玻璃上的位置。
控制器根据水平距离、竖直距离和第三映射关系，确定出水平距离对应的第二曲面镜水平移动距离以及竖直距离对应的第二曲面镜竖直移动距离。然后，控制器向光机控制器输出第二调节信号，光机控制器根据该第二调节信号，控制第一调节电机带动曲面镜向左或者向右移动该第二曲面镜水平移动距离，以及控制第二调节电机带动曲面镜向上或者向下移动该第二曲面镜竖直移动距离。
本公开实施例中，当目标对象的第一双眼中心位置发生变化时，在将虚像调整至第一双眼中心位置对应的目标显示位置的同时，根据目标显示位置对应的目标玻璃曲率对虚像进行畸变调整。能够在目标对象的第一双眼中心位置变化时，使目标对象看到的是没有畸变的虚像，提高了虚像的显示效果。
图4是本公开实施例提供的一种抬头显示器的虚像显示装置400的结构框图。如图4所示，该装置包括：第一确定模块401、第二确定模块402、第三确定模块403和虚像显示模块404。
其中，第一确定模块401，用于确定目标对象的第一双眼中心位置。第二确定模块402，用于根据所述第一双眼中心位置，确定虚像在前挡风玻璃上的目标显示位置。第三确定模块403，用于确定所述目标显示位置对应的目标玻璃曲率。虚像显示模块404，用于根据所述目标玻璃曲率，在所述目标显示位置显示所述虚像。
可选地，所述第二确定模块402用于根据所述目标显示位置以及第一对应关系，确定所述目标显示位置对应的目标玻璃曲率，所述第一对应关系为显示位置与玻璃曲率之间的对应关系。
可选地，所述虚像显示模块404用于根据所述目标玻璃曲率以及第二对应关系，确定所述虚像的畸变参数，所述第二对应关系为玻璃曲率与畸变参数之间的对应关系；根据所述畸变参数，在所述目标显示位置显示所述虚像。
可选地，所述虚像显示模块404用于根据第一像素坐标和所述畸变参数，确定第二像素坐标，所述第一像素坐标为所述虚像无畸变时，所述虚像对应的显示图像的坐标；根据所述第二像素坐标，在所述目标显示位置显示所述虚像。
可选地，第一确定模块401用于获取所述目标对象的至少一帧面部图像；确定每帧所述面部图像对应的双眼中心位置；将所述至少一帧面部图像对应的平均双眼中心位置，确定为所述第一双眼中心位置。
需要说明的是：上述实施例提供的抬头显示器的虚像显示装置400在进行抬头显示器的虚像显示时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的抬头显示器的虚像显示装置400与抬头显示器的虚像显示方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
图5是本公开实施例提供的计算机设备的结构框图。如图5所示，该计算机设备500可以是车载电脑等。该计算机设备500包括：处理器501和存储器502。
处理器501可以包括一个或多个处理核心，比如5核心处理器、8核心处理器等。处理器501可以采用DSP(Digital Signal Processing，数字信号处理)、FPGA(Field－Programmable Gate Array，现场可编程门阵列)、PLA(Programmable Logic Array，可编程逻辑阵列)中的至少一种硬件形式来实现。处理器501也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(Central ProcessingUnit，中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器501可以在集成有GPU(Graphics Processing Unit，图像处理器)，GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中，处理器501还可以包括AI(Artificial Intelligence，人工智能)处理器，该AI处理器用于处理有关机器学习的计算操作。
存储器502可以包括一个或多个计算机可读介质，该计算机可读介质可以是非暂态的。存储器502还可包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中，存储器502中的非暂态的计算机可读介质用于存储至少一个指令，该至少一个指令用于被处理器501所执行以实现本公开实施例中提供的抬头显示器的虚像显示方法。
本领域技术人员可以理解，图5中示出的结构并不构成对计算机设备500的限定，可以包括比图示更多或更少的组件，或者组合某些组件，或者采用不同的组件布置。
本发明实施例还提供了一种非临时性计算机可读介质，当介质中的指令由计算机设备500的处理器执行时，使得计算机设备500能够执行本公开实施例中提供的抬头显示器的虚像显示方法。
一种计算机程序产品，包括计算机程序/指令，其特征在于，计算机程序/指令被处理器执行时实现本公开实施例中提供的抬头显示器的虚像显示方法。
以上仅为本公开的可选实施例，并不用以限制本公开，凡在本公开的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本公开的保护范围之内。

Claims (10)

1.一种抬头显示器的虚像显示方法，其特征在于，所述方法包括：
确定目标对象的第一双眼中心位置；
根据所述第一双眼中心位置，确定虚像在前挡风玻璃上的目标显示位置；
确定所述目标显示位置对应的目标玻璃曲率；
根据所述目标玻璃曲率，在所述目标显示位置显示所述虚像。
2.根据权利要求1所述的方法，其特征在于，所述确定所述目标显示位置对应的目标玻璃曲率，包括：
根据所述目标显示位置以及第一对应关系，确定所述目标显示位置对应的目标玻璃曲率，所述第一对应关系为显示位置与玻璃曲率之间的对应关系。
3.根据权利要求1所述的方法，其特征在于，所述根据所述目标玻璃曲率，在所述目标显示位置显示所述虚像，包括：
根据所述目标玻璃曲率以及第二对应关系，确定所述虚像的畸变参数，所述第二对应关系为玻璃曲率与畸变参数之间的对应关系；
根据所述畸变参数，在所述目标显示位置显示所述虚像。
4.根据权利要求3所述的方法，其特征在于，所述根据所述畸变参数，在所述目标显示位置显示所述虚像，包括：
根据第一像素坐标和所述畸变参数，确定第二像素坐标，所述第一像素坐标为所述虚像无畸变时，所述虚像对应的显示图像的坐标；
根据所述第二像素坐标，在所述目标显示位置显示所述虚像。
5.根据权利要求1至4任一项所述的方法，其特征在于，所述确定目标对象的第一双眼中心位置，包括：
获取所述目标对象的至少一帧面部图像；
确定每帧所述面部图像对应的双眼中心位置；
将所述至少一帧面部图像对应的平均双眼中心位置，确定为所述第一双眼中心位置。
6.一种抬头显示器的虚像显示装置，其特征在于，所述装置包括：
第一确定模块，用于确定目标对象的第一双眼中心位置；
第二确定模块，用于根据所述第一双眼中心位置，确定虚像在前挡风玻璃上的目标显示位置；
第三确定模块，用于确定所述目标显示位置对应的目标玻璃曲率；
虚像显示模块，用于根据所述目标玻璃曲率，在所述目标显示位置显示所述虚像。
7.根据权利要求6所述的装置，其特征在于，所述虚像显示模块用于根据所述目标玻璃曲率以及第二对应关系，确定所述虚像的畸变参数，所述第二对应关系为玻璃曲率与畸变参数的对应关系；根据所述畸变参数，在所述目标显示位置显示所述虚像。
8.一种计算机设备，其特征在于，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行如权利要求1至5任一项所述的方法。
9.一种计算机可读介质，其特征在于，当计算机可读介质中的指令由计算机设备的处理器执行时，使得计算机设备能够执行如权利要求1至5任一项所述的方法。
10.一种计算机程序产品，包括计算机程序/指令，其特征在于，所述计算机程序/指令被处理器执行时实现权利要求1至5任一项所述的方法。
CN202111393211.2A 2021-11-23 2021-11-23 抬头显示器的虚像显示方法、装置、设备和介质 Pending CN114019686A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111393211.2A CN114019686A (zh) 2021-11-23 2021-11-23 抬头显示器的虚像显示方法、装置、设备和介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111393211.2A CN114019686A (zh) 2021-11-23 2021-11-23 抬头显示器的虚像显示方法、装置、设备和介质

Publications (1)

Publication Number Publication Date
CN114019686A true CN114019686A (zh) 2022-02-08

Family

ID=80065749

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111393211.2A Pending CN114019686A (zh) 2021-11-23 2021-11-23 抬头显示器的虚像显示方法、装置、设备和介质

Country Status (1)

Country Link
CN (1) CN114019686A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114792035A (zh) * 2022-05-06 2022-07-26 奇瑞汽车股份有限公司 优化汽车风挡玻璃型面的方法和装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020049881A1 (ja) * 2018-09-07 2020-03-12 マクセル株式会社 ヘッドアップディスプレイ装置
CN111038402A (zh) * 2018-10-11 2020-04-21 现代自动车株式会社 用于控制车辆的显示的装置和方法
CN111127365A (zh) * 2019-12-26 2020-05-08 重庆矢崎仪表有限公司 基于三次样条曲线拟合的hud畸变矫正方法
CN111552085A (zh) * 2020-06-24 2020-08-18 业成科技（成都）有限公司 抬头显示装置及其制程
WO2021050882A1 (en) * 2019-09-13 2021-03-18 Carlex Glass America, Llc Method and system for providing optical distortion information of a vehicle glazing
WO2021227969A1 (zh) * 2020-05-15 2021-11-18 华为技术有限公司 一种数据处理方法及其设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020049881A1 (ja) * 2018-09-07 2020-03-12 マクセル株式会社 ヘッドアップディスプレイ装置
CN111038402A (zh) * 2018-10-11 2020-04-21 现代自动车株式会社 用于控制车辆的显示的装置和方法
WO2021050882A1 (en) * 2019-09-13 2021-03-18 Carlex Glass America, Llc Method and system for providing optical distortion information of a vehicle glazing
CN111127365A (zh) * 2019-12-26 2020-05-08 重庆矢崎仪表有限公司 基于三次样条曲线拟合的hud畸变矫正方法
WO2021227969A1 (zh) * 2020-05-15 2021-11-18 华为技术有限公司 一种数据处理方法及其设备
CN111552085A (zh) * 2020-06-24 2020-08-18 业成科技（成都）有限公司 抬头显示装置及其制程

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
刘煜，张政，赖世明，曾向荣，周典乐: "《阵列相机成像技术与应用》", 30 April 2018, 国防科技大学出版社 *
徐德，谭民，李原: "《机器人视觉测量与控制》", 31 January 2016, 国防工业出版社 *
徐海波: "《计算机视觉系统设计及显著性算法研究》", 31 December 2019, 上海交通大学出版社 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114792035A (zh) * 2022-05-06 2022-07-26 奇瑞汽车股份有限公司 优化汽车风挡玻璃型面的方法和装置

Similar Documents

Publication Publication Date Title
US10223835B2 (en) Augmented reality alignment system and method
EP3889908B1 (en) Image projection method, apparatus, device and storage medium
US10281729B2 (en) Vehicle equipped with head-up display system capable of adjusting imaging distance and maintaining image parameters, and operation method of head-up display system thereof
US20230086164A1 (en) Image display system, image display method, storage medium, and moving vehicle including the image display system
US12033308B2 (en) Image correction method and apparatus for camera
CN110308556B (zh) 图像形成、校正、显示系统或方法、移动体、非暂时性计算机可读介质
US20160357015A1 (en) Vehicle display device
US10274726B2 (en) Dynamic eyebox correction for automotive head-up display
JP2015015708A (ja) 車両のための視野ディスプレイ装置の映像装置を利用して三次元画像を表示するための方法及び装置
EP3333808B1 (en) Information processing device
US10885819B1 (en) In-vehicle augmented reality system
WO2019123975A1 (ja) 表示制御ユニット及びヘッドアップディスプレイ装置
US11509877B2 (en) Image display device including moveable display element and image display method
CN114019686A (zh) 抬头显示器的虚像显示方法、装置、设备和介质
CN111264057B (zh) 信息处理装置、信息处理方法和记录介质
KR101723235B1 (ko) 입체 영상의 입체감을 감쇠하기 위한 장치 및 방법
JP2019169828A (ja) 車載表示制御装置及び車載表示制御方法
US20230239458A1 (en) Stereoscopic-image playback device and method for generating stereoscopic images
KR20150094381A (ko) 주변환경 기반의 ｈｕｄ 제어 장치 및 그 방법
US20210008981A1 (en) Control device, display device, display system, moving body, control method, and recording medium
CN114331888B (zh) 一种反畸变方法、装置以及平视显示系统
EP3648096A1 (en) Image processing unit, and head-up display device provided with same
WO2021065698A1 (ja) ヘッドアップディスプレイ装置、方法、及びコンピュータ・プログラム
WO2024122191A1 (ja) 画像処理装置及び方法、プログラム、記憶媒体
JP7047730B2 (ja) 表示制御装置及び表示制御プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20220208