CN113689358A - 车辆挡风玻璃图像增强显示方法、电子设备、存储介质及玻璃 - Google Patents

Abstract

本发明公开一种车辆挡风玻璃图像增强显示方法、电子设备、存储介质及玻璃。方法包括：获取车外目标物的目标物位置、以及车内人眼的人眼位置；根据目标物位置和人眼位置建立经过目标物位置和人眼位置的光线通路；基于挡风玻璃的位置信息确定光线通路与挡风玻璃的交点作为车外目标物在挡风玻璃上的显示位置；在挡风玻璃的显示位置显示关于车外目标物的增强效果。本发明通过计算车外目标物位置和人眼位置，建立经过目标物位置和人眼位置的光线通路，根据光线通路确定目标物在挡风玻璃上的显示位置，并在显示位置显示关于车外目标物的增强效果。本发明在对目标物进行增强效果显示以提示驾驶员的同时，并不增加过多额外的信息，避免干扰驾驶员视野。

Description

车辆挡风玻璃图像增强显示方法、电子设备、存储介质及玻璃

技术领域

本发明涉及汽车相关技术领域，特别是一种车辆挡风玻璃图像增强显示方法、电子设备、存储介质及玻璃。

背景技术

现有在挡风玻璃上显示信息的方式，主要采用抬头显示器(Head Up Display，HUD)。现有的增强现实型抬头显示(Augmented Reality Head Up Display，AR-HUD)通过在抬头显示器上显示信息，辅助驾驶员驾驶车辆。

然而，现有的抬头显示器上，所显示的内容多为有限常规的物理值信息或虚拟的图像。这样的技术会投射太多的虚拟成像信号，给驾驶员带来视野干扰。

同时，所显示的虚拟图像需要根据车辆不同的情景来显示。因此需要不断对情景识别进行学习，逐步提高学习速度，才能适应不同的请求。因此，现有的虚拟图像显示方式，仍需要大量的样本才能有一个较好的显示状态。

最后，采用AR-HUD技术成像，并非直接体现在挡风玻璃上，即没有很好的结合挡风玻璃本身。HUD界面太小，能够投射的信息过小。而即便增大HUD的面积，因需要特属曲率的玻璃，且曲率要跟随驾驶员的眼睛位置相对运动而产生变化，价格昂贵。

发明内容

基于此，有必要针对现有技术投射虚拟成像信号来辅助驾驶容易造成视野干扰的技术问题，提供一种车辆挡风玻璃图像增强显示方法、电子设备、存储介质及玻璃。

本发明提供一种车辆挡风玻璃图像增强显示方法，包括：

获取车外目标物的目标物位置、以及车内人眼的人眼位置；

根据目标物位置和人眼位置建立经过目标物位置和人眼位置的光线通路；

基于挡风玻璃的位置信息确定所述光线通路与所述挡风玻璃的交点作为所述车外目标物在所述挡风玻璃上的显示位置；

在挡风玻璃的所述显示位置显示关于所述车外目标物的增强效果。

进一步地，所述在挡风玻璃的所述显示位置显示关于所述车外目标物的增强效果，具体包括：

获取所述车外目标物的拍摄图像，对所述拍摄图像进行图像处理得到在所述挡风玻璃上显示的显示图像；

在挡风玻璃的所述显示位置显示所述显示图像。

更进一步地，所述在挡风玻璃的所述显示位置显示所述显示图像，具体包括：

在挡风玻璃的所述显示位置以预设透明度显示所述显示图像。

再进一步地，所述在所述显示位置以预设透明度显示所述显示图像，具体包括：在所述显示位置以预设透明度采用显示颜色显示所述显示图像，所述显示颜色与所述车外目标物的颜色的第一色差小于等于预设第一色差阈值。

再进一步地，所述在挡风玻璃的所述显示位置显示所述显示图像之后，还包括：

如果所述显示图像与挡风玻璃上显示的基本信息图像重叠或部分重叠，则将所述基本信息图像与所述显示图像重叠的部分作为重叠图像，计算所述重叠图像与所述显示图像的第二色差；

如果所述第二色差小于预设第二色差阈值，则增加所述重叠图像的填充色。

再进一步地，所述在挡风玻璃的所述显示位置显示所述显示图像之后，还包括：

如果所述第二色差大于等于预设第二色差阈值，则降低所述基本信息图像的明度，提高所述显示图像的明度和/或饱和度。

更进一步地，所述获取所述车外目标物的拍摄图像，对所述拍摄图像进行图像处理得到在所述挡风玻璃上显示的显示图像，具体包括：

获取所述车外目标物的拍摄图像；

如果检测到所述拍摄图像被障碍物遮挡，则对所述拍摄图像进行补齐操作；

如果所述补齐操作成功，则对补齐后的拍摄图像进行图像处理得到在所述挡风玻璃上显示的显示图像。

更进一步地，所述在挡风玻璃的所述显示位置显示所述显示图像，具体包括：

如果检测到多个车外目标物，且多个所述车外目标物在挡风玻璃的所述显示位置显示的显示图像至少部分重叠，则在挡风玻璃的所述显示位置以预设透明度显示与车辆距离最近的车外目标物的显示图像。

再进一步地，还包括：

如果检测到目标物位置或者人眼位置发生变化，则更新所述光线通路，重新计算所述显示位置，并在挡风玻璃更新后的显示位置显示关于所述车外目标物的增强效果。

再进一步地，所述在挡风玻璃的所述显示位置显示关于所述车外目标物的增强效果，具体包括：

如果所述车外目标物与车辆的距离大于等于预设距离阈值，则在挡风玻璃的所述显示位置显示关于所述车外目标物的增强效果，否则不显示所述车外目标物的增强效果。

再进一步地，所述获取车外目标物的目标物位置，具体包括：

获取车辆的当前车辆地理位置；

如果通过车外目标物识别传感器能识别到当前车辆地理位置预设范围内的车外目标物，则从车外目标物识别传感器获取车外目标物的目标物位置，否则从服务器获取在当前车辆地理位置预设范围内的车外目标物的目标物地理位置及目标物高度，根据目标物地理位置、目标物高度和当前车辆地理位置，确定车外目标物的目标物位置。

本发明提供一种电子设备，包括：

至少一个处理器；以及，

与至少一个所述处理器通信连接的存储器；其中，

所述存储器存储有可被至少一个所述处理器执行的指令，所述指令被至少一个所述处理器执行，以使至少一个所述处理器能够执行如前所述的车辆挡风玻璃图像增强显示方法。

本发明提供一种存储介质，所述存储介质存储计算机指令，当计算机执行所述计算机指令时，用于执行如前所述的车辆挡风玻璃图像增强显示方法的所有步骤。

本发明提供一种车辆挡风玻璃，包括外挡风玻璃、内挡风玻璃、以及在所述外挡风玻璃和所述内挡风玻璃之间的像素层，所述像素层与如前所述的电子设备通信连接，由所述电子设备控制显示。

本发明通过计算车外目标物位置和人眼位置，建立经过目标物位置和人眼位置的光线通路，根据光线通路确定目标物在所述挡风玻璃上的显示位置，并在显示位置显示关于所述车外目标物的增强效果。因此，本发明在对目标物进行增强效果显示以提示驾驶员的同时，并不增加过多额外的信息，避免干扰驾驶员视野。同时本发明提供的车辆挡风玻璃，通过在外挡风玻璃和内挡风玻璃之间设置像素层进行显示，与现有无HUD技术相比，零部件上仅需一层点阵发光层，而与现有配置HUD技术相比，零部件上，无需考虑HUD挡风玻璃曲率的工艺问题，且无需配合HUD投射装置使用，工艺安装上方便，能与挡风玻璃完美融合，无需额外增设的HUD投射装置与特质曲率的HUD挡风玻璃。

附图说明

图1为本发明一种车辆挡风玻璃图像增强显示方法的工作流程图；

图2为本发明一实施例中一种车辆挡风玻璃及光线通路形成示意图；

图3为本发明一实施例一种车辆挡风玻璃图像增强显示方法的工作流程图；

图4为本发明一实施例多个车外目标物检测示意图；

图5为本发明一实施例车外目标物补齐示意图；

图6为本发明一实施例车外目标物与基本信息图像重叠示意图；

图7为本发明最佳实施例一种车辆挡风玻璃图像增强显示方法的工作流程图；

图8为本发明一种电子设备的硬件结构示意图。

具体实施方式

下面结合附图和具体实施例对本发明做进一步详细的说明。

实施例一

如图1所示为本发明一种车辆挡风玻璃图像增强显示方法的工作流程图，包括：

步骤S101，获取车外目标物的目标物位置、以及车内人眼的人眼位置；

步骤S102，根据目标物位置和人眼位置建立经过目标物位置和人眼位置的光线通路；

步骤S103，基于挡风玻璃的位置信息确定所述光线通路与所述挡风玻璃的交点作为所述车外目标物在所述挡风玻璃上的显示位置；

步骤S104，在挡风玻璃的所述显示位置显示关于所述车外目标物的增强效果。

具体来说，本发明可以应用在车辆的电子控制器单元(Electronic ControlUnit，ECU)上。执行步骤S101获取车外目标物的目标物位置、以及车内人眼的人眼位置。如图2所示，车上的外部装设有车外目标物识别传感器4，包括但不限于摄像头、激光雷达、毫米波雷达、温度传感器湿度传感器等。能够识别道路地线，以及路况的交通提示符号及文字。同时还可以使用独立的距离传感器测距，也可以由车外目标物识别传感器本身测距，例如基于摄像头或者激光雷达测距。车外目标物识别传感器用于对车外的目标物进行识别，目标物包括但不交通提示符号及文字。具体的目标物识别及测距可以采用现有的图像识别技术和测距技术得到，从而得到车外目标物的目标物位置。同时，车内装设有至少一个驾驶员人眼识别传感器5，能够识别当前驾驶员人眼位置高度，以及人眼至挡风玻璃的距离，从而得到车内驾驶员人眼的人眼位置。车外传感器实时检测需要识别的目标物的物体样貌，以及被识别目标物距离当前车辆位置的相对高度、相对大小与相对距离。

然后执行步骤S102，如图2所示，模拟形成车内人眼1与车外目标物2之间的光线通路A。再执行步骤S103，根据该光线通路A构建的几何关系，确定光线通路A与挡风玻璃3之间的交点，作为显示位置。具体来说，对于一个车外目标物2，其有多个端点，以每个端点到车内人眼1分别构建多条光线通路A，从而得到车外目标物2多个端点在挡风玻璃上的显示位置，多个显示位置构成显示范围，在该显示范围内显示车外目标物2在挡风玻璃3上的增强效果6。另外，也可以以车外目标物2的中点与车内人眼1构建光线通路A，得到车外目标物2的中点在挡风玻璃上的显示位置，在以显示位置为中点显示车外目标物2在挡风玻璃3上的增强效果6。

具体来说，建立关于车内位置的坐标系，则挡风玻璃所在区域在该坐标系上的区域坐标可以确定为挡风玻璃区域。而由于获取了目标物距离当前车辆位置的相对高度和相对距离，因此能够得到目标物与坐标系原点的相对距离、相对高度，从而得到目标物在车内坐标系中的坐标。同样地，人眼相对于车内人眼识别传感器的位置能够确定，而人眼识别传感器在车内位置是固定的，因此可以将人眼识别传感器识别得到的人眼位置转换为车内坐标系的位置，基于两点，则能建立经过人眼位置和目标物位置的光线通路的直线在车内坐标系中的直线函数。该直线函数与所述挡风玻璃区域的交点即为显示位置。

更具体地，以挡风玻璃的例如左下角端点为原点建立坐标系。从原点沿车辆宽度方向建立x轴，以车辆右方为x轴正方向。从原点沿车辆前进方向建立y轴，以车辆前进方向为y轴正方向。从原点沿车辆高度方向建立z轴，以车辆上方为z轴正方向。确定挡风玻璃在坐标系中的曲面函数f2。确定车外目标物识别传感器相对于原点的坐标为向量

而车外目标物识别传感器到目标物的向量

则原点到目标物的向量

目标物在坐标系中的坐标为

同样地，人眼识别传感器相对于原点的坐标为向量

人眼识别传感器到人眼的向量

则原点到人眼的向量

人眼在坐标系中的坐标为

在坐标系中确定经过

和

的直线函数f1。则f1与f2的交点即为显示位置。

在确定了显示位置后，执行步骤S104，在显示位置显示目标物的增强效果。

具体来说，显示目标物的增强效果可以是通过投影方式，在HUD上投影出目标物的增强效果。也可以采用一种挡风玻璃，所述挡风玻璃包括外挡风玻璃、内挡风玻璃、以及在所述外挡风玻璃和所述内挡风玻璃之间的像素层(Pixel层)。像素层为透明像素层，所述像素层包括多个极小的晶体排列组合而成，每个晶体为一个像素点，每个像素点单独发光显示。优选地，像素层可以为透明有机电激光显示(OrganicLight-EmittingDiode，OLED)膜。透明OLED膜采用非常薄的有机材料涂层和玻璃基板(或柔性有机基板)，当有电流通过时，这些有机材料就会发光，每一个有机材料可以独立的一个像素点独立发光显示。而在无电流通过时，有机材料不发光，形成透明膜。通过外挡风玻璃和内挡风玻璃将透明OLED膜夹在中间，形成挡风玻璃。通过控制中间的透明OLED膜，在显示位置显示目标物的增强效果。挡风玻璃可以为前挡风玻璃也可以为车窗挡风玻璃。优选地，像素层还可以为量子点发光二极管(Quantum Dot Light Emitting Diodes，QLED)、发光二极管(Light-emitting diode，LED)或者液晶显示屏(Liquid Crystal Display，LCD)等可制成透明显示屏幕的基础材质。

本发明通过计算车外目标物位置和人眼位置，建立经过目标物位置和人眼位置的光线通路，根据光线通路确定目标物在所述挡风玻璃上的显示位置，并在显示位置显示关于所述车外目标物的增强效果。因此，本发明在对目标物进行增强效果显示以提示驾驶员的同时，并不增加过多额外的信息，避免干扰驾驶员视野。

实施例二

如图3所示为本发明一实施例中一种车辆挡风玻璃图像增强显示方法的工作流程图，包括：

步骤S301，获取车外目标物的目标物位置、以及车内人眼的人眼位置；

在其中一个实施例中，所述获取车外目标物的目标物位置，具体包括：

获取车辆的当前车辆地理位置；

如果通过车外目标物识别传感器能识别到当前车辆地理位置预设范围内的车外目标物，则从车外目标物识别传感器获取车外目标物的目标物位置，否则从服务器获取在当前车辆地理位置预设范围内的车外目标物的目标物地理位置及目标物高度，根据目标物地理位置、目标物高度和当前车辆地理位置，确定车外目标物的目标物位置。

步骤S302，根据目标物位置和人眼位置建立经过目标物位置和人眼位置的光线通路；

步骤S303，基于挡风玻璃的位置信息确定所述光线通路与所述挡风玻璃的交点作为所述车外目标物在所述挡风玻璃上的显示位置；

步骤S304，获取所述车外目标物的拍摄图像，对所述拍摄图像进行图像处理得到在所述挡风玻璃上显示的显示图像；

在其中一个实施例中，所述获取所述车外目标物的拍摄图像，对所述拍摄图像进行图像处理得到在所述挡风玻璃上显示的显示图像，具体包括：

获取所述车外目标物的拍摄图像；

如果检测到所述拍摄图像被障碍物遮挡，则对所述拍摄图像进行补齐操作；

如果所述补齐操作成功，则对补齐后的拍摄图像进行图像处理得到在所述挡风玻璃上显示的显示图像。

步骤S305，如果所述车外目标物与车辆的距离大于等于预设距离阈值，则执行步骤S306，否则不显示所述车外目标物的增强效果。

步骤S306，在挡风玻璃的所述显示位置显示所述显示图像。

在其中一个实施例中，所述在挡风玻璃的所述显示位置显示所述显示图像，具体包括：

在挡风玻璃的所述显示位置以预设透明度显示所述显示图像。

在其中一个实施例中，所述在所述显示位置以预设透明度显示所述显示图像，具体包括：在所述显示位置以预设透明度采用显示颜色显示所述显示图像，所述显示颜色与所述车外目标物的颜色的第一色差小于等于预设第一色差阈值。

在其中一个实施例中，所述在挡风玻璃的所述显示位置显示所述显示图像，具体包括：

如果检测到多个车外目标物，且多个所述车外目标物在挡风玻璃的所述显示位置显示的显示图像至少部分重叠，则在挡风玻璃的所述显示位置以预设透明度显示与车辆距离最近的车外目标物的显示图像。

步骤S307，如果所述显示图像与挡风玻璃上显示的基本信息图像重叠或部分重叠，则将所述基本信息图像与所述显示图像重叠的部分作为重叠图像，计算所述重叠图像与所述显示图像的第二色差；

步骤S308，如果所述第二色差小于预设第二色差阈值，则增加所述重叠图像的填充色。

步骤S309，如果所述第二色差大于等于预设第二色差阈值，则降低所述基本信息图像的明度，提高所述显示图像的明度和/或饱和度。

步骤S310，如果检测到目标物位置或者人眼位置发生变化，则更新所述光线通路，重新计算所述显示位置，并在挡风玻璃更新后的显示位置显示关于所述车外目标物的增强效果。

具体来说，执行步骤S301获取车外目标物的目标物位置、以及车内人眼的人眼位置。车上的外部装设有车外目标物识别传感器，包括但不限于摄像头、激光雷达、毫米波雷达、温度传感器湿度传感器等。能够识别道路地线，以及路况的交通提示符号及文字。同时还可以使用独立的距离传感器测距，也可以由车外目标物识别传感器本身测距，例如基于摄像头或者激光雷达测距。车外目标物识别传感器用于对车外的目标物进行识别，目标物包括但不交通提示符号及文字。具体的目标物识别及测距可以采用现有的图像识别技术和测距技术得到，从而得到车外目标物的目标物位置。同时，车内装设有至少一个驾驶员人眼识别传感器，能够识别当前驾驶员人眼位置高度，以及人眼至挡风玻璃的距离，从而得到车内驾驶员人眼的人眼位置。车外传感器实时检测需要识别的目标物的物体样貌，以及被识别目标物距离当前车辆位置的相对高度、相对大小与相对距离。

车外目标物的目标物位置优先从车外目标物识别传感器获取。然而，考虑到因不可抵挡因素(比如被体型较大的车辆遮挡，或交通信号牌被弯折等)而不能检测到车外目标物，无法与车外目标物形成完整光路、或切断了光路，因此，优选地，本实施例可以与车联网、云端服务器等服务器端数据相结合。在大数据结合下，在车辆探测器可探测的范围内，若与服务器端大数据所提供的当前车辆地理位置预设范围内的交通信号信息无法匹配的情况下，则根据大数据信息提供的车外目标物的地理位置，确定车外目标物的目标物位置，从而形成光路并显示在挡风玻璃中。若光路恢复，则切回基于以车外目标物识别传感器，例如图像捕捉传感器测量信号形成的光路。预设范围可以为车外目标物识别传感器的可探测范围。具体地，以挡风玻璃的例如左下角端点为原点建立坐标系。从原点沿车辆宽度方向建立x轴，以车辆右方为x轴正方向。从原点沿车辆前进方向建立y轴，以车辆前进方向为y轴正方向。从原点沿车辆高度方向建立z轴，以车辆上方为z轴正方向。确定车辆的当前车辆地理位置所采用的地理位置参考点相对于原点的坐标为向量

一般来说地理位置参考点仅定义二维坐标，即仅确定了x3和y3，而z3则可以为地面相对与原点的坐标。然后基于车外目标物的地理坐标与车辆的当前车辆地理位置能够确定车辆的地理位置参考点到车外目标物的距离向量，该距离向量例如为(bx3，by3)，则结合车外目标物的高度d，可以得到车辆的地理位置参考点到车外目标物的向量

则原点到目标物的向量为

然后执行步骤S302，如图2所示，模拟形成车内人眼1与车外目标物2(即窗外被识别物体)之间的光线通路A。根据该光线通路A构建的几何关系，确定光线通路A与挡风玻璃3之间的交点，作为显示位置。然后执行步骤S304，获取所述车外目标物的拍摄图像，对所述拍摄图像进行图像处理得到在所述挡风玻璃上显示的显示图像。具体来说，对车外目标物识别传感器获取的图像X进行图像预处理变形，将图像X还原成人眼位置应观测到的形变图像Y；经过图像处理后，记为显示图像M，显示图像M映射在挡风玻璃上的大小以及在挡风玻璃上的显示位置，记为区域B。图像处理包括但不限于横向变形，纵向变形，畸变处理，放大缩小、抖动处理等基本图像处理方法。

如图5所示，若出现需要被观测车外目标物2的信号图标被树枝树叶51等非信号类物体遮挡，则记此区域的标记映射在挡风玻璃上的区域为D。

5a.如果因区域D被遮挡的问题，会有不能被传感器识别为交通信号的情形，则不对其进行增强显示。

5b.若被遮挡的区域D被传感器识别为有效信号，则对识别出的车外目标物2的信号，在挡风玻璃中根据判定识别状态，自动补齐被遮盖的区域，得到补齐后的拍摄图像21，再进行增强显示。

具体来说，补齐操作可以采用现有的图像识别的补齐方式实现。例如，对于车外目标物为文字，则识别车外目标物的文字，对拍摄图像的文字缺失部分进行补齐。例如对于道路标识，则当识别到该道路标识时，采用标准的道路标识对拍摄图像的缺失部分进行补齐。

在其中一个实施例中，从服务器获取在当前车辆地理位置预设范围内的车外目标物的相关信息，基于从服务器所获取的车外目标物的相关信息，对通过拍摄得到的车外目标物的拍摄图像进行补齐。

当车外目标物的观测信号首次被车外目标物传感器，例如图像传感器捕捉到时，执行步骤S306，在挡风玻璃上实时显示增强信息，直至车辆与车外目标物的路面垂直距离小于预设距离阈值L1时，则停止增强显示的效果。

在显示位置的增强效果结合被探测车外目标物的信号或文字的形状以及颜色，在区域B进行相似颜色的图像投影发光显示，并在挡风玻璃上形成半透明颜色区域。由于显示位置位于人眼实际观察到的车外目标物的光路上，因此发光的半透明区域与当前人眼观测窗外的物体重叠，形成增强显示的效果，以提示驾驶员接收信息。区域B的显示颜色与述车外目标物的颜色的第一色差小于等于预设第一色差阈值。区域B的显示颜色可以基于RGB色彩空间选择，显示颜色(R1,G1,B1)与车外目标物所检测到的颜色(R0,G0,B0)的空间距离H1小于等于预设第一色差阈值，其中

如图4所示，当有多个车外目标物2，若出现一前一后两个被观测到的车外目标物的信号，分别形成的光路A和光路E在挡风玻璃3上有所重叠，则根据车外目标物传感器判定出的车外目标物的观测信号相对车距的关系，优先增强显示距离车辆近的车外目标物的信号。直至光路A和光路E没有重叠区时，再同时增强显示。

可选地，车辆可有专门的区域C显示当前车辆的基本信息(温度，车速，导航等)。如图6所示，区域C显示基本信息图像，若区域B与区域C显示的图形有形成重叠的部分，则执行步骤S307至步骤S309，采取下述方式进行判断处理：

6a.对比被观测物体与区域C显示中区域B需要发光的颜色的色差，具体可以，计算RGB色彩空间中计算的空间距离H2，其中，

区域B的显示颜色为(R1,G1,B1)，区域C与区域B重叠部分的颜色为(R2,G2,B2)；

6b.若空间距离H2＜第二色差阈值，则将区域C增加半透明的填充色，以区别于被观测信号颜色，并且区域C应在不重叠的其他显示信号中仍旧保持以无透明颜色填充。

6c.若空间距离H2＞第二色差阈值，将区域C的显示明度调低，将区域B的明度与饱和度提高。因区域C与区域B本身都是半透明发光显示，因此在视觉上不会造成冲突。

当驾驶员眼睛移动时，驾驶室内的人眼识别传感器能实时反馈位置变化。同样地，车外目标物，例如信号标志等随车有相对位移运动时，车外目标物识别传感器也实时更新其相对大小与相对距离的变化，并实时发送至控制器中，触发步骤S310，以重新计算光路A，更新图像处理效果获取图像M，进行对挡风玻璃显示的区域B进行更新。

本实施例在车外目标物的光路被遮挡时，从云端获取目标物地理位置，以计算目标物位置，避免光路被遮挡。同时，以透明度显示图像，以提示用户。另外，在显示图像与基本信息图像重叠时，通过调整不同区域的明亮度，来避免视觉冲突。增加了对于车外目标物被遮挡时的补齐操作，以辅助驾驶员驾驶。最后，考虑到多个车外目标物的情况，通过选择距离最近的车外目标物来显示，以避免相互覆盖。

如图7所示为本发明最佳实施例一种车辆挡风玻璃图像增强显示方法的工作流程图，包括：

步骤S701，从人眼位置捕捉模块、外部传感器信号捕捉模块、以及云端服务器获取数据，人眼位置捕捉模块从人眼识别传感器获取数据，外部传感器信号捕捉模块从车外目标物识别传感器获取数据；

步骤S702，进行图像修复判断；

步骤S703，判断计算光路；

步骤S704，图像预处理变形；

步骤S705，挡风玻璃显影位置及颜色判断，然后进行增强显示；

步骤S706，当距离小于L1时，退出增强显示。

实施例三

如图8所示为本发明一种电子设备的硬件结构示意图，包括：

至少一个处理器801；以及，

与至少一个所述处理器801通信连接的存储器802；其中，

所述存储器802存储有可被至少一个所述处理器执行的指令，所述指令被至少一个所述处理器执行，以使至少一个所述处理器能够执行如前所述的车辆挡风玻璃图像增强显示方法。

图8中以一个处理器801为例。

电子设备还可以包括：输入装置803和显示装置804。

处理器801、存储器802、输入装置803及显示装置804可以通过总线或者其他方式连接，图中以通过总线连接为例。

存储器802作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块，如本申请实施例中的车辆挡风玻璃图像增强显示方法对应的程序指令/模块，例如，图1所示的方法流程。处理器801通过运行存储在存储器802中的非易失性软件程序、指令以及模块，从而执行各种功能应用以及数据处理，即实现上述实施例中的车辆挡风玻璃图像增强显示方法。

存储器802可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据车辆挡风玻璃图像增强显示方法的使用所创建的数据等。此外，存储器802可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中，存储器802可选包括相对于处理器801远程设置的存储器，这些远程存储器可以通过网络连接至执行车辆挡风玻璃图像增强显示方法的装置。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

输入装置803可接收输入的用户点击，以及产生与车辆挡风玻璃图像增强显示方法的用户设置以及功能控制有关的信号输入。显示装置804可包括显示屏等显示设备。

在所述一个或者多个模块存储在所述存储器802中，当被所述一个或者多个处理器801运行时，执行上述任意方法实施例中的车辆挡风玻璃图像增强显示方法。

本发明通过计算车外目标物位置和人眼位置，建立经过目标物位置和人眼位置的光线通路，根据光线通路确定目标物在所述挡风玻璃上的显示位置，并在显示位置显示关于所述车外目标物的增强效果。因此，本发明在对目标物进行增强效果显示以提示驾驶员的同时，并不增加过多额外的信息，避免干扰驾驶员视野。

本发明一实施例提供一种存储介质，所述存储介质存储计算机指令，当计算机执行所述计算机指令时，用于执行如前所述的车辆挡风玻璃图像增强显示方法的所有步骤。

如图2所示，本发明一种车辆挡风玻璃3，包括外挡风玻璃31、内挡风玻璃32、以及在所述外挡风玻璃和所述内挡风玻璃之间的像素层33，所述像素层与如前所述的电子设备通信连接，由所述电子设备控制显示。

具体来说，像素层为透明像素层，所述像素层包括多个极小的晶体排列组合而成，每个晶体为一个像素点，每个像素点单独发光显示。优选地，像素层可以为透明有机电激光显示(OrganicLight-EmittingDiode，OLED)膜。透明OLED膜采用非常薄的有机材料涂层和玻璃基板(或柔性有机基板)，当有电流通过时，这些有机材料就会发光，每一个有机材料可以独立的一个像素点独立有电子设备控制发光显示。而在无电流通过时，有机材料不发光，形成透明膜。通过外挡风玻璃和内挡风玻璃将透明OLED膜夹在中间，形成挡风玻璃。通过控制中间的透明OLED膜，在显示位置显示目标物的增强效果。挡风玻璃可以为前挡风玻璃也可以为车窗挡风玻璃。

本发明提供的车辆挡风玻璃，通过在外挡风玻璃和内挡风玻璃之间设置像素层进行显示，与现有无HUD技术相比，零部件上仅需一层点阵发光层，而与现有配置HUD技术相比，零部件上，无需考虑HUD挡风玻璃曲率的工艺问题，且无需配合HUD投射装置使用，工艺安装上方便，能与挡风玻璃完美融合，无需额外增设的HUD投射装置与特质曲率的HUD挡风玻璃。

以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (14)

1.一种车辆挡风玻璃图像增强显示方法，其特征在于，包括：

获取车外目标物的目标物位置、以及车内人眼的人眼位置；

根据目标物位置和人眼位置建立经过目标物位置和人眼位置的光线通路；

基于挡风玻璃的位置信息确定所述光线通路与所述挡风玻璃的交点作为所述车外目标物在所述挡风玻璃上的显示位置；

在挡风玻璃的所述显示位置显示关于所述车外目标物的增强效果。

2.根据权利要求1所述的车辆挡风玻璃图像增强显示方法，其特征在于，所述在挡风玻璃的所述显示位置显示关于所述车外目标物的增强效果，具体包括：

获取所述车外目标物的拍摄图像，对所述拍摄图像进行图像处理得到在所述挡风玻璃上显示的显示图像；

在挡风玻璃的所述显示位置显示所述显示图像。

3.根据权利要求2所述的车辆挡风玻璃图像增强显示方法，其特征在于，所述在挡风玻璃的所述显示位置显示所述显示图像，具体包括：

在挡风玻璃的所述显示位置以预设透明度显示所述显示图像。

4.根据权利要求3所述的车辆挡风玻璃图像增强显示方法，其特征在于，所述在所述显示位置以预设透明度显示所述显示图像，具体包括：在所述显示位置以预设透明度采用显示颜色显示所述显示图像，所述显示颜色与所述车外目标物的颜色的第一色差小于等于预设第一色差阈值。

5.根据权利要求4所述的车辆挡风玻璃图像增强显示方法，其特征在于，所述在挡风玻璃的所述显示位置显示所述显示图像之后，还包括：

如果所述显示图像与挡风玻璃上显示的基本信息图像重叠或部分重叠，则将所述基本信息图像与所述显示图像重叠的部分作为重叠图像，计算所述重叠图像与所述显示图像的第二色差；

如果所述第二色差小于预设第二色差阈值，则增加所述重叠图像的填充色。

6.根据权利要求5所述的车辆挡风玻璃图像增强显示方法，其特征在于，所述在挡风玻璃的所述显示位置显示所述显示图像之后，还包括：

如果所述第二色差大于等于预设第二色差阈值，则降低所述基本信息图像的明度，提高所述显示图像的明度和/或饱和度。

7.根据权利要求2所述的车辆挡风玻璃图像增强显示方法，其特征在于，所述获取所述车外目标物的拍摄图像，对所述拍摄图像进行图像处理得到在所述挡风玻璃上显示的显示图像，具体包括：

获取所述车外目标物的拍摄图像；

如果检测到所述拍摄图像被障碍物遮挡，则对所述拍摄图像进行补齐操作；

如果所述补齐操作成功，则对补齐后的拍摄图像进行图像处理得到在所述挡风玻璃上显示的显示图像。

8.根据权利要求2所述的车辆挡风玻璃图像增强显示方法，其特征在于，所述在挡风玻璃的所述显示位置显示所述显示图像，具体包括：

如果检测到多个车外目标物，且多个所述车外目标物在挡风玻璃的所述显示位置显示的显示图像至少部分重叠，则在挡风玻璃的所述显示位置以预设透明度显示与车辆距离最近的车外目标物的显示图像。

9.根据权利要求1至7任一项所述的车辆挡风玻璃图像增强显示方法，其特征在于，还包括：

如果检测到目标物位置或者人眼位置发生变化，则更新所述光线通路，重新计算所述显示位置，并在挡风玻璃更新后的显示位置显示关于所述车外目标物的增强效果。

10.根据权利要求1至7任一项所述的车辆挡风玻璃图像增强显示方法，其特征在于，所述在挡风玻璃的所述显示位置显示关于所述车外目标物的增强效果，具体包括：

如果所述车外目标物与车辆的距离大于等于预设距离阈值，则在挡风玻璃的所述显示位置显示关于所述车外目标物的增强效果，否则不显示所述车外目标物的增强效果。

11.根据权利要求1至7任一项所述的车辆挡风玻璃图像增强显示方法，其特征在于，所述获取车外目标物的目标物位置，具体包括：

获取车辆的当前车辆地理位置；

如果通过车外目标物识别传感器能识别到当前车辆地理位置预设范围内的车外目标物，则从车外目标物识别传感器获取车外目标物的目标物位置，否则从服务器获取在当前车辆地理位置预设范围内的车外目标物的目标物地理位置及目标物高度，根据目标物地理位置、目标物高度和当前车辆地理位置，确定车外目标物的目标物位置。

12.一种电子设备，其特征在于，包括：

至少一个处理器；以及，

与至少一个所述处理器通信连接的存储器；其中，

所述存储器存储有可被至少一个所述处理器执行的指令，所述指令被至少一个所述处理器执行，以使至少一个所述处理器能够执行如权利要求1至11任一项所述的车辆挡风玻璃图像增强显示方法。

13.一种存储介质，其特征在于，所述存储介质存储计算机指令，当计算机执行所述计算机指令时，用于执行如权利要求1～11任一项所述的车辆挡风玻璃图像增强显示方法的所有步骤。

14.一种车辆挡风玻璃，其特征在于，包括外挡风玻璃、内挡风玻璃、以及在所述外挡风玻璃和所述内挡风玻璃之间的像素层，所述像素层与如权利要求12所述的电子设备通信连接，由所述电子设备控制显示。

Images