CN115118951A - 数据投影方法、装置、存储介质及车辆 - Google Patents
数据投影方法、装置、存储介质及车辆 Download PDFInfo
- Publication number
- CN115118951A CN115118951A CN202210633105.5A CN202210633105A CN115118951A CN 115118951 A CN115118951 A CN 115118951A CN 202210633105 A CN202210633105 A CN 202210633105A CN 115118951 A CN115118951 A CN 115118951A
- Authority
- CN
- China
- Prior art keywords
- color
- projection
- information
- projected
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 34
- 239000003086 colorant Substances 0.000 claims description 32
- 238000013507 mapping Methods 0.000 claims description 31
- 238000005286 illumination Methods 0.000 claims description 29
- 230000003287 optical effect Effects 0.000 claims description 9
- 238000004590 computer program Methods 0.000 claims description 7
- 238000004364 calculation method Methods 0.000 claims description 6
- 230000008859 change Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000004040 coloring Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/24—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view in front of the vehicle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/133—Equalising the characteristics of different image components, e.g. their average brightness or colour balance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/324—Colour aspects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/363—Image reproducers using image projection screens
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Mechanical Engineering (AREA)
- Traffic Control Systems (AREA)
Abstract
本公开涉及一种数据投影方法、装置、存储介质及车辆，该方法包括：获取摄像头采集的车辆前方环境的实景图像；获取至少一个待投影元素和每个待投影元素在实景图像上的区域信息；根据每个待投影元素的所述区域信息，从所述实景图像中确定每个所述区域信息对应的图像区域，计算每个图像区域的颜色信息；根据每个图像区域的颜色信息，确定对应的待投影元素的投影颜色；根据每个待投影元素的投影颜色，将每个待投影元素投影到车辆的挡风玻璃上。本公开能够根据实景图像中的背景颜色，动态调整每个元素的投影颜色，从而始终在挡风玻璃上清晰展示投影的信息。
Description
技术领域
本公开涉及车辆技术领域，具体地，涉及一种数据投影方法、装置、存储介质及车辆。
背景技术
AR-HUD(Augmented Reality Head Up Display，增强现实抬头显示器)技术，通过将导航信息、车速信息等投影到透明的前挡风玻璃上，使得司机能一目了然地知晓上述信息，而不用频繁低头查看仪表盘和导航地图。但是，白天和夜晚、逆光和背光的光线水平差距很大，车外实景也随着行驶过程不断产生变化，如何在挡风玻璃上始终清晰展示上述信息，成为目前AR-HUD技术的难题。
发明内容
本公开的目的是提供一种数据投影方法、装置、存储介质及车辆，以解决现有技术无法始终清晰在挡风玻璃上展示投影信息的问题。
为了实现上述目的，第一方面，本公开提供一种数据投影方法，包括：
获取摄像头采集的车辆前方环境的实景图像；
获取至少一个待投影元素和每个待投影元素在实景图像上的区域信息；
根据每个待投影元素的所述区域信息，从所述实景图像中确定每个所述区域信息对应的图像区域，计算每个图像区域的颜色信息；
根据每个图像区域的颜色信息，确定对应的待投影元素的投影颜色；其中，所述投影颜色与所述颜色信息间的颜色对比度大于预设对比度；
根据每个所述待投影元素的投影颜色，将每个所述待投影元素投影到车辆的挡风玻璃上。
可选地，所述方法还包括：获取光强传感器采集的车辆所在环境的当前光照强度；所述根据每个图像区域的颜色信息，确定对应的待投影元素的投影颜色，包括：
针对每个图像区域，根据所述当前光照强度所处的目标光强范围，和所述图像区域的颜色信息所处的目标颜色范围，从颜色映射表中确定对应于所述目标光强范围和所述目标颜色范围的投影颜色；其中，所述颜色映射表包括在不同光强范围、不同颜色范围下对应的投影颜色。
可选地，所述计算每个图像区域的颜色信息，包括：
针对每个图像区域，根据所述图像区域中每个像素的像素值，计算所述图像区域的均色，作为所述图像区域的颜色信息。
可选地，所述图像区域的均色由所述图像区域在三个颜色通道的亮度均值表示；所述根据每个图像区域的颜色信息，确定对应的待投影元素的投影颜色，包括：
确定对颜色立方体进行切割得到的多个切割立方体，其中，所述颜色立方体是根据三个颜色通道的亮度范围组成的立方体；
根据所述图像区域在所述三个颜色通道上的亮度均值，从所述多个切割立方体中确定对应的目标切割立方体；
根据所述图像区域对应的目标切割立方体，从颜色映射表中确定对应于所述目标切割立方体的投影颜色；其中，所述颜色映射表包括在不同切割立方体表征的颜色范围下对应的投影颜色。
可选地，所述至少一个待投影元素包括根据道路元素的识别信息、导航信息、车身运行信息以及多媒体信息中的至少一项信息生成的元素。
第二方面，本公开提供一种数据投影装置，包括：
实景图像获取模块，用于获取摄像头采集的车辆前方环境的实景图像；
投影元素确定模块，用于获取至少一个待投影元素和每个待投影元素在实景图像上的区域信息；
背景颜色计算模块，用于根据每个待投影元素的所述区域信息，从所述实景图像中确定每个所述区域信息对应的图像区域，计算每个图像区域的颜色信息；
投影颜色确定模块，用于根据每个图像区域的颜色信息，确定对应的待投影元素的投影颜色；其中，所述投影颜色与所述颜色信息间的颜色对比度大于预设对比度；
投影模块，用于根据每个所述待投影元素的投影颜色，将每个所述待投影元素投影到车辆的挡风玻璃上。
可选地，所述装置还包括：光照强度获取模块，用于获取光强传感器采集的车辆所在环境的当前光照强度；
其中，所述投影颜色确定模块用于，针对每个图像区域，根据所述当前光照强度所处的目标光强范围，和所述图像区域的颜色信息所处的目标颜色范围，从颜色映射表中确定对应于所述目标光强范围和所述目标颜色范围的投影颜色；其中，所述颜色映射表包括在不同光强范围、不同颜色范围下对应的投影颜色。
第三方面，本公开提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现第一方面所述方法的步骤。
第四方面，本公开提供一种车辆，包括：
摄像头，用于采集车辆前方环境的实景图像；
光机，用于将每个待投影元素投影到车辆的挡风玻璃上；
处理器，用于执行存储器中的计算机程序，以实现第一方面所述方法的步骤。
可选地，还包括：光强传感器，用于采集车辆所在环境的当前光照强度。
在上述方案中，利用摄像头采集车辆前方环境的实景图像，确定实景图像中作为待投影元素的投影背景的区域的颜色信息，根据该区域的颜色信息确定对应的待投影元素的投影颜色，使得每个待投影元素的投影颜色随车外实景动态变化，且每个元素的投影能够始终和车外实景保持高对比度，无论车外实景如何变化，挡风玻璃上展示的信息始终清晰可见。
本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本公开的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本公开，但并不构成对本公开的限制。在附图中：
图1示出了一示例性实施例提供的数据投影方法的流程图；
图2示出了投影信息列表的示意图；
图3示出了一示例性实施例中步骤S104的具体实施方式的流程图；
图4示出了按照本公开提供的数据投影方法将多个待投影元素投影到挡风玻璃上的示意图；
图5示出了一示例性实施例提供的数据投影装置的框图；
图6示出了一示例性实施例提供的车辆的框图。
具体实施方式
以下结合附图对本公开的具体实施方式进行详细说明。应当理解的是，此处所描述的具体实施方式仅用于说明和解释本公开，并不用于限制本公开。
需要说明的是，本公开中所有获取信号、信息或数据的动作都是在遵照所在地国家相应的数据保护法规政策的前提下，并获得由相应装置所有者给予授权的情况下进行的。
经研究发现，白天和夜晚、逆光和背光的光线水平差距很大，且车外实景随着行驶过程不断产生变化，导致挡风玻璃上投影的信息无法始终清晰可见。例如，当需要在车辆的前挡风玻璃的右上角位置投影一个颜色为白色的车速信息时，如果挡风玻璃上此位置的实景为绿色的树木，则在投影后，形成背景为绿色、车速信息为白色的数据投影，由于绿色与白色的颜色对比度较高，所以车速信息易于辨别，但随着车辆继续行驶，挡风玻璃上此位置的实景由绿色的树木变化为白色的天空，则在投影后，形成背景为白色、车速信息也为白色的数据投影，车速信息与背景的天空融为一体，导致车速信息不易被辨别。
由此，本公开实施例提供一种数据投影方法，该方法利用摄像头采集车辆前方环境的实景图像，根据实景图像中作为待投影元素的投影背景的区域的颜色信息来确定每个待投影元素的投影颜色，使得每个待投影元素的投影颜色随车外实景变化，且每个元素的投影能够始终和车外实景保持高对比度，无论车外实景如何变化，挡风玻璃上展示的信息始终清晰可见。
图1示出了一示例性实施例提供的数据投影方法的流程图。如图1所示，该方法包括：
S101，获取摄像头采集的车辆前方环境的实景图像。
车辆上设置有朝向车辆行驶方向布置的摄像头，该摄像头用于采集车辆前方环境的实景图像。在车辆行驶过程中，实时获取摄像头采集的实景图像。
S102，获取至少一个待投影元素和每个待投影元素在实景图像上的区域信息。
在一些实施例中，车辆的AR-HUD功能需要融合以下的一种或多种信息：道路元素的识别信息，对前方实景中ROI(region of interest，感兴趣区域)进行扫描识别，获取车道线、车辆、行人、非机动车、交通标志、红绿灯等道路物体；导航信息，包含变道、转弯、离目的地距离、抵达目的地的估计剩余时间等，以及导航指示信息如路况、路口可通行车道信息、沿途POI(Point of Interest，兴趣点)、电子眼等信息；车身运行信息，如车速、转速、水温、电压、胎压监控、盲区提示等信息；多媒体信息，如来电、蓝牙、调频(FM)广播等信息。
根据道路元素的识别信息、导航信息、车身运行信息以及多媒体信息中的至少一项信息生成待投影元素，获得至少一个待投影元素，每个待投影元素可以是文字，如“12公里”、“27分钟”、“13:50到达”等，或者根据信息生成的图形指示，如转弯或道路变道的箭头指示等。
进一步地，获取每个待投影元素在实景图像上的区域信息，每个区域信息包括边缘起始位置、高度和宽度。在具体的实施例中，获取投影信息列表，图2示出了投影信息列表的一种示意图，如图2所示，假设获取M个待投影元素，则该投影信息列表中包括M个待投影元素分别在实景图像上对应的区域信息。
示例性地，待投影元素的区域信息按照以下示例进行表示：
Left＝806；Top＝0；Height＝104；Width＝100；
则该待投影元素的区域信息为：以实景图像的从左到右的第806个像素作为左边缘的起始，且以实景图像的从上到下的第0个像素作为上边缘的起始，高度为104个像素，宽度为100个像素。
在具体实现时，获取至少一个待投影元素和投影信息列表，解析该投影信息列表，获得每个待投影元素在实景图像上的区域信息。
需要说明的是，步骤S101和S102并不限定必须按照附图所示的先后顺序执行，S101和S102可以同时执行，也可以S102先于S101执行。
S103，根据每个待投影元素的区域信息，从该实景图像中确定每个区域信息对应的图像区域，计算每个图像区域的颜色信息。
根据每个待投影元素的区域信息，针对每个待投影元素，从摄像头采集的实景图像中确定该待投影元素的区域信息对应的图像区域，计算该图像区域的颜色信息。每个待投影元素分别对应该实景图像上的一个图像区域，最终计算得到每个待投影元素对应的图像区域的颜色信息。
沿用上述示例，以该实景图像的从左到右的第806个像素作为左边缘的起始，以该实景图像的从上到下的第0个像素作为上边缘的起始，确定高度为104个像素、宽度为100个像素的区域，作为该待投影元素的区域信息对应的图像区域。
S104，根据每个图像区域的颜色信息，确定对应的待投影元素的投影颜色；其中，该投影颜色与该图像区域的颜色信息间的颜色对比度大于预设对比度。
假设要将某待投影元素投影在挡风玻璃上，则该待投影元素会被投影在挡风玻璃上的某个对应的投影区域中，该投影区域与实景图像中的一个图像区域对应，从挡风玻璃上观察到的该投影区域内的车外实景与该图像区域的内容一致，所以该图像区域的颜色信息可以表征该待投影元素被投影到挡风玻璃时的背景颜色，从而本公开根据该图像区域的颜色信息，即该待投影元素投影到挡风玻璃时的背景颜色，来确定该待投影元素的投影颜色。基于上述步骤，可以实时根据每个图像区域的颜色信息，动态调整每个待投影元素的投影颜色，这样，在为每个待投影元素着色相应的投影颜色后，再投影到挡风玻璃上，挡风玻璃上投影的信息能够与车外实景呈高对比度，从而确保投影的信息易被司机清楚分辨。
示例性地，可以采用WCAG(Web Content Accessibility Guidelines，网页内容无障碍指南)标准中提供的颜色对比度计算方式来确定两个不同颜色之间的颜色对比度，其中，每个待投影元素的投影颜色与对应图像区域的颜色信息间的颜色对比度应当大于预设对比度，例如该预设对比度可以设置为WCAG2.0 A级的3:1对比度。
在具体实现时，预先设计颜色映射表，该颜色映射表包括在不同颜色范围下对应的投影颜色，每个颜色范围内涵盖颜色相近的多种颜色，每个颜色范围所对应的投影颜色应当与该颜色范围所表征的颜色呈高对比度，如大于预设对比度。可选地，可以由设计人员预先针对不同颜色范围表征的颜色，从与该颜色的颜色对比度大于预设对比度的多种颜色中选择一种，作为该颜色对应的投影颜色，从而形成颜色映射表，并存储该颜色映射表。
在上述步骤中，获取颜色映射表，针对每个图像区域的颜色信息，确定该颜色信息所处的目标颜色范围，从颜色映射表中查找对应于该目标颜色范围的投影颜色，作为对应的待投影元素的投影颜色。
S105，根据每个待投影元素的投影颜色，将每个待投影元素投影到车辆的挡风玻璃上。
根据每个待投影元素的投影颜色，通过光机将每个待投影元素投影到车辆的挡风玻璃上。
在一种具体实施方式中，在获得每个待投影元素的投影颜色后，为每个待投影元素着色对应的投影颜色，得到着色的待投影元素，然后根据所有着色的待投影元素生成投影图像，将该投影图像发送到光机，并指示光机将该投影图像投影到车辆的挡风玻璃上。光机在接收到该投影图像后，将该投影图像投影到车辆的挡风玻璃上，从而在挡风玻璃上展示每个待投影元素的信息。
上述方案能够实现根据每个待投影元素在挡风玻璃上的对应投影区域的实景动态调整投影颜色，从而无论车外实景如何变化，所投影的每个元素的信息始终清晰可见。例如，当需要在挡风玻璃的右上角位置投影一个车速信息的元素时，确定该元素在摄像头采集的实景图像上的图像区域，假设挡风玻璃上此位置的实景为绿色的树木，那么计算出的该图像区域的颜色信息也应当为绿色，于是可根据该图像区域的颜色信息自动确定对应的投影颜色，如投影颜色为白色，则在投影后，形成背景为绿色、车速信息为白色的投影，由于绿色与白色的颜色对比度较高，所以车速信息易于辨别。随着车辆继续行驶，挡风玻璃上此位置的实景由绿色的树木变化为白色的天空，那么计算出的该图像区域的颜色信息也应当变为白色，于是根据该图像区域的颜色信息重新确定新的投影颜色，如新的投影颜色为深蓝色，则在投影后，形成背景为白色、车速信息为深蓝色的投影，由于深蓝色与白色的颜色对比度较高，所以车速信息易于辨别。
从而，上述方案能够始终在挡风玻璃上清晰展示出道路元素的识别信息、导航信息、车身运行信息以及多媒体信息等各种信息，司机非常容易识别出投影的信息，提高了驾驶安全性和友好度。
进一步地，在实际应用中，不同光照条件下颜色会发生变化，如果在设计颜色映射表时只考虑车外实景的颜色信息与投影颜色间的对应关系，一旦车辆所在环境具有强烈光照，投影后的颜色会在车辆所在环境的光照条件下发生颜色变化，变化后的颜色与对应投影区域的实景之间的颜色对比度将不能达到WCAG2.0 A级的3:1对比度。因此，在确定投影颜色时还需要考虑到光照强度的因素对颜色变化的影响。
在一示例性实施例中，车辆上设置有光强传感器，该光强传感器用于采集车辆所在环境的当前光照强度，该数据投影方法还包括：获取光强传感器采集的当前光照强度。在步骤S104中，根据当前光照强度和每个图像区域的颜色信息，确定对应的待投影元素的投影颜色。
在具体实现时，该颜色映射表包括在不同光强范围、不同颜色范围下对应的投影颜色，在步骤S104中，确定当前光照强度所处的目标光强范围，以及针对每个图像区域的颜色信息确定该颜色信息所处的目标颜色范围，根据该目标光强范围和目标颜色范围，从颜色映射表中查找并确定对应于该目标光强范围和该目标颜色范围的投影颜色。
可选地，可以由设计人员预先针对不同颜色范围表征的颜色，基于该颜色在不同光强范围下的颜色变化，从与变化后的颜色的颜色对比度大于预设对比度的多种颜色中选择一种，作为该变化后的颜色对应的投影颜色，从而得到不同颜色范围、不同光强范围下对应的投影颜色，进而形成颜色映射表，并存储该颜色映射表。由于该投影颜色是在考虑了光照强度的因素对颜色变化的影响得到的，在投影后，基于当前光照强度的作用发生颜色变化，变化后的颜色依然能够与对应投影区域的实景达到WCAG2.0 A级的3:1对比度。
在可选的实施例中，在步骤S103中，针对每个图像区域，根据该图像区域中每个像素的像素值，计算该图像区域的均色，作为该图像区域的颜色信息。示例性地，针对RGB实景图像，RGB实景图像上每个像素的像素值包括R(红色)、G(绿色)、B(蓝色)三个颜色通道的亮度值，每个像素的颜色是由R、G、B三个颜色通道上的亮度混合得到，每个颜色通道各有256级亮度，用数字表示为0～255，根据图像区域中每个像素的像素值，计算该图像区域分别在R、G、B三个颜色通道上的亮度均值，三个颜色通道上的亮度均值组成的颜色为该图像区域的均色，将这三个颜色通道上的亮度均值作为该图像区域的颜色信息。
基于上述实施例，预先构建颜色立方体，该颜色立方体是根据三个颜色通道的亮度范围组成的立方体，例如，颜色立方体中X轴方向表示R通道的颜色范围，Y轴方向表示G通道的颜色范围，Z轴方向表示B通道的颜色范围，每个颜色通道的亮度范围均为0～255。然后对该颜色立方体进行切割，每个方向上按照等间隔各进行多次切割，得到多个小的立方体，记为切割立方体，每个切割立方体内的颜色比较相近，切割立方体的边界可以作为一个颜色范围的边界。
可选地，构建颜色立方体时，可以将每个方向上的亮度范围除以256，从而将每个方向上的亮度范围归一化到0～1的范围。示例性地，对颜色立方体的每个方向以0.2的间隔进行切割，每个方向上各进行五次切割，总共可得到125个切割立方体。
图3示出了一示例性实施例中步骤S104的具体实施方式的流程图。如图3所示，步骤S104包括：
S201，确定对颜色立方体进行切割得到的多个切割立方体，其中，该颜色立方体是根据三个颜色通道的亮度范围组成的立方体。
其中，每个切割立方体用于表征一个颜色范围。
S202，根据图像区域在三个颜色通道上的亮度均值，从多个切割立方体中确定对应的目标切割立方体。
S203，根据图像区域对应的目标切割立方体，从颜色映射表中确定对应于该目标切割立方体的投影颜色。
其中，颜色映射表包括在不同切割立方体表征的颜色范围下对应的投影颜色。这样，根据颜色立方体能够方便快捷地确定出每个图像区域对应的颜色范围，从而快速确定待投影元素的投影颜色。
在一示例性实施例中，在步骤S104中，根据当前光照强度所处的目标光强范围和图像区域对应的目标切割立方体，从颜色映射表中确定对应于该目标光强范围和该目标切割立方体的投影颜色；其中，颜色映射表包括在不同光强范围、不同切割立方体表征的颜色范围下对应的投影颜色。
图4示出了按照本公开提供的数据投影方法将多个待投影元素投影到挡风玻璃上的示意图。图4中，每个虚线框内表示一个投影到挡风玻璃上的元素，每个元素的投影颜色是根据车辆所在环境的当前光照强度和对应投影区域的实景颜色动态调整的，同一元素的投影颜色相同，不同元素的投影颜色视对应投影区域的实景颜色可能相同或者不同。
图5示出了一示例性实施例提供的数据投影装置的框图。如图5所示，该数据投影装置300包括：
实景图像获取模块301，用于获取摄像头采集的车辆前方环境的实景图像；
投影元素确定模块302，用于获取至少一个待投影元素和每个待投影元素在实景图像上的区域信息；
背景颜色计算模块303，用于根据每个待投影元素的所述区域信息，从所述实景图像中确定每个所述区域信息对应的图像区域，计算每个图像区域的颜色信息；
投影颜色确定模块304，用于根据每个图像区域的颜色信息，确定对应的待投影元素的投影颜色；其中，所述投影颜色与所述颜色信息间的对比度大于预设对比度；
投影模块305，用于根据每个所述待投影元素的投影颜色，将每个所述待投影元素投影到车辆的挡风玻璃上。
可选地，所述装置还包括：光照强度获取模块，用于获取光强传感器采集的车辆所在环境的当前光照强度。
其中，投影颜色确定模块304用于，针对每个图像区域，根据所述当前光照强度所处的目标光强范围，和所述图像区域的颜色信息所处的目标颜色范围，从颜色映射表中确定对应于所述目标光强范围和所述目标颜色范围的投影颜色；其中，所述颜色映射表包括在不同光强范围、不同颜色范围下对应的投影颜色。
可选地，背景颜色计算模块303用于，针对每个图像区域，根据所述图像区域中每个像素的像素值，计算所述图像区域的均色，作为所述图像区域的颜色信息。
可选地，所述图像区域的均色由所述图像区域在三个颜色通道的亮度均值表示；投影颜色确定模块304包括：
立方体获取模块，用于确定对颜色立方体进行切割得到的多个切割立方体，其中，所述颜色立方体是根据三个颜色通道的亮度范围组成的立方体；
立方体确定模块，用于根据所述图像区域在所述三个颜色通道上的亮度均值，从所述多个切割立方体中确定对应的目标切割立方体；
颜色查找模块，用于根据所述图像区域对应的目标切割立方体，从颜色映射表中确定对应于所述目标切割立方体的投影颜色；其中，所述颜色映射表包括在不同切割立方体表征的颜色范围下对应的投影颜色。
可选地，所述至少一个待投影元素包括根据道路元素的识别信息、导航信息、车身运行信息以及多媒体信息中的至少一项信息生成的元素。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
图6是根据一示例性实施例示出的一种车辆400的框图。如图6所示，该车辆400可以包括：处理器401，存储器402，摄像头403，光机404。该车辆400还可以包括光强传感器405，多媒体组件406，输入/输出(I/O)接口407，以及通信组件408中的一者或多者。
其中，摄像头403用于采集车辆前方环境的实景图像，并将采集的实景图像发送给处理器401，光强传感器405用于采集车辆所在环境的当前光照强度，并将采集的当前光照强度发送给处理器401。光机404用于将每个待投影元素投影到车辆400的挡风玻璃上，具体地，可用于接收处理器401发送的针对每个待投影元素着色相应的投影颜色后生成的投影图像，并将该投影图像投影到车辆400的挡风玻璃上。
其中，处理器401用于读取存储器402中存储的计算机程序，以实现上述的数据投影方法中的全部或部分步骤。存储器402用于存储各种类型的数据以支持在该车辆400的操作，这些数据例如可以包括用于在该车辆400上操作的任何应用程序或方法的指令，以及应用程序相关的数据，例如联系人数据、收发的消息、图片、音频、视频、道路元素的识别信息、导航信息、车身运行信息以及多媒体信息等等。该存储器402可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，例如静态随机存取存储器(Static Random AccessMemory，简称SRAM)，电可擦除可编程只读存储器(Electrically Erasable ProgrammableRead-Only Memory，简称EEPROM)，可擦除可编程只读存储器(Erasable ProgrammableRead-Only Memory，简称EPROM)，可编程只读存储器(Programmable Read-Only Memory，简称PROM)，只读存储器(Read-Only Memory，简称ROM)，磁存储器，快闪存储器，磁盘或光盘。
多媒体组件406可以包括屏幕和音频组件。其中屏幕例如可以是触摸屏，音频组件用于输出和/或输入音频信号。
I/O接口407为处理器401和其他接口模块之间提供接口，上述其他接口模块可以是按钮等。这些按钮可以是虚拟按钮或者实体按钮。
通信组件408用于该车辆400进行有线或无线通信。无线通信，例如Wi-Fi，蓝牙，FM广播，近场通信(Near Field Communication，简称NFC)，2G、3G、4G、NB-IOT、eMTC、或其他5G等等，或它们中的一种或几种的组合，在此不做限定。因此相应的该通信组件408可以包括：Wi-Fi模块，蓝牙模块，NFC模块等等。
在另一示例性实施例中，还提供了一种包括计算机程序的计算机可读存储介质，该计算机程序被处理器执行时实现上述的数据投影方法的步骤。例如，该计算机可读存储介质可以为上述包括计算机程序的存储器402，上述计算机程序可由车辆400的处理器401执行以完成上述的数据投影方法。
以上结合附图详细描述了本公开的优选实施方式，但是，本公开并不限于上述实施方式中的具体细节，在本公开的技术构思范围内，可以对本公开的技术方案进行多种简单变型，这些简单变型均属于本公开的保护范围。
另外需要说明的是，在上述具体实施方式中所描述的各个具体技术特征，在不矛盾的情况下，可以通过任何合适的方式进行组合。为了避免不必要的重复，本公开对各种可能的组合方式不再另行说明。
此外，本公开的各种不同的实施方式之间也可以进行任意组合，只要其不违背本公开的思想，其同样应当视为本公开所公开的内容。
Claims (10)
1.一种数据投影方法，其特征在于，包括：
获取摄像头采集的车辆前方环境的实景图像；
获取至少一个待投影元素和每个待投影元素在实景图像上的区域信息；
根据每个待投影元素的所述区域信息，从所述实景图像中确定每个所述区域信息对应的图像区域，计算每个图像区域的颜色信息；
根据每个图像区域的颜色信息，确定对应的待投影元素的投影颜色；其中，所述投影颜色与所述颜色信息间的颜色对比度大于预设对比度；
根据每个所述待投影元素的投影颜色，将每个所述待投影元素投影到车辆的挡风玻璃上。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
获取光强传感器采集的车辆所在环境的当前光照强度；
所述根据每个图像区域的颜色信息，确定对应的待投影元素的投影颜色，包括：
针对每个图像区域，根据所述当前光照强度所处的目标光强范围，和所述图像区域的颜色信息所处的目标颜色范围，从颜色映射表中确定对应于所述目标光强范围和所述目标颜色范围的投影颜色；其中，所述颜色映射表包括在不同光强范围、不同颜色范围下对应的投影颜色。
3.根据权利要求1所述的方法，其特征在于，所述计算每个图像区域的颜色信息，包括：
针对每个图像区域，根据所述图像区域中每个像素的像素值，计算所述图像区域的均色，作为所述图像区域的颜色信息。
4.根据权利要求3所述的方法，其特征在于，所述图像区域的均色由所述图像区域在三个颜色通道的亮度均值表示；所述根据每个图像区域的颜色信息，确定对应的待投影元素的投影颜色，包括：
确定对颜色立方体进行切割得到的多个切割立方体，其中，所述颜色立方体是根据三个颜色通道的亮度范围组成的立方体；
根据所述图像区域在所述三个颜色通道上的亮度均值，从所述多个切割立方体中确定对应的目标切割立方体；
根据所述图像区域对应的目标切割立方体，从颜色映射表中确定对应于所述目标切割立方体的投影颜色；其中，所述颜色映射表包括在不同切割立方体表征的颜色范围下对应的投影颜色。
5.根据权利要求1-4任一项所述的方法，其特征在于，所述至少一个待投影元素包括根据道路元素的识别信息、导航信息、车身运行信息以及多媒体信息中的至少一项信息生成的元素。
6.一种数据投影装置，其特征在于，包括：
实景图像获取模块，用于获取摄像头采集的车辆前方环境的实景图像；
投影元素确定模块，用于获取至少一个待投影元素和每个待投影元素在实景图像上的区域信息；
背景颜色计算模块，用于根据每个待投影元素的所述区域信息，从所述实景图像中确定每个所述区域信息对应的图像区域，计算每个图像区域的颜色信息；
投影颜色确定模块，用于根据每个图像区域的颜色信息，确定对应的待投影元素的投影颜色；其中，所述投影颜色与所述颜色信息间的颜色对比度大于预设对比度；
投影模块，用于根据每个所述待投影元素的投影颜色，将每个所述待投影元素投影到车辆的挡风玻璃上。
7.根据权利要求6所述的装置，其特征在于，所述装置还包括：光照强度获取模块，用于获取光强传感器采集的车辆所在环境的当前光照强度；
其中，所述投影颜色确定模块用于，针对每个图像区域，根据所述当前光照强度所处的目标光强范围，和所述图像区域的颜色信息所处的目标颜色范围，从颜色映射表中确定对应于所述目标光强范围和所述目标颜色范围的投影颜色；其中，所述颜色映射表包括在不同光强范围、不同颜色范围下对应的投影颜色。
8.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1-5中任一项所述方法的步骤。
9.一种车辆，其特征在于，包括：
摄像头，用于采集车辆前方环境的实景图像；
光机，用于将每个待投影元素投影到车辆的挡风玻璃上；
处理器，用于执行存储器中的计算机程序，以实现权利要求1-5中任一项所述方法的步骤。
10.根据权利要求9所述的车辆，其特征在于，还包括：
光强传感器，用于采集车辆所在环境的当前光照强度。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210633105.5A CN115118951A (zh) | 2022-06-06 | 2022-06-06 | 数据投影方法、装置、存储介质及车辆 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210633105.5A CN115118951A (zh) | 2022-06-06 | 2022-06-06 | 数据投影方法、装置、存储介质及车辆 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115118951A true CN115118951A (zh) | 2022-09-27 |
Family
ID=83326560
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210633105.5A Pending CN115118951A (zh) | 2022-06-06 | 2022-06-06 | 数据投影方法、装置、存储介质及车辆 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115118951A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116095289A (zh) * | 2023-02-06 | 2023-05-09 | 江苏泽景汽车电子股份有限公司 | Hud显示方法、装置及存储介质 |
Citations (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06211070A (ja) * | 1992-11-27 | 1994-08-02 | Nippondenso Co Ltd | 自動車用虚像表示装置 |
| JP2006036166A (ja) * | 2004-07-30 | 2006-02-09 | Nippon Seiki Co Ltd | 車両用表示装置 |
| JP2009063757A (ja) * | 2007-09-05 | 2009-03-26 | Calsonic Kansei Corp | ヘッドアップディスプレイ |
| JP2015123761A (ja) * | 2013-12-25 | 2015-07-06 | 三菱電機株式会社 | 表示制御装置および表示システム |
| CN104833367A (zh) * | 2015-05-11 | 2015-08-12 | 京东方科技集团股份有限公司 | 车载投影系统 |
| CN105799513A (zh) * | 2014-12-31 | 2016-07-27 | 比亚迪股份有限公司 | 车载抬头显示系统及其用户界面投影显示方法 |
| CN106199971A (zh) * | 2016-08-30 | 2016-12-07 | 上海丹诺西诚智能科技有限公司 | 用于抬头显示器的显示图像颜色自适应方法及装置 |
| US20170104968A1 (en) * | 2015-10-09 | 2017-04-13 | Panasonic Intellectual Property Management Co., Ltd. | Display control device, projection device, and non-transitory storage medium |
| CN107851184A (zh) * | 2015-07-28 | 2018-03-27 | 苹果公司 | 用于光和图像投影的系统和方法 |
| CN108322719A (zh) * | 2018-02-12 | 2018-07-24 | 京东方科技集团股份有限公司 | 抬头显示系统及抬头显示方法、行驶装置 |
| JP2018149884A (ja) * | 2017-03-10 | 2018-09-27 | アルパイン株式会社 | ヘッドアップディスプレイ装置及び表示制御方法 |
| US20190004313A1 (en) * | 2015-12-24 | 2019-01-03 | Kyocera Corporation | Vehicular head-up display system |
| EP3425617A1 (en) * | 2017-07-07 | 2019-01-09 | Ricoh Company, Limited | Image processing apparatus, display system, image processing method, and program |
| CN109479125A (zh) * | 2016-07-14 | 2019-03-15 | 三星电子株式会社 | 具有增强的颜色和对比度的投影系统 |
| JP2019059248A (ja) * | 2016-03-28 | 2019-04-18 | マクセル株式会社 | ヘッドアップディスプレイ装置 |
| US20210162924A1 (en) * | 2018-08-30 | 2021-06-03 | Jvckenwood Corporation | Display apparatus, display method, and program |
| CN113866983A (zh) * | 2021-09-27 | 2021-12-31 | 北京乐驾科技有限公司 | 抬头显示装置、抬头显示装置的显示方法 |
| CN113870219A (zh) * | 2021-09-27 | 2021-12-31 | 歌尔科技有限公司 | 投影字体颜色选择方法、装置、电子设备及存储介质 |
| CN114167613A (zh) * | 2021-12-07 | 2022-03-11 | 芜湖汽车前瞻技术研究院有限公司 | 抬头显示器的控制方法、装置、设备和存储介质 |
-
2022
- 2022-06-06 CN CN202210633105.5A patent/CN115118951A/zh active Pending
Patent Citations (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06211070A (ja) * | 1992-11-27 | 1994-08-02 | Nippondenso Co Ltd | 自動車用虚像表示装置 |
| JP2006036166A (ja) * | 2004-07-30 | 2006-02-09 | Nippon Seiki Co Ltd | 車両用表示装置 |
| JP2009063757A (ja) * | 2007-09-05 | 2009-03-26 | Calsonic Kansei Corp | ヘッドアップディスプレイ |
| JP2015123761A (ja) * | 2013-12-25 | 2015-07-06 | 三菱電機株式会社 | 表示制御装置および表示システム |
| CN105799513A (zh) * | 2014-12-31 | 2016-07-27 | 比亚迪股份有限公司 | 车载抬头显示系统及其用户界面投影显示方法 |
| CN104833367A (zh) * | 2015-05-11 | 2015-08-12 | 京东方科技集团股份有限公司 | 车载投影系统 |
| CN107851184A (zh) * | 2015-07-28 | 2018-03-27 | 苹果公司 | 用于光和图像投影的系统和方法 |
| US20170104968A1 (en) * | 2015-10-09 | 2017-04-13 | Panasonic Intellectual Property Management Co., Ltd. | Display control device, projection device, and non-transitory storage medium |
| US20190004313A1 (en) * | 2015-12-24 | 2019-01-03 | Kyocera Corporation | Vehicular head-up display system |
| JP2019059248A (ja) * | 2016-03-28 | 2019-04-18 | マクセル株式会社 | ヘッドアップディスプレイ装置 |
| CN109479125A (zh) * | 2016-07-14 | 2019-03-15 | 三星电子株式会社 | 具有增强的颜色和对比度的投影系统 |
| CN106199971A (zh) * | 2016-08-30 | 2016-12-07 | 上海丹诺西诚智能科技有限公司 | 用于抬头显示器的显示图像颜色自适应方法及装置 |
| JP2018149884A (ja) * | 2017-03-10 | 2018-09-27 | アルパイン株式会社 | ヘッドアップディスプレイ装置及び表示制御方法 |
| EP3425617A1 (en) * | 2017-07-07 | 2019-01-09 | Ricoh Company, Limited | Image processing apparatus, display system, image processing method, and program |
| CN108322719A (zh) * | 2018-02-12 | 2018-07-24 | 京东方科技集团股份有限公司 | 抬头显示系统及抬头显示方法、行驶装置 |
| US20210162924A1 (en) * | 2018-08-30 | 2021-06-03 | Jvckenwood Corporation | Display apparatus, display method, and program |
| CN113866983A (zh) * | 2021-09-27 | 2021-12-31 | 北京乐驾科技有限公司 | 抬头显示装置、抬头显示装置的显示方法 |
| CN113870219A (zh) * | 2021-09-27 | 2021-12-31 | 歌尔科技有限公司 | 投影字体颜色选择方法、装置、电子设备及存储介质 |
| CN114167613A (zh) * | 2021-12-07 | 2022-03-11 | 芜湖汽车前瞻技术研究院有限公司 | 抬头显示器的控制方法、装置、设备和存储介质 |
Non-Patent Citations (2)
| Title |
|---|
| JOSEPH L. GABBARD, ET AL: "A Perceptual Color-Matching Method for Examining Color Blending in Augmented Reality Head-Up Display Graphics", IEEE TRANSACTIONS ON VISUALIZATION AND COMPUTER GRAPHICS * |
| 胡宇: "车载抬头显示器系统的研究", 《中国优秀硕士学位论文全文数据库 工程科技Ⅱ辑》 * |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116095289A (zh) * | 2023-02-06 | 2023-05-09 | 江苏泽景汽车电子股份有限公司 | Hud显示方法、装置及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101353052B1 (ko) | 교통표지판 인식을 위한 차량용 영상인식시스템 | |
| US9818206B2 (en) | Display device | |
| US20050134479A1 (en) | Vehicle display system | |
| US7676325B2 (en) | Road landscape map producing apparatus, method and program | |
| JP6750531B2 (ja) | 表示制御装置及び表示制御プログラム | |
| US20230135641A1 (en) | Superimposed image display device | |
| JP2006162442A (ja) | ナビゲーション装置及びナビゲーション方法 | |
| KR20120079341A (ko) | 맵데이터갱신방법, 이를 수행하는 전자기기 및 기록매체 | |
| US8233054B2 (en) | Scenery imaging apparatus, scenery imaging method, scenery imaging program, and computer-readable recording medium | |
| CN115118951A (zh) | 数据投影方法、装置、存储介质及车辆 | |
| CN110399672B (zh) | 无人驾驶车辆的街景仿真方法、装置和电子设备 | |
| US8918283B2 (en) | Navigation apparatus | |
| US20230137121A1 (en) | Vehicle display control device | |
| KR101610169B1 (ko) | 헤드업 디스플레이 및 헤드업 디스플레이의 제어방법 | |
| CN110799375B (zh) | 虚像显示装置、虚影显示方法以及存储介质 | |
| CN113352888B (zh) | 显示方法、车载终端、车辆及存储介质 | |
| WO2021166878A1 (ja) | ナビゲーション装置、ナビゲーション装置の制御方法、ナビゲーション装置の制御プログラム | |
| CN117237907A (zh) | 交通信号灯识别方法、装置、存储介质及电子设备 | |
| JP6891752B2 (ja) | 虚像表示装置、虚像表示方法および虚像表示プログラム | |
| JP2007248749A (ja) | 表示画面調整装置、表示画面調整方法、表示画面調整プログラムおよび記録媒体 | |
| JP5903983B2 (ja) | 地図画像表示システム、地図画像表示装置、地図画像表示方法及びコンピュータプログラム | |
| US20240029559A1 (en) | Augmented reality display for traffic signal awareness | |
| US20240075867A1 (en) | Drive assist apparatus and drive assist method | |
| TWI840830B (zh) | 一種交通信號燈識別方法、裝置、電子設備及存儲介質 | |
| JP4188098B2 (ja) | 車載用ナビゲーション装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |