CN112977469A - 基于车载全息投影的导航装置及其控制方法 - Google Patents

基于车载全息投影的导航装置及其控制方法 Download PDF

Info

Publication number
CN112977469A
CN112977469A CN202110269470.8A CN202110269470A CN112977469A CN 112977469 A CN112977469 A CN 112977469A CN 202110269470 A CN202110269470 A CN 202110269470A CN 112977469 A CN112977469 A CN 112977469A
Authority
CN
China
Prior art keywords
image
real
acquisition device
time
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110269470.8A
Other languages
English (en)
Inventor
史轩
王红光
康桦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Letv Zhixin Information Technology Wuhan Co ltd
Original Assignee
Letv Zhixin Information Technology Wuhan Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Letv Zhixin Information Technology Wuhan Co ltd filed Critical Letv Zhixin Information Technology Wuhan Co ltd
Priority to CN202110269470.8A priority Critical patent/CN112977469A/zh
Publication of CN112977469A publication Critical patent/CN112977469A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09—Driving style or behaviour
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/089—Driver voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Navigation (AREA)
  • Instrument Panels (AREA)

Abstract

本公开提供了基于车载全息投影的导航装置，包括：控制系统、全息投影仪和图像采集装置；所述图像采集装置用于采集被目标车辆部位遮挡的视线区域的实时影像，所述控制系统用于对所述实时影像进行处理，并通过所述全息投影仪将处理后的所述实时影像投影在目标区域上。以此方式，能够在一定程度上消除驾驶员的视野盲区，从而提高车辆的行驶安全。

Description

基于车载全息投影的导航装置及其控制方法
技术领域
本公开的实施例一般涉及车载导航技术领域，并且更具体地，涉及基于车载全息投影的导航装置及其控制方法。
背景技术
随着汽车技术的发展，车辆的行驶安全越来越得到用户的重视。现有技术中，由于车辆前部引擎盖和A柱对驾驶员视线的遮挡，使得车辆在行驶过程中存在视野盲区，视野盲区的存在影响着车辆的行驶安全。
近年来，为了提高车辆的行驶安全，出现了抬头显示、基于液晶屏显示的红外夜视系统等主动安全装置，抬头显示系统是可以把汽车行驶过程中仪表中显示的重要信息(如车速)投射到前风挡玻璃上，使驾驶员不用低头就能看到仪表中的信息，基于液晶屏显示的图像系统是在车载导航液晶显示器或者仪表盘中间液晶显示器上显示视频画面，驾驶员在观看时需要低头。但是这些主动安全装置也不能消除驾驶员的视野盲区，不利于车辆的行驶安全。
发明内容
根据本公开的实施例，提供了一种基于车载全息投影的导航装置及其控制方法来解决现有技术中存在由于车辆前部引擎盖和A柱对驾驶员视线的遮挡使得车辆在行驶过程中存在视野盲区，影响车辆行驶安全的技术问题。
在本公开的第一方面，提供了一种基于车载全息投影的导航装置，包括：
控制系统、全息投影仪和图像采集装置；所述图像采集装置用于采集被目标车辆部位遮挡的视线区域的实时影像，所述控制系统用于对所述实时影像进行处理，并通过所述全息投影仪将处理后的所述实时影像投影在目标区域上。
在一些实施例中，所述图像采集装置包括设置在车辆前方用于采集引擎盖遮挡区域的第一实时影像的第一图像采集装置，和/或，设置在车辆两侧用于采集A柱遮挡区域的第二实时影像的第二图像采集装置；
所述控制系统用于对所述第一实时影像和/或第二实时影像进行处理，通过所述全息投影仪将处理后的所述第一实时影像投影在贴有全息膜和投影增强膜的前挡风玻璃和贴有投影增强膜的前置物台上的对应区域，将处理后的所述第二实时影像投影在A柱上。
在一些实施例中，还包括：
语音控制系统，用于采集并识别用户的语音，并将对应的语音控制指令发送至所述控制系统；
设置在前置物台一侧的手势识别装置，用于采集用户的手势控制指令，并将所述手势控制指令发送至所述控制系统；
所述控制系统根据所述语音控制指令和/或所述手势控制指令对所述全息投影仪投影的影像进行调整。
在本公开的第二方面，提供了一种基于车载全息投影的导航的控制方法，应用于第一方面中所述的基于车载全息投影的导航装置，包括：
响应于导航信息投影指令，向所述第一图像采集装置，和/或，所述第二图像采集装置发送控制指令，控制所述第一图像采集装置，和/或，所述第二图像采集装置分别采集对应的实时影像；
对所述第一实时影像和/或第二实时影像进行处理，通过所述全息投影仪将处理后的所述第一实时影像投影在贴有全息膜的前挡风玻璃和前置物台上的对应区域，和/或，将处理后的所述第二实时影像投影在A柱上；
获取用户的操控指令，根据所述操控指令对所述全息投影仪投影的影像进行调整。
在一些实施例中，所述响应于导航信息投影指令，向所述第一图像采集装置和所述第二图像采集装置发送控制指令，控制所述第一图像采集装置和所述第二图像采集装置分别采集对应的实时影像，包括：
响应于终端设备发送的接入请求，建立与所述终端设备的通信连接，接收所述终端设备发送的导航信息，将所述导航信息全息投影到前挡风玻璃的上方区域；
同时向所述第一图像采集装置和所述第二图像采集装置发送控制指令，控制所述第一图像采集装置和所述第二图像采集装置分别采集对应的实时影像。
在一些实施例中，所述响应于导航信息投影指令，向所述第一图像采集装置和所述第二图像采集装置发送控制指令，控制所述第一图像采集装置和所述第二图像采集装置分别采集对应的实时影像，包括：
响应于用户输入的打开导航系统的指令，获取导航路线信息，将所述导航信息全息投影到前挡风玻璃的上方区域，同时向所述第一图像采集装置和所述第二图像采集装置发送控制指令，控制所述第一图像采集装置和所述第二图像采集装置分别采集对应的实时影像。
在一些实施例中，在所述响应于导航信息投影指令，向所述第一图像采集装置和所述第二图像采集装置发送控制指令，控制所述第一图像采集装置和所述第二图像采集装置分别采集对应的实时影像之后，所述方法还包括：
通过摄像头获取驾驶员的头部的姿态信息，通过设置在所述控制系统中的集成了对应算法的AI专用芯片或者ASIC专用芯片根据所述姿态信息确定驾驶员在车辆前部区域和车辆左右区域的视觉盲区，进而根据所述视觉盲区对对应的实时影像进行逐帧剪切，具体包括，根据驾驶员的头部姿态信息和预先建立的车辆模型确定驾驶员的视野，根据驾驶员的头部位置、所述第一图像采集装置和所述第二图像采集装置在所述车辆模型中的坐标分别确定所述第一图像采集装置和所述第二图像采集装置相对于驾驶员的头部位置的坐标转换矩阵，根据所述转换矩阵分别将所述第一图像采集装置和所述第二图像采集装置采集到的实时影像转换为驾驶员的头部位置视角的实时影像，根据驾驶员的视野和转换视角后的实时影像确定视觉盲区对应的实时影像。
在一些实施例中，所述方法还包括：
控制所述摄像头按照预设时间间隔采集全息投影到所述贴有全息膜的前挡风玻璃和前置物台上的对应区域的实时影像的第一图像和全息投影到A柱上的实时影像的第二图像，根据所述第一图像与所述对应区域的相对位置关系以及所述第二图像与A柱的相对位置关系对所述全息投影仪的投影角度进行调整。
在一些实施例中，所述获取用户的操控指令，根据所述操控指令对所述全息投影仪投影的影像进行调整，包括：
通过所述手势识别装置获取用户的手势图像，根据预设的手势操控规则确定所述手势图像对应的操控指令，根据所述操控指令对所述全息投影仪投影的影像进行调整。
在本公开的第三方面，提供了一种电子设备，包括存储器和处理器，所述存储器上存储有计算机程序，所述处理器执行所述程序时实现如以上所述的方法。
在本公开的第四方面，提供了一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现如以上所述的方法。
应当理解，发明内容部分中所描述的内容并非旨在限定本公开的实施例的关键或重要特征，亦非用于限制本公开的范围。本公开的其它特征将通过以下的描述变得容易理解。
通过本公开的基于车载全息投影的导航装置及其控制方法，能够通过全息投影仪将车辆前部引擎盖和A柱遮挡区域的影像分别对应投影在前挡风玻璃和前置物台上的对应区域以及A柱上，从而在一定程度上消除驾驶员的视野盲区，从而提高车辆的行驶安全。
附图说明
结合附图并参考以下详细说明，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。在附图中，相同或相似的附图标记表示相同或相似的元素，其中：
图1示出了本公开实施例一的基于车载全息投影的导航装置的功能结构示意图；
图2示出了本公开实施例二的基于车载全息投影的导航装置的控制方法的流程图；
图3示出了本公开实施例三的基于车载全息投影的导航装置的控制方法的流程图；
图4示出了本公开实施例四的基于车载全息投影的导航设备的结构示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中的附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本公开一部分实施例，而不是全部的实施例。基于本公开中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的全部其他实施例，都属于本公开保护的范围。
另外，本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。
本公开实施例的基于车载全息投影的导航装置，包括：控制系统、全息投影仪和图像采集装置；所述图像采集装置用于采集被目标车辆部位遮挡的视线区域的实时影像，所述控制系统用于对所述实时影像进行处理，并通过所述全息投影仪将处理后的所述实时影像投影在目标区域上。例如，可以将驾驶员视野盲区或者后车视野盲区的实时影像投影到目标区域上，使得当前车辆的驾驶员或者后车的驾驶员能够获取视野盲区的图像信息，从而提高车辆的行驶安全。具体地，如图1所示，为本公开实施例一的基于车载全息投影的导航装置的功能结构示意图。从图1中可以看出，本实施例的基于车载全息投影的导航装置，包括：
控制系统102和设置在车辆中央后视镜上的全息投影仪101，以及，设置在车辆前方用于采集引擎盖遮挡区域的第一实时影像的第一图像采集装置103，和/或，设置在车辆两侧用于采集A柱遮挡区域的第二实时影像的第二图像采集装置104。
所述控制系统102用于对所述第一实时影像和/或第二实时影像进行处理，通过所述全息投影仪101将处理后的所述第一实时影像投影在贴有全息膜的前挡风玻璃和前置物台上的对应区域，将处理后的所述第二实时影像投影在A柱上。
本公开实施例的基于车载全息投影的导航装置，能够通过全息投影仪将车辆前部引擎盖和A柱遮挡区域的影像分别对应投影在前挡风玻璃和前置物台上的对应区域以及A柱上，从而在一定程度上消除驾驶员的视野盲区，从而提高车辆的行驶安全。
此外，在本公开的一些其他实施例中，所述基于车载全息投影的导航装置，还包括语音控制系统和手势识别装置，其中，所述语音控制系统，用于采集并识别用户的语音，并将对应的语音控制指令发送至所述控制系统；所述手势识别装置设置在前置物台一侧，用于采集用户的手势控制指令，并将所述手势控制指令发送至所述控制系统。
所述控制系统根据所述语音控制指令和/或所述手势控制指令对所述全息投影仪投影的影像进行调整。
如图2所示，为本公开实施例二的基于车载全息投影的导航装置的控制方法的流程图。本实施例的基于车载全息投影的导航装置的控制方法，基于实施例一的基于车载全息投影的导航装置，包括以下步骤：
S201：响应于导航信息投影指令，向所述第一图像采集装置，和/或，所述第二图像采集装置发送控制指令，控制所述第一图像采集装置，和/或，所述第二图像采集装置分别采集对应的实时影像。
在本实施例中，可以通过车载终端接收导航信息投影指令，也可以通过设置在全息投影仪上的控制系统接收导航信息投影指令，在通过全息投影仪上的控制系统接收视频播放指令时，控制系统可以为集成在全息投影仪上的控制系统，该全息投影仪可以是带有智能系统的短焦距全息投影仪。所述导航信息投影指令可以是移动终端(例如手机或平板电脑)向车载终端或设置在投影仪上的控制系统发送的导航信息投影指令，也可以是用户通过触控对车载终端发送的导航信息投影指令。本实施例中的导航信息可以是各种导航APP中的导航画面，例如包括车辆的行驶方向和为车辆规划的行驶路线，以及周围环境路况的画面。
在控制系统接收到导航信息投影指令后，控制系统向所述第一图像采集装置，和/或，所述第二图像采集装置发送控制指令，控制所述第一图像采集装置，和/或，所述第二图像采集装置分别采集对应的实时影像。其中，第一图像采集装置和第二图像采集装置例如可以是摄像头，第一图像采集装置可以设置在车辆前方(例如车牌处)，用于采集车辆前部引擎盖对驾驶员视线遮挡区域的实时影像，第二图像采集装置可以设置在左右后视镜处，用于分别采集车辆左右两侧A柱擎对驾驶员视线遮挡区域的实时影像。
S202：对所述第一实时影像和/或第二实时影像进行处理，通过所述全息投影仪将处理后的所述第一实时影像投影在贴有全息膜和投影增强膜的前挡风玻璃和贴有投影增强膜的前置物台上的对应区域，将处理后的所述第二实时影像投影在A柱上。
在本实施例中，当采集到第一实时影像和/或第二实时影像后，可以对所述第一实时影像和/或第二实时影像进行处理，例如，可以由控制系统直接对所述第一实时影像和/或第二实时影像进行处理，也可以将所述第一实时影像和/或第二实时影像通过控制系统发送至云端服务器，由云端服务器对所述第一实时影像和/或第二实时影像进行处理。当由控制系统直接对所述第一实时影像和/或第二实时影像进行处理时，所述控制系统中可以集成有AI专用芯片或者ASIC专用芯片，AI专用芯片或者ASIC专用芯片集成有执行上述程序的专用算法。
由于第一实时影像和/或第二实时影像通常会大于驾驶员视野盲区的实际影像，因此，通常情况下需要对第一实时影像和/或第二实时影像进行剪切，使剪切后的第一实时影像和/或第二实时影像与驾驶员视野盲区的实际影像重合，并通过所述全息投影仪将处理后的所述第一实时影像投影在贴有全息膜的前挡风玻璃(例如下方区域)和前置物台上的对应区域，将处理后的所述第二实时影像投影在A柱上，从而消除驾驶员的由于车辆前部引擎盖和A柱对视线遮挡形成的视野盲区，使得驾驶员能够在驾驶车辆过程中能够消除视野盲区，获得更大的视野，从而获取更多的车辆行驶方向和车辆两侧的信息，提高车辆的行驶安全。其中，车辆前部引擎盖遮挡形成的视野盲区包括车辆左右前轮处的实时影像，以及体现车头下方的路面状况的实时影像。
此外还可以在前挡风玻璃(例如上方区域)投影导航信息。
S203：获取用户的操控指令，根据所述操控指令对所述全息投影仪投影的影像进行调整。
在本实施例中，所述控制系统还能够获取用户的操控指令，例如通过语音控制系统获取用户的语音控制指令，或者通过手势识别装置获取用户的手势控制指令，其中手势识别装置例如可以是摄像头或者激光雷达。在获取到用户的操控指令后，可以根据所述操控指令对所述全息投影仪投影的影像进行调整，例如，可以调整所述导航信息或者投影在贴有全息膜的前挡风玻璃和前置物台上的对应区域的处理后的第一实时影像或者投影在A柱上的处理后的第二实时影像。
本公开实施例的基于车载全息投影的导航装置的控制方法，能够通过全息投影仪将车辆前部引擎盖和A柱遮挡区域的影像分别对应投影在前挡风玻璃和前置物台上的对应区域以及A柱上，从而在一定程度上消除驾驶员的视野盲区，从而提高车辆的行驶安全。
如图3所示，为本公开实施例三的基于车载全息投影的导航装置的控制方法的流程图。本实施例的基于车载全息投影的导航装置的控制方法，可以包括以下步骤：
S301：响应于终端设备发送的接入请求，建立与所述终端设备的通信连接，接收所述终端设备发送的导航信息，将所述导航信息全息投影到前挡风玻璃的上方区域。
例如，当用户通过移动终端(例如手机和平板电脑)向控制系统发送接入请求时，控制系统建立与所述终端设备的通信连接，接收所述终端设备发送的导航信息，将所述导航信息全息投影到前挡风玻璃的上方区域。此时，移动终端上可以运行有导航APP，所述导航信息可以是导航APP中的界面。
在一些其他实施方式中，该步骤也可以为：
响应于用户输入的打开导航系统的指令，获取导航路线信息，将所述导航信息全息投影到前挡风玻璃的上方区域，同时向所述第一图像采集装置和所述第二图像采集装置发送控制指令，控制所述第一图像采集装置和所述第二图像采集装置分别采集对应的实时影像。
其中导航系统可以为车载导航系统，导航路线信息可以是车载导航系统上的导航路线信息。
S302：向所述第一图像采集装置和所述第二图像采集装置发送控制指令，控制所述第一图像采集装置和所述第二图像采集装置分别采集对应的实时影像。
S303：对所述第一实时影像和第二实时影像进行处理，通过所述全息投影仪将处理后的所述第一实时影像投影在贴有全息膜的前挡风玻璃和前置物台上的对应区域，将处理后的所述第二实时影像投影在A柱上。
步骤S302至步骤S303的具体实现过程可以参见上述实施例二中的步骤S201至步骤S202，本实施例不再详细赘述。
S304：控制所述摄像头按照预设时间间隔采集全息投影到所述贴有全息膜的前挡风玻璃和前置物台上的对应区域的实时影像的第一图像和全息投影到A柱上的实时影像的第二图像，根据所述第一图像与所述对应区域的相对位置关系以及所述第二图像与A柱的相对位置关系对所述全息投影仪的投影角度进行调整。
在本实施例中，由于全息投影仪可以设置在中央后视镜上，因此，在使用过程中，全息投影仪的投影角度可能随着中央后视镜的调整发生改变。因此，需要对所述全息投影仪的投影角度进行调整。具体地，可以通过所述摄像头按照预设时间间隔采集全息投影到所述贴有全息膜的前挡风玻璃和前置物台上的对应区域的实时影像的第一图像和全息投影到A柱上的实时影像的第二图像，根据所述第一图像与所述对应区域的相对位置关系以及所述第二图像与A柱的相对位置关系对所述全息投影仪的投影角度进行调整。例如，投影到所述贴有全息膜的前挡风玻璃和前置物台上的对应区域的实时影像和投影到A柱上的实时影像发生了偏离，具体可以表现为投影到前挡风玻璃和前置物台上的实时影像偏向一侧，A柱上部分区域没有投影实时影像，或者，也可以表现为当前时间段与上一时间段投影的实时影像相对于前挡风玻璃和前置物台和/或A柱的位置发生了改变。
S305：获取用户的操控指令，根据所述操控指令对所述全息投影仪投影的影像进行调整。
本公开实施例的方法，能够取得与上述实施例相类似的技术效果，本实施例不再重复赘述。
此外，作为本公开的一个可选实施例，在上述实施例中，在控制系统控制所述第一图像采集装置和所述第二图像采集装置分别采集对应的实时影像之后，所述方法还可以包括通过摄像头获取驾驶员的头部姿态信息，将所述姿态信息发送至云端服务器，并接收云端服务器根据所述姿态信息确定驾驶员在车辆前部区域和车辆左右区域的视觉盲区，并根据所述视觉盲区对对应的实时影像进行逐帧剪切后回传的实时影像。
由于不同驾驶员的坐高和坐姿习惯都不同，由此导致的驾驶员视线受车辆前部引擎盖和A柱遮挡形成的视野盲区不同，需要通过全息投影仪投影的实时影像也不同，因此，需要针对不同的驾驶员确定不同的视觉盲区，根据所述视觉盲区确定对应的剪切后的实时影像，从而针对不同驾驶员都能够取得消除视野盲区，提高车辆的行驶安全的效果。具体地，可以通过摄像头获取驾驶员的头部姿态信息，所述头部姿态信息可以是驾驶员的头部与座椅或者头枕的相对位置关系，和/或驾驶员的头部与摄像头的距离。在确定驾驶员的头部姿态信息后，可以将所述姿态信息发送至云端服务器，并接收云端服务器根据所述姿态信息确定驾驶员在车辆前部区域和车辆左右区域的视觉盲区，进而根据所述视觉盲区对对应的实时影像进行逐帧剪切后回传的实时影像。
其中，云端服务器可以根据驾驶员的头部姿态信息和预先建立的车辆模型确定驾驶员的实现与车辆前部引擎盖和A柱的相对位置关系，进而确定驾驶员的视野盲区，以及确定驾驶员的视野，根据驾驶员的头部位置、所述第一图像采集装置和所述第二图像采集装置在所述车辆模型中的坐标分别确定所述第一图像采集装置和所述第二图像采集装置相对于驾驶员的头部位置的坐标转换矩阵，根据所述转换矩阵分别将所述第一图像采集装置和所述第二图像采集装置采集到的实时影像转换为驾驶员的头部位置视角的实时影像，根据驾驶员的视野和转换视角后的实时影像确定视觉盲区对应的实时影像。
作为本公开的另一个可选实施例，在上述实施例中，还可以在车辆内部的车顶上设置全息投影仪，用于将图像采集装采集到的实时影像投影到后车窗上，当道路前放出现事故或者紧急情况时，或者在夜间或者隧道中时可以将图采集装置采集到的实时影像投影到后车窗上，以提醒后来车辆。此外，还可以在车辆外部(例如车尾牌照处)设置全息投影仪，用于将图像采集装采集到的实时影像投影到地面上，并且该全息投影仪的角度是可调整的，在发生大雾天气时，还可以将图像采集装置采集到的实时影像投影到雾里。当然，投影的内容不仅局限于图像采集装置采集到的实时影像，还可以是起到警示作用的符号、字符标识，或者卡通人物图像。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本公开并不受所描述的动作顺序的限制，因为依据本公开，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于可选实施例，所涉及的动作和模块并不一定是本公开所必须的。
图4示出了本公开实施例四的基于车载全息投影的导航设备的结构示意图。图4示出的终端设备仅仅是一个示例，不应对本申请实施例的功能和使用范围带来任何限制。
如图4所示，计算机系统包括中央处理单元(CPU)401，其可以基于存储在只读存储器(ROM)402中的程序或者从存储部分408加载到随机访问存储器(RAM)403中的程序而执行各种适当的动作和处理。在RAM403中，还存储有系统操作所需的各种程序和数据。CPU 401、ROM 402以及RAM 403通过总线404彼此相连。输入/输出(I/O)接口405也连接至总线404。
以下部件连接至I/O接口405：包括键盘、鼠标等的输入部分406；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分407；包括硬盘等的存储部分408；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分409。通信部分409经由诸如因特网的网络执行通信处理。驱动器410也基于需要连接至I/O接口405。可拆卸介质411，诸如磁盘、光盘、磁光盘、半导体存储器等等，基于需要安装在驱动器410上，以便于从其上读出的计算机程序基于需要被安装入存储部分408。
特别地，基于本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，所述计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分409从网络上被下载和安装，和/或从可拆卸介质411被安装。在该计算机程序被中央处理单元(CPU)401执行时，执行本申请的方法中限定的上述功能。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如，非限制性地，可以使用的示范类型的硬件逻辑部件包括：场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)等等。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
此外，虽然采用特定次序描绘了各操作，但是这应当理解为要求这样操作以所示出的特定次序或以顺序次序执行，或者要求所有图示的操作应被执行以取得期望的结果。在一定环境下，多任务和并行处理可能是有利的。同样地，虽然在上面论述中包含了若干具体实现细节，但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实现中。相反地，在单个实现的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实现中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题，但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反，上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。

Claims (10)

1.一种基于车载全息投影的导航装置，其特征在于，包括：
控制系统、全息投影仪和图像采集装置
所述图像采集装置用于采集被目标车辆部位遮挡的视线区域的实时影像，所述控制系统用于对所述实时影像进行处理，并通过所述全息投影仪将处理后的所述实时影像投影在目标区域上。
2.根据权利要求1所述的导航装置，其特征在于，所述图像采集装置包括设置在车辆前方用于采集引擎盖遮挡区域的第一实时影像的第一图像采集装置，和/或，设置在车辆两侧用于采集A柱遮挡区域的第二实时影像的第二图像采集装置；
所述控制系统用于对所述第一实时影像和/或第二实时影像进行处理，通过所述全息投影仪将处理后的所述第一实时影像投影在贴有全息膜和投影增强膜的前挡风玻璃和贴有投影增强膜的前置物台上的对应区域，将处理后的所述第二实时影像投影在A柱上。
3.根据权利要求2所述的导航装置，其特征在于，还包括：
语音控制系统，用于采集并识别用户的语音，并将对应的语音控制指令发送至所述控制系统；
设置在前置物台一侧的手势识别装置，用于采集用户的手势控制指令，并将所述手势控制指令发送至所述控制系统；
所述控制系统根据所述语音控制指令和/或所述手势控制指令对所述全息投影仪投影的影像进行调整。
4.一种基于车载全息投影的导航的控制方法，应用于权利要求1至3中任一项所述的基于车载全息投影的导航装置，其特征在于，包括：
响应于导航信息投影指令，向所述第一图像采集装置，和/或，所述第二图像采集装置发送控制指令，控制所述第一图像采集装置，和/或，所述第二图像采集装置分别采集对应的实时影像；
对所述第一实时影像和/或第二实时影像进行处理，通过所述全息投影仪将处理后的所述第一实时影像投影在贴有全息膜的前挡风玻璃和前置物台上的对应区域，将处理后的所述第二实时影像投影在A柱上；
获取用户的操控指令，根据所述操控指令对所述全息投影仪投影的影像进行调整。
5.根据权利要求4所述的控制方法，其特征在于，所述响应于导航信息投影指令，向所述第一图像采集装置和所述第二图像采集装置发送控制指令，控制所述第一图像采集装置和所述第二图像采集装置分别采集对应的实时影像，包括：
响应于终端设备发送的接入请求，建立与所述终端设备的通信连接，接收所述终端设备发送的导航信息，将所述导航信息全息投影到前挡风玻璃的上方区域；
同时向所述第一图像采集装置和所述第二图像采集装置发送控制指令，控制所述第一图像采集装置和所述第二图像采集装置分别采集对应的实时影像。
6.根据权利要求4所述的控制方法，其特征在于，所述响应于导航信息投影指令，向所述第一图像采集装置和所述第二图像采集装置发送控制指令，控制所述第一图像采集装置和所述第二图像采集装置分别采集对应的实时影像，包括：
响应于用户输入的打开导航系统的指令，获取导航路线信息，将所述导航信息全息投影到前挡风玻璃的上方区域，同时向所述第一图像采集装置和所述第二图像采集装置发送控制指令，控制所述第一图像采集装置和所述第二图像采集装置分别采集对应的实时影像。
7.根据权利要求4所述的控制方法，其特征在于，在所述响应于导航信息投影指令，向所述第一图像采集装置和所述第二图像采集装置发送控制指令，控制所述第一图像采集装置和所述第二图像采集装置分别采集对应的实时影像之后，所述方法还包括：通过摄像头获取驾驶员的头部的姿态信息，通过设置在所述控制系统中的集成了对应算法的AI专用芯片或者ASIC专用芯片根据所述姿态信息确定驾驶员在车辆前部区域和车辆左右区域的视觉盲区，进而根据所述视觉盲区对对应的实时影像进行逐帧剪切，具体包括，根据驾驶员的头部姿态信息和预先建立的车辆模型确定驾驶员的视野，根据驾驶员的头部位置、所述第一图像采集装置和所述第二图像采集装置在所述车辆模型中的坐标分别确定所述第一图像采集装置和所述第二图像采集装置相对于驾驶员的头部位置的坐标转换矩阵，根据所述转换矩阵分别将所述第一图像采集装置和所述第二图像采集装置采集到的实时影像转换为驾驶员的头部位置视角的实时影像，根据驾驶员的视野和转换视角后的实时影像确定视觉盲区对应的实时影像。
8.根据权利要求7所述的控制方法，其特征在于，所述方法还包括：
控制所述摄像头按照预设时间间隔采集全息投影到所述贴有全息膜的前挡风玻璃和前置物台上的对应区域的实时影像的第一图像和全息投影到A柱上的实时影像的第二图像，根据所述第一图像与所述对应区域的相对位置关系以及所述第二图像与A柱的相对位置关系对所述全息投影仪的投影角度进行调整。
9.根据权利要求5所述的控制方法，其特征在于，所述获取用户的操控指令，根据所述操控指令对所述全息投影仪投影的影像进行调整，包括：
通过所述手势识别装置获取用户的手势图像，根据预设的手势操控规则确定所述手势图像对应的操控指令，根据所述操控指令对所述全息投影仪投影的影像进行调整。
10.一种电子设备，包括存储器和处理器，所述存储器上存储有计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1～7中任一项所述的方法。
CN202110269470.8A 2021-03-12 2021-03-12 基于车载全息投影的导航装置及其控制方法 Pending CN112977469A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110269470.8A CN112977469A (zh) 2021-03-12 2021-03-12 基于车载全息投影的导航装置及其控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110269470.8A CN112977469A (zh) 2021-03-12 2021-03-12 基于车载全息投影的导航装置及其控制方法

Publications (1)

Publication Number Publication Date
CN112977469A true CN112977469A (zh) 2021-06-18

Family

ID=76334581

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110269470.8A Pending CN112977469A (zh) 2021-03-12 2021-03-12 基于车载全息投影的导航装置及其控制方法

Country Status (1)

Country Link
CN (1) CN112977469A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115891844A (zh) * 2022-04-27 2023-04-04 一汽奔腾轿车有限公司 一种车载全息投影导航系统及汽车

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2441635A1 (en) * 2010-10-06 2012-04-18 Harman Becker Automotive Systems GmbH Vehicle User Interface System
CN105136151A (zh) * 2015-09-16 2015-12-09 王占奎 3d全息车联网交互显示终端
CN108583433A (zh) * 2018-03-14 2018-09-28 斑马网络技术有限公司 汽车辅助显示系统及其辅助显示方法
CN108602465A (zh) * 2016-01-28 2018-09-28 鸿海精密工业股份有限公司 车辆用图像显示系统及搭载了该图像显示系统的车辆
CN109927733A (zh) * 2019-01-18 2019-06-25 驭势（上海）汽车科技有限公司 一种交互设备的引导方法、hmi计算机系统及车辆
CN109941277A (zh) * 2019-04-08 2019-06-28 宝能汽车有限公司 显示汽车a柱盲区图像的方法、装置和车辆
CN111157014A (zh) * 2019-12-30 2020-05-15 恒大新能源汽车科技(广东)有限公司 路况展示方法、装置及车载终端、存储介质
US20200269692A1 (en) * 2017-11-30 2020-08-27 Nippon Seiki Co., Ltd. Head-up display device
CN111746436A (zh) * 2019-03-27 2020-10-09 株式会社斯巴鲁 车辆的非接触操作装置和车辆
CN112204461A (zh) * 2018-05-17 2021-01-08 恩维世科斯有限公司 图像投影仪

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2441635A1 (en) * 2010-10-06 2012-04-18 Harman Becker Automotive Systems GmbH Vehicle User Interface System
CN105136151A (zh) * 2015-09-16 2015-12-09 王占奎 3d全息车联网交互显示终端
CN108602465A (zh) * 2016-01-28 2018-09-28 鸿海精密工业股份有限公司 车辆用图像显示系统及搭载了该图像显示系统的车辆
US20200269692A1 (en) * 2017-11-30 2020-08-27 Nippon Seiki Co., Ltd. Head-up display device
CN108583433A (zh) * 2018-03-14 2018-09-28 斑马网络技术有限公司 汽车辅助显示系统及其辅助显示方法
CN112204461A (zh) * 2018-05-17 2021-01-08 恩维世科斯有限公司 图像投影仪
CN109927733A (zh) * 2019-01-18 2019-06-25 驭势（上海）汽车科技有限公司 一种交互设备的引导方法、hmi计算机系统及车辆
CN111746436A (zh) * 2019-03-27 2020-10-09 株式会社斯巴鲁 车辆的非接触操作装置和车辆
CN109941277A (zh) * 2019-04-08 2019-06-28 宝能汽车有限公司 显示汽车a柱盲区图像的方法、装置和车辆
CN111157014A (zh) * 2019-12-30 2020-05-15 恒大新能源汽车科技(广东)有限公司 路况展示方法、装置及车载终端、存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
刘双广: "对汽车HUD的交互设计研究——基于用户的研究与分析", 《中国包装》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115891844A (zh) * 2022-04-27 2023-04-04 一汽奔腾轿车有限公司 一种车载全息投影导航系统及汽车

Similar Documents

Publication Publication Date Title
CN109572555B (zh) 一种应用于无人车的遮挡信息显示方法和系统
CN110126820B (zh) 自动泊车系统、泊车方法及车辆
CN113276774B (zh) 无人车远程驾驶过程中视频画面的处理方法、装置及设备
US20190082123A1 (en) Display control apparatus, method, program, and system
US20240087491A1 (en) Projection Method and Apparatus, Vehicle, and AR-HUD
CN112793509B (zh) 一种盲区监测方法、设备、介质
CN114373335B (zh) 一种车辆的碰撞预警方法、装置、电子设备及存储介质
US10922976B2 (en) Display control device configured to control projection device, display control method for controlling projection device, and vehicle
CN113597617A (zh) 一种显示方法及装置、设备及车辆
KR102463688B1 (ko) 증강현실 헤드업 디스플레이 시스템에서 월드좌표를 활용한 정보 표시 방법
US20240042857A1 (en) Vehicle display system, vehicle display method, and computer-readable non-transitory storage medium storing vehicle display program
CN112215214A (zh) 调整智能车载终端的摄像头偏移的方法及系统
CN113002461A (zh) Ar-hud系统的虚像位置调整方法、装置及存储介质
CN112977469A (zh) 基于车载全息投影的导航装置及其控制方法
CN114435093A (zh) 车辆遮光板的控制方法、装置、电子设备及存储介质
US20190064531A1 (en) Vehicle display device and display control method
CN113459951A (zh) 车外环境显示方法和装置、车辆、设备和存储介质
US20190266416A1 (en) Vehicle image system and method for positioning vehicle using vehicle image
CN110120110A (zh) 倒车图像处理方法、装置、计算机设备及存储介质
US11685312B2 (en) Display control device, display device, and display control program product for superimposing an emphasized image item
CN114332789A (zh) 图像处理方法、装置、设备、车辆及介质
CN110979319A (zh) 驾驶辅助方法、装置和系统
US20220208004A1 (en) Driving support apparatus, driving support method, and computer-readable recording medium
CN116500787B (zh) 用于在车辆中呈现增强现实信息的方法和系统
JP2018069774A (ja) 車両運転支援装置、および車両運転支援方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination