CN109917920A - 车载投射处理方法、装置、车载设备及存储介质 - Google Patents

Abstract

本发明实施例公开了一种车载投射处理方法、装置、车载设备及存储介质。所述方法包括：通过第一图像采集器采集位于采集区域内的环境物体图像；根据第二图像采集器采集的驾驶员面部图像，所述第二图像采集器的参数，以及所述挡风玻璃的位置，确定驾驶员的凝视点位置；若所述凝视点位置落在投射区域的交叠部分内，则将所述环境物体图像中位于所述凝视点位置处的物体作为目标物体，并展示所述目标物体的属性信息。采用本发明实施例的技术方案解决了无法根据驾驶员的需求展示信息的问题，实现了根据驾驶员的凝视点位置在合适的时间向驾驶员展示符合驾驶员需求的展示信息，避免展示信息过多对驾驶员视线造成遮挡，或者无法准备把握信息的展示时机。

Description

车载投射处理方法、装置、车载设备及存储介质

技术领域

本发明实施例涉及汽车电子技术领域，尤其涉及一种车载投射处理方法、装置、车载设备及存储介质。

背景技术

随着抬头显示器(HUD，也称平视显示器)技术的成熟以及其成本的降低，HUD已经从航空领域(战斗机，民航飞机)的高科技配置走向了汽车行业，并有望在近几年内成为车载标配。HUD的主要功能把汽车仪表盘和行驶数据投影到前挡风玻璃上，让投影的虚像和驾驶场景交叠产生增强现实(AR)效果。

目前运用AR-HUD过程中，存在展示的信息与驾驶员需求不匹配问题，主要是展示内容和展示时机与驾驶员需求不匹配，例如，展示信息过多对驾驶员视线造成遮挡，或者无法准备把握信息的展示时机。

发明内容

鉴于上述问题，本发明实施例中提供了一种车载投射处理方法、装置、车载设备及存储介质，以实现根据驾驶员的需求向用户展示信息内容。

第一方面，本发明实施例中提供了一种车载投射处理方法，应用于车辆，所述车辆的挡风玻璃上包括第一图像采集器的采集区域以及投射设备的投射区域，且所述采集区域与所述投射区域交叠，所述方法包括：

通过所述第一图像采集器采集位于所述采集区域内的环境物体图像；

根据第二图像采集器采集的驾驶员面部图像，所述第二图像采集器的参数，以及所述挡风玻璃的位置，确定驾驶员的凝视点位置；

若所述凝视点位置落在所述投射区域的交叠部分内，则将所述环境物体图像中位于所述凝视点位置处的物体作为目标物体，并展示所述目标物体的属性信息。

第二方面，本发明实施例中还提供了一种车载投射处理装置，应用于车辆，所述车辆的挡风玻璃上包括第一图像采集器的采集区域以及投射设备的投射区域，且所述采集区域与所述投射区域交叠，所述装置包括：

环境图像采集模块，用于通过所述第一图像采集器采集位于所述采集区域内的环境物体图像；

凝视点确定模块，用于根据第二图像采集器采集的驾驶员面部图像，所述第二图像采集器的参数，以及所述挡风玻璃的位置，确定驾驶员的凝视点位置；

物体属性展示模块，用于若所述凝视点位置落在所述投射区域的交叠部分内，则将所述环境物体图像中位于所述凝视点位置处的物体作为目标物体，并展示所述目标物体的属性信息。

第三方面，本发明实施例中还提供了一种车载设备，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明任意实施例所述的车载投射处理方法。

第四方面，本发明实施例中还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明任意实施例所述的车载投射处理方法。

本发明实施例中提供了一种车载投射处理方案，在运用AR-HUD进行信息展示的过程中，可以根据驾驶员的凝视点位置，从环境物体图像中选择符合驾驶员需求的目标物体，并显示目标物体的属性信息，从而解决了无法根据驾驶员的需求展示信息的问题，实现了根据驾驶员的凝视点位置在合适的时间向驾驶员展示符合驾驶员需求的展示信息，避免展示信息过多对驾驶员视线造成遮挡，或者无法准备把握信息的展示时机。

上述发明内容仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。

附图说明

通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：

图1是本发明实施例中提供的一种车载投射处理方法的流程示意图；

图2是本发明实施例中提供的一种车辆挡风玻璃的结构示意图；

图3是本发明实施例中提供的一种凝视点位置落在投射区域的交叠部分内的示意图；

图4是本发明实施例中提供的一种凝视点位置落在采集区域的非交叠部分内的示意图；

图5是本发明实施例中提供的一种针对目标物体的属性信息以外的其他投射信息进行弱化的效果示意图；

图6是本发明实施例中提供的另一种车载投射处理方法的流程示意图；

图7是本发明实施例中提供的一种车载投射处理装置的结构示意图；

图8是本发明实施例中提供的一种车载设备的结构示意图。

具体实施方式

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。

在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理，但是其中的许多操作可以被并行地、并发地或者同时实施。此外，各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。

目前，随着抬头显示器(HUD，也称作平视显示器)技术的不断发展，HUD已经从航空领域应用到了汽车行业领域。通过车辆上设置的HUD可以产生相应的投影信息，并将投影信息投射到车辆的挡风玻璃上，从而使车辆的挡风玻璃呈现HUD所产生的投影信息。

在运用AR-HUD投射内容时，仅仅是将车辆上安装的前置摄像头(类似行车记录仪)所拍摄的内容，经由车载设备处理后投射到车辆的固定的区域，在投射过程中驾驶员仅仅是观众，而不是参与者，AR-HUD也只是起到了投影仪的作用，从而造成投射的内容与驾驶员所需求的投射内容不匹配或者投射内容的展示时机不对。鉴于上述情况，如何根据驾驶员的关注视线，整合摄像头可视区域，调整虚像投射内容，成为目前急需解决的问题。

下面针对本发明实施例中提供的车载投射处理方法、装置、车载设备和存储介质进行详细阐述。

图1是本发明实施例中提供的一种车载投射处理方法的流程示意图，本实施例可适用于在运用AR-HUD过程中向驾驶员投射展示信息的情况，尤其是向驾驶员投射符合驾驶员的需求的展示信息的情形。该方法可以由车载投射处理装置来执行，该装置可以采用软件和/或硬件的方式实现，并集成在任何具有网络通信功能的车载设备上。如图1所示，本发明实施例中提供的车载投射处理方法可以包括以下步骤S110～S140：

S110、通过第一图像采集器采集位于采集区域内的环境物体图像；其中车辆的挡风玻璃上包括第一图像采集器的采集区域。

在本实施例中，图2是本发明实施例中提供的一种车辆挡风玻璃的结构示意图。参见图2，第一图像采集器可以设置在车辆内部的预设位置处，且第一图像采集器的图像采集方向设置为面向车辆的前挡风玻璃。通过第一图像采集器可以实时地采集驾驶员面向车辆前挡风玻璃所在方向的环境物体图像。环境物体图像中包含了通过第一图像采集器所采集到的驾驶员面向车辆前挡风玻璃所在方向的实际场景。

在本实施例中，参见图2，车辆的前挡风玻璃上可以包含第一图像采集器的采集区域。第一图像采集器的采集区域是指驾驶员的可视区域与位于车辆内部的第一图像采集器的可视区域之间的交叠区域。驾驶员的可视区域可以理解为驾驶员面向车辆的挡风玻璃方向所能看到的视线范围；第一图像采集器的可视区域可以理解为第一图像采集器面向车辆的挡风玻璃采图像时所能采集到的图像区域。

在本实施例中，参见图2，第一图像采集器在固定角度上的采集范围并非无限大，第一图像采集器的可视区域一般小于驾驶员的可视区域。第一图像采集器的可视区域可以完全包含在驾驶员的可视区域之内；或者，第一图像采集器的可视区域可以存在部分可视区域包含在驾驶员的可视区域之内，而另一部分可视区域不包含在驾驶员的可视区域之内。在此需要说明的是，在第一图像采集器的可视区域可以完全包含在驾驶员的可视区域之内的情况下，第一图像采集器在第一图像采集器的可视区域内采集的环境物体图像中包含的环境物体均是位于驾驶员的可视区域之内的环境物体。可选的，当第一图像采集器的可视区域完全包含在驾驶员的可视区域内时，第一图像采集器的可视区域可以直接作为第一图像采集器的采集区域。

在本实施例中，参见图2，在第一图像采集器的可视区域的部分区域不包含在驾驶员的可视区域之内的情况下，第一图像采集器在第一图像采集器的可视区域内采集的环境物体图像中可能存在部分环境物体中不是位于驾驶员的可视区域之内的环境物体。鉴于上述情况，为了保证第一图像采集器采集的环境物体图像包含的各个环境物体均是位于驾驶员可视区域内的环境物体，可以将驾驶员的可视区域与第一图像采集器的可视区域之间的交叠区域作为第一图像采集器的采集区域，通过第一图像采集器在采集区域内采集驾驶员面向车辆挡风玻璃方向的实际场景，作为环境物体图像。

在本实施例中，对于驾驶员而言，相同的驾驶员在同一车辆的可视区域是相同的；对于第一图像采集器而言，如果第一图像采集器的位置和方向不发生改变，那么第一图像采集器的可视区域也不会发生改变。可选的，通过调整第一图像采集器面向车辆的前挡风玻璃的角度和位置，可以对第一图像采集器的可视区域进行调整。当第一图像采集器的可视区域发生改变时，第一图像采集器的可视区域与驾驶员的可视区域之间的交叠区域也会发生改变，即在车辆挡风玻璃上包括的第一图像采集器的采集区域也发生了改变，比如第一图像采集器的采集区域的位置发生偏离或者第一图像采集器的采集区域的区域大小发生改变等。

在本实施例中，第一图像采集器可以采集第一图像采集器的可视范围内的环境物体图像，并将采集到的环境物体图像回传至车载设备，以便车载设备可以根据采集到的环境物体图像进行后续处理。同步的，第一图像采集器所采集的环境物体图像所对应的实际驾驶场景可以透过第一图像采集器的采集区域呈现给驾驶员，以使驾驶员可以看到与第一图像采集器所采集的环境物体图像中包括的环境物体相同的实际驾驶场景。

S120、根据第二图像采集器采集的驾驶员面部图像、第二图像采集器的参数以及挡风玻璃的位置，确定驾驶员的凝视点位置。

在本实施例中，参见图2，第二图像采集器可以设置在车辆内部的预设位置处，且第二图像采集器的图像采集方向设置为面向驾驶员所在方向。通过第二图像采集器可以采集驾驶员的面部图像。第二图像采集器的参数可以包括第二图像采集器内参数和外参数，在车辆内部设置好第二图像采集器后，第二图像采集器的内参数和外参数就已经固定标定。

在本实施例中，驾驶员在注视某一目标时，第二图像采集模块可以采集驾驶员注视某一目标的面部图像，驾驶员的面部图像中可以包含驾驶员凝视车挡玻璃方向的隐藏信息，例如驾驶员的头部朝向信息和驾驶员的眼球瞳孔朝向信息等。可见，在已知预先标定的第二图像采集器的参数以及挡风玻璃的位置的基础上，可以通过分析驾驶员注视某一目标时的面部图像，获知驾驶员在前挡风玻璃进行凝视的位置，即确定驾驶员的凝视点位置。其中，驾驶员的凝视点可以是指驾驶员的注意力和视线兴趣点，凝视点位置可以理解为驾驶员的注意力和视线兴趣点所在的位置。

S130、若凝视点位置落在投射区域的交叠部分内，则将环境物体图像中位于凝视点位置处的物体作为目标物体，并展示目标物体的属性信息；其中车辆的挡风玻璃上包括投射设备的投射区域，且第一图像采集器的采集区域与投射设备的投射区域交叠。

在本实施例中，参见图2，车辆的前挡风玻璃上可以包含第一图像采集器的采集区域，且在车辆前挡风玻璃上还可以包含有与第一图像采集器的采集区域存在交叠的投射设备的投射区域。投射区域的交叠部分可以理解为第一图像采集器的采集区域与投射设备的投射区域之间的共用交叠区域。可选的，车辆内部可以设置投射设备，例如HUD投射设备，通过投射设备可以在投射设备的投射区域中投影显示投影的信息。可选的，投射设备的投射区域在车辆前挡风玻璃上所指示的区域范围完全包含在第一图像采集器的采集区域所指示的区域范围之内。在一个可选示例中，投射设备可以采用AR-HUD光机设备，在采用AR-HUD光机设备投射内容时，可以将需要投射的内容投射到投射设备的投射区域所对应的部分车辆前挡风玻璃上与透过第一图像采集器的采集区域所呈现的实际场景(即环境物体图像所对应的实际场景)产生比较好的叠加视觉效果，从而呈现给驾驶员，以保证驾驶员可以在前挡风玻璃上可以看到环境物体图像和投射设备在投射区域投射的展示信息的叠加。

在本实施例中，车辆的挡风玻璃上包含第一图像采集器的采集区域以及投射设备的投射区域，并且第一图像采集器的采集区域与投射区域交叠。当驾驶员在进行凝视时，驾驶员的凝视点位置可以落在车辆挡风玻璃上的第一图像采集器的采集区域与投射区域的交叠部分；或者，驾驶员的凝视点位置还可以落在车辆挡风玻璃上的第一图像采集器的采集区域与投射设备的投射区域未交叠的部分。为了实现根据驾驶员的注意力和视线兴趣点来调整投影内容，在确定驾驶员的凝视点位置后，可以检测驾驶员的凝视点位置是否落在车辆挡风玻璃上的第一图像采集器的采集区域，以便根据检测结果采取相应的投射策略。

在本实施例中，若检测到凝视点位置落在投射区域的交叠部分内，表明驾驶员的注意力和视线兴趣点集中在投射区域的交叠部分，此时驾驶员比较关注凝视点位置处的物体，从而可以将环境物体图像中位于凝视点位置处的物体作为目标物体并展示目标物体的属性信息。图3是本发明实施例中提供的一种凝视点位置落在投射区域的交叠部分内的示意图。参见图3，若检测到凝视点位置落在投射区域的交叠部分内，则确定环境物体图像中位于凝视点位置处的物体，即驾驶员左前方的货车，此时可以将该货车作为目标物体，并展示该目标物体的属性信息。

采用上述方式，不仅可以根据驾驶员的注意力和视线兴趣点来调整在车辆前挡风玻璃包括的采集区域和投射区域的展示内容，实现了按照驾驶员需求选择合适的目标物体进行属性信息展示，进而给驾驶员将带来更加沉浸式的驾驶体验的效果；而且可以根据驾驶员的产生注意力和视线兴趣点所在的凝视点位置及时确定目标物体，并向驾驶员展示目标物体的属性信息，解决了无法把握信息展示时机的问题。另外，在展示投放内容时仅仅展示驾驶员注意力和视线兴趣点所指示的目标物体的属性信息，而不会展示其他物体的属性信息，从而可以避免展示太多内容让驾驶员分散注意力和加速疲劳，带来行驶安全隐患。

在上述实施例的基础上，可选的，通过第一图像采集器采集位于采集区域内的环境物体图像之后，还包括：

确定环境物体图像中包括的物体，以及物体属性信息；其中，物体属性信息包括如下至少一项：车辆的速度，车道，相对距离，角度以及品牌型号。

在本实施方式中，目标物体的属性信息可以包括目标物体的车辆速度、目标物体与驾驶员所在车辆的相对距离和角度、目标物体的车道指引线。目标物体的属性信息还可以包括更加详细的属性信息，比如目标物体的品牌型号识别信息等。

S140、若凝视点位置落在采集区域的非交叠部分内，则将环境物体图像中位于凝视点位置处的物体作为目标物体；确定并隐藏目标物体的属性信息。

在本实施例中，图4是本发明实施例中提供的一种凝视点位置落在采集区域的非交叠部分内的示意图。参见图4，采集区域的非交叠部分是指在第一图像采集器的采集区域中除投射区域以外的部分采集区域。若检测到凝视点位置落在采集区域的非交叠部分中，表明驾驶员的注意力和视线兴趣点在采集区域的非交叠部分，此时驾驶员比较关注采集区域的非交叠部分内的凝视点位置处的物体，从而可以将环境物体图像中位于凝视点位置处的物体作为目标物体。

在本实施例中，参见图4，当驾驶员的凝视点位置落在采集区域的非交叠部分内时，驾驶员的凝视点位置已经严重偏离到投射区域的交叠部分以外，此时驾驶员的视线必然偏离了安全视野范围。鉴于上述情况，若检测到凝视点位置落在采集区域的非交叠部分内，那么仅会确定目标物体的属性信息，但不会对确定的目标物体的属性信息进行显示，即直接隐藏目标物体的属性信息，避免展示驾驶员安全视线以外的凝视点位置处的物体的属性信息，从而可以避免当驾驶员不自觉的凝视展示的属性信息时，导致分散驾驶员的注意力，造成驾驶员无法注意车辆前方的行驶信息，从而带来行驶安全隐患。

在上述实施例的基础上，可选的，将环境物体图像中位于凝视点位置处的物体作为目标物体之后，还包括：

对投射区域中展示的除目标物体的属性信息之外的其他投射信息做弱化处理。

在本实施方式，图5是本发明实施例中提供的一种针对目标物体的属性信息以外的其他投射信息进行弱化的效果示意图。参见图5，鉴于驾驶员的注意力和视线兴趣点主要在凝视点位置，如果再在投射区域投放目标物体以外的其他物体的投放信息那么必然会浪费HUD装置的功耗。此时，可以对环境物体图像中除该目标物体以外的其他物体的投射信息做弱化处理。采用上述方式，既能简洁化投射区域上的投影内容，也能提高HUD装置的投射利用率，降低能耗。

本发明实施例中提供了一种车载投射处理方案，在运用AR-HUD进行信息展示的过程中，可以根据驾驶员的凝视点位置，从环境物体图像中选择符合驾驶员需求的目标物体，并显示目标物体的属性信息，从而解决了无法根据驾驶员的需求展示信息的问题，实现了根据驾驶员的凝视点位置在合适的时间向驾驶员展示符合驾驶员需求的展示信息，避免展示信息过多对驾驶员视线造成遮挡，或者无法准备把握信息的展示时机。

图6是本发明实施例中提供的另一种车载投射处理方法的流程示意图，本发明实施例在上述实施例的基础上进行优化，本发明实施例可以与上述一个或者多个实施例中各个可选方案结合。如图6所示，本发明实施例中提供的车载投射处理方法可以包括以下步骤S610～S560：

S610、通过第一图像采集器采集位于采集区域内的环境物体图像，其中车辆的挡风玻璃上包括第一图像采集器的采集区域。

S620、根据驾驶员面部图像以及第二图像采集器的参数，确定驾驶员的视角线方向。

在本实施例中，第二图像采集器的参数可以包括第二图像采集器内参数和外参数，内参数具体可以为第二图像采集器的焦距参数和畸变参数，外参数具体可以为车辆的行驶方向，比如以车辆的前进方向为正方向，车辆的转动角度。

在本实施例中，在已知预先标定的第二图像采集器的内参数和外参数的基础上，通过分析第二图像采集器采集驾驶员面部图像，可以得到眼球中瞳孔的位置方向和驾驶员的头部朝向，通过叠加即可得到驾驶员的视角线方向。

在上述实施例的基础上，可选的，根据驾驶员面部图像以及所述第二图像采集器的参数，确定驾驶员的视角线方向，包括以下S6201～S6203：

S6201、根据驾驶员面部图像，确定驾驶员面部特征点的图像坐标。

在本实施方式中，在获取驾驶员面部图像后，可以采用图像识别提取算法对当前驾驶员面部图像进行处理，从驾驶员面部图像中提取出对应的面部特征点的图像坐标。驾驶员面部特征点的图像坐标可以是指驾驶员的各个面部特征点在驾驶员面部图像中的坐标信息。驾驶员面部特征点可以为驾驶员的面部五官特征。例如，面部特征点可以包括：驾驶员的左眼球、驾驶员的右眼球、驾驶员的左瞳孔、驾驶员的右瞳孔、驾驶员的左耳朵、驾驶员的右耳朵、驾驶员的上嘴唇、驾驶员的鼻尖。

S6202、根据驾驶员面部特征点的图像坐标和第二图像采集器的参数，确定驾驶员的眼球三维方向向量和头部姿态的三维方向向量。

在本实施方式，在已知预先标定的第二图像采集器的内参数和外参数的基础上，可以将第二图像采集器的坐标系作为一个基准三维坐标系，从而可以将驾驶员面部特征点的图像坐标从二维坐标系转化到基准三维坐标系，进而得到驾驶员的眼球三维方向向量和头部姿态的三维方向向量。

S6203、根据驾驶员的眼球三维方向向量和头部姿态的三维方向向量，确定驾驶员的视角线方向。

在本实施方式，瞳孔在眼睛中的不同位置可以对应眼球的不同方向，在获知眼球三维方向向量和头部姿态的三维方向向量后，可以将眼球三维方向向量和头部姿态的三维方向向量进行叠加，从而将叠加后的三维方向向量作为驾驶员的视角线方向。

S630、根据驾驶员的视角线方向和车载前挡风玻璃位置，确定驾驶员的凝视点位置。

在本实施例中，驾驶员的视角线方向可以由一个三维的线向量表示，车载前挡风玻璃可以由一个三维的面向量表示，驾驶员的视角线与车载前挡风玻璃之间的相交点即可为驾驶员的凝视点。在已知车载前挡风玻璃位置和驾驶员的视角线方向的前提下，可以根据点面相交的原理得到驾驶员的凝视点位置。

S640、若凝视点位置落在投射区域的交叠部分，则将环境物体图像中位于凝视点位置处的物体作为目标物体，并展示目标物体的属性信息；其中车辆的挡风玻璃上包括投射设备的投射区域，且第一图像采集器的采集区域与投射设备的投射区域交叠。

S650、若凝视点位置落在采集区域的非交叠部分内，则将环境物体图像中位于凝视点位置处的物体作为目标物体，确定并隐藏目标物体的属性信息。

本发明实施例中提供了一种车载投射处理方案，在运用AR-HUD进行信息展示的过程中，可以根据驾驶员的凝视点位置，从环境物体图像中选择符合驾驶员需求的目标物体，并显示目标物体的属性信息，从而解决了无法根据驾驶员的需求展示信息的问题，实现了根据驾驶员的凝视点位置在合适的时间向驾驶员展示符合驾驶员需求的展示信息，避免展示信息过多对驾驶员视线造成遮挡，或者无法准备把握信息的展示时机。

图7是本发明实施例中提供的一种车载投射处理装置的结构示意图，本实施例可适用于在运用AR-HUD过程中向驾驶员投射展示信息的情况，尤其是向驾驶员投射符合驾驶员的需求的展示信息的情形。该装置可以采用软件和/或硬件的方式实现，并集成在任何具有网络通信功能的车载设备上。

如图7所示，该装置应用于车辆，所述车辆的挡风玻璃上可以包括第一图像采集器的采集区域以及投射设备的投射区域，且所述采集区域与所述投射区域交叠，本发明实施例中的车载投射处理装置具体可以包括：环境图像采集模块710、凝视点确定模块720和物体属性展示模块730。其中：

环境图像采集模块710，用于通过所述第一图像采集器采集位于所述采集区域内的环境物体图像；

凝视点确定模块720，用于根据第二图像采集器采集的驾驶员面部图像，所述第二图像采集器的参数，以及所述挡风玻璃的位置，确定驾驶员的凝视点位置；

物体属性展示模块730，用于若所述凝视点位置落在所述投射区域的交叠部分，则将所述环境物体图像中位于所述凝视点位置处的物体作为目标物体，并展示所述目标物体的属性信息。

在上述各技术方案的基础上，可选的，所述装置还包括：

物体属性确定模块740，用于确定所述环境物体图像中包括的物体，以及物体属性信息；

其中，所述物体属性信息包括如下至少一项：车辆的速度，车道，相对距离，角度以及品牌型号。

在上述各技术方案的基础上，可选的，所述凝视点确定模块720包括：

视角线确定单元，用于根据所述驾驶员面部图像以及所述第二图像采集器的参数，确定驾驶员的视角线方向；

凝视点确定单元，用于根据所述驾驶员的视角线方向和车载前挡风玻璃位置，确定驾驶员的凝视点位置。

在上述各技术方案的基础上，可选的，所述视角线确定单元包括：

面部特征点确定子单元，用于根据所述驾驶员面部图像，确定驾驶员面部特征点的图像坐标；

眼球和头部姿态确定子单元，用于根据驾驶员面部特征点的图像坐标和所述第二图像采集器的参数，确定驾驶员的眼球三维方向向量和头部姿态的三维方向向量；

视角线方向确定子单元，用于根据驾驶员的眼球三维方向向量和头部姿态的三维方向向量，确定驾驶员的视角线方向。

在上述各技术方案的基础上，可选的，所述装置还包括：

环境图像处理模块750，用于对投射区域中展示的除所述目标物体的属性信息之外的其他投射信息做弱化处理。

在上述各技术方案的基础上，可选的，所述装置还包括：

环境物体处理模块760，用于若所述凝视点位置落在采集区域的非交叠部分，则将所述环境物体图像中位于所述凝视点位置处的物体作为目标物体；

属性信息处理模块770，用于确定并隐藏所述目标物体的属性信息。

本发明实施例中所提供的车载投射处理装置可执行上述本发明任意实施例中所提供的车载投射处理方法，具备执行该车载投射处理方法相应的功能和有益效果，未在上述实施例中详尽描述的技术细节，可参见本申请任意实施例中所提供的车载投射处理方法。

图8是本发明实施例中提供的一种车载设备的结构示意图。图8示出了适于用来实现本发明实施方式的示例性车载设备812的框图。图8显示的车载设备812仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图8所示，车载设备812以通用计算设备的形式表现。该车载设备812的组件可以包括但不限于：一个或者多个处理器816，存储装置828，连接不同系统组件(包括存储装置828和处理器816)的总线818。

总线818表示几类总线结构中的一种或多种，包括存储装置总线或者存储装置控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(Industry SubversiveAlliance，ISA)总线，微通道体系结构(Micro Channel Architecture，MAC)总线，增强型ISA总线、视频电子标准协会(Video Electronics Standards Association，VESA)局域总线以及外围组件互连(Peripheral Component Interconnect，PCI)总线。

车载设备812典型地包括多种计算机系统可读介质。这些介质可以是任何能够被车载设备812访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。

存储装置828可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(Random Access Memory，RAM)830和/或高速缓存存储器832。车载设备812可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统834可以用于读写不可移动的、非易失性磁介质(图8未显示，通常称为“硬盘驱动器”)。尽管图8中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘，例如只读光盘(Compact Disc Read-Only Memory，CD-ROM),数字视盘(Digital Video Disc-Read Only Memory，DVD-ROM)或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线818相连。存储装置828可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。

具有一组(至少一个)程序模块842的程序/实用工具840，可以存储在例如存储装置828中，这样的程序模块842包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块842通常执行本发明所描述的实施例中的功能和/或方法。

该车载设备812也可以与一个或多个外部设备814(例如键盘、指向终端、显示器824等)通信，还可与一个或者多个使得用户能与该车载设备812交互的终端通信，和/或与使得该车载设备812能与一个或多个其它计算终端进行通信的任何终端(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口822进行。并且，车载设备812还可以通过网络适配器820与一个或者多个网络(例如局域网(Local Area Network，LAN)，广域网(Wide Area Network，WAN)和/或公共网络，例如因特网)通信。如图8所示，网络适配器820通过总线818与车载设备812的其它模块通信。应当明白，尽管图中未示出，可以结合车载设备812使用其它硬件和/或软件模块，包括但不限于：微代码、终端驱动器、冗余处理器、外部磁盘驱动阵列、磁盘阵列(Redundant Arrays of Independent Disks，RAID)系统、磁带驱动器以及数据备份存储系统等。

处理器816通过运行存储在存储装置828中的程序，从而执行各种功能应用以及数据处理，例如，实现本发明任意实施例中所提供的车载投射处理方法，该方法应用于车辆，所述车辆的挡风玻璃上包括第一图像采集器的采集区域以及投射设备的投射区域，且所述采集区域与所述投射区域交叠，所述方法具体包括：

通过所述第一图像采集器采集位于所述采集区域内的环境物体图像；

根据第二图像采集器采集的驾驶员面部图像，所述第二图像采集器的参数，以及所述挡风玻璃的位置，确定驾驶员的凝视点位置；

若所述凝视点位置落在所述投射区域的交叠部分内，则将所述环境物体图像中位于所述凝视点位置处的物体作为目标物体，并展示所述目标物体的属性信息。

当然，本领域技术人员可以理解，处理器还可以实现本发明任意实施例中所提供的车载投射处理方法的技术方案。

本发明实施例中还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明任意实施例中所提供的车载投射处理方法，该方法应用于车辆，所述车辆的挡风玻璃上包括第一图像采集器的采集区域以及投射设备的投射区域，且所述采集区域与所述投射区域交叠，所述方法具体包括：

通过所述第一图像采集器采集位于所述采集区域内的环境物体图像；

根据第二图像采集器采集的驾驶员面部图像，所述第二图像采集器的参数，以及所述挡风玻璃的位置，确定驾驶员的凝视点位置；

若所述凝视点位置落在所述投射区域的交叠部分内，则将所述环境物体图像中位于所述凝视点位置处的物体作为目标物体，并展示所述目标物体的属性信息。

当然，本发明实施例中所提供的一种计算机可读存储介质，其上存储的计算机程序不限于如上所述的方法操作，还可以执行本发明任意实施例中所提供的车载投射处理方法中的相关操作。

本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或终端上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (14)

1.一种车载投射处理方法，其特征在于，应用于车辆，车辆的挡风玻璃上包括第一图像采集器的采集区域以及投射设备的投射区域，且所述采集区域与所述投射区域交叠，所述方法包括：

通过所述第一图像采集器采集位于所述采集区域内的环境物体图像；

根据第二图像采集器采集的驾驶员面部图像，所述第二图像采集器的参数，以及所述挡风玻璃的位置，确定驾驶员的凝视点位置；

若所述凝视点位置落在所述投射区域的交叠部分内，则将所述环境物体图像中位于所述凝视点位置处的物体作为目标物体，并展示所述目标物体的属性信息。

2.根据权利要求1所述的方法，其特征在于，通过所述第一图像采集器采集位于所述采集区域内的环境物体图像之后，还包括：

确定所述环境物体图像中包括的物体，以及物体属性信息；

其中，所述物体属性信息包括如下至少一项：车辆的速度，车道，相对距离，角度以及品牌型号。

3.根据权利要求1所述的方法，其特征在于，根据第二图像采集器采集的驾驶员面部图像，所述第二图像采集器的参数，以及所述挡风玻璃的位置，确定驾驶员的凝视点位置，包括：

根据所述驾驶员面部图像以及所述第二图像采集器的参数，确定驾驶员的视角线方向；

根据所述驾驶员的视角线方向和车载前挡风玻璃位置，确定驾驶员的凝视点位置。

4.根据权利要求3所述的方法，其特征在于，根据所述驾驶员面部图像以及所述第二图像采集器的参数，确定驾驶员的视角线方向，包括：

根据所述驾驶员面部图像，确定驾驶员面部特征点的图像坐标；

根据驾驶员面部特征点的图像坐标和所述第二图像采集器的参数，确定驾驶员的眼球三维方向向量和头部姿态的三维方向向量；

根据驾驶员的眼球三维方向向量和头部姿态的三维方向向量，确定驾驶员的视角线方向。

5.根据权利要求1所述的方法，其特征在于，将所述环境物体图像中位于所述凝视点位置处的物体作为目标物体之后，还包括：

对投射区域中展示的除所述目标物体的属性信息之外的其他投射信息做弱化处理。

6.根据权利要求1所述的方法，其特征在于，确定驾驶员的凝视点位置之后，还包括：

若所述凝视点位置落在采集区域的非交叠部分，则将所述环境物体图像中位于所述凝视点位置处的物体作为目标物体；

确定并隐藏所述目标物体的属性信息。

7.一种车载投射处理装置，其特征在于，应用于车辆，所述车辆的挡风玻璃上包括第一图像采集器的采集区域以及投射设备的投射区域，且所述采集区域与所述投射区域交叠，所述装置包括：

环境图像采集模块，用于通过所述第一图像采集器采集位于所述采集区域内的环境物体图像；

凝视点确定模块，用于根据第二图像采集器采集的驾驶员面部图像，所述第二图像采集器的参数，以及所述挡风玻璃的位置，确定驾驶员的凝视点位置；

物体属性展示模块，用于若所述凝视点位置落在所述投射区域的交叠部分内，则将所述环境物体图像中位于所述凝视点位置处的物体作为目标物体，并展示所述目标物体的属性信息。

8.根据权利要求7所述的装置，其特征在于，所述装置还包括：

物体属性确定模块，用于确定所述环境物体图像中包括的物体，以及物体属性信息；

其中，所述物体属性信息包括如下至少一项：车辆的速度，车道，相对距离，角度以及品牌型号。

9.根据权利要求7所述的装置，其特征在于，所述凝视点确定模块包括：

视角线确定单元，用于根据所述驾驶员面部图像以及所述第二图像采集器的参数，确定驾驶员的视角线方向；

凝视点确定单元，用于根据所述驾驶员的视角线方向和车载前挡风玻璃位置，确定驾驶员的凝视点位置。

10.根据权利要求9所述的装置，其特征在于，所述视角线确定单元包括：

面部特征点确定子单元，用于根据所述驾驶员面部图像，确定驾驶员面部特征点的图像坐标；

眼球和头部姿态确定子单元，用于根据驾驶员面部特征点的图像坐标和所述第二图像采集器的参数，确定驾驶员的眼球三维方向向量和头部姿态的三维方向向量；

视角线方向确定子单元，用于根据驾驶员的眼球三维方向向量和头部姿态的三维方向向量，确定驾驶员的视角线方向。

11.根据权利要求7所述的装置，其特征在于，所述装置还包括：

环境图像处理模块，用于对投射区域中展示的除所述目标物体的属性信息之外的其他投射信息做弱化处理。

12.根据权利要求7所述的装置，其特征在于，所述装置还包括：

环境物体处理模块，用于若所述凝视点位置落在采集区域的非交叠部分，则将所述环境物体图像中位于所述凝视点位置处的物体作为目标物体；

属性信息处理模块，用于确定并隐藏所述目标物体的属性信息。

13.一种车载设备，其特征在于，所述车载设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现权利要求1-6中任一所述的车载投射处理方法。

14.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1-6中任一所述的车载投射处理方法。