CN107589851A - 汽车的交互方法和系统 - Google Patents

Abstract

本发明提供了汽车的交互方法和系统，该方法包括：获取汽车的当前场景图像，并将当前场景图像显示在汽车内的屏幕上；从当前场景图像中解析出定位坐标信息；获取汽车的惯性定位信息，并将定位坐标信息与惯性定位信息进行融合，得到定位信息；根据定位信息调取对应的虚拟图像信息；将虚拟图像信息叠加在当前场景图像中，并显示在屏幕上；通过识别用户的手势信息控制所述虚拟图像信息的动画效果。本发明通过在汽车的交互装置中加入增强现实功能，提高用户在行驶过程中的娱乐效果。

Description

汽车的交互方法和系统

技术领域

本发明涉及汽车交互技术领域，尤其是涉及汽车的交互方法和系统。

背景技术

随着汽车电子技术的飞速发展，车载信息娱乐和信息通信系统正逐渐成为汽车厂商追捧的热点。如今，人们在驾驶汽车时不仅关注驾驶体验，也同时关注在行车过程中的娱乐体验。对于娱乐体验的这一需求，也推动着车载娱乐系统功能的不断完善及优化。

现有的车载娱乐系统种类单一，交互性能较差，在车辆行驶过程中不能给用户带来良好的娱乐体验。

发明内容

有鉴于此，本发明的目的在于提供汽车的交互方法和系统，在汽车的交互装置中通过增强现实功能，提高用户在行驶过程中的娱乐体验。

第一方面，本发明实施例提供了汽车的交互方法，所述方法包括：

获取所述汽车的当前场景图像，并将所述当前场景图像显示在所述汽车内的屏幕上；

从所述当前场景图像中解析出定位坐标信息；

获取所述汽车的惯性定位信息，并将所述惯性定位信息与所述定位坐标信息进行融合，得到定位信息；

根据所述定位信息调取对应的虚拟图像信息；

将所述虚拟图像信息叠加在所述当前场景图像中，并进行显示；

通过识别用户的手势信息控制所述虚拟图像信息的动画效果。

结合第一方面，本发明实施例提供了第一方面的第一种可能的实施方式，其中，所述惯性定位信息包括车的速度以及车的方向，所述获取所述汽车的惯性定位信息包括：

获取所述汽车的转速、车轴信息以及车轮转向；

根据所述转速得到所述车的速度，以及根据所述车轴信息以及所述车轮转向得到所述车的方向。

结合第一方面，本发明实施例提供了第一方面的第二种可能的实施方式，其中，所述通过识别用户的手势信息控制所述虚拟图像信息的动画效果包括：

通过手势识别模组识别所述手势信息；

处理器根据所述手势信息控制所述虚拟图像信息的动画效果。

结合第一方面，本发明实施例提供了第一方面的第三种可能的实施方式，其中，所述方法还包括：

获取与所述定位坐标信息相关的场景信息；

将所述场景信息显示在所述屏幕上。

结合第一方面，本发明实施例提供了第一方面的第四种可能的实施方式，其中，所述获取所述汽车的当前场景图像，并将所述当前场景图像显示在所述汽车内的屏幕上包括：

通过图像采集设备采集所述当前场景图像；

控制投影设备将所述当前场景图像显示在所述汽车内的屏幕上。

结合第一方面，本发明实施例提供了第一方面的第五种可能的实施方式，其中，所述根据所述定位信息调取对应的虚拟图像信息包括：

根据所述定位信息选择所述当前场景图像所对应的虚拟图像信息；

从存储设备中调取所述虚拟图像信息。

结合第一方面，本发明实施例提供了第一方面的第六种可能的实施方式，其中，所述方法还包括：

根据所述定位信息调整所述定位坐标信息。

第二方面，本发明实施例还提供汽车的交互系统，所述系统包括：

图像显示模块，用于获取所述汽车的当前场景图像，并将所述当前场景图像显示在所述汽车内的屏幕上；

解析模块，用于从所述当前场景图像中解析出定位坐标信息；

定位融合模块，用于获取所述汽车的惯性定位信息，并将所述定位坐标信息与所述惯性定位信息进行融合，得到定位信息；

调取模块，用于根据所述定位信息调取对应的虚拟图像信息；

虚拟显示模块，用于将所述虚拟图像信息叠加在所述当前场景图像中，并进行显示；

识别控制模块，用于通过识别用户的手势信息控制所述虚拟图像信息的动画效果。

结合第二方面，本发明实施例提供了第二方面的第一种可能的实施方式，其中，所述惯性定位信息包括车的速度以及车的方向，所述定位融合模块包括定位获取模块和融合模块，其中，所述定位获取模块包括：

第一获取单元，用于获取所述汽车的转速、车轴信息以及车轮转向；

第二获取单元，用于根据所述转速得到所述车的速度，以及根据所述车轴信息以及所述车轮转向得到所述车的方向。

结合第二方面，本发明实施例提供了第二方面的第一种可能的实施方式，其中，所述识别控制模块包括：

识别单元，用于通过手势识别模组识别所述手势信息；

控制单元，用于处理器根据所述手势信息控制所述虚拟图像信息的动画效果。

本发明实施例提供了汽车的交互方法和系统，该方法包括：获取汽车的当前场景图像，并将当前场景图像显示在汽车内的屏幕上；从当前场景图像中解析出定位坐标信息；获取汽车的惯性定位信息，并将定位坐标信息与惯性定位信息进行融合，得到定位信息；根据定位信息调取对应的虚拟图像信息；将虚拟图像信息叠加在当前场景图像中，并显示在屏幕上；通过识别用户的手势信息控制所述虚拟图像信息的动画效果。本发明通过在汽车的交互装置中加入增强现实功能，提高用户在行驶过程中的娱乐效果。

本发明的其他特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的汽车的交互方法流程图；

图2为本发明实施例提供的汽车的交互方法的另一流程图；

图3为本发明实施例提供的汽车的交互系统示意图；

图4为本发明实施例提供的汽车的交互系统的另一示意图；

图5为本发明实施例提供的汽车的示意图；

图6为本发明实施例提供的汽车的交互装置示意图。

图标：

10-图像显示模块；20-解析模块；30-定位融合模块；40-调取模块；50-虚拟显示模块；60-识别控制模块；31-定位获取模块；32-融合模块；100-图像采集设备；200-交互设备；201-处理器；202-手势识别模组；203-投影仪。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

目前现有的车载娱乐系统种类单一，交互性能较差，车辆行驶过程中用户的娱乐体验不佳。基于此，本发明实施例提供的汽车的交互方法和系统，在汽车的交互装置中通过增强现实功能，提高用户在行驶过程中的娱乐体验。

为便于对本实施例进行理解，首先对本发明实施例所公开的汽车的交互方法进行详细介绍。

实施例一：

图1为本发明实施例提供的汽车的交互方法流程图。

参照图1，汽车的交互方法包括：

步骤S101，获取汽车的当前场景图像，并将当前场景图像显示在汽车内的屏幕上；

这里，通过设置在汽车上的采集设备来采集外部环境信息和位置信息，获得当前场景图像，并将当前场景图像发送给处理器，以使处理器控制投影仪进行投影，从而将当前场景图像投影到屏幕的幕布上。

如图5所示，幕布呈倒U型包围后排车座，具体地，汽车车顶设置有收纳屏幕，用于显示投影画面。该收纳屏幕包括连接件、升降结构和幕布，连接件、升降结构和幕布依次相连接，其中，连接件设置在车顶，幕布通过连接件固定在车顶，并通过升降结构上升或下降。这里的幕布采用双层结构，包括透光幕布和不透光幕布，所述透光幕布和所述不透光幕布可单独使用，并且透光幕布为全息膜。

进一步地，步骤S101可采取如下步骤实现：

通过图像采集设备采集当前场景图像；

控制投影设备将当前场景图像显示在汽车内的屏幕上。

需要说明的是，汽车包括交互装置，如图6所示，该交互装置包括：图像采集设备100和交互设备200，其中，交互设备200包括投影仪203、手势识别模组202和处理器201；

图像采集设备100与处理器201相连接，用于采集外部环境信息和位置信息，并将采集外部环境信息和位置信息发送至处理器201；手势识别模组202与处理器201相连接，用于感应识别用户手势，将识别信息发送至处理器201；处理器201与投影仪203相连接，用于控制投影仪203按照采集外部环境信息、位置信息和识别信息进行投影。

步骤S102，从当前场景图像中解析出定位坐标信息；这里的定位坐标信息为GPS粗定位坐标；

步骤S103，获取汽车的惯性定位信息，并将惯性定位信息与定位坐标信息进行融合，得到定位信息；

具体地，通过定位数据融合得到精准定位信息。

步骤S104，根据定位信息调取对应的虚拟图像信息；

进一步地，步骤S104包括：

根据定位信息选择当前场景图像所对应的虚拟图像信息；

从存储设备中调取虚拟图像信息。

具体地，不同的场景图像对应不同的虚拟图像信息，存储设备中存储有虚拟图像信息，根据当前场景图像调取对应的虚拟图像信息。例如，当汽车在行驶过程中，遭遇堵车状况时，通过图像采集设备对当前场景图像进行采集，可以将周边的车辆影像转换为游戏中的怪兽或其他虚拟形象，然后将该虚拟形象通过投影仪投影到屏幕的幕布上，然后用户通过手势动作与虚拟形象进行交互，从而带来良好的娱乐体验，缓解堵车过程中的焦虑情绪。

步骤S105，将虚拟图像信息叠加在当前场景图像中，并进行显示；

步骤S106，通过识别用户的手势信息控制虚拟图像信息的动画效果。

进一步地，如图2所示，惯性定位信息包括车的速度以及车的方向，获取汽车的惯性定位信息包括：

步骤S201，获取汽车的转速、车轴信息以及车轮转向；

步骤S202，根据转速得到车的速度，以及根据车轴信息以及车轮转向得到车的方向。

进一步地，通过手势识别模组识别手势信息；处理器根据手势信息控制虚拟图像信息的动画效果。其中，手势识别模组与处理器相连接，用于感应识别用户手势，将识别信息发送至处理器。

具体地，手势识别模组包括左侧手势识别模组和右侧手势识别模组，左侧手势识别模组和右侧手势识别模组分别用于识别左侧用户手势和识别右侧用户手势。

进一步地，获取与定位坐标信息相关的场景信息；将场景信息显示在屏幕上。

这里，通过GPS侦测到不同地点时，可以显示与地点相应的内容，例如车辆开到故宫附近，系统会侦测到故宫的位置信息，这时，屏幕会出现故宫主题的导览介绍和相应的游戏主题等配套介面。

进一步地，根据定位信息调整定位坐标信息。

这里的定位坐标信息是GPS粗定位坐标，通过对汽车进行惯性定位，将得到的惯性定位信息与GPS粗定位坐标进行融合，得到细致定位信息，从而进行精准定位，便于准确显示虚拟图像。

实施例二：

图3为本发明实施例提供的汽车的交互系统的示意图。

参照图3，汽车的交互系统包括：

图像显示模块10，用于获取汽车的当前场景图像，并将当前场景图像显示在汽车内的屏幕上；

解析模块20，用于从当前场景图像中解析出定位坐标信息；

定位融合模块30，用于获取汽车的惯性定位信息，并将定位坐标信息与惯性定位信息进行融合，得到定位信息；

调取模块40，用于根据定位信息调取对应的虚拟图像信息；

虚拟显示模块50，用于将虚拟图像信息叠加在当前场景图像中，并进行显示；

识别控制模块60，用于通过识别用户的手势信息控制虚拟图像信息的动画效果。

进一步地，惯性定位信息包括车的速度以及车的方向，如图4所示，定位融合模块30包括定位获取模块31和融合模块32，其中，定位获取模块31包括：

第一获取单元，用于获取汽车的转速、车轴信息以及车轮转向；

第二获取单元，用于根据转速得到车的速度，以及根据车轴信息以及车轮转向得到车的方向。

进一步地，识别控制模块包括：

识别单元，用于通过手势识别模组识别手势信息；

控制单元，用于处理器根据手势信息控制虚拟图像信息的动画效果。

另外，系统是具有联网功能的，所以在用户与屏幕中的虚拟图像进行交互游戏过程中，可以联网进行排名的，并通过GPS侦测到不同地点时，可以显示与地点相应的内容，例如车辆开到故宫附近，系统会侦测到故宫的位置信息，这时，屏幕会出现故宫主题的导览介绍和相应的游戏主题等配套介面。

图3为本实施例提供的汽车的示意图，汽车的车顶设置收纳屏幕，用于显示投影画面，收纳屏幕包括连接件、升降结构和幕布，幕布通过连接件固定在车顶，并通过升降结构上升或下降，图3中的幕布为下降以后的场景。

本发明实施例提供了汽车的交互方法和系统，该方法包括：获取汽车的当前场景图像，并将当前场景图像显示在汽车内的屏幕上；从当前场景图像中解析出定位坐标信息；获取汽车的惯性定位信息，并将定位坐标信息与惯性定位信息进行融合，得到定位信息；根据定位信息调取对应的虚拟图像信息；将虚拟图像信息叠加在当前场景图像中，并显示在屏幕上；通过识别用户的手势信息控制所述虚拟图像信息的动画效果。本发明通过在汽车的交互装置中加入增强现实功能，提高用户在行驶过程中的娱乐效果。

本发明实施例提供的汽车的交互系统，与上述实施例提供的汽车的交互方法具有相同的技术特征，所以也能解决相同的技术问题，达到相同的技术效果。

本发明实施例还提供一种电子设备，包括存储器、处理器，存储器中存储有可在处理器上运行的计算机程序，处理器执行计算机程序时实现上述实施例提供的汽车的交互方法的步骤。

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器运行时执行上述实施例的汽车的交互方法的步骤。

另外，在本发明实施例的描述中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。

在本发明的描述中，需要说明的是，术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。

本发明实施例所提供的进行汽车的交互方法的计算机程序产品，包括存储了处理器可执行的非易失的程序代码的计算机可读存储介质，所述程序代码包括的指令可用于执行前面方法实施例中所述的方法，具体实现可参见方法实施例，在此不再赘述。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

最后应说明的是：以上所述实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种汽车的交互方法，其特征在于，所述方法包括：

获取所述汽车的当前场景图像，并将所述当前场景图像显示在所述汽车内的屏幕上；

从所述当前场景图像中解析出定位坐标信息；

获取所述汽车的惯性定位信息，并将所述惯性定位信息与所述定位坐标信息进行融合，得到定位信息；

根据所述定位信息调取对应的虚拟图像信息；

将所述虚拟图像信息叠加在所述当前场景图像中，并进行显示；

通过识别用户的手势信息控制所述虚拟图像信息的动画效果。

2.根据权利要求1所述的汽车的交互方法，其特征在于，所述惯性定位信息包括车的速度以及车的方向，所述获取所述汽车的惯性定位信息包括：

获取所述汽车的转速、车轴信息以及车轮转向；

根据所述转速得到所述车的速度，以及根据所述车轴信息以及所述车轮转向得到所述车的方向。

3.根据权利要求1所述的汽车的交互方法，其特征在于，所述通过识别用户的手势信息控制所述虚拟图像信息的动画效果包括：

通过手势识别模组识别所述手势信息；

处理器根据所述手势信息控制所述虚拟图像信息的动画效果。

4.根据权利要求1所述的汽车的交互方法，其特征在于，所述方法还包括：

获取与所述定位坐标信息相关的场景信息；

将所述场景信息显示在所述屏幕上。

5.根据权利要求1所述的汽车的交互方法，其特征在于，所述获取所述汽车的当前场景图像，并将所述当前场景图像显示在所述汽车内的屏幕上包括：

通过图像采集设备采集所述当前场景图像；

控制投影设备将所述当前场景图像显示在所述汽车内的屏幕上。

6.根据权利要求1所述的汽车的交互方法，其特征在于，所述根据所述定位信息调取对应的虚拟图像信息包括：

根据所述定位信息选择所述当前场景图像所对应的虚拟图像信息；

从存储设备中调取所述虚拟图像信息。

7.根据权利要求1所述的汽车的交互方法，其特征在于，所述方法还包括：

根据所述定位信息调整所述定位坐标信息。

8.一种汽车的交互系统，其特征在于，所述系统包括：

图像显示模块，用于获取所述汽车的当前场景图像，并将所述当前场景图像显示在所述汽车内的屏幕上；

解析模块，用于从所述当前场景图像中解析出定位坐标信息；

定位融合模块，用于获取所述汽车的惯性定位信息，并将所述定位坐标信息与所述惯性定位信息进行融合，得到定位信息；

调取模块，用于根据所述定位信息调取对应的虚拟图像信息；

虚拟显示模块，用于将所述虚拟图像信息叠加在所述当前场景图像中，并进行显示；

识别控制模块，用于通过识别用户的手势信息控制所述虚拟图像信息的动画效果。

9.根据权利要求8所述的汽车的交互系统，其特征在于，所述惯性定位信息包括车的速度以及车的方向，所述定位融合模块包括定位获取模块和融合模块，其中，所述定位获取模块包括：

第一获取单元，用于获取所述汽车的转速、车轴信息以及车轮转向；

第二获取单元，用于根据所述转速得到所述车的速度，以及根据所述车轴信息以及所述车轮转向得到所述车的方向。

10.根据权利要求8所述的汽车的交互系统，其特征在于，所述识别控制模块包括：

识别单元，用于通过手势识别模组识别所述手势信息；

控制单元，用于处理器根据所述手势信息控制所述虚拟图像信息的动画效果。