CN110654331A

CN110654331A - 车辆、车机设备及其车载助手交互方法

Info

Publication number: CN110654331A
Application number: CN201810713111.5A
Authority: CN
Inventors: 王岩
Original assignee: Shanghai Pateo Network Technology Service Co Ltd
Current assignee: Shanghai Pateo Network Technology Service Co Ltd
Priority date: 2018-06-29
Filing date: 2018-06-29
Publication date: 2020-01-07

Abstract

本申请提供一种车辆、车机设备及其车载助手交互方法，车机设备实时检测是否接收到用户的语音信息，若检测到用户的语音信息，分析所述语音信息中包含的关键词，根据所述关键词从预设的词库中判断是否存在相对应的车载助手触发指令，若预设的词库中存在相对应的车载助手触发指令，调用所述车载助手触发指令，以启动车载助手进行交互。通过上述方式，本申请能够根据用户的语音信息进行智能识别，若识别出预设的关键词，能够自动启动车载助手，通过车载助手进行交互并实现控制，方便用户操作，改善用户体验。

Description

车辆、车机设备及其车载助手交互方法

技术领域

本申请涉及车载控制技术领域，具体涉及一种车机设备、一种车载助手交互方法，以及应用所述车机设备的车辆。

背景技术

随着汽车及互联网软件产品的普及，驾驶者对汽车内的智能化体验需求越来越明显。一方面，驾驶者想继续使用非驾车时的手机互联网产品服务，如导航路况查询、听音乐相声等有声内容、接打电话等等，另一方面又不希望影响到驾车安全。

但是，很多汽车的车机设备，不论前装还是后装，已经有很多智能(互联网)功能服务，但由于屏幕操控不方便、影响驾驶安全等因素，用户体验不理想。虽然有些车机设备加上了一些语音交互功能，但会受到车内噪音等各种限制，有时还不够快，整体的效果较差，影响用户体验。

针对现有技术的多方面不足，本申请的发明人经过深入研究，提出一种车辆、车机设备及其车载助手交互方法。

发明内容

本申请的目的在于，提供一种车辆、车机设备及其车载助手交互方法，能够根据用户的语音信息进行智能识别，若识别出预设的关键词，能够自动启动车载助手，通过车载助手进行交互并实现控制，方便用户操作，改善用户体验。

为解决上述技术问题，本申请提供一种车载助手交互方法，作为其中一种实施方式，所述车载助手交互方法包括步骤：

车机设备实时检测是否接收到用户的语音信息；

若检测到用户的语音信息，分析所述语音信息中包含的关键词；

根据所述关键词从预设的词库中判断是否存在相对应的车载助手触发指令；

若预设的词库中存在相对应的车载助手触发指令，调用所述车载助手触发指令，以启动车载助手进行交互。

作为其中一种实施方式，所述车载助手交互方法还包括：

车机设备判断用户是否启动个性化设置；

若启动个性化设置，车机设备提示用户提供关键词；

获取用户输入的关键词存储到预设的词库中，并生成与所述关键词绑定的车载助手触发指令。

作为其中一种实施方式，所述获取用户输入的关键词存储到预设的词库中的步骤，具体包括：

获取用户手动输入的关键词、获取用户从提供的词组中选择的关键词、或获取用户语音输入的关键词，将所述关键词存储到预设的词库中。

作为其中一种实施方式，所述获取用户语音输入的关键词的步骤，还包括：

车机设备启动麦克风；

通过所述麦克风获取用户的语音输入，并提示用户重复输入至少三次关键词；

车机设备通过采集的至少三次语音输入的关键词，对所述用户的声纹信息进行识别；

将所述声纹信息与所述关键词进行绑定，以同时用于进行身份识别并进行关键词识别。

作为其中一种实施方式，所述车载助手交互方法还包括：

车机设备实时检测是否接收到异常呼叫语音；

若接收到异常呼叫语音，自动启动车载助手；

所述车载助手触发启动麦克风和摄像头，通过麦克风实现救援咨询，并通过所述摄像头实时拍摄车载场景；

将救援咨询和车载场景上传到报警系统。

作为其中一种实施方式，所述调用所述车载助手触发指令，以启动车载助手进行交互的步骤之后，还包括：

车机设备判断当前车载场景的环境音量；

根据所述环境音量调整所述车载助手的实时音量，以使所述实时音量与所述环境音量相匹配。

车机设备在判断启动车载助手后，判断用户是否需要操作车机设备；

若判断到用户与车载助手交互的内容为需要操作车机设备，将车机设备的显示屏往用户所在的位置倾斜，以便于用户观察显示屏。

车机设备判断用户是否语音说出隐藏的报警词；

若判断到隐藏的报警词，车机设备在后台发出报警救助。

为解决上述技术问题，本申请还提供一种车机设备，作为其中一种实施方式，所述车机设备包括处理器，所述处理器用于执行程序数据，以实现上述的车载助手交互方法。

为解决上述技术问题，本申请还提供一种车辆，作为其中一种实施方式，所述车辆配置有上述的车机设备，所述车机设备支持4G通信网络、5G通信网络或WIFI网络，所述车载助手可架设于所述车机设备上，或架设于云服务器，所述车机设备与云服务器之间通过4G通信网络、5G通信网络或WIFI网络进行网络连接。

本申请车辆、车机设备及其车载助手交互方法，车机设备实时检测是否接收到用户的语音信息，若检测到用户的语音信息，分析所述语音信息中包含的关键词，根据所述关键词从预设的词库中判断是否存在相对应的车载助手触发指令，若预设的词库中存在相对应的车载助手触发指令，调用所述车载助手触发指令，以启动车载助手进行交互。通过上述方式，本申请能够根据用户的语音信息进行智能识别，若识别出预设的关键词，能够自动启动车载助手，通过车载助手进行交互并实现控制，方便用户操作，改善用户体验。

上述说明仅是本申请技术方案的概述，为了能够更清楚了解本申请的技术手段，而可依照说明书的内容予以实施，并且为了让本申请的上述和其他目的、特征和优点能够更明显易懂，以下特举较佳实施例，并配合附图,详细说明如下。

附图说明

图1为本申请车载助手交互方法一实施方式的流程示意图。

图2为本申请车机设备一实施方式的结构示意图。

具体实施方式

为更进一步阐述本申请为达成预定申请目的所采取的技术手段及功效,以下结合附图及较佳实施例，对本申请详细说明如下。

通过具体实施方式的说明,当可对本申请为达成预定目的所采取的技术手段及效果得以更加深入且具体的了解，然而所附图式仅是提供参考与说明之用,并非用来对本申请加以限制。

请参阅图1，图1为本申请车载助手交互方法一实施方式的流程示意图。

需要说明的是，作为其中一种实施方式，所述车载助手交互方法包括但不限于如下几个步骤。

步骤S101，车机设备实时检测是否接收到用户的语音信息；

步骤S102，若检测到用户的语音信息，分析所述语音信息中包含的关键词；

步骤S103，根据所述关键词从预设的词库中判断是否存在相对应的车载助手触发指令；

步骤S104，若预设的词库中存在相对应的车载助手触发指令，调用所述车载助手触发指令，以启动车载助手进行交互。

需要特别说明的是，本实施方式车载助手可以架设在车机设备，也可以架设在云服务器，而如果是架设在云服务器，则车机设备需要和云服务器之间进行无线网络连接，比如可以采用3G通信网络、4G通信网络、5G通信网络或者WIFI网络等。

对应需要说明的是，本实施方式预设的词库，也可以存在在车机设备上，当然也可以存储在云服务器，优选地，存储在车机设备上，以避免在无网络状态时无法启动车载助手。

举例而言，本实施方式的关键词，可以直呼车载助手的名称，比如红旗汽车助手可以为“小旗”，跑车车载助手可以为“小飞”等等。

值得一提的是，本实施方式车载助手可以实现对车辆所有车载设备的控制，还可以直接实现无人驾驶等。

作为其中一种实施方式，所述车载助手交互方法还可以包括：车机设备判断用户是否启动个性化设置；若启动个性化设置，车机设备提示用户提供关键词；获取用户输入的关键词存储到预设的词库中，并生成与所述关键词绑定的车载助手触发指令。不难理解的是，本实施方式通过这种方式可以实现用户随时随地的个性化设置关键词，方便用户使用。

在本实施方式中，所述获取用户输入的关键词存储到预设的词库中的步骤，具体可以包括：获取用户手动输入的关键词、获取用户从提供的词组中选择的关键词、或获取用户语音输入的关键词，将所述关键词存储到预设的词库中。换而言之，本实施方式可以通过多种方式设置关键词以实现个性化。

值得一提的是，语音控制的方式可能会存在误识别并导致误操作，因此，针对语音输入关键词的方式，需要进行关键词的训练，本实施方式所述获取用户语音输入的关键词的步骤，还可以包括：车机设备启动麦克风；通过所述麦克风获取用户的语音输入，并提示用户重复输入至少三次关键词；车机设备通过采集的至少三次语音输入的关键词，对所述用户的声纹信息进行识别；将所述声纹信息与所述关键词进行绑定，以同时用于进行身份识别并进行关键词识别。

在一些特殊场景中，比如用户驾车到山区冒险野营等，可能会突发意外，但是意外来得太突然时，可能无法实现自救，因此，本实施方式所述车载助手交互方法还包括：车机设备实时检测是否接收到异常呼叫语音；若接收到异常呼叫语音，自动启动车载助手；所述车载助手触发启动麦克风和摄像头，通过麦克风实现救援咨询，并通过所述摄像头实时拍摄车载场景；将救援咨询和车载场景上传到报警系统。举例而言，异常呼叫语音可以为“啊”、“救命”或惨叫等等。

需要说明的是，车载助手的音量可以默认设置，当然也可以根据实时场景进行智能调整，避免影响当前用户，本实施方式所述调用所述车载助手触发指令，以启动车载助手进行交互的步骤之后，还可以包括：车机设备判断当前车载场景的环境音量；根据所述环境音量调整所述车载助手的实时音量，以使所述实时音量与所述环境音量相匹配。

不难理解的是，当用户进行语音控制时，一般处于行车状态，此时不方便用户观看车机设备的显示屏，因此，本实施方式所述调用所述车载助手触发指令，以启动车载助手进行交互的步骤之后，还可以包括：车机设备在判断启动车载助手后，判断用户是否需要操作车机设备；若判断到用户与车载助手交互的内容为需要操作车机设备，将车机设备的显示屏往用户所在的位置倾斜，以便于用户观察显示屏。

针对现下约车环境存在较大风险甚至生命危险的情况，本实施方式所述调用所述车载助手触发指令，以启动车载助手进行交互的步骤之后，还可以包括：车机设备判断用户是否语音说出隐藏的报警词；若判断到隐藏的报警词，车机设备在后台发出报警救助。其中，隐藏的报警词可以是用户预先设定，比如设置为“今晚不能回家吃饭了”、“照顾好爸爸妈妈”等等，这些词语不容易被现场歹徒识别，但是又能够实现报警。

本申请能够根据用户的语音信息进行智能识别，若识别出预设的关键词，能够自动启动车载助手，通过车载助手进行交互并实现控制，方便用户操作，改善用户体验。

请参阅图2，本申请还提供一种车机设备，作为其中一种实施方式，所述车机设备包括处理器21，所述处理器21用于执行程序数据，以实现上述的车载助手交互方法。

具体而言，所述处理器21用于实时检测是否接收到用户的语音信息；

若检测到用户的语音信息，所述处理器21用于分析所述语音信息中包含的关键词；

所述处理器21用于根据所述关键词从预设的词库中判断是否存在相对应的车载助手触发指令；

若预设的词库中存在相对应的车载助手触发指令，所述处理器21用于调用所述车载助手触发指令，以启动车载助手进行交互。

作为其中一种实施方式，所述处理器21还可以用于判断用户是否启动个性化设置；若启动个性化设置，车机设备提示用户提供关键词；获取用户输入的关键词存储到预设的词库中，并生成与所述关键词绑定的车载助手触发指令。不难理解的是，本实施方式通过这种方式可以实现用户随时随地的个性化设置关键词，方便用户使用。

在本实施方式中，所述处理器21具体可以用于获取用户手动输入的关键词、获取用户从提供的词组中选择的关键词、或获取用户语音输入的关键词，将所述关键词存储到预设的词库中。换而言之，本实施方式可以通过多种方式设置关键词以实现个性化。

值得一提的是，语音控制的方式可能会存在误识别并导致误操作，因此，针对语音输入关键词的方式，需要进行关键词的训练，本实施方式所述处理器21可以用于启动麦克风；通过所述麦克风获取用户的语音输入，并提示用户重复输入至少三次关键词；所述处理器21通过采集的至少三次语音输入的关键词，对所述用户的声纹信息进行识别；将所述声纹信息与所述关键词进行绑定，以同时用于进行身份识别并进行关键词识别。

在一些特殊场景中，比如用户驾车到山区冒险野营等，可能会突发意外，但是意外来得太突然时，可能无法实现自救，因此，本实施方式所述处理器21用于实时检测是否接收到异常呼叫语音；若接收到异常呼叫语音，自动启动车载助手；所述车载助手触发启动麦克风和摄像头，通过麦克风实现救援咨询，并通过所述摄像头实时拍摄车载场景；将救援咨询和车载场景上传到报警系统。举例而言，异常呼叫语音可以为“啊”、“救命”或惨叫等等。

需要说明的是，车载助手的音量可以默认设置，当然也可以根据实时场景进行智能调整，避免影响当前用户，本实施方式所述处理器21用于判断当前车载场景的环境音量；根据所述环境音量调整所述车载助手的实时音量，以使所述实时音量与所述环境音量相匹配。

不难理解的是，当用户进行语音控制时，一般处于行车状态，此时不方便用户观看车机设备的显示屏，因此，本实施方式所述处理器21用于在判断启动车载助手后，判断用户是否需要操作车机设备；若判断到用户与车载助手交互的内容为需要操作车机设备，将车机设备的显示屏往用户所在的位置倾斜，以便于用户观察显示屏。

针对现下约车环境存在较大风险甚至生命危险的情况，本实施方式所述处理器21用于判断用户是否语音说出隐藏的报警词；若判断到隐藏的报警词，车机设备在后台发出报警救助。其中，隐藏的报警词可以是用户预先设定，比如设置为“今晚不能回家吃饭了”、“照顾好爸爸妈妈”等等，这些词语不容易被现场歹徒识别，但是又能够实现报警。

本申请还提供一种车辆，作为其中一种实施方式，所述车辆配置有上述的车机设备，所述车机设备支持4G通信网络、5G通信网络或WIFI网络，所述车载助手可架设于所述车机设备上，或架设于云服务器，所述车机设备与云服务器之间通过4G通信网络、5G通信网络或WIFI网络进行网络连接。

本实施方式车机设备、车辆和云服务器均可以采用WIFI技术或5G技术等，比如利用5G车联网网络实现彼此的网络连接，本实施方式所采用的5G技术可以是一个面向场景化的技术，本申请利用5G技术对车辆起到关键的支持作用，其同时实现连接人、连接物或连接车辆，其具体可以采用下述三个典型应用场景组成。

第一个是eMBB(Enhance Mobile Broadband，增强移动宽带)，使用户体验速率在0.1～1gpbs，峰值速率在10gbps，流量密度在10Tbps/km2；

第二个超可靠低时延通信，本申请可以实现的主要指标是端到端的时间延迟为ms(毫秒)级别；可靠性接近100％；

第三个是mMTC(海量机器类通信)，本申请可以实现的主要指标是连接数密度，每平方公里连接100万个其他终端，10^6/km2。

通过上述方式，本申请利用5G技术的超可靠、低时延时的特点，结合比如雷达和摄像头等就可以给车辆提供显示的能力，可以跟车辆实现互动，同时利用5G技术的交互式感知功能，用户可以对外界环境做一个输出，不光能探测到状态，还可以做一些反馈等。进一步而言，本申请还可以应用到自动驾驶的协同里面，比如车辆编队等。

此外，本申请还可以利用5G技术实现通信增强自动驾驶感知能力，并且可以满足车内乘客对AR(增强现实)/VR(虚拟现实)、游戏、电影、移动办公等车载信息娱乐，以及高精度的需求。本申请可以实现厘米级别的3D高精度定位地图的下载量在3～4Gb/km，正常车辆限速120km/h(千米/时)下每秒钟地图的数据量为90Mbps～120Mbps(兆比特每秒)，同时还可以支持融合车载传感器信息的局部地图实时重构，以及危险态势建模与分析等。

在本申请中，上述车机设备可以使用到具备车辆TBOX的车辆系统中，其还可以连接到车辆的CAN总线上。

在本实施方式中，CAN可以包括三条网络通道CAN_1、CAN_2和CAN_3，车辆还可以设置一条以太网网络通道，其中三条CAN网络通道可以通过两个车联网网关与以太网网络通道相连接，举例而言，其中CAN_1网络通道包括混合动力总成系统，其中CAN_2网络通道包括运行保障系统，其中CAN_3网络通道包括电力测功机系统，以太网网络通道包括高级管理系统，所述的高级管理系统包括作为节点连接在以太网网络通道上的人-车-路模拟系统和综合信息采集单元，所述的CAN_1网络通道、CAN_2网络通道与以太网网络通道的车联网网关可以集成在综合信息采集单元中；CAN_3网络通道与以太网网络通道的车联网网关可以集成在人-车-路模拟系统中。

进一步而言，所述的CAN_1网络通道连接的节点有：发动机ECU、电机MCU、电池BMS、自动变速器TCU以及混合动力控制器HCU；CAN_2网络通道连接的节点有：台架测控系统、油门传感器组、功率分析仪、瞬时油耗仪、直流电源柜、发动机水温控制系统、发动机机油温度控制系统、电机水温控制系统以及发动机中冷温度控制系统；CAN_3网络通道连接的节点有：电力测功机控制器。

优选的所述的CAN_1网络通道的速率为250Kbps，采用J1939协议；CAN_2网络通道的速率为500Kbps，采用CANopen协议；CAN_3网络通道的速率为1Mbps，采用CANopen协议；以太网网络通道的速率为10/100Mbps，采用TCP/IP协议。

在本实施方式中，所述车联网网关支持5G技术的5G网络，其还可以配备有IEEE802.3接口、DSPI接口、eSCI接口、CAN接口、MLB接口、LIN接口和/或I2C接口。

在本实施方式中，比如，IEEE802.3接口可以用于连接无线路由器，为整车提供WIFI网络；DSPI(提供者管理器组件)接口用于连接蓝牙适配器和NFC(近距离无线通讯)适配器，可以提供蓝牙连接和NFC连接；eSCI接口用于连接4G/5G模块，与互联网通讯；CAN接口用于连接车辆CAN总线；MLB接口用于连接车内的MOST(面向媒体的系统传输)总线，LIN接口用于连接车内LIN(局域互联网络)总线；IC接口用于连接DSRC(专用短程通讯)模块和指纹识别模块。此外，本申请可以通过采用MPC5668G芯片对各个不同协议进行相互转换，将不同的网络进行融合。

此外，本实施方式车辆TBOX系统(Telematics-BOX)，简称车载TBOX或远程信息车载处理器。

本实施方式Telematics为远距离通信的电信(Telecommunications)与信息科学(Informatics)的合成，其定义为通过内置在车辆上的计算机系统、无线通信技术、卫星导航装置、交换文字、语音等信息的互联网技术而提供信息的服务系统。简单的说就通过无线网络将车辆接入互联网(车联网系统)，为车主提供驾驶、生活所必需的各种信息。

此外，本实施方式Telematics是无线通信技术、卫星导航系统、网络通信技术和车载电脑的综合，当车辆行驶当中出现故障时，通过无线通信连接云服务器，进行远程车辆诊断，内置在发动机上的计算机可以记录车辆主要部件的状态，并随时为维修人员提供准确的故障位置和原因。通过用户通讯终端接收信息并查看交通地图、路况介绍、交通信息、安全与治安服务以及娱乐信息服务等，另外，本实施方式的车辆还可以在后座设置电子游戏和网络应用。不难理解，本实施方式通过Telematics提供服务，可以方便用户了解交通信息、临近停车场的车位状况，确认当前位置，还可以与家中的网络服务器连接,及时了解家中的电器运转情况、安全情况以及客人来访情况等等。

本实施方式车辆还可设置ADAS(Advanced Driver Assistant System，先进驾驶辅助系统)，其可以利用安装于车辆上的上述各种传感器，在第一时间收集车内外的环境数据，进行静、动态物体的辨识、侦测与追踪等技术上的处理，从而能够让驾驶者在最快的时间察觉可能发生的危险，以引起注意和提高安全性。对应地，本申请ADAS还可以采用雷达、激光和超声波等传感器，可以探测光、热、压力或其它用于监测车辆状态的变量，通常位于车辆的前后保险杠、侧视镜、驾驶杆内部或者挡风玻璃上。不难看出，上述ADAS功能所使用的各种智能硬件，均可以通过以太网链路的方式接入车联网系统实现通信连接、交互。

本实施方式车辆的主机可包括适当的逻辑器件、电路和/或代码以用于实现OSI模型(Open System Interconnection，开放式通信系统互联参考模型)上面五层的运行和/或功能操作。因此，主机会生成用于网络传输的数据包和/或对这些数据包进行处理，并且还会对从网络接受到的数据包进行处理。同时，主机可通过执行相应指令和/或运行一种或多种应用程序来为本地用户和/或一个或多条远程用户或网络节点提供服务。在本申请的不同实施方式中，主机可采用一种或多种安全协议。

在本实施方式的一具体应用例中，应用场景如下：

张先生坐进车内后，召唤一句“小旗”，车载助手“小旗”启动并根据时间判断为春节假期，于是送上了祝福：“提前祝您春节快乐，张先生。”随后进入车辆检测模式，此时屏幕快速闪过被检项目。确认一切正常后，张先生设置好目的地，“小旗”向张先生播报了实时的路况和途经天气，张先生将车辆主题氛围切换成春节模式，仪表、中控大屏、后排娱乐系统以及车内氛围灯随之变化，接着，一家人伴随着年味儿向家的方向驶去。

以上所述，仅是本申请的较佳实施例而已，并非对本申请作任何形式上的限制，虽然本申请已以较佳实施例揭露如上，然而并非用以限定本申请,任何熟悉本专业的技术人员，在不脱离本申请技术方案范围内,当可利用上述揭示的技术内容作出些许更动或修饰为等同变化的等效实施例,但凡是未脱离本申请技术方案内容，依据本申请的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均仍属于本申请技术方案的范围内。

Claims

1.一种车载助手交互方法，其特征在于，所述车载助手交互方法包括步骤：

车机设备实时检测是否接收到用户的语音信息；

2.根据权利要求1所述的车载助手交互方法，其特征在于，所述车载助手交互方法还包括：

车机设备判断用户是否启动个性化设置；

若启动个性化设置，车机设备提示用户提供关键词；

3.根据权利要求2所述的车载助手交互方法，其特征在于，所述获取用户输入的关键词存储到预设的词库中的步骤，具体包括：

4.根据权利要求3所述的车载助手交互方法，其特征在于，所述获取用户语音输入的关键词的步骤，还包括：

车机设备启动麦克风；

5.根据权利要求1所述的车载助手交互方法，其特征在于，所述车载助手交互方法还包括：

车机设备实时检测是否接收到异常呼叫语音；

若接收到异常呼叫语音，自动启动车载助手；

将救援咨询和车载场景上传到报警系统。

6.根据权利要求1所述的车载助手交互方法，其特征在于，所述调用所述车载助手触发指令，以启动车载助手进行交互的步骤之后，还包括：

车机设备判断当前车载场景的环境音量；

7.根据权利要求1所述的车载助手交互方法，其特征在于，所述调用所述车载助手触发指令，以启动车载助手进行交互的步骤之后，还包括：

8.根据权利要求1所述的车载助手交互方法，其特征在于，所述调用所述车载助手触发指令，以启动车载助手进行交互的步骤之后，还包括：

车机设备判断用户是否语音说出隐藏的报警词；

若判断到隐藏的报警词，车机设备在后台发出报警救助。

9.一种车机设备，其特征在于，所述车机设备包括处理器，所述处理器用于执行程序数据，以实现根据权利要求1-8任一项所述的车载助手交互方法。

10.一种车辆，其特征在于，所述车辆配置有根据权利要求9所述的车机设备，所述车机设备支持4G通信网络、5G通信网络或WIFI网络，所述车载助手可架设于所述车机设备上，或架设于云服务器，所述车机设备与云服务器之间通过4G通信网络、5G通信网络或WIFI网络进行网络连接。