WO2018120666A1 - 车载提醒方法及终端 - Google Patents
车载提醒方法及终端 Download PDFInfo
- Publication number
- WO2018120666A1 WO2018120666A1 PCT/CN2017/088250 CN2017088250W WO2018120666A1 WO 2018120666 A1 WO2018120666 A1 WO 2018120666A1 CN 2017088250 W CN2017088250 W CN 2017088250W WO 2018120666 A1 WO2018120666 A1 WO 2018120666A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- terminal
- voice
- data
- vehicle
- processor
- Prior art date
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/725—Cordless telephones
Landscapes
- Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Navigation (AREA)
Abstract
本申请提供了一种车载提醒方法,包括:终端获取数据,若所述终端依据所述数据确定所述终端处于车载状态,则所述终端自动启动语音交互功能。所述数据包括声音数据和/或传感器数据,所述车载状态为所述终端处于车内的状态,所述声音数据包括在所述车载状态以及非车载状态相互切换过程中产生的声音数据,所述传感器数据包括在所述车载状态以及所述非车载状态相互切换过程中发生变化的传感器数据。可见,终端能够在识别出车载状态的情况下自动启动语音交互功能,所以,能够提高终端的操控便利性。
Description
本申请要求于2016年12月27日提交中国专利局、申请号为201611225036.5、发明名称为“一种主动提供语音服务的方法和设备”的中国专利申请的优先权,其全部内容通过引用结合在本申请中。
本申请涉及通信领域,尤其涉及一种车载提醒方法及终端。
随着车辆的普及,车载功能成为终端不可缺少的配置。目前,终端的车载功能主要体现在,通过语音与用户进行交互,使得用户通过语音对终端进行询问天气、导航、打电话等操作,而避免手动操作。
然而,终端的语音交互功能需要用户手动触发,例如,长按功能键触发语音机器人“siri”。所以,具有车载功能的终端,往往需要用户主动触发车载功能,由此用户操控的便利性较差,甚至会对行驶带来安全隐患。
发明内容
本申请提供了一种车载提醒方法及终端,目的在于解决现有终端需要用户主动触发车载功能,导致的操控便利性较差的技术问题。
为了实现上述目的,本申请提供了以下技术方案:
本申请的第一方面提供了一种车载提醒方法,包括:终端获取数据,若所述终端依据所述数据确定所述终端处于车载状态,则所述终端自动启动语音交互功能。所述数据包括声音数据和/或传感器数据,所述车载状态为所述终端处于车内的状态,所述声音数据包括在所述车载状态以及非车载状态相互切换过程中产生的声音数据,所述传感器数据包括在所述车载状态以及所述非车载状态相互切换过程中发生变化的传感器数据。可见,终端能够在识别出车载状态的情况下自动启动语音交互功能,所以,能够提高终端的操控便利性。
在一个实现方式中,所述启动语音交互功能包括:发出第一询问语音,所述第一询问语音包括是否开启空调、是否开启音频应用、是否开启导航以及是否播报天气的至少一种;接收并执行第一语音指令,所述第一语音指令包括所述第一询问语音的响应指令。主动发出询问语音,有利于进一步体现终端的使用便利性,以提高用户的使用体验。
在一个实现方式中,还包括:若所述终端未采集到发动机的声音数据,则发出是否开启发动机的第二询问语音;接收第二语音指令,所述第二语音指令包括所述第二询问语音的响应指令。主动发出是否开启发动机的询问语音,有利于进一步体现终端的使用便利性,以进一步改善用户的使用体验。
在一个实现方式中,所述传感器数据还包括:加速度数据。所述方法还包括:若
所述终端依据所述加速度数据确认所述终端处于行驶状态的时间大于预设的阈值,则语音提示疲劳驾驶。所述语音提示疲劳驾驶包括如下至少一种:语音提示休息、语音询问是否播放音乐、语音提示前方服务区与当前位置的距离。疲劳驾驶的提示有利于提高行驶的安全性,以进一步体现终端的使用便利性。
在一个实现方式中,所述传感器数据还包括:加速度数据。所述方法还包括:若所述终端依据所述加速度数据确定所述终端处于停止行驶状态,则所述终端记录停车位置。进一步的,所述终端记录停车位置包括:所述终端将所述停车位置以通知消息的形式显示在所述终端上。所述方法还包括:若接收到所述通知消息的查看指令,所述终端提示从当前位置到所述停止位置的导航信息。停止位置的记录以及导航信息的生成,便于用户寻找车辆,以进一步体现终端的使用便利性。
本申请的第二方面提供了一种终端,包括:输入设备、输出设备、处理器和总线。所述输入设备,用于获取数据,所述数据包括声音数据和/或传感器数据。所述处理器用于若依据所述数据确定所述终端处于车载状态,则自动启动语音交互功能。所述车载状态为所述终端处于车内的状态,所述声音数据包括在所述车载状态以及非车载状态相互切换过程中产生的声音数据,所述传感器数据包括在所述车载状态以及所述非车载状态相互切换过程中发生变化的传感器数据。所述输出设备用于根据所述处理器的指示,输出交互语音。所述终端能够自动触发车载语音交互功能,所以,具有更便利的操控性能。
在一个实现方式中,所述处理器用于启动语音交互功能包括:所述处理器指示所述输出设备发出第一询问语音,所述第一询问语音包括是否开启空调、是否开启音频应用、是否开启导航以及是否播报天气的至少一种。所述输入设备还用于接收第一语音指令,所述第一语音指令包括所述第一询问语音的响应指令。所述处理器还用于执行所述第一语音指令。主动发出询问语音,有利于进一步体现终端的使用便利性,以提高用户的使用体验。
在一个实现方式中,所述输出设备还用于若所述输入设备未采集到发动机的声音数据,发出是否开启发动机的第二询问语音。所述输入设备还用于接收第二语音指令,所述第二语音指令包括所述第二询问语音的响应指令。主动发出是否开启发动机的询问语音,有利于进一步体现终端的使用便利性,以进一步改善用户的使用体验。
在一个实现方式中,所述传感器数据还包括:加速度数据。所述输出设备还用于,若所述处理器依据所述加速度数据确认所述终端处于行驶状态的时间大于预设的阈值,语音提示疲劳驾驶。所述语音提示疲劳驾驶包括如下至少一种:语音提示休息、语音询问是否播放音乐、语音提示前方服务区与当前位置的距离。疲劳驾驶的提示有利于提高行驶的安全性,以进一步体现终端的使用便利性。
在一个实现方式中,所述传感器数据还包括:加速度数据。所述处理器还用于,依据所述加速度数据确定所述终端处于停止行驶状态;若确定所述终端处于所述停止行驶状态,记录停车位置。
在一个实现方式中,所述输出设备还用于将所述停车位置以通知消息的形式显示在所述终端上。所述输入设备还用于获取查看所述通知消息的指令。所述输出设备还
用于,根据所述指令,提示从当前位置到所述停止位置的导航信息。记录停车位置提供停车位置的导航信息,便于用户快速找到车辆,以进一步体现终端的使用便利性。
本申请的第三方面提供了一种终端,包括:数据获取模块和语音控制模块。数据获取模块用于获取数据,所述数据包括声音数据和/或传感器数据。语音控制模块用于若依据所述数据确定所述终端处于车载状态,则自动启动语音交互功能,所述车载状态为所述终端处于车内的状态,所述声音数据包括在所述车载状态以及非车载状态相互切换过程中产生的声音数据,所述传感器数据包括在所述车载状态以及所述非车载状态相互切换过程中发生变化的传感器数据。所述终端能够自动触发车载语音交互功能,所以,具有更便利的操控性能。
在一个实现方式中,所述语音控制模块用于启动语音交互功能包括:所述语音控制模块发出第一询问语音,所述第一询问语音包括是否开启空调、是否开启音频应用、是否开启导航以及是否播报天气的至少一种。接收并执行第一语音指令,所述第一语音指令包括所述第一询问语音的响应指令。主动发出询问语音,有利于进一步体现终端的使用便利性,以提高用户的使用体验。
在一个实现方式中,所述语音控制模块还用于,若所述数据模块未采集到发动机的声音数据,则发出是否开启发动机的第二询问语音。并接收第二语音指令,所述第二语音指令包括所述第二询问语音的响应指令。有利于进一步体现终端的使用便利性,以提高用户的使用体验。
在一个实现方式中,所述传感器数据还包括:加速度数据。所述语音控制模块还用于,若依据所述加速度数据确认所述终端处于行驶状态的时间大于预设的阈值,则语音提示疲劳驾驶。所述语音提示疲劳驾驶包括如下至少一种:语音提示休息、语音询问是否播放音乐、语音提示前方服务区与当前位置的距离。有利于进一步体现终端的使用便利性,以提高用户的使用体验。
在一个实现方式中,所述传感器数据还包括:加速度数据。所述语音控制模块还用于,若依据所述加速度数据确定所述终端处于停止行驶状态,则所述终端记录停车位置。
在一个实现方式中,所述语音控制模块将所述停车位置以通知消息的形式显示在所述终端上。若接收到所述通知消息的查看指令,提示从当前位置到所述停止位置的导航信息。停车位置的记录以及提示,有利于进一步体现终端的使用便利性,以提高用户的使用体验。
本申请的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当所述指令在终端上运行时,使得所述终端执行本申请的第一方面所述的车载提醒方法。
本申请的第五方面提供了一种包含指令的计算机程序产品,当所述计算机程序产品在终端上运行时,使得所述终端执行本申请的第一方面所述的车载提醒方法。
在一个实现方式中,还包括:若所述终端确定超速,则发出超速语音提示。主动提示超速,有利于提高行驶安全。
在一个实现方式中,还包括:所述终端获取路况信息,若所述终端依据所述路况
信息确定当前道路拥堵,则发出道路拥堵语音提示。进一步的,所述终端依据目的地重新规划行驶路线,若所述终端确认存在除当前行驶路线之外的其它行驶路线,则语音提示切换到所述其它行驶路线。拥堵以及其它行驶路线的提示有利于进一步体现终端的使用便利性。
在一个实现方式中,所述声音数据包括如下至少一种:车门的声音数据、安全带的声音数据。
在一个实现方式中,所述传感器数据具体包括如下至少一种:气压数据、海拔数据。
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请提供的车载提醒方法的应用场景的示意图;
图2为本发明实施例公开的一种终端的结构示意图;
图3为本发明实施例公开的一种车载提醒方法的流程图;
图4为本发明实施例公开的确定终端是否处于车载状态的流程图;
图5为本发明实施例公开的依据预设的传感器数据的变化值与操控动作的对应关系,确定操控动作发生的可能性的流程图;
图6为本发明实施例公开的一种依据操控动作发生的可能性,识别当前是否处于车载状态的流程图;
图7为本发明实施例公开的又一种依据操控动作发生的可能性,识别当前是否处于车载状态的流程图;
图8为本发明实施例公开的又一种依据操控动作发生的可能性,识别当前是否处于车载状态的流程图。
图1为本申请提供的车载提醒方法的应用场景,其中,用户携带终端,本申请的实施例公开的终端,能够自动识别出车载状态,并在车载状态的各种具体场景下,包括车辆主驾驶上已坐人但尚未启动、车辆已启动、车辆开始行驶、车辆处于行驶过程中以及车辆停止行驶,对用户进行主动的语音提醒。
本申请的以下实施例中,以图1所示的移动终端为例进行说明,该移动终端可以为用户日常使用的手机、平板、可穿戴等。
图2为图1所示的终端的结构,包括处理器、输入设备、输出设备、总线、传感器和录音设备。可选的,还可以包括存储器、I/O子系统、射频电路、其它输入设备、和电源。本领域技术人员可以理解,图2中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不
同的部件布置。本领领域技术人员可以理解显示屏属于用户界面(User Interface,UI),且终端可以包括比图示或者更少的用户界面。
具体的,处理器利用各种接口和线路连接整个终端的各个部分,通过运行或执行软件程序和/或模块,以及调用数据,以执行终端的各种功能和/或处理数据。本申请的实施例中,处理器用于执行图3以及图4所示的方法,具体的,在执行图3以及图4所示的方法的过程中,处理器控制输入设备执行输入相关的步骤,例如获取数据,以及控制输出设备执行输出相关的步骤,例如输出交互语音。所述输入设备和所述输出设备分别通过所述总线与所述处理器连接。
所述处理器可以由集成电路(Integrated Circuit,IC)组成,例如可以由单颗封装的IC所组成,也可以由连接多颗相同功能或不同功能的封装IC而组成。举例来说,处理器可以仅包括中央处理器(Central Processing Unit,CPU),也可以是GPU、数字信号处理器(Digital Signal Processor,DSP)、及通信单元中的控制芯片(例如基带芯片)的组合。在本发明实施方式中,CPU可以是单运算核心,也可以包括多运算核心。
传感器用于感应信息,并将感应到的信息按照一定的规律转换成为电信号或其它所需形式的数据输出。在本申请的实施例中,传感器包括但不限于加速度传感器、陀螺仪、气压计、重力传感器、气压传感器和位置传感器,例如全球定位系统(Global Positioning System,GPS)或者北斗导航系统。
录音设备用于实时监测声音并转换成电信号或其它所需形式的数据。在本申请的实施例中,录音设备可以为低功耗的数字信号处理器(Digital Signal Processor,DSP)。
存储器可用于存储处理器运行或执行的软件程序以及模块,存储器主要包括程序存储区和数据存储区,其中,程序存储区可存储操作系统、至少一个功能所需的应用程序,比如声音播放程序、图像播放程序等等。数据存储区可存储根据终端的使用所创建的数据(比如声音数据、电话本等)等。在本发明具体实施方式中,存储器可以包括易失性存储器,例如非挥发性动态随机存取内存(Nonvolatile Random Access Memory,NVRAM)、相变化随机存取内存(Phase Change RAM,PRAM)、磁阻式随机存取内存(Magetoresistive RAM,MRAM)等,还可以包括非易失性存储器,例如至少一个磁盘存储器件、电子可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,EEPROM)、闪存器件,例如反或闪存(NOR flash memory)或是反及闪存(NAND flash memory)。非易失存储器储存处理器所执行的操作系统及应用程序。所述处理器从所述非易失存储器加载运行程序与数据到内存并将数字内容储存于大量储存装置中。所述操作系统包括用于控制和管理常规系统任务,例如内存管理、存储设备控制、电源管理等,以及有助于各种软硬件之间通信的各种组件和/或驱动器。在本发明实施方式中,所述操作系统可以是Google公司的Android系统、Apple公司开发的iOS系统或Microsoft公司开发的Windows Phone操作系统等,或者是Vxworks这类的嵌入式操作系统。
I/O子系统用来控制输入输出的外部设备,可以包括其他设备输入控制器、传感器
控制器、显示控制器。可选的,一个或多个其他输入控制设备控制器从其他输入设备接收信号和/或者向其他输入设备发送信号,其他输入设备可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮、光鼠(光鼠是不显示可视输出的触摸敏感表面,或者是由触摸屏形成的触摸敏感表面的延伸)。值得说明的是,其他输入控制设备控制器可以与任意一个或者多个上述设备连接。所述I/O子系统中的显示控制器从显示屏接收信号和/或者向显示屏发送信号。显示屏检测到用户输入后,显示控制器将检测到的用户输入转换为与显示在显示屏上的用户界面对象的交互,即实现人机交互。传感器控制器可以从一个或者多个传感器接收信号和/或者向一个或者多个传感器发送信号。
其他输入设备可用于接收输入的数字或字符信息,以及产生与终端的用户设置以及功能控制有关的键信号输入。具体地,其他输入设备可包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆、光鼠(光鼠是不显示可视输出的触摸敏感表面,或者是由触摸屏形成的触摸敏感表面的延伸)等中的一种或多种。其他输入设备与I/O子系统的其他输入设备控制器相连接,在其他设备输入控制器的控制下与处理器进行信号交互。
显示屏可用于显示由用户输入的信息或提供给用户的信息以及终端的各种菜单,还可以接受用户输入。具体的显示屏可包括显示面板,以及触控面板。其中显示面板可以采用LCD(Liquid Crystal Display,液晶显示器)、OLED(Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示面板。触控面板,也称为触摸屏、触敏屏等,可收集用户在其上或附近的接触或者非接触操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板上或在触控面板附近的操作,也可以包括体感操作;该操作包括单点控制操作、多点控制操作等操作类型。),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位、姿势,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成处理器能够处理的信息,再送给处理器,并能接收处理器发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板,也可以采用未来发展的任何技术实现触控面板。进一步的,触控面板可覆盖显示面板,用户可以根据显示面板显示的内容(该显示内容包括但不限于,软键盘、虚拟鼠标、虚拟按键、图标等等),在显示面板上覆盖的触控面板上或者附近进行操作,触控面板检测到在其上或附近的操作后,通过I/O子系统传送给处理器以确定用户输入,随后处理器根据用户输入通过I/O子系统在显示面板上提供相应的视觉输出。虽然在图2中,触控面板与显示面板是作为两个独立的部件来实现终端的输入和输入功能,但是在某些实施例中,可以将触控面板与显示面板集成而实现终端的输入和输出功能。
电源用于给终端的不同部件进行供电以维持其运行。作为一般性理解,所述电源可以是内置的电池,例如常见的锂离子电池、镍氢电池等,也包括直接向电子设备供电的外接电源,例如AC适配器等。在本发明的实施方式中,所述电源还可以作更为广泛的定义,例如还可以包括电源管理系统、充电系统、电源故障检测电路、电源转换
器或逆变器、电源状态指示器(如发光二极管),以及与终端的电能生成、管理及分布相关联的其它任何组件。
下面对图2所示的终端自动进行车载语音交互的具体方法进行详细的说明。
图3为本申请实施例公开的一种车载提醒方法,包括以下步骤:
S301:获取声音数据。
因为车载提醒方法的基础在于识别出终端是否处于车载状态,所以,本实施例中,获取的声音数据包括在车载状态以及非车载状态相互切换过程中产生的声音数据,也就是说,在终端从车外移动到车内,或者从车内移动到车外的过程中产生的声音数据。在上述过程中,车门发生开或关,用户也可能会系安全带或解安全带,所以,具体的,声音数据包括车门的声音数据和安全带的声音数据中的至少一种。
该移动终端处于车载状态可理解为该移动终端处于车内的状态,例如用户由车外携带至车内。该移动终端处于非车载状态可理解为该移动终端不处于车内的状态,例如用户熄灭发动机后,将移动终端携带至车外。
可选的,处理器可以通过终端的录音设备获取预设的时间段,例如60S内的声音数据。
S302:获取传感器数据。
同理,传感器数据包括在车载状态以及非车载状态相互切换过程中发生变化的传感器数据。在上述过程中,气压和海拔可能会发生变化,即:携带终端的用户在从车外进入到车内的过程中,因为用户的体位变化而导致终端的海拔可能会发生变化。开车门或者关车门的过程中,车内的气压可能会发生变化。所以,具体的,传感器数据包括气压数据和海拔数据中的至少一种。其中,气压数据可以通过气压传感器获取,海拔数据可以通过重力传感器获取。
可选的,传感器数据还可以包括加速度数据。具体的,处理器可以通过终端的传感器获取预设的时间段,例如60S内的传感器数据。
可选的,S301和S302也可以择一执行。
S303:依据获取的数据确定终端是否处于车载状态,如果是,执行S304,如果否,返回执行S301-S303,可选的,可以以预设的周期执行S301-S303。
S304:自动启动语音交互功能。
启动语音交互功能的具体方式为:发出询问语音、接收并执行语音指令。
其中,询问语音包括是否开启空调、是否开启音频应用、是否开启导航以及是否播报天气的至少一种。语音指令包括询问语音的响应指令。例如,发出是否开启导航的询问语音,在接收到用户发出的语音指令“是”的情况下,则执行语音指令,即开启车内的空调,并在接收到用户的其它语音指令“开灯”的情况下,响应语音指令打开车灯。
进一步的,终端还可以采集发动机的声音数据和加速度数据,以进一步识别车载状态下的各种状态,例如开始行驶、行驶中超速以及停止行驶状态,终端可以针对不同的状态,发出相应的提醒。即图3还包括以下步骤:
S305:若确认未采集到发动机的声音数据,则发出是否开启发动机的询问语音。
S306:若确定超速,发出超速语音提示。
终端确定超速的具体方式可以参见现有技术,这里不再赘述。
S307:获取路况信息,若依据路况信息确定当前道路拥堵,则发出道路拥堵语音提示,进一步的,依据目的地重新规划行驶路线,若确认存在除当前行驶路线之外的其它行驶路线,则语音提示切换到其它行驶路线。具体的,语音提示切换到其它行驶路线的具体方式可以为:发出其它行驶路线语音提醒,进一步的,提醒后发出是否切换的询问语音。
具体的,终端可以从已安装的位置信息类应用(例如地图应用)中获取路况信息。
S308:若确认终端处于行驶状态的时间大于预设的阈值,则语音提示疲劳驾驶。
具体的,终端可以依据加速度数据(加速度数据的获取方式可以参见现有技术)确认处于行驶状态,并使用计时器得到处于行驶状态的时间。
语音提示疲劳驾驶包括如下至少一种方式:语音提示休息、语音询问是否播放音乐、语音提示前方服务区与当前位置的距离。
可选的,S306-S308可以在未收集到导航声音数据的情况下执行。也就是说,在收集到导航声音数据的情况下,说明导航可能已开启,则可以使用导航的相应功能,而终端不再对用户进行提醒,以防止重复提醒导致的干扰。
S309:若确定终端处于停止行驶状态,则记录停车位置。
具体的,终端可以依据加速度数据确定终端是否处于停止行驶状态,即车辆停止行驶。进一步地,终端可在监测到用户锁定车辆后,记录停车位置。进一步的,终端将可以将停车位置以通知消息的形式显示在终端上,若接收到通知消息的查看指令,所述终端提示从当前位置到停止位置的导航信息。具体的提示方式可以为显示屏显示,也可以为语音播报。
需要说明的是,本实施例中,终端使用相应的传感器采集各种传感器数据,哪种传感器采集哪种传感器数据,可以参见现有技术,这里不再赘述。
从图3可以看出,终端可以自动识别出车载状态,并自动进行语音的交互。进一步的,可以针对车载状态下的具体状态发出提醒,所以,终端无需用户触发,即可自动向用户提供语音提醒,因此,方便用户的使用。
具体的,本实施例中,使用图4所示的具体过程确定终端是否处于车载状态,包括以下步骤:
S401:依据预设的样本声音数据与操控动作的对应关系,以及获取的声音数据,确定操控动作发生的可能性。
操控动作可以预先设定,基于本实施例所述的方法自动识别车载状态的目的,只要车辆从车载状态转换为非车载状态(或者从非车载状态转换为车载状态)车辆被人为操作,或者车辆执行人和/或自动驾驶系统发出的指令,而执行的操作,均可以作为预先设定的操控动作。
具体的,操控动作可以包括:开车门、关车门、点火和轮胎停。可选的,操控动
作还可以包括熄火、轮胎动、导航开和导航关等。
预设的声音数据与操控动作的对应关系中,一种声音数据与产生该声音数据的操控动作对应,例如,开车门产生的声音数据与开车门对应。
具体的,S401的实现方式为:计算预设的对应关系中的样本声音数据与获取的声音数据的相似度,该相似度即为获取的声音数据由与样本声音数据对应的操控动作产生的可能性。获取的声音数据由操控动作产生,即说明发生过操控动作,因此,获取的声音数据由操控动作产生的可能性即为操控动作发生的可能性。
S402:依据预设的样本传感器数据的变化值与操控动作的对应关系,以及获取的传感器数据的变化值,确定操控动作发生的可能性。
预设的样本传感器数据的变化值与操控动作的对应关系中,一种传感器数据的变化值与产生该传感器数据的变化值的操控动作对应。例如,关车门产生的气压数据的变化值与关车门对应。开车门后用户上车产生的海拔数据的变化值与开车门对应。
S402的具体实现方式为:计算预设的对应关系中的样本传感器数据的变化值与获取的传感器数据的变化值的相似度,该相似度即为获取的传感器数据的变化值由与样本变化值对应的操控动作产生的可能性。获取的传感器数据的变化值由操控动作产生,即说明发生过操控动作,因此,获取的传感器数据的变化值由操控动作产生的可能性即为操控动作发生的可能性。
S401和S402的顺序可以交换,S401和S402也可以并行执行。
以操控动作包括开车门、关车门、点火、轮胎动和轮胎停为例,图5为处理器执行S401和S402的具体方式:
以声音数据为例,处理器调用预先获取的声音分类规则库,声音分类规则库中包括样本声音数据与操控动作的对应关系。
处理器将获取的声音数据与各个样本声音数据进行对比,获取的声音数据与声音分类规则库中开车门对应的样本声音数据的相似度为60%,与关车门对应的样本声音数据的相似度为40%,与点火对应的样本声音数据的相似度为5%,则确定获取的声音数据表示的声音由开车门产生的可能性为60%,由关车门产生的可能性为40%,由点火产生的可能性为5%。也就是说,由获取的声音数据可以确定开车门发生的可能性为60%,关车门发生的可能性为40%,点火的可能性为5%。
为了便于后续识别,可以使用预设的相似度阈值,过滤到小于相似度阈值的操控动作,例如,获取的声音数据与轮胎动对应的样本声音数据的相似度为1%,小于相似度阈值5%,则忽略不计。
气压的变化值、海拔的变化值和加速度的变化值由各种操控动作产生的可能性,即由气压的变化值、海拔的变化值和加速度的变化值确定的操控动作发生的可能性,均可以参照声音数据为例,详见图5,这里不再赘述。
各个分类规则库可以使用现有的基于大数据的学习和分析方式获取,这里不再赘述。
S403:依据操控动作发生的可能性,识别终端当前是否处于车载状态。
本实施例中,如图6所示,将操控动作发生的可能性作为神经网络的输入,神经
网络的输出结果为当前处于车载状态或者当前没有处于车载状态。
需要说明的是,图6中,输入除了操控动作发生的可能性之外,还可以将操控动作发生的顺序作为输入。操控动作发生的顺序可以依据音频数据的时间戳确定。例如,依据音频数据的时间戳,确定操控动作的发生顺序为开车门、关车门、点火,将该顺序作为输入,可以提高识别为车载状态的可能性。
图7为S403的另一种实现方式,与图6的区别为,将依据音频数据和传感器数据确定的一类操控动作发生的可能性综合计算,得到一类操控动作的综合可能性,将各类操控动作的综合可能性作为神经网络的输入。
当然,图7也可以增加操控动作发生的顺序作为输入。还可以将图6和图7所示的输入结合,即将各类操控动作的综合可能性作为神经网络的输入,同时,将一些对于输出结果有显著影响的数据,例如加速度数据变化值也作为神经网络的输入。如图8所示。
可选的,在神经网络的运算中,可以为不同的操控动作设置不同的权重值,权重值可以通过对样本数据的学习得到。神经网络的搭建(包括层数的选择,图7-图8所示的三层结构仅为示例)以及训练过程可以参见现有技术,这里不再赘述。
从图4所示的过程可以看出,终端根据声音数据和传感器数据识别是否处于车载状态,为终端自动启动车载状态下的语音提醒奠定了基础。
可选地,在本发明实施例中,除了图1所示的移动终端以外,终端还可以为设置在车内的与汽车固定连接的终端,例如设置在汽车中控台上的显示控制模块。在此情况下,车载状态为设置在车内的终端开启的状态,例如汽车点火后,显示控制模块开始运行。或者,该显示控制模块在监测到汽车解除锁定后,一直低功耗运行,持续监测是否有用户上车等,此时该车载状态泛指在监测到汽车解除锁定,主驾驶用户上车至主驾驶用户下车这一时间段终端所处的状态。终端在开启后,可以依据图3以及图4所示的方法自动触发语音交互功能。
具体的,终端在开启后,自动发出询问语音、接收并执行语音指令,智慧化地与用户进行语音交互。并且,进一步的,执行S305-S309的至少一步。
本申请的实施例还公开了一种终端,包括数据获取模块和语音控制模块。
其中,数据获取模块用于获取数据,所述数据包括声音数据和/或传感器数据。语音控制模块用于若依据所述数据确定所述终端处于车载状态,则自动启动语音交互功能,所述车载状态为所述终端处于车内的状态,所述声音数据包括在所述车载状态以及非车载状态相互切换过程中产生的声音数据,所述传感器数据包括在所述车载状态以及所述非车载状态相互切换过程中发生变化的传感器数据。
数据获取模块和语音控制模块具体的功能实现可以参见上述方法部分,这里不再赘述。
所述终端能够自动触发车载语音交互功能,所以,具有更便利的操控性能。
本说明书中各个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似部分互相参见即可。
Claims (24)
- 一种车载提醒方法,其特征在于,包括:终端获取数据,所述数据包括声音数据和/或传感器数据;若所述终端依据所述数据确定所述终端处于车载状态,则所述终端自动启动语音交互功能,所述车载状态为所述终端处于车内的状态,所述声音数据包括在所述车载状态以及非车载状态相互切换过程中产生的声音数据,所述传感器数据包括在所述车载状态以及所述非车载状态相互切换过程中发生变化的传感器数据。
- 根据权利要求1所述的方法,其特征在于,所述启动语音交互功能包括:发出第一询问语音,所述第一询问语音包括是否开启空调、是否开启音频应用、是否开启导航以及是否播报天气的至少一种;接收并执行第一语音指令,所述第一语音指令包括所述第一询问语音的响应指令。
- 根据权利要求1或2所述的方法,其特征在于,还包括:若所述终端未采集到发动机的声音数据,则发出是否开启发动机的第二询问语音;接收第二语音指令,所述第二语音指令包括所述第二询问语音的响应指令。
- 根据权利要求1-3任一项所述的方法,其特征在于,还包括:若所述终端确定超速,则发出超速语音提示。
- 根据权利要求1-4任一项所述的方法,其特征在于,还包括:所述终端获取路况信息;若所述终端依据所述路况信息确定当前道路拥堵,则发出道路拥堵语音提示。
- 根据权利要求5所述的方法,其特征在于,还包括:所述终端依据目的地重新规划行驶路线;若所述终端确认存在除当前行驶路线之外的其它行驶路线,则语音提示切换到所述其它行驶路线。
- 根据权利要求1-6任一项所述的方法,其特征在于,所述传感器数据还包括:加速度数据;所述方法还包括:若所述终端依据所述加速度数据确认所述终端处于行驶状态的时间大于预设的阈值,则语音提示疲劳驾驶;所述语音提示疲劳驾驶包括如下至少一种:语音提示休息、语音询问是否播放音乐、语音提示前方服务区与当前位置的距离。
- 根据权利要求1-7任一项所述的方法,其特征在于,所述传感器数据还包括:加速度数据;所述方法还包括:若所述终端依据所述加速度数据确定所述终端处于停止行驶状态,则所述终端记录停车位置。
- 根据权利要求8所述的方法,其特征在于,所述终端记录停车位置包括:所述终端将所述停车位置以通知消息的形式显示在所述终端上;所述方法还包括:若接收到所述通知消息的查看指令,所述终端提示从当前位置到所述停止位置的导航信息。
- 根据权利要求1-9任一项所述的方法,其特征在于,所述声音数据包括如下至少一种:车门的声音数据、安全带的声音数据。
- 根据权利要求1-10任一项所述的方法,其特征在于,所述传感器数据具体包括如下至少一种:气压数据、海拔数据。
- 一种终端,其特征在于,包括:输入设备、输出设备、处理器和总线;所述输入设备和所述输出设备分别通过所述总线与所述处理器连接;所述输入设备,用于获取数据,所述数据包括声音数据和/或传感器数据;所述处理器用于,若依据所述数据确定所述终端处于车载状态,则自动启动语音交互功能;所述车载状态为所述终端处于车内的状态,所述声音数据包括在所述车载状态以及非车载状态相互切换过程中产生的声音数据,所述传感器数据包括在所述车载状态以及所述非车载状态相互切换过程中发生变化的传感器数据;所述输出设备用于,根据所述处理器的指示,输出交互语音。
- 根据权利要求12所述的终端,其特征在于,所述处理器用于启动语音交互功能包括:所述处理器指示所述输出设备发出第一询问语音,所述第一询问语音包括是否开启空调、是否开启音频应用、是否开启导航以及是否播报天气的至少一种;所述输入设备还用于,接收第一语音指令,所述第一语音指令包括所述第一询问语音的响应指令;所述处理器还用于,执行所述第一语音指令。
- 根据权利要求12或13所述的终端,其特征在于,所述输出设备还用于,若所述输入设备未采集到发动机的声音数据,发出是否开启发动机的第二询问语音;所述输入设备还用于,接收第二语音指令,所述第二语音指令包括所述第二询问语音的响应指令。
- 根据权利要求12-14任一项所述的终端,其特征在于,所述输出设备还用于,若所述处理器确定超速,发出超速语音提示。
- 根据权利要求12-15任一项所述的终端,其特征在于,所述处理器还用于,获取路况信息;所述输出设备还用于,若所述处理器依据所述路况信息确定当前道路拥堵,发出道路拥堵语音提示。
- 根据权利要求16所述的终端,其特征在于,所述处理器还用于,依据目的地重新规划行驶路线;所述输出设备还用于,若所述处理器确认存在除当前行驶路线之外的其它行驶路线,语音提示切换到所述其它行驶路线。
- 根据权利要求12-17任一项所述的终端,其特征在于,所述传感器数据还包括:加速度数据;所述输出设备还用于,若所述处理器依据所述加速度数据确认所述终端处于行驶状态的时间大于预设的阈值,语音提示疲劳驾驶;所述语音提示疲劳驾驶包括如下至少一种:语音提示休息、语音询问是否播放音乐、语音提示前方服务区与当前位置的距离。
- 根据权利要求12-18任一项所述的终端,其特征在于,所述传感器数据还包括:加速度数据;所述处理器还用于,依据所述加速度数据确定所述终端处于停止行驶状态;若确定所述终端处于所述停止行驶状态,记录停车位置。
- 根据权利要求19所述的终端,其特征在于,所述输出设备还用于,将所述停车位置以通知消息的形式显示在所述终端上;所述输入设备还用于,获取查看所述通知消息的指令;所述输出设备还用于,根据所述指令,提示从当前位置到所述停止位置的导航信息。
- 根据权利要求12-20任一项所述的终端,其特征在于,所述声音数据包括如下至少一种:车门的声音数据、安全带的声音数据。
- 根据权利要求12-21任一项所述的终端,其特征在于,所述传感器数据具体包括如下至少一种:气压数据、海拔数据。
- 一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,其特征在于,当所述指令在终端上运行时,使得所述终端执行如权利要求1-11中任一项所述的车载提醒方法。
- 一种包含指令的计算机程序产品,其特征在于,当所述计算机程序产品在终端上运行时,使得所述终端执行如权利要求1-11中任一项所述的车载提醒方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201780005848.5A CN108476263B (zh) | 2016-12-27 | 2017-06-14 | 车载提醒方法及终端 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611225036 | 2016-12-27 | ||
CN201611225036.5 | 2016-12-27 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2018120666A1 true WO2018120666A1 (zh) | 2018-07-05 |
Family
ID=62707828
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/CN2017/088250 WO2018120666A1 (zh) | 2016-12-27 | 2017-06-14 | 车载提醒方法及终端 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN108476263B (zh) |
WO (1) | WO2018120666A1 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110929074A (zh) * | 2018-08-31 | 2020-03-27 | 长城汽车股份有限公司 | 车载语音播报方法及系统 |
CN111159510A (zh) * | 2018-11-08 | 2020-05-15 | 奇酷互联网络科技(深圳)有限公司 | 基于智能终端的公交站点查询方法、智能终端及装置 |
CN113495749A (zh) * | 2020-03-20 | 2021-10-12 | 阿里巴巴集团控股有限公司 | 车载设备的识别方法、装置、系统、设备及可读介质 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109377115A (zh) * | 2018-12-19 | 2019-02-22 | Oppo广东移动通信有限公司 | 车载应用推荐方法、装置、终端设备及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103973887A (zh) * | 2014-04-17 | 2014-08-06 | 刘崇庆 | 一种新型的便携式车载仪表终端应用方法 |
CN104580690A (zh) * | 2014-11-25 | 2015-04-29 | 深圳市金立通信设备有限公司 | 一种车载模式控制方法 |
CN104679588A (zh) * | 2015-03-18 | 2015-06-03 | 联想(北京)有限公司 | 一种工作模式切换方法及电子设备 |
US20160148450A1 (en) * | 2014-11-26 | 2016-05-26 | Denso Corporation | Vehicle remote control system and vehicle-mounted apparatus incorporated in the same |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8542218B2 (en) * | 2010-08-19 | 2013-09-24 | Hyundai Motor Company | Electronic switch apparatus for vehicle |
CN104660787B (zh) * | 2013-11-20 | 2017-08-25 | 昆山研达电脑科技有限公司 | 辅助使用者行车通话的方法 |
CN104754106A (zh) * | 2013-12-27 | 2015-07-01 | 富泰华工业(深圳)有限公司 | 车载电话控制系统及其语音控制方法 |
CN105227746A (zh) * | 2014-06-09 | 2016-01-06 | 中兴通讯股份有限公司 | 移动终端驾驶模式控制方法、装置及移动终端 |
-
2017
- 2017-06-14 CN CN201780005848.5A patent/CN108476263B/zh active Active
- 2017-06-14 WO PCT/CN2017/088250 patent/WO2018120666A1/zh active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103973887A (zh) * | 2014-04-17 | 2014-08-06 | 刘崇庆 | 一种新型的便携式车载仪表终端应用方法 |
CN104580690A (zh) * | 2014-11-25 | 2015-04-29 | 深圳市金立通信设备有限公司 | 一种车载模式控制方法 |
US20160148450A1 (en) * | 2014-11-26 | 2016-05-26 | Denso Corporation | Vehicle remote control system and vehicle-mounted apparatus incorporated in the same |
CN104679588A (zh) * | 2015-03-18 | 2015-06-03 | 联想(北京)有限公司 | 一种工作模式切换方法及电子设备 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110929074A (zh) * | 2018-08-31 | 2020-03-27 | 长城汽车股份有限公司 | 车载语音播报方法及系统 |
CN111159510A (zh) * | 2018-11-08 | 2020-05-15 | 奇酷互联网络科技(深圳)有限公司 | 基于智能终端的公交站点查询方法、智能终端及装置 |
CN113495749A (zh) * | 2020-03-20 | 2021-10-12 | 阿里巴巴集团控股有限公司 | 车载设备的识别方法、装置、系统、设备及可读介质 |
Also Published As
Publication number | Publication date |
---|---|
CN108476263B (zh) | 2021-02-12 |
CN108476263A (zh) | 2018-08-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6983198B2 (ja) | チュートリアルを伴う運転後の総括 | |
WO2018120666A1 (zh) | 车载提醒方法及终端 | |
EP3165994B1 (en) | Information processing device | |
US9881605B2 (en) | In-vehicle control apparatus and in-vehicle control method | |
US20170132016A1 (en) | System and method for adapting the user-interface to the user attention and driving conditions | |
CN108430819A (zh) | 车载装置 | |
JP5920463B2 (ja) | 位置情報送信装置、及び、位置情報送信システム | |
JP5456818B2 (ja) | ナビサーバ、ナビクライアント及びナビシステム | |
CN109976515B (zh) | 一种信息处理方法、装置、车辆及计算机可读存储介质 | |
CN113835570B (zh) | 车辆中显示屏的控制方法、装置、设备、存储介质及程序 | |
JP2010113510A (ja) | 車載表示装置 | |
WO2017193311A1 (zh) | 汽车智能提醒方法及装置 | |
CN112829759B (zh) | 一种驾驶员脱手检测方法、系统、计算机设备及存储介质 | |
CN111885559A (zh) | 一种智能设备搜寻方法、车机系统及搜寻装置 | |
CN112793581A (zh) | 一种方向盘脱手检测方法、系统、计算机设备及存储介质 | |
US20230022123A1 (en) | Autonomous driving method and apparatus | |
TWI665646B (zh) | 可攜式裝置與車輛間之導航啟動管理方法及系統 | |
US20200249823A1 (en) | System and method of reordering apps on a user interface | |
CN104019826A (zh) | 一种基于触控的自动导航方法及系统 | |
CN114056283B (zh) | 车辆拖移时制动自动解除的方法、智能汽车及存储介质 | |
WO2023153314A1 (ja) | 車内機器制御装置、車内機器制御方法 | |
JP2019071125A (ja) | 装置及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 17888771 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 17888771 Country of ref document: EP Kind code of ref document: A1 |