CN111970185B - 一种主动式车载语音交互方法和系统 - Google Patents
一种主动式车载语音交互方法和系统 Download PDFInfo
- Publication number
- CN111970185B CN111970185B CN202010641200.0A CN202010641200A CN111970185B CN 111970185 B CN111970185 B CN 111970185B CN 202010641200 A CN202010641200 A CN 202010641200A CN 111970185 B CN111970185 B CN 111970185B
- Authority
- CN
- China
- Prior art keywords
- application message
- file
- vehicle
- message file
- playing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
- H04L51/043—Real-time or near real-time messaging, e.g. instant messaging [IM] using or handling presence information
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
- H04L51/046—Interoperability with other network applications or services
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Abstract
本发明涉及人机交互技术领域,提供一种主动式车载语音交互方法和系统,有序地对各个车载显示系统的应用消息文件进行分类、排序,获取对应的语音音频并进行主动式的播报,利用声音的全方位传播直接向用户展示应用消息文件的具体内容,不仅有效地避免了因显示界面较窄、信息堆叠严重导致的信息读取困难的问题;通过标准化的语音播报,剔除了不同车辆的图文设计差异以及驾驶员个人素养对车辆驾驶的影响,从而降低了车辆驾驶门槛、提高了车辆的智能化,从而增加了产品的市场竞争力;通过设置指令反馈模块,有效地获取用户的处理反馈,实现了车载系统与用户的主动式交互,提高了车载系统的智能化程度与人性化程度,给予用户优质的使用体验。
Description
技术领域
本发明涉及人机交互技术领域,尤其涉及一种主动式车载语音交互方法和系统。
背景技术
车载驾驶舱的人机交互主要体现在仪表屏、中控屏、空调屏三个模块的三块屏幕上,但是由于这三个模块在软件控制上和物理位置上均是分散的,因此驾驶员必须要活动身体或转移视线才能够查看仪表屏、中控屏、空调屏等设备的信息。如图1所示,以仪表交互为例,目前多采用图文形式呈现汽车信息,例如在仪表屏幕上以弹窗、屏幕闪烁、蜂鸣器等方式提示驾驶员注意车身异常,并等待驾驶员介入(大部分的车载人机交互属于被动状态,需要用户主动查阅图文信息);仪表中间区域采用卡片堆叠的方式排列应用信息,其中部分卡片还设有子页面。而随着汽车信息化的进步,仪表或其他模组的信息量剧增,导致显示区信息堆叠严重,且由于部分图标相似较高,也容易混淆,使得用户无法筛选出更为重要或更为紧急的有效信息。
另外,虽然现有的新型驾驶舱实现了应用信息的融合,但是其实际交互方式上还是较为分散的,并没有通过信息融合提升驾驶员的驾驶体验。而部分驾驶员受限于自身驾驶经验或者知识结构问题,也无法适应新技术的改善。比如:ADAS辅助驾驶的功能与开启涉及到诸多传感器信息,如果允许开启则在仪表屏幕显示黄色图标,禁止启动则显示灰色图标,但是由于不同车厂标识颜色方法有差别(不同车厂的HMI(人机接口,Human MachineInterface)风格与思路逻辑均不相同),使得不熟悉此类车型的驾驶员在短时间内无法快速适应车辆(例如代驾)。
再者,现有的仪表信息提示过于单调,无法明确告知驾驶员车身状况,还需要驾驶员进一步分析识别。
发明内容
本发明提供一种主动式车载语音交互方法和系统,解决了现有的车载仪表交互方式应用消息堆叠严重导致的用户难以及时获取重要信息,且由于各车厂的差异性导致的驾驶门槛过高、车辆通用性差(驾驶员适应不同的车辆需要耗费大量的时间精力),以及仪表信息提示智能化程度较低的技术问题。
为解决以上技术问题,本发明提供一种主动式车载语音交互方法,包括步骤:
S1.获取各个车载显示系统的应用消息文件,当所述应用消息文件满足即时存储条件时,根据预设优先级条件确定所述应用消息文件的播放顺序并生成优先级列表;
S2.根据所述优先级列表将所述应用消息文件存储到即时消息池中;
S3.依次读取所述即时消息池中置顶的所述应用消息文件,获取对应的语音音频并播放;
S4.播放结束后,将满足轮询存储条件的所述应用消息文件存储到轮询消息池中;
S5.当满足轮询播放条件时,读取并播放所述轮询消息池中置顶的所述应用消息文件。
本基础方案通过设置即时存储条件,对各个车载显示系统的应用消息文件进行针对性的分类,将需要即时处理的应用消息文件存储到即时消息池中,实现了对各个车载显示系统的应用消息文件的统一化处理;通过设置预设优先级条件,对应用消息文件的重要性进行划分,从而能够使得用户及时地获取重要的应用消息文件,有效地避免事故的发生、保障人身安全;通过建立轮询存储条件,对存储在即时消息池中的应用消息文件的二次细分,降低了即时消息池的存储负载,提高了数据处理效率;通过建立轮询播放条件,实现了对应用消息文件的有序播放;
本基础方案通过即时存储条件、预设优先级条件、轮询存储条件和轮询播放条件的联合作用,有序地对各个车载显示系统的应用消息文件进行分类、排序,获取对应的语音音频并进行主动式的播报,这不仅提高了应用消息文件的数据处理效率,避免了用户移动查看消息时产生的安全隐患;还利用声音的全方位传播直接向用户展示应用消息文件的具体内容,有效地避免了因显示界面较窄、信息堆叠严重导致的信息读取困难的问题;并且通过标准化的语音音频播报,剔除了不同车辆的图文设计差异以及驾驶员个人素养对车辆驾驶的影响,从而降低了车辆驾驶门槛、提高了车辆的智能化,从而增加了产品的市场竞争力。
在进一步的实施方案中,所述步骤S1中,所述即时存储条件为,所述应用消息文件不属于控制类型;
所述控制类型的所述应用消息文件包括跳过操作指令文件、静音操作指令文件、恢复操作指令文件和删除操作指令文件;
所述步骤S1还包括,当所述应用消息文件不满足所述即时存储条件时,直接执行所述应用消息文件中的操作指令。
本方案通过控制类型的应用消息文件与其他类型的应用消息文件进行区分,将满足即时存储条件的其他类型的应用消息文件存储到即时消息池中,并直接执行跳过操作指令文件、静音操作指令文件、恢复操作指令文件和删除操作指令文件等应用消息文件中的操作指令,从而能够在第一时间执行与控制类型的应用消息文件对应的控制指令,通过提高消息的处理速率,降低车载显示系统界面上应用消息的堆叠程度,清洁车载显示系统界面,提高用户的使用体验。
在进一步的实施方案中,在所述步骤S1中,所述根据预设优先级条件确定所述应用消息文件的播放顺序并生成优先级列表,具体包括步骤:
S11.获取各个车载显示系统的应用消息文件,并根据所述应用消息文件的来源进行统一编号;
S12.匹配所述编号与所述预设优先级条件,确定所述应用消息文件的播放顺序,整合所有的所述播放顺序生成优先级列表。
本方案通过将对各个车载显示系统的应用消息文件进行统一编号,并将编号与优先级关联,根据关联关系确定应用消息文件的播放顺序,进而自动地生成优先级列表顺序依次序地播报应用消息文件,这不仅大幅度地提高了排序播放的工作效率,还实现了重要应用消息文件的及时处理、播放,从而提高用户的驾驶安全性。
在进一步的实施方案中,所述步骤S3具体包括步骤:
S31.读取所述即时消息池中置顶的所述应用消息文件;
S32.校验所述应用消息文件的有效性,当其有效时则进行下一步,当其无效时则删除所述应用消息文件;
S33.获取所述应用消息文件的消息属性,根据所述消息属性匹配与所述应用消息文件对应的语音音频并播放。
本方案通过设置校验步骤,定时对即时消息池中的应用消息文件进行清理,从而能够在实现信息有效播报的同时,保证消息传递的正确性,降低设备的运行负载,提高应用消息文件的处理效率;针对性地根据各种消息属性的应用消息文件合理地匹配并获取相应的语音音频,从而能够精准、有效地播报应用消息文件,使得用户能够简单、直观地理解应用消息文件中包含的内容。
在进一步的实施方案中,所述步骤S4具体为:
在所述语音音频播放结束后,从所述消息属性中提取出对应的播报类型,判断所述播报类型是否满足轮询存储条件,若满足则将相应的所述应用消息文件存储到轮询消息池中,若不满足,则删除所述即时消息池中对应的所述应用消息文件,进入下一条所述应用消息文件的播报处理。
本方案通过在第一次播报应用消息文件之后,根据其消息属性中的播报类型对应用消息文件进行二次存储(存储到轮询存储条件),从而减少了即时消息池的数据负载,减少了应用消息文件的重复播报次数,提高了语音播报效率。
在进一步的实施方案中,在所述步骤S4中:所述播报类型包括单次即时播报类型和轮询播报类型;
所述轮询存储条件为,所述应用消息文件的播报类型为所述轮询播报类型。
本方案通过对应用消息文件的播报类型进行细分,并分别存储到对应的存储区域中(即时消息池和轮询消息池),在实现重要消息及时播报的同时,还提高了消息的处理速率。
在进一步的实施方案中,在所述步骤S5中,所述轮询播放条件为,所述即时消息池空置,不存在需要处理的所述应用消息文件;
所述步骤S5还包括,当所述即时消息池接收到所述应用消息文件时,中断所述轮询消息池中所述应用消息文件的播报处理。
本方案设置即时消息池的优先级高于轮询消息池,从而实现了对重要的应用消息文件优先播报,提高了用户的驾驶安全性,保障了用户的人身安全。
在进一步的实施方案中,在所述步骤S1之前,还包括步骤:
S0.根据应用消息文件的重要性设定其播放配置的高低程度,将所述播放配置与预设语音交互配置密度进行匹配,若匹配成功则进入步骤S1,若匹配不成功则忽略所述应用消息文件。
本方案设置对应的播放配置与预设语音交互配置密度进行匹配,实现重要的应用消息文件的及时播报,保证用户接收消息的及时性,同时还降低频繁播报应用消息文件给用户带来的烦躁感,提高了用户使用体验。
在进一步的实施方案中,所述消息属性包括查询类型、常规类型、特殊类型和交互类型。
本方案将应用消息文件的消息属性细分为查询类型、常规类型、特殊类型和交互类型,从而能够在精准匹配对应的语音音频的同时,根据消息属性自动化地处理应用消息文件中的控制指令,并及时反馈用户的操作。
本发明还提供运行上述的一种主动式车载语音交互方法的一种主动式车载语音交互系统,包括主控模块及与其连接的存储模块、消息显示装置、语音播报模块和指令反馈模块;
所述存储模块,用于存储各个车载显示系统的应用消息文件和语音音频;
所述消息显示装置,用于向用户展示所述应用消息文件;
所述主控模块建立即时存储条件、预设优先级条件、轮询存储条件和轮询播放条件,用于对获取到的所述应用消息文件进行分类存储、排序,并从所述存储模块中匹配对应的所述语音音频并控制所述语音播报模块播放;
所述语音播报模块,用于响应所述主控模块的控制,播放所述语音音频;所述主控模块还用于根据所述应用消息文件发出相应的控制指令控制所述指令反馈模块执行相应的操作;
所述指令反馈模块,用于响应所述控制指令获取用户的操作,生成反馈信号发送到所述主控模块中;
所述主控模块还用于根据所述反馈信号发出相应的控制指令控制对应的车载设备执行相应的操作。
本基础方案通过主控模块及与其连接的存储模块、消息显示装置、语音播报模块和指令反馈模块建立了主动式的车载语音交互机制,驱使主控模块主动地从存储模块中匹配与应用消息文件对应的语音音频,并控制语音播报模块播放,提高了应用消息文件的数据处理效率,避免了用户查看消息时产生的安全隐患;
利用声音的全方位传播直接向用户展示应用消息文件的具体内容,不仅有效地避免了因显示界面较窄、信息堆叠严重导致的信息读取困难的问题;
通过标准化的语音播报,剔除了不同车辆的图文设计差异以及驾驶员个人素养对车辆驾驶的影响,从而降低了车辆驾驶门槛、提高了车辆的智能化,从而增加了产品的市场竞争力;
通过设置指令反馈模块,有效地获取用户(语音音频播报结束后)的处理反馈,实现了车载系统与用户的主动式交互,提高了车载系统的智能化程度与人性化程度,给予用户优质的使用体验。
附图说明
图1是本发明实施例提供的背景技术中仪表HMI显示界面示意图;
图2是本发明实施例1提供的一种主动式车载语音交互方法的工作流程图;
图3是本发明实施例2提供的一种主动式车载语音交互系统的系统框架图。
具体实施方式
下面结合附图具体阐明本发明的实施方式,实施例的给出仅仅是为了说明目的,并不能理解为对本发明的限定,包括附图仅供参考和说明使用,不构成对本发明专利保护范围的限制,因为在不脱离本发明精神和范围基础上,可以对本发明进行许多改变。
实施例1
本发明实施例提供的一种主动式车载语音交互方法,如图2所示,在本实施例中,包括步骤:
S0.根据应用消息文件的重要性设定其播放配置的高低程度,将所述播放配置与预设语音交互配置密度进行匹配,若匹配成功则进入步骤S1,若匹配不成功则忽略所述应用消息文件。
S1.获取各个车载显示系统的应用消息文件,当所述应用消息文件满足即时存储条件时,根据预设优先级条件确定所述应用消息文件的播放顺序并生成优先级列表;
S2.根据所述优先级列表将所述应用消息文件存储到即时消息池中;
S3.依次读取所述即时消息池中置顶的所述应用消息文件,获取对应的语音音频并播放;
S4.播放结束后,将满足轮询存储条件的所述应用消息文件存储到轮询消息池中;
S5.当满足轮询播放条件时,读取并播放所述轮询消息池中置顶的所述应用消息文件。
本实施例通过设置即时存储条件,对各个车载显示系统的应用消息文件进行针对性的分类,将需要即时处理的应用消息文件存储到即时消息池中,实现了对各个车载显示系统的应用消息文件的统一化处理;通过设置预设优先级条件,对应用消息文件的重要性进行划分,从而能够使得用户及时地获取重要的应用消息文件,有效地避免事故的发生、保障人身安全;通过建立轮询存储条件,对存储在即时消息池中的应用消息文件的二次细分,降低了即时消息池的存储负载,提高了数据处理效率;通过建立轮询播放条件,实现了对应用消息文件的有序播放;
本实施例通过即时存储条件、预设优先级条件、轮询存储条件和轮询播放条件的联合作用,有序地对各个车载显示系统的应用消息文件进行分类、排序,获取对应的语音音频并进行主动式的播报,这不仅提高了应用消息文件的数据处理效率,避免了用户移动查看消息时产生的安全隐患;还利用声音的全方位传播直接向用户展示应用消息文件的具体内容,有效地避免了因显示界面较窄、信息堆叠严重导致的信息读取困难的问题;并且通过标准化的语音音频播报,剔除了不同车辆的图文设计差异以及驾驶员个人素养对车辆驾驶的影响,从而降低了车辆驾驶门槛、提高了车辆的智能化,从而增加了产品的市场竞争力。
本实施例设置对应的播放配置与预设语音交互配置密度进行匹配,实现重要的应用消息文件的及时播报,保证用户接收消息的及时性,同时还降低频繁播报应用消息文件给用户带来的烦躁感,提高了用户使用体验。
在本实施例中,所述步骤S1中,所述即时存储条件为,所述应用消息文件不属于控制类型;
所述控制类型的所述应用消息文件包括跳过操作指令文件、静音操作指令文件、恢复操作指令文件和删除操作指令文件;
所述步骤S1还包括,当所述应用消息文件不满足所述即时存储条件时,直接执行所述应用消息文件中的操作指令。
本实施例通过控制类型的应用消息文件与其他类型的应用消息文件进行区分,将满足即时存储条件的其他类型的应用消息文件存储到即时消息池中,并直接执行跳过操作指令文件、静音操作指令文件、恢复操作指令文件和删除操作指令文件等应用消息文件中的操作指令,从而能够在第一时间执行与控制类型的应用消息文件对应的控制指令,通过提高消息的处理速率,降低车载显示系统界面上应用消息的堆叠程度,清洁车载显示系统界面,提高用户的使用体验。
在本实施例中,在所述步骤S1中,所述根据预设优先级条件确定所述应用消息文件的播放顺序并生成优先级列表,具体包括步骤:
S11.获取各个车载显示系统的应用消息文件,并根据所述应用消息文件的来源进行统一编号;
S12.匹配所述编号与所述预设优先级条件,确定所述应用消息文件的播放顺序,整合所有的所述播放顺序生成优先级列表。
所述统一编号具体为:将从仪表显示系统、中控显示系统和空调显示系统等车载显示系统中接收的应用消息文件分别在文件名前端依次编号0、1、2等序号。对每个模块编号,每个模块分别对模块内的应用消息文件进行编号,一条消息对应一个序号(ID)。各个模块之间进行信息交互时,可根据应用消息文件ID判断其来源。在产品设计时,可根据需求对各个模块的ID进行排序,此排序表即为预设优先级条件。
本实施例通过将对各个车载显示系统的应用消息文件进行统一编号,并将编号与优先级关联,根据关联关系确定应用消息文件的播放顺序,进而自动地生成优先级列表顺序依次序地播报应用消息文件,这不仅大幅度地提高了排序播放的工作效率,还实现了重要应用消息文件的及时处理、播放,从而提高用户的驾驶安全性。
在本实施例中,所述步骤S3具体包括步骤:
S31.读取所述即时消息池中置顶的所述应用消息文件;
S32.校验所述应用消息文件的有效性,当其有效时则进行下一步,当其无效时则删除所述应用消息文件;
S33.获取所述应用消息文件的消息属性,根据所述消息属性匹配与所述应用消息文件对应的语音音频并播放。
所述校验所述应用消息文件的有效性具体为,在应用消息文件之后扩增校验字段,通过校对所述校验字段判断所述应用消息文件的有效性。
本实施例通过设置校验步骤,定时对即时消息池中的应用消息文件进行清理,从而能够在实现信息有效播报的同时,保证消息传递的正确性,降低设备的运行负载,提高应用消息文件的处理效率;针对性地根据各种消息属性的应用消息文件合理地匹配并获取相应的语音音频,从而能够精准、有效地播报应用消息文件,使得用户能够简单、直观地理解应用消息文件中包含的内容。
在本实施例中,所述步骤S4具体为:
在所述语音音频播放结束后,从所述消息属性中提取出对应的播报类型,判断所述播报类型是否满足轮询存储条件,若满足则将相应的所述应用消息文件存储到轮询消息池中,若不满足,则删除所述即时消息池中对应的所述应用消息文件,进入下一条所述应用消息文件的播报处理。
本实施例通过在第一次播报应用消息文件之后,根据其消息属性中的播报类型对应用消息文件进行二次存储(存储到轮询存储条件),从而减少了即时消息池的数据负载,减少了应用消息文件的重复播报次数,提高了语音播报效率。
在本实施例中,在所述步骤S4中:所述播报类型包括单次即时播报类型和轮询播报类型;
所述轮询存储条件为,所述应用消息文件的播报类型为所述轮询播报类型。
本实施例通过对应用消息文件的播报类型进行细分,并分别存储到对应的存储区域中(即时消息池和轮询消息池),在实现重要消息及时播报的同时,还提高了消息的处理速率。
在本实施例中,在所述步骤S5中,所述轮询播放条件为,所述即时消息池空置,不存在需要处理的所述应用消息文件;
所述步骤S5还包括,当所述即时消息池接收到所述应用消息文件时,中断所述轮询消息池中所述应用消息文件的播报处理。
本实施例设置即时消息池的优先级高于轮询消息池,从而实现了对重要的应用消息文件优先播报,提高了用户的驾驶安全性,保障了用户的人身安全。
在本实施例中,所述消息属性包括查询类型、常规类型、特殊类型和交互类型。
本实施例将应用消息文件的消息属性细分为查询类型、常规类型、特殊类型和交互类型,从而能够在精准匹配对应的语音音频的同时,根据消息属性自动化地处理应用消息文件中的控制指令,并及时反馈用户的操作。
所述各个车载显示系统包括但不限于仪表显示系统、中控显示系统和空调显示系统。
在本实施例中,所述预设语音交互配置密度设置为高、中、低3个档位配置;对应的,所述播放配置也相应的设置为高、中、低3个档位。
本实施例的语音交互过程如下:
首先,设定预设语音交互配置密度,过滤掉播放配置档位较低的应用消息文件。
根据即时存储条件对过滤后的应用消息文件进行第一次分类,将控制类型的应用消息文件与其他类型的应用消息文件分开处理。即直接执行控制类型的应用消息文件中的操作指令,或根据预设优先级条件确定所述应用消息文件的播放顺序并生成优先级列表,根据所述优先级列表将其他类型的应用消息文件存储到即时消息池中。
依次读取所述即时消息池中置顶的所述应用消息文件,并校验其有效性,当其无效时则删除所述应用消息文件,当其有效时开始进行播放处理。
此时,提取所述应用消息文件的消息属性,根据所述消息属性匹配与其对应的语音音频并播放,具体包括:
当所述应用消息文件为查询类型时,读取查询信息中的文字信息组成语音文本,随后获取对应的语音音频并播报;
当所述应用消息文件为常规类型时,根据其中携带的文本内容匹配对应的语音音频并播报;
当所述应用消息文件为特殊类型时,根据其中携带的索引号调取对应的语音音频并播报;
当所述应用消息文件为交互类型时,根据其中携带的文本内容匹配对应的语音音频并播报,进入反馈等待时间,等待驾驶员的反馈指令,若接收到所述反馈指令则执行所述反馈指令,若否,则进入下一条应用消息文件的处理进程。
当所述应用消息文件的语音音频播放完毕后,根据轮询播放条件对所述应用消息文件进行第二次分类,将满足所述满足轮询存储条件的所述应用消息文件存储到轮询消息池中,否则标记为结束操作。
当所述即时消息池中的所述应用消息文件全部处理完成之后,根据与所述即时消息池同样的处理规则,处理所述轮询消息池中的所述应用消息文件,其中,当所述即时消息池接收到所述应用消息文件时,中断所述轮询消息池中所述应用消息文件的播报处理。
所述直接执行控制类型的应用消息文件中的操作指令,具体包括:
当所述应用消息文件为跳过操作指令文件时,执行其中的跳过操作指令,结束当前处理的应用消息文件(当前播放的语音音频),处理下一次序的应用消息文件;
当所述应用消息文件为静音操作指令文件时,执行其中的静音操作指令,正常处理当前处理的应用消息文件,并开启语音静音模式;
当所述应用消息文件为恢复操作指令文件时,执行其中的恢复操作指令,正常处理当前处理的应用消息文件,关闭语音静音模式,正常播放语音音频;
当所述应用消息文件为删除操作指令文件时,执行其中的删除操作指令,提取所述删除操作指令文件中的应用对象编号,并根据所述应用对象编号删除即时消息池中对应的应用消息文件。
本实施例中的语音交互内容包括但不限于为:
a.根据当前车内环境信息(温度),自动生成语音音频提示,提示用户通过空调控制器调节车内温度;
b.查询信息台获取当前区域的交通信息,整理后生成语音音频进行语音播报;
c.综合车身雷达信息,生成语音音频提示,提示用户行车过程中的前方车距、侧后来车以及车速控制;
d.综合当前ADAS信号,生成语音音频,提示ADAS辅助驾驶介入操作;
e.综合当前ADAS信号,生成语音音频,提示前车类型,引导安全提示;
f.获取当前位置信息,综合油电续航,生成语音音频,推荐最近的加油充电提示;
g.综合摄像头信息驾驶时长,生成语音音频,提示提示疲劳驾驶;
h.获取当前天气状况,生成语音音频,例如注意车灯、路况等等。
实施例2
本实施例中说明书附图的附图标记包括:主控模块1,存储模块2,消息显示装置3,语音播报模块4,指令反馈模块5。
参见图3,本发明实施例还提供一种主动式车载语音交互系统,运行实施例1所述的一种主动式车载语音交互方法,包括主控模块1及与其连接的存储模块2、消息显示装置3、语音播报模块4和指令反馈模块5;
所述存储模块2,用于存储各个车载显示系统的应用消息文件和语音音频;
所述消息显示装置3,用于向用户展示所述应用消息文件;
所述消息显示装置3包括各个车载显示系统,所述各个车载显示系统包括但不限于仪表显示系统、中控显示系统和空调显示系统,例如仪表显示盘、中控显示屏和空调控制面板。
所述主控模块1建立即时存储条件、预设优先级条件、轮询存储条件和轮询播放条件,用于对获取到的所述应用消息文件进行分类存储、排序,并从所述存储模块2中匹配对应的所述语音音频并控制所述语音播报模块4播放;
所述主控模块1可选择独立设置的、外接其他模块的MCU,也可直接采用车载中控系统的主控板。
优选地,本发明在瑞萨R-Car M3芯片支持的Hypervisor(虚拟机监视器)框架下实现。其中,消息显示装置3(仪表HMI)使用QNX系统(嵌入式实时操作系统)实现,主控模块1(车载中控模块)采用安卓系统实现,各模块之间通信协议选用SOME/IP(Scalableservice-Oriented MiddlewarE over IP,车载以太网通信)。消息显示装置3通过SOME/IP将应用消息文件发送到主控模块1(车载中控模块)的安卓系统中,由安卓系统实现对应语音音频的排序与播报决策。
所述语音播报模块4,用于响应所述主控模块1的控制,播放所述语音音频;可利用车辆自带的车载扬声器(车载语音助手)或新增专用于所述应用消息文件的播报扬声器,其中所述车载扬声器或所述播报扬声器与所述主控模块1有线或无线连接。
所述主控模块1还用于根据所述应用消息文件发出相应的控制指令控制所述指令反馈模块5执行相应的操作;
所述指令反馈模块5,用于响应所述控制指令获取用户的操作,生成反馈信号发送到所述主控模块1中;
所述指令反馈模块5包括但不限于车载方向盘或语音采集设备(麦克风收音设备),例如在进行用户操作采集时,车载方向盘左侧左键为取消,车载方向盘右侧右键为确定。
所述主控模块1还用于根据所述反馈信号发出相应的控制指令控制对应的车载设备执行相应的操作。
本实施例通过主控模块1及与其连接的存储模块2、消息显示装置3、语音播报模块4和指令反馈模块5建立了主动式的车载语音交互机制,驱使主控模块1主动地从存储模块2中匹配与应用消息文件对应的语音音频,并控制语音播报模块4播放,提高了应用消息文件的数据处理效率,避免了用户查看消息时产生的安全隐患;
利用声音的全方位传播直接向用户展示应用消息文件的具体内容,不仅有效地避免了因显示界面较窄、信息堆叠严重导致的信息读取困难的问题;
通过标准化的语音播报,剔除了不同车辆的图文设计差异以及驾驶员个人素养对车辆驾驶的影响,从而降低了车辆驾驶门槛、提高了车辆的智能化,从而增加了产品的市场竞争力;
通过设置指令反馈模块5,有效地获取用户(语音音频播报结束后)的处理反馈,实现了车载系统与用户的主动式交互,提高了车载系统的智能化程度与人性化程度,给予用户优质的使用体验。
所述即时存储条件为,所述应用消息文件不属于控制类型。
所述控制类型的所述应用消息文件包括跳过操作指令文件、静音操作指令文件、恢复操作指令文件和删除操作指令文件。
本实施例的语音交互过程如下:
首先,当车载设备向主控模块1发送应用消息文件,并通过对应的消息显示装置3呈现出来的同时,所述主控模块1还根据即时存储条件、预设优先级条件,对获取到的所述应用消息文件进行分类存储、排序。具体包括将非控制类型的所述应用消息文件存储到存储模块2中的特定位置(即时消息池)中,根据预设优先级条件生成优先级列表依次播放所述应用消息文件。随后,所述主控模块1控制语音播报模块4从所述存储模块2中匹配与所述应用消息文件对应的语音音频并播放。在所述语音音频播放完毕之后,若所述应用消息文件需要用户反馈(交互类型的应用消息文件)时,通过指令反馈模块5获取用户的操作,生成反馈信号发送到所述主控模块1中。此时,所述主控模块1根据所述反馈信号发出相应的控制指令控制对应的车载设备执行相应的操作。
其次,所述主控模块1根据所述应用消息文件是否满足轮询存储条件,若是则将其存储到存储模块2中的另一特定位置(轮询消息池)中,若否则进入下一条所述应用消息文件的处理进程。
当所述主控模块1确定所述应用消息文件满足轮询播放条件时,控制所述语音播报模块4从所述存储模块2中匹配对应的语音音频并播放。
所述即时消息池和所述轮询消息池分别用于存储单次即时播报类型和轮询播报类型的应用消息文件。
所述轮询存储条件为,所述应用消息文件的播报类型为所述轮询播报类型。
所述轮询播放条件为,所述即时消息池空置,不存在需要处理的所述应用消息文件。
鉴于上述各个模块主要是用于执行实施例1中的各个步骤,而步骤S0-S5的更具体的内容实施例1已经说明,本实施例则不再赘述。
本实施例所提供的语音交互系统采用各个模块实现语音交互方法中的各个步骤,为语音交互方法提供硬件基础,便于方法的实施。
上述实施例为本发明较佳的实施方式,但本发明的实施方式并不受上述实施例的限制,其他的任何未背离本发明的精神实质与原理下所作的改变、修饰、替代、组合、简化,均应为等效的置换方式,都包含在本发明的保护范围之内。
Claims (10)
1.一种主动式车载语音交互方法,其特征在于,包括步骤:
S1.获取各个车载显示系统的应用消息文件,当所述应用消息文件满足即时存储条件时,根据预设优先级条件确定所述应用消息文件的播放顺序并生成优先级列表;
S2.根据所述优先级列表将所述应用消息文件存储到即时消息池中;
S3.依次读取所述即时消息池中置顶的所述应用消息文件,获取对应的语音音频并播放;
S4.播放结束后,将满足轮询存储条件的所述应用消息文件存储到轮询消息池中;
S5.当满足轮询播放条件时,读取并播放所述轮询消息池中置顶的所述应用消息文件;
所述步骤S1中,所述即时存储条件为,所述应用消息文件不属于控制类型;
所述轮询存储条件为,所述应用消息文件的播报类型为轮询播报类型。
2.如权利要求1所述的一种主动式车载语音交互方法,其特征在于:
所述控制类型的所述应用消息文件包括跳过操作指令文件、静音操作指令文件、恢复操作指令文件和删除操作指令文件;
所述步骤S1还包括,当所述应用消息文件不满足所述即时存储条件时,直接执行所述应用消息文件中的操作指令。
3.如权利要求1所述的一种主动式车载语音交互方法,其特征在于,所述步骤S3具体包括步骤:
S31.读取所述即时消息池中置顶的所述应用消息文件;
S32.校验所述应用消息文件的有效性,当其有效时则进行下一步,当其无效时则删除所述应用消息文件;
S33.获取所述应用消息文件的消息属性,根据所述消息属性匹配与所述应用消息文件对应的语音音频并播放。
4.如权利要求3所述的一种主动式车载语音交互方法,其特征在于,所述步骤S4具体为:
在所述语音音频播放结束后,从所述消息属性中提取出对应的播报类型,判断所述播报类型是否满足轮询存储条件,若满足则将相应的所述应用消息文件存储到轮询消息池中,若不满足,则删除所述即时消息池中对应的所述应用消息文件,进入下一条所述应用消息文件的播报处理。
5.如权利要求4所述的一种主动式车载语音交互方法,其特征在于:
在所述步骤S5中,所述轮询播放条件为,所述即时消息池空置,不存在需要处理的所述应用消息文件;
所述步骤S5还包括,当所述即时消息池接收到所述应用消息文件时,中断所述轮询消息池中所述应用消息文件的播报处理。
6.如权利要求4所述的一种主动式车载语音交互方法,其特征在于,在所述步骤S4中:所述播报类型包括单次即时播报类型和轮询播报类型。
7.如权利要求1所述的一种主动式车载语音交互方法,其特征在于,在所述步骤S1中,所述根据预设优先级条件确定所述应用消息文件的播放顺序并生成优先级列表,具体包括步骤:
S11.获取各个车载显示系统的应用消息文件,并根据所述应用消息文件的来源进行统一编号;
S12.匹配所述编号与所述预设优先级条件,确定所述应用消息文件的播放顺序,整合所有的所述播放顺序生成优先级列表。
8.如权利要求1所述的一种主动式车载语音交互方法,其特征在于,在所述步骤S1之前,还包括步骤:
S0.根据应用消息文件的重要性设定其播放配置的高低程度,将所述播放配置与预设语音交互配置密度进行匹配,若匹配成功则进入步骤S1,若匹配不成功则忽略所述应用消息文件。
9.如权利要求3所述的一种主动式车载语音交互方法,其特征在于:所述消息属性包括查询类型、常规类型、特殊类型和交互类型。
10.一种主动式车载语音交互系统,其特征在于,至少运行权利要求1~9中的任一项权利要求所述的一种主动式车载语音交互方法:包括主控模块及与其连接的存储模块、消息显示装置、语音播报模块和指令反馈模块;
所述存储模块,用于存储各个车载显示系统的应用消息文件和语音音频;
所述消息显示装置,用于向用户展示所述应用消息文件;
所述主控模块建立即时存储条件、预设优先级条件、轮询存储条件和轮询播放条件,用于对获取到的所述应用消息文件进行分类存储、排序,并从所述存储模块中匹配对应的所述语音音频并控制所述语音播报模块播放;
所述语音播报模块,用于响应所述主控模块的控制,播放所述语音音频;所述主控模块还用于根据所述应用消息文件发出相应的控制指令控制所述指令反馈模块执行相应的操作;
所述指令反馈模块,用于响应所述控制指令获取用户的操作,生成反馈信号发送到所述主控模块中;
所述主控模块还用于根据所述反馈信号发出相应的控制指令控制对应的车载设备执行相应的操作。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010641200.0A CN111970185B (zh) | 2020-07-06 | 2020-07-06 | 一种主动式车载语音交互方法和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010641200.0A CN111970185B (zh) | 2020-07-06 | 2020-07-06 | 一种主动式车载语音交互方法和系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111970185A CN111970185A (zh) | 2020-11-20 |
CN111970185B true CN111970185B (zh) | 2022-08-30 |
Family
ID=73361444
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010641200.0A Active CN111970185B (zh) | 2020-07-06 | 2020-07-06 | 一种主动式车载语音交互方法和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111970185B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113518106A (zh) * | 2021-04-06 | 2021-10-19 | 惠州市德赛西威智能交通技术研究院有限公司 | 一种基于some/ip协议的虚拟机间交互系统及方法 |
CN113297029A (zh) * | 2021-04-21 | 2021-08-24 | 惠州市德赛西威智能交通技术研究院有限公司 | 用于双系统智能驾驶舱qnx端运行信息管理系统和方法 |
CN113449123A (zh) * | 2021-06-28 | 2021-09-28 | 深圳市英骏利智慧照明科技有限公司 | 一种多led显示控制方法、系统、终端及介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011209581A (ja) * | 2010-03-30 | 2011-10-20 | Panasonic Corp | 車載オーディオ装置 |
CN109660446A (zh) * | 2018-10-31 | 2019-04-19 | 深圳壹账通智能科技有限公司 | 聊天信息的语音播报方法、装置、计算机设备及存储介质 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103051648B (zh) * | 2011-10-14 | 2016-03-30 | 上海博泰悦臻网络技术服务有限公司 | 车辆间的通信方法和系统、用于车辆间通信的服务器 |
JP5902994B2 (ja) * | 2012-05-08 | 2016-04-13 | テレフオンアクチーボラゲット エルエム エリクソン(パブル) | 通信装置 |
CN105635211B (zh) * | 2014-11-03 | 2018-10-30 | 南京中车浦镇城轨车辆有限责任公司 | 基于多功能车辆总线的车载实时信息通信方法 |
CN105530171B (zh) * | 2015-12-23 | 2020-08-25 | 腾讯科技(深圳)有限公司 | 车载终端播放即时消息音的方法和装置 |
CN110737423A (zh) * | 2019-10-16 | 2020-01-31 | 南京领行科技股份有限公司 | 分区域音频播报方法、装置、设备、存储介质及车辆 |
-
2020
- 2020-07-06 CN CN202010641200.0A patent/CN111970185B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011209581A (ja) * | 2010-03-30 | 2011-10-20 | Panasonic Corp | 車載オーディオ装置 |
CN109660446A (zh) * | 2018-10-31 | 2019-04-19 | 深圳壹账通智能科技有限公司 | 聊天信息的语音播报方法、装置、计算机设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN111970185A (zh) | 2020-11-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111970185B (zh) | 一种主动式车载语音交互方法和系统 | |
JP6761967B2 (ja) | 運転支援方法およびそれを利用した運転支援装置、自動運転制御装置、車両、プログラム | |
CN102303608B (zh) | 嵌入式移动互联智能助驾系统 | |
CN105867179A (zh) | 一种车载语音控制方法和装置、设备 | |
US8135506B2 (en) | Methods and systems for providing vehicle information | |
CN107851394A (zh) | 驾驶辅助装置、驾驶辅助系统、驾驶辅助方法以及自动驾驶车辆 | |
CN107848540A (zh) | 驾驶辅助装置、驾驶辅助系统、驾驶辅助方法、驾驶辅助程序以及自动驾驶车辆 | |
CN108657178A (zh) | 一种智能网联电动教练车及控制方法 | |
CN103383265A (zh) | 汽车自动驾驶系统 | |
CN108735203A (zh) | 语音交互方法、终端及计算机可读介质 | |
CN111260804A (zh) | 一种用于etc功能的设备的信息交互方法、系统及车辆 | |
CN104753978A (zh) | 车载消息推送方法及服务系统 | |
CN104852993A (zh) | 车载移动多媒体信息交互系统 | |
CN112440900A (zh) | 一种车辆控制方法、装置、控制设备及汽车 | |
CN104570836A (zh) | 一种机动车内部硬件语音人机交互系统及方法 | |
CN207565466U (zh) | 一种多功能车载抬头显示及操控系统 | |
CN109835280B (zh) | 一种通过语音识别显示车辆状态及驾驶行为的系统和车辆 | |
JP2017032543A (ja) | 運転支援装置、運転支援システム、運転支援方法、運転支援プログラム及び自動運転車両 | |
CN202987023U (zh) | 便携式智能车载系统 | |
CN107672524A (zh) | 一种多功能车载抬头显示及操控系统 | |
CN113380062B (zh) | 信息处理系统和信息处理方法 | |
CN212579832U (zh) | 车辆行驶安全的人机交互系统及车辆 | |
CN113494921B (zh) | 自动驾驶方法及装置 | |
CN113935641A (zh) | 公交车停靠提示方法、装置、计算机设备和存储介质 | |
CN113479214A (zh) | 一种自动驾驶系统及其应用方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |