CN110290475A - 车载人机交互方法、系统及计算机可读存储介质 - Google Patents

车载人机交互方法、系统及计算机可读存储介质 Download PDF

Info

Publication number
CN110290475A
CN110290475A CN201910464767.2A CN201910464767A CN110290475A CN 110290475 A CN110290475 A CN 110290475A CN 201910464767 A CN201910464767 A CN 201910464767A CN 110290475 A CN110290475 A CN 110290475A
Authority
CN
China
Prior art keywords
human
computer interaction
interaction
vehicle
channel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910464767.2A
Other languages
English (en)
Inventor
吴飞
宋少鹏
叶俊民
赖小强
李海进
凌瑞端
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Meter Tang Science And Technology Ltd
Original Assignee
Shenzhen Meter Tang Science And Technology Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Meter Tang Science And Technology Ltd filed Critical Shenzhen Meter Tang Science And Technology Ltd
Priority to CN201910464767.2A priority Critical patent/CN110290475A/zh
Publication of CN110290475A publication Critical patent/CN110290475A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/48Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806Task transfer initiation or dispatching
    • G06F9/4812Task transfer initiation or dispatching by interrupt, e.g. masked
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00Speaker identification or verification techniques
    • G10L17/22Interactive procedures; Man-machine interfaces
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30Services specially adapted for particular environments, situations or purposes
    • H04W4/40Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H04W4/48Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for in-vehicle communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L21/0216Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02166Microphone arrays; Beamforming

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开一种车载人机交互方法、系统及计算机可读存储介质,可以将不支持语音交互的传统的车机升级为可以支持人机语音交互的车机。前端处理模块检测到人机交互唤醒指令或行为时,通知人机交互逻辑优化模块输出第一预设信号给车机主板,由车机主板产生通道切换行为;人机交互逻辑优化模块记录当前音频通道,切换到交互通道,从本地或网络获取当前的人机交互状态;根据当前的人机交互状态判断人机交互是否结束;若人机交互结束,则输出第二预设信号给车机主板,并释放交互通道,恢复原来的音频通道;否则,维持语音通道第一预设信号。本发明方案解决了传统车机人机交互的易用性问题,改善了用户的人机交互体验。

Description

车载人机交互方法、系统及计算机可读存储介质
技术领域
本发明涉及智能控制技术领域,尤其涉及一种车载人机交互方法、系统及计算机可读存储介质。
背景技术
传统的车机功能主要包括广播(包括FM/DAB等)、蓝牙(Bluetooth,简称BT)音乐、导航、本地音乐等应用和功能,当前车机越来越普及,逐渐的从功能机跨越到智能机时代(可以安装各种App,包括导航、购物等在线应用,音乐、故事、新闻等多媒体等在线内容),车机更类似一部车载的智能手机。
随着智能语音技术的发展与应用,很多车机开始采用智能语音交互。在传统的驾驶场景下用户专注于驾驶,语音交互就成为刚需。即使在无人驾驶时代,语音也是一种最重要的交互方式。因此行业中出现了车载语音助理的产品(外置车载配件或者内置语音模组),这种语音助理通过蓝牙连接手机,借助手机联网能力获取语音相关的服务(如音乐、新闻、在线导航,智能家居远程控制等)。
当传统车机上使用车载语音助理产品时,需要手动切换蓝牙通道。这是因为传统车机的广播通道与蓝牙媒体通道(A2DP)、车机内部其他的音频通道等是并列存在的,比如用户正在听广播,用户为了使用车载语音助理查询天气,就需要手动切换广播通道到蓝牙通道,使用后再手动切换回广播。这样的用户操作繁琐,不易上手,会带来各种售后问题。如果语音的优先级更高,就需要将A2DP蓝牙媒体通道优先级提高,超过广播,比如有的APP使用了免提电话通道(HFP)进行语音交互,就会出现广播频频被外部(包括并不限于手机、PAD、POD、播放器等终端)的各种App或者短信等提示音打断,用户还需要未各个APP设置免打扰或者静音,这种体验更加繁琐。
因此如果希望在双向通道(包括并不限于蓝牙、Wi-Fi、其他无线网络-如2G/3G/4G/5G等移动通信或者USB等有线信道)中增加语音交互,就涉及到业务逻辑的优化问题。如何改进车载语音交互的自动化体验,为车载语音交互增加一种临时的高优先级业务支持能力,进而扩展到车载人机交互的各种新的交互方式(比如刷脸、手势等),就成了本发明的重要任务。
发明内容
本发明提出了一种车载人机交互方法、系统及计算机可读存储介质,旨在解决人机交互的便捷性,改善用户的人机交互体验。
为实现上述目的,本发明提供一种车载人机交互方法,所述车载人机交互方法应用于车载人机交互系统,所述车载人机交互系统包括:前端处理模块、人机交互逻辑优化模块,所述车载人机交互方法包括以下步骤:
前端处理模块进行人机交互唤醒检测,在检测到人机交互唤醒指令或行为时,通知所述人机交互逻辑优化模块;
所述人机交互逻辑优化模块输出第一预设信号给车机主板,由所述车机主板产生通道切换行为;
所述人机交互逻辑优化模块记录当前音频通道,切换到交互通道,从本地或网络获取当前的人机交互状态;
所述人机交互逻辑优化模块根据当前的人机交互状态判断人机交互是否结束;若人机交互结束,则输出第二预设信号给车机主板,并释放所述交互通道,恢复原来的音频通道;否则,维持交互通道。
其中,所述人机交互为非接触式人机交互,至少包括:语音交互、图像交互、视频交互、手势交互。
其中,所述人机交互为语音交互,所述前端处理模块包括:麦克风或麦克风阵列、前端降噪模块;
所述车载人机交互系统还包括:音源管理模块;
所述前端处理模块进行人机交互唤醒检测,在检测到人机交互唤醒指令或行为时,通知所述人机交互逻辑优化模块的步骤包括:
所述前端降噪模块通过所述麦克风或麦克风阵列进行录音,然后将录音信号进行语音唤醒检测,在检测到语音唤醒指令或行为时,通知所述人机交互逻辑优化模块。
其中,所述音源管理模块还连接蓝牙、WiFi、4G/5G移动网络音频、FM/DAB广播、USB和本地音频接口。
其中,所述前端降噪模块通过所述麦克风或麦克风阵列进行录音,然后将录音信号进行语音唤醒检测,在检测到语音唤醒指令或行为时,通知所述人机交互逻辑优化模块的步骤之后还包括:
对所述语音唤醒指令的优先级进行识别,若所述语音唤醒指令的优先级高于预设级别,则执行步骤:所述人机交互逻辑优化模块输出第一预设信号给车机主板,由所述车机主板产生通道切换行为。
其中,所述前端拾音降噪模块通过所述麦克风阵列进行录音,然后将录音信号进行语音唤醒检测,在检测到语音唤醒指令或行为时,通知所述人机交互逻辑优化模块的步骤之前还包括:
通过默认的音频通道播放广播或本地音频。
本发明还提出一种车载人机交互系统,所述车载人机交互系统包括:前端处理模块、人机交互逻辑优化模块,其中:
所述前端处理模块,用于进行人机交互唤醒检测,在检测到人机交互唤醒指令或行为时,通知所述人机交互逻辑优化模块;
所述人机交互逻辑优化模块,用于输出第一预设信号给车机主板,由所述车机主板产生切换行为;以及记录当前音频通道,切换到交互通道,从本地或网络获取当前的人机交互状态;根据当前的人机交互状态判断人机交互是否结束;若人机交互结束,则输出第二预设信号给车机主板,并释放所述交互通道,恢复原来的音频通道;否则,维持交互通道。
其中,所述人机交互为语音交互,所述前端处理模块包括:麦克风或者麦克风阵列、前端降噪模块;所述车载人机交互系统还包括:音源管理模块;
所述前端降噪模块,还用于通过所述麦克风或麦克风阵列进行录音,然后将录音信号进行语音唤醒检测,在检测到语音唤醒指令或行为时,通知所述人机交互逻辑优化模块;
所述音源管理模块,用于对音源通道进行管理。
本发明还提出一种车载人机交互系统,所述车载人机交互系统包括:麦克风或麦克风阵列、前端降噪模块、音源管理模块、人机交互逻辑优化模块、存储器、处理器,以及存储在所述存储器上的计算机程序,所述计算机程序被所述处理器调用时执行如上所述的车载人机交互方法的步骤。
本发明还提出一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器调用时执行如上所述的车载人机交互方法的步骤。
本发明的有益效果是:本发明引入临时的高优先级的业务优化,模拟用户的主动通道切换行为,给用户的感觉就像临时发起了一个自动的语音交互,说完自动断开,完全不用额外的学习和操作。该方案解决了人-机交互(包括语音、视频、手势等各种非接触交互)的便捷性,改善了用户的人机交互体验。
相比现有技术,本发明既能保持车机原有的广播/媒体的使用体验,又能增加一种便捷的人机交互,在人机交互结束后立即恢复到原来的业务比如广播或者本地音频等,改善了原来传统车机增加语音助理需要手动切换通道的问题。
附图说明
图1是本发明车载人机交互方法实施例的流程示意图;
图2是本发明实施例涉及的车载人机交互系统架构示意图;
图3是本发明车载人机交互方法实施例的细化流程示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
目前传统车机上,通常会有广播、媒体、导航等功能,如果用户在听广播,就无法进行语音交互;如果要使用语音交互,就需要用户在使用前切换(比如手动切换到蓝牙、或者使用按键等),使用后再手动切换回广播。这样不仅繁琐,用户教育成本也高,会带来各种售后投诉问题。
本发明实施例提出的方案重点要解决的是人-机交互(包括语音、视频、手势等各种非接触交互)的即时性和自动化体验,引入临时的高优先级的业务申请,模拟用户的主动切换行为,从而实现用户意图的识别、通道的申请和自动切换,业务完成后通道的自动释放。给用户的感觉就像临时发起了一个自动的语音交互,然后说完自动断开,不需要额外学习和操作。
本发明实施例方案涉及车载人机交互,该人机交互包括任何的非接触式人机交互,除了语音,也包括视频交互、手势交互等方式,都可以借鉴这种临时性的高优先级任务申请和释放。
本发明实施例车载人机交互系统的产品形态可以是USB外设、车机主板上的PCB、车载支架、方向盘遥控器等。
所述车载人机交互系统包括:前端处理模块、人机交互逻辑优化模块,所述车载人机交互方法主要包括以下步骤:
前端处理模块进行人机交互唤醒检测,在检测到人机交互唤醒指令或行为时,通知所述人机交互逻辑优化模块;
所述人机交互逻辑优化模块输出第一预设信号给车机主板,由所述车机主板产生通道切换行为;
所述人机交互逻辑优化模块记录当前音频通道,切换到交互通道,从本地或网络获取当前的人机交互状态;
所述人机交互逻辑优化模块根据当前的人机交互状态判断人机交互是否结束;若人机交互结束,则输出第二预设信号给车机主板,并释放所述交互通道,恢复原来的音频通道;否则,维持交互通道。
其中,第一预设信号和第二预设信号包括并不限于USB、I2C、串口、I/O等有线或者无线信号,也可以是某种接口信号,该接口信号可以是I/O口的高低电平、USB、串口信号、SPI、I2C等各种形式的接口信号。具体举例而言,第一预设信号可以是某种高电平信号,第二预设信号可以是某种低电平信号。
以下各实施例以语音交互进行举例。
具体地,请参照图1,本发明提出一种车载人机交互方法,所述车载人机交互方法应用于车载人机交互系统,所述车载人机交互系统包括:麦克风或麦克风阵列、前端降噪模块、人机交互逻辑优化模块,所述车载人机交互方法包括以下步骤:
步骤S1,前端降噪模块通过所述麦克风或麦克风阵列进行录音,然后将录音信号进行语音唤醒检测,在检测到语音唤醒指令或行为时,通知所述人机交互逻辑优化模块;
本实施例方案涉及对车辆上智能终端、车机等的智能控制,主要涉及人机交互的控制,该人机交互包括但不限于语音、视频、手势等各种非接触交互。
本实施例方案应用于车载人机交互系统,该车载人机交互系统可以集成在车机或其他车载智能终端上,本实施例以车机进行举例。
如图2所示,该车载人机交互系统架构包括:麦克风或麦克风阵列、前端降噪模块、音源管理模块、人机交互逻辑优化模块(图中以语音交互逻辑优化模块示意),音源管理模块连接有车载蓝牙、WiFi、4G/5G等移动网络音频、FM/DAB等广播、USB和本地音频接口。车载人机交互系统与车机的车机主板通讯连接,车机主板连接有按键与指示模块,以及专用网络连接模块。本发明实施例的核心在于人机交互逻辑优化模块。
更为具体地,作为一种实施方式,在用户需要通过车机进行语音交互时,前端降噪模块通过所述麦克风或麦克风阵列进行语音唤醒检测,在检测到语音唤醒指令或行为时,通知所述人机交互逻辑优化模块。
作为另一种实施方式,车机可以在用户进行人机交互之前,通过默认的音频通道播放广播或本地音频。同时,前端降噪模块通过所述麦克风或麦克风阵列进行语音唤醒检测,在检测到人机交互唤醒指令或行为时,通知所述人机交互逻辑优化模块。
步骤S2,所述人机交互逻辑优化模块输出第一预设信号给车机主板,由所述车机主板产生通道切换行为;
人机交互逻辑优化模块在接收到前端降噪模块的通知后,输出第一预设信号给车机主板,由所述车机主板产生模拟按键通道切换行为或直接功能切换行为。
其中,第一预设信号包括并不限于USB、I2C、串口、I/O等有线或者无线信号,也可以是某种接口信号,该接口信号可以是I/O口的高低电平、USB、串口信号、SPI、I2C等各种形式的接口信号。具体举例而言,第一预设信号可以是某种高电平信号。
步骤S3,人机交互逻辑优化模块记录当前音频通道,切换到交互通道,从本地或网络获取当前的人机交互状态;
同时,人机交互逻辑优化模块记录当前音频通道,切换到交互通道,从本地或网络获取当前的人机交互状态。
步骤S4,人机交互逻辑优化模块根据当前的人机交互状态判断人机交互是否结束;若人机交互结束,则输出第二预设信号给车机主板,并释放所述交互通道,恢复原来的音频通道;否则,维持交互通道。
人机交互逻辑优化模块根据当前的人机交互状态判断人机交互是否结束;若人机交互结束,则输出第二预设信号给车机主板,并释放所述交互通道,恢复原来的音频通道;否则,维持某种信号(包括并不限于USB、I2C、串口、I/O等有线或者无线信号)。
其中,第一预设信号和第二预设信号包括并不限于USB、I2C、串口、I/O等有线或者无线信号,也可以是某种接口信号,该接口信号可以是I/O口的高低电平、USB、串口信号、SPI、I2C等各种形式的接口信号。具体举例而言,第一预设信号可以是某种高电平信号,第二预设信号可以是某种低电平信号。
本实施例的细化流程可以参照图3所示。
进一步地,所述前端降噪模块通过所述麦克风或麦克风阵列进行录音,然后将录音信号进行语音唤醒检测,在检测到语音唤醒指令或行为时,通知所述人机交互逻辑优化模块的步骤之后还包括:
对所述语音唤醒指令的优先级进行识别,若所述语音唤醒指令的优先级高于预设级别,则执行步骤:所述人机交互逻辑优化模块输出第一预设信号(包括并不限于USB、I2C、串口、I/O等有线或者无线信号)给车机主板,由所述车机主板产生切换行为。
本发明的有益效果是:本发明引入临时的高优先级的业务申请,模拟用户的主动切换行为,从而实现用户意图的识别、通道的申请和自动切换,业务完成后通道的自动释放,给用户的感觉就像临时发起了一个自动的语音交互,然后说完自动断开一样,完全不用额外的学习和操作。该方案解决了人-机交互(包括语音、视频、手势等各种非接触交互)的即时性,改善了用户的人机交互体验。
相比现有技术,本发明既能保持车机原有的广播/媒体/语音的使用体验,又能在用户唤醒语音交互时提供即时的优先语音交互,在语音交互结束后立即恢复到原来的业务比如广播或者本地Audio音频等,不会出现切换通道后无法恢复,需要手动切换的问题。
此外,本发明实施例还提出一种车载人机交互系统,所述车载人机交互系统包括:前端处理模块、人机交互逻辑优化模块,其中:
所述前端处理模块,用于进行人机交互唤醒检测,在检测到人机交互唤醒指令或行为时,通知所述人机交互逻辑优化模块;
所述人机交互逻辑优化模块,用于输出第一预设信号(包括并不限于USB、I2C、串口、I/O等有线或者无线信号)给车机主板,由所述车机主板产生通道切换行为;以及记录当前音频通道,切换到交互通道,从本地或网络获取当前的人机交互状态;根据当前的人机交互状态判断人机交互是否结束;若人机交互结束,则输出第二预设信号(包括并不限于USB、I2C、串口、I/O等有线或者无线信号)给车机主板,并释放所述交互通道,恢复原来的音频通道;否则,维持交互通道。
以语音交互为例,参照图2所示,所述车载人机交互系统包括:麦克风或者麦克风阵列、前端降噪模块、人机交互逻辑优化模块,其中:
所述前端降噪模块,用于通过所述麦克风或者麦克风阵列进行语音唤醒检测,在检测到语音唤醒指令或行为时,通知所述人机交互逻辑优化模块;
所述人机交互逻辑优化模块,用于输出第一预设信号(包括并不限于USB、I2C、串口、I/O等有线或者无线信号)给车机主板,由所述车机主板产生切换行为;以及记录当前音频通道,切换到交互通道,从本地或网络获取当前的人机交互状态;根据当前的人机交互状态判断人机交互是否结束;若人机交互结束,则输出第二预设信号给车机主板,并释放所述交互通道,恢复原来的音频通道;否则,维持第一预设信号(包括并不限于USB、I2C、串口、I/O等有线或者无线信号)。
进一步地,人机交互系统还包括:音源管理模块;
所述音源管理模块,用于对音源通道进行管理。
本实施例的原理请参照上述方法实施例,在此不再赘述。
此外,本发明实施例还提出一种车载人机交互系统,所述车载人机交互系统包括:麦克风或麦克风阵列、前端降噪模块、音源管理模块、人机交互逻辑优化模块、存储器、处理器,以及存储在所述存储器上的计算机程序,所述计算机程序被所述处理器调用时执行如上所述的车载人机交互方法的步骤。
此外,本发明实施例一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器调用时执行如上所述的车载人机交互方法的步骤。
本实施例的原理请参照上述方法实施例,在此不再赘述。
本发明方案中,通过语音唤醒激活,模拟人工按键切换,发出通道申请,保存现场并在语音交互后释放恢复现场;将语音唤醒激活和语音服务连接状态用于信道切换;提供一种人机交互体验:任何非接触式的人机交互,如果交互的业务与原有的业务的优先级有冲突,都可以使用这种临时性高优先级的任务申请和资源释放,达到自动化无缝切换。
相比现有技术,本发明方案可以由用户主动发起语音请求,从唤醒到交互到完成,这些流程都可以自动完成,并能够自动申请和释放音频通道,不需要用户手动干预和操作,极大的提升用户体验。
如前所述,本发明方案可以扩展泛化到任何的非接触式人机交互,也包括视频交互、手势交互灯方式,都可以借鉴这种临时性的高优先级任务申请和释放,改善用户的人机交互体验。
以上所述仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或流程变换,或直接或间接运用在其它相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种车载人机交互方法,其特征在于,所述车载人机交互方法应用于车载人机交互系统,所述车载人机交互系统包括:前端处理模块、人机交互逻辑优化模块,所述车载人机交互方法包括以下步骤:
前端处理模块进行人机交互唤醒检测,在检测到人机交互唤醒指令或行为时,通知所述人机交互逻辑优化模块;
所述人机交互逻辑优化模块输出第一预设信号给车机主板,由所述车机主板产生通道切换行为;
所述人机交互逻辑优化模块记录当前音频通道,切换到交互通道,从本地或网络获取当前的人机交互状态;
所述人机交互逻辑优化模块根据当前的人机交互状态判断人机交互是否结束;若人机交互结束,则输出第二预设信号给车机主板,并释放所述交互通道,恢复原来的音频通道;否则,维持交互通道。
2.根据权利要求1所述的车载人机交互方法,其特征在于,所述人机交互为非接触式人机交互,至少包括:语音交互、图像交互、视频交互、手势交互。
3.根据权利要求2所述的车载人机交互方法,其特征在于,所述人机交互为语音交互,所述前端处理模块包括:麦克风或麦克风阵列、前端降噪模块;
所述车载人机交互系统还包括:音源管理模块;
所述前端处理模块进行人机交互唤醒检测,在检测到人机交互唤醒指令或行为时,通知所述人机交互逻辑优化模块的步骤包括:
所述前端降噪模块通过所述麦克风或麦克风阵列进行录音,然后将录音信号进行语音唤醒检测,在检测到语音唤醒指令或行为时,通知所述人机交互逻辑优化模块。
4.根据权利要求3所述的车载人机交互方法,其特征在于,所述音源管理模块还连接蓝牙、WiFi、4G/5G移动网络音频、FM/DAB广播、USB和本地音频接口。
5.根据权利要求3所述的车载人机交互方法,其特征在于,所述前端降噪模块通过所述麦克风或麦克风阵列进行录音,然后将录音信号进行语音唤醒检测,在检测到语音唤醒指令或行为时,通知所述人机交互逻辑优化模块的步骤之后还包括:
对所述语音唤醒指令的优先级进行识别,若所述语音唤醒指令的优先级高于预设级别,则执行步骤:所述人机交互逻辑优化模块输出第一预设信号给车机主板,由所述车机主板产生通道切换行为。
6.根据权利要求3所述的车载人机交互方法,其特征在于,所述前端拾音降噪模块通过所述麦克风阵列进行录音,然后将录音信号进行语音唤醒检测,在检测到语音唤醒指令或行为时,通知所述人机交互逻辑优化模块的步骤之前还包括:
通过默认的音频通道播放广播或本地音频。
7.一种车载人机交互系统,其特征在于,所述车载人机交互系统包括:前端处理模块、人机交互逻辑优化模块,其中:
所述前端处理模块,用于进行人机交互唤醒检测,在检测到人机交互唤醒指令或行为时,通知所述人机交互逻辑优化模块;
所述人机交互逻辑优化模块,用于输出第一预设信号给车机主板,由所述车机主板产生通道切换行为;以及记录当前音频通道,切换到交互通道,从本地或网络获取当前的人机交互状态;根据当前的人机交互状态判断人机交互是否结束;若人机交互结束,则输出第二预设信号给车机主板,并释放所述交互通道,恢复原来的音频通道;否则,维持交互通道。
8.根据权利要求7所述的车载人机交互系统,其特征在于,所述人机交互为语音交互,所述前端处理模块包括:麦克风或者麦克风阵列、前端降噪模块;所述车载人机交互系统还包括:音源管理模块;
所述前端降噪模块,还用于通过所述麦克风或麦克风阵列进行录音,然后将录音信号进行语音唤醒检测,在检测到语音唤醒指令或行为时,通知所述人机交互逻辑优化模块;
所述音源管理模块,用于对音源通道进行管理。
9.一种车载人机交互系统,其特征在于,所述车载人机交互系统包括:麦克风或麦克风阵列、前端降噪模块、音源管理模块、人机交互逻辑优化模块、存储器、处理器,以及存储在所述存储器上的计算机程序,所述计算机程序被所述处理器调用时执行如权利要求1-6中任一项所述的车载人机交互方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器调用时执行如权利要求1-6中任一项所述的车载人机交互方法的步骤。
CN201910464767.2A 2019-05-30 2019-05-30 车载人机交互方法、系统及计算机可读存储介质 Pending CN110290475A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910464767.2A CN110290475A (zh) 2019-05-30 2019-05-30 车载人机交互方法、系统及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910464767.2A CN110290475A (zh) 2019-05-30 2019-05-30 车载人机交互方法、系统及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN110290475A true CN110290475A (zh) 2019-09-27

Family

ID=68002931

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910464767.2A Pending CN110290475A (zh) 2019-05-30 2019-05-30 车载人机交互方法、系统及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN110290475A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110544478A (zh) * 2019-11-04 2019-12-06 南京创维信息技术研究院有限公司 驾驶舱智能远场语音交互的系统及方法
CN111462744A (zh) * 2020-04-02 2020-07-28 深圳创维-Rgb电子有限公司 一种语音交互方法、装置、电子设备及存储介质
CN112509608A (zh) * 2020-11-25 2021-03-16 广州朗国电子科技有限公司 一种usb设备随通道录音的方法、装置及存储介质
CN113362826A (zh) * 2021-06-21 2021-09-07 艺唯科技股份有限公司 一种自动转换的语音通道的装置及其方法
CN113838477A (zh) * 2021-09-13 2021-12-24 阿波罗智联(北京)科技有限公司 音频数据包的丢包恢复方法、装置、电子设备及存储介质
CN115499436A (zh) * 2022-08-19 2022-12-20 重庆长安汽车股份有限公司 车辆的交互方法、装置、车载交互系统及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8001420B2 (en) * 2007-04-27 2011-08-16 Accenture Global Services Limited End user control configuration system with dynamic user interface
CN103686546A (zh) * 2013-12-13 2014-03-26 大连现代高技术集团有限公司 一种车载终端多通道语音分配、切换的控制方法
CN104318924A (zh) * 2014-11-12 2015-01-28 沈阳美行科技有限公司 一种实现语音识别功能的方法
CN105448294A (zh) * 2015-12-09 2016-03-30 江苏天安智联科技股份有限公司 一种应用于车载设备的智能语音识别系统
CN205263746U (zh) * 2015-12-15 2016-05-25 深圳市航盛电子股份有限公司 一种基于3d手势识别的车载娱乐系统
CN107264447A (zh) * 2017-06-06 2017-10-20 湖南海翼电子商务股份有限公司 车辆内语音识别控制方法、系统及装置
CN109634501A (zh) * 2018-12-20 2019-04-16 掌阅科技股份有限公司 电子书批注添加方法、电子设备及计算机存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8001420B2 (en) * 2007-04-27 2011-08-16 Accenture Global Services Limited End user control configuration system with dynamic user interface
CN103686546A (zh) * 2013-12-13 2014-03-26 大连现代高技术集团有限公司 一种车载终端多通道语音分配、切换的控制方法
CN104318924A (zh) * 2014-11-12 2015-01-28 沈阳美行科技有限公司 一种实现语音识别功能的方法
CN105448294A (zh) * 2015-12-09 2016-03-30 江苏天安智联科技股份有限公司 一种应用于车载设备的智能语音识别系统
CN205263746U (zh) * 2015-12-15 2016-05-25 深圳市航盛电子股份有限公司 一种基于3d手势识别的车载娱乐系统
CN107264447A (zh) * 2017-06-06 2017-10-20 湖南海翼电子商务股份有限公司 车辆内语音识别控制方法、系统及装置
CN109634501A (zh) * 2018-12-20 2019-04-16 掌阅科技股份有限公司 电子书批注添加方法、电子设备及计算机存储介质

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110544478A (zh) * 2019-11-04 2019-12-06 南京创维信息技术研究院有限公司 驾驶舱智能远场语音交互的系统及方法
CN111462744A (zh) * 2020-04-02 2020-07-28 深圳创维-Rgb电子有限公司 一种语音交互方法、装置、电子设备及存储介质
WO2021196617A1 (zh) * 2020-04-02 2021-10-07 深圳创维-Rgb电子有限公司 一种语音交互方法、装置、电子设备及存储介质
CN111462744B (zh) * 2020-04-02 2024-01-30 深圳创维-Rgb电子有限公司 一种语音交互方法、装置、电子设备及存储介质
CN112509608A (zh) * 2020-11-25 2021-03-16 广州朗国电子科技有限公司 一种usb设备随通道录音的方法、装置及存储介质
CN113362826A (zh) * 2021-06-21 2021-09-07 艺唯科技股份有限公司 一种自动转换的语音通道的装置及其方法
CN113838477A (zh) * 2021-09-13 2021-12-24 阿波罗智联(北京)科技有限公司 音频数据包的丢包恢复方法、装置、电子设备及存储介质
CN115499436A (zh) * 2022-08-19 2022-12-20 重庆长安汽车股份有限公司 车辆的交互方法、装置、车载交互系统及存储介质

Similar Documents

Publication Publication Date Title
CN110290475A (zh) 车载人机交互方法、系统及计算机可读存储介质
CN102826047B (zh) 一种利用汽车触摸屏操控智能手机的方法及系统
CN110278205B (zh) 蓝牙音箱底座及其控制方法和系统
CN108882211B (zh) 一种tws耳机程序升级的方法、系统及tws耳机
US20040147282A1 (en) Electronic apparatus having a wireless communication device communicating with at least two device
CN107264447B (zh) 车辆内语音识别控制方法、系统及装置
CN103957311A (zh) 一种方向盘控制器及其控制方法
CN205901877U (zh) 一种车载安卓手机连接装置
CN103546422B (zh) 一种车载屏幕复用系统及其应用方法和多媒体互动系统
WO2019062538A1 (zh) 一种车载智能WiFi麦克风及其音频延时处理方法
WO2013000213A1 (zh) 一种音频数据的处理方法和设备
CN104890596A (zh) 一种实现多屏交互功能的车载导航系统及其实现方法
CN201869345U (zh) 可接入互联网的车载音响
JP2019185771A (ja) ブルートゥーススピーカーデータ処理の方法、装置及びブルートゥーススピーカー
CN103630144A (zh) 一种汽车声控导航装置及方法
CN204286455U (zh) 一种基于汽车车屏显示装置的升级导航系统
CN108877799A (zh) 一种语音控制装置及方法
CN102868471A (zh) 普通电台和网络电台统一展现的系统及实现方法
CN103813421A (zh) 一种智能移动终端节电方法及智能移动终端
CN109995475B (zh) 一种智能终端的控制方法、装置、存储介质及电子设备
US20170118580A1 (en) Processing apparatus, vehicular system and method for processing audio data
CN203423731U (zh) 一种车联网中实时数据传输系统
CN203798362U (zh) 一种汽车声控导航装置
CN109733293A (zh) 一种支持语音识别的新型车载智能终端装置
CN204775053U (zh) 一种实现多屏交互功能的车载导航系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190927