CN118298858A - 基于乘客和驾驶员的交互控制方法、装置及车载系统 - Google Patents
基于乘客和驾驶员的交互控制方法、装置及车载系统 Download PDFInfo
- Publication number
- CN118298858A CN118298858A CN202310006208.3A CN202310006208A CN118298858A CN 118298858 A CN118298858 A CN 118298858A CN 202310006208 A CN202310006208 A CN 202310006208A CN 118298858 A CN118298858 A CN 118298858A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- passenger
- information
- voice
- driving scene
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 59
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 43
- 238000004891 communication Methods 0.000 claims abstract description 74
- 230000003993 interaction Effects 0.000 claims description 20
- 230000008859 change Effects 0.000 claims description 11
- 230000004044 response Effects 0.000 claims description 5
- 230000008569 process Effects 0.000 abstract description 12
- 230000006870 function Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 5
- 238000004590 computer program Methods 0.000 description 3
- 239000012141 concentrate Substances 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000007306 functionalization reaction Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000011282 treatment Methods 0.000 description 1
Abstract
本公开涉及一种基于乘客和驾驶员的交互控制方法、装置及车载系统。基于乘客和驾驶员的交互控制方法,包括如下步骤:在确定乘客发出语音沟通意向时,获取并根据所述车辆驾驶信息确定车辆驾驶场景;若车辆驾驶场景为复杂驾驶场景,获取乘客语音信息并录制;在车辆驾驶场景从所述复杂驾驶场景转换为常规驾驶场景,且乘客无语音沟通意向时,控制播放器播放所述乘客语音信息。该交互控制方法具有能够防止行车过程中,复杂驾驶场景下乘客和驾驶员之间的语音信息遗漏,提高沟通可靠性,提高行车安全性等优点。
Description
技术领域
本公开涉及车载设备控制技术领域,特别是涉及一种基于乘客和驾驶员的交互控制方法、装置及车载系统。
背景技术
在一般的驾驶情景下,驾驶员和乘客之间是可以随时进行沟通交流的,但是,若当前驾驶情况比较复杂,驾驶员需要专注于车辆操控就无法分神去听取周围乘客的讲话内容;若驾驶员试图听清乘客的讲话内容,注意力不够集中则可能导致意外发生,行车安全性较低。因此,在复杂驾驶场景中,乘客和驾驶员之间会存在沟通信息遗漏,以及行车安全性较低等问题。
发明内容
为克服相关技术中存在的问题,本公开提供了一种基于乘客和驾驶员的交互控制方法、装置及车载系统,该基于乘客和驾驶员的交互控制方法,具有防止行车过程中复杂驾驶场景下乘客和驾驶员之间的语音信息遗漏,提高沟通可靠性,提高行车安全性等优点。
根据本公开实施例的第一方面,提供了一种基于乘客和驾驶员的交互控制方法,应用于车载系统,所述车载系统包括:处理器、与所述处理器电连接的驾驶信息采集装置、语音采集装置和播放器;所述驾驶信息采集装置用于采集车辆驾驶信息并传输至所述处理器,所述语音采集装置用于采集乘客语音信息并传输至所述处理器;所述播放器用于接收所述处理器传输的控制信号,并根据所述控制信号播放所述乘客语音信息;
基于乘客和驾驶员的交互控制方法,包括如下步骤:
在确定乘客发出语音沟通意向时,获取并根据所述车辆驾驶信息确定车辆驾驶场景;
若车辆驾驶场景为复杂驾驶场景,获取乘客语音信息并录制;
在车辆驾驶场景从所述复杂驾驶场景转换为常规驾驶场景,且乘客无语音沟通意向时,控制播放器播放所述乘客语音信息。
根据本公开实施例的第二方面,提供了一种基于乘客和驾驶员的交互控制装置,应用于车载系统,包括:
场景确定模块,用于在确定乘客发出语音沟通意向时,获取并根据所述车辆驾驶信息确定车辆驾驶场景;
语音录制模块,用于若车辆驾驶场景为复杂驾驶场景,获取乘客语音信息并录制;
语音播放模块,用于在车辆驾驶场景从所述复杂驾驶场景转换为常规驾驶场景,且乘客无语音沟通意向时,控制播放器播放所述乘客语音信息。
根据本公开实施例的第三方面,提供了一种载系统,包括:车载中控设备、与所述车载中控设备电连接的驾驶信息采集装置、语音采集装置和播放器;
所述驾驶信息采集装置用于采集车辆驾驶信息并传输至所述车载中控设备;
所述语音采集装置用于采集乘客语音信息并传输至所述车载中控设备;
所述车载中控设备在确定乘客发出语音沟通意向时,获取并根据所述车辆驾驶信息确定车辆驾驶场景;若车辆驾驶场景为复杂驾驶场景,通过所述语音采集装置获取乘客语音信息并录制;在车辆驾驶场景从所述复杂驾驶场景转换为常规驾驶场景,且乘客无语音沟通意向时,控制所述播放器播放所述乘客语音信息;
所述播放器用于接收所述车载中控设备传输的控制信号,并根据所述控制信号播放所述乘客语音信息。
本公开上述实施例中的技术方案,通过语音采集装置实时采集乘客语音信息,在确定乘客发出语音沟通意向时,根据车辆驾驶信息确定车辆驾驶场景,若车辆驾驶场景为复杂驾驶场景时获取乘客语音信息并录制,以便于在从复杂驾驶场景切换回常规驾驶场景且乘客无语音沟通意向时可以播放乘客语音信息给驾驶员听,从而防止行车过程中复杂驾驶场景下乘客和驾驶员之间的语音信息遗漏,提高沟通可靠性,提高行车安全性。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。为了更好地理解和实施,下面结合附图详细说明本公开。
附图说明
图1为本公开一个实施例示出的乘客和驾驶员之间直接交流的场景示意图;
图2为本公开一个实施例示出的车载系统的结构示意图;
图3为本公开一个实施例示出的基于乘客和驾驶员的交互控制方法的流程示意图;
图4为本公开一个实施例示出的驾驶场景切换时乘客和驾驶员之间的录播沟通示意图;
图5为本公开一个实施例示出的交互控制方法的步骤S3的流程示意图;
图6为本公开一个实施例示出的交互控制方法的流程图;
图7为本公开一个实施例示出的交互控制装置的结构示意图。
附图标号说明:1、车载中控设备;2、驾驶信息采集装置;3、语音采集装置;4、播放器。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
在本公开使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本公开。在本公开和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本公开可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本公开范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”/“若”可以被解释成为“在……时”或“当……时”或“响应于确定”。
请参阅图1,在一般的车载系统中,未设置有用于对乘客语音进行录播的装置,驾驶员和乘客之间是可以进行直接沟通交流的。但是,如果当前驾驶情况比较复杂,驾驶员需要专注于车辆操控就无法分神去听取周围乘客的讲话内容,存在沟通信息遗漏的问题;若驾驶员试图听清乘客的讲话内容,注意力不够集中则可能导致意外发生,行车安全性较低。
基于上述问题,本公开提供了一种基于乘客和驾驶员的交互控制方法、装置及车载系统。该基于乘客和驾驶员的交互控制方法,具有防止行车过程中复杂驾驶场景下乘客和驾驶员之间的语音信息遗漏,提高沟通可靠性,提高行车安全性等优点。
根据本公开实施例的第一方面,公开了一种基于乘客和驾驶员的交互控制方法,应用于车载系统。
请参阅图2,图2为本公开一个实施例示出的车载系统的结构示意图。
车载系统包括:车载中控设备1、与所述车载中控设备1电连接的驾驶信息采集装置2、语音采集装置3和播放器4;所述驾驶信息采集装置2用于采集车辆驾驶信息并传输至所述车载中控设备1,所述语音采集装置3用于采集乘客语音信息并传输至所述车载中控设备1;所述播放器4用于接收所述车载中控设备1传输的控制信号,并根据所述控制信号播放所述乘客语音信息。
车载中控设备1可为汽车车机、智能电脑、智能手机、交互平板等多种形式的智能设备。
车载系统可以为汽车车载信息娱乐系统(In-Vehicle Infotainment,简称IVI系统),是基于车身操控总系统和互联网服务而形成的车载综合信息处理系统,通过专门的车载处理器和操作系统来对整个车载电控信息娱乐设备进行协调和控制的一套系统,整个系统对提高汽车的舒适性,安全性,增强汽车的智能化和功能化起到重要的积极作用。
请参阅图3和图4,图3为本公开一个实施例示出的基于乘客和驾驶员的交互控制方法的流程示意图;图4为本公开一个实施例示出的驾驶场景切换时乘客和驾驶员之间的录播沟通示意图。
基于乘客和驾驶员的交互控制方法,应用于车载系统,并通过车载系统的各个装置实现。
基于乘客和驾驶员的交互控制方法,包括如下步骤:
S1:在确定乘客发出语音沟通意向时,获取并根据所述车辆驾驶信息确定车辆驾驶场景。
在行车过程中,乘客和驾驶员之间不存在交流沟通意向时,驾驶员可以专注于车辆驾驶操控,在车辆驾驶场景处于复杂驾驶场景时,通常来说驾驶员很少会主动与乘客进行语音交谈,但是此时若乘客希望与驾驶员进行语音交谈,则有可能会让驾驶员分心,导致驾驶员注意力不够集中。因此,本实施例中,在确定乘客发出语音沟通意向时,才通过驾驶信息采集装置获取车辆驾驶信息,进而根据所述车辆驾驶信息确定车辆驾驶场景。
其中,驾驶信息采集装置可以包括但不限于:安装于汽车内部或汽车外部的各类检测仪表,和/或传感器,和/或摄像头等装置。
在一个可选的实施例中,所述确定乘客发出语音沟通意向,包括:
响应于通过所述语音采集装置采集到乘客语音信息,确定乘客发出语音沟通意向,或者,响应于接收乘客输入的语音沟通请求,确定乘客发出语音沟通意向。
所述语音采集装置包括若干麦克风,各个所述麦克风分别设置于车载座位上或设置于各个车载座位旁的车身上,用于对车载座位上的乘客的乘客语音信息进行实时采集,只要乘客讲话或发出声音,语音采集装置都可以采集到。
可选的,所述语音采集装置可以包括但不限于:第一麦克风、第二麦克风、第三麦克风和第四麦克风;所述第一麦克风设置于副驾座位上,用于对副驾乘客的语音信息进行采集,所述第二麦克风设置于后排左侧座位,用于对后排左侧乘客的语音信息进行采集,所述第三麦克风设置于后排中部座位,用于对后排中部乘客的语音信息进行采集,所述第四麦克风设置于后排右侧座位,用于对后排右侧乘客的语音信息进行采集。
通常情况下,车厢中除了乘客语音信息、驾驶员语音信息之外,还有可能存在广播或其他的噪音。在仅需要获得乘客语音信息的情况下,为了提高乘客语音信息的信噪比,语音采集装置在获取乘客语音信息后还对乘客语音信息进行滤波降噪等处理,以获得较为纯净的清晰的对应座位上的乘客的语音信息。
在一个可选的实施例中,还可以在汽车的各个乘客座位上设置有与车载中控设备电连接的语音按键,当乘客希望与驾驶员进行语音沟通时,则可以按下语音按键向驾驶员发出语音沟通请求。另外,若乘客的智能移动设备上安装有可与车载中控设备进行网络通讯的应用程序时,乘客也可以在智能移动设备上通过应用程序的对应操作向驾驶员发出语音沟通请求。
在一个可选的实施例中,所述车辆驾驶信息包括以下信息中的一种或多种:
转向灯开启信息,方向盘转动信息,车身与周围障碍物距离信息,路况信息,天气信息,汽车操控系统告警信息以及车速变化信息等信息。
其中,转向灯开启信息,方向盘转动信息,车速变化信息,汽车操控系统告警信息可以通过车身操控总系统获取。车身与周围障碍物距离信息,路况信息,天气信息等车身外部信息可以通过对应的传感器或检测装置获得。
所述根据车辆驾驶信息确定车辆驾驶场景,包括:若车辆驾驶信息出现以下情况的至少一种时,判定为复杂驾驶场景:
转向灯开启,通过道路关卡,第一预设时间阈值内方向盘的转动角度超过预设角度阈值,车身与周围障碍物的距离小于预设距离阈值,路面出现坑洼和上下坡,当前天气不利于车辆驾驶,当前车速变化超过预设车速变化阈值。
其中,第一预设时间阈值、预设角度阈值、预设距离阈值、以及预设车速变化阈值均可以由发明人根据业务经验或方案需求确定对应的具体数值,本实施例中不做限定。
例如,5秒内方向盘的转动角度超过60度时,可判定为复杂驾驶场景;车身与周围障碍物的距离小于1米时,可判定为复杂驾驶场景;通过ETC通道或收费站时,可判定为复杂驾驶场景。
S2:若车辆驾驶场景为复杂驾驶场景,获取乘客语音信息并录制。
所述若车辆驾驶场景为复杂驾驶场景,获取乘客语音信息并录制,包括:
若车辆驾驶场景为复杂驾驶场景,获取乘客语音信息并录制,在乘客停止发出语音信息时开始计时,在第二预设时间阈值后若依旧未检测到乘客语音信息则停止录制。
本实施例中,可以通过各个乘客座位上的麦克风对对应乘客的语音进行录制,可选的,还可以在录制之后对乘客语音信息进行滤波降噪等处理。
S3:在车辆驾驶场景从所述复杂驾驶场景转换为常规驾驶场景,且乘客无语音沟通意向时,控制播放器播放所述乘客语音信息。
请参阅图5,图5为本公开一个实施例示出的交互控制方法的步骤S3的流程示意图。
S31:判断车辆驾驶场景是否从复杂驾驶场景转换为常规驾驶场景。
若车辆驾驶信息未出现以下情况时,判定汽车退出复杂驾驶场景,转换为常规驾驶场景:
转向灯开启,通过道路关卡,第一预设时间阈值内方向盘的转动角度超过预设角度阈值,车身与周围障碍物的距离小于预设距离阈值,路面出现坑洼和上下坡,当前天气不利于车辆驾驶,当前车速变化超过预设车速变化阈值。
S32:若车辆驾驶场景从复杂驾驶场景转换为常规驾驶场景,然后判断乘客是否正在进行语音沟通或发出语音沟通意向。
S33:在乘客未进行语音沟通且未发出语音沟通请求时,控制所述播放器向驾驶员播放所述乘客语音信息。
本实施例中,若语音采集装置未采集到乘客语音信息,则说明当前乘客未正在进行语音沟通。若车载中控设备未接收到乘客发出的语音沟通请求,则判定乘客未发出语音沟通请求。
若驾驶座位上安装有用于采集驾驶员语音信息的麦克风,则在乘客和/或驾驶员未进行语音沟通且未发出语音沟通请求时,控制所述播放器向驾驶员播放所述乘客语音信息,从而提高车载中控设备的智能化程度。
在一个可选的实施例中,所述语音采集装置包括若干麦克风,各个所述麦克风分别对对应车载座位上,用于对乘客语音信息进行采集;播放器为设置于驾驶座位上或者朝向驾驶座位的喇叭或音箱,用于向驾驶员播放乘客语音信息。
所述控制播放器播放所述乘客语音信息时,按照预设播放顺序向驾驶员播放各个车载座位上乘客的所述乘客语音信息。其中,预设播放顺序可以为副驾、后排左侧、后排中部、后排右侧,或其他播放顺序。若汽车上设置有较多数量的座位时,还可以将各个座位进行编号后分组,并根据分组后的预设播放顺序进行播放。
在一个可选的实施例中,所述控制播放器播放所述乘客语音信息时,若所述语音采集装置采集到乘客或驾驶员的语音信息时,则停止播放所述乘客语音信息并记录语音信息播放节点,待乘客或驾驶员说话完毕后根据所述语音信息播放节点确定对应的目标节点,根据所述目标节点继续播放所述乘客语音信息。其中,目标节点可以与已记录的语音信息播放节点对应,或者目标节点位于已记录的语音信息播放节点之前的语音段落节点,从而可以更好的防止信息遗漏。
在以上实施例的基础上,所述车载系统设置有智能交互模式和常规交互模式,智能交互模式可以为可以根据乘客沟通意向或车辆驾驶信息确定是否录播的智能化程度较高的交互模式;常规交互模式为未做任何处理的自然状态下的交互模式。
所述在确定乘客发出语音沟通意向时,获取并根据所述车辆驾驶信息确定车辆驾驶场景的步骤之前,还可以包括步骤:
响应于智能交互模式的开启操作,判断乘客是否发出语音沟通意向。
一般的,可以设定智能交互模式在车载中控设备启动时自动开启,或者在用户输入智能交互模式开启操作时开启。
上述实施例中可以较好的防止乘客语音信息的遗漏,而在行车过程中也可能由于环境干扰等情况导致驾驶员语音信息的遗漏。因此,车载系统还可以包括设置于驾驶座位上的麦克风,以及设置于乘客座位上的播放器。驾驶座位上的麦克风用于对驾驶员的语音信息进行录制,乘客座位上的播放器用于在适当时机播放驾驶员的语音信息。
例如,当车厢内出现较多噪音乘客无法听清驾驶员讲话时,可以将驾驶员的语音进行录制,并在车厢噪音较小时播放驾驶员语音信息,从而有助于提高乘客和驾驶员之间沟通的可靠性,提升乘客体验。
如图6所示,整个交互控制方法的流程可以为:当语音采集装置有音频输入时说明乘客在说话,此时根据车辆驾驶信息判定是否处于复杂驾驶场景,若不处于复杂驾驶场景不做处理,乘客和驾驶员之间可以自由语音沟通交流,若处于复杂驾驶场景则录制音频文件,并在退出复杂驾驶场景时控制播放器播放音频文件,从而完成整个交互控制流程。
本公开上述实施例中的技术方案,通过语音采集装置实时采集乘客语音信息,在确定乘客发出语音沟通意向时,根据车辆驾驶信息确定车辆驾驶场景,若车辆驾驶场景为复杂驾驶场景时获取乘客语音信息并录制,以便于在从复杂驾驶场景切换回常规驾驶场景且乘客无语音沟通意向时可以播放乘客语音信息给驾驶员听,从而防止行车过程中复杂驾驶场景下乘客和驾驶员之间的语音信息遗漏,提高沟通可靠性,提高行车安全性。
根据本公开实施例的第二方面,公开了一种基于乘客和驾驶员的交互控制装置,该装置可以用于执行本公开对应实施例基于乘客和驾驶员的交互控制方法,并具备相应的功能和有益效果。对于本公开基于乘客和驾驶员的交互控制装置实施例中未披露的细节,请参照本公开上述实施例中基于乘客和驾驶员的交互控制方法的内容。
如图7所示,基于乘客和驾驶员的交互控制装置700,包括:
场景确定模块701,用于在确定乘客发出语音沟通意向时,获取并根据所述车辆驾驶信息确定车辆驾驶场景;
语音录制模块702,用于若车辆驾驶场景为复杂驾驶场景,获取乘客语音信息并录制;
语音播放模块703,用于在车辆驾驶场景从所述复杂驾驶场景转换为常规驾驶场景,且乘客无语音沟通意向时,控制播放器播放所述乘客语音信息。
本实施例的基于乘客和驾驶员的交互控制装置,通过语音采集装置实时采集乘客语音信息,在确定乘客发出语音沟通意向时,根据车辆驾驶信息确定车辆驾驶场景,若车辆驾驶场景为复杂驾驶场景时获取乘客语音信息并录制,以便于在从复杂驾驶场景切换回常规驾驶场景且乘客无语音沟通意向时可以播放乘客语音信息给驾驶员听,从而防止行车过程中复杂驾驶场景下乘客和驾驶员之间的语音信息遗漏,提高沟通可靠性,提高行车安全性。
值得注意的是,上述实施例提供的基于乘客和驾驶员的交互控制装置在执行上述基于乘客和驾驶员的交互控制方法时,仅以上述各功能模块或功能单元的划分进行举例说明,在实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的基于乘客和驾驶员的交互控制装置与基于乘客和驾驶员的交互控制方法实施例属于同一构思,其体现过程详见实施例,这里不再赘述。
根据本公开实施例的第三方面,提供了一种车载系统。
如图2所示,车载系统包括:车载中控设备1、与所述车载中控设备1电连接的驾驶信息采集装置2、语音采集装置3和播放器4。
所述驾驶信息采集装置2用于采集车辆驾驶信息并传输至所述车载中控设备1;
所述语音采集装置3用于采集乘客语音信息并传输至所述车载中控设备1;
所述车载中控设备1在确定乘客发出语音沟通意向时,获取并根据所述车辆驾驶信息确定车辆驾驶场景;若车辆驾驶场景为复杂驾驶场景,通过所述语音采集装置3获取乘客语音信息并录制;在车辆驾驶场景从所述复杂驾驶场景转换为常规驾驶场景,且乘客无语音沟通意向时,控制所述播放器4播放所述乘客语音信息;
所述播放器4用于接收所述车载中控设备1传输的控制信号,并根据所述控制信号播放所述乘客语音信息。
驾驶信息采集装置2可以包括但不限于:安装于汽车内部或汽车外部的各类检测仪表,和/或传感器,和/或摄像头等装置。
所述语音采集装置3可以包括但不限于:第一麦克风、第二麦克风、第三麦克风和第四麦克风;所述第一麦克风设置于副驾座位上,用于对副驾乘客的语音信息进行采集,所述第二麦克风设置于后排左侧座位,用于对后排左侧乘客的语音信息进行采集,所述第三麦克风设置于后排中部座位,用于对后排中部乘客的语音信息进行采集,所述第四麦克风设置于后排右侧座位,用于对后排右侧乘客的语音信息进行采集。
所述播放器4包括但不限于:安装于乘客座位上的播放器,和/或,安装于驾驶座位上的播放器。
其中,车载中控设备包括至少一个处理器和至少一个存储器;所述存储器与所述处理器电连接;其中,所述存储器存有计算机程序,所述计算机程序适于由所述处理器加载并执行如上实施例公开的基于乘客和驾驶员的交互控制方法。
车载中控设备可为汽车车机、智能电脑、智能手机、交互平板、笔记本电脑等智能设备。
车载中控设备包括至少一个处理器、至少一个存储器以及至少一个通信总线。其中,通信总线用于实现这些组件之间的连接通信,存储器存有计算机程序,计算机程序适于由处理器加载并执行如上任意一项实施例记载的基于乘客和驾驶员的交互控制方法。
其中,处理器可以包括一个或多个处理核心。处理器利用各种接口和线路连接整个智能设备内的各个部分,通过运行或执行存储在处理器内的指令、程序、代码集或指令集,以及调用存储在存储器内的数据,执行智能设备的各种功能和处理数据。
其中,存储器可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。可选的,该存储器包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器可用于存储指令、程序、代码、代码集或指令集。存储器可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现上述各个方法实施例的指令等;存储数据区可存储上面各个方法实施例中涉及到的数据等。作为一种计算机存储介质的存储器中可以包括操作系统、网络通信模块、用户接口模块以及车载中控设备的操作应用程序。
处理器可以用于调用存储器中存储的智能设备的操作应用程序,并执行上述实施例中基于乘客和驾驶员的交互控制方法中的相关操作。
上述车载中控设备可以用于执行本公开对应实施例基于乘客和驾驶员的交互控制方法的内容,并具备相应的功能和有益效果。
根据本公开实施例的第四方面,提供一种计算机可读存储介质,其上存储有计算机程序,计算机程序适于由处理器加载并执行如上实施例记载的基于乘客和驾驶员的交互控制方法的相关操作,且具备相应的功能和有益效果。
其中,计算机可读存储介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机可读存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读存储介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
注意,上述仅为本公开的较佳实施例及所运用技术原理。本领域技术人员会理解,本公开不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本公开的保护范围。因此,虽然通过以上实施例对本公开进行了较为详细的说明,但是本公开不仅仅限于以上实施例,在不脱离本公开构思的情况下,还可以包括更多其他等效实施例,而本公开的范围由所附的权利要求范围决定。
Claims (10)
1.一种基于乘客和驾驶员的交互控制方法,其特征在于,应用于车载系统,所述车载系统包括:车载中控设备、与所述车载中控设备电连接的驾驶信息采集装置、语音采集装置和播放器;所述驾驶信息采集装置用于采集车辆驾驶信息并传输至所述车载中控设备,所述语音采集装置用于采集乘客语音信息并传输至所述车载中控设备;所述播放器用于接收所述车载中控设备传输的控制信号,并根据所述控制信号播放所述乘客语音信息;
基于乘客和驾驶员的交互控制方法,包括如下步骤:
在确定乘客发出语音沟通意向时,获取并根据所述车辆驾驶信息确定车辆驾驶场景;
若车辆驾驶场景为复杂驾驶场景,获取乘客语音信息并录制;
在车辆驾驶场景从所述复杂驾驶场景转换为常规驾驶场景,且乘客无语音沟通意向时,控制播放器播放所述乘客语音信息。
2.根据权利要求1所述的基于乘客和驾驶员的交互控制方法,其特征在于,所述确定乘客发出语音沟通意向,包括:
响应于通过所述语音采集装置采集到乘客语音信息,确定乘客发出语音沟通意向,或者,
响应于接收乘客输入的语音沟通请求,确定乘客发出语音沟通意向。
3.根据权利要求1所述的基于乘客和驾驶员的交互控制方法,其特征在于,所述车辆驾驶信息包括以下信息中的一种或多种:
转向灯开启信息,方向盘转动信息,车身与周围障碍物距离信息,路况信息,天气信息,以及车速变化信息;
所述根据车辆驾驶信息确定车辆驾驶场景,包括:若车辆驾驶信息出现以下情况的至少一种时,判定为复杂驾驶场景:
转向灯开启,通过道路关卡,第一预设时间阈值内方向盘的转动角度超过预设角度阈值,车身与周围障碍物的距离小于预设距离阈值,路面出现坑洼和上下坡,当前天气不利于车辆驾驶,当前车速变化超过预设车速变化阈值。
4.根据权利要求1所述的基于乘客和驾驶员的交互控制方法,其特征在于,所述在车辆驾驶场景从所述复杂驾驶场景转换为常规驾驶场景,且乘客无语音沟通意向时,控制播放器播放所述乘客语音信息,包括:
判断车辆驾驶场景是否从复杂驾驶场景转换为常规驾驶场景;
若车辆驾驶场景从复杂驾驶场景转换为常规驾驶场景,然后判断乘客是否正在进行语音沟通或发出语音沟通意向;
在乘客未进行语音沟通且未发出语音沟通请求时,控制所述播放器向驾驶员播放所述乘客语音信息。
5.根据权利要求1所述的基于乘客和驾驶员的交互控制方法,其特征在于,所述语音采集装置包括若干麦克风,各个所述麦克风分别对对应车载座位上的乘客的语音信息进行采集;
所述控制播放器播放所述乘客语音信息时,按照预设播放顺序向驾驶员播放各个车载座位上乘客的所述乘客语音信息。
6.根据权利要求1所述的基于乘客和驾驶员的交互控制方法,其特征在于,所述控制播放器播放所述乘客语音信息时,若所述语音采集装置采集到乘客或驾驶员的语音信息时,则停止播放所述乘客语音信息并记录语音信息播放节点,待乘客或驾驶员说话完毕后根据所述语音信息播放节点确定对应的目标节点,根据所述目标节点继续播放所述乘客语音信息。
7.根据权利要求1所述的基于乘客和驾驶员的交互控制方法,其特征在于,所述若车辆驾驶场景为复杂驾驶场景,获取乘客语音信息并录制,包括:
若车辆驾驶场景为复杂驾驶场景,获取乘客语音信息并录制;
在乘客停止发出语音信息时开始计时,在第二预设时间阈值后若依旧未检测到乘客语音信息则停止录制。
8.根据权利要求1至7任意一项所述的基于乘客和驾驶员的交互控制方法,其特征在于,所述车载系统设置有智能交互模式和常规交互模式;
所述在确定乘客发出语音沟通意向时,获取并根据所述车辆驾驶信息确定车辆驾驶场景的步骤之前,还包括:
响应于智能交互模式的开启操作,判断乘客是否发出语音沟通意向。
9.一种基于乘客和驾驶员的交互控制装置,其特征在于,应用于车载系统,包括:
场景确定模块,用于在确定乘客发出语音沟通意向时,获取并根据所述车辆驾驶信息确定车辆驾驶场景;
语音录制模块,用于若车辆驾驶场景为复杂驾驶场景,获取乘客语音信息并录制;
语音播放模块,用于在车辆驾驶场景从所述复杂驾驶场景转换为常规驾驶场景,且乘客无语音沟通意向时,控制播放器播放所述乘客语音信息。
10.一种车载系统,其特征在于,包括:车载中控设备、与所述车载中控设备电连接的驾驶信息采集装置、语音采集装置和播放器;
所述驾驶信息采集装置用于采集车辆驾驶信息并传输至所述车载中控设备;
所述语音采集装置用于采集乘客语音信息并传输至所述车载中控设备;
所述车载中控设备在确定乘客发出语音沟通意向时,获取并根据所述车辆驾驶信息确定车辆驾驶场景;若车辆驾驶场景为复杂驾驶场景,通过所述语音采集装置获取乘客语音信息并录制;在车辆驾驶场景从所述复杂驾驶场景转换为常规驾驶场景,且乘客无语音沟通意向时,控制所述播放器播放所述乘客语音信息;
所述播放器用于接收所述车载中控设备传输的控制信号,并根据所述控制信号播放所述乘客语音信息。
Publications (1)
Publication Number | Publication Date |
---|---|
CN118298858A true CN118298858A (zh) | 2024-07-05 |
Family
ID=
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220277744A1 (en) | In-vehicle voice command control | |
CN112397084B (zh) | 自适应调整多媒体音量方法、车载终端及计算机存储介质 | |
CN102774321B (zh) | 一种车载系统及其声音控制方法 | |
CN113539260A (zh) | 一种基于车辆的语音交流方法和装置 | |
CN112437383B (zh) | 多音源调整方法、装置、车辆和存储介质 | |
WO2020120754A1 (en) | Audio processing device, audio processing method and computer program thereof | |
CN109240638A (zh) | 用于车辆的音频处理方法及装置 | |
US11854541B2 (en) | Dynamic microphone system for autonomous vehicles | |
US7460919B2 (en) | Music contents reproducing apparatus | |
CN113055783A (zh) | 车辆音频的输出方法、装置、电子设备和存储介质 | |
US20180261200A1 (en) | In-vehicle noise control system and control method thereof | |
CN110366852B (zh) | 信息处理设备、信息处理方法和记录介质 | |
CN106156036B (zh) | 一种车载音频处理方法及车载设备 | |
CN108933636A (zh) | 一种收音机遇干扰自动静音方法及装置 | |
US20160134968A1 (en) | Vehicle multimedia system and method | |
CN113053402B (zh) | 一种语音处理方法、装置和车辆 | |
CN112312280B (zh) | 一种车内声音播放方法及装置 | |
CN118298858A (zh) | 基于乘客和驾驶员的交互控制方法、装置及车载系统 | |
US11919446B2 (en) | Apparatus and method for generating sound of electric vehicle | |
US20180367902A1 (en) | Acoustic Reproduction of a Digital Audio Medium in a Motor Vehicle | |
CN112003666B (zh) | 车载收音机控制方法、装置、设备及存储介质 | |
CN115297403A (zh) | 一种车内音频场景自适应调整方法及音频系统 | |
US7873424B1 (en) | System and method for optimizing digital audio playback | |
KR20120030754A (ko) | 차량용 멀티 사운드 시스템 및 이를 이용한 재생 방법 | |
EP3886027A1 (en) | Assistance system using interactional awareness for a vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication |