CN115635978A - 一种车辆人机交互方法、装置和车辆 - Google Patents
一种车辆人机交互方法、装置和车辆 Download PDFInfo
- Publication number
- CN115635978A CN115635978A CN202211401650.8A CN202211401650A CN115635978A CN 115635978 A CN115635978 A CN 115635978A CN 202211401650 A CN202211401650 A CN 202211401650A CN 115635978 A CN115635978 A CN 115635978A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- voice
- information
- navigation
- preset
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Navigation (AREA)
Abstract
本申请提供了一种车辆人机交互方法、装置和车辆,属于车辆技术领域。本申请实施例通过获取车辆周围的目标人物,并在检测到目标人物为指定人员时,自动启动车辆,并播放预设的提示语音;在检测到主驾驶位的入座信号时,播放预设的导航提示语音,并在用户下达前往导航目的地的语音导航指令后,自动启动车载导航系统并获取到达导航目的地的路况信息,进而基于路况信息和此时车辆的参数信息,生成并播放语音提示信息,以告知用户当前车辆的参数信息和路况信息。本申请实施例能够有效减少用户操作,提高交互效率,同时对用户进行合理适时地引导,更加智能和人性化,显著提升用户的交互体验。
Description
技术领域
本申请涉及车辆技术领域,特别是涉及一种车辆人机交互方法、装置和车辆。
背景技术
随着汽车工业的快速发展和人们生活水平的不断提高,,汽车已快速进入普通家庭。随着汽车的日益普及和广泛使用,汽车的舒适性和安全性成为用户越来越关注的问题。车载终端为用户提供了很多功能,比如远程解锁、车载导航等。
相关技术中,用户使用车载终端的某一功能时,常常是通过用户主动触发的方式实现,如手动启动车辆或者通过显示屏上的按键执行相应的操作,这种交互方式操作繁琐,效率低下,同时车辆缺乏主动且有效的引导,不够智能和人性化。
发明内容
本申请提供一种车辆人机交互方法、装置和车辆,以解决现有的交互方式操作繁琐,效率低下,同时车辆缺乏主动且有效的引导,不够智能和人性化的问题。
为了解决上述问题,本申请采用了以下的技术方案:
第一方面,本申请实施例提供了车辆人机交互方法,所述方法包括:
在车辆处于智能交互模式的情况下,获取所述车辆周围的目标人物;
在检测到所述目标人物为指定人员时,启动所述车辆并播放预设的提示语音;
在检测到主驾驶位的入座信号时,获取所述车辆的当前参数信息并播放预设的导航提示语音;
响应于针对所述导航提示语音返回的包含导航目的地的语音导航指令,启动车载导航系统并获取到达所述导航目的地的路况信息;;
基于所述当前参数信息和所述路况信息,生成语音提示信息,并播放所述语音提示信息。
在本申请一实施例中,在检测到所述目标人物为指定人员时,启动所述车辆并播放预设的提示语音之后,所述方法还包括:
获取驾驶室内的温度信息;
在所述温度信息小于第一温度阈值时,启动空调系统进行加热,并将空调的温度设置为第一预设温度,座椅的温度设置为第二预设温度;或,
在所述温度信息大于第二温度阈值时,启动所述空调系统进行降温,将所述空调的温度设置为第三预设温度,所述座椅的温度设置为第四预设温度。
在本申请一实施例中,获取到达所述导航目的地的路况信息,包括:
生成所述语音导航指令对应的指令文本,并将所述指令文本输入预设的语义识别模型,输出得到所述导航目的地;
获取从车辆所在位置到所述导航目的地的至少一个导航路线;
在所述至少一个导航路线中确定满足预设导航条件的最优路线;所述预设导航条件包括时间最短、红绿灯最少、步行最少和/或行驶距离最短;
将所述最优路线的路况信息,确定为到达所述导航目的地的路况信息。
在本申请一实施例中,所述检测到主驾驶位的入座信号之后,所述方法还包括:
获取所述车辆的档位状态,并播放所述档位状态对应的操作提示语音;不同的档位状态对应不同的操作提示语音;
在检测到当前车速大于车速阈值时,获取指定人员的图像信息;
基于所述图像信息,判断所述指定人员是否为疲劳驾驶;
在确定所述指定人员为疲劳驾驶时,播放预设的安全行驶提示语音。
在本申请一实施例中,获取所述车辆周围的目标人物之前,所述方法还包括:
响应于通过预设的按键触发的模式进入指令,进入智能交互模式,并播放预设的模式进入语音;
基于所述当前参数信息和所述路况信息,生成语音提示信息,并播放所述语音提示信息之后,所述方法还包括:
响应于通过所述按键触发的模式退出指令,退出所述智能交互模式,并播放预设的模式退出语音。
在本申请一实施例中,所述方法还包括:
建立与移动终端之间的通讯连接,并获取所述移动终端中的日程信息;
基于所述日程信息,生成日程提醒信息,并播放所述日程提醒信息。
在本申请一实施例中,获取所述车辆周围的目标人物之后,所述方法还包括:
提取所述目标人物的人脸图像;
将所述人脸图像与预先存储的指定人员的人脸图像进行对比,得到对比结果;
在所述对比结果为通过时,确定所述目标人物为所述指定人员。
在本申请一实施例中,所述方法还包括:
在所述对比结果为不通过时,确定所述目标人物为陌生人;
获取并存储所述陌生人的视频信息,并向预设终端发送提醒信息。
在本申请一实施例中,所述方法还包括:
响应于所述试驾员触发的包含车辆功能的语音介绍指令,播放所述车辆功能对应的功能介绍语音;不同的车辆功能对应不同的功能介绍语音。
第二方面,基于相同发明构思,本申请实施例提供了一种车辆人机交互装置,所述装置包括:
目标人物获取模块,用于获取所述车辆周围的目标人物;
提示模块,用于在检测到所述目标人物为指定人员时,启动所述车辆并播放预设的提示语音;
导航提示模块,用于在检测到主驾驶位的入座信号时,获取所述车辆的当前参数信息并播放预设的导航提示语音;
路况信息获取模块,用于响应于针对所述导航提示语音返回的包含导航目的地的语音导航指令,启动车载导航系统并获取到达所述导航目的地的路况信息;
路况提示模块,用于基于所述当前参数信息和所述路况信息,生成语音提示信息,并播放所述语音提示信息。
在本申请一实施例中,所述装置还包括:
温度信息获取模块,用于获取驾驶室内的温度信息;
加热模块,用于在所述温度信息小于第一温度阈值时,启动空调系统进行加热,并将空调的温度设置为第一预设温度,座椅的温度设置为第二预设温度;
降温模块,用于在所述温度信息大于第二温度阈值时,启动所述空调系统进行降温,将所述空调的温度设置为第三预设温度,所述座椅的温度设置为第四预设温度。
在本申请一实施例中,路况信息获取模块包括:
导航目的地输出子模块,用于生成所述语音导航指令对应的指令文本,并将所述指令文本输入预设的语义识别模型,输出得到所述导航目的地;
导航路线获取子模块,用于获取从车辆所在位置到所述导航目的地的至少一个导航路线;
最优路线确定子模块,用于在所述至少一个导航路线中确定满足预设导航条件的最优路线;所述预设导航条件包括时间最短、红绿灯最少、步行最少和/或行驶距离最短;
路况信息确定子模块,用于将所述最优路线的路况信息,确定为到达所述导航目的地的路况信息。
在本申请一实施例中,所述装置还包括:
操作提示模块,用于获取所述车辆的档位状态,并播放所述档位状态对应的操作提示语音;不同的档位状态对应不同的操作提示语音;
疲劳驾驶判断模块,用于在检测到当前车速大于车速阈值时,获取指定人员的图像信息,并基于所述图像信息,判断所述指定人员是否为疲劳驾驶;
安全行驶提示模块,用于在确定所述指定人员为疲劳驾驶时,播放预设的安全行驶提示语音。
在本申请一实施例中,所述装置还包括:
模式进入模块,用于获取所述车辆周围的目标人物之前,响应于通过预设的按键触发的模式进入指令,进入智能交互模式,并播放预设的模式进入语音;
模式退出模块,用于基于所述当前参数信息和所述路况信息,生成语音提示信息,并播放所述语音提示信息之后,响应于通过所述按键触发的模式退出指令,退出所述智能交互模式,并播放预设的模式退出语音。
在本申请一实施例中,所述装置还包括:
日程信息获取模块,用于建立与移动终端之间的通讯连接,并获取所述移动终端中的日程信息;
日程提醒信息播放模块,用于基于所述日程信息,生成日程提醒信息,并播放所述日程提醒信息。
在本申请一实施例中,所述装置还包括:
人脸图像提取模块,用于获取所述车辆周围的目标人物之后,提取所述目标人物的人脸图像;
对比模块,用于将所述人脸图像与预先存储的指定人员的人脸图像进行对比,得到对比结果;
指定人员确定模块,用于在所述对比结果为通过时,确定所述目标人物为所述指定人员。
在本申请一实施例中,所述装置还包括:
陌生人确定模块,用于在所述对比结果为不通过时,确定所述目标人物为陌生人;
提醒模块,用于获取并存储所述陌生人的视频信息,并向预设终端发送提醒信息。
在本申请一实施例中,所述装置还包括:
功能介绍模块,用于响应于包含车辆功能的语音介绍指令,播放所述车辆功能对应的功能介绍语音;不同的车辆功能对应不同的功能介绍语音。
第三方面,基于相同发明构思,本申请实施例提供了一种车辆,包括处理器和存储器,所述存储器存储有能够被所述处理器执行的机器可执行指令,所述处理器用于执行机器可执行指令,以实现本申请第一方面提出的车辆人机交互方法。
与现有技术相比,本申请包括以下优点:
本申请实施例提供的一种车辆人机交互方法,通过获取车辆周围的目标人物,并在检测到目标人物为指定人员时,无需指定人员操作即可自动启动车辆,并可以播放预设的提示语音;在检测到主驾驶位的入座信号时,播放预设的导航提示语音,并在用户下达前往导航目的地的语音导航指令后,自动启动车载导航系统并获取到达导航目的地的路况信息,进而基于路况信息和此时车辆的参数信息,生成并播放语音提示信息,以告知用户当前车辆的参数信息和路况信息。本申请实施例能够有效减少用户操作,提高交互效率,同时对用户进行合理适时地引导,更加智能和人性化,显著提升用户的交互体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请一实施例中一种车辆人机交互方法的步骤流程图。
图2是本申请一实施例中一种车辆人机交互装置的功能模块示意图。
图3是本申请一实施例中一种车辆的结构示意图。
附图标记:200-车辆人机交互装置;201-目标人物获取模块;202-提示模块;203-导航提示模块;204-路况信息获取模块;205-路况提示模块;300-车辆;301-处理器;302-存储器。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参照图1,示出了本申请一种车辆人机交互方法,该方法具体可以包括以下步骤:
S101:获取车辆周围的目标人物。
需要说明的是,本实施方式的执行主体可以是具有数据处理、网络通信以及程序运行功能的计算服务设备,或者具有上述功能的电子设备如行车电脑、车载电脑等,如ECU(Electronic Control Unit,电子控制单元)、BCM(Body Control Module,车身控制模块)、VCU(Vehicle Control Unit,整车控制器)等,本实施方式将以VCU作为执行主体进行说明,需要说的是,本实施方式不对车辆的执行主体做出具体限制。
在本实施方式中,用户可以通过触发预先配置的物理按键或者中控屏上配置的虚拟按键控制车辆进入智能交互模式。需要说明的是,车辆发动机的状态并不会影响智能交互模式关闭和开启,也就是说,车辆在智能交互模式下熄火,并不会退出智能交互模式。
在本实施方式中,当用户在智能交互模式下熄火后,VCU将会通过设置在车辆周围的摄像头获取车辆周围的目标人物的图像信息。具体而言,摄像头可以设置为四个,该四个摄像头可以分别设置在左前照灯、右前照灯、左后车灯和右后车灯内,也可以分别设置在前车牌、后车牌、左车门把手、右车门把手处,本实施方式不对摄像头的数量和安装位置做出具体限制。
在本实施方式中,基于获取的目标人物的图像信息,将对目标人物进行身份识别,并根据识别结果的不同,采用不同的处理策略。在具体实现中,为减轻用于身份识别的计算量,可以设置检测条件对目标人物的图像信息进行过滤,即仅对距离车辆在第一预设距离内且存在人脸的图像信息进行身份识别,以减少不必要的计算资源的消耗,其中,第一预设距离可以设置为5米。
S102:在检测到目标人物为指定人员时,启动车辆并播放预设的提示语音。
需要说明的是,可以根据不同的应用场景设置不同的指定人员。示例性的,在车辆日常使用场景,指定人员可以包括车主以及车主的关联人员,其中,关联人员指具有驾驶车辆权限的车主的亲朋好友,车主可以根据实际需要对关联人员进行设置;在车辆试驾场景,指定人员则包括试驾员。
在具体实现中,可以通过预先在车辆中存储指定人员的人脸图像,以实现对指定人员的身份验证。具体而言,在获取车辆周围的目标人物之后,将提取目标人物的人脸图像,并将人脸图像与预先存储的指定人员的人脸图像进行对比,以得到对比结果;在对比结果为通过时,确定目标人物为指定人员;在对比结果为不通过时,确定目标人物为陌生人。
在本实施方式中,在检测到目标人物为指定人员时,说明该指定人员已通过身份验证并存在驾驶车辆的意图,此时将自动启动车辆,进而无需指定人员手动开启车辆。为避免误启动车辆,可以在检测到指定人员距离车辆的距离小于第二预设距离时才自动启动车辆,其中,第二预设距离小于第一预设距离,如可以设置为2米。
在本实施方式中,在启动车辆的同时,将播放预设的提示语音,其中,提示语音可以根据不同的应用场景设置不同的提示语音。示例性的,在车辆日常使用场景,对应的指定人员为指定人员,此时提示语音可以用于提示指定人员进行车门解锁,如播放“车辆已启动,请指纹解锁车门”;在车辆试驾场景,对应的指定人员为试驾员,此时,提示语音可以是预设的欢迎语音,如可以播放“欢迎试驾某某款车”的欢迎语音。
在本实施方式中,为保证车辆在停车状态下的安全,在检测到目标人物为陌生人时,将会通过车辆周围的摄像头采集陌生人的视频信息并进行存储,同时向预设终端如指定人员的手机发送提醒信息,以向指定人员提醒车辆旁存在陌生人并同步现场视频画面。
在本实施方式中,在检测到陌生人在车辆周围的存在时长超过预设的时间阈值,或者检测到该陌生人对车辆进行了非法接触如敲击车辆等行为时,将会发送警告信息并进行强提醒,即在指定人员手机的用户界面强制弹出提醒信息,并震动提醒指定人员。以便用户可以在第一时间了解现场情况,采取相应措施,保证车辆安全。
S103:在检测到主驾驶位的入座信号时,获取车辆的当前参数信息并播放预设的导航提示语音。
在本实施方式中,当用户开启车门进入车辆并在主驾驶位入座后,可以通过设置在主驾驶位的座椅内的压力传感器对入座信号进行检测,如当压力传感器检测的压力值大于压力阈值时,将会把压力值转化为表征入座信号的电信号并发送给VCU,VCU在接受到该电信号后,确定指定人员已入座,将会播放预设的导航提示语音,如播放“主人,请问您要前往何处”的导航提示语音。
在本实施方式中,在播放预设的导航提示语音的同时,VCU将会获取车辆的当前参数信息,如当前的油量(或电量)、胎压、可续航里程、天气状况等信息。
S104:响应于针对导航提示语音返回的包含导航目的地的语音导航指令,启动车载导航系统并获取到达导航目的地的路况信息。
在本实施方式中,在车辆播放预设的导航提示语音之后,将会预设时间内等待指定人员发出对应的语音导航指令,在指定人员通过语音下达前往导航目的地的语音导航指令后,VCU将会控制车载导航系统启动,而无需指定人员在通过车载显示屏手动启动车载导航系统;同时VCU还将基于语音导航指令,通过语音识别技术获取到导航目的地,进而获取到达该导航目的地的路况信息。
S105:基于当前参数信息和路况信息,生成语音提示信息,并播放语音提示信息。
在本实施方式中,在VCU同时获取到当前参数信息和路况信息之后,将会按照预设的文本生成规则,生成相应的语音提示信息,并将该语音提示信息进行播放。
在具体实现中,可以通过车载语音系统对语音提示信息直接进行语音播报,也可以结合车载显示屏通过文字或者图像的方式进行直观展示,如通过列表的方式显示油量(或电量)、胎压、可续航里程、天气状况等信息,通过图像的方式显示到达导航目的地的路况信息等。
在本实施方式中,通过播放语音提示信息,用户能够在行车前,全面直观地获取到车辆的状态信息和路况信息,而无需手动启动车辆或者通过显示屏上的按键执行相应的操作,能够有效提高交互效率,同时对指定人员进行合理适时地操作引导,更加智能和人性化,显著提升用户的交互体验。
在一个可行的实施方式中,S102之后,车辆人机交互方法还可以包括以下步骤:
S201:获取驾驶室内的温度信息。
在本实施方式中,VCU在检测到目标人物为指定人员时,启动车辆并播放预设的提示语音后,还将通过设置在驾驶室内的温度传感器获取驾驶室内的温度信息,并基于该温度信息判断是否需要对驾驶室进行加热或者降温。
S202:在温度信息小于第一温度阈值时,启动空调系统进行加热,并将空调的温度设置为第一预设温度,座椅的温度设置为第二预设温度。
在本实施方式中,第一温度阈值可以设置为10℃,也就是说,当驾驶室内的温度信息小于10℃时,将会开启冬季预热功能,VCU控制空调系统启动,并将空调的温度设置为第一预设温度,如设置为24℃;;同时将座椅的温度设置为第二预设温度,第二预设温度可以和第一预设温度相同,也可以不同,如设置为26℃。
S203:在温度信息大于第二温度阈值时,启动空调系统进行降温,将空调的温度设置为第三预设温度,座椅的温度设置为第四预设温度。
在本实施方式中,第二温度阈值可以设置为30℃,也就是说,当驾驶室内的温度信息大于30℃时,将会开启夏季预冷功能,VCU控制空调系统启动,并将空调的温度设置为第三预设温度,如设置为26℃;;同时将座椅的温度设置为第四预设温度,第四预设温度可以和第三预设温度相同,也可以不同,如设置为24℃。
需要说明的是,用户可以通过车载显示屏对第一温度阈值、第二温度阈值、第一预设温度、第二预设温度、第三预设温度和第四预设温度进行设置和调整,以满足自身的实际需求。
在本实施方式中,根据驾驶室内的温度信息,对驾驶室进行预加热或预降温,能够快速将车内温度环境调整为适宜的温度,为用户带来舒适的驾驶感受,提升用户体验,并提高车辆的智能化和人性化。
在一个可行的实施方式中,S103具体可以包括以下子步骤:
S103-1:生成语音导航指令对应的指令文本,并将指令文本输入预设的语义识别模型,输出得到导航目的地。
在本实施方式中,指定人员通过语音下达包含“前往公司”、“回家”、“前往某景点”或“到某地点”等导航目的地的语音导航指令,VCU在获取到语音导航指令之后,将会将该语音导航指令识别为对应的指令文本,并将该指令文本输入预先训练的语义识别模型,进而提取语音导航指令中的导航目的地。需要说明的是,用户可以针对常去地点进行自定义设置,如设置关键词“公司”和公司实际地址之间的映射关系,使得语义识别模型在识别到公司的关键词之后,即可将导航目的地确定为公司实际地址,以方便用户下达导航指令。
S103-2:获取从车辆所在位置到导航目的地的至少一个导航路线。
在本实施方式中,可以通过车载导航系统基于当前的实时地图,获取到从车辆所在位置到导航目的地的至少一个导航路线,以供用户进行手动选择或者自行选择满足预设导航条件的最优路线。
S103-3:在至少一个导航路线中确定满足预设导航条件的最优路线。
在本实施方式中,用户可以根据自己的驾驶喜好设置不同的预设导航条件,示例性的,预设导航条件可以包括:时间最短、红绿灯最少、步行最少和/或行驶距离最短。
需要说明的是,预设导航条件可以为一个,也可以为多个。当预设导航条件为多个时,可以根据用户喜好,为不同的预设导航条件设置各自对应的权重,进而可以根据加权求和的方式,确定满足预设导航条件的最优路线。
S103-4:将最优路线的路况信息,确定为到达导航目的地的路况信息。
在本实施方式中,在确定最优路线后,将会通过车载导航系统获取最优路线的路况信息,该路况信息即为需要向指定人员进行播报的内容,以告知指定人员当前的路况,路况信息可以包括行驶距离、行驶时间和道路拥堵情况等信息。
在本实施方式中,在获取的到达导航目的地的路况信息的基础上,结合车辆的当前参数信息,能够使用户在行车前,快速获取车辆的状态信息和路况信息,为指定人员的驾驶选择提供数据参考。如在指定人员得知车辆当前的油量或电量较少时,可以选择行驶距离最短的导航路线作为最优路线,VCU则可以提醒用户加油,并提供最近的加油站的信息。
在一个可行的实施方式中,车辆人机交互方法还可以包括以下步骤:
S301:获取车辆的档位状态,并播放档位状态对应的操作提示语音;不同的档位状态对应不同的操作提示语音。
在本实施方式中,在VCU检测到档位发生变化后,将会发出相应的操作提示语音。示例性的,当指定人员将档位置于R挡(倒车挡)时,播放“请确认车后安全”的操作提示语音;当指定人员将档位置于N挡(空挡)时,播放“请拉手刹”的操作提示语音;当指定人员将档位置于D挡(前进挡)时,播放“请松手刹,并确认行车安全”的操作提示语音。
在本实施方式中,通过在不同的档位向指定人员发送不同的操作提示语音,不仅可以引导指定人员尤其是新手驾驶员进行相应操作,还可以对指定人员进行安全提醒,提醒指定人员在进行倒车或者启动车辆时,确认车辆周围是否存在行人或者障碍物等安全隐患。
S302:在检测到当前车速大于车速阈值时,获取指定人员的图像信息,并基于图像信息,判断指定人员是否为疲劳驾驶。
在本实施方式中,可以通过车内摄像头采集指定人员的图像信息,并通过图像识别技术,将图像信息输入经过预训练的神经网络模型,以输出识别结果;在输出的识别结果为疲劳驾驶时,则确定指定人员存在疲劳驾驶的危险行为。在具体实现中,可以获取指定人员连续几分钟内的图像信息,以判断指定人员是否有打瞌睡或者闭眼睛睡着的现象,以提高识别准确率。
S303:在确定指定人员为疲劳驾驶时,播放预设的安全行驶提示语音。
在本实施方式中,通过获取指定人员的图像信息,并对指定人员的驾驶状态进行监测,可以对不规范驾驶行为进行及时的干预,通过播放预设的安全行驶提示语音,以提醒指定人员注意驾驶安全,同时还可以播放预设的提神音乐以缓解用户疲劳,减少交通事故的发生概率,保证行车安全。
在本实施方式中,在车辆处于起步或者停车状态时,通过播放不同档位对应的操作提示语音,可以提高车辆在非行驶状态下的安全性;在车辆处于行驶状态下时,能够对指定人员的不规范驾驶行为进行及时的干预提醒。
在一个可行的实施方式中,车辆人机交互方法还可以包括以下步骤:
S401:响应于通过预设的按键触发的模式进入指令,进入智能交互模式,并播放预设的模式进入语音。
S402:响应于通过按键触发的模式退出指令,退出智能交互模式,并播放预设的模式退出语音。
需要说明的是,按键可以是预先配置的物理按键,也可以是配置在中控屏上的虚拟按键。在本实施方式中,为便于指定人员操作,可以采用物理按键的方式控制智能交互模式的进入和退出。具体而言,可以将物理按键设置在方向盘上,指定人员在通过直接按住镶嵌在方向盘上的物理按键控制智能交互模式的进入和退出。
在具体实现中,获取车辆周围的目标人物之前,指定人员可以通过物理按键控制车辆进入智能交互模式,而车辆在进入智能交互模式后,将自动播放预设的“车辆已进入智能交互模式”的模式进入语音进行操作反馈;同时,指定人员也可以随时根据需要退出智能交互模式,如在基于当前参数信息和路况信息,生成语音提示信息,并播放语音提示信息之后,指定人员可以通过物理按键控制车辆退出智能交互模式,而车辆在退出智能交互模式后,将播放预设的“车辆已退出智能交互模式”的模式退出语音进行操作反馈。
在本实施方式中,物理按键触发的方式,可以有效减少误唤醒或者车上环境嘈杂无法唤醒的情况发生,增强用户的体验感;同时,物理按键触发的方式,既能快速的完成操作又不会分散指定人员注意力而影响驾驶安全。
在一个可行的实施方式中,车辆人机交互方法还可以包括以下步骤:
S501:建立与移动终端之间的通讯连接,并获取移动终端中的日程信息。
需要说明的是,移动终端可以但不限于手机、笔记本、平板电脑等具有通信功能的设备。
在本实施方式中,车辆可以和移动终端通过蓝牙等方式建立无线通讯连接,也可以和移动终端通过数据线建立有线通讯连接。示例性的,当用户利用数据线连接手机和车辆之后,车辆在给手机充电的同时,还将获取手机中的日程信息。
S502:基于日程信息,生成日程提醒信息,并播放日程提醒信息。
在本实施方式中,在获取日程信息之后,将会生成日程信息对应的日程提醒信息,并播放日程提醒信息。在具体实现中,可以通过车载语音系统对日程提醒信息直接进行语音播报,也可以结合车载显示屏通过文字的方式展示该日程提醒信息,以实现自动同步手机中的日程信息,并对指定人员进行语音播报提醒。
在一个可行的实施方式中,车辆人机交互方法还可以包括以下步骤:
S601:响应于包含车辆功能的语音介绍指令,播放车辆功能对应的功能介绍语音;不同的车辆功能对应不同的功能介绍语音。
在本实施方式中,为在试驾场景下辅助试驾员对车辆的各个功能进行介绍,试驾员在驾驶车辆的过程中,试驾员可以在行车过程中语音下达包含车辆功能的语音介绍指令,车辆便可自动播放该车辆功能对应的功能介绍语音。示例性的,试驾员可以说寻迹倒车,车辆便可自动对寻迹倒车的功能进行介绍。
具体而言,在试驾场景下,在检测到车外的目标人物为指定人员中的试驾员时,将启动车辆并播放预设的欢迎语音;在同时检测到主驾驶位和副驾驶位的入座信号时,将会播放预设的整车介绍语音,以对整车的基本信息进行介绍;在驾驶过程中,试驾员可以向车辆下达包含车辆功能的语音介绍指令,以使车辆自动播放该车辆功能对应的功能介绍语音。
在一个例子中,买车客户对A款车辆有购买意愿,试驾员在带领买车客户走向A款车辆的过程中,A款车辆通过设置在车辆周围的摄像头获取到该试驾员,并将该试驾员的人脸图像与预先存储的指定人员的人脸图像进行对比,在对比结果为通过时,确定该试驾员为指定人员,此时,将自动启动车辆,并自动播放预设的欢迎语音,如可以播放“欢迎试驾A款车辆”的欢迎语音,同时还可以播放预设的针对车辆的整车介绍语音,以对车辆排量、油耗等相关信息进行介绍。在同时检测到主驾驶位和副驾驶位的入座信号时,说明试驾员和买车客户均匀入座,此时获取车辆的当前参数信息并播放预设的导航提示语音,并响应于试驾员触发的“前往试驾目的地”的语音导航指令,启动车载导航系统并获取到达试驾目的地的路况信息,进而基于当前参数信息和路况信息,生成并播放所述语音提示信息,以使试驾员和买车客户了解当前车辆的参数信息和路况信息。在驾驶过程中,买车客户想要了解车辆的自动泊车功能,而试驾员刚好对自动泊车功能的相关买点记忆不准确,此时,试驾员可以通过下达包含自动泊车的语音介绍指令,车辆在接收到语音介绍指令之后,将会播放自动泊车对应的功能介绍语音,以辅助试驾员对自动泊车的功能进行介绍。
在本实施方式中,可以在整个试驾过程的不同阶段自动播放相应的语音或响应于试驾员的语音介绍指令对车辆的各个功能进行自动介绍,能够提高车辆的智能化,提高买车客户的试驾体验;同时可以减少因为试驾员记录卖点不完整、不准确造成买车客户体验差,减少销量等情况的出现。
在本实施方式中,针对不同的目标人物,将自适应地执行不同的人机交互策略,能够满足更多的应用场景,并且在不同的应用场景下提供相应的操作引导和提示,全面提升车载系统的智能化程度,显著提升用户的交互体验。
第二方面,参照图2,本申请实施例提供了一种车辆人机交互装置200,该车辆人机交互装置200包括:
目标人物获取模块201,用于获取车辆周围的目标人物;
提示模块202,用于在检测到目标人物为指定人员时,启动车辆并播放预设的提示语音;
导航提示模块203,用于在检测到主驾驶位的入座信号时,获取车辆的当前参数信息并播放预设的导航提示语音;
路况信息获取模块204,用于响应于针对导航提示语音返回的包含导航目的地的语音导航指令,启动车载导航系统并获取到达导航目的地的路况信息;
路况提示模块205,用于基于当前参数信息和路况信息,生成语音提示信息,并播放语音提示信息。
在本申请一实施例中,车辆人机交互装置200还包括::
温度信息获取模块,用于获取驾驶室内的温度信息;
加热模块,用于在温度信息小于第一温度阈值时,启动空调系统进行加热,并将空调的温度设置为第一预设温度,座椅的温度设置为第二预设温度;
降温模块,用于在温度信息大于第二温度阈值时,启动空调系统进行降温,将空调的温度设置为第三预设温度,座椅的温度设置为第四预设温度。
在本申请一实施例中,路况信息获取模块205包括:
导航目的地输出子模块,用于生成语音导航指令对应的指令文本,并将指令文本输入预设的语义识别模型,输出得到导航目的地;;
导航路线获取子模块,用于获取从车辆所在位置到导航目的地的至少一个导航路线;
最优路线确定子模块,用于在至少一个导航路线中确定满足预设导航条件的最优路线;预设导航条件包括时间最短、红绿灯最少、步行最少和/或行驶距离最短;
路况信息确定子模块,用于将最优路线的路况信息,确定为到达导航目的地的路况信息。
在本申请一实施例中,车辆人机交互装置200还包括::
操作提示模块,用于获取车辆的档位状态,并播放档位状态对应的操作提示语音;不同的档位状态对应不同的操作提示语音;
疲劳驾驶判断模块,用于在检测到当前车速大于车速阈值时,获取指定人员的图像信息,并基于图像信息,判断指定人员是否为疲劳驾驶;
安全行驶提示模块,用于在确定指定人员为疲劳驾驶时,播放预设的安全行驶提示语音。
在本申请一实施例中,车辆人机交互装置200还包括::
模式进入模块,用于在获取车辆周围的目标人物之前,响应于通过预设的按键触发的模式进入指令,进入智能交互模式;
模式退出模块,用于在基于当前参数信息和路况信息,生成语音提示信息,并播放语音提示信息之后,响应于通过按键触发的模式退出指令,退出智能交互模式。
在本申请一实施例中,车辆人机交互装置200还包括::
日程信息获取模块,用于建立与移动终端之间的通讯连接,并获取移动终端中的日程信息;
日程提醒信息播放模块,用于基于日程信息,生成日程提醒信息,并播放日程提醒信息。
在本申请一实施例中,车辆人机交互装置200还包括::
人脸图像提取模块,用于获取车辆周围的目标人物之后,提取目标人物的人脸图像;
对比模块,用于将人脸图像与预先存储的指定人员的人脸图像进行对比,得到对比结果;
指定人员确定模块,用于在对比结果为通过时,确定目标人物为指定人员。
在本申请一实施例中,车辆人机交互装置200还包括::
陌生人确定模块,用于在对比结果为不通过时,确定目标人物为陌生人;
提醒模块,用于获取并存储陌生人的视频信息,并向预设终端发送提醒信息。
在本申请一实施例中,车辆人机交互装置200还包括::
功能介绍模块,用于响应于试驾员触发的包含车辆功能的语音介绍指令,播放车辆功能对应的功能介绍语音;不同的车辆功能对应不同的功能介绍语音。
需要说明的是,本申请实施例的车辆人机交互装置200的具体实施方式参照前述本申请实施例第一方面提出的车辆人机交互方法的具体实施方式,在此不再赘述。
第三方面,参照图3,本申请实施例提供了一种车辆300,包括处理器301和存储器302,存储器302存储有能够被处理器301执行的机器可执行指令,处理器301用于执行机器可执行指令,以实现本申请第一方面提出的车辆人机交互方法。
需要说明的是,本申请实施例的车辆300的具体实施方式参照前述本申请实施例第一方面提出的车辆人机交互方法的具体实施方式,在此不再赘述。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或操作与另一个实体或操作区分开来,,而不一定要求或暗示这些实体或操作之间存在任何这种实际的关系或顺序。而且,术语“包括”、“包含”或其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或是还包括为这种过程、方法、物品或终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或终端设备中还存在另外的相同要素。
以上对本发明所提供的一种车辆人机交互方法、装置和车辆,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种车辆人机交互方法,其特征在于,所述方法包括:
获取所述车辆周围的目标人物;
在检测到所述目标人物为指定人员时,启动所述车辆并播放预设的提示语音;
在检测到主驾驶位的入座信号时,获取所述车辆的当前参数信息并播放预设的导航提示语音;
响应于针对所述导航提示语音返回的包含导航目的地的语音导航指令,启动车载导航系统并获取到达所述导航目的地的路况信息;;
基于所述当前参数信息和所述路况信息,生成语音提示信息,并播放所述语音提示信息。
2.根据权利要求1所述的车辆人机交互方法,其特征在于,在检测到所述目标人物为指定人员时,启动所述车辆并播放预设的提示语音之后,所述方法还包括:
获取驾驶室内的温度信息;
在所述温度信息小于第一温度阈值时,启动空调系统进行加热,并将空调的温度设置为第一预设温度,座椅的温度设置为第二预设温度;或,
在所述温度信息大于第二温度阈值时,启动所述空调系统进行降温,将所述空调的温度设置为第三预设温度,所述座椅的温度设置为第四预设温度。
3.根据权利要求1所述的车辆人机交互方法,其特征在于,获取到达所述导航目的地的路况信息,包括:
生成所述语音导航指令对应的指令文本,并将所述指令文本输入预设的语义识别模型,输出得到所述导航目的地;
获取从车辆所在位置到所述导航目的地的至少一个导航路线;
在所述至少一个导航路线中确定满足预设导航条件的最优路线;
将所述最优路线的路况信息,确定为到达所述导航目的地的路况信息。
4.根据权利要求1所述的车辆人机交互方法,其特征在于,所述检测到主驾驶位的入座信号之后,所述方法还包括:
获取所述车辆的档位状态,并播放所述档位状态对应的操作提示语音;不同的档位状态对应不同的操作提示语音;
在检测到当前车速大于车速阈值时,获取所述指定人员的图像信息,并基于所述图像信息,判断所述指定人员是否为疲劳驾驶;
在确定所述指定人员为疲劳驾驶时,播放预设的安全行驶提示语音。
5.根据权利要求1所述的车辆人机交互方法,其特征在于,获取所述车辆周围的目标人物之前,所述方法还包括:
响应于通过预设的按键触发的模式进入指令,进入智能交互模式,并播放预设的模式进入语音;
基于所述当前参数信息和所述路况信息,生成语音提示信息,并播放所述语音提示信息之后,所述方法还包括:
响应于通过所述按键触发的模式退出指令,退出所述智能交互模式,并播放预设的模式退出语音。
6.根据权利要求1所述的车辆人机交互方法,其特征在于,所述方法还包括:
建立与移动终端之间的通讯连接,并获取所述移动终端中的日程信息;
基于所述日程信息,生成日程提醒信息,并播放所述日程提醒信息。
7.根据权利要求1所述的车辆人机交互方法,其特征在于,获取所述车辆周围的目标人物之后,所述方法还包括:
提取所述目标人物的人脸图像;
将所述人脸图像与预先存储的指定人员的人脸图像进行对比,得到对比结果;
在所述对比结果为通过时,确定所述目标人物为所述指定人员。
8.根据权利要求1所述的车辆人机交互方法,其特征在于,所述方法还包括:
响应于包含车辆功能的语音介绍指令,播放所述车辆功能对应的功能介绍语音;不同的车辆功能对应不同的功能介绍语音。
9.一种车辆人机交互装置,其特征在于,所述装置包括:
目标人物获取模块,用于获取所述车辆周围的目标人物;
提示模块,用于在检测到所述目标人物为指定人员时,启动所述车辆并播放预设的提示语音;
导航提示模块,用于在检测到主驾驶位的入座信号时,获取所述车辆的当前参数信息并播放预设的导航提示语音;
路况信息获取模块,用于响应于针对所述导航提示语音返回的包含导航目的地的语音导航指令,启动车载导航系统并获取到达所述导航目的地的路况信息;
路况提示模块,用于基于所述当前参数信息和所述路况信息,生成语音提示信息,并播放所述语音提示信息。
10.一种车辆,其特征在于,包括处理器和存储器,所述存储器存储有能够被所述处理器执行的机器可执行指令,所述处理器用于执行机器可执行指令,以实现如权利要求1-8任一项所述的车辆人机交互方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211401650.8A CN115635978A (zh) | 2022-11-09 | 2022-11-09 | 一种车辆人机交互方法、装置和车辆 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211401650.8A CN115635978A (zh) | 2022-11-09 | 2022-11-09 | 一种车辆人机交互方法、装置和车辆 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115635978A true CN115635978A (zh) | 2023-01-24 |
Family
ID=84948897
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211401650.8A Pending CN115635978A (zh) | 2022-11-09 | 2022-11-09 | 一种车辆人机交互方法、装置和车辆 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115635978A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117454048A (zh) * | 2023-06-20 | 2024-01-26 | 昆明理工大学 | 用于试驾的新能源汽车续航测试系统及方法 |
-
2022
- 2022-11-09 CN CN202211401650.8A patent/CN115635978A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117454048A (zh) * | 2023-06-20 | 2024-01-26 | 昆明理工大学 | 用于试驾的新能源汽车续航测试系统及方法 |
CN117454048B (zh) * | 2023-06-20 | 2024-05-17 | 昆明理工大学 | 用于试驾的新能源汽车续航测试系统及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108216264B (zh) | 用于车辆的信息提供系统和提供用于车辆的信息的方法 | |
KR101930462B1 (ko) | 차량 제어 장치 및 그것을 포함하는 차량 | |
CN106467113B (zh) | 用于驾驶员辅助的系统和方法 | |
CN110154954B (zh) | 一种自动驾驶汽车判断乘客身份的智能系统 | |
US10852720B2 (en) | Systems and methods for vehicle assistance | |
CN110654389B (zh) | 车辆的控制方法、控制装置和车辆 | |
JP6331714B2 (ja) | 通信方法、路側装置、移動通信機、車両、車両の制御装置、及び車両の動作決定方法 | |
JP3932854B2 (ja) | 車両制御システム | |
CN110549991A (zh) | 管理服务器、管理系统、以及管理方法 | |
CN110876047A (zh) | 车外投影方法、装置、设备和存储介质 | |
KR20190031050A (ko) | 차량 제어 장치 및 그것을 포함하는 차량 | |
CN108216232B (zh) | 车辆和车辆的控制方法 | |
CN112041201B (zh) | 用于控制对车辆特征的访问的方法、系统和介质 | |
JP5712712B2 (ja) | 車載機能制御装置 | |
JP5018258B2 (ja) | 運転支援装置案内システム、表示装置 | |
WO2018058273A1 (zh) | 一种防盗方法及系统 | |
US20240071231A1 (en) | Information presentation device | |
CN115635978A (zh) | 一种车辆人机交互方法、装置和车辆 | |
JP2020172182A (ja) | 車両制御システム | |
CN113212369A (zh) | 电动汽车控制方法、系统及电动汽车 | |
WO2018058267A1 (zh) | 一种汽车调节方法及系统 | |
CN111717221A (zh) | 自动驾驶接管风险评估和人机友好预警方法及预警系统 | |
JP7384604B2 (ja) | 車両制御計画生成装置 | |
JP7151743B2 (ja) | 車両用機械学習システム | |
JP7198741B2 (ja) | 車両操作権管理装置、車両操作権管理方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |