CN112959998A - 一种车载人机交互方法、装置、车辆及电子设备 - Google Patents

一种车载人机交互方法、装置、车辆及电子设备 Download PDF

Info

Publication number
CN112959998A
CN112959998A CN202110294913.9A CN202110294913A CN112959998A CN 112959998 A CN112959998 A CN 112959998A CN 202110294913 A CN202110294913 A CN 202110294913A CN 112959998 A CN112959998 A CN 112959998A
Authority
CN
China
Prior art keywords
virtual
vehicle
target user
target
life image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110294913.9A
Other languages
English (en)
Other versions
CN112959998B (zh
Inventor
沈刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Evergrande New Energy Automobile Investment Holding Group Co Ltd
Original Assignee
Evergrande New Energy Automobile Investment Holding Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Evergrande New Energy Automobile Investment Holding Group Co Ltd filed Critical Evergrande New Energy Automobile Investment Holding Group Co Ltd
Priority to CN202110294913.9A priority Critical patent/CN112959998B/zh
Publication of CN112959998A publication Critical patent/CN112959998A/zh
Application granted granted Critical
Publication of CN112959998B publication Critical patent/CN112959998B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Human Computer Interaction (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供一种车载人机交互方法、装置、车辆及电子设备。方法包括:对车辆内的目标用户进行感知分析,获得针对所述目标用户的认知数据。基于与所述目标用户关联的目标虚拟生命形象的模板,生成所述认知数据匹配的包含目标虚拟生命形象的虚拟交互动画。基于所述车辆的抬头显示器,播放所述虚拟交互动画。本发明实施例的方案将虚拟人物形象,通过抬头显示技术投影到前风挡上面,使虚拟生命形象更加具有立体感,视觉上实现悬浮在前挡风玻璃上与用户进行交互。此外交互过程中,用户也无需将视线离开驾驶方向,因此具有较高的安全性,大幅提高了车载虚拟人机交互的实用性。

Description

一种车载人机交互方法、装置、车辆及电子设备
技术领域
本文件涉及车辆应用技术领域,尤其涉及一种车载人机交互方法、装置、车辆及电子设备。
背景技术
随着人工智能技术的不断发展,虚拟机器人被越来越多地应用在人机交互当中。目前,针对车辆设置的虚拟机器人主要通过车载系统的大屏与用户进行交互。这种方式需要车载系统配置成本较高的屏幕且用户在驾驶过程中如果经常留意车载系统的屏幕也会影响安全。
为此,当前亟需一种针对车辆设计的低成本且高安全性的虚拟人机交互方案。
发明内容
本发明实施例目的是提供一种车载人机交互方法、装置、车辆及电子设备,能够低成本且高安全性实现车辆的虚拟人机交互。
为了实现上述目的,本发明实施例是这样实现的:
第一方面,提供一种车载人机交互方法,包括:
对车辆内的目标用户进行感知分析,获得针对所述目标用户的认知数据;
基于与所述目标用户关联的目标虚拟生命形象的模板,生成所述认知数据匹配的包含目标虚拟生命形象的虚拟交互动画;
基于所述车辆的抬头显示器,播放所述虚拟交互动画。
第二方面,提供一种车载系统的控制装置,包括:
感知分析模块,用于对车辆内的目标用户进行感知分析,获得针对所述目标用户的认知数据;
虚拟动画生成模块,用于基于与所述目标用户关联的目标虚拟生命形象的模板,生成所述认知数据匹配的包含目标虚拟生命形象的虚拟交互动画;
虚拟动画播放模块,用于基于所述车辆的抬头显示器,播放所述虚拟交互动画。
第三方面,提供一种车辆,包括:整车控制器、传感器、抬头显示器。其中,所述整车控制器用于:
控制传感器对车辆内的目标用户进行感知分析,获得针对所述目标用户的认知数据;
基于与所述目标用户关联的目标虚拟生命形象的模板,生成所述认知数据匹配的包含目标虚拟生命形象的虚拟交互动画;
控制抬头显示器,播放所述虚拟交互动画。
第四方面,提供一种电子设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行第一方面所述方法的步骤。
第五方面,提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现第一方面所述方法的步骤。
本发明实施例的方案将虚拟人物形象,通过抬头显示技术投影到前风挡上面,使虚拟生命形象更加具有立体感,视觉上实现悬浮在前挡风玻璃上与用户进行交互。此外交互过程中,用户也无需将视线离开驾驶方向,因此具有较高的安全性,大幅提高了车载虚拟人机交互的实用性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明实施例中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的车载人机交互方法的流程示意图。
图2为本发明实施例提供的车载人机交互装置的结构示意图。
图3为本发明实施例提供的车辆的结构示意图。
图4为本发明实施例提供的电子设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本说明书中的技术方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本说明书一部分实施例,而不是全部的实施例。基于本说明书中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本说明书保护的范围。
目前,针对车辆设置的虚拟机器人主要通过车载系统的大屏与用户进行交互。这种方式需要车载系统配置成本较高的屏幕且用户在驾驶过程中如果经常留意车载系统的屏幕也会影响安全。为此,本申请旨在提出一种更具实用性的车载人机交互方案,在降低成本的同时还提升了驾驶安全性。
图1是本发明实施例车载人机交互方法,的流程图,包括如下步骤:
S102,对车辆内的目标用户进行感知分析,获得针对所述目标用户的认知数据。
具体地,本步骤可以对目标用户进行至少两种模态信息的感知分析,以获得不同维度的认知数据。作为示例性介绍,感知分析可以具体包括:
基于视觉信息的感知分析。比如,通过车辆内的摄像头捕获目标用户的面部信息,以基于面部信息进行感知分析,确定目标用户的情绪指标。
基于听觉信息的感知分析。比如,通过车辆内的麦克风捕获目标用户的语音信息(提问内容),以基于语音信息对目标用户进行感知分析,确定针对目标用户的回应内容;再比如,通过车辆内的麦克风捕获目标用户的声纹特征,以基于语音信息对目标用户进行感知分析,确定目标用户的情绪指标。
基于人机交互输入信息的感知分析。比如,基于目标用在人机交互界面输入的文本信息,并对文本信息进行感知分析,确定针对目标用户的回应内容。
可以看出,在本说明实施例中,车内的虚拟机器人具备视觉、听觉和文字等强大的感知能力,从而基于感知到的这些模态信息对目标用户进行交互用途的相关分析,确定出针对目标用户人机交互有用的数据,即认知数据。
S104,基于与目标用户关联的目标虚拟生命形象的模板,生成认知数据匹配的包含目标虚拟生命形象的虚拟交互动画。
应理解,本发明实施例的虚拟交互动画对人机交互可以起到辅助作用,由于具体表现方式并不唯一,这里不作具体限定。此外,虚拟交互动画中的虚拟生命形象可以但不限是拟人化形象、拟物化形象或者是创造出来的非自然界形象。
具体地,认知数据包括目标用户的情绪指标和针对所述目标用户的回应内容,本发明实施例的方法可以采用下述步骤构建出虚拟交互动画:
基于预先设置的与目标用户关联的目标虚拟生命形象的模板,生成与目标用户的回应内容相匹配的基础虚拟交互动画,基础虚拟交互动画中包括具有基础动画效果的目标虚拟生命形象。
基于预先设置的与目标用户关联的目标虚拟生命形象的模板,生成与目标用户传达的情绪指标相匹配的附加虚拟交互动画,附加虚拟交互动画中包括附加情绪动画效果的目标虚拟生命形象。
对基础虚拟交互动画和附加虚拟交互动画进行合成,生成有感情回应的虚拟交互动画。
这里,本文不对基础虚拟交互动画和附加虚拟交互动画的合成方式作具体限定。基础虚拟交互动画和附加虚拟交互动画组合可以是指两者同时显示,或者两者分先后显示。
在实际应用中,车联网服务器向目标用户的车联网账户提供多种虚拟生命形象以供目标用户选择。目标用户通过自身车联网账户,设置自己喜欢的目标虚拟生命形象。用车过程中,一旦车载系统识别到目标用户的车联网账户,即可匹配出相对应的目标虚拟生命形象。
此外,车联网服务器提供的虚拟生命形的模板可以被下载到车辆本地,车载系统通过空中下载技术,随时请求车联网服务器进行更新。更新内容可以包括:虚拟生命形象的皮肤、特效、背景、动作等。比如,在节日来临之际,下载使用车联网服务器针对虚拟生命形象设计的节日皮肤包,以增加节日气氛。
S106,基于车辆的抬头显示器,播放虚拟交互动画。
本发明实施例的方法将虚拟人物形象,通过抬头显示技术投影到前风挡上面,使虚拟生命形象更具有立体感,视觉上实现悬浮在前挡风玻璃上与用户进行交互。在交互过程中,用户无需将视线离开驾驶方向,因此具有较高的安全性,大幅提高了车载虚拟人机交互的实用性。
当然,本发明实施例的方法,在呈现虚拟交互动画基础之上,还可以与用户进行语音交互。
即,在获得针对标用户的认知数据后,基于认知数据,确定虚拟交互语音。比如,基于针对目标用户的回应内容生成基础虚拟交互语音。之后,基于目标用户的情绪指标相对应的反馈情绪指标,对基础虚拟交互语音进行处理(如调整音频输出声调、音频输出音量、字与字之间的音频输出停顿时间,或者增加情绪助词等),得到附加情绪色彩的虚拟交互语音。
之后,在基于车辆的抬头显示器,播放虚拟交互动画的时,基于车辆的麦克风播放虚拟交互语音。
可以看出,本发明实施例的方法使虚拟生命形象与用户进行交互的过程中,在画面和声音上附带情绪,从而呈现一定程度的共情能力,使虚拟生命形象更加逼真。
下面结合实际的应用场景,对本发明实施例方法营造特殊日氛围的方案进行详细介绍。
本应用场景中,车辆钥匙配置独立的ID信息(车联网账户ID),用户可以对喜欢的虚拟生命形象做选择配置,并将选择的虚拟人物形象与车辆钥匙的ID信息进行配对。当用户通过车辆钥匙激活车辆后(车辆识别到ID信息),车辆自动匹配成该用户喜欢的虚拟生命形象。
用户在开车过程中,可以通过特定的唤醒词激活虚拟生命形象。
整车控制器在通过布置在车内的麦克风识别到用户说出的唤醒词后,激活抬头显示器,抬头显示器显示虚拟生命形象的虚拟交互动画。之类,具体的虚拟交互动画的表现由厂商自定,本文不作具体赘述。
虚拟生命形象从抬头显示器的投影区域呈现后,与驾驶员进行人机交互,交互内容包含车辆控制类(如空调、氛围灯、音量调节、座椅的调节)、信息查询类(如天气、车速、电量的显示)以及娱乐类(如笑话、歌曲的播放)。
此外,整车控制器通过车载摄像头实时监控用户的面部表情,并控制抬头显示器显示面部表情相匹配的虚拟交互动画,同时也可以控制麦克风进行虚拟语音交互。
比如,在识别到用户开心,虚拟生命任务从睡眠状唤醒,并语音提示“主人,来一首欢快的歌曲吧…”,在识别到驾驶员疲劳的时候,虚拟人物醒来后语音提示“主人,您看起来有点累,给您说个笑话,开心一下吧…”,或者提示“主人,您看起来有点累,建议您到前方服务区休息一下…”。
此外,用户可以通过手机APP或者中控大屏上的应用,连接车联网服务器,给虚拟生命形象更换皮肤、特效、装扮等,实现个性化定制。
基于本应用场景可以看出,本发明是实施例的方法具有以下特点:
1)通过抬头显示器,以较低成本实现了更加安全的虚拟人机交互。
2)主动通过摄像头和麦克风对用户进行视觉和听觉的感知,使得虚拟机器人的认知能力更加拟人化。
3)用户可以通过车联网账户ID绑定自己喜欢的虚拟生命形象,并通过车联网服务器提供的皮肤、特效、装扮等,对虚拟生命形象进行个性化定制,做到了虚拟生命形象的千人千面。
4)在用车过程中,一旦整车控制器识别到用户的车联网账户ID(比如车钥匙配对、车载系统的账户登录等),即可自动激活用户选择虚拟生命形象,实现根据当前用户智能化切换虚拟生命形象的效果。
5)通过空中下载技术,可以完成对虚拟生命形象模板的推送更新,以保持用户黏性。
以上应用场景是对本发明实施例方法的示例性介绍。虚拟交互动画的具体表现由厂商自定,本文不再具体赘述。应理解,在不脱离本文上述原理基础之上,还可以进行适当的变化,这些变化也应视为本发明实施例的保护范围。
此外,对应于图1所示的车载系统的控制方法,本发明实施例还提供一种车载人机交互装置。图2是本发明实施例车载人机交互装置200的结构示意图,包括:
感知分析模块210,用于对车辆内的目标用户进行感知分析,获得针对所述目标用户的认知数据。
虚拟动画生成模块220,用于基于与所述目标用户关联的目标虚拟生命形象的模板,生成所述认知数据匹配的包含目标虚拟生命形象的虚拟交互动画。
虚拟动画播放模块230,用于基于所述车辆的抬头显示器,播放所述虚拟交互动画。
本发明实施例的装置将虚拟人物形象,通过抬头显示技术投影到前风挡上面,使虚拟生命形象更加具有立体感,视觉上实现悬浮在前挡风玻璃上与用户进行交互。此外交互过程中,用户也无需将视线离开驾驶方向,因此具有较高的安全性,大幅提高了车载虚拟人机交互的实用性。
可选地,本发明实施例的车载人机交互装置还包括:
虚拟交互语音模块,用于基于针对所述目标用户的认知数据,确定虚拟交互语音;以及,在虚拟动画播放模块230基于车辆的抬头显示器,播放虚拟交互动画的时,基于车辆的麦克风播放所述虚拟交互语音。
可选地,所述认知数据包括所述目标用户的情绪指标和针对所述目标用户的回应内容。虚拟动画生成模块220具体用于:基于预先设置的与所述目标用户关联的目标虚拟生命形象的模板,生成与所述目标用户的回应内容相匹配的基础虚拟交互动画,所述基础虚拟交互动画中包括具有基础动画效果的目标虚拟生命形象;基于预先设置的与所述目标用户关联的目标虚拟生命形象的模板,生成与目标用户传达的情绪指标相匹配的附加虚拟交互动画,所述附加虚拟交互动画中包括附加情绪动画效果的目标虚拟生命形象;对所述基础虚拟交互动画和所述附加虚拟交互动画进行合成,生成所述虚拟交互动画。
可选地,感知分析模块210具体用于:基于车辆内的摄像头和麦克风捕获目标用户的面部信息和语音信息;对所述目标用户的面部信息和语音信息进行感知分析,确定包含所述目标用户的情绪指标以及回应内容在内的认知数据。
可选地,所述目标用户关联的目标虚拟生命形象是所述目标用户通过自身车联网账户所设置得到的,车联网服务器向车联网账户提供包含所述目标虚拟生命形象在内的多种虚拟生命形象的选择。
可选地,本发明实施例的车载人机交互装置还包括:
模板更新模块,用于基于空中下载技术,请求车联网服务器更新本地包含所述目标虚拟生命形象在内的至少一种虚拟生命形象的模板。更新内容可以包括:虚拟生命形象的皮肤、特效、背景、动作等。
显然,本发明实施例图2所示的车载人机交互装置可以实现上述图1所示方法的步骤和功能。由于原理相同,本文不再赘述。
此外,对应于图1所示的车载系统的控制方法,本发明实施例还提供一种车辆。图3是本发明实施例车辆的结构示意图,包括:整车控制器310、传感器320、抬头显示器330。
其中,所述整车控制器310用于:
控制传感器320对车辆内的目标用户进行感知分析,获得针对所述目标用户的认知数据。其中,传感器320可以包括摄像头、麦克风,整车控制器320可以通过摄像头、麦克风对目标用户进行视觉和听觉的感知分析,实现更接近人类的认知。
基于与所述目标用户关联的目标虚拟生命形象的模板,生成所述认知数据匹配的包含目标虚拟生命形象的虚拟交互动画。比如:基于预先设置的与目标用户关联的目标虚拟生命形象的模板,生成与目标用户的回应内容相匹配的基础虚拟交互动画,基础虚拟交互动画中包括具有基础动画效果的目标虚拟生命形象。基于预先设置的与目标用户关联的目标虚拟生命形象的模板,生成与目标用户传达的情绪指标相匹配的附加虚拟交互动画,附加虚拟交互动画中包括附加情绪动画效果的目标虚拟生命形象。对基础虚拟交互动画和附加虚拟交互动画进行合成,生成有感情回应的虚拟交互动画。
控制抬头显示器330,播放所述虚拟交互动画(将虚拟交互动画投影到车辆前挡风玻璃)。可以看出,将虚拟人物形象,通过抬头显示技术投影到前风挡上面,使虚拟生命形象更具有立体感,视觉上实现悬浮在前挡风玻璃上与用户进行交互。在交互过程中,用户无需将视线离开驾驶方向,因此具有较高的安全性,大幅提高了车载虚拟人机交互的实用性。
当然,本发明实施例的车辆,在通过抬头显示器呈现虚拟交互动画基础之上,还可以结合车辆的麦克风与用户进行语音交互。即,整车控制器310还可以用于:基于针对所述目标用户的认知数据,确定虚拟交互语音;以及,在控制抬头显示器,播放所述虚拟交互动画时,基于所述车辆的麦克风播放所述虚拟交互语音。
在实际应用中,车联网服务器向目标用户的车联网账户提供多种虚拟生命形象以供目标用户选择。目标用户通过自身车联网账户,设置自己喜欢的目标虚拟生命形象。用车过程中,整车控制器310识别到目标用户的车联网账户后,即可匹配使用目标用户相对应的目标虚拟生命形象。
此外,整车控制器310还可以基于空中下载技术,请求车联网服务器更新本地包含所述目标虚拟生命形象在内的至少一种虚拟生命形象的模板。这里,更新内容可以包括虚拟生命形象的皮肤、特效、装扮、背景等,通过不断推新可以保证虚拟生命形象的新鲜感,以增加使用黏性。
显然,本发明实施例图3所示的车辆可以实现上述图1所示方法的步骤和功能。由于原理相同,本文不再赘述。
图4是本说明书的一个实施例电子设备的结构示意图。请参考图4,在硬件层面,该电子设备包括处理器,可选地还包括内部总线、网络接口、存储器。其中,存储器可能包含内存,例如高速随机存取存储器(Random-Access Memory,RAM),也可能还包括非易失性存储器(non-volatile memory),例如至少1个磁盘存储器等。当然,该电子设备还可能包括其他业务所需要的硬件。
处理器、网络接口和存储器可以通过内部总线相互连接,该内部总线可以是ISA(Industry Standard Architecture,工业标准体系结构)总线、PCI(PeripheralComponent Interconnect,外设部件互连标准)总线或EISA(Extended Industry StandardArchitecture,扩展工业标准结构)总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示,图4中仅用一个双向箭头表示,但并不表示仅有一根总线或一种类型的总线。
存储器,用于存放程序。具体地,程序可以包括程序代码,所述程序代码包括计算机操作指令。存储器可以包括内存和非易失性存储器,并向处理器提供指令和数据。处理器从非易失性存储器中读取对应的计算机程序到内存中然后运行,在逻辑层面上形成车载人机交互装置,该车载人机交互装置可以是指车辆,也可以是指车辆中的部件。对应地,处理器,执行存储器所存放的程序,并具体用于执行以下操作:
对车辆内的目标用户进行感知分析,获得针对所述目标用户的认知数据。
基于与所述目标用户关联的目标虚拟生命形象的模板,生成所述认知数据匹配的包含目标虚拟生命形象的虚拟交互动画。
基于所述车辆的抬头显示器,播放所述虚拟交互动画。
本发明实施例的电子设备将虚拟人物形象,通过抬头显示技术投影到前风挡上面,使虚拟生命形象更加具有立体感,视觉上实现悬浮在前挡风玻璃上与用户进行交互。此外交互过程中,用户也无需将视线离开驾驶方向,因此具有较高的安全性,大幅提高了车载虚拟人机交互的实用性。
上述如本说明书图1所示实施例揭示的车载系统的控制方法可以应用于处理器中,或者由处理器实现。处理器可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件完成上述方法的步骤。
应理解,本发明实施例的电子设备可以使车载人机交互装置实现对应于图1所示方法中的步骤和功能。由于原理相同,本文不再赘述。
当然,除了软件实现方式之外,本说明书的电子设备并不排除其他实现方式,比如逻辑器件抑或软硬件结合的方式等等,也就是说以下处理流程的执行主体并不限定于各个逻辑单元,也可以是硬件或逻辑器件。
此外,本发明实施例还提出了一种计算机可读存储介质,该计算机可读存储介质存储一个或多个程序,该一个或多个程序包括指令。
其中,上述指令当被包括多个应用程序的便携式电子设备执行时,能够使该便携式电子设备执行图1所示车载人机交互方法的步骤,包括:
对车辆内的目标用户进行感知分析,获得针对所述目标用户的认知数据。
基于与所述目标用户关联的目标虚拟生命形象的模板,生成所述认知数据匹配的包含目标虚拟生命形象的虚拟交互动画。
基于所述车辆的抬头显示器,播放所述虚拟交互动画。
本领域技术人员应明白,本说明书的实施例可提供为方法、系统或计算机程序产品。因此,本说明书可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本说明书可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
以上仅为本说明书的实施例而已,并不用于限制本说明书。对于本领域技术人员来说,本说明书可以有各种更改和变化。凡在本说明书的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本说明书的权利要求范围之内。此外,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本文件的保护范围。

Claims (10)

1.一种车载人机交互方法,其特征在于,包括:
对车辆内的目标用户进行感知分析,获得针对所述目标用户的认知数据;
基于与所述目标用户关联的目标虚拟生命形象的模板,生成所述认知数据匹配的包含目标虚拟生命形象的虚拟交互动画;
基于所述车辆的抬头显示器,播放所述虚拟交互动画。
2.根据权利要求1所述的方法,其特征在于,还包括:
基于针对所述目标用户的认知数据,确定虚拟交互语音;以及,
在基于所述车辆的抬头显示器,播放所述虚拟交互动画的时,基于所述车辆的麦克风播放所述虚拟交互语音。
3.根据权利要求1所述的方法,其特征在于,
所述认知数据包括所述目标用户的情绪指标和针对所述目标用户的回应内容;
基于预先设置的与所述目标用户关联的目标虚拟生命形象的模板,生成所述认知数据相匹配的包含目标虚拟生命形象的虚拟交互动画,包括:
基于预先设置的与所述目标用户关联的目标虚拟生命形象的模板,生成与所述目标用户的回应内容相匹配的基础虚拟交互动画,所述基础虚拟交互动画中包括具有基础动画效果的目标虚拟生命形象;
基于预先设置的与所述目标用户关联的目标虚拟生命形象的模板,生成与目标用户传达的情绪指标相匹配的附加虚拟交互动画,所述附加虚拟交互动画中包括附加情绪动画效果的目标虚拟生命形象;
对所述基础虚拟交互动画和所述附加虚拟交互动画进行合成,生成所述虚拟交互动画。
4.根据权利要求3所述的方法,其特征在于,还包括:
对车辆内的目标用户进行感知分析,获得针对所述目标用户的认知数据,包括:
基于车辆内的摄像头和麦克风捕获目标用户的面部信息和语音信息;
对所述目标用户的面部信息和语音信息进行感知分析,确定包含所述目标用户的情绪指标以及回应内容在内的认知数据。
5.根据权利要求1所述的方法,其特征在于,
所述目标用户关联的目标虚拟生命形象是所述目标用户通过自身车联网账户所设置得到的,车联网服务器向车联网账户提供包含所述目标虚拟生命形象在内的多种虚拟生命形象的选择。
6.根据权利要求5所述的方法,其特征在于,还包括:
基于空中下载技术,请求车联网服务器更新本地包含所述目标虚拟生命形象在内的至少一种虚拟生命形象的模板。
7.一种车载人机交互装置,其特征在于,包括:
感知分析模块,用于对车辆内的目标用户进行感知分析,获得针对所述目标用户的认知数据;
虚拟动画生成模块,用于基于与所述目标用户关联的目标虚拟生命形象的模板,生成所述认知数据匹配的包含目标虚拟生命形象的虚拟交互动画;
虚拟动画播放模块,用于基于所述车辆的抬头显示器,播放所述虚拟交互动画。
8.一种车辆,包括:整车控制器、传感器、抬头显示器,其特征在于,所述整车控制器用于:
控制传感器对车辆内的目标用户进行感知分析,获得针对所述目标用户的认知数据;
基于与所述目标用户关联的目标虚拟生命形象的模板,生成所述认知数据匹配的包含目标虚拟生命形象的虚拟交互动画;
控制抬头显示器,播放所述虚拟交互动画。
9.一种电子设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述计算机程序被所述处理器执行如权利要求1至7任一项所述方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述方法的步骤。
CN202110294913.9A 2021-03-19 2021-03-19 一种车载人机交互方法、装置、车辆及电子设备 Active CN112959998B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110294913.9A CN112959998B (zh) 2021-03-19 2021-03-19 一种车载人机交互方法、装置、车辆及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110294913.9A CN112959998B (zh) 2021-03-19 2021-03-19 一种车载人机交互方法、装置、车辆及电子设备

Publications (2)

Publication Number Publication Date
CN112959998A true CN112959998A (zh) 2021-06-15
CN112959998B CN112959998B (zh) 2022-10-11

Family

ID=76279439

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110294913.9A Active CN112959998B (zh) 2021-03-19 2021-03-19 一种车载人机交互方法、装置、车辆及电子设备

Country Status (1)

Country Link
CN (1) CN112959998B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114385225A (zh) * 2022-01-14 2022-04-22 重庆长安汽车股份有限公司 一种车机形象远程配置方法
CN114415834A (zh) * 2022-01-14 2022-04-29 北京声智科技有限公司 数据处理方法、装置、设备、介质及产品
WO2023019475A1 (zh) * 2021-08-18 2023-02-23 阿波罗智联(北京)科技有限公司 虚拟个人助理的展示方法、装置、设备、介质及产品
WO2024022027A1 (zh) * 2022-07-26 2024-02-01 中国第一汽车股份有限公司 智能语音交互方法、装置、设备和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109495863A (zh) * 2018-09-21 2019-03-19 北京车和家信息技术有限公司 交互方法及相关设备
US20190188912A1 (en) * 2017-12-19 2019-06-20 GM Global Technology Operations LLC Augmented reality vehicle user interface
US20200142354A1 (en) * 2018-11-01 2020-05-07 International Business Machines Corporation Holographic image replication
CN112182173A (zh) * 2020-09-23 2021-01-05 支付宝(杭州)信息技术有限公司 一种基于虚拟生命的人机交互方法、装置及电子设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190188912A1 (en) * 2017-12-19 2019-06-20 GM Global Technology Operations LLC Augmented reality vehicle user interface
CN109495863A (zh) * 2018-09-21 2019-03-19 北京车和家信息技术有限公司 交互方法及相关设备
US20200142354A1 (en) * 2018-11-01 2020-05-07 International Business Machines Corporation Holographic image replication
CN112182173A (zh) * 2020-09-23 2021-01-05 支付宝(杭州)信息技术有限公司 一种基于虚拟生命的人机交互方法、装置及电子设备

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023019475A1 (zh) * 2021-08-18 2023-02-23 阿波罗智联(北京)科技有限公司 虚拟个人助理的展示方法、装置、设备、介质及产品
CN114385225A (zh) * 2022-01-14 2022-04-22 重庆长安汽车股份有限公司 一种车机形象远程配置方法
CN114415834A (zh) * 2022-01-14 2022-04-29 北京声智科技有限公司 数据处理方法、装置、设备、介质及产品
WO2024022027A1 (zh) * 2022-07-26 2024-02-01 中国第一汽车股份有限公司 智能语音交互方法、装置、设备和存储介质

Also Published As

Publication number Publication date
CN112959998B (zh) 2022-10-11

Similar Documents

Publication Publication Date Title
CN112959998B (zh) 一种车载人机交互方法、装置、车辆及电子设备
CN109416733B (zh) 便携式个性化
JP6902683B2 (ja) 仮想ロボットのインタラクション方法、装置、記憶媒体及び電子機器
CN110767220A (zh) 一种智能语音助手的交互方法、装置、设备及存储介质
JP6713490B2 (ja) 情報提供装置及び情報提供方法
WO2021196614A1 (zh) 一种信息的交互方法、交互装置、电子设备及存储介质
US20220234593A1 (en) Interaction method and apparatus for intelligent cockpit, device, and medium
CN109542217A (zh) 一种眼球追踪显示方法以及装置
CN113460070A (zh) 车辆控制方法和装置
CN112182173A (zh) 一种基于虚拟生命的人机交互方法、装置及电子设备
CN111050105A (zh) 视频播放方法、装置、玩具机器人及可读存储介质
CN113851126A (zh) 车内语音交互方法及系统
CN110822647B (zh) 空调器的控制方法、空调器及存储介质
CN112306603A (zh) 信息提示方法、装置、电子设备及存储介质
CN116610212A (zh) 一种多模态娱乐交互方法、装置、设备及介质
US20240025416A1 (en) In-vehicle soundscape and melody generation system and method using continuously interpreted spatial contextualized information
CN113709954B (zh) 一种氛围灯的控制方法、装置、电子设备及存储介质
CN112951216B (zh) 一种车载语音处理方法及车载信息娱乐系统
CN114222272A (zh) 车辆控制方法、终端设备、车载终端及存储介质
CN114710553B (zh) 信息获取方法、信息推送方法以及终端设备
CN114954316A (zh) 车辆控制方法、装置、存储介质及电子设备
CN112433484A (zh) 一种基于车辆智能座舱的提示方法和智能座舱
CN114386763B (zh) 一种车辆交互方法、车辆交互装置及存储介质
CN114537409B (zh) 基于多模态分析的多感官车载交互方法及系统
CN110753233B (zh) 信息交互的播放方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant