CN115782908A - 车辆的人机交互方法、非易失性存储介质及车辆 - Google Patents
车辆的人机交互方法、非易失性存储介质及车辆 Download PDFInfo
- Publication number
- CN115782908A CN115782908A CN202310014311.2A CN202310014311A CN115782908A CN 115782908 A CN115782908 A CN 115782908A CN 202310014311 A CN202310014311 A CN 202310014311A CN 115782908 A CN115782908 A CN 115782908A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- mode
- preset
- human
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种车辆的人机交互方法、非易失性存储介质及车辆。其中,该方法包括:启动车辆的人机交互模式,其中,人机交互模式用于表示车辆与位于车辆外部的用户之间进行交互的模式;将人机交互模式对应的交互信息投射到车辆上的第一预设区域;将交互信息对应的选择信息投射到位于车辆外部的第二预设区域;确定人机交互模式对应的目标场景参数,其中,目标场景参数为用户通过至少一个选择项中的目标选择项对至少一个场景参数进行选择得到;基于目标场景参数控制目标设备,其中,目标设备用于根据目标场景参数营造车辆当前所处场景的氛围。本发明解决了相关技术中用户对车外场景进行交互控制的体验感较低的技术问题。
Description
技术领域
本发明涉及人机交互领域,具体而言,涉及一种车辆的人机交互方法、非易失性存储介质及车辆。
背景技术
随着车辆智能化发展的不断深入,汽车已经不再止于是一个代步工具。随着传感技术,人工智能技术的不断进步,并大量在车上应用,车辆正逐渐演变成一个可移动的智慧终端。现阶段综合利用人工智能的视觉技术,语音技术已经在座舱内有大量的相关应用,但现阶段还很少有相关应用延伸到车外,并形成有趣有效的交互。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种车辆的人机交互方法、非易失性存储介质及车辆,以至少解决相关技术中用户对车外场景进行交互控制的体验感较低的技术问题。
根据本发明实施例的一个方面,提供了一种车辆的人机交互方法,包括:启动车辆的人机交互模式,其中,人机交互模式用于表示车辆与位于车辆外部的用户之间进行交互的模式;将人机交互模式对应的交互信息投射到车辆上的第一预设区域,其中,交互信息中包括至少一个场景参数;将交互信息对应的选择信息投射到位于车辆外部的第二预设区域,其中,选择信息中包括至少一个选择项;确定人机交互模式对应的目标场景参数,其中,目标场景参数为用户通过至少一个选择项中的目标选择项对至少一个场景参数进行选择得到;基于目标场景参数控制目标设备,其中,目标设备用于根据目标场景参数营造车辆当前所处场景的氛围。
进一步地,该方法还包括:响应于接收到用户在位于车辆外部的第三预设区域中做出的预设姿势,从至少一个选择项中确定出预设姿势对应的目标选择项,其中,车辆外部的第三预设区域与车辆外部的第二预设区域之间的间隔小于预设距离;从至少一个场景参数中确定出目标选择项对应的目标场景参数。
进一步地,该方法还包括:响应于接收到用户位于第二预设区域中的预设位置,从至少一个选择项中确定出预设位置对应的目标选择项;从至少一个场景参数中确定出目标选择项对应的目标场景参数。
进一步地,人机交互模式包括:第一预设模式,启动车辆的人机交互模式,包括:响应于接收到用户的预设姿势,启动车辆的第一预设模式,其中,第一预设模式为用户被动触发的模式。
进一步地,人机交互模式包括:第二预设模式,启动车辆的人机交互模式,包括:响应于接收到终端的第一指令,启动车辆的第二预设模式,其中,第二预设模式为用户主动触发的单人交互模式。
进一步地,人机交互模式包括:第三预设模式,启动车辆的人机交互模式,包括:响应于接收到终端的第二指令,启动车辆的第三预设模式,其中,第三预设模式为用户主动触发的多人交互模式。
进一步地,目标设备包括:辅助灯光设备,基于目标场景参数驱动目标设备,包括:获取车辆当前所处场景的当前光线信息;基于当前光线信息和预设光线信息控制辅助灯光设备。
进一步地,基于当前光线信息和预设光线信息控制辅助灯光设备,包括:在当前光线信息小于预设光线信息的情况下,开启辅助灯光设备;在当前光线信息大于或等于预设光线信息的情况下,禁止开启辅助灯光设备。
根据本发明实施例的另一方面,还提供了一种车辆的人机交互装置,包括:模式启动模块,用于启动车辆的人机交互模式,其中,人机交互模式用于表示车辆与位于车辆外部的用户之间进行交互的模式;交互信息投射模块,用于将人机交互模式对应的交互信息投射到车辆上的第一预设区域,其中,交互信息中包括至少一个场景参数;选择信息投射模块,用于将交互信息对应的选择信息投射到位于车辆外部的第二预设区域,其中,选择信息中包括至少一个选择项;场景参数确定模块,用于确定人机交互模式对应的目标场景参数,其中,目标场景参数为用户通过至少一个选择项中的目标选择项对至少一个场景参数进行选择得到;设备控制模块,用于基于目标场景参数控制目标设备,其中,目标设备用于根据目标场景参数营造车辆当前所处场景的氛围。
根据本发明实施例的另一方面,还提供了一种车辆,包括一个或多个处理器、存储装置,存储器中存储有计算机程序,处理器被设置为运行计算机程序以执行上述的车辆的人机交互方法。
根据本发明实施例的另一方面,还提供了一种计算机可读存储介质,计算机可读存储介质包括存储的程序,其中,在程序运行时控制计算机可读存储介质所在设备执行上述的车辆的人机交互方法。
根据本发明实施例的另一方面,还提供了一种处理器,处理器用于运行程序,其中,程序运行时执行上述的车辆的人机交互方法。
在本发明实施例中,通过启动车辆的人机交互模式,其中,人机交互模式用于表示车辆与位于车辆外部的用户之间进行交互的模式;将人机交互模式对应的交互信息投射到车辆上的第一预设区域,其中,交互信息中包括至少一个场景参数;将交互信息对应的选择信息投射到位于车辆外部的第二预设区域,其中,选择信息中包括至少一个选择项;确定人机交互模式对应的目标场景参数,其中,目标场景参数为用户通过至少一个选择项中的目标选择项对至少一个场景参数进行选择得到;基于目标场景参数控制目标设备,其中,目标设备用于根据目标场景参数营造车辆当前所处场景的氛围。容易想到的是,通过将人机交互模式对应的交互信息投射到车窗显示区、将选择信息投射到地面选择区,可基于车辆当前所处场景,用户确定的选择项对应的场景参数,从而根据场景参数营造车辆当前所处场景的氛围,达到了将交互信息投射到不同的区域来实现用户的不同交互体验,增加交互的趣味性,满足用户对车外场景进行交互控制的体验感的技术效果,进而解决了相关技术中用户对车外场景进行交互控制的体验感较低的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种车辆的人机交互方法的流程图;
图2是根据本发明实施例的一种车辆的人机交互方法的效果设定流程示意图;
图3是根据本发明实施例的一种车辆的人机交互方法的车外信息交互图;
图4是根据本发明实施例的一种车辆的人机交互方法的车外场景交互系统架构图;
图5是根据本发明实施例的一种车辆的人机交互方法的用户场景使用的流程图;
图6是根据本发明实施例的一种车辆的人机交互装置的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例1
根据本发明实施例,提供了一种车辆的人机交互方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种车辆的人机交互方法的流程图,如图1所示,该方法包括如下步骤:
步骤S102,启动车辆的人机交互模式,其中,人机交互模式用于表示车辆与位于车辆外部的用户之间进行交互的模式;
具体而言,上述的人机交互模式,用于表示位于车辆外部的用户与车辆之间进行交互的模式。基于人机交互模式,可实现车辆外部的用户对车辆进行自定义的场景管理,在用户无需进入车内的情况下,使得车辆提供适用于当前环境的氛围感。
在一种可选的实施例中,人机交互模式的启动方式包括多种,可以包括车机自启动,即在用户启动车辆时,人机交互系统自启动,相应的触发人机交互模式,使得用户位于车辆外时,可与车辆进行人机交互。同时,也可以包括用户触发启动,即用户可以手动启动人机交互系统,使得触发相应的人机交互模式。需要注意的是,上述人机交互模式的启动方式不作具体限定,可根据用户的选择进行设定。
在另一种可选的实施例中,触发人机交互模式要求的用户与车辆之间的交互距离需满足预设距离阈值,在预设距离阈值内,可实现用户与车辆之间的交互,反之,若不满足预设距离阈值,需调整用户与车辆之间的距离,使得实现用户与车辆之间的交互。其中,预设距离阈值的设定,可视具体的车辆型号、车辆配置等参数进行设定,在此不作唯一限定。
步骤S104,将人机交互模式对应的交互信息投射到车辆上的第一预设区域,其中,交互信息中包括至少一个场景参数;
具体而言,上述的交互信息,可理解为进行交互的灯光信息、音乐信息。
在一种可选的实施例中,交互信息存在包括多种结果,可以是用户通过人机交互系统的模式编辑界面,对灯光、音乐信息进行预编辑,并存储于云端服务器的交互信息;也可以是用户通过人机交互系统的场景编辑界面,对场景进行预编辑,并存储于云端服务器的交互信息,其中,预编辑场景包括对各个可能出现的场景进行编辑,并对各个预编辑场景进行关键要素提取,基于关键要素提取结果对云端的资源数据库进行检索,用以对各个预编辑场景的氛围要素(灯光、音乐)进行添加。
可对上述交互信息中的灯光信息进行列表展示,且对列表中的各个灯光信息进行编号,得到灯光信息列表。同时,对交互信息中的音乐信息进行列表展示,且对列表中的各个音乐信息进行编号,得到音乐信息列表。
示例性的,在某个预编辑场景为下雪天的场景下,则提取到的关键因素包括:雪、白色、浪漫等,对应检索到的氛围要素中则包含上述的雪、白色、浪漫等信息。
上述的第一预设区域,可理解为对上述交互信息进行投射的区域,包含前车窗等覆盖区域。
上述的至少一个场景参数,可理解为人机交互时的场景对应的参数,即不同的场景用不同的参数进行区分。通过将每个人机交互场景进行参数展示,便于用户快速确定当前场景对应的参数。
在一种可选的实施例中,将人机交互模式对应的交互信息投射到车辆上时,对应的投射时机(即什么时候将交互信息投射到车辆上)包含多种结果。可以是通过车辆的前视摄像头(与人机交互系统通信连接),对车辆前方位置预设距离阈值内的用户进行视频采集,得到包含用户的视频信息,基于视频信息,确定用户在预设距离阈值内的时间是否满足预设时间,在满足的情况下,响应于人机交互系统的投射指令,将交互信息投射到车辆上;还可以是,通过对车辆的驾驶状态进行监测,在车辆保持静止状态,且达到预设静止时间阈值时,响应于人机交互系统的投射指令,将交互信息投射到车辆上。综上,投射时机存在多种结果,在此不作唯一限定,可以是某一个投射时机,也可以是多个投射时机的并列结果。
在另一种可选的实施例中,将人机交互模式对应的交互信息投射到车辆上时,对应的投射方式同样包含多种结果。可以是,对投射区域进行可见度检测,确定投射区域的可见度是否满足预设可见度,若满足,则响应于人机交互系统的投射指令,将交互信息投射到投射区域上;若不满足,利用辅助投射装置,对投射区域进行光源优化,确保投射区域的可见度达到预设可见度,进而将交互信息投射到投射区域上。
步骤S106,将交互信息对应的选择信息投射到位于车辆外部的第二预设区域,其中,选择信息中包括至少一个选择项;
具体而言,上述的选择信息,可理解为对交互信息进行选择确定的提示方式。
简言之,可将选择信息看作遥控导引,基于遥控导引上特定的符号:上、下、左、右、确认、返回、模式切换等,对上述灯光信息列表、音乐信息列表进行自定义选择。
上述的第二预设区域,可理解为对选择信息进行投射的区域,也为用户对选择信息进行选择的区域。需要注意的是,第二预设区域位于车辆外侧,且处于交互信息投射方向的延伸范围内。
在一种可选的实施例中,可以根据人机交互系统的投射指令,将交互信息对应的选择信息投射到第二预设区域,使得用户可以在第二预设区域对交互信息进行选择。在将选择信息投射到第二预设区域的过程中,需利用车辆的前视摄像头,对第二预设区域的表面平整度进行采集,同时判断表面平整度是否满足预设平整度,若满足,则将交互信息投射至第二预设区域;反之,若不满足,可利用前视摄像头,对第二预设区域的预设周径范围进行图像采集,从而确定满足预设平整度的投射区域。其中,预设平整度,可理解为投射面的平整度至少可对选择信息进行清楚展示。
上述的至少一个选择项,包含了用户对交互信息的可选项数,需保证至少存在一个选择项,供用户进行选择。其中,一个选择项对应于上述一个场景参数。
步骤S108,确定人机交互模式对应的目标场景参数,其中,目标场景参数为用户通过至少一个选择项中的目标选择项对至少一个场景参数进行选择得到;
具体而言,上述的目标场景参数,可理解为基于车辆当前所处场景,用户选择得到的适用于当前所处场景的目标场景对应的参数。
在一种可选的实施例中,对目标场景参数的确定方式存在多种可能性。一方面,在第二预设区域对应的选择区内,用户可对第一预设区域对应的交互信息进行自定义选择,即用户通过选择信息中的特定符号,确定对应的灯光信息列表中的目标灯光信息、音乐信息列表中的目标音乐信息。需要注意的是,在用户确定好对应的目标灯光信息、目标音乐信息之后,需在目标灯光信息对应的第一投射位置、目标音乐信息对应的第二投射位置进行站位保持,示例性的,可在对应投射位置保持站位至少2s以上,便于车辆的前视摄像头对第一投射位置、第二投射位置进行采集,并将采集得到的投射位置图像回传至人机交互系统,利用视觉技术,对第一投射位置、第二投射位置进行识别,可确定对应的用户自定义选择的目标场景信息(包括目标灯光信息和目标音乐信息),通过对目标场景信息进行特征融合,用以得到最终的目标场景参数。
另一方面,在第二预设区域对应的选择区内,用户可对第一预设区域对应的预编辑场景进行自定义选择,即用户通过选择信息中的特定符号,确定对应的预编辑场景中的目标场景对应的参数。同时,用户需在目标场景参数对应的投射位置保持站位至少2s以上,便于车辆的前视摄像头对目标场景参数对应的投射位置进行采集。同时利用视觉技术,对投射位置进行是被,用于确定对应的用户自定义选择的目标场景参数(包括预编辑场景中的某一场景对应的参数)。
步骤S110,基于目标场景参数控制目标设备,其中,目标设备用于根据目标场景参数营造车辆当前所处场景的氛围。
具体而言,上述的目标设备,可理解为基于目标场景参数,营造车辆当前所处场景氛围的设备集合,可以是灯光设备、音乐设备等。其中,灯光设备包括但不局限于LED(light-emitting diode,发光二极管)多色灯、车辆前照灯等设备,音乐设备包括但不局限于外放音响等设备。需要注意的是,凡具备灯光照射功能、音乐播放功能的设备均可作为上述目标设备。
在一种可选的实施例中,基于人机交互系统的视觉技术,确定目标场景参数之后,人机交互系统可生成控制指令,基于控制指令,人机交互系统对目标设备进行控制驱动,即基于目标场景参数,目标设备营造车辆当前所处场景的氛围。其中,人机交互系统与目标设备通信连接,两者之间通过数据传输协议进行指令传输。
在另一种可选的实施例中,还可对目标设备进行应援式控制。可向人机交互系统中嵌入用户状态分析系统,即对用户的姿态信息和表情信息进行采集,进而对姿态信息和表情信息进行分析(不局限于分析手段,可以是算法分析、调研分析、模型分析等),得到用户适应于当前所处场景的状态参数,同时,确定车辆当前所处场景的氛围参数阈值,判断用户的状态参数是否达到氛围参数阈值,若没达到,则可对目标设备进行辅助的应援式控制,即通过控制灯光设备的灯光闪烁频率、灯光显示亮度,控制音乐设备的音乐播放速度、播放音效等手段,对当前所处场景进行应援式的渲染,提高用户对车辆当前所处场景的适应度,使的人与车、车与景、人与景更好的融为一体。
综上,基于人机交互系统,对交互信息进行第一预设区域投射、对选择信息进行第二预设区域投射,用户可根据车辆当前所处场景,利用第二预设区域的选择信息对第一预设区域的交互信息进行确定,使得确定对应的目标场景参数,进而利用目标场景参数控制目标设备,营造车辆当前所处场景的氛围。达到了基于人机交互模式,用户在车外进行人-车之间的光声效果互动,营造多功能的氛围感,带给用户较为惊喜的户外体验的技术效果。
可选地,该方法还包括:响应于接收到用户在位于车辆外部的第三预设区域中做出的预设姿势,从至少一个选择项中确定出预设姿势对应的目标选择项,其中,车辆外部的第三预设区域与车辆外部的第二预设区域之间的间隔小于预设距离;从至少一个场景参数中确定出目标选择项对应的目标场景参数。
具体而言,上述的第三预设区域,可理解为动作识别区,即车辆前视摄像头需要对第三预设区域内用户做出的某种姿势进行识别,用以确定该姿势对应的用户选择。
上述的预设姿势,即为用户在第三预设区域内摆出的姿势。需要注意的是,用户摆出的姿势需要维持数秒钟,便于前视摄像头对该姿势进行采集分析。同时,预设姿势,不限于手部姿势、腿部姿势、整体姿势等。
上述的目标选择项,可理解为用户从至少一个选择项中,确定的预设姿势对应的交互信息项。
上述的目标场景参数,可理解为基于目标选择项,用户从至少一个场景参数中确定的目标选择项对应的场景参数。
在一种可选的实施例中,用户可以通过云端的模式编辑,对用户的手势或姿态进行编辑,同时将编辑好的手势录入手势库、将编辑好的姿态录入姿态库。同时对手势库和姿态库中的编辑信息进行自定义匹配,并进行不断训练。示例性的,可以将手势库中的信息自定义为用户定制的灯光、也可以将手势库中的信息自定义为用户定制的音乐,可以将姿态库中的信息自定义为用户定制的灯光、也可以将姿态库中的信息自定义为用户定制的音乐。在此不作两两之间的唯一定义。进而,车辆的前视摄像头通过对第三预设区域中用户的预设姿势进行采集,并基于手势库,和/或姿态库,对预设姿势进行筛选,可得到预设姿势对应的灯光信息,和/或音乐信息,可对应于上述的目标选择项。进而确定目标选择项对应的目标场景参数。
在另一种可选的实施例中,由上述可知,一个选择项对应于上述一个场景参数。因此,可构建选择项-场景参数对应序列。在确定目标选择项对应的目标场景参数过程中,通过将目标选择项输入构建好的选择项-场景参数对应序列,可确定目标选择项对应的场景参数,即为上述目标场景参数。
通过对用户在第三预设区域的手势,和/或姿态进行识别,可基于已经训练好的不同手势库,和/或姿态库确定用户的预设姿势对应的目标场景参数,使得基于目标场景参数,营造车辆当前所处场景的氛围,实现了对用户进行手势姿态的交互意图识别的目的。
可选地,该方法还包括:响应于接收到用户位于第二预设区域中的预设位置,从至少一个选择项中确定出预设位置对应的目标选择项;从至少一个场景参数中确定出目标选择项对应的目标场景参数。
具体而言,上述的预设位置,可理解为用户在第二预设区域中的所在位置。
在一种可选的实施例中,车辆的前视摄像头可对用户的预设位置进行采集,并基于至少一个选择项,对采集得到的预设位置进行匹配,确定预设位置对应的目标选择项。其中,上述至少一个选择项的项列表可通过人机交互系统的中控屏进行显示,人机交互系统对前视摄像头采集得到的预设位置进行分析,可确定预设位置在项列表的第几顺位,进而根据该顺位匹配得到对应的目标选择项。需要注意的是,可通过上述的模式切换的特定符号,对灯光模式和音乐模式进行切换选择。最终可得到用户自定义选择的氛围数据。
上述目标选择项,即为用户根据车辆当前所处场景自定义选择的氛围数据(包括灯光信息和音乐信息)。
基于上述构建好的选择项-场景参数对应序列,确定目标选择项对应的目标场景参数,上述已进行详细说明,在此不作重复赘述。
可选地,人机交互模式包括:第一预设模式,启动车辆的人机交互模式,包括:响应于接收到用户的预设姿势,启动车辆的第一预设模式,其中,第一预设模式为用户被动触发的模式。
人机交互模式包括:第二预设模式,启动车辆的人机交互模式,包括:响应于接收到终端的第一指令,启动车辆的第二预设模式,其中,第二预设模式为用户主动触发的单人交互模式。
人机交互模式包括:第三预设模式,启动车辆的人机交互模式,包括:响应于接收到终端的第二指令,启动车辆的第三预设模式,其中,第三预设模式为用户主动触发的多人交互模式。
具体而言,上述的第一预设模式为惊喜模式,可理解为只支持对应的外部姿态交互(可以在手势和姿态库中选择对应的姿态,用来触发用户设定好的音乐和LED灯光效果)。由于惊喜模式为用户在无目的性的情况下对交互系统进行触发得到的结果,并非主观性的,因此,第一预设模式也可理解为用户被动触发的模式。
上述的第二预设模式为舞池模式,可理解为支持外部姿态模式和外部LED交互模式(用户可以通过在选择区的交互,或者利用姿势库中的标准动作进行音乐和灯光的选择)。由于舞池模式为用户主观性的对交互系统进行指令触发得到的结果,因此,第二预设模式也可理解为用户主动触发的单人交互模式。
上述的第三预设模式为派对模式,可理解为支持双人姿势交互(可以通过双人比心,对战等双人姿态触发对应的音乐和LED灯光来进行功能切换)。同理,由于派对模式为用户主观性的对交互系统进行指令触发得到的结果,因此,第三预设模式也可理解为用户主动触发的多人交互模式。
上述的第一指令,用于启动车辆的人机交互模式进入舞池模式。
上述的第二指令,用于启动车辆的人机交互模式进入派对模式。
图2是根据本发明实施例的一种车辆的人机交互方法的效果设定流程示意图。如图2所示:基于OTA(Over-the-Air Technology,空中下载技术),用户首先通过将最新的手势库信息和姿态库信息同步至车机;同时,利用手机或车机编辑手势和姿态触发的对应灯光和音乐;进而,用户可设置灯光和音乐的对应模式,包括惊喜模式、舞池模式和派对模式。
其中:惊喜模式,对应的触发方式为,只支持对应的外部姿态信息交互,即可以在手势和姿态库中选择对应的姿态,用来触发用户设定好的音乐和LED灯光效果,使得选择对应的音乐和灯光效果;舞池模式,对应的触发方式为,支持外部姿态信息交互和外部LED信息交互(在与外部LED信息交互之前,对外部LED灯进行亮度状态判断),即用户可以通过在选择区的交互,或者利用姿势库中的标准动作进行音乐和灯光的选择,使得选择对应的音乐和灯光效果;派对模式,对应的触发方式为,支持双人姿态交互,即可以通过双人比心,对战等双人姿态触发对应的音乐和LED灯光来进行功能切换,使得选择对应的音乐和灯光效果;在确认好上述三种模式及其触发方式后,可确认选择对应的音乐和灯光效果;最终再次确认交互系统进入的模式完成设定。
在一种可选的实施例中,车辆处于启机静止状态时,用户位于车辆外部,且车辆前视摄像头识别到了车外的用户做出的某一动作,其中,该动作可用于触发车辆的交互系统进入惊喜模式(即无需用户刻意开启交互模式,而是交互系统对用户的动作进行识别后,进入“惊喜”模式)。在确认交互系统进入惊喜模式的情况下,可通过将最新的手势库信息和姿态库信息同步至车机,同时用户用手机或车机编辑手势和姿态触发的对应灯光和音乐。此时,通过车辆的内部投屏装置,可将手势和姿态库的信息投射于第一预设区域,同时支持用户在第二预设区域中选择对应的姿态,车辆前视摄像头对用户选择的姿态进行采集后,交互系统可对用户选择的姿态进行匹配,进而根据匹配结果触发用户设定好的音乐和LED灯光效果,使得利用外放音响对音乐进行播放、利用多色LED等灯光显示装置对LED灯光进行显示,实现用户在车外对光声效果进行互动。
在另一种可选的实施例中,用户可通过手机向车辆终端发送第一指令,用于启动车辆的交互系统进入舞池模式。在确认交互系统进入舞池模式的情况下,可通过将最新的手势库信息和姿态库信息同步至车机,同时用户用手机或车机编辑手势和姿态触发的对应灯光和音乐。为了满足舞池模式的氛围需求,还需对车辆当前所处环境的亮度状态进行判断,通过将亮度状态反馈至交互系统,在上述根据匹配结果触发用户设定好的音乐和LED灯光效果之后,还需通过交互系统对外部LED灯光信息进行交互,用以确定对应的音乐和灯光效果,实现动态舞池的氛围功能。
在其他一种可选的实施例中,用户可通过手机向车辆终端发送第二指令,用于启动车辆的交互系统进入派对模式。在确认交互系统进入派对模式的情况下,可通过将最新的手势库信息和姿态库信息同步至车机,同时用户用手机或车机编辑手势和姿态触发的对应灯光和音乐。为了满足派对模式的氛围需求,在将手势和姿态库的信息投射于第一预设区域后,支持多个用户在第三预设区域中,通过一系列包括双人比心,对战等交互姿势,触发对应的音乐和LED灯光来进行功能切换。示例性的,用户在第三预设区域中做出双人比心的动作,可进行音乐-灯光的功能切换;用户在第三预设区域中做出双人对战的动作,可进行灯光-音乐的功能切换等,通过对音乐和LED灯光进行功能切换,可选择对应的音乐和灯光效果,实现惊喜派对的氛围功能。
可选地,目标设备包括:辅助灯光设备,基于目标场景参数驱动目标设备,步骤S110包括:获取车辆当前所处场景的当前光线信息;基于当前光线信息和预设光线信息控制辅助灯光设备。
可选地,基于当前光线信息和预设光线信息控制辅助灯光设备,包括:在当前光线信息小于预设光线信息的情况下,开启辅助灯光设备;在当前光线信息大于或等于预设光线信息的情况下,禁止开启辅助灯光设备。
具体而言,上述的辅助灯光设备,可理解为用于对车辆当前所处环境的光线亮度进行辅助控制,包含但不局限于车辆前照灯等辅助灯光设备。
上述的当前光线信息,反映了车辆在当前所处场景的光线亮度。
上述的预设光线信息,可理解为基于交互系统预先设置的光线亮度阈值,要求至少满足可对车外环境进行清楚识别。
在一种可选的实施例中,可通过前视摄像头对车辆当前所处环境的光线进行判断,在当前光线信息小于预设光线信息的情况下,说明当前光线暂无法支持对车外环境进行识别,可开启辅助灯光设备,进行灯光补充;反之,在当前光线信息大于或等于预设光线信息的情况下,说明当前光线可支持对车外环境进行识别,无需开启辅助灯光设备。
在另一种可选的实施例中,获取车辆当前所处场景的当前光线信息存在多种获取方式。可以是,利用安装在车辆外围的光照传感器对车辆当前所处环境的光线进行监测,从而将监测数据回传至交互系统;还可以是,调用车辆的当前导航系统,利用导航系统对车辆当前所处环境的光线进行信息筛选。
为了对车辆的人机交互方法进行详细的图示性说明,可如下所述:
图3是根据本发明实施例的一种车辆的人机交互方法的车外信息交互图。如图3所示,信息区,为上述的第一预设区域,即交互信息进行投射的区域,包含前车窗等覆盖区域;选择区,为上述的第二预设区域,即对选择信息进行投射的区域,也为用户对选择信息进行选择的区域;动作识别区,为上述的第三预设区域,即对用户做出的某种姿势进行识别的区域。
图4是根据本发明实施例的一种车辆的人机交互方法的车外场景交互系统架构图。如图4所示,该交互系统架构图包括云端模块、多媒体控制模块。其中,云端模块,可通过手机对交互模式进行模式编辑,多媒体控制模块,可通过车机对交互模式进行模式编辑,同时通过手机和车机同步最新的手势库和姿态库。利用云端模块训练好的手势库和姿势库,编辑和定义对应的音乐或灯光,使得编辑好的音乐构建音乐库、编辑好的灯光构建灯光库。在启动车外交互功能之后,车辆的前视摄像头可对用户进行选择识别、手势识别、姿态识别,从而根据不同的识别结果进入对应的模式管理。其中,每个交互模式都包括选择区管理、信息区管理、灯光管理以及音乐管理。具体的,选择区管理和信息区管理负责投射驱动,即将信息区进行车窗投射、将选择区进行地面投射;灯光管理负责驱动LED多色灯和车辆的前照灯;音乐管理负责驱动外放音响。
图5是根据本发明实施例的一种车辆的人机交互方法的用户场景使用的流程图。
如图5所示:
步骤S502,通过车辆或者手机启动车外交互功能;
步骤S504,根据用户设定好的模式进入对应功能;
步骤S506,通过前视摄像头对光线进行判断,确认是否需要打开前照灯;
步骤S508,除惊喜模式对应的被动触发方式外,在用户主动触发交互指令,使得车辆的交互模式进入舞池模式或派对模式之后,需要开始通过前窗信息投射显示对应的信息提示;
步骤S510,用户可以通过在动作识别区做出对应的肢体动作,或者在选择区的不同位置站位,进行音乐和灯光的选择;
步骤S512,通过车辆外部的LED多色灯和外部音响等,营造用户指定的灯光和音乐氛围。
综上,利用人工智能的视觉技术作为交互主渠道,通过对用户的信息选取动作(即选择区的不同站位)、用户手势、双人肢体动作等进行前视摄像头的视觉识别,通过内部投屏装置、外部多色LED灯、外放音响等实现动态舞池、惊喜派对等氛围功能,带给用户惊喜的户外体验。
实施例2
根据本发明实施例,还提供了一种车辆的人机交互装置,该装置可以执行上述实施例1中提供的一种车辆的人机交互方法,具体实现方式和优选应用场景与上述实施例1相同,在此不做赘述。
图6是根据本发明实施例的一种车辆的人机交互装置的示意图,如图6所示,该装置包括:
模式启动模块602,用于启动车辆的人机交互模式,其中,人机交互模式用于表示车辆与位于车辆外部的用户之间进行交互的模式;
交互信息投射模块604,用于将人机交互模式对应的交互信息投射到车辆上的第一预设区域,其中,交互信息中包括至少一个场景参数;
选择信息投射模块606,用于将交互信息对应的选择信息投射到位于车辆外部的第二预设区域,其中,选择信息中包括至少一个选择项;
场景参数确定模块608,用于确定人机交互模式对应的目标场景参数,其中,目标场景参数为用户通过至少一个选择项中的目标选择项对至少一个场景参数进行选择得到;
设备控制模块610,用于基于目标场景参数控制目标设备,其中,目标设备用于根据目标场景参数营造车辆当前所处场景的氛围。
可选地,该装置还包括:预设姿势确定模块,用于响应于接收到用户在位于车辆外部的第三预设区域中做出的预设姿势,从至少一个选择项中确定出预设姿势对应的目标选择项,其中,车辆外部的第三预设区域与车辆外部的第二预设区域之间的间隔小于预设距离;场景参数确定模块,用于从至少一个场景参数中确定出目标选择项对应的目标场景参数。
可选地,该装置还包括:预设位置确定模块,用于响应于接收到用户位于第二预设区域中的预设位置,从至少一个选择项中确定出预设位置对应的目标选择项;场景参数确定模块,从至少一个场景参数中确定出目标选择项对应的目标场景参数。
可选地,模式启动模块602,包括:第一模式启动模块,用于响应于接收到用户的预设姿势,启动车辆的第一预设模式,其中,第一预设模式为用户被动触发的模式。
可选地,模式启动模块602,包括:第二模式启动模块,用于响应于接收到终端的第一指令,启动车辆的第二预设模式,其中,第二预设模式为用户主动触发的单人交互模式。
可选地,模式启动模块602,包括:第三模式启动模块,用于响应于接收到终端的第二指令,启动车辆的第三预设模式,其中,第三预设模式为用户主动触发的多人交互模式。
可选地,设备控制模块610,包括:光线获取模块,用于获取车辆当前所处场景的当前光线信息;辅助灯光设备控制模块,用于基于当前光线信息和预设光线信息控制辅助灯光设备。
可选地,辅助灯光设备控制模块,包括:设备开启单元,用于在当前光线信息小于预设光线信息的情况下,开启辅助灯光设备;设备关闭单元,用于在当前光线信息大于或等于预设光线信息的情况下,禁止开启辅助灯光设备。
实施例3
根据本发明实施例,还提供了一种车辆,包括一个或多个处理器、存储装置,存储器中存储有计算机程序,处理器被设置为运行计算机程序以执行上述的车辆的人机交互方法。
实施例4
根据本发明实施例,还提供了一种计算机可读存储介质,计算机可读存储介质包括存储的程序,其中,在程序运行时控制计算机可读存储介质所在设备执行上述的车辆的人机交互方法。
实施例5
根据本发明实施例,还提供了一种处理器,处理器用于运行程序,其中,程序运行时执行上述的车辆的人机交互方法。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种车辆的人机交互方法,其特征在于,包括:
启动车辆的人机交互模式,其中,所述人机交互模式用于表示所述车辆与位于所述车辆外部的用户之间进行交互的模式;
将所述人机交互模式对应的交互信息投射到所述车辆上的第一预设区域,其中,所述交互信息中包括至少一个场景参数;
将所述交互信息对应的选择信息投射到位于所述车辆外部的第二预设区域,其中,所述选择信息中包括至少一个选择项;
确定所述人机交互模式对应的目标场景参数,其中,所述目标场景参数为所述用户通过所述至少一个选择项中的目标选择项对所述至少一个场景参数进行选择得到;
基于所述目标场景参数控制目标设备,其中,所述目标设备用于根据所述目标场景参数营造所述车辆当前所处场景的氛围。
2.根据权利要求1所述的车辆的人机交互方法,其特征在于,所述方法还包括:
响应于接收到所述用户在位于所述车辆外部的第三预设区域中做出的预设姿势,从所述至少一个选择项中确定出所述预设姿势对应的所述目标选择项,其中,所述车辆外部的第三预设区域与所述车辆外部的第二预设区域之间的间隔小于预设距离;
从所述至少一个场景参数中确定出所述目标选择项对应的所述目标场景参数。
3.根据权利要求1所述的车辆的人机交互方法,其特征在于,所述方法还包括:
响应于接收到所述用户位于所述第二预设区域中的预设位置,从所述至少一个选择项中确定出所述预设位置对应的所述目标选择项;
从所述至少一个场景参数中确定出所述目标选择项对应的所述目标场景参数。
4.根据权利要求1所述的车辆的人机交互方法,其特征在于,所述人机交互模式包括:第一预设模式,启动车辆的人机交互模式,包括:
响应于接收到所述用户的预设姿势,启动所述车辆的所述第一预设模式,其中,所述第一预设模式为所述用户被动触发的模式。
5.根据权利要求1所述的车辆的人机交互方法,其特征在于,所述人机交互模式包括:第二预设模式,启动车辆的人机交互模式,包括:
响应于接收到终端的第一指令,启动所述车辆的所述第二预设模式,其中,所述第二预设模式为所述用户主动触发的单人交互模式。
6.根据权利要求1所述的车辆的人机交互方法,其特征在于,所述人机交互模式包括:第三预设模式,启动车辆的人机交互模式,包括:
响应于接收到终端的第二指令,启动所述车辆的所述第三预设模式,其中,所述第三预设模式为所述用户主动触发的多人交互模式。
7.根据权利要求1所述的车辆的人机交互方法,其特征在于,所述目标设备包括:辅助灯光设备,基于所述目标场景参数驱动目标设备,包括:
获取所述车辆当前所处场景的当前光线信息;
基于所述当前光线信息和预设光线信息控制所述辅助灯光设备。
8.根据权利要求7所述的车辆的人机交互方法,其特征在于,基于所述当前光线信息和预设光线信息控制所述辅助灯光设备,包括:
在所述当前光线信息小于所述预设光线信息的情况下,开启所述辅助灯光设备;
在所述当前光线信息大于或等于所述预设光线信息的情况下,禁止开启所述辅助灯光设备。
9.一种非易失性存储介质,其特征在于,所述非易失性存储介质包括存储的程序,其中,在所述程序运行时控制所在设备的处理器中执行权利要求1-8中任意一项所述的车辆的人机交互方法。
10.一种车辆,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器执行权利要求1至8中任意一项所述的车辆的人机交互方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310014311.2A CN115782908A (zh) | 2023-01-05 | 2023-01-05 | 车辆的人机交互方法、非易失性存储介质及车辆 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310014311.2A CN115782908A (zh) | 2023-01-05 | 2023-01-05 | 车辆的人机交互方法、非易失性存储介质及车辆 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115782908A true CN115782908A (zh) | 2023-03-14 |
Family
ID=85428576
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310014311.2A Pending CN115782908A (zh) | 2023-01-05 | 2023-01-05 | 车辆的人机交互方法、非易失性存储介质及车辆 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115782908A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116383028A (zh) * | 2023-06-05 | 2023-07-04 | 北京博创联动科技有限公司 | 基于车载智能终端的车辆人机交互系统 |
-
2023
- 2023-01-05 CN CN202310014311.2A patent/CN115782908A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116383028A (zh) * | 2023-06-05 | 2023-07-04 | 北京博创联动科技有限公司 | 基于车载智能终端的车辆人机交互系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2376207B1 (en) | Method and system for generating data for controlling a system for rendering at least one signal | |
US20190069375A1 (en) | Use of embedded data within multimedia content to control lighting | |
WO2017173976A1 (zh) | 一种实现多维控制的方法、智能终端及控制器 | |
CN107006100B (zh) | 控制照明动态 | |
CN103076877A (zh) | 使用姿势与车辆内的移动装置进行交互 | |
KR20100114081A (ko) | 환경 내의 사교적 설정 및 무드에 적합한 분위기를 자동 생성하기 위한 시스템 및 방법 | |
JP2011503779A (ja) | 家庭用娯楽システムに利用可能な照明効果の自動識別を備えた照明管理システム | |
US10560994B2 (en) | Lighting control apparatus, corresponding method and computer program product | |
CN112913330B (zh) | 选择一种从视频内容中提取颜色以产生光效果的方法 | |
CN115782908A (zh) | 车辆的人机交互方法、非易失性存储介质及车辆 | |
CN112913331B (zh) | 根据视频和音频权重而基于视频和音频信息来确定光效果 | |
CN107368491B (zh) | 影像制作系统及方法 | |
CN113055662A (zh) | 一种ai互动灯光艺术装置 | |
CN115136174A (zh) | 增强现实顾客识别系统和方法 | |
CN113173179B (zh) | 一种驾驶模式切换提示方法、装置及车辆 | |
CN114937296A (zh) | 基于用户识别的声光匹配方法、系统、设备及存储介质 | |
EP3940542A1 (en) | Content-presentation system, output device, and information processing method | |
CN105913036B (zh) | 一种无人机识别方法及装置 | |
CN108491067B (zh) | 智能扇子控制方法、智能扇子及计算机可读存储介质 | |
CN113342217A (zh) | 控制方法、设备、系统及存储介质 | |
CN106773815A (zh) | 数字智能控制方法、装置和中控系统 | |
CN111448847B (zh) | 基于源图像控制多个光源的照明控制系统及其方法 | |
CN113539010A (zh) | 一种驾驶模拟方法、装置、设备及存储介质 | |
KR102636480B1 (ko) | 인공지능 영상생성 시스템 | |
CN117794029B (zh) | 发光设备及灯效发光区域编辑方法、装置、介质和产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |