CN116279552B - 一种车辆座舱半主动式交互方法、装置及车辆 - Google Patents

一种车辆座舱半主动式交互方法、装置及车辆 Download PDF

Info

Publication number
CN116279552B
CN116279552B CN202310518891.9A CN202310518891A CN116279552B CN 116279552 B CN116279552 B CN 116279552B CN 202310518891 A CN202310518891 A CN 202310518891A CN 116279552 B CN116279552 B CN 116279552B
Authority
CN
China
Prior art keywords
information
interaction
target
controllable
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN202310518891.9A
Other languages
English (en)
Other versions
CN116279552A (zh
Inventor
贾鑫
王祖耀
郭岩
徐雅凡
翁佳怡
凌嘉焕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University of Science and Technology ZUST
Original Assignee
Zhejiang University of Science and Technology ZUST
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University of Science and Technology ZUST filed Critical Zhejiang University of Science and Technology ZUST
Priority to CN202310518891.9A priority Critical patent/CN116279552B/zh
Publication of CN116279552A publication Critical patent/CN116279552A/zh
Application granted granted Critical
Publication of CN116279552B publication Critical patent/CN116279552B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373Voice control
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Human Computer Interaction (AREA)
  • Transportation (AREA)
  • Selective Calling Equipment (AREA)

Abstract

本发明提供了一种车辆座舱半主动式交互方法、装置及车辆,涉及人机交互技术领域,所述车辆座舱半主动式交互方法包括:响应于第一交互装置产生的第一交互信息,确定第一目标可控设备和第一指令信息;接收信息采集装置发出全局信息;根据全局信息得到预测可控设备信息;将预测可控设备信息发送给第二交互装置;响应于第二交互装置产生的第二交互信息,确定第二目标可控设备;根据第二目标可控设备和全局信息得到预测指令信息;根据所述第一指令信息和所述预测指令信息控制所述可控设备的运行。本发明通过将第一交互装置和第二交互装置有机结合,实现人车之间高效且精准的半主动式交互,有利于保障人车交互过程的高效性和安全性。

Description

一种车辆座舱半主动式交互方法、装置及车辆
技术领域
本发明涉及人机交互技术领域,具体而言,涉及一种车辆座舱半主动式交互方法、装置及车辆。
背景技术
车辆是现阶段最常见的交通工具之一,为人类生产生活提供了极大的便利。车辆除了基础的行驶功能外,往往还搭载了众多可进行交互的辅助可控设备(如车灯、空调、车载播放器等),用来提升人员在驾驶或乘坐车辆过程中的舒适度。
传统的人车交互采用单一的实体交互界面,车辆座舱内遍布各类实体按键和旋钮,对于经验丰富的驾驶人员来说,在行驶过程中可以通过实体交互界面实现快速的盲操。但是由于座舱内实体按键过多,需要花费大量时间去熟悉记忆,驾驶人员使用传统的交互方法时学习成本过高,对于不熟悉对应关系的驾驶人员来说,容易在驾驶过程中误操作,可能影响驾驶安全性。近年来,随着屏幕交互、语音交互、视觉交互和座舱主动交互等技术的发展,人车交互方法越来越智能化、多元化,以屏幕交互界面为主的交互方式逐渐取代传统的实体交互界面。但是,采用这种交互方式往往需要较长时间地占据驾驶人员的视觉和肢体,交互效率较低且容易分散驾驶人员的注意力。除此之外,依托于座舱内的人员情绪、人员动作等信息进行主动交互的方法可靠性较差,误触发可控设备的概率也非常高,不利于保证驾驶过程的安全性。
发明内容
本发明解决的问题是如何提升人车交互过程中的效率和安全性。
为解决上述问题,本发明提供一种车辆座舱半主动式交互方法,应用于车辆,所述车辆包括多个可控设备、人车交互装置和信息采集装置;所述人车交互装置包括第一交互装置和第二交互装置;所述车辆座舱半主动式交互方法包括:
响应于所述第一交互装置根据所述车辆中目标人员的第一交互行为产生的第一交互信息,确定第一目标可控设备和对应的第一指令信息,其中,所述第一交互装置包括与单个所述可控设备关联的单级键钮交互装置;
接收所述信息采集装置发出的全局信息,所述全局信息包括车辆运行信息、环境信息和人员信息;
根据所述全局信息,预测所述目标人员期望进行交互的所述可控设备,得到预测可控设备信息,所述预测可控设备信息包括预测可控设备对应的目标概率等级;
将所述预测可控设备信息发送给所述第二交互装置,以令所述第二交互装置按照所述目标概率等级从高到低的顺序展示所述预测可控设备信息,其中,所述第二交互装置包括与多个所述可控设备关联的复用键钮交互装置、屏幕交互装置和语音交互装置;
响应于所述第二交互装置根据所述目标人员的第二交互行为产生的第二交互信息,确定第二目标可控设备;
根据所述第二目标可控设备和所述全局信息,得到预测指令信息;
根据所述第一指令信息和所述预测指令信息控制所述可控设备的运行,包括根据所述第一指令信息控制所述第一目标可控设备的运行,以及根据所述预测指令信息控制所述第二目标可控设备的运行。
可选地,在所述根据所述预测指令信息控制所述第二目标可控设备的运行之后,还包括:
响应于所述第二交互装置根据所述目标人员的第三交互行为产生的第三交互信息,确定所述第二目标可控设备对应的第二指令信息;
根据所述第二指令信息,控制所述第二目标可控设备的运行。
可选地,所述车辆运行信息包括运行时间信息和路径信息;所述人员信息包括人员身份信息;所述根据所述全局信息,预测所述目标人员期望进行交互的所述可控设备,得到预测可控设备信息,包括:
将所述运行时间信息、所述路径信息和所述人员身份信息,输入到预先训练过的场景识别模型中,得到预测场景;
根据所述预测场景和所述环境信息,得到所述可控设备对应的所述目标概率等级;
根据所述目标概率等级,确定所述预测可控设备,得到所述可控设备信息,包括将所述目标概率等级大于预设概率阈值的所述可控设备,作为所述预测可控设备。
可选地,所述根据所述预测场景和所述环境信息,得到所述可控设备对应的所述目标概率等级,包括:
基于所述预测场景和预设的场景模板信息,确定所述预设场景中所述可控设备的概率等级;
基于所述环境信息,修正所述概率等级,得到目标概率等级,包括当所述环境信息满足预设的触发条件时,在所述概率等级的基础上提高或降低预设等级,得到对应的所述可控设备的所述目标概率等级。
可选地,在所述将所述运行时间信息、所述路径信息和所述人员身份信息,输入到预先训练过的场景识别模型中,得到预测场景之前,还包括:
接收所述第二交互装置根据所述目标人员的第四交互行为产生的初始设置信息,所述初始设置信息包括多个初始场景对应的运行时间设置信息、路径设置信息和人员身份设置信息;
根据所述初始场景,构建初始场景识别模型;
利用所述初始设置信息,对所述初始场景识别模型进行训练,得到所述场景识别模型。
可选地,所述车辆运行信息还包括所述可控设备对应的设备状态,所述设备状态包括开启状态和关闭状态;所述根据所述第二目标可控设备和所述全局信息,得到预测指令信息,包括:
获取所述第二目标可控设备的指令集,所述指令集包括开启指令、关闭指令、增大指令、减小指令和切换子选项指令中的至少两项;
当所述设备状态为所述关闭状态时,将所述开启指令对应的优先等级设置为最高;
当所述设备状态为所述开启状态时,判断所述指令集中指令的数量是否大于2;
若是,则将所述指令集、所述预测场景和所述环境信息输入到预先训练过的等级评估模型中,得到所述指令集中所有所述指令对应的所述优先等级;
若否,则将所述关闭指令对应的优先等级设置为最高;
基于所述指令及其对应的所述优先等级,得到所述预测指令信息,所述预测指令信息包括所述优先等级最高的所述指令。
可选地,在所述响应于所述第二交互装置根据所述目标人员的第三交互行为产生的第三交互信息,确定所述第二目标可控设备对应的第二指令信息之前,还包括:
将所述指令和所述优先等级,发送给所述第二交互装置,以令所述第二交互装置按照所述优先等级从高到低的顺序展示所述指令。
本发明提供的车辆座舱半主动式交互方法设置了两种交互方式供目标人员选择,第一种是与单个可控设备关联的第一交互装置(如单级键钮交互装置)进行人车交互,由于第一交互装置与可控设备具有单一的关联性,得到的第一交互信息中就可以包含第一目标可控设备以及目标人员想要对该设备的具体操作意图(即第一指令信息);根据第一指令信息控制第一目标可控设备的运行,在紧急情况下可以通过快速的盲操,来实现目标人员的需求,交互效率高且盲操性好。第二种是与多个可控设备关联的第二交互装置进行人车交互,通过接收信息采集装置发出的全局信息,全方位掌握车辆与人员的状态;然后根据全局信息,预测目标人员期望进行交互的可控设备,能够兼容目标人员针对同一需求的多种不同选择,极大地提升了预测结果的容错率;通过将预测可控设备信息发送给第二交互装置,令其展示预测可控设备信息,提供预测信息便于目标人员选择,便于目标人员快速锁定目标可控设备,进一步提高交互效率;在“第二目标可控设备的确认阶段”采用被动交互方式,通过响应第二交互装置根据目标人员的第二交互行为产生的第二交互信息,确定第二目标可控设备,有利于保证交互结果的准确性、可靠性,特别是当前环境不利于使用语音交互装置和屏幕交互装置时,还可以通过复用键钮交互装置进行盲操,确定第二目标可控设备,进一步提高交互的安全性;通过第二目标可控设备和全局信息可以较为准确的预测目标人员的需求,得到的预测指令信息可靠性高;在“第二目标可控设备的具体指令确认和执行阶段”采用主动交互方式,无需目标人员对预测指令信息进行确认,直接根据预测指令信息控制第二目标设备的运行。由于目标可控设备众多,第二目标可控设备预测结果的准确性相较于预测指令的准确性要低很多。与现有的基于目标人员情绪、肢体动作等信息进行主动交互的方法相比,采用先被动后主动的交互方式,在提高交互效率的同时还能够降低可控设备误触发的概率,保障驾驶过程的安全性。本实施例提供的两种交互方式有机结合,共同构成半主动式人车交互方法,便于目标人员根据实际情况或者意愿选择,实现高效、安全的人车交互。
本发明还提供一种车辆座舱半主动式交互装置,应用于车辆,所述车辆包括多个可控设备、人车交互装置和信息采集装置;所述人车交互装置包括第一交互装置和第二交互装置;所述车辆座舱半主动式交互装置包括:
第一确定模块,其用于响应于所述第一交互装置根据所述车辆中目标人员的第一交互行为产生的第一交互信息,确定第一目标可控设备和对应的第一指令信息,其中,所述第一交互装置包括与单个所述可控设备关联的单级键钮交互装置;
信息接收模块,其用于接收所述信息采集装置发出的全局信息,所述全局信息包括车辆运行信息、环境信息和人员信息;
第一预测模块,其用于根据所述全局信息,预测所述目标人员期望进行交互的所述可控设备,得到预测可控设备信息,所述预测可控设备信息包括预测可控设备对应的目标概率等级;
信息发送模块,其用于将所述预测可控设备信息发送给所述第二交互装置,以令所述第二交互装置按照所述目标概率等级从高到低的顺序展示所述预测可控设备信息,其中,所述第二交互装置包括与多个所述可控设备关联的复用键钮交互装置、屏幕交互装置和语音交互装置;
第二确定模块,其用于响应于所述第二交互装置根据所述目标人员的第二交互行为产生的第二交互信息,确定第二目标可控设备;
第二预测模块,其用于根据所述第二目标可控设备和所述全局信息,得到预测指令信息;
设备控制模块,其用于根据所述第一指令信息和所述预测指令信息控制所述可控设备的运行,包括根据所述第一指令信息控制所述第一目标可控设备的运行,以及根据所述预测指令信息控制所述第二目标可控设备的运行。
本发明提供的车辆座舱半主动式交互装置与车辆座舱半主动式交互方法相对于现有技术的优势相同,在此不再赘述。
本发明还提供一种车辆,包括:多个可控设备、人车交互装置、信息采集装置和控制装置,所述控制装置用于实现如上所述的车辆座舱半主动式交互方法。
可选地,所述人车交互装置包括第一交互装置和第二交互装置,所述第一交互装置包括与所述控制装置单向通信的单级键钮交互装置;所述第二交互装置包括分别与所述控制装置双向通信的复用键钮交互装置、屏幕交互装置和语音交互装置;所述复用键钮交互装置包括设备切换旋钮和指令切换旋钮,当所述设备切换旋钮顺时针旋转时,用于按照目标概率等级从高到低的顺序,令所述第二交互装置展示预测可控设备信息;当所述指令切换旋钮顺时针旋转时,用于按照优先等级从高到低的顺序,令所述第二交互装置展示指令。
本发明提供的车辆与车辆座舱半主动式交互方法相对于现有技术的优势相同,在此不再赘述。
附图说明
图1为本发明实施例的车辆座舱半主动式交互方法的流程图;
图2为本发明实施例的车辆座舱半主动式交互方法的另一流程图;
图3为本发明实施例的车辆结构示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更为明显易懂,下面结合附图对本发明的具体实施例做详细的说明。虽然附图中显示了本发明的某些实施例,然而应当理解的是,本发明可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本发明。应当理解的是,本发明的附图及实施例仅用于示例性作用,并非用于限制本发明的保护范围。
应当理解,本发明的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本发明的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”;术语“可选地”表示“可选的实施例”。其他术语的相关定义将在下文描述中给出。需要注意,本发明中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本发明中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
可以理解的是,本发明中涉及到的任何关于数据获取或采集的部分,均已获得用户授权。
如图1所示,本实施例提供一种车辆座舱半主动式交互方法,应用于车辆,车辆包括多个可控设备、人车交互装置和信息采集装置;人车交互装置包括第一交互装置和第二交互装置;车辆座舱半主动式交互方法包括:
S1:响应于第一交互装置根据车辆中目标人员的第一交互行为产生的第一交互信息,确定第一目标可控设备和对应的第一指令信息,其中,第一交互装置包括与单个可控设备关联的单级键钮交互装置。
具体地,本发明所指可控设备表示车辆中能够通过人车交互进行控制的设备,包括但不限于车窗组件、车灯、空调、座椅、显示屏、音响、倒车镜等;本发明所指人车交互装置表示可以根据人员的交互行为产生交互信息的装置,例如:键钮交互装置、屏幕交互装置和语音交互装置;本发明所指第一交互装置表示与对应的可控设备具有唯一关联的交互装置,例如单级键钮交互装置(即与某个可控设备具有唯一关联关系的实体按键或旋钮,如车窗开度调节按键);本发明所指信息采集装置表示采集车辆运行信息、环境信息或人员信息等信息的装置,例如:用于采集车辆外部环境温度、内部环境温度以及目标人员体温的多个温度采集装置;本发明所指目标人员表示与车辆进行交互的座舱内人员,当车辆座舱内存在多个人员时,可以通过交互行为的产生位置来确定参与人车交互的目标人员,例如:可以基于现有技术中音区或音色的识别方法来确定参与交互的目标人员、基于被触发的第一交互装置所在位置确定参与交互的目标人员;本发明所指第一交互行为包括目标人员对第一交互装置的触碰、按压或旋转等操作。
在一实施例中,本发明在宏观上设置了两种交互方式供目标人员选择,第一种是与单个可控设备关联的第一交互装置(如单级键钮交互装置)进行人车交互,第二种是与多个可控设备关联的第二交互装置进行人车交互,这种交互方式还融合了信息采集装置采集到的信息,对目标人员的需求进行预测,在目标可控设备的确认阶段,优先提供预测信息便于目标人员选择。在目标可控设备的预测指令确认和执行阶段,无需目标人员进行确认,直接执行指令的预测结果。由于目标可控设备众多,其预测结果的准确性相较于预测指令的准确性要低很多,本实施例提供的第二种“先被动后主动”的交互方式,在提高交互效率的同时,与现有的基于目标人员情绪、肢体动作等信息进行主动交互的方法相比,极大地降低了可控设备误触发的概率,保障驾驶过程的安全性。
应当理解是,为了降低目标人员的学习成本,简化实体交互界面,最大程度利用键钮交互装置的盲操性优势,本实施例中与单级键钮交互装置关联的可控设备一般是与车辆行驶功能相关以及重要操作相关的可控设备,例如:油门、离合、刹车、换挡、车辆启停、鸣笛、双闪等。同时,由于第一交互装置与可控设备具有单一的关联性,其根据第一交互行为产生的第一交互信息直接可以携带第一目标可控设备信息和对应的操作指令,使得交互效率高,盲操性强。
在本实施例中,将单一的交互方式与多元智能的交互方式有机结合,共同组成高效且安全的半主动式人车交互方法。目标人员可以根据实际情况或者意愿选择交互方式,交互方法的兼容性强、学习成本低,避免目标人员在人车交互过程中分散过多的注意力。
S2:接收信息采集装置发出的全局信息,全局信息包括车辆运行信息、环境信息和人员信息。
具体地,本发明所指全局信息表示与车辆相关的各类信息,包括当前全局信息以及历史全局信息;本发明所指车辆运行信息,包括车辆运行时间、里程、历史路径等信息,可以从车辆中控平台上获取;本发明所指环境信息表示座舱内外的环境信息,例如:噪音信息、温度信息、湿度信息、空气污染信息等,可以通过各类检测装置获取(如温度传感器、湿度传感器);本发明所指人员信息表示与车辆相关的人员信息,例如:人员身份信息或人员状态信息;其中,人员身份信息可以包括车主信息、车主亲友成员信息等,可以通过屏幕交互装置进行初始设置,录入人员的面部或声纹等信息,再基于面部识别或声纹识别等进行人员身份识别;人员状态信息可以包括通过温度检测装置获取的人员体温信息。
在本实施例中,通过接收采集装置发出的车辆相关的全局信息,便于全方位掌握车辆与人员的状态,为后续的人车交互过程中,目标人员的需求预测提供数据依据,提升后续预测可控设备信息及预测指令信息的可靠性。
S3:根据全局信息,预测目标人员期望进行交互的可控设备,得到预测可控设备信息,预测可控设备信息包括预测可控设备对应的目标概率等级。
具体地,根据全局信息可以预测目标人员的需求,进而可以预测能够满足目标人员需求的可控设备。能满足目标人员需求的可控设备并不是单一的,例如,当全局信息中包括的目标人员的体温信息超过预设体温阈值时,目标人员此时可能有快速降温的需求,但是该需求可以通过开启空调、打开车窗等方式来实现,目标人员具体如何选择,还要受到其他全局信息的影响(如所处场景、车内的其他人员身份或状态、车外环境等)。
应当理解的是,和现有技术中通过多模信息(如目标人员情绪、肢体动作、视线等)预测目标人员的“意图信息”,进而直接确定目标可控设备的方法相比,本实施例中根据全局信息预测目标人员“需求”,进而得到预测可控设备及其对应的目标概率等级,可以兼容目标人员针对同一需求的多种不同选择,极大地提升了预测结果的容错率。
S4:将预测可控设备信息发送给第二交互装置,以令第二交互装置按照目标概率等级从高到低的顺序展示预测可控设备信息,其中,第二交互装置包括与多个可控设备关联的复用键钮交互装置、屏幕交互装置和语音交互装置。
具体地,本发明所指复用键钮交互装置表示与多个可控设备具有关联性的交互装置,例如设备切换旋钮、指令切换旋钮、指令调节旋钮、复用开关等;复用键钮交互装置接收到预测可控设备信息后,可以展示这些信息,例如,当复用键钮交互装置的设备切换旋钮顺时针旋转时,通过语音播报反馈或屏幕图像反馈的方式,按照目标概率等级从高到低的顺序,依次向目标人员展示预测可控设备信息,提高交互效率的同时,还便于目标人员通过盲操来选取第二目标可控设备。本发明所指屏幕交互装置表示与多个可控设备具有关联性的且具有触控功能的屏幕,屏幕上可以用图例的方式展示多个可控设备;优选地,屏幕分为固定展示区和流动展示区,当接收到预测可控设备信息时,在流动展示区按照目标概率等级从高到低的顺序,向目标人员依次流动或依次平铺展示预测可控设备信息;本发明所指语音交互装置表示与多个可控设备具有关联性的具有语音交互功能的装置,当语音交互装置接收到预测可控设备信息后,可以通过依次播报的方式,按照目标概率等级从高到低的顺序,向目标人员展示预测可控设备信息。
在本实施例中,将预测可控设备信息发送至第二交互装置,使其按照目标概率等级从高到低的顺序展示预测可控设备信息,便于目标人员快速锁定第二目标可控设备,提高交互效率。同时,该步骤属于被动交互,第二交互装置仅向目标人员展示预测可控设备信息,但是并没有代替目标人员进行选择。能够避免在可控设备的数量较多,预测结果准确性难以保证的情况下进行主动交互造成的误触发。
S5:响应于第二交互装置根据目标人员的第二交互行为产生的第二交互信息,确定第二目标可控设备。
具体地,本发明所指第二交互行为可以包括通过语音对话与语音交互装置进行交互、通过触控屏幕与屏幕交互装置进行交互或者通过设备切换旋钮、复用开关等实体,与复用键钮交互装置进行交互。例如,当外界环境较为嘈杂,屏幕反光较为严重时,不利于采用语音交互装置和屏幕交互装置进行交互,此时可以选择复用键钮交互装置进行交互,目标人员可以顺时针旋转设备切换旋钮,复用键钮交互装置响应于目标人员的交互行为,按照目标概率等级从高到低的顺序,通过语音或屏幕反馈预测可控设备信息,目标人员根据反馈信息判断预测可控设备是否为目标可控设备,若是,则停止旋转设备切换旋钮,若在预设时间间隔内没有检测到目标人员再次旋转设备切换旋钮产生的脉冲信号,则将当前预测可控设备作为目标可控设备。
应当理解的是,与第二交互装置关联的可控设备可以是全部的可控设备,优选地,本实施例中与第二交互装置关联的设备一般是与娱乐功能、舒适功能相关的可控设备,例如:座椅调节、车窗调节、空调、播放设备、通讯设备等。对于车辆行驶功能以及重要操作相关的设备则优选第一交互装置(如单级键钮交互装置)进行交互,在避免误触发重要可控设备导致出现重大安全事故的同时,充分发挥第二交互装置对可控设备进行连续、复杂、精细调控上的优势,提高交互效率和交互体验。
在本实施例中,第二交互装置接收预测可控设备信息后,向目标人员展示该信息,帮助目标人员快速锁定目标可控设备,最大程度上提高人车交互效率。特别是当外界环境不利于使用语音交互装置和屏幕交互装置时,目标人员还可以通过盲操复用键钮交互装置,选择目标可控设备,极大地提高了交互结果的准确性和驾驶过程的安全性。
S6:根据第二目标可控设备和全局信息,得到预测指令信息。
具体地,预测指令信息可能包含一条或多条,例如当第二目标可控设备为音乐播放设备时,预测指令信息可以包含:开启音乐播放设备,自动随机播放喜爱歌单,自动调节音量至预设值等。
在本实施例中,确定目标人员期望交互的可控设备后,根据全局信息预测目标人员期望发出的指令,由于每个可控设备能够执行的指令有限,通过诸如车辆运行信息、环境信息或人员信息等全局信息可以较为准确的预测目标人员的需求,进而使得到的预测指令信息较为准确,可靠性高。
S7:根据第一指令信息和预测指令信息控制可控设备的运行,包括根据第一指令信息控制第一目标可控设备的运行,以及根据预测指令信息控制第二目标可控设备的运行。
具体地,当车辆座舱半主动式交互方法的执行主体(下称控制装置)获取到第一指令信息时,根据第一指令信息,控制第一目标可控设备的运行;当控制装置获取到预测指令信息时,根据预测指令信息,控制第二目标可控设备的运行。由于第一指令信息基于单级键钮交互装置得到,具有唯一性和确定性,无需目标人员对第一目标可控设备以及第一指令信息进行二次确认。当目标人员选择这种与第一交互装置进行交互时,能够直接控制第一目标可控设备执行第一指令信息,能够快速满足、准确目标人员需求,交互路径最短,效率最高,同时盲操性好,有利于保障人员安全。由于预测指令信息基于第二交互装置得到,其包括与多个所述可控设备关联的复用键钮交互装置、屏幕交互装置和语音交互装置。若选择第二交互装置进行交互,为避免误触发可控设备造成安全事故,第二目标可控设备的确定过程需要目标人员进行参与确认。在确定目标可控设备后,每个可控设备能够执行的指令有限,通过诸如车辆运行信息、环境信息或人员信息等全局信息可以较为准确的预测目标人员的需求,得到的预测指令信息较为准确,在此过程无需目标人员对预测指令信息进行确认,即可主动执行预测指令信息,进一步提升交互效率。
在本实施例中,提供了两种交互方式供人员选择,第一种是与单个可控设备关联的第一交互装置(如单级键钮交互装置)进行人车交互,由于第一交互装置与可控设备具有单一的关联性,得到的第一交互信息中就可以包含第一目标可控设备以及目标人员想要对该设备的具体操作意图(即第一指令信息);根据第一指令信息控制第一目标可控设备的运行,在紧急情况下可以通过快速的盲操,来实现目标人员的需求,交互效率高且盲操性好。第二种是与多个可控设备关联的第二交互装置进行人车交互,通过接收信息采集装置发出的全局信息,全方位掌握车辆与人员的状态;然后根据全局信息,预测目标人员期望进行交互的可控设备,能够兼容目标人员针对同一需求的多种不同选择,极大地提升了预测结果的容错率;通过将预测可控设备信息发送给第二交互装置,令其展示预测可控设备信息,提供预测信息便于目标人员选择,便于目标人员快速锁定目标可控设备,进一步提高交互效率;在“第二目标可控设备的确认阶段”采用被动交互方式,通过响应第二交互装置根据目标人员的第二交互行为产生的第二交互信息,确定第二目标可控设备,有利于保证交互结果的准确性、可靠性,特别是当前环境不利于使用语音交互装置和屏幕交互装置时,还可以通过复用键钮交互装置进行盲操,确定第二目标可控设备,进一步提高交互的安全性;通过第二目标可控设备和全局信息可以较为准确的预测目标人员的需求,得到的预测指令信息可靠性高;在“第二目标可控设备的具体指令确认和执行阶段”采用主动交互方式,无需目标人员对预测指令信息进行确认,直接根据预测指令信息控制第二目标设备的运行。由于目标可控设备众多,第二目标可控设备预测结果的准确性相较于预测指令的准确性要低很多。与现有的基于目标人员情绪、肢体动作等信息进行全主动交互的方法相比,采用先被动后主动的交互方式,在提高交互效率的同时还能够降低可控设备误触发的概率,保障驾驶过程的安全性。本实施例提供的两种交互方式有机结合,共同构成高效且安全的半主动式人车交互方法,便于目标人员根据实际情况或者意愿选择,实现高效、安全的人车交互。
可选地,在根据预测指令信息控制第二目标可控设备的运行之后,还包括:
响应于第二交互装置根据目标人员的第三交互行为产生的第三交互信息,确定第二目标可控设备对应的第二指令信息;
根据第二指令信息,控制第二目标可控设备的运行。
具体地,本发明所指第三交互行为包括与语音交互装置进行语音交互、与屏幕交互装置进行触控交互或与复用键钮交互装置进行操作交互的任一种;本发明第三交互信息表示语音信息、屏幕触控信息或复用键钮交互装置的操作信息(如操作产生的脉冲信号);本发明所指第二指令信息可以包括切换指令,或进一步调节该指令对应的设备状态。
在本实施例中,当控制第二目标可控设备执行预测指令信息后,可能还无法达到目标人员的需求,此时目标人员需要对第二目标可控设备的状态进一步调节。例如,复用键钮交互装置还可以包括指令切换旋钮和指令调节旋钮,目标人员可以通过旋转指令切换旋钮,实现第二目标可控设备对应指令信息的切换(如预测指令信息为控制音频设备播放新闻广播,旋转指令切换旋钮,得到第二指令信息为控制音频设备播放音乐)。除此之外,还可以通过旋转指令调节旋钮来实现具体指令的程度调节(如提高播放新闻广播的音量)。当车辆所处环境不利于进行语音交互和屏幕交互时,目标人员可以通过盲操复用键钮交互装置,实现从第二目标可控设备的确认,到指令信息的切换或调节全过程的精准控制,避免目标人员在驾驶过程中长时间分散注意力,保障交互过程的安全性。
可选地,如图2所示,车辆运行信息包括运行时间信息和路径信息;人员信息包括人员身份信息;根据全局信息,预测目标人员期望进行交互的可控设备,得到预测可控设备信息,包括:
将运行时间信息、路径信息和人员身份信息,输入到预先训练过的场景识别模型中,得到预测场景;
根据预测场景和环境信息,得到可控设备对应的目标概率等级;
根据目标概率等级,确定预测可控设备,得到可控设备信息,包括将目标概率等级大于预设概率阈值的可控设备,作为预测可控设备。
具体地,本发明所指运行时间信息可以包括车辆启动时对应的时间、车辆行驶过程中对应的时间、车辆行驶时长等,可以通过车辆的中控平台获取;本发明所指预测场景表示当前车辆可能对应的使用场景,例如:上班场景、回家场景、约会场景等;本发明所指目标概率等级表示可控设备符合目标人员期望的概率,可以用百分比或级别表示。例如,目标概率等级的取值范围为0-100%;本发明所指概率阈值的取值范围为60%-90%,优选地,概率阈值选取70%;
在本实施例中,车辆的使用场景与使用时间、使用地点和使用人员密切相关,通过将车辆运行时间信息、路径信息和车内人员身份信息输入到预先训练的场景预测模型中,可以较为准确的预测到车辆的使用场景。同时,目标人员在不同场景下的不同需求还与实际所处的环境密切相关,因此基于预测场景和环境信息可以较为准确的预测到目标人员在当前场景及当前环境下,对各个可控设备的期望交互程度(即目标概率等级)。在此基础上,概率等级大于预设概率阈值的可控设备能够满足目标人员需求的可能性较高,将其作为预测可控设备展示给目标人员,可以将目标人员的选择范围迅速缩小,更方便目标人员快速锁定期望进行交互的设备。
可选地,根据预测场景和环境信息,得到可控设备对应的目标概率等级,包括:
基于预测场景和预设的场景模板信息,确定预设场景中可控设备的概率等级;
基于环境信息,修正概率等级,得到目标概率等级,包括当环境信息满足预设的触发条件时,在概率等级的基础上提高或降低预设等级,得到对应的可控设备的目标概率等级。
具体地,本发明所指场景模板信息可以在车辆出厂前统一配置,可以根据车主意愿,通过屏幕交互装置进行个性化设置,也可以根据历史场景下对应的交互信息进行更新。场景模板信息表示基于场景考虑,目标人员对各类可控设备的可能需求程度(即概率等级),例如,夏季上班场景对应的场景模板信息包括:导航设备,概率等级90%;空调设备,概率等级85%;音频播放设备,概率等级80%;座椅加热设备,概率等级10%;车灯设备,概率等级30%;其他可控设备为默认概率等级40%。
在本实施例中,通过预设场景匹配相应的场景模板信息可以快速准确的预测目标人员的需求,应当理解的是,预测场景的数量可能为一个或多个,对应匹配的场景模板信息也可能为一个或多个,不同场景得到的各个可控设备的概率等级可以进行融合,能够进一步提升概率等级的合理性。目标人员的需求除了受到使用场景影响外,还受到环境影响。当环境信息满足预设的触发条件时,对应调整相关可控设备的概率等级,例如,当空气污染指数超过预设的污染阈值时,需要降低车窗开启设备的概率等级;当光线强度低于预设的强度阈值时,需要提高车灯开启设备的概率等级。本实施例通过模仿目标人员的思考方式,融合了场景因素和环境因素的影响,预测各个可控设备的概率等级,得到的目标概率等级可靠性较高,有利于提升后续预测可控设备的准确性。
可选地,在将运行时间信息、路径信息和人员身份信息,输入到预先训练过的场景识别模型中,得到预测场景之前,还包括:
接收第二交互装置根据目标人员的第四交互行为产生的初始设置信息,初始设置信息包括多个初始场景对应的运行时间设置信息、路径设置信息和人员身份设置信息;
根据初始场景,构建初始场景识别模型;
利用初始设置信息,对初始场景识别模型进行训练,得到场景识别模型。
具体地,本发明所指第四交互行为包括与语音交互装置进行语音交互或与屏幕交互装置进行触控交互,优选地,目标人员采用屏幕交互装置进行交互,输入初始设置信息,例如,初始场景包括下班回家场景,目标人员通过屏幕交互装置输入该场景对应的运行时间信息(如下班时间区间)、下班回家场景的对应路径、以及该场景下对应的人员身份信息(如人员面部信息)。
在本实施例中,车辆出厂前可以统一预设多个初始场景,但是初始场景对应的时间、地点以及相关人物信息,则需要目标人员根据实际情况,在第二交互装置首次使用前进行个性化的设置。利用这些初始设置信息对初始场景模型进行训练,就可以得到贴合目标人员习惯的场景识别模型。提升场景识别模型的准确性和以及与目标人员个人习惯的适配性。
可选地,如图2所示,车辆运行信息还包括可控设备对应的设备状态,设备状态包括开启状态和关闭状态;根据第二目标可控设备和全局信息,得到预测指令信息,包括:
获取第二目标可控设备的指令集,指令集包括开启指令、关闭指令、增大指令、减小指令和切换子选项指令中的至少两项;
当设备状态为关闭状态时,将开启指令对应的优先等级设置为最高;
当设备状态为开启状态时,判断指令集中指令的数量是否大于2;
若是,则将指令集、预测场景和环境信息输入预先训练过的等级评估模型中,得到指令集中所有指令对应的优先等级;
若否,则将关闭指令对应的优先等级设置为最高;
基于指令及其对应的优先等级,得到预测指令信息,预测指令信息包括优先等级最高的指令。
具体地,本发明所指等级评估模型可以在车辆出厂前,由供应方统一配置,由于可控设备对应的指令集中的指令数量相对较少,且不同场景、不同环境下,目标人员期望可控设备执行的指令较为固定,受到目标人员个性化因素的影响非常低。例如,在自驾旅行场景下,外界环境温度高于第一温度阈值(如30℃),车内环境温度高于预设的第二温度阈值(如25℃),当第二目标设备确定为空调设备时,结合空调设备目前的状态可以准确预测目标人员期望的指令为调低空调温度。供应商可以提前收集不同人员在历史场景、历史环境信息以及对应的指令,分析统计这些信息形成数据库,并利用数据库训练初始等级评价模型,得到训练过的等级评价模型。
在本实施例中,第二目标可控设备为关闭状态时,目标人员的最基本需求是开启该可控设备,因此无需基于其他信息对目标人员的需求进行预测,即可得到预测指令信息。优选地,在此步骤之后还包括,判断指令集中指令的数量是否大于2,若大于2,表明该设备除了正常的开启指令和关闭指令外,还存在其他的指令信息,将预测场景、环境信息输入到等级评估模型中即可得到不同指令对应的优先等级。当第二目标可控设备为开启状态,且该可控设备对应的指令数量等于2时,能够直接确定目标人员的需求为关闭该可控设备;若指令的数量大于2时,在通过等级评估模型得到各个指令对应的优先等级。本实施例通过指令集中的指令数量与当前得设备状态,可以快速预测目标人员的需求,当指令的数量较多时,通过等级评估模型可以较为准确的预测目标人员对于各个指令的需求程度(即优先等级),最大程度上提高预测指令信息的生成效率以及预测结果的可靠性。
可选地,在响应于第二交互装置根据目标人员的第三交互行为产生的第三交互信息,确定第二目标可控设备对应的第二指令信息之前,还包括:
将指令和优先等级,发送给第二交互装置,以令第二交互装置按照优先等级从高到低的顺序展示指令。
在本实施例中,执行预测指令信息后可能尚未满足目标人员的需求,目标人员需要通过第二交互装置进行指令的切换或者指令的调节,将指令按照优先等级从高到低的顺序展示给目标人员。例如,目标人员顺时针旋转复用键钮交互装置的指令切换旋钮,响应于目标人员的交互行为,语音交互装置或屏幕交互装置反馈当前选中的指令,当预设时间间隔内(如1.5秒),目标人员没有再进行旋转指令切换旋钮的动作,则将当前的指令纳入第二指令信息,控制第二目标可控设备执行该指令。采用上述方法能够提升人车交互结果的精准性,降低目标人员操作的复杂程度。
本发明又一实施例提供一种车辆座舱半主动式交互装置,应用于车辆,车辆包括多个可控设备、人车交互装置和信息采集装置;人车交互装置包括第一交互装置和第二交互装置;车辆座舱半主动式交互装置包括:
第一确定模块,其用于响应于第一交互装置根据车辆中目标人员的第一交互行为产生的第一交互信息,确定第一目标可控设备和对应的第一指令信息,其中,第一交互装置包括与单个可控设备关联的单级键钮交互装置;
信息接收模块,其用于接收信息采集装置发出的全局信息,全局信息包括车辆运行信息、环境信息和人员信息;
第一预测模块,其用于根据全局信息,预测目标人员期望进行交互的可控设备,得到预测可控设备信息,预测可控设备信息包括预测可控设备对应的目标概率等级;
信息发送模块,其用于将预测可控设备信息发送给第二交互装置,以令第二交互装置按照目标概率等级从高到低的顺序展示预测可控设备信息,其中,第二交互装置包括与多个可控设备关联的复用键钮交互装置、屏幕交互装置和语音交互装置中的任一项;
第二确定模块,其用于响应于第二交互装置根据目标人员的第二交互行为产生的第二交互信息,确定第二目标可控设备;
第二预测模块,其用于根据第二目标可控设备和全局信息,得到预测指令信息;
设备控制模块,其用于根据所述第一指令信息和所述预测指令信息控制所述可控设备的运行,包括根据所述第一指令信息控制所述第一目标可控设备的运行,以及根据所述预测指令信息控制所述第二目标可控设备的运行。
在本实施例中,提供了两种交互方式供目标人员选择,第一种是与单个可控设备关联的第一交互装置(如单级键钮交互装置)进行人车交互。由于第一交互装置与可控设备具有单一的关联性,第一确定模块得到的第一交互信息中就可以包含第一目标可控设备以及目标人员想要对该设备的具体操作意图(即第一指令信息);设备控制模块根据第一指令信息控制第一目标可控设备的运行,在紧急情况下可以通过快速的盲操,来实现目标人员的需求,交互效率高且盲操性好。第二种是与多个可控设备关联的第二交互装置进行人车交互,信息接收模块通过接收信息采集装置发出的全局信息,全方位掌握车辆与人员的状态;然后第一预测模块根据全局信息,预测目标人员期望进行交互的可控设备,能够兼容目标人员针对同一需求的多种不同选择,极大地提升了预测结果的容错率;信息发送模块通过将预测可控设备信息发送给第二交互装置,令其展示预测可控设备信息,提供预测信息便于目标人员选择,便于目标人员快速锁定目标可控设备,进一步提高交互效率;在“第二目标可控设备的确认阶段”采用被动交互方式,第二确定模块响应于第二交互装置根据目标人员的第二交互行为产生的第二交互信息,确定第二目标可控设备,有利于保证交互结果的准确性、可靠性,特别是当前环境不利于使用语音交互装置和屏幕交互装置时,还可以通过复用键钮交互装置进行盲操,确定第二目标可控设备,进一步提高交互的安全性;第二预测模块通过第二目标可控设备和全局信息可以较为准确的预测目标人员的需求,得到的预测指令信息可靠性高;在“第二目标可控设备的具体指令确认和执行阶段”采用主动交互方式,无需目标人员对预测指令信息进行确认,设备控制模块直接根据预测指令信息控制第二目标设备的运行。由于目标可控设备众多,第二目标可控设备预测结果的准确性相较于预测指令的准确性要低很多。与现有的基于目标人员情绪、肢体动作等信息进行主动交互的装置相比,采用先被动后主动的交互装置,在提高交互效率的同时还能够降低可控设备误触发的概率,保障驾驶过程的安全性。
本发明又一实施例提供一种车辆,包括:多个可控设备、人车交互装置、信息采集装置和控制装置,控制装置用于实现如上所述的车辆座舱半主动式交互方法。
本实施例提供的车辆与所述车辆座舱半主动式交互方法能达到的技术效果相同,在此不再赘述。
可选地,如图3所示,人车交互装置包括第一交互装置和第二交互装置,第一交互装置包括与控制装置单向通信的单级键钮交互装置;第二交互装置包括分别与控制装置双向通信的复用键钮交互装置、屏幕交互装置和语音交互装置;复用键钮交互装置包括设备切换旋钮和指令切换旋钮,当设备切换旋钮顺时针旋转时,用于按照目标概率等级从高到低的顺序,令第二交互装置展示预测可控设备信息;当指令切换旋钮顺时针旋转时,用于按照优先等级从高到低的顺序,令第二交互装置展示指令。
在本实施例中,第一交互装置与控制装置之间为单向通信,即第一交互装置将根据目标人员的第一交互行为产生的第一交互信息(如操作单级键钮交互装置产生的脉冲信号)单向传递给控制装置,控制装置根据第一交互信息,控制对应的可控设备执行相关的第一指令信息,该交互方式的指向性好、盲操性强,操作路径最短,适用于目标人员与车辆行驶功能或重要操作相关的可控设备之间的交互。第二交互装置与控制装置之间为双向通信,控制装置接收第二交互装置发出的第二交互信息以及信息采集装置发出的全局信息,控制装置将根据第二交互信息和全局信息,生成预测可控设备信息和预测指令信息等信息发送至第二交互装置,以令第二交互装置向目标人员展示这些信息,帮助目标人员快速锁定目标,实现高效交互。特别是复用键钮交互装置包括设备切换旋钮和指令切换旋钮,当目标人员操作这些复用键钮交互装置时,可以实现对期望交互的可控设备进行复杂、连续且精准的控制,盲操性强且安全性高。本实施例中第一交互装置和第二交互装置有机结合,降低目标人员进行人车交互的学习成本,解决了现有技术中键钮交互装置过多不便于记忆,或交互装置对视觉依赖程度过高(如屏幕交互装置占主导地位的交互装置),容易分散驾驶人员注意力且盲操性差等问题,实现人车之间的精准交互、高效交互和安全交互。
现将描述可以作为本发明的服务器或客户端的电子设备,其是可以应用于本发明的各方面的硬件设备的示例。电子设备旨在表示各种形式的数字电子的计算机设备,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本发明的实现。
电子设备包括计算单元,其可以根据存储在只读存储器(ROM)中的计算机程序或者从存储单元加载到随机访问存储器(RAM)中的计算机程序,来执行各种适当的动作和处理。在RAM中,还可存储设备操作所需的各种程序和数据。计算单元、ROM以及RAM通过总线彼此相连。输入/输出(I/O)接口也连接至总线。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(RandomAccessMemory,RAM)等。在本申请中,所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
虽然本发明披露如上,但本发明的保护范围并非仅限于此。本领域技术人员在不脱离本发明的精神和范围的前提下,可进行各种变更与修改,这些变更与修改均将落入本发明的保护范围。

Claims (9)

1.一种车辆座舱半主动式交互方法,其特征在于,应用于车辆,所述车辆包括多个可控设备、人车交互装置和信息采集装置;所述人车交互装置包括第一交互装置和第二交互装置;所述车辆座舱半主动式交互方法包括:
响应于所述第一交互装置根据所述车辆中目标人员的第一交互行为产生的第一交互信息,确定第一目标可控设备和对应的第一指令信息,其中,所述第一交互装置包括与单个所述可控设备关联的单级键钮交互装置;
接收所述信息采集装置发出的全局信息,所述全局信息包括车辆运行信息、环境信息和人员信息,其中,所述车辆运行信息包括运行时间信息和路径信息,所述人员信息包括人员身份信息;
根据所述全局信息,预测所述目标人员期望进行交互的所述可控设备,得到预测可控设备信息,所述预测可控设备信息包括预测可控设备对应的目标概率等级,其中,将所述运行时间信息、所述路径信息和所述人员身份信息,输入到预先训练过的场景识别模型中,得到预测场景;根据所述预测场景和所述环境信息,得到所述可控设备对应的所述目标概率等级;根据所述目标概率等级,确定所述预测可控设备,得到所述预测可控设备信息,包括将所述目标概率等级大于预设概率阈值的所述可控设备,作为所述预测可控设备;
将所述预测可控设备信息发送给所述第二交互装置,以令所述第二交互装置按照所述目标概率等级从高到低的顺序展示所述预测可控设备信息,其中,所述第二交互装置包括与多个所述可控设备关联的复用键钮交互装置、屏幕交互装置和语音交互装置;
响应于所述第二交互装置根据所述目标人员的第二交互行为产生的第二交互信息,确定第二目标可控设备;
根据所述第二目标可控设备和所述全局信息,得到预测指令信息;
根据所述第一指令信息和所述预测指令信息控制所述可控设备的运行,包括根据所述第一指令信息控制所述第一目标可控设备的运行,以及根据所述预测指令信息控制所述第二目标可控设备的运行。
2.根据权利要求1所述的车辆座舱半主动式交互方法,其特征在于,在所述根据所述预测指令信息控制所述第二目标可控设备的运行之后,还包括:
响应于所述第二交互装置根据所述目标人员的第三交互行为产生的第三交互信息,确定所述第二目标可控设备对应的第二指令信息;
根据所述第二指令信息,控制所述第二目标可控设备的运行。
3.根据权利要求1所述的车辆座舱半主动式交互方法,其特征在于,所述根据所述预测场景和所述环境信息,得到所述可控设备对应的所述目标概率等级,包括:
基于所述预测场景和预设的场景模板信息,确定所述预设场景中所述可控设备的概率等级;
基于所述环境信息,修正所述概率等级,得到目标概率等级,包括当所述环境信息满足预设的触发条件时,在所述概率等级的基础上提高或降低预设等级,得到对应的所述可控设备的所述目标概率等级。
4.根据权利要求1所述车辆座舱半主动式交互方法,其特征在于,在所述将所述运行时间信息、所述路径信息和所述人员身份信息,输入到预先训练过的场景识别模型中,得到预测场景之前,还包括:
接收所述第二交互装置根据所述目标人员的第四交互行为产生的初始设置信息,所述初始设置信息包括多个初始场景对应的运行时间设置信息、路径设置信息和人员身份设置信息;
根据所述初始场景,构建初始场景识别模型;
利用所述初始设置信息,对所述初始场景识别模型进行训练,得到所述场景识别模型。
5.根据权利要求3-4任一项所述的车辆座舱半主动式交互方法,其特征在于,所述车辆运行信息还包括所述可控设备对应的设备状态,所述设备状态包括开启状态和关闭状态;所述根据所述第二目标可控设备和所述全局信息,得到预测指令信息,包括:
获取所述第二目标可控设备的指令集,所述指令集包括开启指令、关闭指令、增大指令、减小指令和切换子选项指令中的至少两项;
当所述设备状态为所述关闭状态时,将所述开启指令对应的优先等级设置为最高;
当所述设备状态为所述开启状态时,判断所述指令集中指令的数量是否大于2;
若是,则将所述指令集、所述预测场景和所述环境信息输入到预先训练过的等级评估模型中,得到所述指令集中所有所述指令对应的所述优先等级;
若否,则将所述关闭指令对应的优先等级设置为最高;
基于所述指令及其对应的所述优先等级,得到所述预测指令信息,所述预测指令信息包括所述优先等级最高的所述指令。
6.根据权利要求5所述的车辆座舱半主动式交互方法,其特征在于,在所述响应于所述第二交互装置根据所述目标人员的第三交互行为产生的第三交互信息,确定所述第二目标可控设备对应的第二指令信息之前,还包括:
将所述指令和所述优先等级,发送给所述第二交互装置,以令所述第二交互装置按照所述优先等级从高到低的顺序展示所述指令。
7.一种车辆座舱半主动式交互装置,其特征在于,应用于车辆,所述车辆包括多个可控设备、人车交互装置和信息采集装置;所述人车交互装置包括第一交互装置和第二交互装置;所述车辆座舱半主动式交互装置包括:
第一确定模块,其用于响应于所述第一交互装置根据所述车辆中目标人员的第一交互行为产生的第一交互信息,确定第一目标可控设备和对应的第一指令信息,其中,所述第一交互装置包括与单个所述可控设备关联的单级键钮交互装置;
信息接收模块,其用于接收所述信息采集装置发出的全局信息,所述全局信息包括车辆运行信息、环境信息和人员信息,其中,所述车辆运行信息包括运行时间信息和路径信息,所述人员信息包括人员身份信息;
第一预测模块,其用于根据所述全局信息,预测所述目标人员期望进行交互的所述可控设备,得到预测可控设备信息,所述预测可控设备信息包括预测可控设备对应的目标概率等级,其中,将所述运行时间信息、所述路径信息和所述人员身份信息,输入到预先训练过的场景识别模型中,得到预测场景;根据所述预测场景和所述环境信息,得到所述可控设备对应的所述目标概率等级;根据所述目标概率等级,确定所述预测可控设备,得到所述预测可控设备信息,包括将所述目标概率等级大于预设概率阈值的所述可控设备,作为所述预测可控设备;
信息发送模块,其用于将所述预测可控设备信息发送给所述第二交互装置,以令所述第二交互装置按照所述目标概率等级从高到低的顺序展示所述预测可控设备信息,其中,所述第二交互装置包括与多个所述可控设备关联的复用键钮交互装置、屏幕交互装置和语音交互装置;
第二确定模块,其用于响应于所述第二交互装置根据所述目标人员的第二交互行为产生的第二交互信息,确定第二目标可控设备;
第二预测模块,其用于根据所述第二目标可控设备和所述全局信息,得到预测指令信息;
设备控制模块,其用于根据所述第一指令信息和所述预测指令信息控制所述可控设备的运行,包括根据所述第一指令信息控制所述第一目标可控设备的运行,以及根据所述预测指令信息控制所述第二目标可控设备的运行。
8.一种车辆,其特征在于,包括:多个可控设备、人车交互装置、信息采集装置和控制装置,所述控制装置用于实现如权利要求1-6任一项所述的车辆座舱半主动式交互方法。
9.根据权利要求8所述的车辆,其特征在于,所述人车交互装置包括第一交互装置和第二交互装置,所述第一交互装置包括与所述控制装置单向通信的单级键钮交互装置;所述第二交互装置包括分别与所述控制装置双向通信的复用键钮交互装置、屏幕交互装置和语音交互装置;所述复用键钮交互装置包括设备切换旋钮和指令切换旋钮,当所述设备切换旋钮顺时针旋转时,用于按照目标概率等级从高到低的顺序,令所述第二交互装置展示预测可控设备信息;当所述指令切换旋钮顺时针旋转时,用于按照优先等级从高到低的顺序,令所述第二交互装置展示指令。
CN202310518891.9A 2023-05-10 2023-05-10 一种车辆座舱半主动式交互方法、装置及车辆 Expired - Fee Related CN116279552B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310518891.9A CN116279552B (zh) 2023-05-10 2023-05-10 一种车辆座舱半主动式交互方法、装置及车辆

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310518891.9A CN116279552B (zh) 2023-05-10 2023-05-10 一种车辆座舱半主动式交互方法、装置及车辆

Publications (2)

Publication Number Publication Date
CN116279552A CN116279552A (zh) 2023-06-23
CN116279552B true CN116279552B (zh) 2023-08-22

Family

ID=86790840

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310518891.9A Expired - Fee Related CN116279552B (zh) 2023-05-10 2023-05-10 一种车辆座舱半主动式交互方法、装置及车辆

Country Status (1)

Country Link
CN (1) CN116279552B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013101054A1 (en) * 2011-12-29 2013-07-04 Intel Corporation Systems, methods, and apparatus for identifying an occupant of a vehicle
CN114828131A (zh) * 2022-06-24 2022-07-29 小米汽车科技有限公司 通讯方法、介质、车载通讯系统、芯片及车辆

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9340155B2 (en) * 2013-09-17 2016-05-17 Toyota Motor Sales, U.S.A., Inc. Interactive vehicle window display system with user identification
EP3569464B1 (en) * 2018-05-16 2024-06-12 Ningbo Geely Automobile Research & Development Co. Ltd. Temporary customization of an operating characteristic of a vehicle feature
CN112799499A (zh) * 2019-10-24 2021-05-14 福特全球技术公司 一种机动车辆人机交互系统和方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013101054A1 (en) * 2011-12-29 2013-07-04 Intel Corporation Systems, methods, and apparatus for identifying an occupant of a vehicle
CN114828131A (zh) * 2022-06-24 2022-07-29 小米汽车科技有限公司 通讯方法、介质、车载通讯系统、芯片及车辆

Also Published As

Publication number Publication date
CN116279552A (zh) 2023-06-23

Similar Documents

Publication Publication Date Title
CN107179870B (zh) 信息提供装置及存储信息提供程序的存储介质
US20210149397A1 (en) Apparatus and method for controlling the user experience of a vehicle
US11794676B1 (en) Computing systems and methods for generating user-specific automated vehicle actions using artificial intelligence
US20210122242A1 (en) Motor Vehicle Human-Machine Interaction System And Method
RU2682102C2 (ru) Система адаптивного интерфейса транспортного средства (варианты)
CN113602090A (zh) 一种车辆控制方法、装置及系统
EP4307266B1 (en) System and method to view occupant status and manage devices of building
CN111223479A (zh) 一种操作权限控制方法及相关设备
CN110654389A (zh) 车辆的控制方法、控制装置和车辆
CN115139953A (zh) 车辆迎宾方法、装置、设备及存储介质
US12491833B2 (en) Computing systems and methods for generating user-specific automated vehicle actions
CN108146442B (zh) 预测数据生成设备和车辆控制设备
CN116279552B (zh) 一种车辆座舱半主动式交互方法、装置及车辆
KR20210000462A (ko) 차량 내 제스처 입력을 이용한 제어 시스템 및 그 방법
US10466657B2 (en) Systems and methods for global adaptation of an implicit gesture control system
KR102667424B1 (ko) 차량 내 제스처 입력을 이용한 제어 시스템
US12286138B2 (en) Adaptive trust calibration
WO2023122678A1 (en) System and method for content segregation
CN116206288A (zh) 车内人员体感状态的提示方法及装置、设备及介质
CN118578870A (zh) 汽车的人机交互控制方法、计算机装置和存储介质
CN117341605A (zh) 车辆的控制方法、装置及电子设备
CN117717770A (zh) 基于车内场景的游戏控制方法、系统及电子设备
CN120891911A (zh) 一种交互方法、装置、终端及存储介质
CN106716341B (zh) 用以改进车内的用户体验的自适应界面的系统和方法
CN120108168A (zh) 车辆交互反馈方法、系统、介质及智能遥控器和控制终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20230822