CN111506230B - 一种交互方法、装置和车辆 - Google Patents

一种交互方法、装置和车辆 Download PDF

Info

Publication number
CN111506230B
CN111506230B CN202010261071.2A CN202010261071A CN111506230B CN 111506230 B CN111506230 B CN 111506230B CN 202010261071 A CN202010261071 A CN 202010261071A CN 111506230 B CN111506230 B CN 111506230B
Authority
CN
China
Prior art keywords
window
vehicle
interactive
control
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010261071.2A
Other languages
English (en)
Other versions
CN111506230A (zh
Inventor
蔡亮
钟华
王佩生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Xiaopeng Motors Technology Co Ltd
Original Assignee
Guangzhou Xiaopeng Motors Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Xiaopeng Motors Technology Co Ltd filed Critical Guangzhou Xiaopeng Motors Technology Co Ltd
Priority to CN202010261071.2A priority Critical patent/CN111506230B/zh
Publication of CN111506230A publication Critical patent/CN111506230A/zh
Application granted granted Critical
Publication of CN111506230B publication Critical patent/CN111506230B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例提供了一种交互方法、装置和车辆,所述交互方法应用于车辆中,车辆的同一显示区域设有第一窗口和第二窗口,第一窗口与第二窗口分离,第二窗口是根据窗口管理服务设计的交互区域,所述的方法包括:在第一窗口展示应用程序的应用界面过程中,接收用户的交互操作,在第二窗口展示所述交互操作对应的交互信息;从而能够降低交互过程中交互信息对用户使用应用的影响。

Description

一种交互方法、装置和车辆
技术领域
本发明涉及汽车技术领域,特别是涉及一种交互方法、装置和车辆。
背景技术
随着汽车在生活中的日益普及,越来越多的车辆中应用了语音助手;便于用户通过语音控制车内设备,如语音打开车窗,打开天窗,打开空调等功能;从而提高用户体验。
目前,车辆的同一个显示区域的UI(User Interface,用户界面)界面仅提供一个窗口,当用户打开某个应用时,可以在UI界面的该窗口中展示该应用的应用界面。在该窗口展示某个应用界面的过程中,若车辆接收到语音指令,则可能在应用窗口之上弹出一个窗口展示语音交互信息;也可能在该窗口中由显示应用界面切换为显示语音交互信息。其中,无论是哪种展示语音交互界面的方式,都影响了用户对应用的使用。
发明内容
本发明实施例提供一种交互方法,以降低交互过程中交互信息对用户使用应用的影响。
相应的,本发明实施例还提供了一种交互装置和车辆,用以保证上述方法的实现及应用。
为了解决上述问题,本发明公开了一种交互方法,应用于车辆中,车辆的同一显示区域设有第一窗口和第二窗口,第一窗口与第二窗口分离,第二窗口是根据窗口管理服务设计的交互区域,的方法包括:在第一窗口展示应用程序的应用界面过程中,响应于用户的交互操作,在第二窗口展示交互操作对应的交互信息。
可选地,交互操作包括语音指令和作用于车辆方向盘上设置的交互区域的触摸操作;车辆包括多个车辆装置,一个车辆装置对应至少一个控制项;响应于用户的交互操作,在第二窗口展示交互操作对应的交互信息,包括:车辆处于行驶状态时,响应于用户的语音指令,在第二窗口调起对应的控制项;以及响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中的控制项进行显示控制;的方法还包括:响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对控制项进行设置。
可选地,用于管理显示区域的操作系统包括应用层和应用框架层,应用框架层提供有语音组件;车辆还包括用于控制车辆装置的车辆控制系统;响应于用户的语音指令,在第二窗口调起对应的控制项,包括:语音组件接收用户的语音指令,并将语音指令上传至服务器;语音组件接收服务器返回的指令识别结果,并依据指令识别结果确定用户所需控制的目标控制项;语音组件从车辆控制系统获取目标控制项的状态信息,并将指令识别结果和目标控制项的状态信息发送至应用层;应用层依据指令识别结果,在第二窗口展示目标控制项的状态信息。
可选地,应用框架层还提供有系统服务组件,响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中控制项进行显示控制,包括:系统服务组件接收用户作用于车辆方向盘上设置的交互区域的触摸操作对应的信号;系统服务组件将信号转换为系统按键事件,并将系统按键事件发送至应用层;应用层根据系统按键事件,确定针对目标控制项对应状态信息的显示调整操作,按照显示调整操作对第二窗口中的目标控制项的状态信息进行调整。
可选地,应用框架层还提供有车控组件,响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对控制项进行设置,包括:应用层根据系统按键事件,确定针对目标控制项的控制操作;应用层依据控制操作生成针对目标控制项的控制指令,并将控制项指令发送至车控组件;车控组件将控制指令发送至车辆控制系统;车辆控制系统按照控制指令,对目标控制项进行控制。
可选地,交互操作包括语音控制指令和作用于车辆方向盘上设置的交互区域的触摸操作;响应于用户的交互操作,在第二窗口展示交互操作对应的交互信息,包括:车辆处于行驶状态时,响应于用户的语音指令,在第二窗口展示针对应用程序的交互反馈信息;以及响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中的交互反馈信息进行显示控制。
可选地,用于管理显示区域的操作系统包括应用层和应用框架层,应用框架层提供有语音组件;响应于用户的语音指令,在第二窗口展示针对应用程序的交互反馈信息,包括:语音组件接收用户的语音指令,并将语音指令上传至服务器;语音组件接收服务器返回的指令识别结果,并将指令识别结果转发至对应的应用程序;应用程序依据指令识别结果进行查询,确定对应的交互反馈信息,并将交互反馈信息返回给语音组件;语音组件将指令识别结果和交互反馈信息发送至应用层;应用层依据指令识别结果,在第二窗口展示交互反馈信息。
可选地,交互反馈信息包括多条,操作系统的应用框架层还提供有系统服务组件,响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中的交互反馈信息进行显示控制,包括:系统服务组件接收用户作用于车辆方向盘上设置的交互区域的触摸操作对应的信号;系统服务组件将信号转换为车载系统的系统按键事件,并将系统按键事件发送至应用层;应用层在确定系统按键事件对应的操作为移动操作时,按照移动操作将第二窗口中的光标在多条交互反馈信息上移动;在确定系统按键事件对应的操作为选取操作时,在第二窗口中展示光标所在位置对应交互反馈信息的详细信息。
本发明实施例还提供了一种交互装置,应用于车辆中,车辆提供有第一窗口和第二窗口,第一窗口与第二窗口分离,第二窗口是根据窗口管理服务设计的交互区域;装置包括:交互模块,用于在第一窗口展示应用程序的应用界面过程中,响应于用户的交互操作,在第二窗口展示交互操作对应的交互信息。
可选地,交互操作包括语音指令和作用于车辆方向盘上设置的交互区域的触摸操作;车辆包括多个车辆装置,一个车辆装置对应至少一个控制项;交互模块,包括:控制项调起子模块,用于车辆处于行驶状态时,响应于用户的语音指令,在第二窗口调起对应的控制项;控制项显示控制子模块,用于响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中的控制项进行显示控制;的装置还包括:控制项设置模块,用于响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对控制项进行设置。
可选地,用于管理显示区域的操作系统包括应用层和应用框架层,应用框架层提供有语音组件;车辆还包括用于控制车辆装置的车辆控制系统;控制项调起子模块,用于调用语音组件接收用户的语音指令,并将语音指令上传至服务器;调用语音组件接收服务器返回的指令识别结果,并依据指令识别结果确定用户所需控制的目标控制项;调用语音组件从车辆控制系统获取目标控制项的状态信息,并将指令识别结果和目标控制项的状态信息发送至应用层;调用应用层依据指令识别结果,在第二窗口展示目标控制项的状态信息。
可选地,应用框架层还提供有系统服务组件,控制项显示控制子模块,用于调用系统服务组件将信号转换为系统按键事件,并将系统按键事件发送至应用层;以及调用应用层根据系统按键事件,确定针对目标控制项对应状态信息的显示调整操作,按照显示调整操作对第二窗口中的目标控制项的状态信息进行调整。
可选地,应用框架层还提供有车控组件,控制项设置模块,用于调用应用层根据系统按键事件,确定针对目标控制项的控制操作;以及调用应用层依据控制操作生成针对目标控制项的控制指令,并将控制项指令发送至车控组件;调用车控组件将控制指令发送至车辆控制系统;调用车辆控制系统按照控制指令,对目标控制项进行控制。
可选地,交互操作包括语音控制指令和作用于车辆方向盘上设置的交互区域的触摸操作;交互模块,包括:反馈信息展示子模块,用于车辆处于行驶状态时,响应于用户的语音指令,在第二窗口展示针对应用程序的交互反馈信息;反馈信息显示控制子模块,用于响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中的交互反馈信息进行显示控制。
可选地,用于管理显示区域的操作系统包括应用层和应用框架层,应用框架层提供有语音组件;反馈信息展示子模块,用于调用语音组件接收用户的语音指令,并将语音指令上传至服务器;以及调用语音组件接收服务器返回的指令识别结果,并将指令识别结果转发至对应的应用程序;调用应用程序依据指令识别结果进行查询,确定对应的交互反馈信息,并将交互反馈信息返回给语音组件;调用语音组件将指令识别结果和交互反馈信息发送至应用层;调用应用层依据指令识别结果,在第二窗口展示交互反馈信息。
可选地,交互反馈信息包括多条,操作系统的应用框架层还提供有系统服务组件,反馈信息显示控制子模块,用于调用系统服务组件接收用户作用于车辆方向盘上设置的交互区域的触摸操作对应的信号;调用系统服务组件将信号转换为车载系统的系统按键事件,并将系统按键事件发送至应用层;调用应用层在确定系统按键事件对应的操作为移动操作时,按照移动操作将第二窗口中的光标在多条交互反馈信息上移动;在确定系统按键事件对应的操作为选取操作时,在第二窗口中展示光标所在位置对应交互反馈信息的详细信息。
本发明实施例还提供了一种可读存储介质,当存储介质中的指令由车辆的处理器执行时,使得车辆能够执行如本发明实施例中任一交互方法。
与现有技术相比,本发明实施例包括以下优点:
本发明实施例中,车辆可以提供第一窗口和第二窗口,其中,第二窗口是根据窗口管理服务设计的交互区域,与第一窗口相互独立;进而在第一窗口展示应用程序的应用界面过程中,检测到用户的交互操作后,可以响应于用户的交互操作,在第二窗口展示交互操作对应的交互信息;从而能够降低交互过程中交互信息对用户使用应用的影响。
附图说明
图1是本发明的一种交互方法实施例的步骤流程图;
图2是本发明实施例的一种显示区域界面的示意图;
图3是本发明的一种交互方法可选实施例的步骤流程图;
图4a是本发明的一种车辆实施例的结构框图;
图4b是本发明的又一种交互方法可选实施例的步骤流程图;
图5a是本发明实施例的一种车辆方向盘交互区域示意图;
图5b是本发明实施例的一种区域A中控制键和触摸点位置的示意图;
图5c是本发明实施例的一种数据处理过程的示意图;
图6是本发明的又一种交互方法可选实施例的步骤流程图;
图7是本发明的又一种交互方法可选实施例的步骤流程图;
图8是本发明实施例的又一种数据处理过程的示意图;
图9是本发明的一种交互装置实施例的结构框图;
图10是本发明的一种交互装置可选实施例的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
参照图1,示出了本发明的一种交互方法实施例的步骤流程图,具体可以包括如下步骤:
步骤102、在第一窗口展示应用程序的应用界面过程中,响应于用户的交互操作,在第二窗口展示交互操作对应的交互信息。
本发明实施例提供的一种交互方法,可以应用于车辆中,车辆的同一显示区域设有第一窗口和第二窗口,第一窗口与第二窗口分离,第二窗口是根据窗口管理服务设计的交互区域。其中,同一显示区域可以是指中控屏对应的显示区域。第一窗口可以参照图2中“W1”的所示,第二窗口可以参照图2中的“W2”所示。当然,车辆还可以提供其他窗口如Dock栏(用于显示应用程序的快捷入口或功能的快捷入口;如图2中的“W3”所示),状态栏(用于显示系统状态信息,如电量、信号强度等等;如图2中的“W4”所示);本发明实施例对此不作限制。此外,本发明实施例中,用于管理显示区域的操作系统可以是安卓系统,也可以是其他的操作系统,本发明实施例对此不作限制。
本发明实施例中,用户可以在操作系统中安装多个应用程序,如音乐应用程序、导航应用程序等等,本发明实施例对此不作限制。当确定用户需要打开某个应用程序时,可以在第一窗口展示该应用程序的应用界面;如图2中第一窗口展示的是导航应用程序的应用界面。在第一窗口展示应用程序的应用界面过程中,用户需要与车辆进行交互时,可以执行交互操作,如语音指令等。为了不影响用户对第一窗口展示的应用界面的使用,在接收用户的交互操作后,可以在第二窗口展示交互操作对应的交互信息。
综上,本发明实施例中,车辆可以提供第一窗口和第二窗口,其中,第二窗口是根据窗口管理服务设计的交互区域,与第一窗口相互独立;进而在第一窗口展示应用程序的应用界面过程中,检测到用户的交互操作后,可以响应于用户的交互操作,在第二窗口展示交互操作对应的交互信息;从而能够降低交互过程中交互信息对用户使用应用的影响。
智能汽车是比普通汽车更具人性化的新生代汽车,智能汽车集中运用了计算机、车载传感、信息融合、通讯、人工智能及自动控制等技术,是典型的高新技术综合体。智能汽车不仅涉及车联网与车的有机联合,还结合了新能源与智能化的因素,目的是要实现安全、舒适、节能、高效地行驶,并成为最终可替代人来操作的新一代汽车。智能汽车是未来汽车工业改革和增长的新动力。
随着自动驾驶以及人工智能的发展,车辆中人机交互,逐渐从传统的“按键式”操作界面,升级至通过中央触控屏(中控屏幕)来代替传统按键,完成更加智能化和便捷的人机交互。例如,一种典型的中控屏幕的设计示例为,一中控屏幕位列在车身的主驾与副驾之间,主驾可以通过这一屏幕对车辆进行操控,比如通过这一屏幕进行人脸识别、手势操作以及其他的一些人机交互。
屏幕化发展代替传统按键,并加以智能化对接,以增加驾驶员操作的便捷性以及灵活性,为驾驶带来乐趣。但是更多需要考虑的,是在享受便捷性的同时,保证车辆智能控制的安全性。如果用触控屏取代车内所有的物理按键,就会造成一种很尴尬的现象:比如连改变一下收音机的调频或者调节空调的温度,都需要通过触碰屏幕进行操作,这其实是埋藏了很大的安全隐患的。尤其是在行车过程中,驾驶员的规范驾车行为至少包括:双手不能离开方向盘。哪怕是单手控制方向盘短短的几秒钟,都可能造成不可挽回的损失。
本领域技术人员在基于安全前提针对中控屏幕触控操作的改进,长期以来都集中在中控屏幕本体上,即用户在中控屏幕上的交互,而不去考虑其他方面的可能性。然而本申请发明人克服了这一技术偏见,采用了人们由于技术偏见而舍弃的技术手段,创造性地提出在方向盘上增设用户交互区域(覆盖中控屏幕触控功能)的方案,让驾驶员在行车过程中,能够规范地双手握住方向盘;当需要操作某些功能时,驾驶员只需在方向盘上进行诸如按压或点触或滑动等交互操作,就能获得相应操作结果的反馈,从而从根源上解决了在智能汽车上进行人机交互的安全问题。
不仅如此,本申请这种在方向盘上开发用户交互控制区域的方案,拓展了智能汽车车机整体的使用场景,是一种高新科技领域新技术的发展趋势。
更进一步地,本申请发明人拓展了在方向盘上的多种交互方式,除了按压外,还有诸如滑动操作,点触操作等诸多交互方式。而交互控制区域所对应的功能,不仅可由厂商主动定义,也可由用户自定义,还可以跟随科技发展和用户需求不断变化,不断升级,如经由OTA(OverTheAir,空中下载)升级方向盘用户交互控制的更多功能。
在具体实现中,本申请发明人还注意到不可忽略的一个因素在于,方向盘本身占据物理空间的位置是有限的,而其被赋予的功能是众多的,比如通常方向盘中会设置安全气囊,可以理解的是,这将导致方向盘上的用户交互控制区域是非常有限的。
在这种情况下,本申请发明人还提出了更多在方向盘上的用户交互控制区域的更多交互方式,除按压,滑动,点触等方式外,还可以设置控件组合操作或按键组合操作,以在有限的控制区域实现无限、可扩展的功能的响应及操作。
本发明的一个实施例中,交互操作可以包括语音指令和作用于车辆方向盘上设置的交互区域的触摸操作。进而在车辆行驶过程中,用户通过语音指令调起交互信息后,再通过作用于车辆方向盘上设置的交互区域的触摸操作,进行一步的交互。从而解决现有技术需要进行多次语音交互带来的交互效率低的问题,还能够保证驾驶安全。
本发明的一个实施例中,车辆内可以包括多个车辆装置,其中,车辆装置包括但不限于:氛围灯、车窗、天窗、座椅、空调、显示屏、后视镜等等。每个车辆装置可以对应至少一个控制项,如氛围灯对应的控制项可以对应两个控制项:氛围灯亮度控制项和氛围灯颜色控制项;又如后视镜可以对应一个控制项:后视镜角度控制项;等等,本发明实施例对此不作限制。用户可以先通过语音指令在第二窗口快速调起对应的控制项;然后可以基于第二窗口中展示的控制项,可以对第二窗口中的控制项进行显示控制,以及对控制项进行设置,以高效的对某一控制项进行设置。
参照图3、示出了本发明的一种交互方法可选实施例的步骤流程图。
步骤302、在第一窗口展示应用程序的应用界面过程中,且车辆处于行驶状态时,响应于用户的语音指令,在第二窗口调起对应的控制项。
本发明实施例中,在第一窗口展示应用程序的应用界面过程中,且车辆处于行驶状态时,可以接收语音指令;然后对该语音指令进行识别,确定对应的控制项;再在第二窗口调起对应的控制项。例如语音指令为:“调整空调温度”,则可以在第二窗口调起空调的温度控制项。
然后用户可以通过执行作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中的控制项进行显示控制,以及对控制项进行设置。
步骤304、响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中的控制项进行显示控制。
步骤306、响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对控制项进行设置。
本发明实施例中,在接收到用户作用于车辆方向盘上设置的交互区域的触摸操作后,一方面可以执行步骤304,对第二窗口中的控制项进行显示控制;另一方面可以执行步骤306,对控制项进行设置。
综上,本发明实施例中,车辆处于行驶状态时,响应于用户的语音指令,在第二窗口调起对应的控制项;然后响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中的控制项进行显示控制,以及响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对控制项进行设置;进而在车辆处于行驶状态时,用户可以通过语音指令和作用于车辆方向盘上设置的交互区域的触摸操作,针对控制项进行交互,能够提高交互效率;且用户双手无需离开方向盘,能够在交互过程中保证驾驶安全。此外,还能够避免对车辆装置控制项进行设置,造成对用户使用应用程序的影响。
可参照图4a,本发明的一个实施例中,用于管理显示区域的操作系统可以包括应用层和应用框架层,应用框架层提供有语音组件、系统服务组件和窗口管理服务组件。其中,窗口管理服务组件用于提供窗口管理服务,进而可以通过窗口管理服务组件设计第二窗口。车辆还包括用于控制车辆装置的车辆控制系统。此外,操作系统的应用框架层还提供了车控组件,进而操作系统可以通过车控组件指示车辆控制系统控制车辆装置。当然,应用框架层还提供有其他的组件,如通知服务组件等等,本发明实施例对此不作限制。
参照图4b,示出了本发明的又一种交互方法可选实施例的步骤流程图。
步骤402、在第一窗口展示应用程序的应用界面过程中,且车辆处于行驶状态时,语音组件接收用户的语音指令,并将语音指令上传至服务器。
步骤404、语音组件语音组件接收服务器返回的指令识别结果,并依据指令识别结果确定用户所需控制的目标控制项。
步骤406、语音组件从车辆控制系统获取目标控制项的状态信息,并将指令识别结果和目标控制项的状态信息发送至应用层。
步骤408、应用层依据指令识别结果,在第二窗口展示目标控制项的状态信息。
本发明实施例中,音频采集模块采集到用户的语音指令后,可以将该语音指令发送给语音组件。语音组件接收到用户的语音指令后,可以将语音指令上传至服务器;由服务器对语音指令进行识别,确定对应的指令识别结果并返回给语音组件。语音组件接收到指令识别结果后,可以依据指令识别结果确定用户所需控制的目标控制项。然后语音组件再从车辆控制系统中获取目标控制项的状态信息,目标控制项的状态信息可以用于描述目标控制项的状态;例如,目标控制项为氛围灯亮度控制项,则状态信息可以是指氛围灯当前的亮度。又例如,目标控制项为空调温度控制项,则状态信息可以是指空调当前的温度。然后语音组件可以将指令识别结果和目标控制项的状态信息,均发送至应用层;应用层接收到指令识别结果和目标控制项的状态信息后,可以依据指令识别结果,在第二窗口展示目标控制项的状态信息。
本发明的一个可选实施例中,第二窗口中的信息可以以卡片的形式展示;其中,一个控制项可以对应一张卡片,例如可以包括:空调温度调节卡片、空调风量调节卡片、座椅加热卡片等等。进而可以在目标控制项对应的卡片中,展示该目标控制项的状态信息。其中,状态信息的展示样式可以包括多种,如以进度条的样式展示,本发明实施例对此不作限制。
作为本发明的一个示例,可参照图5a,示出了本发明实施例的一种车辆方向盘交互区域的示意图。图5a中的区域A和区域B均是交互区域。触摸操作可以包括多种,如滑动触摸、按压操作、点触操作等等,本发明实施例对此不作限制。
本发明的一个实施例中,交互区域设置有控制键和触摸点,其中,触摸点可以设置于控制键上,也可以设置于非控制键区域,本发明实施例对此不作限制。控制键可以是实体按键。可以参照图5b,图5b对应于图5a的区域A,可以包括4个控制键和8个触摸点,其中4个触摸点设置于控制键上,另外4个触摸点设置于非控制键区域。
本发明实施例中,可以预先针对每个控制项,设置交互区域中每个控制键/触摸点对应于该控制项的控制操作(可以包括控制方式和控制步长),以及设置交互区域中每个控制键/触摸点对应于该控制项的状态信息的显示调整操作(可以包括显示调整方式和调整步长)。和/或,设置针对触摸点的滑动触摸操作的滑动方向,对应于该控制项的控制方式和对应于控制项的状态信息的显示调整方式,以及滑动触摸操作的滑动距离,对应于该控制项的控制步长和对应于控制项的状态信息的调整步长。
以下以对图5a中区域A为例进行说明。
例如,可以设置图5a中控制键“1”,对应于氛围灯亮度控制项的控制方式为:降低亮度,控制步长为:第一预设值;对应于氛围灯亮度控制项的状态信息的显示调整方式:向左滑动,调整步长:第二预设值。设置图5a中控制键“2”对应于氛围灯亮度控制项的控制方式为:增加亮度,控制步长为:第一预设值;对应于氛围灯亮度控制项的状态信息的显示调整方式:向右滑动,调整步长:第二预设值。
又例如,可以设置顺时针方向对应于氛围灯亮度控制项的控制方式为:增加亮度,对应于氛围灯亮度控制项的状态信息的显示调整方式:向右滑动;滑动距离为两个相邻的触摸点之间的距离,对应于氛围灯亮度控制项的控制步长为:第一预设值,对应于氛围灯亮度控制项的状态信息的调整步长为:第二预设值。可以设置逆时针方向对应于氛围灯亮度控制项的控制方式为:降低亮度,对应于氛围灯亮度控制项的状态信息的显示调整方式:向左滑动;滑动距离为两个相邻的触摸点之间的距离,对应于氛围灯亮度控制项的控制步长为:第一预设值,对应于氛围灯亮度控制项的状态信息的调整步长为:第二预设值。
其中,所示第一预设值和第二预设值可以按照需求设置,本发明实施例对此不作限制。
进而用户可以通过作用于方向盘上实体按键的触摸操作,对第二窗口中的目标控制项的状态信息进行显示调整,以及对目标控制项进行控制。
步骤410、系统服务组件接收用户作用于车辆方向盘上设置的交互区域的触摸操作对应的信号。
步骤412、系统服务组件将信号转换为系统按键事件,并将系统按键事件发送至应用层。
步骤414、应用层根据系统按键事件,确定针对目标控制项对应状态信息的显示调整操作,按照显示调整操作对第二窗口中的目标控制项的状态信息进行调整。
本发明实施例中,当用户执行作用于车辆方向盘上设置的交互区域的触摸操作后,方向盘可以将该触摸操作对应的信号发送至系统服务组件。系统服务组件接收到信号后,可以将信号转换为系统按键事件,并将系统按键事件发送至应用层。其中,不同的信号对应的系统按键事件不同。
应用层接收到系统按键事件后,一方面可以执行步骤414:可以基于系统按键事件,确定针对目标控制项对应状态信息的显示调整操作;其中,显示调整操作可以包括显示调整方式和调整步长。然后可以按照显示调整方式和调整步长对目标控制项的状态信息进行调整。例如,若图5a中控制键“2”对应于氛围灯亮度控制线的状态信息的显示调整方式为“向右滑动”,调整步长为“20个像素点”;若氛围灯亮度控制线的状态信息是以进度条的形式展示,则可以将氛围灯的亮度控制项的状态信息对应的进度条,向右滑动20个像素点。
本发明实施例中,应用层接收到系统按键事件后,另一方面可以执行步骤416-步骤422,实现对目标控制项进行控制。
步骤416、应用层根据系统按键事件,确定针对目标控制项的控制操作。
步骤418、应用层依据控制操作生成针对目标控制项的控制指令,并将控制项指令发送至车控组件。
步骤420、车控组件将控制指令发送至车辆控制系统。
步骤422、车辆控制系统按照控制指令,对目标控制项进行控制。
应用层可以根据系统按键事件,确定针对目标控制项的控制操作,控制操作包括控制方式和控制步长。然后依据控制操作生成针对目标控制项的控制指令,并将控制项指令发送至车控组件。车控组件接收到控制指令后,可以将控制指令发送至车辆控制系统;车辆控制系统接收到控制指令后,可以从控制指令中提取出针对目标控制项的控制方式和控制步长,再按照控制方式和控制步长,对目标控制项进行控制。例如,若图5a中控制键“2”对应于氛围灯亮度控制项的控制方式为“增加亮度”,控制步长为“10%”;则可以将氛围灯的亮度增加10%。
作为本发明的一个示例,可以参照图5c,示出了本发明实施例的一种数据处理过程的示意图;数据处理过程中各部分执行的操作可以参照上述步骤402-步骤422,在此不再赘述。其中,第二窗口显示的是目标控制项的卡片,目标控制项的卡片中显示的是目标控制项的状态信息。
本发明的一个实施例中,用户还可以针对操作系统中安装的应用程序进行交互;进而避免针对应用程序的交互反馈信息,影响用户使用应用程序。
参照图6,示出了本发明的又一种交互方法可选实施例的步骤流程图。
步骤602、在第一窗口展示应用程序的应用界面过程中,且车辆处于行驶状态时,响应于用户的语音指令,在第二窗口展示针对应用程序的交互反馈信息。
步骤604、响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中的交互反馈信息进行显示控制。
本发明实施例中,在第一窗口展示应用程序的应用界面过程中,且车辆处于行驶状态时,可以接收语音指令;然后对该语音指令进行识别,确定针对应用程序的交互反馈信息;再在第二窗口调起针对应用程序的交互反馈信息。然后待用户可以执行作用于车辆方向盘上设置的交互区域的触摸操作后,可以响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中的交互反馈信息进行显示控制。
综上,本发明实施例中,车辆处于行驶状态时,响应于用户的语音指令,在第二窗口展示针对应用程序的交互反馈信息;然后响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中的交互反馈信息进行显示控制;进而在车辆处于行驶状态时,用户可以通过语音指令和作用于车辆方向盘上设置的交互区域的触摸操作,针对应用程序进行交互,能够提高交互效率;且用户双手无需离开方向盘,能够在交互过程中保证驾驶安全。此外,还能够避免对车辆装置控制项进行设置,造成对用户使用应用程序的影响。
参照图7,示出了本发明的又一种交互方法可选实施例的步骤流程图。
步骤702、在第一窗口展示应用程序的应用界面过程中,且车辆处于行驶状态时,语音组件接收用户的语音指令,并将语音指令上传至服务器。
本步骤702与上述步骤402类似,在此不再赘述。
步骤704、语音组件接收服务器返回的指令识别结果,并将指令识别结果转发至对应的应用程序。
步骤706、应用程序依据指令识别结果进行查询,确定对应的交互反馈信息,并将交互反馈信息返回给语音组件。
步骤708、语音组件将指令识别结果和交互反馈信息发送至应用层。
步骤710、应用层依据指令识别结果,在第二窗口展示交互反馈信息。
本发明实施例中,语音组件接收到服务器返回的指令识别结果后,可以将指令识别结果转发给对应的应用程序,由该应用程序基于指令识别结果进行查询,确定对应的交互反馈信息。应用程序查询得到交互反馈信息后,可以将交互反馈返回给语音组件;然后语音组件将指令识别结果和交互反馈信息发送至应用层。应用层接收到指令识别结果和交互反馈信息后,可以按照指令识别结果,在第二窗口展示交互反馈信息。
本发明的一个可选实施例中,当应用程序为导航应用程序时,交互反馈信息可以为导航信息。导航信息可以包括导航POI(Point ofInformation,兴趣点)列表,导航路线列表和路线信息。对应的,可以在第二窗口中显示导航POI列表,其中,导航POI列表中每一条导航POI包括POI名称和路线信息。本发明的一个可选实施例中,导航POI列表中每一条导航POI可以对应一张卡片,每张卡片中显示对应导航POI的POI名称和路线信息。当应用程序为音乐应用程序时,交互反馈信息可以是音乐交互信息,音乐交互信息可以包括音乐类型列表、曲目列表和对应的音乐信息;对应的,可以在第二窗口中显示音乐类型列表和对应的音乐信息。
本发明实施例中,用户可以通过作用于车辆方向盘上设置的交互区域的触摸操作,移动第二窗口中的光标,查找其所需的交互反馈信息;在确定所需的交互反馈后,再次通过作用于车辆方向盘上设置的交互区域的触摸操作进行选取,打开交互反馈信息的详细信息。当然,用户也可以直接通过作用于车辆方向盘上设置的交互区域的触摸操作进行选取,打开交互反馈信息的详细信息。
因此,本发明实施例可以预先确定方向盘上对应的操作为移动操作的控制键/触摸点,以及对应的操作为选取操作的控制键/触摸点。当将某个控制键/触摸点对应的操作设置为移动操作时,可以设置该控制键/触摸点对应的移动方向和移动步长。此外,本发明实施例中,还可以将作用于方向盘中交互区域内触摸点的滑动触摸操作对应的操作设置为移动操作;并设置作用于方向盘中交互区域内触摸点的滑动触摸操作的滑动方向对应的移动方向,以及作用于方向盘上实体控制键的滑动触摸操作的滑动距离对应的移动步长。
以下以对图5a中区域A触摸操作为例进行说明。
例如,可以设置图5a中控制键“3”和“4”对应的操作设置为移动操作。其中可以将实体控制键“3”对应的移动方向为“上移”,对应的移动步长为第三预设值;实体控制键“4”对应的移动方向为“下移”,对应的移动步长为第三预设值。
又例如:设置顺时针方向对应的移动方式为:“下移”;滑动距离为两个相邻的触摸点直接的距离,对应的移动步长为第三预设值。以及设置顺逆时针方向对应的移动方式为:“上移”;滑动距离为两个相邻的触摸点直接的距离,对应的移动步长为第三预设值。
还例如,可以设置图5a中控制键X对应的操作为选取操作。
步骤712、系统服务组件接收用户作用于车辆方向盘上设置的交互区域的触摸操作对应的信号。
步骤714、系统服务组件将信号转换为系统按键事件,并将系统按键事件发送至应用层。
步骤716、应用层在确定系统按键事件对应的操作为移动操作时,按照移动操作将第二窗口中的光标在多条交互反馈信息上移动。
步骤718、应用层在确定系统按键事件对应的操作为选取操作时,在第二窗口中展示光标所在位置对应交互反馈信息的详细信息。
本发明实施例中,系统服务组件接收用户作用于车辆方向盘上设置的交互区域的触摸操作对应的信号后,可以将信号转换为系统按键事件,并将系统按键事件发送至应用层。由于用户作用于方向盘中实体按键的触摸操作可能是用于移动光标,以查找所需的交互反馈信息;也可以是选取光标当前所在位置的交互反馈信息,以查看该交互反馈信息的详细信息。应用层接收系统按键事件,可以确定系统按键事件对应是哪种操作。当应用层确定系统按键事件对应的操作是移动操作时,可以获取移动操作对应的移动方向和移动步长,然后按照移动方向和移动步长,移动第二窗口中的光标。例如,当第二窗口中显示的为导航POI列表时,可以将光标在导航POI列表的各条导航POI之间移动。又例如,当第二窗口中显示的为音乐类型列表时,可以将光标在音乐类型列表的各种音乐类型之间移动。
当应用层确定系统按键事件对应的操作是选取操作时,可以将第二窗口中光标所在位置对应交互反馈信息,确定为是用户所选取的信息;然后可以在第二窗口中展示光标所在位置对应交互反馈信息的详细信息。例如,当光标所在位置对应导航信息是导航POI列表中的某一条导航POI信息时,其对应的详细信息可以是该条导航POI对应的导航路线列表和该导航路线列表对应的路线信息。又例如,当光标所在位置对应的音乐交互信息为音乐类型列表中某一种类型音乐时,其对应的详细信息可以该种音乐类型对应的曲目列表对应的音乐信息。
此外,当第二窗口中展示光标所在位置对应交互反馈信息的详细信息之后,若再次接收到用户作用于车辆方向盘上设置的交互区域的触摸操作,则应用层可以将用户作用于车辆方向盘上设置的交互区域的触摸操作对应的信号转换为系统按键事件。并在确定该系统按键事件对应的操作为为移动操作时,可以获取移动操作对应的移动方向和移动步长;然后移动方向和移动步长,移动第二窗口中的光标。例如,将光标在第二窗口中显示的导航路线列表中各条导航路线之间移动。若应用层确定系统按键事件对应的操作为选取操作时,可以在第一窗口中进入该详细信息对应的界面。例如,当选中第二窗口中显示的导航路线列表中的某一条导航路线时,在第一窗口的地图中,展示光标当前所在位置对应导航路线。又例如,当选中第二窗口中显示的曲目列表中中的某一个曲目,则可以在第一窗口中展示该曲目的播放界面,并播放该曲目。
作为本发明的一个示例,可以参照图8,示出了本发明的又一种数据处理过程的示意图;数据处理过程各个部分执行的步骤可以参照上述步骤802-步骤818,在此不再赘述。
需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。
本发明实施例还提供了一种交互装置,应用于车辆中;其中,装置包括的模块、子模块,可以如下:
参照图9,示出了本发明一种交互装置实施例的结构框图。
交互模块902,用于在第一窗口展示应用程序的应用界面过程中,响应于用户的交互操作,在第二窗口展示交互操作对应的交互信息。
参照图10,示出了本发明一种交互装置可选实施例的结构框图。
本发明的一个可选实施例中,交互操作包括语音指令和作用于车辆方向盘上设置的交互区域的触摸操作;车辆包括多个车辆装置,一个车辆装置对应至少一个控制项;交互模块902,包括:
控制项调起子模块9022,用于车辆处于行驶状态时,响应于用户的语音指令,在第二窗口调起对应的控制项;
控制项显示控制子模块9024,用于响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中的控制项进行显示控制;的装置还包括:
控制项设置模块904,用于响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对控制项进行设置。
本发明一个可选实施例中,用于管理显示区域的操作系统包括应用层和应用框架层,应用框架层提供有语音组件;车辆还包括用于控制车辆装置的车辆控制系统;控制项调起子模块9022,用于调用语音组件接收用户的语音指令,并将语音指令上传至服务器;调用语音组件接收服务器返回的指令识别结果,并依据指令识别结果确定用户所需控制的目标控制项;调用语音组件从车辆控制系统获取目标控制项的状态信息,并将指令识别结果和目标控制项的状态信息发送至应用层;调用应用层依据指令识别结果,在第二窗口展示目标控制项的状态信息。
本发明一个可选实施例中,应用框架层还提供有系统服务组件,控制项显示控制子模块9024,用于调用系统服务组件将信号转换为系统按键事件,并将系统按键事件发送至应用层;以及调用应用层根据系统按键事件,确定针对目标控制项对应状态信息的显示调整操作,按照显示调整操作对第二窗口中的目标控制项的状态信息进行调整。
本发明一个可选实施例中,应用框架层还提供有车控组件,控制项设置模块904,用于调用应用层根据系统按键事件,确定针对目标控制项的控制操作;以及调用应用层依据控制操作生成针对目标控制项的控制指令,并将控制项指令发送至车控组件;调用车控组件将控制指令发送至车辆控制系统;调用车辆控制系统按照控制指令,对目标控制项进行控制。
本发明一个可选实施例中,交互操作包括语音控制指令和作用于车辆方向盘上设置的交互区域的触摸操作;交互模块902,包括:
反馈信息展示子模块9026,用于车辆处于行驶状态时,响应于用户的语音指令,在第二窗口展示针对应用程序的交互反馈信息;
反馈信息显示控制子模块9028,用于响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对第二窗口中的交互反馈信息进行显示控制。
本发明一个可选实施例中,用于管理显示区域的操作系统包括应用层和应用框架层,应用框架层提供有语音组件;反馈信息展示子模块9026,用于调用语音组件接收用户的语音指令,并将语音指令上传至服务器;以及调用语音组件接收服务器返回的指令识别结果,并将指令识别结果转发至对应的应用程序;调用应用程序依据指令识别结果进行查询,确定对应的交互反馈信息,并将交互反馈信息返回给语音组件;调用语音组件将指令识别结果和交互反馈信息发送至应用层;调用应用层依据指令识别结果,在第二窗口展示交互反馈信息。
本发明一个可选实施例中,交互反馈信息包括多条,操作系统的应用框架层还提供有系统服务组件,反馈信息显示控制子模块9028,用于调用系统服务组件接收用户作用于车辆方向盘上设置的交互区域的触摸操作对应的信号;调用系统服务组件将信号转换为车载系统的系统按键事件,并将系统按键事件发送至应用层;调用应用层在确定系统按键事件对应的操作为移动操作时,按照移动操作将第二窗口中的光标在多条交互反馈信息上移动;在确定系统按键事件对应的操作为选取操作时,在第二窗口中展示光标所在位置对应交互反馈信息的详细信息。
综上,本发明实施例中,车辆可以提供第一窗口和第二窗口,其中,第二窗口是根据窗口管理服务设计的交互区域,与第一窗口相互独立;进而在第一窗口展示应用程序的应用界面过程中,检测到用户的交互操作后,可以响应于用户的交互操作,在第二窗口展示交互操作对应的交互信息;从而能够降低交互过程中交互信息对用户使用应用的影响。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本发明实施例还提供了一种可读存储介质,当存储介质中的指令由车辆的处理器执行时,使得车辆能够执行如本发明实施例中任一交互方法。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种交互方法、交互装置和一种车辆,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (11)

1.一种交互方法,其特征在于,应用于车辆中,所述车辆的同一显示区域设有第一窗口和第二窗口,所述第一窗口与第二窗口分离,所述第二窗口是根据窗口管理服务设计的交互区域,所述的方法包括:
在所述第一窗口展示应用程序的应用界面过程中,且车辆处于行驶状态时,响应于用户的交互操作,在所述第二窗口展示所述交互操作对应的交互信息;所述交互操作包括语音指令和作用于车辆方向盘上设置的交互区域的触摸操作;所述语音指令用于调起所述交互信息,所述作用于车辆方向盘上设置的交互区域的触摸操作用于对所述交互信息进行显示控制。
2.根据权利要求1所述的方法,其特征在于,所述车辆包括多个车辆装置,一个车辆装置对应至少一个控制项;
所述车辆处于行驶状态时,响应于用户的交互操作,在所述第二窗口展示所述交互操作对应的交互信息,包括:
车辆处于行驶状态时,响应于用户的语音指令,在所述第二窗口调起对应的控制项;
以及响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对所述第二窗口中的控制项进行显示控制;
所述的方法还包括:
响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对所述控制项进行设置。
3.根据权利要求2所述的方法,其特征在于,用于管理所述显示区域的操作系统包括应用层和应用框架层,所述应用框架层提供有语音组件;所述车辆还包括用于控制车辆装置的车辆控制系统;
所述响应于用户的语音指令,在所述第二窗口调起对应的控制项,包括:
所述语音组件接收用户的语音指令,并将所述语音指令上传至服务器;
所述语音组件接收服务器返回的指令识别结果,并依据指令识别结果确定用户所需控制的目标控制项;
所述语音组件从所述车辆控制系统获取所述目标控制项的状态信息,并将所述指令识别结果和所述目标控制项的状态信息发送至所述应用层;
所述应用层依据所述指令识别结果,在所述第二窗口展示所述目标控制项的状态信息。
4.根据权利要求3所述的方法,其特征在于,所述应用框架层还提供有系统服务组件;所述响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对所述第二窗口中控制项进行显示控制,包括:
所述系统服务组件接收用户作用于车辆方向盘上设置的交互区域的触摸操作对应的信号;
所述系统服务组件将所述信号转换为系统按键事件,并将所述系统按键事件发送至所述应用层;
所述应用层根据所述系统按键事件,确定针对所述目标控制项对应状态信息的显示调整操作,按照所述显示调整操作对所述第二窗口中的所述目标控制项的状态信息进行调整。
5.根据权利要求4所述的方法,其特征在于,所述应用框架层还提供有车控组件,所述响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对所述控制项进行设置,包括:
所述应用层根据所述系统按键事件,确定针对所述目标控制项的控制操作;
所述应用层依据所述控制操作生成针对所述目标控制项的控制指令,并将所述控制项指令发送至所述车控组件;
所述车控组件将所述控制指令发送至所述车辆控制系统;
所述车辆控制系统按照所述控制指令,对所述目标控制项进行控制。
6.根据权利要求1所述的方法,其特征在于,所述车辆处于行驶状态时,响应于用户的交互操作,在所述第二窗口展示所述交互操作对应的交互信息,包括:
车辆处于行驶状态时,响应于用户的语音指令,在所述第二窗口展示针对应用程序的交互反馈信息;
以及响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对所述第二窗口中的交互反馈信息进行显示控制。
7.根据权利要求6所述的方法,其特征在于,用于管理所述显示区域的操作系统包括应用层和应用框架层,所述应用框架层提供有语音组件;
所述响应于用户的语音指令,在所述第二窗口展示针对应用程序的交互反馈信息,包括:
所述语音组件接收用户的语音指令,并将所述语音指令上传至服务器;
所述语音组件接收服务器返回的指令识别结果,并将所述指令识别结果转发至对应的应用程序;
所述应用程序依据所述指令识别结果进行查询,确定对应的交互反馈信息,并将所述交互反馈信息返回给所述语音组件;
所述语音组件将所述指令识别结果和交互反馈信息发送至所述应用层;
所述应用层依据所述指令识别结果,在所述第二窗口展示所述交互反馈信息。
8.根据权利要求7所述的方法,其特征在于,所述交互反馈信息包括多条,所述操作系统的应用框架层还提供有系统服务组件,所述响应于用户作用于车辆方向盘上设置的交互区域的触摸操作,对所述第二窗口中的交互反馈信息进行显示控制,包括:
所述系统服务组件接收用户作用于车辆方向盘上设置的交互区域的触摸操作对应的信号;
所述系统服务组件将所述信号转换为车载系统的系统按键事件,并将所述系统按键事件发送至所述应用层;
所述应用层在确定所述系统按键事件对应的操作为移动操作时,按照所述移动操作将所述第二窗口中的光标在多条交互反馈信息上移动;在确定所述系统按键事件对应的操作为选取操作时,在所述第二窗口中展示光标所在位置对应交互反馈信息的详细信息。
9.一种交互装置,其特征在于,应用于车辆中,所述车辆提供有第一窗口和第二窗口,所述第一窗口与第二窗口分离,所述第二窗口是根据窗口管理服务设计的交互区域;所述装置包括:
交互模块,用于在所述第一窗口展示应用程序的应用界面过程中,且车辆处于行驶状态时,响应于用户的交互操作,在所述第二窗口展示所述交互操作对应的交互信息;所述交互操作包括语音指令和作用于车辆方向盘上设置的交互区域的触摸操作;所述语音指令用于调起所述交互信息,所述作用于车辆方向盘上设置的交互区域的触摸操作用于对所述交互信息进行显示控制。
10.一种车辆,其特征在于,包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于执行如方法权利要求1-8任一所述的交互方法。
11.一种可读存储介质,其特征在于,当所述存储介质中的指令由车辆的处理器执行时,使得车辆能够执行如方法权利要求1-8任一所述交互方法。
CN202010261071.2A 2020-04-03 2020-04-03 一种交互方法、装置和车辆 Active CN111506230B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010261071.2A CN111506230B (zh) 2020-04-03 2020-04-03 一种交互方法、装置和车辆

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010261071.2A CN111506230B (zh) 2020-04-03 2020-04-03 一种交互方法、装置和车辆

Publications (2)

Publication Number Publication Date
CN111506230A CN111506230A (zh) 2020-08-07
CN111506230B true CN111506230B (zh) 2022-03-18

Family

ID=71864714

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010261071.2A Active CN111506230B (zh) 2020-04-03 2020-04-03 一种交互方法、装置和车辆

Country Status (1)

Country Link
CN (1) CN111506230B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114323056A (zh) * 2020-09-30 2022-04-12 比亚迪股份有限公司 一种驾驶导航方法,装置及汽车
CN112596834B (zh) * 2020-12-22 2024-04-16 东风汽车有限公司 一种汽车屏幕显示方法及电子设备
CN113625907B (zh) * 2021-07-14 2024-06-14 浙江极氪智能科技有限公司 一种车载终端的显示方法和显示系统
CN113752966B (zh) * 2021-09-14 2022-12-23 合众新能源汽车有限公司 车机系统的交互方法、装置和计算机可读介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105774554A (zh) * 2014-09-16 2016-07-20 现代自动车株式会社 车辆、车辆用显示装置和用于控制车辆显示装置的方法
CN107499251A (zh) * 2017-04-01 2017-12-22 宝沃汽车(中国)有限公司 用于车载显示屏显示的方法、装置和车辆
CN109597594A (zh) * 2018-10-25 2019-04-09 北京长城华冠汽车科技股份有限公司 一种车载娱乐系统的双屏显示方法和装置
CN110203147A (zh) * 2019-06-04 2019-09-06 广州小鹏汽车科技有限公司 车辆的控制方法、车辆及非临时性计算机可读存储介质
CN110525212A (zh) * 2018-05-24 2019-12-03 广州小鹏汽车科技有限公司 一种车辆中控大屏控制方法、装置及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10402161B2 (en) * 2016-11-13 2019-09-03 Honda Motor Co., Ltd. Human-vehicle interaction

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105774554A (zh) * 2014-09-16 2016-07-20 现代自动车株式会社 车辆、车辆用显示装置和用于控制车辆显示装置的方法
CN107499251A (zh) * 2017-04-01 2017-12-22 宝沃汽车(中国)有限公司 用于车载显示屏显示的方法、装置和车辆
CN110525212A (zh) * 2018-05-24 2019-12-03 广州小鹏汽车科技有限公司 一种车辆中控大屏控制方法、装置及系统
CN109597594A (zh) * 2018-10-25 2019-04-09 北京长城华冠汽车科技股份有限公司 一种车载娱乐系统的双屏显示方法和装置
CN110203147A (zh) * 2019-06-04 2019-09-06 广州小鹏汽车科技有限公司 车辆的控制方法、车辆及非临时性计算机可读存储介质

Also Published As

Publication number Publication date
CN111506230A (zh) 2020-08-07

Similar Documents

Publication Publication Date Title
CN111506230B (zh) 一种交互方法、装置和车辆
CN110114825A (zh) 语音识别系统
CN108473142A (zh) 车辆控制系统及其操作方法
US20120013548A1 (en) Human-Machine Interface System
CN105446172B (zh) 一种车载控制方法、车载控制系统及汽车
JP2011081798A (ja) ユーザ構成可能な車両ユーザインターフェース
CN105354003B (zh) 一种基于移动终端和车载终端互联的显示方法及装置
US9662980B2 (en) Gesture input apparatus for car navigation system
CN108146443B (zh) 车辆控制装置
US9904467B2 (en) Display device
CN110764616A (zh) 手势控制方法和装置
CN111506229B (zh) 一种交互方法、装置和车辆
KR101675226B1 (ko) 사용자 단말과 차량 단말 간 미러링을 위한 인터페이스 및 인터페이스 제공 방법
EP3726360A1 (en) Device and method for controlling vehicle component
JP2016097928A (ja) 車両用表示制御装置
CN112061059A (zh) 一种车辆的屏幕调节方法、装置、车辆和可读存储介质
US10071685B2 (en) Audio video navigation (AVN) head unit, vehicle having the same, and method for controlling the vehicle having the AVN head unit
CN111309414B (zh) 用户界面整合方法和车载装置
KR20220012068A (ko) 휴대 단말기의 회전 정보를 이용한 차량 제어 장치 및 그 방법
KR101148981B1 (ko) 스티어링휠에 설치된 차량용 제어장치
CN113076079A (zh) 语音控制方法、服务器、语音控制系统和存储介质
US11073982B2 (en) Vehicle and method of controlling the same
CN116670624A (zh) 界面的控制方法、装置和系统
US11542743B2 (en) Automatic vehicle window control systems and methods
KR101518911B1 (ko) 차량의 스마트 기능 검색 시스템 및 그 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant