CN108958804A - 适于与车辆有关的应用场景的人机交互方法 - Google Patents
适于与车辆有关的应用场景的人机交互方法 Download PDFInfo
- Publication number
- CN108958804A CN108958804A CN201710378458.4A CN201710378458A CN108958804A CN 108958804 A CN108958804 A CN 108958804A CN 201710378458 A CN201710378458 A CN 201710378458A CN 108958804 A CN108958804 A CN 108958804A
- Authority
- CN
- China
- Prior art keywords
- interface
- user
- vehicle
- terminal device
- man
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 84
- 238000000034 method Methods 0.000 title claims abstract description 55
- 230000004044 response Effects 0.000 claims abstract description 20
- 238000012545 processing Methods 0.000 claims description 30
- 230000006870 function Effects 0.000 claims description 24
- 230000002452 interceptive effect Effects 0.000 claims description 18
- 238000004590 computer program Methods 0.000 claims description 10
- 230000008569 process Effects 0.000 claims description 9
- 238000005516 engineering process Methods 0.000 abstract description 5
- 230000001360 synchronised effect Effects 0.000 description 7
- 230000008859 change Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 231100000749 chronicity Toxicity 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/445—Program loading or initiating
- G06F9/44505—Configuring for program initiating, e.g. using registry, configuration files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/4401—Bootstrapping
- G06F9/4416—Network booting; Remote initial program loading [RIPL]
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Telephone Function (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及人机交互技术，特别涉及适于与车辆有关的应用场景的人机交互方法和能够实施该方法的计算机可读存储介质。按照本发明一个方面的适于与车辆有关的应用场景的人机交互方法包含：响应于用户进入与车辆有关的应用场景的事件，由能够实现与车辆有关的应用场景相关联的功能的终端设备向用户提供第二接口，以使用户从由第一接口实现人机交互的方式切换至由第二接口实现人机交互的方式，所述第一接口由移动终端提供；经第二接口在终端设备上运行能够在移动终端上运行的应用程序。
Description
技术领域
本发明涉及人机交互技术，特别涉及适于与车辆有关的应用场景的人机交互方法和能够实施该方法的计算机可读存储介质。
背景技术
人类已经步入信息时代，以智能手机为代表的移动终端的功能愈来愈强大，可以毫不夸张地说，智能手机已经渗透入现代社会的各个角落，成为人们不可缺少的必需品，甚至是身体的一部分。
另一方面，作为传统的制造业的典型代表，随着半导体和人工智能的飞速发展，汽车业和家电业正在发生翻天覆地的巨变，大量的IT技术被引入汽车和家用电器设备，使它们由单一功能的工具转变为应用场景下的智能化中心。
在上述这些技术发展趋势下，如果能够将智能手机与各种应用场景中的智能化中心二者有机整合在一起，则将极大改善用户的体验。
发明内容
本发明的一个目的是提供一种适于与车辆有关的应用场景的人机交互方法，其能够将移动终端与关联于与车辆有关的应用场景的终端设备有机整合在一起，从而使各种应用程序在移动终端与终端设备之间能够无缝运行。
按照本发明一个方面的适于与车辆有关的应用场景的人机交互方法包含下列步骤：
响应于用户进入与车辆有关的应用场景的事件，由能够实现与与车辆有关的应用场景相关联的功能的终端设备向用户提供第二接口，以使用户从由第一接口实现人机交互的方式切换至由第二接口实现人机交互的方式，所述第一接口由移动终端提供；以及
经第二接口在终端设备上运行能够在移动终端上运行的应用程序。
优选地，在上述人机交互方法中，响应于用户离开与车辆有关的应用场景的事件，将在终端设备上运行所述应用程序的过程中涉及的数据发送至移动终端和/或云端服务器，并且使用户从由第二接口实现人机交互的方式返回至由第一接口实现人机交互的方式。
优选地，在上述人机交互方法中，经第二接口在终端设备上运行能够在移动终端上运行的应用程序的步骤包括：
终端设备从云端服务器或移动终端接收正在移动终端上运行的应用程序所涉及的数据；以及
终端设备基于从云端服务器或移动终端接收的数据继续运行正在移动终端上运行的应用程序。
优选地，在上述人机交互方法中，经第二接口在终端设备上运行能够在移动终端上运行的应用程序的步骤包括：
经第二接口接收用户启动应用程序的命令；以及
响应于用户的命令，在终端设备上运行相应的应用程序。
优选地，在上述人机交互方法中，在移动终端和终端设备上运行应用程序的过程中涉及的数据包括信息流和任务流，其中，所述信息流包括在与车辆有关的应用场景下已经完成的事项和与用户或外部世界相关联的知识和状态，所述任务流包括在与车辆有关的应用场景下未完成的事项或者必须通过其它应用场景来完成的事项。
优选地，在上述人机交互方法中，所述应用程序包含下列中的至少一种：日程安排应用程序、消息处理应用程序、通话应用程序和视音频播放应用程序。
优选地，在上述人机交互方法中，所述第二接口包括语音交互接口和/或图形交互接口。
优选地，在上述人机交互方法中，所述与车辆有关的应用场景为驾车场景，所述终端设备为车载电子处理系统。
优选地，在上述人机交互方法中，所述第二接口包括语音输入输出接口，在执行应用程序的过程中，终端设备按照下列方式与用户交互：
从经第二接口接收的用户输入确定相应的语义表示；
基于所确定的语义表示和上下文语义，将用户输入转换为能够由终端设备执行的操作命令；
生成与操作命令的执行相关联的用户输出；
从用户输出生成相应的语义表示；以及
经第二接口提供用户输出的语义表示。
按照本发明另一个方面的适于与车辆有关的应用场景的人机交互方法包含下列步骤：
响应于用户进入与车辆有关的应用场景的事件，通过使移动终端向终端设备转移控制权，使用户从由第一接口实现人机交互的方式切换至由第二接口实现人机交互的方式，其中，第一接口由移动终端提供，第二接口由能够实现与应用场景相关联的功能的终端设备提供；
响应于用户离开与车辆有关的应用场景的事件，接收在终端设备上运行应用程序的过程中涉及的数据，并且通过接管控制权，使用户从由第二接口实现人机交互的方式返回至由第一接口实现人机交互的方式。
优选地，在上述人机交互方法中，通过下列方式使移动终端向终端设备转移控制权：
中止正在移动终端上运行的应用程序；以及
将正在移动终端上运行的应用程序所涉及的数据发送至云端服务器和/或终端设备。
本发明的还有一个目的是提供一种车载电子处理系统，其能够与移动终端有机整合在一起，从而使各种应用程序在移动终端与车载电子处理系统之间能够无缝运行。
按照本发明另一方面的车载电子处理系统包含存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序，执行所述计算机程序以实现下列步骤：
响应于用户进入与车辆有关的应用场景的事件，使终端设备向用户提供第二接口，以使用户从由第一接口实现人机交互的方式切换至由第二接口实现人机交互的方式，其中，所述第一接口由移动终端提供，所述第二接口包括语音输入输出接口；
在执行应用程序的过程中，终端设备按照下列方式与用户交互：
从经第二接口接收的用户输入确定相应的语义表示；
基于所确定的语义表示和上下文语义，将用户输入转换为能够由终端设备执行的操作命令；
生成与操作命令的执行相关联的用户输出；
从用户输出生成相应的语义表示；以及
经第二接口提供用户输出的语义表示。
优选地，在上述车载电子处理系统中，所述第二接口还包括图形交互接口。
优选地，在上述车载电子处理系统中，以语音形式和/或图形界面形式经第二接口提供用户输出的语义表示。
本发明的还有一个目的是提供一种计算机可读存储介质，其能够将移动终端与关联于与车辆有关的应用场景的终端设备有机整合在一起，从而使各种应用程序在移动终端与终端设备之间能够无缝运行。
按照本发明另一个方面的计算机可读存储介质，其上存储计算机程序，该程序被处理器执行时实现以下步骤：
响应于用户进入与车辆有关的应用场景的事件，由能够实现与与车辆有关的应用场景相关联的功能的终端设备向用户提供第二接口，以使用户从由第一接口实现人机交互的方式切换至由第二接口实现人机交互的方式，所述第一接口由移动终端提供；
经第二接口在终端设备上运行能够在移动终端上运行的应用程序。
按照本发明还有一个方面的计算机可读存储介质，其上存储计算机程序，该程序被处理器执行时实现以下步骤：
响应于用户进入与车辆有关的应用场景的事件，通过使移动终端向终端设备转移控制权，使用户从由第一接口实现人机交互的方式切换至由第二接口实现人机交互的方式，其中，第一接口由移动终端提供，第二接口由能够实现与与车辆有关的应用场景相关联的功能的终端设备提供；
响应于用户离开与车辆有关的应用场景的事件，接收在终端设备上运行应用程序的过程中涉及的数据，并且通过接管控制权，使用户从由第二接口实现人机交互的方式返回至由第一接口实现人机交互的方式。
附图说明
本发明的上述和/或其它方面和优点将通过以下结合附图的各个方面的描述变得更加清晰和更容易理解，附图中相同或相似的单元采用相同的标号表示。附图包括：
图1为按照本发明一个实施例的适于与车辆有关的应用场景的人机交互方法的流程图。
图2为按照本发明另一个实施例的适于与车辆有关的应用场景的人机交互方法的流程图。
图3为按照本发明另一个实施例的适于与车辆有关的应用场景的人机交互方法的流程图。
图4为可应用于图3所示实施例的人机交互过程的流程图。
图5为按照本发明另一实施例的车载电子处理系统的示意框图。
具体实施方式
下面参照其中图示了本发明示意性实施例的附图更为全面地说明本发明。但本发明可以按不同形式来实现，而不应解读为仅限于本文给出的各实施例。给出的上述各实施例旨在使本文的披露全面完整，以将本发明的保护范围更为全面地传达给本领域技术人员。
在本说明书中，诸如“包含”和“包括”之类的用语表示除了具有在说明书和权利要求书中有直接和明确表述的单元和步骤以外，本发明的技术方案也不排除具有未被直接或明确表述的其它单元和步骤的情形。
诸如“第一”和“第二”之类的用语并不表示单元在时间、空间、大小等方面的顺序而仅仅是作区分各单元之用。
在本说明书中，与车辆有关的应用场景指的是在车辆内部发生的各种场景，例如包括但不限于驾车场景、导航场景、多媒体娱乐场景和通信场景等。
在各种与车辆有关的应用场景下，通常存在一种或多种终端设备来实现与与车辆有关的应用场景相关联的功能，以下将这种终端设备称为能够实现与与车辆有关的应用场景相关联的功能的终端设备。这里所述的终端设备例如可以是车载电子处理系统。该电子处理系统自身可具有通信功能以与移动设备和/或云端通信；或者作为替代，该电子处理系统可通过车辆上设置的通信系统与移动终端和/或云端通信。进一步，作为示例，该电子处理系统可以是车载娱乐系统等。作为另一个示例，该电子处理系统还可以是配备在车辆上的智能系统，例如配备在车辆上的智能机器人等。需要指出的是，本说明书中的“车载”应从最为宽泛的意义上去理解，其不仅包括将电子处理系统固定设置在车体上或与车体相连的方式，还包括将电子处理系统可拆卸或可移动地设置在车辆上的方式。
按照本发明的一个方面，由于能够实现与与车辆有关的应用场景相关联的功能的终端设备通常具备丰富的人机接口（例如语音交互接口和诸如触摸屏之类的图形交互接口），并且具有足够的计算能力完成移动终端的功能（例如日程安排、消息处理、通话和视音频播放），因此当用户进入与车辆有关的应用场景时，可以将人机交互由用户与移动终端之间切换至用户与终端设备之间，并且由终端设备实现移动终端的功能；当用户离开与车辆有关的应用场景时，可以将人机交互由用户与终端设备之间再切换回用户与移动终端之间。按照本发明的另一方面，当用户进入与车辆有关的应用场景时，在移动终端上尚未运行结束的应用程序可以转移至终端设备上继续运行。为此，移动终端将该应用程序运行过程中涉及的数据直接发送至终端设备和/或云端服务器，相应地，终端设备基于在从移动终端或云端服务器接收的相关数据继续运行该应用程序。另一方面，当用户离开与车辆有关的应用场景时，终端设备将其上尚未运行结束的应用程序所涉及的数据发送至移动终端和/或云端服务器，从而可在移动终端上继续运行该应用程序。
按照本发明的另一方面，提供了一种以移动终端为中心的移动智能生活。当用户进入不同的应用场景时，移动终端被托管至关联于相应应用场景的终端设备，由此用户可通过与终端设备进行人机交互在终端设备上执行移动终端的功能；与此同时，终端设备可通过云端服务器实现数据在移动终端与终端设备之间的共享和同步。
优选地，当与车辆有关的应用场景为驾车场景时，车载电子处理系统可托管移动终端的全部功能，并且借助于车辆的功能，拓展移动终端的功能，以使移动终端具有更多的感知力和控制力。
图1为按照本发明一个实施例的适于与车辆有关的应用场景的人机交互方法的流程图。在本实施例中，将用户与诸如智能手机之类的移动终端之间的人机交互接口称为第一接口，将用户与能够实现与与车辆有关的应用场景相关联的功能的终端设备（以下又称为与车辆有关的应用场景终端设备）之间的人机交互接口称为第二接口。在本实施例中，各步骤的执行主体为终端设备或位于终端设备侧。
如图1所示，在步骤110，能够实现与与车辆有关的应用场景相关联的功能的终端设备响应于用户进入与车辆有关的应用场景的事件，向用户提供第二接口，使得用户从由第一接口实现人机交互的方式切换至由第二接口实现人机交互的方式。
需要指出的是，可以通过各种方式来确定用户是否进入车内场景。在本实施例中，以驾驶场景为例，优选地，可根据下列信息中的至少一项来判断用户是否进入驾驶场景：车辆的轮速信息、车门开启探测器的信号和位于车辆内部的摄像头的感测信息等。随后进入步骤120，终端设备判断是否有已经在移动终端上运行并且需要转移至终端设备上继续运行的应用程序。如果有，则进入步骤130，否则进入步骤140。
在步骤130，终端设备从云端服务器或移动终端接收正在移动终端上运行的应用程序所涉及的数据，并且基于该数据继续运行该应用程序。
完成步骤130之后进入步骤140，终端设备判断是否经第二接口接收到用户启动应用程序的命令，如果接收到命令，则进入步骤150，否则进入步骤160。需要指出的是，这里由用户启动的应用程序可以是仅能在终端设备上运行的应用程序，也可以是既能在终端设备上也能在移动终端上运行的应用程序。
在步骤150，终端设备响应于用户的命令，在终端设备上运行相应的应用程序。
完成步骤150之后进入步骤160，终端设备判断是否发生用户离开应用场景的事件。如果发生用户离开应用场景的事件，则进入步骤170，否则返回步骤140。
需要指出的是，可以通过各种方式来确定用户是否离开车内场景。在本实施例中，以驾驶场景为例，优选地，可根据车门开启探测器的信号和位于车辆内部的摄像头的感测信息等来判断用户是否离开驾驶场景。
在步骤170，终端设备将其上运行的应用程序所涉及的数据发送至移动终端和/或云端服务器，并且使用户从由第二接口实现人机交互的方式返回至由第一接口实现人机交互的方式，从而可在移动终端上继续运行尚未结束的应用程序。优选地，发送至移动终端和/或云端服务器的数据不仅包含与尚未运行结束的应用程序相关的数据，而且还包含已经与运行结束的应用程序相关的数据。通过将应用程序的数据上传至云端服务器，可以提供数据在不同设备之间的共享和同步更新。
图2为按照本发明另一个实施例的适于与车辆有关的应用场景的人机交互方法的流程图。与图1所示的实施例不同，本实施例各步骤的执行主体为移动终端或位于移动终端侧。
如图2所示，在步骤210，响应于用户进入与车辆有关的应用场景的事件，移动终端向终端设备转移控制权，使用户从由第一接口实现人机交互的方式切换至由第二接口实现人机交互的方式。这里所述的控制权指的是管理和控制应用程序运行的权限。优选地，移动终端通过下列方式向终端设备转移控制权：如果存在正在移动终端上运行的应用程序，则中止该应用程序的运行；随后将正在移动终端上运行的应用程序所涉及的数据发送至云端服务器和/或终端设备。
随后进入步骤220，移动设备检测是否发生用户离开与车辆有关的应用场景的事件。如果发生用户离开与车辆有关的应用场景的事件，则进入步骤230，否则继续检测。
在步骤230，移动终端从终端设备或云端服务器接收在终端设备上运行的应用程序所涉及的数据，并且向用户提供第一接口以使实现用户的人机交互的方式从第二接口返回至第一接口。优选地，发送至移动终端和/或云端服务器的数据不仅包含与尚未运行结束的应用程序相关的数据，而且还包含已经与运行结束的应用程序相关的数据。通过将应用程序的数据上传至云端服务器，可以提供数据在不同设备之间的共享和同步更新。
在图1和2所示的实施例中，用户进入应用场景的事件应作广义理解，其例如包括但不限于终端设备从移动终端接收到用户欲接入应用场景的消息、经第二接口接收到的用户欲接入应用场景的命令或者用户进入特定位置的事件或作出特定动作（例如手势）的事件等；此外，用户离开应用场景的事件也应作广义理解，其例如包括但不限于移动终端经第二接口接收到用户欲离开应用场景的消息、用户进入特定位置的事件或作出特定动作（例如手势）的事件等。
在图1和2所示的实施例中，在移动终端和终端设备上运行应用程序的过程中涉及的数据包括信息流和任务流。
信息流包括在与车辆有关的应用场景下已经完成的事项和与用户或外部世界相关联的知识和状态。以下给出信息流的一些具体示例。
、以驾车场景为例，可包括车辆电量状态、续航里程能力。
、多个应用场景中产生的关于用户的一些长期性或短期性动态变化的知识。长期知识指相对确定、短期内不会发生变化的信息和知识，例如用户输入的语音“我今年16岁了”。这类知识以一定的方式被组织和存储。可以借助这些知识得到进一步的知识，例如基于用户的年龄和本地法律确定用户是否具有驾车的许可。
短期知识指短期内动态变化的信息和知识，例如用户输入的语音“我有点困了”。这类知识有助于理解和获取用户当前的状态，从而生成相应的动作或提示（例如向用户输出“您现在需要休息!请靠在车椅中闭眼30分钟”的语音提示）。
任务流包括在应用场景下未完成的事项或者必须通过其它应用场景来完成的事项。以下给出任务流的一些具体示例。
、不同场景下产生的一些待办事项、自动插入的日程安排。这些任务可以按照紧急程度，以不同的方式（例如语音、信息或者闹铃）对用户进行提醒。代办事项的例子包括但不限于会议安排（与工作上的同事或者客户相约在一个地方进行某一项活动）和约会安排（与家人、朋友约在一个地方进行某一项活动）。
、不同场景下产生的任务安排。例如在工作场景通过讨论可能形成某项任务的具体安排，当用户离开工作场景后，该任务安排被上传到云端服务器并通过云端服务器同步至手机，使得用户可以继续通过手机来修改和编辑该任务安排，并在形成最终的任务安排后通过云端服务器分发给不同的同事。
、任务流还可以是未来事项的提醒，其包括但不限于周期性的日期提醒（例如朋友或者家人的生日、结婚纪念日等）、闹钟设置（用户可在手机上设置一个或者多个闹钟，随后通过云端服务器同步至家中的闹钟）、具体事项的提醒（例如提醒用户回家给汽车充电）、基于某种条件的事项提醒（例如在驾车场景中，当距离家还有1公里时提醒用户给家里打电话）。
图3为按照本发明另一个实施例的适于与车辆有关的应用场景的人机交互方法的流程图。本实施例可包含上面借助图1和2所述实施例的各种特征。类似地，在本实施例中，将用户与诸如智能手机之类的移动终端之间的人机交互接口称为第一接口，将用户与终端设备（例如车载电子处理系统）之间的人机交互接口称为第二接口。在本实施例中，各步骤的执行主体为终端设备。
如图3所示，在步骤310，终端设备响应于用户进入驾车场景的事件，向用户提供第二接口，使得用户从由第一接口实现人机交互的方式切换至由第二接口实现人机交互的方式。这里所述的第二接口至少包括语音交互接口（也可称为语音输入输出接口）。此外，第二接口还可包含其它人机交互接口，例如包括但不限于图形交互接口。
随后进入步骤320，终端设备执行应用程序。在执行应用程序的过程中，终端设备利用第二接口作为与用户的人机交互接口。在本实施例中，终端设备所执行的应用程序包括用于实现与车辆的应用场景（例如驾车场景）相关联的功能的应用程序和能够在移动终端上运行的应用程序，应用程序的例子包括但不限于车辆行驶控制、多媒体播放、车内环境调控、消息发送和通话等。
在本实施例中，一个应用程序可能原先在移动终端上运行，然后随着用户的人机交互方式由第一接口至第二接口的切换，该应用程序的控制权被相应地转移至车载系统，而当用户离开驾车场景时，该应用程序的控制权又从终端设备转移回移动终端。对于上述情形，同样可以采用上面借助图1所示的方式完成应用程序的控制权在移动终端与终端设备之间的切换。
特别是，可选地，图3所示的方法进一步包含下列步骤：
在步骤330，响应于用户离开驾车场景的事件，将在终端设备上运行应用程序的过程中涉及的数据发送至移动终端和/或云端服务器。
随后进入步骤340，使用户从由第二接口实现人机交互的方式返回至由第一接口实现人机交互的方式。
图4为可应用于图3所示实施例的人机交互过程的流程图。
如图4所示，在步骤410，终端设备经第二接口接收用户输入。需要指出的是，在本实施例中，用户输入例如包括但不限于语音输入、键盘操作、显示屏上的触控操作和手势等。
随后在步骤420中，终端设备从用户输入确定相应的语义表示。在语义表示的确定中，终端设备可以将用户的语音输入上传到云服务器端进行语音到文本的识别和转换。另一方面，考虑到与云端的网络连接的不稳定性，也可以在终端设备侧完成全部或部分的语音识别和转换功能。
接着进入步骤430，终端设备基于所确定的语义表示和上下文语义，将用户输入转换为能够由终端设备执行的操作命令。
随后进入步骤440，终端设备生成与操作命令的执行相关联的用户输出。
接着在步骤450，终端设备从用户输出生成相应的语义表示。
最后，在步骤460，终端设备经第二接口提供用户输出的语义表示。在本实施例中，优选地，用户输出的语义表示经第二接口以语音形式或图形界面形式提供给用户。在驾车场景下，用户（常常为驾驶员）的注意力和视线主要聚焦在车外，其需要随时观察路况和可能的意外状况，因此难以将部分注意力投入到显示屏上，而且这种投入对于行车安全也是不利的。因此在本实施例中，更好地，人机交互方式以语音交互为主和图形显示为辅的方式，也就是说，应确保用户输出始终或尽可能地包含语音形式。
在本实施例中，根据应用程序的执行情况，图4所示的人机交互过程可以执行一次，也可以被执行多次。
图5为按照本发明另一实施例的车载电子处理系统的示意框图。
图5所示的车载电子处理系统50包含存储器510、处理器520以及存储在存储器510上并可在处理器520上运行的计算机程序530，其中，执行计算机程序530可以实现上面借助图1-4所述的驾车场景下的人机交互方法。
需要指出的是，车载电子处理系统应该广义理解为能够实现上面借助图1-4所述的方法的各种设备，其至少具有人机交互接口和计算能力。
车载电子处理系统的人机交互接口例如可包括显示屏，用户可以通过在显示屏上进行触控操作来完成与移动终端相关的功能和车载系统自有功能的控制。此外，车载电子处理系统的人机交互接口还可包括语音输入输出接口和手势操作接口。利用语音输入输出接口，用户可通过语音与车载系统进行交互，车载电子处理系统可基于用户语音理解用户的指令，完成相应的操作，并且可将操作结果通过语音方式同步给用户。手势操作可以使用户利用手势与车载电子处理系统进行交互，车载电子处理系统通过识别手势的含义来完成特定的操作，并且通过语音输入输出接口或者诸如显示屏之类的图形交互接口将操作结果同步给用户。
车载电子处理系统还具有对与车辆有关的应用场景下的其它设备进行调用的能力。例如车载电子处理系统可以通过调用车辆相应设备来实现下列功能：
对车辆的操控，例如包括但不限于车速控制、行驶方向控制、行驶路线设定等；
对车辆附属设备的操控，例如车灯、雨刮器、车门、车窗、后备箱的操作；
对车内传感器 (例如摄像头、雷达、天线)的操作；
各种驾驶模式的启动（例如自动驾驶模式、路线和路况提示、自动泊车）；
车辆状态（电池电量、胎压、车速、风速、车内温度、某个或某些功能的启闭状态）的提示；
外部信息的获取和查询，例如天气、股票等的查询；
对娱乐系统的操作。
此外，如上所述，车载电子处理系统还具有接管移动终端的能力。
车载电子处理系统可具有多种样式。例如其包括但不限于车载平板电脑、中控台、与后视镜集成在一起的控制设备、安装在车内各种位置上的第三方独立外设（其自带独立的显示屏和语音输入输出接口，并可与车辆内部的设备通信）等。
按照本发明的另一方面，还提供了一种计算机可读存储介质，其上存储计算机程序，该程序被处理器执行时可实现上面借助图1所述的适于与车辆有关的应用场景的人机交互方法。
按照本发明的另一方面，还提供了一种计算机可读存储介质，其上存储计算机程序，该程序被处理器执行时可实现上面借助图2所述的适于与车辆有关的应用场景的人机交互方法。
按照本发明的另一方面，还提供了一种计算机可读存储介质，其上存储计算机程序，该程序被处理器执行时可实现上面借助图3和4所述的适于与车辆有关的应用场景的人机交互方法。
提供本文中提出的实施例和示例，以便最好地说明按照本技术及其特定应用的实施例，并且由此使本领域的技术人员能够实施和使用本发明。但是，本领域的技术人员将会知道，仅为了便于说明和举例而提供以上描述和示例。所提出的描述不是意在涵盖本发明的各个方面或者将本发明局限于所公开的精确形式。
鉴于以上所述，本公开的范围通过以下权利要求书来确定。
Claims (14)
1. 一种适于与车辆有关的应用场景的人机交互方法，其特征在于，包含下列步骤：
响应于用户进入与车辆有关的应用场景的事件，由能够实现与与车辆有关的应用场景相关联的功能的终端设备向用户提供第二接口，以使用户从由第一接口实现人机交互的方式切换至由第二接口实现人机交互的方式，所述第一接口由移动终端提供；以及
经第二接口在终端设备上运行能够在移动终端上运行的应用程序。
2.如权利要求1所述的人机交互方法，其中，还包括下列步骤：
响应于用户离开与车辆有关的应用场景的事件，将在终端设备上运行所述应用程序的过程中涉及的数据发送至移动终端和/或云端服务器，并且使用户从由第二接口实现人机交互的方式返回至由第一接口实现人机交互的方式。
3. 如权利要求1所述的人机交互方法，其中，经第二接口在终端设备上运行能够在移动终端上运行的应用程序的步骤包括：
终端设备从云端服务器或移动终端接收正在移动终端上运行的应用程序所涉及的数据；以及
终端设备基于从云端服务器或移动终端接收的数据继续运行正在移动终端上运行的应用程序。
4. 如权利要求1所述的人机交互方法，其中，经第二接口在终端设备上运行能够在移动终端上运行的应用程序的步骤包括：
经第二接口接收用户启动应用程序的命令；以及
响应于用户的命令，在终端设备上运行相应的应用程序。
5.如权利要求1所述的人机交互方法，其中，在移动终端和终端设备上运行应用程序的过程中涉及的数据包括信息流和任务流，其中，所述信息流包括在与车辆有关的应用场景下已经完成的事项和与用户或外部世界相关联的知识和状态，所述任务流包括在与车辆有关的应用场景下未完成的事项或者必须通过其它应用场景来完成的事项。
6.如权利要求1所述的人机交互方法，其中，所述应用程序包含下列中的至少一种：日程安排应用程序、消息处理应用程序、通话应用程序和视音频播放应用程序。
7.如权利要求1所述的人机交互方法，其中，所述第二接口包括语音交互接口和/或图形交互接口。
8.如权利要求1所述的人机交互方法，其中，所述与车辆有关的应用场景为驾车场景，所述终端设备为车载电子处理系统。
9.如权利要求7所述的人机交互方法，其中，在所述第二接口包括语音交互接口的情况下，在执行应用程序的过程中，终端设备按照下列方式与用户交互：
从经第二接口接收的用户输入确定相应的语义表示；
基于所确定的语义表示和上下文语义，将用户输入转换为能够由终端设备执行的操作命令；
生成与操作命令的执行相关联的用户输出；
从用户输出生成相应的语义表示；以及
经第二接口提供用户输出的语义表示。
10.一种适于与车辆有关的应用场景的人机交互方法，其特征在于，包含下列步骤：
响应于用户进入与车辆有关的应用场景的事件，通过使移动终端向终端设备转移控制权，使用户从由第一接口实现人机交互的方式切换至由第二接口实现人机交互的方式，其中，第一接口由移动终端提供，第二接口由能够实现与与车辆有关的应用场景相关联的功能的终端设备提供；
响应于用户离开与车辆有关的应用场景的事件，接收在终端设备上运行应用程序的过程中涉及的数据，并且通过接管控制权，使用户从由第二接口实现人机交互的方式返回至由第一接口实现人机交互的方式。
11. 如权利要求10所述的人机交互方法，其中，通过下列方式使移动终端向终端设备转移控制权：
中止正在移动终端上运行的应用程序；以及
将正在移动终端上运行的应用程序所涉及的数据发送至云端服务器和/或终端设备。
12.一种车载电子处理系统，包含存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，执行所述计算机程序以实现如权利要求1-9中任意一项所述的方法的步骤。
13.一种计算机可读存储介质，其上存储计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-9中任意一项所述的方法。
14.一种计算机可读存储介质，其上存储计算机程序，其特征在于，该程序被处理器执行时实现如权利要求10或11所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710378458.4A CN108958804A (zh) | 2017-05-25 | 2017-05-25 | 适于与车辆有关的应用场景的人机交互方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710378458.4A CN108958804A (zh) | 2017-05-25 | 2017-05-25 | 适于与车辆有关的应用场景的人机交互方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108958804A true CN108958804A (zh) | 2018-12-07 |
Family
ID=64494460
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710378458.4A Pending CN108958804A (zh) | 2017-05-25 | 2017-05-25 | 适于与车辆有关的应用场景的人机交互方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108958804A (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110654389A (zh) * | 2019-09-09 | 2020-01-07 | 广州小鹏汽车科技有限公司 | 车辆的控制方法、控制装置和车辆 |
| CN110673722A (zh) * | 2019-09-05 | 2020-01-10 | 阿里巴巴集团控股有限公司 | 一种人机交互方式展示方法、装置及设备 |
| CN113923245A (zh) * | 2021-10-16 | 2022-01-11 | 安徽江淮汽车集团股份有限公司 | 用于智能网联车辆的自定义场景控制系统 |
| CN114063956A (zh) * | 2021-11-11 | 2022-02-18 | 上汽通用五菱汽车股份有限公司 | 车机与移动端程序交互方法、车机装置及可读存储介质 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2001004876A1 (en) * | 1999-07-13 | 2001-01-18 | British Telecommunications Public Limited Company | Distributed object oriented architecture for speech understanding |
| CN103425494A (zh) * | 2013-08-06 | 2013-12-04 | 惠州华阳通用电子有限公司 | 一种车载终端与智能移动终端的信息交互系统 |
| CN103634205A (zh) * | 2013-12-09 | 2014-03-12 | 大陆汽车投资（上海）有限公司 | 集成即时通讯/社交应用的车载娱乐系统及方法 |
| CN104363331A (zh) * | 2014-10-13 | 2015-02-18 | 惠州市德赛西威汽车电子有限公司 | 一种手机互联启动手机app的方法及车载多媒体设备 |
| CN105095338A (zh) * | 2014-05-22 | 2015-11-25 | Lg电子株式会社 | 信息提供系统及其方法 |
| CN105335471A (zh) * | 2015-09-29 | 2016-02-17 | 芜湖市汽车产业技术研究院有限公司 | 车载多媒体设备、移动终端及车载多媒体播放方法 |
| CN105450708A (zh) * | 2014-08-29 | 2016-03-30 | 大陆汽车投资（上海）有限公司 | 车载交互平台及基于移动终端的车载信息处理方法 |
-
2017
- 2017-05-25 CN CN201710378458.4A patent/CN108958804A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2001004876A1 (en) * | 1999-07-13 | 2001-01-18 | British Telecommunications Public Limited Company | Distributed object oriented architecture for speech understanding |
| CN103425494A (zh) * | 2013-08-06 | 2013-12-04 | 惠州华阳通用电子有限公司 | 一种车载终端与智能移动终端的信息交互系统 |
| CN103634205A (zh) * | 2013-12-09 | 2014-03-12 | 大陆汽车投资（上海）有限公司 | 集成即时通讯/社交应用的车载娱乐系统及方法 |
| CN105095338A (zh) * | 2014-05-22 | 2015-11-25 | Lg电子株式会社 | 信息提供系统及其方法 |
| CN105450708A (zh) * | 2014-08-29 | 2016-03-30 | 大陆汽车投资（上海）有限公司 | 车载交互平台及基于移动终端的车载信息处理方法 |
| CN104363331A (zh) * | 2014-10-13 | 2015-02-18 | 惠州市德赛西威汽车电子有限公司 | 一种手机互联启动手机app的方法及车载多媒体设备 |
| CN105335471A (zh) * | 2015-09-29 | 2016-02-17 | 芜湖市汽车产业技术研究院有限公司 | 车载多媒体设备、移动终端及车载多媒体播放方法 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110673722A (zh) * | 2019-09-05 | 2020-01-10 | 阿里巴巴集团控股有限公司 | 一种人机交互方式展示方法、装置及设备 |
| CN110654389A (zh) * | 2019-09-09 | 2020-01-07 | 广州小鹏汽车科技有限公司 | 车辆的控制方法、控制装置和车辆 |
| CN113923245A (zh) * | 2021-10-16 | 2022-01-11 | 安徽江淮汽车集团股份有限公司 | 用于智能网联车辆的自定义场景控制系统 |
| CN113923245B (zh) * | 2021-10-16 | 2022-07-05 | 安徽江淮汽车集团股份有限公司 | 用于智能网联车辆的自定义场景控制系统 |
| CN114063956A (zh) * | 2021-11-11 | 2022-02-18 | 上汽通用五菱汽车股份有限公司 | 车机与移动端程序交互方法、车机装置及可读存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP3482344B1 (en) | Portable personalization | |
| CN102039898B (zh) | 情绪咨询系统 | |
| CN107303909B (zh) | 语音唤起方法、装置和设备 | |
| CN108958804A (zh) | 适于与车辆有关的应用场景的人机交互方法 | |
| CN106394247B (zh) | 电动车辆显示系统 | |
| KR101549559B1 (ko) | 핸들에 부착되는 입력 장치 및 이를 구비한 차량 | |
| RU2554848C2 (ru) | Система и способ бесконтактного управления приложением "электронный календарь" в транспортном средстве | |
| US11289088B2 (en) | Vehicle-based remote control system and method | |
| CN107004410A (zh) | 语音和连接平台 | |
| US20110172873A1 (en) | Emotive advisory system vehicle maintenance advisor | |
| CN107305740A (zh) | 路况预警方法、设备、服务器、控制设备及操作系统 | |
| CN111577010B (zh) | 汽车的遥控控制方法、装置及存储介质 | |
| CN111641931B (zh) | 车载多媒体系统及其与移动终端的互联方法及互联系统 | |
| CN107810387A (zh) | 在汽车环境中的移动地理应用 | |
| US20210122242A1 (en) | Motor Vehicle Human-Machine Interaction System And Method | |
| CN107187421A (zh) | 无钥匙进入和起动系统 | |
| CN109765895A (zh) | 无人驾驶车辆控制方法、装置、无人驾驶车辆及存储介质 | |
| CN110503948A (zh) | 对话系统和对话处理方法 | |
| US20210281096A1 (en) | Systems and methods for providing a personalized charging rate | |
| CN108216025A (zh) | 提供乘员提醒的方法和装置 | |
| CN106200894A (zh) | 事件通知方法及其设备 | |
| CN108351642A (zh) | 使用车辆和云事件数据的可佩戴设备配置 | |
| CN107436680A (zh) | 用于切换车载设备的应用模式的方法和设备 | |
| CN115357311A (zh) | 出行信息分享方法、装置、计算机设备及存储介质 | |
| CN103995513A (zh) | 一种基于即时通讯平台的车辆人机交互系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20200731 Address after: Susong Road West and Shenzhen Road North, Hefei Economic and Technological Development Zone, Anhui Province Applicant after: Weilai (Anhui) Holding Co., Ltd Address before: Room 502, Minsheng Bank Building, 12 Cecil Harcourt Road, central, Hongkong, China Applicant before: NIO NEXTEV Ltd. |