CN115531858A - 一种交互方法、终端设备以及车辆 - Google Patents

一种交互方法、终端设备以及车辆 Download PDF

Info

Publication number
CN115531858A
CN115531858A CN202211463195.4A CN202211463195A CN115531858A CN 115531858 A CN115531858 A CN 115531858A CN 202211463195 A CN202211463195 A CN 202211463195A CN 115531858 A CN115531858 A CN 115531858A
Authority
CN
China
Prior art keywords
target
handle
equipment
terminal device
connection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211463195.4A
Other languages
English (en)
Other versions
CN115531858B (zh
Inventor
樊卉
孙占伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jidu Technology Co Ltd
Original Assignee
Beijing Jidu Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jidu Technology Co Ltd filed Critical Beijing Jidu Technology Co Ltd
Priority to CN202211463195.4A priority Critical patent/CN115531858B/zh
Publication of CN115531858A publication Critical patent/CN115531858A/zh
Application granted granted Critical
Publication of CN115531858B publication Critical patent/CN115531858B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/214—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/24—Constructional details thereof, e.g. game controllers with detachable joystick handles
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/31—Communication aspects specific to video games, e.g. between several handheld game devices at close range
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/54—Controlling the output signals based on the game progress involving acoustic signals, e.g. for simulating revolutions per minute [RPM] dependent engine sounds in a driving game or reverberation against a virtual wall
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Selective Calling Equipment (AREA)

Abstract

本申请实施例提供一种交互方法、终端设备以及车辆。在该方法中，终端设备可对车舱内外的环境进行图像采集，并基于采集到的图像识别目标设备的受力操作。在识别到的受力操作满足预设的交互触发条件时，与目标设备建立通信连接。通过这种方式，用户向目标设备发出力的操作即可使得终端设备和目标设备实现自动连接，优化了目标设备与车辆之间的连接方式，使连接方式更加简洁。

Description

一种交互方法、终端设备以及车辆
技术领域
本申请涉及车辆技术领域，尤其涉及一种交互方法、终端设备以及车辆。
背景技术
随着车载娱乐方式的逐步升级，现如今，用户已可在车辆上使用手柄，通过车载娱乐系统玩游戏。现有技术中，在用户建立手柄与车辆之间的连接时，通常可采用有线连接的方式或者包括蓝牙和无线局域网在内的无线连接的方式来建立连接。但是，这些传统的连接方式通常操作起来较为繁琐。因此，一种解决方案亟待被提出。
发明内容
本申请实施例提供一种交互方法、终端设备以及车辆，用以简化用户在建立手柄与车辆之间的连接时所需的操作。
本申请实施例提供一种终端设备，包括：存储器、处理器、通信组件以及图像采集组件；所述存储器，用于存储一条或者多条计算机指令；所述图像采集组件，用于进行图像采集；所述处理器，用于执行所述一条或者多条计算机指令，以用于：基于所述图像采集组件采集到的图像识别目标设备的受力操作；以及，在所述受力操作满足预设的交互触发条件时，控制所述通信组件与所述目标设备建立通信连接；其中，所述目标设备用于通过所述通信连接与所述终端设备进行交互。
可选地，所述受力操作包括：针对所述目标设备的摇晃操作、敲击操作、点击操作或者触摸操作。
通过这种方式，用户向目标设备发出力的操作即可使得终端设备和目标设备实现自动连接，优化了目标设备与车辆之间的连接方式，使连接方式更加简洁，简化了用户在建立目标设备与车辆之间的连接时所需的操作。
可选地，所述终端设备还包括：音频组件；所述音频组件，用于采集音频信号；所述音频信号包括所述目标设备在受力操作下发出的音频信号；所述处理器，具体用于：若所述受力操作满足预设的交互触发条件且所述音频信号满足设定条件，则控制所述通信组件与所述目标设备建立通信连接。
通过上述方式，终端设备可结合图像识别和音频信号采集两种方式，更准确地判断用户是否需要建立目标设备与终端设备之间的通信连接，降低误判的概率。
可选地，所述处理器在控制所述通信组件与所述目标设备建立通信连接时，具体用于：控制所述通信组件向所述目标设备发出第一连接请求，并在所述通信组件接收所述目标设备返回的连接响应消息之后，与所述目标设备建立通信连接。
可选地，所述处理器具体用于：控制所述音频组件输出连接询问消息；所述连接询问消息用于询问用户是否与所述目标设备建立通信连接；检测到针对所述连接询问消息的确定消息之后，控制所述通信组件向所述目标设备发出第一连接请求。
通过这种方式，询问用户是否与所述目标设备建立通信连接，防止用户因误操作而将目标设备连接至终端设备。
可选地，所述处理器在控制所述通信组件与所述目标设备建立通信连接时时，具体用于：在所述通信组件接收所述目标设备的连接请求之后，控制所述音频组件向所述目标设备发送连接响应消息，以与所述目标设备建立通信连接。
可选地，所述处理器，具体用于：若判定所述受力操作满足预设的交互触发条件，控制所述音频组件采集所述目标设备在所述受力操作下发出的音频信号；其中，所述交互触发条件包括：所述目标设备的受力操作的时长大于设定时长阈值和/或所述目标设备的持有者的发力的操作的次数大于设定次数阈值。
可选地，所述处理器还用于：根据所述音频信号，确定所述目标设备的设备类型；根据所述目标设备的设备类型，对所述目标设备的按键进行键位映射，得到键位映射结果；所述键位映射结果用于使所述终端设备识别所述目标设备的按键交互指令。
通过这种方式，根据设备类型对目标设备的按键进行键位映射，终端设备可准确地识别不同目标设备各自的按键交互指令。
可选地，所述处理器具体用于：提取所述音频信号的声纹特征；将所述音频信号的声纹特征与预设的至少一个声纹特征进行特征匹配；不同声纹特征对应不同的设备类型；根据所述特征匹配的结果，确定所述目标设备的设备类型。
通过这种方式，终端设备可较为准确地基于音频信号的声纹特征确定目标设备的设备类型。
可选地，所述处理器还用于：获取针对所述目标设备的声纹特征更新操作；所述更新操作包括：修改操作、删除操作和/或新增操作；响应所述更新操作，对所述预设的至少一个声纹特征中与所述目标设备对应的声纹特征进行更新。
通过这种方式，用户可对实体目标设备或者虚拟目标设备发出的音频信号进行设置或者对默认的音频信号进行更新，以实现音频信号的定制化设置。
可选地，所述通信组件还用于：接收所述目标设备发送的厂商标识和/或产品标识；所述处理器还用于：根据所述厂商标识和/或产品标识，对所述目标设备进行键位映射，得到键位映射结果；所述键位映射结果用于使所述终端设备识别所述目标设备的按键交互指令。
通过这种方式，终端设备可根据接收到的目标设备发送的厂商标识和产品标识中的至少一种，对不同类型的目标设备的键位进行识别，从而可在与目标设备的交互过程中，准确识别目标设备发送的指令。
可选地，所述通信组件，还用于接收所述目标设备发送的控制指令；所述控制指令由所述目标设备在按键被触发时发出；所述处理器，还用于确定所述目标设备的当前控制模式；若所述当前控制模式为游戏模式，则根据所述控制指令以及所述游戏模式对应的第一键位映射结果，对所述终端设备上运行的游戏程序进行控制；若所述当前控制模式为车辆控制模式，则根据所述控制指令以及所述车辆控制模式对应的第二键位映射结果，对车辆进行控制。
通过这种方式，用户可通过同一个目标设备的不同模式对车辆和终端设备上运行的游戏程序进行控制。
可选地，所述处理器在确定所述目标设备的当前控制模式时，具体用于：通过所述通信组件接收所述目标设备发送的模式切换消息；所述模式切换消息由所述目标设备在检测到用户触发模式切换按键时发送；根据所述模式切换消息，确定所述目标设备的当前控制模式。
可选地，所述处理器在根据所述控制指令以及所述游戏模式对应的第一键位映射结果，对所述终端设备上运行的游戏程序进行控制之前，还用于：识别与所述目标设备进行交互的用户在车舱内的位置；若识别到所述用户位于非主驾驶位置，或者，所述用户位于主驾驶位置且所述车辆的当前档位为驻车档位，则启动所述目标设备的游戏模式。
通过这种方式，用户可在使用目标设备的游戏过程中，通过目标设备的模式切换按键，快捷地对车辆进行功能控制。
可选地，所述处理器在根据所述控制指令以及所述车辆控制模式对应的第二键位映射结果，对车辆进行控制之前，还用于：获取所述车辆的当前档位和/或当前车速；若所述当前车速小于设定车速阈值，则启动车辆控制模式。
通过这种方式，可提升用户通过目标设备进行游戏时的安全性。
本申请实施例还提供一种终端设备，包括：存储器、处理器、通信组件以及音频组件；所述音频组件，用于采集音频信号；所述音频信号包括：目标设备在受力操作下发出的音频信号；所述存储器，用于存储一条或者多条计算机指令；所述处理器，用于执行所述一条或者多条计算机指令，以用于：在判定所述音频信号满足设定条件时，调用所述通信组件与所述目标设备建立通信连接；所述目标设备用于通过所述通信连接与所述终端设备进行交互。
本申请实施例还提供一种交互方法，包括：对环境进行图像采集；基于采集到的图像识别目标设备的受力操作；在所述受力操作满足预设的交互触发条件时，与所述目标设备建立通信连接；所述目标设备用于通过所述通信连接与所述终端设备进行交互。
本申请实施例还提供一种交互方法，包括：采集音频信号；所述音频信号包括：目标设备在受力操作下发出的音频信号；若所述音频信号满足设定条件，与所述目标设备建立通信连接；所述目标设备用于通过所述通信连接与所述终端设备进行交互。
本申请实施例还提供一种车辆，包括本申请实施例提供的终端设备。
在本实施例中，终端设备可对车舱内外的环境进行图像采集，并基于采集到的图像识别目标设备的受力操作。在识别到的受力操作满足预设的交互触发条件时，与目标设备建立通信连接。通过这种方式，用户向目标设备发出力的操作即可使得终端设备和目标设备实现自动连接，优化了目标设备与车辆之间的连接方式，使连接方式更加简洁，简化了用户在建立目标设备与终端设备之间的连接时所需的操作。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种终端设备的结构示意图；
图2为本发明实施例提供的一种模式切换按键的示意图；
图3为本发明一示例性实施例提供的交互方法的流程示意图；
图4为本发明另一示例性实施例提供的交互方法的流程示意图；
图5为本发明实施例提供的一种车辆的手柄交互方法的流程示意图；
图6为本发明实施例提供的又一种车辆的手柄交互方法的流程示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在现有技术中，在用户建立手柄与车辆之间的连接时，通常可采用有线连接的方式或者包括蓝牙和无线局域网在内的无线连接的方式来建立连接。但是，这些传统的连接方式通常操作起来较为繁琐，使得用户在建立手柄与车辆之间的连接时所需的时间较长。
针对上述技术问题，在本申请一些实施例中，提供了一种解决方案，以下将结合附图，详细说明本申请各实施例提供的技术方案。
图1为本申请一示例性实施例提供的终端设备的示意图，如图1所示，该终端设备，包括：存储器101、处理器102、通信组件103以及图像采集组件104。
其中，该终端设备可实现为车载终端、手机、平板电脑、计算机、智能手表、可穿戴设备等等，本实施例不做限制。
其中，存储器101，用于存储一条或者多条计算机指令。存储器101可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器（SRAM），电可擦除可编程只读存储器（EEPROM），可擦除可编程只读存储器（EPROM），可编程只读存储器（PROM），只读存储器（ROM），磁存储器，快闪存储器，磁盘或光盘。
处理器102，用于执行所述一条或者多条计算机指令，以用于控制通信组件103以及图像采集组件104执行与目标设备的交互操作。
其中，通信组件103被配置为便于终端设备和其他设备之间有线或无线方式的通信。通信组件所在设备可以接入基于通信标准的无线网络，如WiFi，2G、3G、4G或5G，或它们的组合。在一个示例性实施例中，通信组件经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，通信组件可基于近场通信（NFC）技术、射频识别（RFID）技术、红外数据协会（IrDA）技术、超宽带（UWB）技术、蓝牙（BT）技术和其他技术来实现。基于通信组件103，电子设备可获取其他设备发送的数据。例如，车载传感器发送的传感器数据和车辆控制系统发送的控制指令等等，本实施例不做限制。
其中，图像采集组件104对环境进行图像采集，并将采集到的环境图像发送给处理器102。该图像采集组件104包括一个或者多个摄像头，该一个或者多个摄像头可安装在车内外的多个位置，以覆盖更大的采集范围。
在一些实施例中，处理器102也可终端设备外部的图像采集设备对车舱内外的图像进行采集，该外部设置的图像采集设备可以是车内OMS（Occupant Monitoring System-乘客监测系统），本实施例不做限制。
其中，目标设备包括能够与终端设备建立连接并交互的设备。例如，可包括手机、手柄、音箱、蓝牙耳机、VR（Virtual Reality，虚拟现实）设备、AR(Augmented Reality，增强现实)设备、MR（Mixed Reality，混合现实）设备等，本实施例不做限制。其中，手柄可包括：实体手柄和虚拟手柄。其中，虚拟手柄可实现为移动终端上的手柄应用程序。其中，移动终端可为手机、平板电脑、计算机等等。
处理器102可基于采集到的图像识别目标设备的受力操作，并可在该受力操作满足预设的交互触发条件时，控制通信组件103与该目标设备建立通信连接；该目标设备用于通过该通信连接与该终端设备进行交互。
以手柄为例，当用户想要建立手柄与终端设备的通信连接时，可对手柄施加力的动作，比如，摇动手柄、点击手柄、触摸手柄或抬起手柄等等。这些动作相对于手柄来说可视为受力操作。图像采集组件104对车辆内外的环境进行图像采集得到环境图像后，处理器102可对环境图像进行目标识别以及动作分析。其中，目标识别，用于从环境图像中识别出手柄（即目标设备）；动作分析，用于通过连续的多帧图像分析出手柄是否具有受力操作。其中，目标识别以及动作分析的操作，可基于预先训练的神经网络模型实现，本实施例不做限制。
其中，基于环境图像识别手柄的受力操作的步骤可以由终端设备中的处理器102执行，也可以由终端设备将图像发送至云端服务器执行，本实施例不做限制。
通过这种方式，用户向手柄发出力的操作即可使得终端设备和手柄实现自动连接，优化了手柄与车辆之间的连接方式，使连接方式更加简洁，简化了用户在建立手柄与车辆之间的连接时所需的操作。
可选地，该终端设备还包括：音频组件105。在本实施例中，音频组件105，主要用于采集音频信号；该音频信号包括：目标设备在受力操作下发出的音频信号。
相应地，处理器102，具体用于：若判定该受力操作满足预设的交互触发条件且该音频信号满足设定条件，则控制该通信组件103与该目标设备建立通信连接。
以目标设备实现为手柄为例，在本实施例中，当用户想要建立手柄与终端设备的通信连接时，可对手柄施加力的动作，比如，摇动手柄、点击手柄、触摸手柄或抬起手柄等等。这些动作相对于手柄来说可视为受力操作，手柄在受力操作下可发出音频信号。终端设备中的音频组件105可采集车舱内外的手柄发出的音频信号，并通过处理器102判断该音频信号是否满足设定条件。
其中，设定条件可为音频信号的频率处于设定的频率范围内、音频信号的声纹特征与预设的声纹特征的相似度大于设定的相似度阈值或者音频信号的强度处于设定的强度范围内，等等，本实施例不做限制。
在检测到目标设备的受力操作的情况下，若音频信号满足设定条件，则处理器102可控制该通信组件103，与该目标设备建立通信连接。
通过上述方式，终端设备可结合图像识别和音频信号采集两种方式，更准确地判断用户是否需要建立手柄与终端设备之间的通信连接，降低误判的概率。
在一些可选的实施例中，终端设备可主动向目标设备发送连接请求。
其中，处理器102在控制通信组件103与该目标设备建立通信连接时，具体用于：控制通信组件103向该目标设备发出第一连接请求，并通过通信组件103接收该目标设备根据该第一连接请求返回的连接响应消息，以与该目标设备建立通信连接。
继续以目标设备实现为手柄为例。通信组件103可向手柄发出第一连接请求。其中，第一连接请求用于：请求与手柄建立通信连接。第一连接请求至少包括：终端设备的标识信息和连接时间戳。
手柄接收到第一连接请求后，可根据第一连接请求向终端设备返回连接响应消息。其中，连接响应消息可包括：手柄的通信地址或手柄适用的通信协议，等等。对应地，终端设备接收到该连接响应信息后，可根据连接响应消息，与手柄建立通信连接。其中，终端设备可根据连接响应消息中的通信地址和自身的通信地址，与手柄建立通信连接。
可选地，处理器102在控制通信组件103向目标设备发出第一连接请求时，具体用于：控制该音频组件105输出连接询问消息；该连接询问消息用于询问用户是否与该目标设备建立通信连接；若接收到针对该连接询问消息的确定消息，控制该通信组件103向该目标设备发出第一连接请求。
其中，该连接询问消息可为音频形式，也可为文字形式或震动形式。
在一些实施例中，终端设备还可包括显示组件106，还显示组件106可用于通过显示界面展示连接询问消息。比如，连接消息可为“是否需要连接”的提示文字。用户获取到该连接询问消息时，若用户对手柄施加的动作为误操作，即，用户并不想将手柄连接至终端设备，则可忽略此消息。若用户想要将手柄连接至终端设备，可在手柄上通过实体按键或者虚拟按键进行确认。手柄可响应用户的确认操作，向终端设备发送针对连接询问消息的确定消息。终端设备接收到该确定消息后，可根据设备标识向手柄发送连接响应消息，以与手柄建立通信连接。
在本实施例中，终端设备可采集车舱内外的音频信号，该音频信号由手柄在受力操作下发出。在检测到手柄的受力操作的情况下，若音频信号满足设定条件，则向手柄发出连接请求。接收到手柄根据该连接请求返回的连接响应消息后，可根据该连接响应消息，与手柄建立通信连接以与手柄进行交互。通过这种方式，用户向手柄发出力的操作即可使得车机和手柄实现自动连接，优化了手柄与车辆之间的连接方式，使连接方式更加简洁，简化了用户在建立手柄与车辆之间的连接时所需的操作。除此之外，通过询问用户是否与该手柄建立通信连接，可降低用户因误操作而将手柄连接至终端设备的风险。
在另一些可选的实施例中，目标设备可主动向终端设备发送连接请求。其中，处理器102在控制通信组件103向该目标设备发出第一连接请求时，具体用于：控制通信组件103接收该目标设备的连接请求，并向该目标设备发送连接响应消息，以与该目标设备建立通信连接。
继续以目标设备实现为手柄为例进行说明。
手柄可在受力操作下发出音频信号和连接请求。终端设备可检测手柄的受力操作并采集车舱内外的音频信号。若检测到手柄的受力操作，且音频信号满足设定条件，则处理器102可控制通信组件03搜索手柄发送的连接请求。其中，连接请求包括：设备标识以及消息类型。其中，设备标识可包括手柄的名称或型号等等。消息类型可反映连接请求的类型，可包括：首次连接和非首次连接。
若通信组件103搜索到连接请求，且消息类型指示手柄与终端设备为首次连接，则处理器102可控制通信组件根据设备标识向手柄发送连接响应消息，以与手柄建立通信连接。建立通信连接后，手柄可通过通信连接与终端设备进行交互。
可选地，处理器102在控制通信组件103向目标设备发出连接响应消息之前，可控制音频组件105输出连接询问消息；该连接询问消息用于询问用户是否与该目标设备建立通信连接；若接收到针对该连接询问消息的确定消息，控制该通信组件103向该目标设备发出连接响应消息。不再赘述。
通过这种方式，用户向手柄发出力的操作即可使得车机和手柄实现自动连接，优化了手柄与车辆之间的连接方式，使连接方式更加简洁，简化了用户在建立手柄与车辆之间的连接时所需的操作。
在一些可选的实施例中，终端设备采集车舱内外的音频信号的操作，可以是无需唤醒的。终端设备的音频组件105可长期处于工作状态，并静默监听车舱内外是否存在可采集到的音频信号。
在另一些可选的实施例中，终端设备采集车舱内外的音频信号的操作，可以由指定事件唤醒。终端设备的音频组件105可在唤醒后启动音频信号的采集工作。其中，该指定事件可以是用户与手柄的交互事件。该交互事件可以是用户对手柄施加一定力的作用的事件。
即，音频组件105，可在目标设备的受力操作满足预设的交互触发条件时，采集该目标设备在该受力操作下发出的音频信号。其中，该交互触发条件包括：该目标设备的受力操作的时长大于设定时长阈值和/或该目标设备的持有者的发力的操作的次数大于设定次数阈值。其中，目标设备的持有者，可包括：手臂、手部或者夹具。
以下将进行示例性说明。
可选地，终端设备可先通过图像采集设备对车辆内外的环境进行图像采集。其中，该图像采集设备可以是车内OMS（Occupant Monitoring System-乘客监测系统）。之后，可基于采集到的图像，对用户针对手柄的发力行为进行识别，得到识别结果。其中，基于图像识别发力行为的操作可以由终端设备执行，也可以由终端设备将图像发送至云端服务器执行，本实施例不做限制。
其中，用户的发力行为可包括：摇晃手柄、敲击手柄、点击手柄或者触摸手柄等等。识别结果可包括：发力行为频率（或频次）和发力行为类型，等等。若识别结果满足预设的交互触发条件，则采集手柄在受力操作下发出的音频信号。其中，发力行为，可通过手柄的晃动或者手柄持有者（手臂、手部、夹具）的晃动进行识别。例如，发力行为频率，可以是手柄的晃动频率，也可以是手臂的晃动频率。
其中，交互触发条件可包括以下至少一项：发力行为频率大于交互频率阈值、发力时长大于交互时长阈值、发力行为的动作幅度大于阈值以及发力行为类型为预设的交互类型。
举例说明，终端设备可通过图像采集设备采集多张车辆内外环境的图像，进而，可基于这些图像进行发力行为的识别，识别结果为：发力行为类型为摇动手柄，发力行为频率即摇动手柄的频率，为2次/秒。而预设的交互触发条件可包括：发力行为频率在大于1次/秒、且发力行为类型为预设的发力类型。预设的发力类型可以包括：摇动手柄、敲击手柄、和触摸手柄中的任一种，或者多种的组合。识别结果满足预设的交互触发条件，即可采集手柄在受力操作下发出的音频信号。
又例如，识别结果为：发力行为类型为摇动手柄，手臂晃动次数为三次。若预设的交互触发条件可包括：发力行为次数为两次且发力行为类型为摇动手柄。处理器102可控制音频组件105采集手柄的音频信号。
通过上述方式，终端设备可结合图像识别和音频信号采集两种方式，更准确地判断用户是否需要建立手柄与终端设备之间的通信连接，降低误判的概率。
需要说明的是，不同设备类型的目标设备发出的音频信号的声纹特征可能是不同的，换言之，终端设备采集到的音频信号可反映目标设备的设备类型。基于此，终端设备中的处理器102还可根据采集到的音频信号，确定目标设备的设备类型。以下将进行具体说明。
其中，处理器102可提取音频信号的声纹特征，并将该音频信号的声纹特征与预设的至少一个声纹特征进行特征匹配，得到特征匹配的结果。根据特征匹配的结果，可确定目标设备的设备类型。
在一些实施例中，处理器102可直接对目标设备的声纹特征与预设的至少一个声纹特征分别进行相似度计算。假设，终端设备的存储器101中预设有声纹特征K1-声纹特征K4共四个声纹特征，声纹特征K1-声纹特征K4分别对应设备类型A1-设备类型A4。处理器102可将提取的音频信号的声纹特征与这四个预设的声纹特征进行特征匹配，特征匹配的结果为：与声纹特征K1的相似度95％，与声纹特征K2的相似度40％，与声纹特征K3的相似度35％，与声纹特征K4的相似度25％。
处理器102进行特征匹配之后，可根据特征匹配的结果，确定目标设备的设备类型。其中，处理器102可将与音频信号的声纹特征相似度最高的声纹特征对应的设备类型，作为目标设备的设备类型。
沿用前述例子举例说明，处理器102可根据特征匹配的结果，将与音频信号的声纹特征的相似度为95％的声纹特征K1对应的设备类型A1，作为手柄的设备类型。
在另一些实施例中，处理器102可在提取目标设备的声纹特征之后，将目标设备的声纹转化为一串唯一编号，并将该编号与预先记录的声纹特征的编号进行匹配。根据编号的匹配结果，可确定目标设备的类型。其中，预先记录的声纹特征编号，可存储在终端设备本地的存储器101中，也可存储在云端服务器上，本实施例不做限制。
通过这种方式，终端设备可较为准确地基于音频信号的声纹特征确定目标设备的设备类型。
在本申请的上述以及下述各实施例中，目标设备发出的音频信号，可以是频率较高的超声波信号，也可以是频率较低的话音信号，本实施例不做限制。
在一些可选的实施例中，以手柄为例，实体手柄发出的音频信号，可以由手柄生产厂家默认设置；虚拟手柄发出的音频信号，可以由开发人员默认设置。在另一些可选的实施例中，用户可对实体手柄或者虚拟手柄发出的音频信号进行设置或者对默认的音频信号进行更新，以实现音频信号的定制化设置。
可选地，若为虚拟手柄，则用户可通过虚拟手柄对应的应用程序，对虚拟手柄发出的音频信号进行设置或更新。若为实体手柄，则用户可通过实体手柄连接的移动端，对实体手柄发出的音频信号进行设置或者更新。
比如，以虚拟手柄为例，虚拟手柄对应的应用程序上可设置有“声纹更新”按钮，用户可触发该按钮，新增一段用户录入的音频或本地存储的音频或者来自网络的音频，作为该虚拟手柄在受力作用下发出的音频信号。虚拟手柄对应的应用程序确定更新的音频信号后，可向对应的服务器（例如虚拟手柄厂家的服务器）发送更新后的音频信号。该服务器确定手柄更新后的音频后，可提取该更新后的音频信号的声纹特征，并根据提取到的声纹特征，向终端设备发送手柄的声纹特征更新操作，从而更新终端设备处预先记录的该手柄的声纹特征。其中，该声纹特征更新操作可包括修改操作、删除操作和新增操作中的至少一项。处理器102可接收针对目标设备（例如实体手柄，或者，虚拟手柄所在设备）的声纹特征更新操作，并可响应该更新操作，对预设的至少一个声纹特征中与该目标设备对应的声纹特征进行更新。比如，响应声纹特征修改操作，将设备类型A4对应的声纹特征K4修改为声纹特征K4'，或者，响应用户的声音特征新增操作，新增一个设备类型A5的新款手柄对应的声纹特征K5。
通过这种方式，用户可对实体手柄或者虚拟手柄发出的音频信号进行设置或者对默认的音频信号进行更新，以实现音频信号的定制化设置。
需要说明的是，当终端设备连接的不同手柄来自不同的厂家或者同一厂家的不同型号时，不同目标设备的键位存在一定的差异。在一些可选的实施例中，处理器102在控制通信组件103与目标设备建立通信连接之后，还可根据确定的目标设备的设备类型，对目标设备的按键进行键位映射，得到键位映射结果。其中，键位映射结果用于使终端设备识别目标设备的按键交互指令。以下继续以目标设备实现为手柄为例，对“根据手柄的设备类型对手柄的按键进行键位映射”的过程进行示例性说明。
终端设备的存储器101中可存储有多个设备类型的手柄各自对应的键位规则，以设备类型为A1的手柄为例，该手柄可包括8个按键，键位规则可包括：按键H1功能为确认、按键H2功能为返回…按键H8功能为关机。处理器102获取到手柄的设备类型为A1后，可从存储器101中获取A1类型的手柄对应的键位规则，并基于该键位规则，将手柄的按键各自的功能设置为该键位规则中的多个按键各自的功能，从而完成键位映射。完成键位映射后，用户点击按键H1，手柄发送按键交互指令后，终端设备可成功识别该按键交互指令以进行确认。
通过这种方式，根据设备类型对手柄的按键进行键位映射，终端设备可准确地识别不同手柄各自的按键交互指令。
可选地，除了上述根据声纹特征对应的设备类型进行键位映射的方式之外，终端设备与目标设备建立通信连接之后，处理器102可控制该通信组件103接收目标设备发送的厂商标识（VendorID）和产品标识（productID）中的至少一种，并根据厂商标识和产品标识中的至少一种确定目标设备的设备类型。其中，终端设备的存储器101中可存储有不同产品型号的目标设备各自对应的键位规则。确定目标设备的设备类型后，处理器102可基于该设备类型对应的按键规则对目标设备进行键位映射，得到键位映射结果。其中，厂商标识用于表示目标设备的生厂商；产品标识用于表示目标设备的产品型号。
通过这种方式，终端设备可对不同类型的目标设备的键位进行识别，从而可在与目标设备的交互过程中，准确识别目标设备发送的指令。
在一些可选的实施例中，目标设备可支持多个控制模式，多个控制模式至少包括：游戏模式和车辆控制模式。同一目标设备在不同控制模式下的按键功能可能是不同的。当目标设备处在游戏模式下，用户可通过目标设备对终端设备上运行的游戏程序进行控制；当目标设备处在车辆控制模式下，用户可通过目标设备对车辆进行控制。
以下将继续以手柄为例进行示例性说明。如图2所示，手柄上可配置有模式切换按键，用户可通过该按键切换手柄的控制模式。例如，模式切换按键可实现为可左右拨动的按键，按键左侧可标注C（control，控制）标识，以指示向左拨动可切换为车辆控制模式；按键的右侧可标注G（game，游戏）标识，以指示向右拨动可切换为游戏模式。
目标设备在检测到用户触发模式切换按键时，可向终端设备发送模式切换消息。其中，模式切换消息可用于指示用户想要切换到的控制模式。
终端设备可通过通信组件103接收目标设备的模式切换消息。相应地，处理器102终端设备可根据接收到的模式切换消息，确定目标设备的当前控制模式，即用户想要切换到的控制模式。
终端设备与目标设备建立通信连接之后，通信组件103可接收目标设备发送的控制指令，控制指令由目标设备在按键被触发时发出。处理器102可确定目标设备的当前控制模式，以在对应模式下准确地执行控制命令。
若当前控制模式为游戏模式，处理器102可根据控制指令以及游戏模式对应的第一键位映射结果，对终端设备上运行的游戏程序进行控制。
若当前控制模式为车辆控制模式，处理器102可根据控制指令以及车辆控制模式对应的第二键位映射结果，对车辆进行控制。
其中，使用“第一”和“第二”对键位映射结果进行限定，仅用于表示这两个键位映射结果中的按键功能在不同模式下是不同的。比如，以手柄按键为H01-H04共四个按键为例，在游戏模式下，按键H01-H04的功能分别为前进、后退、射击、奔跑，而在车辆控制模式下，按键H01-H04的功能分别为增加空调温度、降低空调温度、打开车窗、关闭车窗。
通过这种方式，用户可在使用目标设备的游戏过程中，通过目标设备的模式切换按键，快捷地对车辆进行功能控制。
在一些场景下，为提升用户通过目标设备进行游戏时的安全性，终端设备在根据控制指令以及游戏模式对应的第一键位映射结果，对所述终端设备上运行的游戏程序进行控制之前，可通过以下方式判断是否可启动游戏模式：
可选地，处理器102可识别与目标设备进行交互的用户在车舱内的位置；其中，识别与目标设备进行交互的用户在车舱内的位置的操作，可基于图像采集设备、安全带提醒传感器以及座椅传感器中的至少一种实现。若识别到与目标设备交互的用户位于非主驾驶位置，或者，用户位于主驾驶位置且车辆的当前档位为驻车档位，则启动目标设备的游戏模式。反之，则禁用目标设备的游戏模式。
在一些场景下，为提升用户通过目标设备进行车辆控制时的安全性，处理器102在根据控制指令以及车辆控制模式对应的第二键位映射结果，对车辆进行控制之前，可通过以下方式判断是否可启动车辆控制模式：
可选地，处理器102可获取车辆的当前车速；若当前车速小于设定车速阈值，则启动车辆控制模式。
可选地，在车辆的儿童锁为开启状态时，终端设备可禁用车辆控制模式，进而确保行车过程中的安全性。
通过上述方式，终端设备可在一些安全场景下可启动相关的控制模式，若存在潜在的危险性，则不启动相关的控制模式，从而，提高了目标设备控制的安全性。
除前述实施例之外，图1示意的终端设备还可执行如下交互逻辑：
其中，存储器101，用于存储一条或者多条计算机指令。音频组件105，用于采集音频信号；该音频信号由目标设备在受力操作下发出。处理器102，用于执行该一条或者多条计算机指令，以用于：在该音频信号满足设定条件时，控制通信组件103与目标设备建立通信连接，该目标设备用于通过该通信连接与终端设备进行交互。
其中，处理器102控制通信组件103与目标设备建立通信连接的可选实施方式以及终端设备可执行的其他可选实施例可参考前述实施例的记载，此处不再赘述。
在这种实施方式中，目标设备受力时可发出音频信号，终端设备可基于车舱内外采集到的音频信号与目标设备建立通信连接。进而，优化了目标与车辆之间的连接方式，使连接操作更加简洁。同时，在这种实施方式中，无需依赖车内外的环境图像，降低了通信连接所需成本以及性能消耗。
除前述实施例记载的终端设备之外，本申请实施例还提供一种交互方法。以下将结合附图进行说明。
图3为本申请一示例性实施例提供的交互方法的流程示意图，如图3所示，该方法包括：
步骤301、对环境进行图像采集。
步骤302、基于采集到的图像识别目标设备的受力操作。
步骤303、在所述受力操作满足预设的交互触发条件时，与所述目标设备建立通信连接；所述目标设备用于通过所述通信连接与终端设备进行交互。
可选地，该方法还包括：采集车舱内外的音频信号；所述音频信号由目标设备在受力操作下发出；在所述受力操作满足预设的交互触发条件时，与所述目标设备建立通信连接的一种方式，包括：若所述受力操作满足预设的交互触发条件且所述音频信号满足设定条件，则与所述目标设备建立通信连接。
通过上述方式，终端设备可结合图像识别和音频信号采集两种方式，更准确地判断用户是否需要建立目标设备与终端设备之间的通信连接，降低误判的概率。
可选地，与所述目标设备建立通信连接的一种方式，包括：向所述目标设备发出第一连接请求，并接收所述目标设备根据所述第一连接请求返回的连接响应消息，以与所述目标设备建立通信连接。
可选地，向所述目标设备发出第一连接请求的一种方式，包括：输出连接询问消息；所述连接询问消息用于询问用户是否与所述目标设备建立通信连接；若接收到针对所述连接询问消息的确定消息，向所述目标设备发出第一连接请求。
通过这种方式，询问用户是否与所述目标设备建立通信连接，防止用户因误操作而将目标设备连接至终端设备。
可选地，向所述目标设备发出第一连接请求的一种方式，包括：接收所述目标设备的连接请求，并向所述目标设备发送连接响应消息，以与所述目标设备建立通信连接。
可选地，采集车舱内外的音频信号的一种方式，包括：若所述受力操作满足预设的交互触发条件，则采集所述目标设备在所述受力操作下发出的音频信号；其中，所述交互触发条件包括：所述目标设备的受力操作的时长大于设定时长阈值和/或所述目标设备的持有者的发力的操作的次数大于设定次数阈值。
可选地，所述方法还包括：根据所述音频信号，确定所述目标设备的设备类型；与所述目标设备建立通信连接之后，还包括：根据所述目标设备的设备类型，对所述目标设备的按键进行键位映射，得到键位映射结果；所述键位映射结果用于使所述终端设备识别所述目标设备的按键交互指令。
通过这种方式，根据设备类型对目标设备的按键进行键位映射，终端设备可准确地识别不同目标设备各自的按键交互指令。
可选地，根据所述音频信号，确定所述目标设备的设备类型的一种方式，包括：提取所述音频信号的声纹特征；将所述音频信号的声纹特征与预设的至少一个声纹特征进行特征匹配；不同声纹特征对应不同的设备类型；根据所述特征匹配的结果，确定所述目标设备的设备类型。
通过这种方式，终端设备可较为准确地基于音频信号的声纹特征确定目标设备的设备类型。
可选地，该方法还包括：接收针对所述目标设备的声纹特征更新操作；所述更新操作包括：修改操作、删除操作和/或新增操作；响应所述更新操作，对所述预设的至少一个声纹特征中与所述目标设备对应的声纹特征进行更新。
通过这种方式，用户可对实体目标设备或者虚拟目标设备发出的音频信号进行设置或者对默认的音频信号进行更新，以实现音频信号的定制化设置。
可选地，与所述目标设备建立通信连接之后，该方法还包括：接收所述目标设备发送的厂商标识和/或产品标识；根据所述厂商标识和/或产品标识，对所述目标设备进行键位映射，得到键位映射结果；所述键位映射结果用于使所述终端设备识别所述目标设备的按键交互指令。
通过这种方式，终端设备可根据接收到的目标设备发送的厂商标识和产品标识中的至少一种，对不同类型的目标设备的键位进行识别，从而可在与目标设备的交互过程中，准确识别目标设备发送的指令。
可选地，该方法还包括：接收所述目标设备发送的控制指令；所述控制指令由所述目标设备在按键被触发时发出；确定所述目标设备的当前控制模式；若所述当前控制模式为游戏模式，则根据所述控制指令以及所述游戏模式对应的第一键位映射结果，对所述终端设备上运行的游戏程序进行控制；若所述当前控制模式为车辆控制模式，则根据所述控制指令以及所述车辆控制模式对应的第二键位映射结果，对车辆进行控制。
通过这种方式，用户可通过同一个目标设备的不同模式对车辆和终端设备上运行的游戏程序进行控制。
可选地，确定所述目标设备的当前控制模式的一种方式，包括：接收所述目标设备发送的模式切换消息；所述模式切换消息由所述目标设备在检测到用户触发模式切换按键时发送；根据所述模式切换消息，确定所述目标设备的当前控制模式。
可选地，根据所述控制指令以及所述游戏模式对应的第一键位映射结果，对所述终端设备上运行的游戏程序进行控制之前，该方法还包括：识别与所述目标设备进行交互的用户在车舱内的位置；若识别到所述用户位于非主驾驶位置，或者，所述用户位于主驾驶位置且所述车辆的当前档位为驻车档位，则启动所述目标设备的游戏模式。
通过这种方式，用户可在使用目标设备的游戏过程中，通过目标设备的模式切换按键，快捷地对车辆进行功能控制。
可选地，根据所述控制指令以及所述车辆控制模式对应的第二键位映射结果，对车辆进行控制之前，该方法还包括：获取所述车辆的当前档位和/或当前车速；若所述当前车速小于设定车速阈值，则启动车辆控制模式。
通过这种方式，可提升用户通过目标设备进行游戏时的安全性。
在本实施例中，终端设备可对车舱内外的环境进行图像采集，并基于采集到的图像识别目标设备的受力操作。在识别到的受力操作满足预设的交互触发条件时，与目标设备建立通信连接。通过这种方式，用户向目标设备发出力的操作即可使得终端设备和目标设备实现自动连接，优化了目标设备与车辆之间的连接方式，使连接方式更加简洁，简化了用户在建立目标设备与终端设备之间的连接时所需的操作。
图4为本申请另一示例性实施例提供的交互方法的流程示意图，如图4所示，该方法包括：
步骤401、采集音频信号；所述音频信号包括：目标设备在受力操作下发出的音频信号。
步骤402、若所述音频信号满足设定条件，与所述目标设备建立通信连接；所述目标设备用于通过所述通信连接与终端设备进行交互。
在这种实施方式中，目标设备受力时可发出音频信号，终端设备可基于车舱内外采集到的音频信号与目标设备建立通信连接。进而，优化了目标与车辆之间的连接方式，使连接操作更加简洁。同时，在这种实施方式中，无需依赖车内外的环境图像，降低了通信连接所需成本以及性能消耗。
可选地，与所述目标设备建立通信连接的一种方式，包括：向所述目标设备发出第一连接请求，并接收所述目标设备根据所述第一连接请求返回的连接响应消息，以与所述目标设备建立通信连接。
可选地，向所述目标设备发出第一连接请求的一种方式，包括：输出连接询问消息；所述连接询问消息用于询问用户是否与所述目标设备建立通信连接；若接收到针对所述连接询问消息的确定消息，向所述目标设备发出第一连接请求。
通过这种方式，询问用户是否与所述目标设备建立通信连接，防止用户因误操作而将目标设备连接至终端设备。
可选地，向所述目标设备发出第一连接请求的一种方式，包括：接收所述目标设备的连接请求，并向所述目标设备发送连接响应消息，以与所述目标设备建立通信连接。
可选地，采集车舱内外的音频信号的一种方式，包括：对车舱内外的环境进行图像采集；基于采集到的图像识别目标设备的受力操作；若所述受力操作满足预设的交互触发条件，则采集所述目标设备在所述受力操作下发出的音频信号；其中，所述交互触发条件包括：所述目标设备的受力操作的时长大于设定时长阈值和/或所述目标设备的持有者的发力的操作的次数大于设定次数阈值。
可选地，所述方法还包括：根据所述音频信号，确定所述目标设备的设备类型；与所述目标设备建立通信连接之后，还包括：根据所述目标设备的设备类型，对所述目标设备的按键进行键位映射，得到键位映射结果；所述键位映射结果用于使所述终端设备识别所述目标设备的按键交互指令。
通过这种方式，根据设备类型对目标设备的按键进行键位映射，终端设备可准确地识别不同目标设备各自的按键交互指令。
可选地，根据所述音频信号，确定所述目标设备的设备类型的一种方式，包括：提取所述音频信号的声纹特征；将所述音频信号的声纹特征与预设的至少一个声纹特征进行特征匹配；不同声纹特征对应不同的设备类型；根据所述特征匹配的结果，确定所述目标设备的设备类型。
通过这种方式，终端设备可较为准确地基于音频信号的声纹特征确定目标设备的设备类型。
可选地，该方法还包括：接收针对所述目标设备的声纹特征更新操作；所述更新操作包括：修改操作、删除操作和/或新增操作；响应所述更新操作，对所述预设的至少一个声纹特征中与所述目标设备对应的声纹特征进行更新。
通过这种方式，用户可对实体目标设备或者虚拟目标设备发出的音频信号进行设置或者对默认的音频信号进行更新，以实现音频信号的定制化设置。
可选地，与所述目标设备建立通信连接之后，该方法还包括：接收所述目标设备发送的厂商标识和/或产品标识；根据所述厂商标识和/或产品标识，对所述目标设备进行键位映射，得到键位映射结果；所述键位映射结果用于使所述终端设备识别所述目标设备的按键交互指令。
通过这种方式，终端设备可根据接收到的目标设备发送的厂商标识和产品标识中的至少一种，对不同类型的目标设备的键位进行识别，从而可在与目标设备的交互过程中，准确识别目标设备发送的指令。
可选地，该方法还包括：接收所述目标设备发送的控制指令；所述控制指令由所述目标设备在按键被触发时发出；确定所述目标设备的当前控制模式；若所述当前控制模式为游戏模式，则根据所述控制指令以及所述游戏模式对应的第一键位映射结果，对所述终端设备上运行的游戏程序进行控制；若所述当前控制模式为车辆控制模式，则根据所述控制指令以及所述车辆控制模式对应的第二键位映射结果，对车辆进行控制。
通过这种方式，用户可通过同一个目标设备的不同模式对车辆和终端设备上运行的游戏程序进行控制。
可选地，确定所述目标设备的当前控制模式的一种方式，包括：接收所述目标设备发送的模式切换消息；所述模式切换消息由所述目标设备在检测到用户触发模式切换按键时发送；根据所述模式切换消息，确定所述目标设备的当前控制模式。
可选地，根据所述控制指令以及所述游戏模式对应的第一键位映射结果，对所述终端设备上运行的游戏程序进行控制之前，该方法还包括：识别与所述目标设备进行交互的用户在车舱内的位置；若识别到所述用户位于非主驾驶位置，或者，所述用户位于主驾驶位置且所述车辆的当前档位为驻车档位，则启动所述目标设备的游戏模式。
通过这种方式，用户可在使用目标设备的游戏过程中，通过目标设备的模式切换按键，快捷地对车辆进行功能控制。
可选地，根据所述控制指令以及所述车辆控制模式对应的第二键位映射结果，对车辆进行控制之前，该方法还包括：获取所述车辆的当前档位和/或当前车速；若所述当前车速小于设定车速阈值，则启动车辆控制模式。
通过这种方式，可提升用户通过目标设备进行游戏时的安全性。
本申请实施例还提供一种车辆的手柄交互方法，适用于终端设备。以下将结合附图，详细说明本申请各实施例提供的技术方案。
图5为本申请一示例性实施例提供的一种车辆的手柄交互方法的流程示意图，如图5所示，该方法包括：
步骤501、采集车舱内外的音频信号；音频信号由手柄在受力操作下发出。
步骤502、若音频信号满足设定条件，搜索手柄发送的连接请求。连接请求由手柄在受力操作下发出；连接请求包括：设备标识以及消息类。
步骤503、若搜索到连接请求，且消息类型指示手柄与终端设备为首次连接，则根据设备标识向手柄发送连接响应消息，以与手柄建立通信连接；手柄用于通过通信连接与终端设备进行交互。
在本实施例中，手柄可在受力操作下发出音频信号和连接请求。终端设备可采集车舱内外的音频信号，若音频信号满足设定条件，则搜索手柄发送的连接请求。其中，连接请求包括：设备标识以及消息类型。其中，设备标识可包括手柄的名称或型号等等。消息类型可反映连接请求的类型，可包括：首次连接和非首次连接。
终端设备搜索到连接请求，且消息类型指示手柄与终端设备为首次连接，则根据设备标识向手柄发送连接响应消息，以与手柄建立通信连接。建立通信连接后，手柄可通过通信连接与终端设备进行交互。
通过这种方式，用户向手柄发出力的操作即可使得车机和手柄实现自动连接，优化了手柄与车辆之间的连接方式，使连接方式更加简洁，简化了用户在建立手柄与车辆之间的连接时所需的操作。
在一些可选的实施例中，根据设备标识向手柄发送连接响应消息，以与手柄建立通信连接，可基于以下步骤实现：
终端设备可输出连接询问消息。其中，连接询问消息用于询问用户是否与手柄建立通信连接。该连接询问消息可为音频形式，也可为文字形式或震动形式。比如，连接消息可为“是否需要连接”的提示文字。用户获取到该连接询问消息时，若用户对手柄施加的动作为误操作，即，用户并不想将手柄连接至终端设备，则可忽略此消息。若用户想要将手柄连接至终端设备，可在手柄上通过实体按键或者虚拟按键进行确认。手柄可响应用户的确认操作，向终端设备发送针对连接询问消息的确定消息。终端设备接收到该确定消息后，可根据设备标识向手柄发送连接响应消息，以与手柄建立通信连接。
需要说明的是，不同设备标识可对应不同型号的手柄。不同型号的手柄建立连接所需的通信数据可能也是不同的，其中，通信数据可为通信协议和通信地址等等。终端设备可存储有不同型号的手柄对应的通信数据。基于此，终端设备可根据设备标识确定手柄的型号，进而可根据手柄对应的通信数据，生成并向手柄发送连接响应消息。对应地，手柄可根据接收到的连接响应消息建立与终端设备之间的通信连接。
通过这种方式，询问用户是否与所述手柄建立通信连接，防止用户因误操作而将手柄连接至终端设备。
本申请实施例还提供一种车辆的手柄交互方法，适用于终端设备。以下将结合附图，详细说明本申请各实施例提供的技术方案。
图6为本申请一示例性实施例提供的一种车辆的手柄交互方法的流程示意图，如图6所示，该方法包括：
步骤601、对车舱内外的环境进行图像采集。
步骤602、基于采集到的图像，识别手柄的受力操作。
步骤603、若手柄的受力操作满足预设的交互触发条件，则搜索手柄的连接请求；手柄的连接请求由手柄在受力操作下发出。
步骤604、若搜索到连接请求，则向手柄发送连接响应消息，以与手柄建立通信连接；手柄用于通过通信连接与终端设备进行交互。
在本实施例中，手柄在受力操作下可向外发出连接请求。手柄的受力操作可包括：摇动、点击、触摸或抬起，等等。
终端设备识别手柄的受力操作，可得到识别结果。该识别结果可包括：发力行为频率和发力行为类型，等等。
若识别结果满足预设的交互触发条件，则可搜索手柄在受力操作下向外发出的连接请求。其中，交互触发条件可包括以下至少一项：发力行为频率大于交互频率阈值，或者，发力行为类型为预设的交互类型。
举例说明，终端设备可通过图像采集设备采集多张车辆内外环境的图像，进而，可基于这些图像进行手柄的受力操作的识别，识别结果为：发力行为类型为摇动手柄，发力行为频率即摇动手柄的频率，为2次/秒。而预设的交互触发条件为：发力行为频率在大于1次/秒，且发力行为类型为预设的交互类型。预设的交互类型为摇动手柄、敲击手柄、和触摸手柄。识别结果满足预设的交互触发条件，即可搜索手柄的连接请求。
终端设备若搜索到连接请求，可向手柄发送连接响应消息，以与手柄建立通信连接。建立通信连接之后，手柄可通过通信连接与终端设备进行交互。
通过这种方式，用户向手柄发出力的操作即可使得车机和手柄实现自动连接，优化了手柄与车辆之间的连接方式，使连接方式更加简洁，简化了用户在建立手柄与车辆之间的连接时所需的操作。
在一些可选的实施例中，终端设备在向手柄发送连接响应消息，以手柄建立通信连接之后，还可接收手柄发送的厂商标识和产品标识中的至少一种，并根据厂商标识和产品标识中的至少一种，对手柄进行键位映射，得到键位映射结果。其中，键位映射结果用于使终端设备识别手柄的按键交互指令。其中，厂商标识用于表示手柄的生厂商；产品标识用于表示手柄的产品型号。
其中，终端设备的存储器中可存储有不同产品型号的手柄各自对应的键位规则，以产品型号为U10的手柄为例，该手柄可包括8个按键，键位规则可包括：按键H100功能为返回、按键H200功能为确认…按键H800功能为关机。终端设备获取到手柄的产品型号为U10后，可从存储器中获取U10型号的手柄对应的键位规则，并基于该键位规则，将手柄的按键各自的功能设置为该键位规则中的多个按键各自的功能，从而完成键位映射。完成键位映射后，用户点击按键H100，手柄发送按键交互指令后，终端设备可成功识别该按键交互指令以进行返回操作。以上对“根据产品标识对手柄的按键进行键位映射”的过程进行了说明。无论是根据厂商标识进行键位映射，还是根据厂商标识和产品标识进行键位映射，均与上述根据产品标识进行键位映射的方案同理，此处不再赘述。
需要说明的是，上述实施例所提供方法的各步骤的执行主体均可以是同一设备，或者，该方法也由不同设备作为执行主体。比如，步骤401至步骤402的执行主体可以为设备A；又比如，步骤401的执行主体可以为设备A，步骤402的执行主体可以为设备B；等等。
本申请实施例还提供一种车辆，该车辆包括前述各实施例提供的终端设备。
本申请实施例还提供一种计算机程序产品，包括计算机程序/指令，当所述计算机程序/指令被处理器执行时，执行前述各实施例提供的方法。其中，该计算机程序产品可实现为运行在终端设备上的客户端程序。
本申请实施例还提供一种计算机可读存储介质，存储有计算机程序，该计算机程序被处理器执行时实现前述实施例中的显示方法中的步骤。
另外，在上述实施例及附图中的描述的一些流程中，包含了按照特定顺序出现的多个操作，但是应该清楚了解，这些操作可以不按照其在本文中出现的顺序来执行或并行执行，操作的序号如401、402等，仅仅是用于区分开各个不同的操作，序号本身不代表任何的执行顺序。另外，这些流程可以包括更多或更少的操作，并且这些操作可以按顺序执行或并行执行。
需要说明的是，本文中的“第一”、“第二”等描述，是用于区分不同的消息、设备、模块等，不代表先后顺序，也不限定“第一”和“第二”是不同的类型。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备（系统）、和计算机程序产品的流程图和／或方框图来描述的。应理解可由计算机程序指令实现流程图和／或方框图中的每一流程和／或方框、以及流程图和／或方框图中的流程和／或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器 (CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器 (RAM) 和/或非易失性内存等形式，如只读存储器 (ROM) 或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存 (PRAM)、静态随机存取存储器 (SRAM)、动态随机存取存储器 (DRAM)、其他类型的随机存取存储器 (RAM)、只读存储器 (ROM)、电可擦除可编程只读存储器 (EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘 (DVD) 或其他光学存储、磁盒式磁带，磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体 (transitory media)，如调制的数据信号和载波。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上所述仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (17)

1.一种终端设备，其特征在于，包括：存储器、处理器、通信组件以及图像采集组件；
所述存储器，用于存储一条或者多条计算机指令；
所述图像采集组件，用于进行图像采集；
所述处理器，用于执行所述一条或者多条计算机指令，以用于：基于所述图像采集组件采集到的图像识别目标设备的受力操作；以及，在所述受力操作满足预设的交互触发条件时，控制所述通信组件与所述目标设备建立通信连接；其中，所述目标设备用于通过所述通信连接与所述终端设备进行交互。
2.根据权利要求1所述的终端设备，其特征在于，所述受力操作包括：针对所述目标设备的摇晃操作、敲击操作、点击操作或者触摸操作。
3.根据权利要求1所述的终端设备，其特征在于，还包括：音频组件；
所述音频组件，用于采集音频信号；所述音频信号包括所述目标设备在受力操作下发出的音频信号；
所述处理器，具体用于：若所述受力操作满足预设的交互触发条件且所述音频信号满足设定条件，则控制所述通信组件与所述目标设备建立通信连接。
4.根据权利要求3所述的终端设备，其特征在于，所述处理器在控制所述通信组件与所述目标设备建立通信连接时，具体用于：
控制所述通信组件向所述目标设备发出第一连接请求，并在所述通信组件接收所述目标设备返回的连接响应消息之后，与所述目标设备建立通信连接。
5.根据权利要求4所述的终端设备，其特征在于，所述处理器具体用于：
控制所述音频组件输出连接询问消息；所述连接询问消息用于询问用户是否与所述目标设备建立通信连接；
检测到针对所述连接询问消息的确定消息之后，控制所述通信组件向所述目标设备发出第一连接请求。
6.根据权利要求3所述终端设备，其特征在于，
所述处理器，具体用于：若判定所述受力操作满足预设的交互触发条件，控制所述音频组件采集所述目标设备在所述受力操作下发出的音频信号；
其中，所述交互触发条件包括：所述目标设备的受力操作的时长大于设定时长阈值和/或所述目标设备的持有者的发力的操作的次数大于设定次数阈值。
7.根据权利要求6所述的终端设备，其特征在于，所述处理器还用于：
根据所述音频信号，确定所述目标设备的设备类型；
根据所述目标设备的设备类型，对所述目标设备的按键进行键位映射，得到键位映射结果；所述键位映射结果用于使所述终端设备识别所述目标设备的按键交互指令。
8.根据权利要求7所述的终端设备，其特征在于，所述处理器具体用于：
提取所述音频信号的声纹特征；
将所述音频信号的声纹特征与预设的至少一个声纹特征进行特征匹配；不同声纹特征对应不同的设备类型；
根据所述特征匹配的结果，确定所述目标设备的设备类型。
9.根据权利要求8所述的终端设备，其特征在于，所述处理器还用于：获取针对所述目标设备的声纹特征更新操作；所述更新操作包括：修改操作、删除操作和/或新增操作；
响应所述更新操作，对所述预设的至少一个声纹特征中与所述目标设备对应的声纹特征进行更新。
10.根据权利要求1所述的终端设备，其特征在于，所述通信组件还用于：接收所述目标设备发送的厂商标识和/或产品标识；
所述处理器还用于：根据所述厂商标识和/或产品标识，对所述目标设备进行键位映射，得到键位映射结果；所述键位映射结果用于使所述终端设备识别所述目标设备的按键交互指令。
11.根据权利要求1-10任一项所述的终端设备，其特征在于，
所述通信组件，还用于接收所述目标设备发送的控制指令；所述控制指令由所述目标设备在按键被触发时发出；
所述处理器，还用于确定所述目标设备的当前控制模式；若所述当前控制模式为游戏模式，则根据所述控制指令以及所述游戏模式对应的第一键位映射结果，对所述终端设备上运行的游戏程序进行控制；若所述当前控制模式为车辆控制模式，则根据所述控制指令以及所述车辆控制模式对应的第二键位映射结果，对车辆进行控制。
12.根据权利要求11所述的终端设备，其特征在于，所述处理器在确定所述目标设备的当前控制模式时，具体用于：
通过所述通信组件接收所述目标设备发送的模式切换消息；所述模式切换消息由所述目标设备在检测到用户触发模式切换按键时发送；
根据所述模式切换消息，确定所述目标设备的当前控制模式。
13.根据权利要求11所述的终端设备，其特征在于，所述处理器在根据所述控制指令以及所述游戏模式对应的第一键位映射结果，对所述终端设备上运行的游戏程序进行控制之前，还用于：
识别与所述目标设备进行交互的用户在车舱内的位置；
若识别到所述用户位于非主驾驶位置，或者，所述用户位于主驾驶位置且所述车辆的当前档位为驻车档位，则启动所述目标设备的游戏模式。
14.根据权利要求11所述的终端设备，其特征在于，所述处理器在根据所述控制指令以及所述车辆控制模式对应的第二键位映射结果，对车辆进行控制之前，还用于：
获取所述车辆的当前档位和/或当前车速；
若所述当前车速小于设定车速阈值，则启动车辆控制模式。
15.一种交互方法，其特征在于，包括：
对环境进行图像采集；
基于采集到的图像识别目标设备的受力操作；
在所述受力操作满足预设的交互触发条件时，与所述目标设备建立通信连接；所述目标设备用于通过所述通信连接与终端设备进行交互。
16.一种车辆，其特征在于，包括权利要求1-14任一项所述的终端设备。
17.一种计算机程序产品，包括计算机程序/指令，其特征在于，当所述计算机程序/指令被处理器执行时，执行权利要求15所述方法。
CN202211463195.4A 2022-11-16 2022-11-16 一种交互方法、终端设备以及车辆 Active CN115531858B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211463195.4A CN115531858B (zh) 2022-11-16 2022-11-16 一种交互方法、终端设备以及车辆

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211463195.4A CN115531858B (zh) 2022-11-16 2022-11-16 一种交互方法、终端设备以及车辆

Publications (2)

Publication Number Publication Date
CN115531858A true CN115531858A (zh) 2022-12-30
CN115531858B CN115531858B (zh) 2023-04-18

Family

ID=84721487

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211463195.4A Active CN115531858B (zh) 2022-11-16 2022-11-16 一种交互方法、终端设备以及车辆

Country Status (1)

Country Link
CN (1) CN115531858B (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100136944A1 (en) * 2008-11-25 2010-06-03 Tom Taylor Method and system for performing a task upon detection of a vehicle trigger
CN108156668A (zh) * 2017-11-22 2018-06-12 努比亚技术有限公司 一种通信交互方法、终端及计算机可读存储介质
CN109286727A (zh) * 2018-11-23 2019-01-29 维沃移动通信有限公司 一种操作控制方法及终端设备
CN110113729A (zh) * 2019-04-30 2019-08-09 上海掌门科技有限公司 车载设备的通信方法以及车载设备
CN112572317A (zh) * 2019-09-30 2021-03-30 比亚迪股份有限公司 车辆控制方法、装置、计算机设备及存储介质
US20210183386A1 (en) * 2019-08-15 2021-06-17 Huawei Technologies Co., Ltd. Voice Interaction Method and Apparatus, Terminal, and Storage Medium
CN113205806A (zh) * 2021-04-02 2021-08-03 广东小天才科技有限公司 一种输出切换方法、鼠标、终端设备及可读存储介质
CN114307128A (zh) * 2020-09-28 2022-04-12 比亚迪股份有限公司 一种基于车载娱乐系统的互动方法、车辆及介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100136944A1 (en) * 2008-11-25 2010-06-03 Tom Taylor Method and system for performing a task upon detection of a vehicle trigger
CN108156668A (zh) * 2017-11-22 2018-06-12 努比亚技术有限公司 一种通信交互方法、终端及计算机可读存储介质
CN109286727A (zh) * 2018-11-23 2019-01-29 维沃移动通信有限公司 一种操作控制方法及终端设备
CN110113729A (zh) * 2019-04-30 2019-08-09 上海掌门科技有限公司 车载设备的通信方法以及车载设备
US20210183386A1 (en) * 2019-08-15 2021-06-17 Huawei Technologies Co., Ltd. Voice Interaction Method and Apparatus, Terminal, and Storage Medium
CN112572317A (zh) * 2019-09-30 2021-03-30 比亚迪股份有限公司 车辆控制方法、装置、计算机设备及存储介质
CN114307128A (zh) * 2020-09-28 2022-04-12 比亚迪股份有限公司 一种基于车载娱乐系统的互动方法、车辆及介质
CN113205806A (zh) * 2021-04-02 2021-08-03 广东小天才科技有限公司 一种输出切换方法、鼠标、终端设备及可读存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
刘晋等: "嵌入式车载导航与防盗系统的设计与研究", 《微型机与应用》 *

Also Published As

Publication number Publication date
CN115531858B (zh) 2023-04-18

Similar Documents

Publication Publication Date Title
CN109144360B (zh) 屏幕点亮方法、电子设备和存储介质
JP6811758B2 (ja) 音声対話方法、装置、デバイス及び記憶媒体
CN110288987B (zh) 用于处理声音数据的系统和控制该系统的方法
CN106558310B (zh) 虚拟现实语音控制方法及装置
CN109309751B (zh) 语音记录方法、电子设备及存储介质
RU2618937C2 (ru) Способ, устройство обновления и устройство для обновления
US20200175981A1 (en) Method, apparatus, system, device for controlling intelligent device and storage medium
US11042703B2 (en) Method and device for generating natural language expression by using framework
CN110716776A (zh) 一种显示用户界面的方法及车载终端
CN107911386B (zh) 获取服务授权信息的方法及装置
CN107870674B (zh) 一种程序启动方法和移动终端
CN105374145A (zh) 智能终端报警方法及装置
JP2015153325A (ja) 情報処理装置、操作支援方法及び操作支援プログラム
CN105117008A (zh) 操作引导方法及装置、电子设备
CN112236767A (zh) 用于通过输入单元向应用提供与图像相关的信息的电子装置和方法
CN109257649B (zh) 一种多媒体文件生成方法及终端设备
CN108712736A (zh) 寻找设备的方法、装置和系统
CN110659013A (zh) 一种消息处理方法与装置、存储介质
CN112732379B (zh) 智能终端上应用程序的运行方法、终端和存储介质
CN105188027A (zh) 附近用户查找方法及装置
CN108881766B (zh) 视频处理方法、装置、终端和存储介质
JP2012039282A (ja) 電子機器、その情報表示プログラム及びその情報表示方法
CN115531858B (zh) 一种交互方法、终端设备以及车辆
CN115171692A (zh) 一种语音交互方法和装置
CN114760417A (zh) 一种图像拍摄方法和装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant