CN109725704A - 控制应用运行的方法及装置 - Google Patents

Abstract

本发明公开了一种控制应用运行的方法及装置，属于终端技术领域。方法包括：基于多个超声波接收器件接收到的多个反射信号，确定目标物的动作轨迹；根据所述目标物的动作轨迹以及预设的动作轨迹与操作指令之间的对应关系，确定目标操作指令；根据所述目标操作指令，控制应用的运行。本发明通过多个超声波接收器件接收超声波信号的反射信号，基于这些反射信号得到目标物的动作轨迹，进而获取目标操作指令来控制应用的运行。上述技术方案利用终端的超声波功能来控制应用的运行，终端发射超声波信号和接收超声波信号的功耗低，且具有超声波功能的终端可以是用户已有的终端，无需配备额外的设备，成本低。

Description

控制应用运行的方法及装置

技术领域

本发明涉及终端技术领域，尤其涉及一种控制应用运行的方法及装置。

背景技术

随着娱乐生活的逐渐丰富，玩游戏的用户也在逐渐增加。用户可以通过游戏主机玩游戏，常见的游戏主机有任天堂公司推出的游戏主机GameCube和Wii。当然，用户也可以无需游戏主机，而通过安装有游戏主机模拟器的PC(Personal Computer，个人计算机)玩游戏。

目前，用户可以使用游戏控制器(如任天堂Wii手柄)来控制游戏的运行，具体地，用户可以手持游戏控制器，该游戏控制器内置有加速度传感器，用于检测该游戏控制器的运动轨迹，并将该运动轨迹传输给游戏主机或PC，游戏主机或PC可以将该运动轨迹转换成游戏指令，从而驱动游戏在游戏主机或PC的游戏主机模拟器中运行。

在实现本发明的过程中，发明人发现现有技术至少存在以下问题：

上述技术中需要额外配置Wii手柄等游戏控制器，而且该游戏控制器内置的加速度传感器会产生较大的功耗。

发明内容

本发明实施例提供了一种控制应用运行的方法及装置，可以解决现有技术产生较大功耗的问题。所述技术方案如下：

一方面，提供了一种控制应用运行的方法，所述方法包括：

基于多个超声波接收器件接收到的多个反射信号，确定目标物的动作轨迹，所述多个反射信号由超声波发送器件发射的多个超声波信号经由所述目标物的反射得到，所述多个超声波信号的频率不同；

根据所述目标物的动作轨迹以及预设的动作轨迹与操作指令之间的对应关系，确定目标操作指令，所述目标操作指令为所述目标物的动作轨迹对应的操作指令；

根据所述目标操作指令，控制应用的运行。

另一方面，提供了一种控制应用运行的装置，所述装置包括：

确定模块，用于基于多个超声波接收器件接收到的多个反射信号，确定目标物的动作轨迹，所述多个反射信号由超声波发送器件发射的多个超声波信号经由所述目标物的反射得到，所述多个超声波信号的频率不同；

所述确定模块，还用于根据所述目标物的动作轨迹以及预设的动作轨迹与操作指令之间的对应关系，确定目标操作指令，所述目标操作指令为所述目标物的动作轨迹对应的操作指令；

控制模块，用于根据所述目标操作指令，控制应用的运行。

又一方面，提供了一种终端，所述终端包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、至少一段程序、代码集或指令集由所述处理器加载并执行以实现上述控制应用运行的方法所执行的操作。

再一方面，提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现如上述控制应用运行的方法所执行的操作。

本发明实施例提供的技术方案带来的有益效果是：

通过超声波发送器件发射多个频率的超声波信号，通过多个超声波接收器件来接收这些超声波信号的反射信号，由于这些反射信号是经由目标物反射得到，因此目标物的动作会导致反射信号的不同，基于这些反射信号，可以得到目标物的动作轨迹。由于终端预先存储有动作轨迹与操作指令之间的对应关系，因而终端根据该对应关系，可以获取当前确定的动作轨迹所对应的目标操作指令，进而根据该目标操作指令控制应用的运行。上述技术方案利用终端的超声波功能来控制应用的运行，终端发射超声波信号和接收超声波信号的功耗低，且具有超声波功能的终端可以是用户已有的常用终端，无需配备额外的设备，成本低。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种控制应用运行的方法的实施环境示意图；

图2是本发明实施例提供的一种控制应用运行的方法的流程图；

图3是本发明实施例提供的一种传播路径的示意图；

图4是本发明实施例提供的一种控制应用运行的装置的结构示意图；

图5是本发明实施例提供的一种终端500的结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。

图1是本发明实施例提供的一种控制应用运行的实施环境示意图，参见图1中的图(a)，该实施环境中可以仅包括终端101。该实施环境下，该终端101可以为具有超声波功能的智能电视、台式电脑等个人计算机，基于该超声波功能，终端101可以通过检测目标物的动作轨迹，进而将该动作轨迹转换为相应的操作指令，从而根据该操作指令控制该应用的运行。以该应用为主机游戏、该操作指令为游戏指令为例，该主机游戏是指针对游戏主机平台开发的游戏，终端101可以安装有游戏主机模拟器，基于该游戏主机模拟器，终端101可以根据该游戏指令，控制该主机游戏在游戏主机模拟器中的运行。

参见图1中的图(b)，该实施环境中可以包括终端101和目标设备102。该实施环境下，该终端101可以为具有超声波功能的手机、平板电脑、笔记本电脑等移动终端。目标设备102可以是智能电视、台式电脑等个人计算机。基于该超声波功能，终端101在根据目标物的动作轨迹确定操作指令后，可以将该操作指令发送给目标设备102，由目标设备102控制该应用的运行。同理，当该应用为主机游戏、该操作指令为游戏指令时，目标设备102可以在接收到终端101的游戏指令时，根据游戏指令控制该主机游戏在游戏主机模拟器里的运行。

图2是本发明实施例提供的一种控制应用运行的方法的流程图。基于终端和目标设备之间的交互，参见图2，该方法包括：

200、终端与目标设备建立连接，该目标设备用于运行应用。

本发明实施例中，目标设备上可以运行大型应用，如主机游戏。终端可以作为控制设备，向目标设备发送操作指令，使得目标设备可以根据该操作指令控制该应用运行。为了保证终端和目标设备之间能够进行数据传输，终端可以预先与目标设备之间建立通信连接。

在一种可能实现方式中，终端上安装有应用控制程序，如游戏控制程序。基于该应用控制程序，终端与目标设备建立连接的过程可以包括：终端在第一次启动该应用控制程序时，该应用控制程序可以提示建立终端与目标设备之间的连接，用户可以根据提示进行操作，触发终端与目标设备建立连接，例如，终端可以通过蓝牙或WiFi等与目标设备建立连接。本发明实施例对终端与目标设备建立连接的方式不做限定。

201、在目标应用的运行过程中，终端通过超声波发送器件每次同时发射多个超声波信号，该多个超声波信号的频率不同。

其中，超声波发送器件可以是终端的扬声器或专门配置的超声波发送器件。例如，终端的扬声器可以包括声音信号源、调制模块、增幅器和超声波致动器，扬声器发射超声波信号的过程可以包括：通过声音信号源输出声音信号，调制模块基于该声音信号生成调制信号，增幅器对该调制信号增幅，超声波致动器将增幅后的调制信号转换成超声波信号放射。当声音信号源输出不同频率的声音信号时，该多个频率的声音信号经过调制模块、增幅器处理后可以输入超声波致动器，从而实现不同频率的超声波信号的发射。

本发明实施例中，考虑到在应用的实际运行过程中，用户可以会做出相应动作，以触发终端根据该动作的动作轨迹，向目标设备发送对应的操作指令，从而控制应用的运行。为了准确的获取该动作轨迹，终端可以进行超声波信号的发射，进而基于这些超声波信号的反射信号来确定该动作轨迹。

针对超声波信号的发射，终端可以通过超声波发送器件同时发射不同频率的多个超声波信号，该多个超声波信号中每两个频率相邻的超声波信号的频率差相同。具体地，终端可以在预设频率范围内选取预设数量的频率作为该多个超声波信号的多个频率，例如，终端可以先在预设频率范围内选取一个频率，然后每隔预设频率差选取另一个频率，直至得到预设数量的多个频率。其中，该预设频率范围可以是17500Hz-23000Hz。

需要说明的是，终端可以通过超声波发送器件连续进行超声波信号的发射，每次发射均同时发射多个超声波信号，且该多个超声波信号具有不同频率。以N个不同频率为例，终端每次同时发射N个超声波信号，每个超声波信号具有一个频率，例如，终端第一次发射超声波信号1、超声波信号2、……、超声波信号N，第二次发射超声波信号1、超声波信号2、……、超声波信号N，……，第N次发射超声波信号1、超声波信号2、……、超声波信号N。其中，超声波信号1、超声波信号2、……、超声波信号N具有不同的频率。

本发明实施例中，终端可以基于多个超声波接收器件接收到的多个反射信号，确定目标物的动作轨迹。考虑到动作发生在一段时间内，在一种可能实现方式中，终端可以基于多个超声波接收器件在预设时间段内接收到的多个反射信号，确定目标物的动作轨迹，具体过程参见后续步骤202至步骤209。其中，终端可以先通过后续步骤202至步骤208确定目标物在预设时间段内的实时坐标，再根据实时坐标确定动作轨迹，参见后续步骤209。

202、终端通过多个超声波接收器件在预设时间段内接收到多个反射信号，该多个反射信号由超声波发送器件发射的多个超声波信号经由目标物的反射得到。

其中，目标物可以是用户身体的某一部分，如手。超声波接收器件可以是终端的麦克风或专门配置的超声波接收器件，针对超声波发送器件发射预设频率范围内的超声波信号，超声波接收器件可以采取预设采样频率来接收该超声波信号的反射信号，该预设采样频率可以大于预设频率范围中最大频率的2倍，以保证能够接收到频率处于该预设频率范围内的超声波信号的反射信号。以预设频率范围为17500HZ-23000HZ为例，该预设频率范围中最大频率为23000HZ，则超声波接收器件的采样频率可以为48000HZ。

本发明实施例中，在终端发射超声波信号的过程中，用户可以用手做动作，超声波信号在传播途中经由用户的手反射后就立即返回来，终端的超声波接收器件可以接收到超声波信号的反射信号。针对终端连续发射超声波信号，每次同时发射不同频率的多个超声波信号，终端可以在预设时间段内通过每个超声波接收器件接收到多个超声波信号。以其中一个超声波接收器件为例，终端在时间t₀接收到反射信号11(终端第一次发射的超声波信号1的反射信号)、反射信号12(终端第一次发射的超声波信号2的反射信号)、……、反射信号1N(终端第一次发射的超声波信号N的反射信号)，在时间t₁接收到反射信号21(终端第二次发射的超声波信号1的反射信号)、反射信号22(终端第二次发射的超声波信号2的反射信号)、……、反射信号2N(终端第二次发射的超声波信号N的反射信号)，……，在时间t_N接收到反射信号N1(终端第N次发射的超声波信号1的反射信号)、反射信号N2(终端第N次发射的超声波信号2的反射信号)、……、反射信号NN(终端第N次发射的超声波信号1的反射信号)。其中，反射信号11、反射信号21、……、反射信号N1、反射信号12、反射信号22、……、反射信号N2、……，反射信号1N、反射信号2N、……、反射信号NN即为终端通过该超声波接收器件在预设时间段内接收到的多个反射信号。其中，N为大于0的自然数。

其中，反射信号11、反射信号21、……、反射信号N1的频率相同，如均为频率f1；反射信号12、反射信号22、……、反射信号N2的频率相同，如均为频率f2；……；反射信号1N、反射信号2N、……、反射信号NN的频率相同，如均为频率fN。

203、对于每个超声波接收器件，终端根据预设时间段内该超声波接收器件接收到的多个反射信号的接收时间，将该预设时间段划分多个子时间段，每个子时间段为每两个具有相同频率且接收次序连续的反射信号的接收时间之间的时间段。

本发明实施例中，对于每个超声波接收器件，该超声波接收器件在预设时间段内接收到的多个反射信号中具有相同频率的反射信号，终端可以根据任一频率的所有反射信号中每两个接收次序连续的反射信号的接收时间，划分每个子时间段。针对步骤202中的举例，终端可以采取以下任一种方式划分每个子时间段：

方式1，对于频率f1，终端可以将反射信号11和反射信号21的接收时间之间的时间段t₀～t₁获取为第一个子时间段，将反射信号21和反射信号31的接收时间之间的时间段t₁～t₂获取为第二个子时间段，……，将反射信号(N-1)1和反射信号N1的接收时间之间的时间段t_N-1～t_N获取为第N个子时间段。

方式2，对于频率f2，终端可以将反射信号12和反射信号22的接收时间之间的时间段t₀～t₁获取为第一个子时间段，将反射信号22和反射信号32的接收时间之间的时间段t₁～t₂获取为第二个子时间段，……，将反射信号(N-1)2和反射信号N2的接收时间之间的时间段t_N-1～t_N获取为第N个子时间段。

……

方式N，对于频率fN，终端可以将反射信号1N和反射信号2N的接收时间之间的时间段t₀～t₁获取为第一个子时间段，将反射信号2N和反射信号3N的接收时间之间的时间段t₁～t₂获取为第二个子时间段，……，将反射信号(N-1)N和反射信号NN的接收时间之间的时间段t_N-1～t_N获取为第N个子时间段。

可见，终端可以根据任一频率的每两个接收次序连续的反射信号来实现子时间段的划分，如终端可以根据频率f1的每两个反射信号划分子时间段，即执行上述方式1，或，根据频率f2的每两个反射信号划分子时间段，即执行上述方式2，……，或，根据频率fN的每两个反射信号划分子时间段，即执行上述方式N。无论采取哪种方式，终端都可以将预设时间段划分第一个子时间段t₀～t₁、第二个子时间段t₁～t₂、……、第N个子时间段t_N-1～t_N。

204、对于每个子时间段，终端根据该每个子时间段内该超声波接收器件接收到的多个反射信号中具有相同频率且接收次序连续的每两个反射信号的相位差，确定该每两个反射信号的传播路径长度差值。

其中，传播路径长度为超声波信号从超声波发送器件发出经由目标物反射直至被超声波接收器件接收之间的传播路径长度，相应地，每个反射信号的传播路径长度为该反射信号对应的超声波信号从超声波发送器件发出经由目标物反射直至该反射信号被超声波接收器件接收之间的传播路径长度。由于终端在发送超声信号的过程中，目标物可能处于运动中，故一前一后接收到的两个发射信号的传播路径长度可能会由于目标物的运动而不同，因而存在传播路径长度差值。参见图3，提供了一种传播路径的示意图，当目标物处于位置A时，从超声波发送器件(如图3中的扬声器)发出的超声波信号经由位置A处的目标物反射后，超声波接收器件(如图3中的麦克风)可以接收到超声波信号的反射信号，该反射信号的传播路径长度为d1；当目标物处于位置B时，从扬声器发出的超声波信号经由位置B处的目标物反射后，麦克风可以接收到超声波信号的反射信号，该反射信号的传播路径长度为d2，则由于目标物从位置A移动到位置B导致的传播路径长度差值为d2-d1。本发明实施例中，对于每个子时间段，终端在该子时间段内接收到的多个反射信号中具有相同频率的反射信号。终端可以根据任一频率的两个反射信号的相位差，确定这两个反射信号的传播路径长度差值。针对步骤203中的举例，对于第一个子时间段t₀～t₁，终端在t₀～t₁内接收到频率同为f1且接收次序连续的反射信号11和反射信号21、频率同为f2且接收次序连续的反射信号12和反射信号22、……、频率同为fN且接收次序连续的反射信号1N和反射信号2N。

进而，终端可以根据频率为f1的反射信号11和反射信号21的相位差，确定反射信号11和反射信号21的传播路径长度差值D1；根据频率为f2的反射信号12和反射信号22的相位差，确定反射信号12和反射信号22的传播路径长度差值D2；……；根据频率为fN的反射信号1N和反射信号2N的相位差，确定反射信号1N和反射信号2N的传播路径长度差值DN。在一种可能实现方式中，终端可以利用第一预设算法，根据相位差计算传播路径长度差值。例如，该第一预设算法可以为相位差与传播路径长度差值之间的比例关系式。本发明实施例不对该第一预设算法的具体形式进行限定。

对于其他子时间段t₁～t₂、t₁～t₂、……、t_N-1～t_N中的任一个子时间段，终端可以通过上述相同的过程，确定该子时间段中具有相同频率且接收次序连续的每两个反射信号的传播路径长度差值。

205、终端将该每个子时间段内每两个反射信号的传播路径长度差值的平均值获取为该每个子时间段内该超声波接收器件对应的传播路径长度差值。

本发明实施例中，对于每个子时间段，终端可以根据该子时间段内具有相同频率且接收次序连续的每两个反射信号的传播路径长度差值，获取该子时间段内该超声波接收器件对应的传播路径长度差值。终端可以将该子时间段内该超声波接收器件对应的传播路径长度差值作为由于目标物在该子时间段内的移动而导致的传播路径长度差值。例如，在第i个子时间段的起点时刻，目标物处于位置A，超声波信号从超声波发送器件发出经由位置A处的目标物反射直至被该超声波接收器件接收之间的传播路径长度为第一长度，在第i个子时间段的终点时刻，目标物处于位置B，超声波信号从超声波发送器件发出经由位置B处的目标物反射直至被该超声波接收器件接收之间的传播路径长度为第二长度，则在第i个子时间段内由于目标物从位置A移动至位置B而导致的传播路径长度差值为第二长度与第一长度的差值，该差值即为第i个子时间段内该超声波接收器件对应的传播路径长度差值。其中，i可以为1、2、……、N中的任一个数值。

针对步骤204中的举例，对于第一个子时间段t₀～t₁，终端可以将D1、D2、……、DN的平均值P1获取为第一个子时间段内该超声波接收器件对应的传播路径长度差值。

对于其他子时间段t₁～t₂、t₁～t₂、……、t_N-1～t_N中的任一个子时间段，终端可以通过上述相同的过程，确定任一子时间段内该超声波接收器件对应的传播路径长度差值。

206、终端获取目标平均值，该目标平均值为该多个子时间段内该超声波接收器件对应的传播路径长度差值的平均值。

本发明实施例中，终端通过上述步骤204至步骤205获取多个子时间段内该超声波接收器件对应的传播路径长度差值后，可以对这些传播路径长度差值求平均值，得到目标平均值。终端可以将该目标平均值作为该超声波接收器件对应的初始传播路径长度，该初始传播路径长度是超声波信号从超声波发送器件发出第一次经由目标物反射直至被超声波接收器件接收之间的传播路径长度。例如，在预设时间段的起点时刻t₀，目标物处于位置C，超声波信号从超声波发送器件发出经由位置C处的目标物反射直至被该超声波接收器件接收之间的传播路径长度即为该超声波接收器件对应的初始传播路径长度。

需要说明的是，本发明实施例是以通过计算一段时间内多个传播路径长度差值的平均值来确定初始传播路径长度为例进行说明，实际上，终端也可以通过其他方式来确定该初始传播路径长度，例如，终端可以根据该预设时间段内第一次接收到的反射信号和该反射信号对应的超声波信号的相位差，确定该初始传播路径长度，本发明实施例对此不做限定。

207、终端根据该目标平均值和每个子时间段内该超声波接收器件对应的传播路径长度差值，确定每个目标时刻该超声波接收器件对应的传播路径长度，该每个目标时刻包括每个子时间段的起点时刻和终点时刻。

本发明实施例中，针对该目标平均值可以作为该超声波接收器件对应的初始传播路径长度，终端根据该目标平均值和每个子时间段内该超声波接收器件对应的传播路径长度差值，确定每个目标时刻该超声波接收器件对应的传播路径长度的过程可以包括：终端根据该目标平均值和第一个子时间段内该超声波接收器件对应的传播路径长度差值P1，确定第一个目标时刻(第一个子时间段的终点时刻或第二个子时间段的起点时刻)该超声波接收器件对应的传播路径长度d1，例如，该d1可以由P1加上目标平均值得到。进而，终端可以根据d1和第二个子时间段内该超声波接收器件对应的传播路径长度差值P2，确定第二个目标时刻(第二个子时间段的终点时刻或第三个子时间段的起点时刻)该超声波接收器件对应的传播路径长度d2，例如，该d2可以由d1加上P2得到。依此类推，终端可以确定每个目标时刻该超声波接收器件对应的传播路径长度。

上述步骤203至步骤207是对于每个超声波接收器件，终端基于该预设时间段内该超声波接收器件接收到的该多个反射信号，确定该超声波接收器件对应的传播路径长度的一种可能实现方式。

208、终端根据每个目标时刻该多个超声波接收器件对应的多个传播路径长度以及该多个超声波接收器件的相对位置，确定目标物在预设时间段内的实时坐标。

在一种可能实现方式中，终端确定目标物在预设时间段内的实时坐标的过程可以包括以下步骤a和b:

a、根据该多个超声波接收器件的相对位置，确定坐标系以及该坐标系中该多个超声波接收器件的坐标。

本发明实施例中，该多个超声波接收器件中的每个超声波接收器件可以对应一个维度，该多个超声波接收器件对应的多个维度可以构成坐标系，例如，该多个超声波接收器件的数量为三个，则终端可以构成一个三维坐标系。该三维坐标系的原点可以是终端的超声波发送器件所在位置，终端的三个超声波接收器件分别处在x轴、y轴和z轴的相应位置，例如，超声波接收器件1处于x轴、超声波接收器件2处于y轴、超声波接收器件3处于z轴。对于终端而言，超声波发送器件与每个超声波接收器件之间的距离是预设距离，如超声波发送器件与超声波接收器件1之间的距离为第一预设距离L1、超声波发送器件与超声波接收器件2之间的距离为第二预设距离L2、超声波发送器件与超声波接收器件3之间的距离为第三预设距离L3，则该超声波接收器件1的坐标可以为(L1，0，0)、该超声波接收器件2的坐标可以为(0，L2，0)、该超声波接收器件3的坐标可以为(0，0，L3)。

b、根据每个时刻该多个超声波接收器件对应的多个传播路径长度以及该多个超声波接收器件的坐标，确定该坐标系中该目标物在该预设时间段内的实时坐标。

在一种可能实现方式中，终端可以利用第二预设算法，根据每个目标时刻该多个超声波接收器件对应的多个传播路径长度以及该多个超声波接收器件的坐标，确定目标物在该预设时间段内的实时坐标。例如，该第二预设算法为目标物的实时坐标与该多个传播路径长度以及多个超声波接收器件的坐标之间的计算关系式。本发明实施例不对该第二预设算法的具体形式进行限定。

由于目标物位置的变化会导致传播路径长度发生变化，传播路径长度的变化会导致反射信号的相位差发生变化，因此这种通过超声波反射信号的相位差来计算传播路径长度差值，进而计算目标物实时坐标的方式准确率较高。另外，由于超声波信号的发射和发射信号的接收可以在应用的整个运行过程中持续进行，因而终端可以持续确定目标物的实时坐标，以便于准确得到目标物的动作轨迹。这种基于超声波实现定位的方式不仅精度高、而且时延低。

上述步骤203至步骤208是终端基于多个超声波接收器件在预设时间段内接收到的多个反射信号，确定该目标物在该预设时间段内的实时坐标的一种可能实现方式。

209、终端根据该目标物在该预设时间段内的实时坐标，确定目标物的动作轨迹。

本发明实施例中，终端可以将目标物在预设时间段内的实时坐标拟合成一条曲线，如抛物线、直线或三角函数曲线等，该曲线即为目标物在该预设时间段内的动作轨迹。例如，用户在玩奔跑类游戏时，如果想要到从道路中间移动到道路右边，则用户可以用手做出一个向右的移动动作，如将手向右划出一定距离，则手的动作轨迹可以为一条直线，如果中途有障碍物，需要跳过障碍物，则用户可以用手做出一个抛物线的跳跃动作，则手的动作轨迹可以为一条抛物线。

上述步骤203至步骤209是终端基于多个超声波接收器件接收到的多个反射信号，确定目标物的动作轨迹的一种可能实现方式。

210、终端根据该目标物的动作轨迹以及预设的动作轨迹与操作指令之间的对应关系，确定目标操作指令，该目标操作指令为该目标物的动作轨迹对应的操作指令。

其中，该目标操作指令用于控制目标设备当前正在前台运行的应用，例如，该应用为游戏，则该目标操作指令可以为控制该游戏运行的游戏指令。

本发明实施例中，终端可以预先设置有动作轨迹与操作指令之间的对应关系，这样终端在确定目标物在预设时间段内的动作轨迹时，可以查询该对应关系，将该动作轨迹对应的操作指令获取为该目标操作指令。其中，动作轨迹与操作指令之间的对应关系可以是终端出厂时的默认设置，也可以由用户在使用过程中自行设置，本发明实施例对此不做限定。

211、终端将该目标操作指令发送至目标设备。

本发明实施例中，用户想要控制的应用运行于目标设备上，该目标操作指令是针对该应用的操作指令，因此，终端在确定目标操作指令后，可以将该目标操作指令发送给目标设备，由目标设备通过后续步骤212控制应用的运行。

212、该目标设备根据该目标操作指令控制应用运行。

本发明实施例中，目标设备在接收到该目标操作指令时，可以执行该目标操作指令，从而控制应用运行，以实现用户想要达到的动作效果。以该应用为游戏、该目标操作指令为游戏指令为例，目标设备可以执行该游戏指令，以实现人物移动、跳跃等。如果该游戏为主机游戏，目标设备可以安装有游戏主机模拟器，使得目标设备可以根据目标操作指令，控制游戏在游戏主机模拟器中的运行。相比于相关技术中通过游戏手柄等游戏控制器来检测运动轨迹，进而由目标设备根据动作轨迹确定的游戏指令来控制游戏运行相比，本发明利用终端的超声波功能来控制游戏的运行，相比于游戏控制器内置加速度传感器产生的高功耗问题，终端发射超声波信号和接收超声波信号的功耗低，且具有超声波功能的终端可以是用户已有的常用终端，如手机，无需配备额外的游戏手柄等游戏控制器，成本低，而且游戏中的体验会更自然。

需要说明的是，上述步骤211至步骤212是终端根据目标操作指令，控制应用运行的一种可能实现方式。该方式是针对应用在目标设备上运行的情况，实际上，应用也可以在终端上运行。针对应用在终端上运行的情况，在终端显示该应用的运行界面的过程中，用户可以做出相应动作，终端在确定该动作的动作轨迹对应的目标操作指令后，可以执行该目标操作指令，从而控制应用运行。相比于相关技术中通过终端的摄像头来对用户进行视频监控，并基于视频分析技术分析视频中用户的动作，得到动作轨迹，进而根据动作轨迹确定操作指令来控制应用运行相比，本发明利用利用终端的超声波功能来控制应用的运行，相比于视频监控，终端发射超声波信号和接收超声波信号的功耗更低，而且终端发射的超声波的频率高于人说话声音的声波频率，因而超声波的发射和接收不会受到外部声音的影响。

本发明实施例提供的方法，通过超声波发送器件发射多个频率的超声波信号，通过多个超声波接收器件来接收这些超声波信号的反射信号，由于这些反射信号是经由目标物反射得到，因此目标物的动作会导致反射信号的不同，基于这些反射信号，可以得到目标物的动作轨迹。由于终端预先存储有动作轨迹与操作指令之间的对应关系，因而终端根据该对应关系，可以获取当前确定的动作轨迹所对应的目标操作指令，进而根据该目标操作指令控制应用的运行。上述技术方案利用终端的超声波功能来控制应用的运行，终端发射超声波信号和接收超声波信号的功耗低，且具有超声波功能的终端可以是用户已有的常用终端，无需配备额外的设备，成本低。

另外，上述技术方案应用在主机游戏场景时，终端本身可以是安装有游戏主机模拟器的PC，这样终端在控制应用运行的过程中，既无需游戏手柄等游戏控制器，也无需用于运行该应用的目标设备，大大节省了玩游戏的成本。

当然，终端本身也可以是具有超声波功能的手机等常用终端，这样只需要在该终端上安装实现上述技术方案的游戏控制程序，即可通过该终端来替代游戏手柄等游戏控制器，并结合目标设备实现对主机游戏的控制，这样可以节省玩游戏的成本。

图4是本发明实施例提供的一种控制应用运行的装置的结构示意图。参照图4，该装置包括：

确定模块401，用于基于多个超声波接收器件接收到的多个反射信号，确定目标物的动作轨迹，该多个反射信号由超声波发送器件发射的多个超声波信号经由该目标物的反射得到，该多个超声波信号的频率不同；

该确定模块401，还用于根据该目标物的动作轨迹以及预设的动作轨迹与操作指令之间的对应关系，确定目标操作指令，该目标操作指令为该目标物的动作轨迹对应的操作指令；

控制模块402，用于根据该目标操作指令，控制应用的运行。

可选地，该控制模块402用于将该目标操作指令发送至目标设备，由该目标设备根据该目标操作指令控制应用运行将该目标操作指令发送至目标设备，由该目标设备根据该目标操作指令控制该应用的运行。

可选地，该确定模块401用于基于多个超声波接收器件在预设时间段内接收到的多个反射信号，确定该目标物在该预设时间段内的实时坐标；根据该目标物在该预设时间段内的实时坐标，确定该动作轨迹。

可选地，该确定模块401用于对于每个超声波接收器件，基于该预设时间段内该超声波接收器件接收到的该多个反射信号，确定该超声波接收器件对应的传播路径长度，该传播路径长度为超声波信号从超声波发送器件发出经由该目标物反射直至被该超声波接收器件接收之间的传播路径长度；根据该多个超声波接收器件对应的多个传播路径长度以及该多个超声波接收器件的相对位置，确定该目标物在该预设时间段内的实时坐标。

可选地，该确定模块401用于将该预设时间段划分多个子时间段，每个子时间段为每两个具有相同频率且接收次序连续的反射信号的接收时间之间的时间段；对于每个子时间段，根据该每个子时间段内该超声波接收器件接收到的多个反射信号中具有相同频率且接收次序连续的每两个反射信号的相位差，确定该每两个反射信号的传播路径长度差值；将该每个子时间段内每两个反射信号的传播路径长度差值的平均值获取为该每个子时间段内该超声波接收器件对应的传播路径长度差值；获取目标平均值，该目标平均值为该多个子时间段内该超声波接收器件对应的传播路径长度差值的平均值；根据该目标平均值和该每个子时间段内该超声波接收器件对应的传播路径长度差值，确定每个目标时刻该超声波接收器件对应的传播路径长度，该每个目标时刻包括每个子时间段的起点时刻和终点时刻。

可选地，该确定模块401用于根据该多个超声波接收器件的相对位置，确定坐标系以及该坐标系中该多个超声波接收器件的坐标；根据该多个超声波接收器件对应的多个传播路径长度以及该多个超声波接收器件的坐标，确定该坐标系中该目标物在该预设时间段内的实时坐标。

可选地，该多个超声波信号中每两个频率相邻的超声波信号的频率差相同。

本发明实施例中，通过超声波发送器件发射多个频率的超声波信号，通过多个超声波接收器件来接收这些超声波信号的反射信号，由于这些反射信号是经由目标物反射得到，因此目标物的动作会导致反射信号的不同，基于这些反射信号，可以得到目标物的动作轨迹。由于终端预先存储有动作轨迹与操作指令之间的对应关系，因而终端根据该对应关系，可以获取当前确定的动作轨迹所对应的目标操作指令，进而根据该目标操作指令控制应用的运行。上述技术方案利用终端的超声波功能来控制应用的运行，终端发射超声波信号和接收超声波信号的功耗低，且具有超声波功能的终端可以是用户已有的常用终端，无需配备额外的设备，成本低。

需要说明的是：上述实施例提供的控制应用运行的装置在控制应用运行时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的控制应用运行的装置与控制应用运行的方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。

本发明实施例提供了一种终端，该终端可以用于执行上述各个实施例中提供的控制应用运行的方法。参见图5，图5是本发明实施例提供的一种终端500的结构示意图，该终端500包括：

终端500可以包括RF(Radio Frequency，射频)电路110、包括有一个或一个以上计算机可读存储介质的存储器120、输入单元130、显示单元140、传感器150、音频电路160、WiFi(Wireless Fidelity，无线保真)模块170、包括有一个或者一个以上处理核心的处理器180、以及电源190等部件。本领域技术人员可以理解，图5中示出的终端结构并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：

RF电路110可用于收发信息或通话过程中，信号的接收和发送，特别地，将基站的下行信息接收后，交由一个或者一个以上处理器180处理；另外，将涉及上行的数据发送给基站。通常，RF电路110包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM)卡、收发信机、耦合器、LNA(Low Noise Amplifier，低噪声放大器)、双工器等。此外，RF电路110还可以通过无线通信与网络和其他设备通信。该无线通信可以使用任一通信标准或协议，包括但不限于GSM(Global System of Mobile communication，全球移动通讯系统)、GPRS(General Packet Radio Service，通用分组无线服务)、CDMA(CodeDivision Multiple Access，码分多址)、WCDMA(Wideband Code Division MultipleAccess,宽带码分多址)、LTE(Long Term Evolution,长期演进)、电子邮件、SMS(ShortMessaging Service，短消息服务)等。

存储器120可用于存储软件程序以及模块，处理器180通过运行存储在存储器120的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器120可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据终端500的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器120可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器120还可以包括存储器控制器，以提供处理器180和输入单元130对存储器120的访问。

输入单元130可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地，输入单元130可包括触敏表面131以及其他输入设备132。触敏表面131，也称为触摸显示屏或者触控板，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面131上或在触敏表面131附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触敏表面131可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器180，并能接收处理器180发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面131。除了触敏表面131，输入单元130还可以包括其他输入设备132。具体地，其他输入设备132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

显示单元140可用于显示由用户输入的信息或提供给用户的信息以及终端500的各种图形用户接口，这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元140可包括显示面板141，可选的，可以采用LCD(Liquid Crystal Display，液晶显示器)、OLED(Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示面板141。进一步的，触敏表面131可覆盖显示面板141，当触敏表面131检测到在其上或附近的触摸操作后，传送给处理器180以确定触摸事件的类型，随后处理器180根据触摸事件的类型在显示面板141上提供相应的视觉输出。虽然在图5中，触敏表面131与显示面板141是作为两个独立的部件来实现输入和输入功能，但是在某些实施例中，可以将触敏表面131与显示面板141集成而实现输入和输出功能。

终端500还可包括至少一种传感器150，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板141的亮度，接近传感器可在终端500移动到耳边时，关闭显示面板141和/或背光。作为运动传感器的一种，重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于终端500还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。

音频电路160、扬声器161，传声器162可提供用户与终端500之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号，传输到扬声器161，由扬声器161转换为声音信号输出；另一方面，传声器162将收集的声音信号转换为电信号，由音频电路160接收后转换为音频数据，再将音频数据输出处理器180处理后，经RF电路110以发送给比如另一终端，或者将音频数据输出至存储器120以便进一步处理。音频电路160还可能包括耳塞插孔，以提供外设耳机与终端500的通信。

WiFi属于短距离无线传输技术，终端500通过WiFi模块170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图5示出了WiFi模块170，但是可以理解的是，其并不属于终端500的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。

处理器180是终端500的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器120内的软件程序和/或模块，以及调用存储在存储器120内的数据，执行终端500的各种功能和处理数据，从而对手机进行整体监控。可选的，处理器180可包括一个或多个处理核心；优选的，处理器180可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器180中。

终端500还包括给各个部件供电的电源190(比如电池)，优选的，电源可以通过电源管理系统与处理器180逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源190还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。

尽管未示出，终端500还可以包括摄像头、蓝牙模块等，在此不再赘述。具体在本实施例中，终端的显示单元是触摸屏显示器，终端还包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器中，且经配置以由一个或者一个以上处理器执行。该一个或者一个以上程序包含用于执行上述图2所示实施实例中终端侧操作的指令。

在示例性实施例中，还提供了一种计算机可读存储介质，例如包括至少一条指令、至少一段程序、代码集或指令集的存储器，上述至少一条指令、至少一段程序、代码集或指令集可由处理器加载并执行以完成上述图2所示实施例中终端侧执行的控制应用运行的方法。例如，计算机可读存储介质可以是只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random-Access Memory，RAM)、只读光盘(Compact Disc Read-Only Memory，CD-ROM)、磁带、软盘和光数据存储设备等。

本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，该程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。

以上仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (15)

1.一种控制应用运行的方法，其特征在于，应用于终端，所述方法包括：

基于多个超声波接收器件接收到的多个反射信号，确定目标物的动作轨迹，所述多个反射信号由超声波发送器件发射的多个超声波信号经由所述目标物的反射得到，所述多个超声波信号的频率不同；

根据所述目标物的动作轨迹以及预设的动作轨迹与操作指令之间的对应关系，确定目标操作指令，所述目标操作指令为所述目标物的动作轨迹对应的操作指令；

根据所述目标操作指令，控制应用的运行。

2.根据权利要求1所述的方法，其特征在于，所述基于多个超声波接收器件接收到的多个反射信号，确定目标物的动作轨迹，包括：

基于多个超声波接收器件在预设时间段内接收到的多个反射信号，确定所述目标物在所述预设时间段内的实时坐标；

根据所述目标物在所述预设时间段内的实时坐标，确定所述动作轨迹。

3.根据权利要求2所述的方法，其特征在于，所述基于多个超声波接收器件在预设时间段内接收到的多个反射信号，确定所述目标物在所述预设时间段内的实时坐标包括：

对于每个超声波接收器件，基于所述预设时间段内所述超声波接收器件接收到的多个反射信号，确定所述超声波接收器件对应的传播路径长度，所述传播路径长度为超声波信号从所述超声波发送器件发出经由所述目标物反射直至被所述超声波接收器件接收之间的传播路径长度；

根据所述多个超声波接收器件对应的多个传播路径长度以及所述多个超声波接收器件的相对位置，确定所述目标物在所述预设时间段内的实时坐标。

4.根据权利要求3所述的方法，其特征在于，所述基于所述预设时间段内所述超声波接收器件接收到的多个反射信号，确定所述超声波接收器件对应的传播路径长度，包括：

将所述预设时间段划分多个子时间段，每个子时间段为每两个具有相同频率且接收次序连续的反射信号的接收时间之间的时间段；

对于每个子时间段，根据所述每个子时间段内所述超声波接收器件接收到的多个反射信号中具有相同频率且接收次序连续的每两个反射信号的相位差，确定所述每两个反射信号的传播路径长度差值；

将所述每个子时间段内每两个反射信号的传播路径长度差值的平均值获取为所述每个子时间段内所述超声波接收器件对应的传播路径长度差值；

获取目标平均值，所述目标平均值为所述多个子时间段内所述超声波接收器件对应的传播路径长度差值的平均值；

根据所述目标平均值和所述每个子时间段内所述超声波接收器件对应的传播路径长度差值，确定每个目标时刻所述超声波接收器件对应的传播路径长度，所述每个目标时刻包括每个子时间段的起点时刻和终点时刻。

5.根据权利要求3所述的方法，其特征在于，所述根据所述多个超声波接收器件对应的多个传播路径长度以及所述多个超声波接收器件的相对位置，确定所述目标物在所述预设时间段内的实时坐标，包括：

根据所述多个超声波接收器件的相对位置，确定坐标系以及所述坐标系中所述多个超声波接收器件的坐标；

根据所述多个超声波接收器件对应的多个传播路径长度以及所述多个超声波接收器件的坐标，确定所述坐标系中所述目标物在所述预设时间段内的实时坐标。

6.根据权利要求1所述的方法，其特征在于，所述根据所述目标操作指令，控制应用的运行，包括：

将所述目标操作指令发送至目标设备，由所述目标设备根据所述目标操作指令控制所述应用运行。

7.根据权利要求1所述的方法，其特征在于，所述多个超声波信号中每两个频率相邻的超声波信号的频率差相同。

8.一种控制应用运行的装置，其特征在于，所述装置包括：

确定模块，用于基于多个超声波接收器件接收到的多个反射信号，确定目标物的动作轨迹，所述多个反射信号由超声波发送器件发射的多个超声波信号经由所述目标物的反射得到，所述多个超声波信号的频率不同；

所述确定模块，还用于根据所述目标物的动作轨迹以及预设的动作轨迹与操作指令之间的对应关系，确定目标操作指令，所述目标操作指令为所述目标物的动作轨迹对应的操作指令；

控制模块，用于根据所述目标操作指令，控制应用的运行。

9.根据权利要求8所述的装置，其特征在于，所述确定模块用于基于多个超声波接收器件在预设时间段内接收到的多个反射信号，确定所述目标物在所述预设时间段内的实时坐标；根据所述目标物在所述预设时间段内的实时坐标，确定所述动作轨迹。

10.根据权利要求9所述的装置，其特征在于，所述确定模块用于对于每个超声波接收器件，基于所述预设时间段内所述超声波接收器件接收到的所述多个反射信号，确定所述超声波接收器件对应的传播路径长度，所述传播路径长度为超声波信号从超声波发送器件发出经由所述目标物反射直至被所述超声波接收器件接收之间的传播路径长度；根据所述多个超声波接收器件对应的多个传播路径长度以及所述多个超声波接收器件的相对位置，确定所述目标物在所述预设时间段内的实时坐标。

11.根据权利要求10所述的装置，其特征在于，所述确定模块用于将所述预设时间段划分多个子时间段，每个子时间段为每两个具有相同频率且接收次序连续的反射信号的接收时间之间的时间段；对于每个子时间段，根据所述每个子时间段内所述超声波接收器件接收到的多个反射信号中具有相同频率且接收次序连续的每两个反射信号的相位差，确定所述每两个反射信号的传播路径长度差值；将所述每个子时间段内每两个反射信号的传播路径长度差值的平均值获取为所述每个子时间段内所述超声波接收器件对应的传播路径长度差值；获取目标平均值，所述目标平均值为所述多个子时间段内所述超声波接收器件对应的传播路径长度差值的平均值；根据所述目标平均值和所述每个子时间段内所述超声波接收器件对应的传播路径长度差值，确定每个目标时刻所述超声波接收器件对应的传播路径长度，所述每个目标时刻包括每个子时间段的起点时刻和终点时刻。

12.根据权利要求10所述的装置，其特征在于，所述确定模块用于根据所述多个超声波接收器件的相对位置，确定坐标系以及所述坐标系中所述多个超声波接收器件的坐标；根据所述多个超声波接收器件对应的多个传播路径长度以及所述多个超声波接收器件的坐标，确定所述坐标系中所述目标物在所述预设时间段内的实时坐标。

13.根据权利要求8所述的装置，其特征在于，所述控制模块，用于将所述目标操作指令发送至目标设备，由所述目标设备根据所述目标操作指令控制应用运行将所述目标操作指令发送至目标设备，由所述目标设备根据所述目标操作指令控制所述应用运行。

14.一种终端，其特征在于，所述终端包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、至少一段程序、代码集或指令集由所述处理器加载并执行以实现如权利要求1至7任一项所述的控制应用运行的方法。

15.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现如权利要求1至7任一项所述的控制应用运行的方法。