CN115079822A - 隔空手势交互方法、装置、电子芯片及电子设备 - Google Patents

Abstract

本申请实施例提供了一种隔空手势交互方法、装置、电子芯片及电子设备，该方法包括：获取电子设备当前的第一使用场景；确定获取的所述第一使用场景是否支持隔空手势功能，若是控制所述电子设备的隔空手势功能处于开启状态，否则控制所述电子设备的隔空手势功能处于关闭状态；其中，所述电子设备的隔空手势采集模块在所述隔空手势功能处于开启状态、且隔空手势采集范围内存在有隔空手势的情况下，执行隔空手势采集操作，以及在所述隔空手势功能处于关闭状态的情况下，不执行隔空手势采集操作。本申请实施例可以降低电子设备支持隔空手势功能带来的功耗，提升用户体验。

Description

隔空手势交互方法、装置、电子芯片及电子设备

技术领域

本申请涉及终端领域，尤其是涉及一种隔空手势交互方法、装置、电子芯片及电子设备。

背景技术

目前，电子设备可以支持非接触式的隔空手势交互技术。隔空手势交互技术可以在用户与电子设备或其外部交互设备不方便接触的使用场景下，进行人机交互，提高用户的使用体验。目前，用户可以按需开启电子设备的隔空手势功能。

然而，隔空手势功能开启后，电子设备需要实时采集并处理隔空手势数据，使得电子设备的功耗会随之增加，功耗增加会影响电子设备的散热、零部件的使用寿命、计算资源等。基于此，亟需一种解决方案，以降低电子设备支持隔空手势功能带来的功耗。

发明内容

本申请提供了一种隔空手势交互方法、装置、电子芯片及电子设备，可以降低电子设备支持隔空手势功能带来的功耗，提升用户体验。

本申请具体发明内容如下：

第一方面，本申请提供一种隔空手势交互方法，该方法包括：获取电子设备当前的第一使用场景；确定获取的所述第一使用场景是否支持隔空手势功能；在确定出所述第一使用场景支持隔空手势功能的情况下，控制所述电子设备的隔空手势功能处于开启状态；在确定出所述第一使用场景不支持隔空手势功能的情况下，控制所述电子设备的隔空手势功能处于关闭状态；其中，所述电子设备的隔空手势采集模块在所述隔空手势功能处于开启状态、且隔空手势采集范围内存在有隔空手势的情况下，执行隔空手势采集操作，以及在所述隔空手势功能处于关闭状态的情况下，不执行隔空手势采集操作。

需要说明的是，控制隔空手势功能处于开启/关闭状态的实现方式可以为：执行开启/关闭隔空手势功能的操作；或者在隔空手势功能的当前状态与待控制的状态相同的情况下，不执行任何操作，使得隔空手势功能维持开启/关闭。

其中，对于开启/关闭隔空手势功能的操作的执行，可以为在隔空手势功能的当前状态与待控制的状态不同的情况下，执行开启/关闭隔空手势功能的操作，也可以为无论隔空手势功能的当前状态与待控制的状态是否相同，直接执行开启/关闭隔空手势功能的操作。

可选地，所述方法还包括：监测所述电子设备是否存在使用场景切换情况；在监测到所述使用场景切换情况时，执行所述获取电子设备当前的第一使用场景的步骤。

可选地，在控制所述电子设备的隔空手势功能处于开启状态之前，所述方法还包括：确定所述电子设备的隔空手势功能是否处于关闭状态；在确定出所述电子设备的隔空手势功能处于关闭状态的情况下，执行控制所述电子设备的隔空手势功能处于开启状态的步骤；

在控制所述电子设备的隔空手势功能处于关闭状态之前，所述方法还包括：确定所述电子设备的隔空手势功能是否处于开启状态；在确定出所述电子设备的隔空手势功能处于开启状态的情况下，执行控制所述电子设备的隔空手势功能处于关闭状态的步骤。

可选地，所述获取电子设备当前的第一使用场景，包括：根据预先设置好的场景应用绑定表，确定与所述电子设备当前使用的第一应用相对应的使用场景，其中，所述场景应用绑定表中设置有场景和应用间的对应关系；以确定的使用场景作为所述电子设备当前的第一使用场景。

可选地，所述场景应用绑定表中设置有场景和应用的信息间的对应关系；所述应用的信息包括：进程名称、分类信息、状态信息中的一种或多种。

可选地，所述场景应用绑定表中设置有场景和应用的信息间的对应关系；

所述方法还包括：获取所述电子设备当前使用的第一应用的第一信息；根据所述第一信息，执行所述确定与所述电子设备当前使用的第一应用相对应的使用场景的步骤。

可选地，所述获取所述电子设备当前使用的第一应用的第一信息，包括：根据预先设置好的用于识别应用的探针，识别出所述电子设备当前使用的第一应用的第一信息。

可选地，所述用于识别应用的探针包括应用切换探针、音频流探针、视频流探针、GPU探针中的一种或多种。

可选地，所述应用切换探针包括进程创建退出探针、焦点变化探针、最小化探针中的一种或多种。

可选地，所述确定获取的所述第一使用场景是否支持隔空手势功能，包括：确定获取的所述第一使用场景是否在预先设置好的支持隔空手势功能的场景列表中；其中，所述第一使用场景在所述场景列表中视为所述第一使用场景支持隔空手势功能。

可选地，在所述隔空手势采集模块执行隔空手势采集操作之后，所述方法还包括：根据经所述隔空手势采集操作采集到的手势数据，获得第一手势类型；根据预先设置好的场景手势绑定表中的、对应所述第一使用场景的第一手势设置信息，确定对应所述第一手势类型的第一控制指令，其中，所述场景手势绑定表中设置有场景和手势设置信息间的对应关系；执行所述第一控制指令。

可选地，所述方法还包括：确定所述第一手势设置信息是否包括所述第一手势类型；在所述第一手势设置信息包括所述第一手势类型的情况下，执行所述确定对应所述第一手势类型的第一控制指令的步骤。

可选地，在所述在确定出所述第一使用场景支持隔空手势功能的情况下，控制所述电子设备的隔空手势功能处于开启状态之后，所述方法还包括：确定所述第一使用场景是否退出；在确定出所述第一使用场景退出的情况下，控制所述电子设备的隔空手势功能处于关闭状态。

可选地，所述方法还包括：在确定出所述第一使用场景不支持隔空手势功能的情况下，控制所述电子设备的隔空手势采集模块处于关闭状态。

可选地，所述方法还包括：响应于用于控制所述电子设备进入休眠状态的操作或指令，控制所述电子设备的隔空手势功能处于关闭状态。

可选地，所述方法还包括：响应于所述隔空手势功能的开关状态变化，执行对应所述开关状态变化的提醒操作。

第二方面，本申请提供一种隔空手势交互装置，包括：获取模块，用于获取电子设备当前的第一使用场景；确定模块，用于确定获取的所述第一使用场景是否支持隔空手势功能；控制模块，用于在确定出所述第一使用场景支持隔空手势功能的情况下，控制所述电子设备的隔空手势功能处于开启状态；在确定出所述第一使用场景不支持隔空手势功能的情况下，控制所述电子设备的隔空手势功能处于关闭状态；其中，所述电子设备的隔空手势采集模块在所述隔空手势功能处于开启状态、且隔空手势采集范围内存在有隔空手势的情况下，执行隔空手势采集操作，以及在所述隔空手势功能处于关闭状态的情况下，不执行隔空手势采集操作。

第三方面，本申请提供一种电子芯片，包括：处理器，其用于执行存储在存储器上的计算机程序指令，其中，当所述计算机程序指令被所述处理器执行时，触发所述电子芯片执行本申请第一方面中任一项所述的方法。

第四方面，本申请提供一种电子设备，所述电子设备包括用于存储计算机程序指令的存储器、用于执行计算机程序指令的处理器和通信装置，其中，当所述计算机程序指令被该处理器执行时，触发所述电子设备执行本申请第一方面中任一项所述的方法。

第五方面，本申请提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，当其在计算机上运行时，使得计算机执行本申请第一方面中任一项所述的方法。

第六方面，本申请提供一种计算机程序产品，所述计算机程序产品包括计算机程序，当所述计算机程序在计算机上运行时，使得所述计算机执行本申请第一方面中任一项所述的方法。

本申请可以降低电子设备支持隔空手势功能带来的功耗，提升用户体验。

附图说明

为了更清楚的说明本发明实例中的技术方案，下面将对实施例描述中所需要使用的附图作简单的介绍。

图1是本申请实施例提供的一种应用场景示意图；

图2是本申请实施例提供的一种应用的窗口的示意图；

图3是本申请实施例提供的一种用户使用隔空手势功能的示意图；

图4是本申请实施例提供的一种应用界面被切换时的示意图；

图5是本申请实施例提供的一种电子设备的结构示意图；

图6是本申请实施例提供的一种隔空手势交互方法的流程示意图；

图7是本申请实施例提供的另一种隔空手势交互方法的流程示意图；

图8是本申请实施例提供的一种场景识别流的示意图；

图9是本申请实施例提供的一种场景识别的流程示意图；

图10是本申请实施例提供的自适应使用隔空手势功能的流程示意图；

图11是本申请实施例提供的另一种应用场景示意图；

图12是本申请实施例提供的又一种应用场景示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本文中术语“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。

本申请中的术语“第一”、“第二”等，仅用于区别不同的对象，而不是用于描述对象的特定顺序，也不应理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本实施例的描述中，除非另有说明，“多个”的含义是两个或两个以上。

在本申请实施例中，“示例性的”或者“例如”等词，用于表示例子、例证或说明。在本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应解释为比其他实施例或设计方案更优选或更具优势。确切而言，使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。

在对本申请实施例的技术方案说明之前，首先结合附图对本申请实施例的应用场景进行说明。

隔空手势功能在消费电子如PC产品上，有较好的使用场景和用户体验。以在PC产品上使用隔空手势功能为例，该使用场景可以为用户双手不方便操作键盘鼠标时的文档演示、观看视频、音乐播放、照片浏览等场景。

参见图1，图1为本申请实施例提供的一种应用场景示意图，该场景示意图包括电子设备100以及用户，在用户不方便接触电子设备100或外部控制设备的情况下，例如用户手上有水、油，或者其他污液、污渍，或者用户与电子设备100距离较远等，用户可以使用隔空手势与电子设备100进行交互，提高用户的使用体验。

电子设备100可以包括显示器件，或者电子设备100可以与显示器件分立，电子设备100可以通过有线或无线的方式将图像信号传输至显示器件上。

上述图1的应用场景中，电子设备100的显示器件可以具备触控功能，用户可以通过触摸显示器件与电子设备100进行交互。或者，电子设备100与外部控制设备连接，用户可以通过接触外部控制设备与电子设备100实现交互。外部控制设备可以是鼠标、键盘、手写笔、触摸板(TouchPad)等可以将用户实施的操作指令传输至电子设备100的设备。

隔空手势可以是指用户手部不与电子设备100或外部控制设备接触，且用户的手与电子设备100之间的距离大于或者等于预设距离阈值(例如1cm)时的手势操作。

电子设备100可以利用摄像头(例如飞行时间(Time of Fly,TOF)摄像头)、雷达传感器(例如可以设置在电子设备100显示屏的下方，可以是毫米波雷达)、红外传感器(例如可以设置在电子设备100显示屏的下方)、超声波传感器(例如可以设置在电子设备100显示屏的下方)等检测部件，采集用户的手部形状、运动情况等信息，以检测隔空手势。

该隔空手势可以包括但不限于静态手势和动态手势。其中，静态手势指某一时刻手部的姿态，比如手指弯曲、收拢等，如OK手势、V手势、五指伸开的手势等。动态手势指一段时间内手部的运动情况，包括运动方向、速度、手部姿态变化等，如挥动手势、平移手势、握拳手势、按压手势、翻转手势等。

本申请实施例所涉及的电子设备100可以是个人计算机(Personal Computer,PC)、平板电脑、可穿戴设备、智能电视、车载终端、增强现实(Augmented Reality,AR)/虚拟现实(Virtual Reality,VR)设备等。PC可以是笔记本、台式机等。

电子设备100可以安装有多个应用(Application,APP)，每个应用的应用界面对应显示在电子设备100的显示界面上。

以电子设备100为PC为例，每个应用界面可以以窗口的形式显示在电子设备100的显示界面上，即电子设备100显示界面的窗口内显示应用界面。示例性的，电子设备100的显示界面可以显示一个窗口，或者同时显示多个窗口。此外，每个应用可以对应一个或多个应用界面，例如Microsoft Office Word

应用，可以打开多个窗口。

参见图2，窗口可以包括：标题栏，以及多个控件。标题栏可以显示所对应的应用的名称，或者文件名称。窗口的控件可以用于管理窗口，可以包括“最小化”、“最大化”、“关闭”以及“向下还原”。“最小化”控件用于将窗口隐藏，“最大化”控件用于全屏显示该窗口内的应用界面，“关闭”控件用于关闭窗口以及窗口所对应的应用，“向下还原”控件用于在窗口全屏显示的情况下，使得窗口占用电子设备100的部分显示界面。

应用界面可以包括多个显示元素。以视频播放应用为例，视频播放应用的应用界面包括图像、目标控件。多个控件可以响应于用户的隔空手势执行相应的指示。例如视频应用可以包括“暂停”控件，电子设备100可以响应用户单击的隔空手势，在应用界面上暂停播放视频。

应用可以是音频播放应用、视频播放应用、文字编辑应用、文稿演示应用、图片/文件查看应用、浏览器应用、导航应用、直播应用、摄像应用等。比如，音频播放应用可以是网易云音乐

，视频播放应用可以是Windows Media Player

，文字编辑应用可以是Microsoft Office Word

。

示例性的，用户可以使用隔空手势向电子设备100传输指令，电子设备100采集该隔空手势的相关数据，之后根据该相关数据识别隔空手势，获取该隔空手势对应的指令，然后执行该指令。以视频播放应用为例，用户使用隔空手势传输调小音量的指令，电子设备100识别该隔空手势，获取调小音量的指示，调小音量。又例如，用户使用隔空手势传输暂停播放的指令，电子设备100识别该隔空手势，获取暂停播放的指令，相应地在视频播放应用对应的应用界面上暂停视频播放。

为便于理解本申请实施例提供的解决方案所做出的改进，先对已有的相关技术方案进行简单阐述。以电子设备100为PC为例，电子设备100需要用户主动打开(通常为手动打开)隔空手势功能，开启隔空手势功能之后，电子设备100可以利用其部署的TOF传感器、摄像头、雷达传感器、超声波传感器等检测部件采集隔空手势的相关数据，之后对采集的相关数据进行处理，以识别该隔空手势，以及获取该隔空手势所对应的指令。

然而，发明人在研究过程中发现，该相关技术方案中，在打开隔空手势功能之后，电子设备100实时采集、识别隔空手势，因此电子设备100整机的功耗随之增加。然而，除去特定的支持隔空手势的使用场景外，其他大部分的使用场景下是不需要该隔空手势功能的，如此该功能的使用不仅增加功耗，如增加了整机耗电，而且浪费电子设备100的数据处理能力。

此外，还存在应用程序的冲突问题，这是因为考虑到有的应用程序不需要开启隔空手势功能，而如果一直开启隔空手势功能，用户不经意造成的其他的手势，也可能会执行，这样就会有冲突。

鉴于此，本申请实施例提出一种解决方案，可以解决上述隔空手势功能开启后面临的功耗增加和浪费电子设备100的算力问题。

下面以电子设备100为PC为例，结合几个应用场景示例，对本申请实施例提供的技术方案进行初步介绍。

应用场景示例1：

在用户打开应用时，电子设备100根据用户打开的应用的相关信息，比如应用的名称，以此确定当前的使用场景是否为支持隔空手势功能的场景，若当前的使用场景为支持隔空手势功能的场景，电子设备100自动打开隔空手势功能，或者自动启动隔空手势交互流程，此时用户可以直接使用隔空手势与电子设备100进行交互，可以实现无感开启隔空手势功能，减少用户主动打开隔空手势功能的操作，提升便捷度。

示例性的，参见图3，用户此时打开的应用为视频播放类应用，而视频播放类应用所对应的使用场景支持隔空手势功能，此时电子设备100自动启动隔空手势交互流程，用户可以向左挥动手或手指，电子设备100通过传感器采集当前用户的隔空手势，之后识别该隔空手势所对应的指令为快退，执行视频快退的指令，此时电子设备100的界面I1上播放的视频快退，以完成与用户的隔空手势交互。

另一方面，若当前的使用场景不支持隔空手势功能，电子设备100可以不打开隔空手势功能。比如，用户当前打开的应用为游戏应用，电子设备100不打开隔空手势功能，或者不进入隔空手势交互流程，或者关闭隔空手势交互流程。

由此，电子设备100可以根据当前的使用场景，有选择地打开隔空手势功能，或者有选择地进入隔空手势交互流程，比如在不需要支持隔空手势功能的使用场景下，电子设备100关闭隔空手势功能，以降低功耗和避免增加计算开销。

可以理解，电子设备100关闭隔空手势功能，或者不进入隔空手势交互流程可以是指电子设备100可以不采集隔空手势相关的数据，或者电子设备100可以不对隔空手势的相关数据进行识别。

示例性的，电子设备100可以不采集隔空手势相关的数据可以是关闭摄像头、雷达传感器、红外传感器、超声波传感器等检测部件，以降低功耗，以及避免电子设备100因识别隔空手势而增加计算开销。

应用场景示例2：

在用户打开的应用所对应的使用场景为支持隔空手势功能的场景，且电子设备100已经打开隔空手势功能，或者进入隔空手势交互流程之后，电子设备100可以根据应用的状态变化而按需自动关闭隔空手势功能。

例如，电子设备100打开的应用所对应的窗口最小化，或者将用户当前使用的应用界面切换到其他应用所对应的应用界面，且切换之后所对应的使用场景不支持隔空手势功能，则电子设备100可以关闭隔空手势功能，以降低功耗和避免增加计算开销。

示例性的，参见图4中的界面I2，若电子设备100当前的窗口所对应的视频类播放应用界面切换到计算器应用所对应的应用界面，则电子设备100自动退出隔空手势交互流程。

若用户将应用界面切换回此前支持隔空手势功能所对应的应用界面的窗口，或者将此前最小化的、且支持隔空手势功能所对应的应用界面的窗口最大化，则电子设备100自动重新打开隔空手势功能，或重新进入隔空手势交互流程。通过该方式，可以实现用户无感的自适应开启或关闭隔空手势功能，减少用户主动打开或关闭隔空手势功能的操作，以提升用户使用隔空手势的便捷度。

应理解，图3和图4所示的使用场景，还适用于其他产品形态的电子设备100，比如手机、平板电脑、车载终端等。

下面以电子设备100为PC为例，对本申请实施例提供的隔空交互方法的流程进行具体阐述。

图6是本申请实施例提供的一种隔空手势交互方法流程示意图，该实施例可以根据当前正在运行、且处于焦点状态的应用确定当前的使用场景，之后根据当前的使用场景，确定是否需要开启隔空手势功能，若是，则启动隔空手势交互流程；若否，则不进入隔空手势交互流程，关闭隔空手势功能。如此，电子设备100可以仅在特定的使用场景下开启隔空手势交互功能，进而减少电子设备100开启隔空手势功能的工作时间，以降低功耗，以及避免增加计算开销。

如图6所示，上述隔空手势交互方法可以应用于如图5所示的电子设备100，流程可以包括：

步骤601，电子设备100获取当前处于焦点状态的第一应用的第一信息。

需要说明，焦点状态可以是指第一应用正在被用户操作。以电子设备100为PC为例，焦点状态可以是指第一应用所对应的窗口获得键盘输入事件。

示例性的，结合图2所示的窗口，焦点状态可以是指第一应用所对应的窗口处于全屏状态。或者，若第一应用所对应的窗口为非全屏的情况下，焦点状态可以是指第一应用所对应的窗口位于最上层，且该窗口处于被选中的状态。

可以理解，在电子设备100的显示屏显示多个窗口的情况下，处于焦点状态的第一应用所对应的窗口位于顶层，未被其他应用所对应的窗口覆盖。

可选地，第一应用可以为电子设备100的前台应用。前台应用可以是指用户可以可视化操作的应用，或在后台直接支持可视化操作的应用，比如窗口最小化后的用户可以可视化操作的应用。前台应用可以包括：具有前台界面的应用、与前台应用关联的应用、与常驻应用关联的应用、正在执行服务的应用等。

可选地，电子设备100可以通过收集电子设备100中第一应用运行中相关元素的特定信息，获取第一信息。第一应用运行中相关元素的特定信息可以包括：第一应用进程的创建或退出、第一应用所对应的窗口的变化(例如焦点变化、最小化等)、GPU信息、音频流信息、视频流信息中的一种或多种。

示例性的，电子设备100可以通过探针获取第一应用运行中相关元素的特定信息。探针可以是指一个能够获取被测对象信息和状态的实体或动作，比如探针可以是指获取第一应用运行中相关元素的特定信息的实体或动作。

在本申请实施例中，探针可以是能够根据预先制定的策略，收集第一应用进程的创建或退出、第一应用所对应的窗口的变化、GPU信息、音频流信息、视频流信息中的一种或多种信息的实体，或者探针还可以是执行一种或多种检测、测量等动作，以获取第一应用运行中相关元素的特定信息。

可选地，第一信息可以包括第一应用的进程名称。进程名称可以包括进程的标识。电子设备100根据进程的标识可以确定第一应用的应用名称。

在一种可能的实现方式中，第一信息可以包括第一应用的分类信息。应用的分类可以是分为文字编辑类应用、图片类应用、游戏类应用、视频类应用、音频类应用、社交类应用、直播类应用等。分类信息可以包括分类标识，分类标识可以用字符、数字等符号表示。

在另一种可能的实现方式中，第一信息可以包括第一应用的状态信息。状态信息可以包括第一应用是否处于焦点状态。状态信息还可以包括第一应用所处于的工作状态，比如视频类播放应用是否处于播放状态，音频类应用是否处于播放状态，图片类应用是否处于播放状态，文字编辑类应用是否处于放映状态或者阅读视图状态等。

可选地，第一信息可以包括第一应用的进程名称、分类信息、状态信息中的一种或多种。

步骤602，电子设备100根据第一信息确定第一应用所对应的使用场景。

可以理解，电子设备100可以根据第一信息确定第一应用的功能，之后根据第一应用的功能确定第一应用所对应的使用场景。

下面列举几个电子设备100确定第一应用所对应的使用场景的确定方式，具体如下：

确定方式一：当第一信息包括第一应用的进程名称，电子设备100可以根据第一信息，确定第一应用的应用名称，进而根据应用名称确定第一应用的使用场景。

示例性的，若第一应用的应用名称为Microsoft Office Word

、MicrosoftOffice PowerPoint

、Portable Document Format

、腾讯会议

等，该第一应用所对应的使用场景为办公场景。

示例性的，若第一应用的应用名称为爱奇艺

、优酷视频

、腾讯视频

、PotPlayer

、Windows Media Player

等，该第一应用所对应的使用场景为视频播放场景。

示例性的，若第一应用的应用名称为QQ音乐

、网易云音乐

、酷我音乐

、虾米音乐

等，该第一应用所对应的使用场景为音频播放场景。

示例性的，若第一应用的名称为Microsoft照片

、Honeyview

、WPS图片

、Quicklook

等，该第一应用所对应的使用场景为图片浏览场景。

确定方式二：当第一信息包括第一应用的分类信息，电子设备100可以根据分类信息确定第一应用的使用场景。

示例性的，若第一应用的分类信息为文字编辑类应用，该第一应用的使用场景为办公场景。若第一应用的分类信息为图片类应用，该第一应用的使用场景为图片浏览场景。若第一应用的分类信息为视频类应用，该第一应用的使用场景为视频播放场景。若第一应用的分类信息为音频类应用，该第一应用的使用场景为音频播放场景。若第一应用的分类信息为社交类应用，该第一应用的使用场景为社交场景。若第一应用的分类信息为游戏类应用，该第一应用的使用场景为游戏场景。

确定方式三：当第一信息包括状态信息，电子设备100可以根据第一应用的状态信息确定第一应用的使用场景。

示例性的，若第一应用为视频类应用，在第一应用播放视频的状态下，电子设备100可以确定第一应用的使用场景为视频播放场景。

确定方式四：电子设备100还可以根据第一应用的进程名称、分类信息、状态信息中的至少两种，确定第一应用所对应的使用场景。例如，电子设备100可以根据进程名称和分类信息，确定第一应用所对应的使用场景。又例如，电子设备100可以根据进程名称和状态信息，确定第一应用所对应的使用场景。又例如，电子设备100可以根据分类信息和状态信息，确定第一应用所对应的使用场景。又例如，电子设备100可以根据进程名称、分类信息和状态信息，确定第一应用所对应的使用场景。

以电子设备100根据进程名称和状态信息，确定第一应用所对应的使用场景为例，若第一信息中进程名称所对应的应用名称为网易云音乐

，且第一信息中的状态信息表示第一应用播放音频，电子设备100可以确定第一应用所对应的使用场景为音频播放场景。

在一种可能的实现方式中，电子设备100可以存储有第一信息与使用场景之间的第一对应表。通过该方式，电子设备100获取第一信息后，可以根据第一对应表，确定电子设备100当前所处于的使用场景。

可以理解，不同的确定方式对应不同的第一对应表。以确定方式一为例，第一对应表可以是应用名称与使用场景之间的对应表，如表1所示。

表1

需要说明，表1仅是示例性说明第一对应表可以包括元素，第一对应表还可以包括其他的使用场景，比如游戏场景、直播场景、网页浏览场景等。此外，表1中每类使用场景所对应的应用名称可以更少，例如办公场景可以仅对应Microsoft Office Word

、Microsoft Office PowerPoint

、Portable Document Format

，而不包括腾讯会议

。或者，表1中每类使用场景所对应的应用名称可以更多，例如办公场景所对应的应用名称还可以包括Microsoft Office Excel

、Microsoft Visio

等。

需要说明，在确定方式三或确定方式四中，第一应用可以对应至少两种使用场景。以确定方式三，且第一应用为视频类应用为例，当第一应用打开处于焦点状态，且未播放视频，第一应用对应的使用场景为视频未播放场景；当第一应用处于焦点状态，且播放视频，第一应用对应的使用场景为视频播放场景。

步骤603，当确定第一应用所对应的使用场景为目标场景，电子设备100启动隔空手势交互流程。

在本申请实施例中，目标场景为电子设备100支持隔空手势的场景。例如，目标场景可以是视频播放场景、音频播放场景、图片浏览场景等。

可选地，电子设备100可以存储有支持隔空手势的预设场景列表或预设场景名单。若使用场景位于预设场景列表或预设场景名单内，电子设备100可以确定第一应用所对应的使用场景为目标场景。

示例性的，电子设备100可以根据第一应用所对应的使用场景的标识和预设场景列表内包括的标识，确定使用场景是否位于预设场景列表内。

本申请实施例提供的上述隔空手势交互方法，可以根据当前处于焦点状态的第一应用的第一信息确定使用场景，之后根据使用场景确定是否开启隔空手势功能，或者启动隔空手势交互流程。由此，电子设备100可以仅在特定的使用场景下启动隔空手势交互流程，而在其他使用场景下关闭隔空手势功能，或者关闭隔空手势交互流程，以减少电子设备100支持隔空手势功能的工作时间，以降低功耗和避免浪费算力。

例如，电子设备100可以在视频播放场景、音频播放场景、图片浏览场景等需要隔空手势交互的场景下，开启隔空手势功能，或者启动隔空手势交互流程，而在游戏场景、直播场景、视频未播放场景等不需要隔空手势交互的场景下，关闭隔空手势功能，或者关闭隔空手势交互流程。

为便于进一步理解本申请实施例提供的隔空交互方法，下面根据步骤601中获取第一信息时机的不同，列举几个不同的实施例，以示例性说明电子设备100无感启动隔空手势交互流程的应用场景。

在一部分实施例中，电子设备100可以通过探针周期性地获取第一信息。

可选地，步骤601，可以包括：

步骤601-1，电子设备100获取当前处于焦点状态的窗口信息。

步骤601-2，电子设备100根据获取的窗口信息，确定电子设备100当前处于焦点状态的第一应用的第一信息。

其中，可以根据窗口信息确定当前的焦点应用，也可以根据进程创建相关的基础探针确定当前的焦点应用，或者可以根据用户打开应用的操作而通过基础探针确定当前的焦点应用，还可以根据这几种方式的结合确定当前的焦点应用。

下面，对根据窗口信息确定当前的焦点应用的实现方式进行举例说明。

比如，第一种实现方式是通过函数调用得到当前焦点窗口，然后获取处于焦点状态的第一应用的应用进程ID，之后得到应用名称(这个可以是通过查找预设的进程ID和应用名称的绑定表得到的)；这种方式需要时刻监控系统中的窗口信息。

再比如，第二种实现方式是响应于用户对窗口的操作得到当前焦点窗口，然后获取处于焦点状态的第一应用的应用进程ID，之后得到应用名称。

可以设置一个定时器，若鼠标移动到目标窗口上等个3秒就能获取窗口句柄了，根据获得的窗口句柄获得当前焦点窗口。

在一种实现方式中，可以在MFC中使用OnIdle()并调用GetFocus()，通过这个函数取得焦点。该函数获取与调用线程消息队列相关的窗口的句柄，该窗口拥有输入焦点。返回值为拥有键盘输入焦点的窗口句柄，若调用线程的消息队列没有相关的持有键盘输入焦点的窗口，则返回值为NULL。这种方式是等窗口出现，然后根据窗口信息进行判断。

考虑到某些应用不是一打开就开启隔空手势功能，而是通过控件的判断，来按需打开隔空手势功能。如此，还可以根据基础探针确定当前的焦点应用。下面，对根据进程创建相关的基础探针确定当前的焦点应用的实现方式进行举例说明。

比如现在计算机就一个前台程序，那么就可以根据进程的ID判断。

这种方式是根据进程的创建而通过一系列的基础探针，来判断当前打开的应用是不是符合使用场景的焦点应用。与上述根据窗口信息的使用方式相比，这种方式响应更快。

上面提到，通过探针可以获得应用的状态信息，以反映当前应用所处于的工作状态。基于此，这个实施方式可以应对部分应用不是一打开就可以直接判定是否可以使用隔空手势功能的情况，例如对于PPT这一应用，在打开PPT时并不打开隔空手势功能，而是在进入到放映模式时，才打开隔空手势功能。

下面，对根据用户打开应用的操作而通过基础探针来获取上述第一信息，从而确定当前的焦点应用的实现方式进行举例说明。该实现方式可以根据用户打开应用的操作，并结合相应的基础探针(如音频流探针、视频流探针)，从一个或多个前置或前台窗口中，确定其中一个为焦点窗口。该实现方式适合于音频播放或者视频播放，或者一打开应用就会直接打开隔空手势功能的使用场景，而不适合于PPT中根据控件“放映”模式的打开而打开隔空手势功能的场景。

此外，以上几种方式也可以结合，来确定当前的焦点应用。

例如对于PPT应用，电子设备可以响应用户打开PPT的操作，获取第一信息，确定当前的使用场景，然后PPT所对应的使用场景符合要求(即支持隔空手势功能)，则打开隔空手势功能。

或者，对于PPT应用，电子设备响应用户打开PPT应用的操作，开始获取第一信息，确定当前的使用场景，此时，这种使用场景不符合要求，则不打开隔空手势功能；以及在后续的使用中，电子设备监控用户针对PPT应用界面中控件的操作，当用户打开“放映”控件的操作，电子设备再次进行判断此时的使用场景，此时的使用场景满足要求，则打开隔空手势功能。

此外，对于同一应用的不同运行状态，均可以支持隔空手势功能，但不同运行状态下的手势与指令的绑定表可以不同，相当于对于同一应用，应用与场景的绑定表可以变换。

例如对于直播应用，点击激光笔之前，只有点击、左右切换显示区域，调节音量等功能。点击激光笔之后，进入编辑模块，场景与手势的绑定表变换为其他的手势表，此时需要增加追踪功能，而将左右划换为执行其他功能。

可见，同一个应用程序可以对应不同的场景，即虽然该应用程序还是焦点应用程序，但是若运行状态变化而导致应用场景变化。即在确定使用场景时，不仅根据焦点应用程序的名称、分类，还根据应用程序的运行状态，来划分场景。

在不同的时间地点下，电子设备100支持隔空手势的场景可以相应不同，即目标场景可以是动态变化的。

在启动隔空手势交互流程之后，若第一应用退出，电子设备100关闭隔空手势流程。

此外，在启动隔空手势交互流程之后，电子设备100可以确定当前处于焦点状态的第二应用的使用场景，若第二应用的使用场景与启动隔空手势交互流程之前的使用场景不同，电子设备100还需要确定第二应用所对应的使用场景是否为目标场景，若不是则关闭隔空手势流程。

若第二应用所对应的使用场景为目标场景，则不关闭隔空手势流程，且使用第二应用所对应的使用场景所对应的手势表进行隔空手势识别。

在一部分实施例中，以示例性说明电子设备100在启动隔空手势交互流程之后，电子设备100实现隔空手势交互目的应用场景。

应用场景示例一：

在图2所示的应用场景中，用户通过隔空手势与电子设备100进行交互，可以对电子设备100上运行的应用进行操作。例如电子设备100运行文档演示应用，用户通过隔空手势，可以在文档演示过程中进行调节，比如翻页、选中显示内容、调节显示器件屏幕的亮度等。

又例如电子设备100运行视频应用或音频应用，用户通过隔空手势，可以在视频或音频的播放过程进行调节，比如快进、快退、调节音量、调节显示屏的亮度、暂停等。

又例如电子设备100运行图片查看应用，用户通过隔空手势，可以在图片应用过程中图片浏览的过程中那行调节，比如切换上一张图片或下一张图片、放大、缩小等。

又例如用户通过隔空手势，可以在浏览器应用浏览网页的过程中进行调节，比如上滑或下滑滚动网页、选中显示内容等。

又例如用户通过隔空手势可以在视频会议过程中进行调节，比如切换共享屏幕的显示内容、开启或关闭静音、调节音量等，还可以开启激光笔荧光笔等功能，对共享内容进行批注等。

应用场景示例二：

以电子设备100为智能电视为例，参见图11，在用户与电子设备100距离较远的情况下，用户可以通过隔空手势对电子设备100上运行的应用进行操作。例如用户通过隔空手势，可以在电子设备100上实现暂停视频播放的控制。

应用场景示例三：

参见图1，电子设备100可以是手机、平板电脑等终端，在用户手上有水、油，或者其他污液的情况下，用户不方便接触电子设备100的触摸屏。在另一些情况下，用户需要与电子设备100间隔较远的距离，比如远距离自拍、直播等情况下，用户不方便接触电子设备100。

用户通过隔空手势与电子设备100进行交互，可以对电子设备100上运行的应用进行操作，例如用户通过隔空手势可以在拍照时进行调节，比如调节焦距、调节拍摄模式(例如人像模式、微距模式、风景模式)、调节感光度、按下快门等。

应用场景示例四：

参见图12，电子设备100可以是车载终端，汽车驾驶是安全性高敏感的业务场景，在驾驶过程中不局限于对触摸控制，运用隔空手势进行非接触控制，可以提高驾驶的安全性。

在图12所示的应用场景中，用户通过隔空手势与电子设备100进行交互可以对电子设备100上运行的应用进行操作，例如用户通过隔空手势，可以在导航应用工作的过程中进行调节，比如放大、缩小、移动地图、标记路线等。

又例如，用户通过隔空手势，可以在播发音频的过程中进行调节，比如切换歌曲、调节音量等。

在一些情况下，电子设备100可以设置车辆的空调调节功能、座椅调节功能、倒车影像等应用，用户可以通过隔空手势调节空调温度，座椅通风、加热、角度调节、倒车影像视角切换等。

应用场景示例五：

参见图1，电子设备100还可以是可穿戴设备。可穿戴设备也可以称为穿戴式智能设备，是应用穿戴式技术对日常穿戴进行智能化设计、开发出可以穿戴的设备的总称，如眼镜、手套、手表、服饰及鞋等。

在用户穿戴手套的情况下，手套会将手与电子设备100的触摸屏绝缘，进而无法进行触摸操作，由此在徒步、骑行、滑雪等户外运动场景下，用户可以通过隔空手势与电子设备100进行交互。例如在导航应用的过程中，用户可以通过隔空手势进行放大、缩小、移动地图、标记路线等操作。电子设备100还可以通过隔空手势与电子设备100正在运行的其他应用进行交互，以查看用户的心率，或者当前位置的海拔，或者骑行速率等。

需要说明，本申请实施例提供的方法和设备，还可以适用于其他的用户与电子设备隔空交互的应用场景，而且电子设备100还可以是其他未示例出的可以支持隔空手势控制的设备，比如自动售卖机。

同一个电子设备100上可以安装有多个不同应用(例如音频播放应用、聊天应用、视频播放应用或者是游戏应用)。不同电子设备100上可以安装有相同的应用，比如均安装有同一个视频播放应用。

在一种实现中，隔空手势控制的应用场景可以为电子设备上同一个应用中的多个应用界面(例如音频播放界面、视频播放界面或应用导航界面等等)。

在一种实现中，隔空手势控制的应用场景还可以为同一个物理区域内的不同终端设备(例如电视、游戏机、空调等终端设备)，但用户发出的隔空手势在该不同终端设备上的相应手势控制指令可以不同，这可以是因为该不同终端设备上运行的应用程序不同导致的。

图7是本申请实施例提供的另一种隔空手势交互方法流程示意图，该方法包括步骤701～步骤706：

步骤701，开始；

步骤702，场景感知模块识别PC当前所处的场景；

步骤703，判断当前的场景是否在支持隔空手势功能的场景列表中，若是执行步骤704，否则执行步骤702；

步骤704，自适应控制模块开启隔空手势功能；

步骤705，隔空手势采集模块获取并上报手势的类型；

步骤706，结束。

上述方法至少涉及三个模块的操作，该三个模块分别为下述的模块1：隔空手势采集模块、模块2：场景感知模块和模块3：自适应控制模块。

模块1：隔空手势采集模块。

该模块可以获取并上报手势的类型，可以将获取的手势数据上报给系统或上层应用，比如左滑、右滑、上滑、下滑、顺时针、逆时针、双指缩放等。该模块的具体实现不受限制，比如可以是ToF传感器方案，也可以是超声波等方案、摄像头方案等。

可以设置“场景-手势”绑定表。其中，“场景-手势”绑定表定义了每种场景支持的手势动作及每种手势所触发的功能。

在可行地一种实现方式中，定义的“场景-手势”绑定表可以如下表2所示。

表2

场景	手势
		办公场景	左滑、右滑、双击
视频播放场景	左滑、右滑、单击、双击
		照片/图片浏览场景	左滑、右滑、双击

如此，根据确定的当前场景和获取的手势数据，可以获得相应的控制指令，进而可执行该控制指令以实现隔空手势控制目的。

在一种可能的实施方式中，电子设备100可以将获取的手势数据与预设的有限个手势进行对比，来获得相应的控制指令，这样可以提高识别效率，也可以提高识别的准确率，还可以减低功耗。

在可行地另一实现方式中，在PPT演示场景中，隔空手势可以控制左右翻页，故而需要左滑、右滑两个手势就够了。而在视频播放场景中，隔空手势可以控制快进快退(对应左滑、右滑手势)、调节音量(上滑、下滑手势)、暂停/播放(对应单击手势)等功能。每种场景需要的手势数量可以不一样，同一个手势在不同用户场景中所触发的动作也可能不一样。

如此，在PPT演示场景中，除了左滑右滑手势，即使用户不经意操作了其他手势，也不会触发任何行为，避免误触发情况，保证隔空手势交互的准确性。

本实施例是应用程序预先设置有支持的手势，如用户使用了相应使用场景不支持的手势，则应用程序不会执行隔空手势控制，从而可以避免频繁的误执行，也能够降低功耗。

对于手势数据的采集，可以仅抽查检测某几个特定的帧，或者某几个特定的图像坐标，或局部图像，而不用全局检测，当找到突出的特征之后，再全局检测，这样提高识别的准确率。

模块2：场景感知模块。

该模块可以负责识别出PC当前所处的使用场景，比如PPT演示、word阅读视图、PDF阅读视图、网页播放视频、客户端播放时视频、图片查看等。

可以设置“场景-应用”绑定表。其中，“场景-应用”绑定表定义了应用与场景间的绑定关系，如此就可以通过应用来反推出用户目前处于什么场景。定义的“场景-应用”绑定表可以如下表3所示。

表3

在一种实现方式中，可以定义用于识别具体应用的基础探针，定义的基础探针可以有：进程创建/退出、焦点变化(是否全屏)、最小化、音频流探针、视频流探针、GPU探针等。通过这些基础探针，可以识别出应用的运行状态信息，包括应用的名称、分类、状态信息。

基于此，基于基础探针的场景识别流可以如图8所示。请参考图8，示出了从基础探针到应用再到场景的工作流。

如图8所示，可以根据进程创建/退出探针、焦点变化探针、最小化探针这些应用切换探针，以及根据音频流探针、视频流探针、GPU探针，获取应用的运行状态信息(如应用的名称、分类、状态信息)，进而根据获取的应用运行状态信息确定出当前的场景。

本实施例通过基础探针可以获取当前的前台焦点应用，通过查询“场景-应用”绑定表，即可从应用反推出当前所处的用户场景。

基于上述内容，模块2(场景感知模块)的详细工作流程可以如图9所示。请参考图9，该工作流程可以包括步骤901～步骤906。

步骤901，开始；

步骤902，通过探针获取当前的应用；

步骤903，查询“场景-应用”绑定表；

步骤904，经查询获得当前的场景；

步骤905，将查询到的当前场景输出给自适应控制模块；

步骤906，结束。

模块3：自适应控制模块。

该模块可以自适应打开/关闭隔空手势功能，具体为该模块感知当前场景是否在预先设置的可以支持该隔空手势功能的场景列表中，若在场景列表中则自动开启隔空手势功能；反之，当该场景退出时，模块3则可触发隔空手势功能关闭。

可以设置场景白名单。其中，场景白名单定义了所有支持适配隔空手势的用户场景，比如办公场景、视频播放场景、照片/图片浏览场景等。

基于上述内容，模块3(自适应控制模块)的详细工作流程可以如图10所示。请参考图10，该工作流程可以包括步骤1001～步骤1006。

步骤1001，开始；

步骤1002，判断场景感知模块感知到的场景是否在场景白名单中，若是执行下一步骤，否则执行步骤1006；

步骤1003，开启隔空手势功能；

步骤1004，判断该场景是否已退出，若是执行下一步骤；

步骤1005，关闭隔空手势功能；

步骤1006，结束。

本实施例仅在支持隔空手势的场景中使用隔空手势功能，可以有效降低PC支持隔空手势功能带来的功耗，提升用户体验。

下面以电子设备100为PC为例，对电子设备100的硬件结构进行说明。参见图5，电子设备100可以包括：处理器510，外部存储器接口520，内部存储器521，通用串行总线(Universal Serial Bus,USB)接口530，充电管理模块540，电源管理模块541，电池542，音频模块550，扬声器550A，受话器550B，麦克风550C，传感器模块560，按键570，马达571，指示器572，摄像头573，显示屏574等。其中传感器模块560可以包括距离传感器560A，接近光传感器560B，环境光传感器560C等。

可以理解的是，本发明实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中，电子设备100可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实现。

处理器510可以包括一个或多个处理单元，例如：处理器510可以包括应用处理器(Application Processor,AP)，调制解调处理器，图形处理器(Graphics ProcessingUnit,GPU)，图像信号处理器(Image Signal Processor,ISP)，控制器，视频编解码器，数字信号处理器(Digital Signal Processor,DSP)，和/或神经网络处理器(Neural-NetworkProcessing Unit,NPU)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。

控制器可以根据指令操作码和时序信号，产生操作控制信号，完成取指令和执行指令的控制。

处理器510中还可以设置存储器，用于存储指令和数据。在一些实施例中，处理器510中的存储器为高速缓冲存储器。该存储器可以保存处理器510刚用过或循环使用的指令或数据。如果处理器510需要再次使用该指令或数据，可从所述存储器中直接调用。避免了重复存取，减少了处理器510的等待时间，因而提高了系统的效率。

在一些实施例中，处理器510可以包括一个或多个接口。接口可以包括集成电路(Inter-Integrated Circuit,I2C)接口，集成电路内置音频(Inter-Integrated CircuitSound,I2S)接口，脉冲编码调制(Pulse Code Modulation,PCM)接口，通用异步收发传输器(Universal Asynchronous Receiver/Transmitter,UART)接口，移动产业处理器接口(Mobile Industry Processor Interface,MIPI)，通用输入输出(General-PurposeInput/Output,GPIO)接口，和/或通用串行总线(Universal Serial Bus,USB)接口等。

I2C接口是一种双向同步串行总线，包括一根串行数据线(Serial Data Line,SDA)和一根串行时钟线(Derail Clock Line,SCL)。在一些实施例中，处理器510可以包含多组I2C总线。处理器510可以通过不同的I2C总线接口分别耦合充电器，闪光灯，摄像头573等。

I2S接口可以用于音频通信。在一些实施例中，处理器510可以包含多组I2S总线。处理器510可以通过I2S总线与音频模块550耦合，实现处理器510与音频模块550之间的通信。

PCM接口也可以用于音频通信，将模拟信号抽样，量化和编码。

UART接口是一种通用串行数据总线，用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。

MIPI接口可以被用于连接处理器510与显示屏574，摄像头573等外围器件。MIPI接口包括摄像头串行接口(Camera Serial Interface,CSI)，显示屏串行接口(DisplaySerial Interface,DSI)等。在一些实施例中，处理器510和摄像头573通过CSI接口通信，实现电子设备100的拍摄功能。处理器510和显示屏574通过DSI接口通信，实现电子设备100的显示功能。

GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号，也可被配置为数据信号。在一些实施例中，GPIO接口可以用于连接处理器510与摄像头573，显示屏574，音频模块550，传感器模块560等。GPIO接口还可以被配置为I2C接口，I2S接口，UART接口，MIPI接口等。

USB接口530是符合USB标准规范的接口，具体可以是Mini USB接口，Micro USB接口，USB Type C接口等。USB接口530可以用于连接充电器为电子设备100充电，也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机，通过耳机播放音频。该接口还可以用于连接其他电子设备，例如AR设备等。

可以理解的是，本发明实施例示意的各模块间的接口连接关系，只是示意性说明，并不构成对电子设备100的结构限定。在本申请另一些实施例中，电子设备100也可以采用上述实施例中不同的接口连接方式，或多种接口连接方式的组合。

充电管理模块540用于从充电器接收充电输入。其中，充电器可以是无线充电器，也可以是有线充电器。在一些有线充电的实施例中，充电管理模块540可以通过USB接口530接收有线充电器的充电输入。在一些无线充电的实施例中，充电管理模块540可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块540为电池542充电的同时，还可以通过电源管理模块541为电子设备供电。

电源管理模块541用于连接电池542，充电管理模块540与处理器510。电源管理模块541接收电池542和/或充电管理模块540的输入，为处理器510，内部存储器521，显示屏574，摄像头573等供电。电源管理模块541还可以用于监测电池容量，电池循环次数，电池健康状态(漏电，阻抗)等参数。在其他一些实施例中，电源管理模块541也可以设置于处理器510中。在另一些实施例中，电源管理模块541和充电管理模块540也可以设置于同一个器件中。

电子设备100通过GPU，显示屏574，以及应用处理器等实现显示功能。GPU为图像处理的微处理器，连接显示屏574和应用处理器。GPU用于执行数学和几何计算，用于图形渲染。处理器510可包括一个或多个GPU，其执行程序指令以生成或改变显示信息。

显示屏574用于显示图像，视频等。显示屏574包括显示面板。显示面板可以采用液晶显示屏(Liquid Crystal Display,LCD)，有机发光二极管(Organic Light-EmittingDiode,OLED)，有源矩阵有机发光二极体或主动矩阵有机发光二极体(Active-MatrixOrganic Light Emitting Diode,AMOLED)，柔性发光二极管(Flex Light-EmittingDiode,FLED)，Miniled，MicroLed，Micro-oLed，量子点发光二极管(Quantum Dot LightEmitting Diodes,QLED)等。在一些实施例中，电子设备100可以包括1个或N个显示屏574，N为大于1的正整数。

电子设备100可以通过ISP，摄像头573，视频编解码器，GPU以及应用处理器等实现隔空手势采集以及识别功能。

ISP用于处理摄像头573反馈的隔空手势数据。例如，拍照时，打开快门，光线通过镜头被传递到摄像头感光元件上，光信号转换为电信号，摄像头感光元件将所述电信号传递给ISP处理，转化为隔空手势的图像。ISP还可以对图像的噪点，亮度，肤色进行算法优化。ISP还可以对隔空手势场景的曝光，色温等参数优化。在一些实施例中，ISP可以设置在摄像头573中。

摄像头573用于捕获静态图像、视频以及采集隔空手势。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(Charge Coupled Device,CCD)或互补金属氧化物半导体(Complementary Metal-Oxide-Semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号，之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB，YUV等格式的图像信号。在一些实施例中，电子设备100可以包括1个或N个摄像头573，N为大于1的正整数。在一些实施例中，摄像头573可以是TOF深度摄像头，用于采集隔空手势的深度数据。在另一些实施例中，摄像头573还可以是双目摄像头，用于采集隔空手势的深度数据，本申请实施例不对摄像头573的具体产品形态和类型进行限定。

数字信号处理器用于处理数字信号，除了可以处理数字图像信号，还可以处理其他数字信号。例如，当电子设备100在频点选择时，数字信号处理器用于对频点能量进行傅里叶变换等。

视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样，电子设备100可以播放或录制多种编码格式的视频，例如：动态图像专家组(Moving Picture Experts Group,MPEG)1，MPEG2，MPEG3，MPEG4等。

NPU为神经网络计算处理器，通过借鉴生物神经网络结构，例如借鉴人脑神经元之间传递模式，对输入信息快速处理，还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用，例如：隔空手势识别、图像识别，人脸识别，语音识别，文本理解等。

外部存储器接口520可以用于连接外部存储卡，例如Micro SD卡，实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口520与处理器510通信，实现数据存储功能。例如将音乐，视频等文件保存在外部存储卡中。

内部存储器521可以用于存储计算机可执行程序代码，所述可执行程序代码包括指令。内部存储器521可以包括存储程序区和存储数据区。其中，存储程序区可存储操作系统，至少一个功能所需的应用程序(比如声音播放功能，图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据，电话本等)等。此外，内部存储器521可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件，闪存器件，通用闪存存储器(Universal Flash Storage,UFS)等。处理器510通过运行存储在内部存储器521的指令，和/或存储在设置于处理器中的存储器的指令，执行电子设备100的各种功能应用以及数据处理。

电子设备100可以通过音频模块550，扬声器550A，受话器550B，麦克风550C，以及应用处理器等实现音频功能。例如音乐播放，录音等。

音频模块550用于将数字音频信息转换成模拟音频信号输出，也用于将模拟音频输入转换为数字音频信号。音频模块550还可以用于对音频信号编码和解码。在一些实施例中，音频模块550可以设置于处理器510中，或将音频模块550的部分功能模块设置于处理器510中。

扬声器550A，也称“喇叭”，用于将音频电信号转换为声音信号。电子设备100可以通过扬声器550A收听音乐，或收听免提通话。

受话器550B，也称“听筒”，用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时，可以通过将受话器550B靠近人耳接听语音。

麦克风550C，也称“话筒”，“传声器”，用于将声音信号转换为电信号。当拨打电话或发送语音信息时，用户可以通过人嘴靠近麦克风550C发声，将声音信号输入到麦克风550C。电子设备100可以设置至少一个麦克风550C。在另一些实施例中，电子设备100可以设置两个麦克风550C，除了采集声音信号，还可以实现降噪功能。在另一些实施例中，电子设备100还可以设置三个，四个或更多麦克风550C，实现采集声音信号，降噪，还可以识别声音来源，实现定向录音功能等。

距离传感器560A，用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中，拍摄场景，电子设备100可以利用距离传感器560A测距以实现快速对焦，或者确定用户的手与电子设备100之间的距离。

接近光传感器560B可以包括例如发光二极管(LED)和光检测器，例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时，可以确定电子设备100附近有物体。当检测到不充分的反射光时，电子设备100可以确定电子设备100附近没有物体，进而可以确定用户所触发的手势为隔空手势。

环境光传感器560C用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏574亮度。环境光传感器560C也可用于拍照时自动调节白平衡。环境光传感器560C还可以与接近光传感器560B配合，检测电子设备100是否为合屏状态，以使得电子设备100进入休眠状态，可以降低功耗，以及确定应用的使用状态。例如，当电子设备100合屏，进入休眠状态之后，电子设备100可以关闭隔空手势功能。

按键570包括开机键，音量键等。按键570可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入，产生与电子设备100的用户设置以及功能控制有关的键信号输入。

马达571可以产生振动提示。马达571可以用于振动或反馈。例如，作用于不同应用(例如拍照，音频播放等)的隔空手势操作，可以对应不同的振动反馈效果。不同的场景(例如：隔空手势识别失败提醒，隔空手势开启/关闭提醒等)也可以对应不同的振动反馈效果。振动反馈效果还可以支持自定义。

指示器572可以是指示灯，可以用于指示充电状态，电量变化，也可以用于指示隔空手势开启、关闭、识别失败等消息、通知等。

在一些实施例中，电子设备100还可以利用音频模块550中的扬声器550A和麦克风550C采集隔空手势的相关数据，以识别用户所实施的隔空手势。例如，电子设备100可以使用扬声器550A发出超声波信号，超声波信号遇到动态手部动作反射超声波，麦克风550C接收到超声波回波信号同步进行特征处理，基于特征不同区分不同的手势。

在另一些实施例中，电子设备100的结构还可以包括雷达传感器，或者红外传感器，或者超声波传感器，以用于采集隔空手势的相关数据。以雷达传感器为例，雷达传感器可以向人体发送雷达信号，并接受该雷达信号的反射信号。其中，根据雷达传感器的不同具体实现，该雷达信号可以有多种载体，例如：当该雷达传感器是微波雷达时，该雷达信号为微波信号；当该雷达传感器是超声波雷达时，该雷达信号为超声波信号；当雷达传感器是激光雷达时，该雷达信号为激光信号。需要说明的是，当该雷达传感器为集成多种不同的雷达时，该雷达信号可以是多种雷达信号的集合，此处不作限定。

电子设备100的软件架构可以包括：硬件层、运行在硬件层之上的操作系统层，以及运行在操作系统层上的应用层。该硬件层包括上述图5中的处理器510，还可以包括内存管理单元(Memory Management Unit，MMU)和内存(也称为主存)等硬件。该操作系统可以是任意一种或多种通过进程(process)实现业务处理的计算机操作系统，例如，Linux

操作系统、Unix

操作系统、Android

操作系统、iOS

操作系统或Windows

操作系统等。该应用层包含浏览器应用、音频播放应用、视频播放应用、文字编辑应用、文稿演示应用、图片/文件查看应用、浏览器应用、导航应用、直播应用、摄像应用、即时通信应用等。

需要说明，本申请实施例并未对电子设备100具体结构特别限定，只要能够通过运行记录有本申请实施例的提供的方法的代码的程序，以根据本申请实施例提供的方法进行隔空手势交互即可。例如，本申请实施例提供的方法的执行主体可以是电子设备100，或者是电子设备100中能够调用程序并执行程序的功能模块。

在本发明所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接，可以是电性、机械或其它的形式。

作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

本申请实施例还提供一种电子芯片，该电子芯片包括：处理器，其用于执行存储器中存储的计算机程序指令，其中，当该计算机程序指令被该处理器执行时，触发任务处理芯片执行上述实施例中电子设备100执行的步骤。

本申请实施例还提供一种电子设备，可以包括：处理器，处理器用于运行存储器中存储的计算机程序，以使得电子设备实现上述实施例中电子设备100执行的各个步骤。本申请实施例提供的电子设备的一种可行的产品硬件结构可以参见图5所示的硬件结构示意图。

具体的，在本申请一实施例中，一个或多个计算机程序被存储在上述存储器中，该一个或多个计算机程序包括指令，当该指令被上述设备执行时，使得上述设备执行本申请实施例所述的方法步骤。

具体的，在本申请一实施例中，电子设备的处理器可以是片上装置SOC，该处理器中可以包括中央处理器(Central Processing Unit，CPU)，还可以进一步包括其他类型的处理器。具体的，在本申请一实施例中，电子设备的处理器可以是PWM控制芯片。

具体的，在本申请一实施例中，涉及的处理器可以例如包括CPU、DSP、微控制器或数字信号处理器，还可包括GPU、嵌入式神经网络处理器(Neural-network Process Units，NPU)和图像信号处理器(Image Signal Processing，ISP)，该处理器还可包括必要的硬件加速器或逻辑处理硬件电路，如ASIC，或一个或多个用于控制本申请技术方案程序执行的集成电路等。此外，处理器可以具有操作一个或多个软件程序的功能，软件程序可以存储在存储介质中。

具体的，在本申请一实施例中，电子设备的存储器可以是只读存储器(read-onlymemory，ROM)、可存储静态信息和指令的其它类型的静态存储设备、随机存取存储器(random access memory，RAM)或可存储信息和指令的其它类型的动态存储设备，也可以是电可擦可编程只读存储器(electrically erasable programmable read-only memory，EEPROM)、只读光盘(compact disc read-only memory，CD-ROM)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其它磁存储设备，或者还可以是能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何计算机可读介质。

具体的，在本申请一实施例中，处理器可以和存储器可以合成一个处理装置，更常见的是彼此独立的部件，处理器用于执行存储器中存储的程序代码来实现本申请实施例所述方法。具体实现时，该存储器也可以集成在处理器中，或者，独立于处理器。

进一步的，本申请实施例阐明的设备、装置、模块，具体可以由计算机芯片或实体实现，或者由具有某种功能的产品来实现。

本领域内的技术人员应明白，本申请实施例可提供为方法、装置、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质上实施的计算机程序产品的形式。本申请实施例还提供一种计算机存储介质，包括计算机程序，当计算机程序在电子设备上运行时，使得电子设备执行上述实施例中电子设备100执行的步骤。

本申请实施例还提供一种计算机程序产品，该计算机程序产品包括计算机程序，当计算机程序在计算机上运行时，使得计算机执行上述实施例中电子设备100执行的步骤。

本申请中的实施例描述是参照根据本申请实施例的方法、设备(装置)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

应理解，本申请实施例中的术语“单元”可以通过软件和/或硬件形式实现，对此不作具体限定。例如，“单元”可以是实现上述功能的软件程序、硬件电路或二者结合。硬件电路可能包括应用特有集成电路(application specific integrated circuit，ASIC)、电子电路、用于执行一个或多个软件或固件程序的处理器(例如共享处理器、专有处理器或组处理器等)和存储器、合并逻辑电路和/或其它支持所描述的功能的合适组件。

因此，在本申请的实施例中描述的各示例的单元，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

在本申请所提供的几个实施例中，任一功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(read-only memory，ROM)、随机存取存储器(random access memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

Claims (21)

1.一种隔空手势交互方法，其特征在于，包括：

获取电子设备当前的第一使用场景；

确定获取的所述第一使用场景是否支持隔空手势功能；

在确定出所述第一使用场景支持隔空手势功能的情况下，控制所述电子设备的隔空手势功能处于开启状态；

在确定出所述第一使用场景不支持隔空手势功能的情况下，控制所述电子设备的隔空手势功能处于关闭状态；

其中，所述电子设备的隔空手势采集模块在所述隔空手势功能处于开启状态、且隔空手势采集范围内存在有隔空手势的情况下，执行隔空手势采集操作，以及在所述隔空手势功能处于关闭状态的情况下，不执行隔空手势采集操作。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

监测所述电子设备是否存在使用场景切换情况；

在监测到所述使用场景切换情况时，执行所述获取电子设备当前的第一使用场景的步骤。

3.根据权利要求1所述的方法，其特征在于，在控制所述电子设备的隔空手势功能处于开启状态之前，所述方法还包括：

确定所述电子设备的隔空手势功能是否处于关闭状态；

在确定出所述电子设备的隔空手势功能处于关闭状态的情况下，执行控制所述电子设备的隔空手势功能处于开启状态的步骤；

在控制所述电子设备的隔空手势功能处于关闭状态之前，所述方法还包括：

确定所述电子设备的隔空手势功能是否处于开启状态；

在确定出所述电子设备的隔空手势功能处于开启状态的情况下，执行控制所述电子设备的隔空手势功能处于关闭状态的步骤。

4.根据权利要求1所述的方法，其特征在于，所述获取电子设备当前的第一使用场景，包括：

根据预先设置好的场景应用绑定表，确定与所述电子设备当前使用的第一应用相对应的使用场景，其中，所述场景应用绑定表中设置有场景和应用间的对应关系；

以确定的使用场景作为所述电子设备当前的第一使用场景。

5.根据权利要求4所述的方法，其特征在于，所述场景应用绑定表中设置有场景和应用的信息间的对应关系；

所述应用的信息包括：进程名称、分类信息、状态信息中的一种或多种。

6.根据权利要求4所述的方法，其特征在于，所述场景应用绑定表中设置有场景和应用的信息间的对应关系；

所述方法还包括：

获取所述电子设备当前使用的第一应用的第一信息；

根据所述第一信息，执行所述确定与所述电子设备当前使用的第一应用相对应的使用场景的步骤。

7.根据权利要求6所述的方法，其特征在于，所述获取所述电子设备当前使用的第一应用的第一信息，包括：

根据预先设置好的用于识别应用的探针，识别出所述电子设备当前使用的第一应用的第一信息。

8.根据权利要求7所述的方法，其特征在于，所述用于识别应用的探针包括应用切换探针、音频流探针、视频流探针、GPU探针中的一种或多种。

9.根据权利要求8所述的方法，其特征在于，所述应用切换探针包括进程创建退出探针、焦点变化探针、最小化探针中的一种或多种。

10.根据权利要求1所述的方法，其特征在于，所述确定获取的所述第一使用场景是否支持隔空手势功能，包括：

确定获取的所述第一使用场景是否在预先设置好的支持隔空手势功能的场景列表中；

其中，所述第一使用场景在所述场景列表中视为所述第一使用场景支持隔空手势功能。

11.根据权利要求1所述的方法，其特征在于，在所述隔空手势采集模块执行隔空手势采集操作之后，所述方法还包括：

根据经所述隔空手势采集操作采集到的手势数据，获得第一手势类型；

根据预先设置好的场景手势绑定表中的、对应所述第一使用场景的第一手势设置信息，确定对应所述第一手势类型的第一控制指令，其中，所述场景手势绑定表中设置有场景和手势设置信息间的对应关系；

执行所述第一控制指令。

12.根据权利要求11所述的方法，其特征在于，所述方法还包括：

确定所述第一手势设置信息是否包括所述第一手势类型；

在所述第一手势设置信息包括所述第一手势类型的情况下，执行所述确定对应所述第一手势类型的第一控制指令的步骤。

13.根据权利要求1所述的方法，其特征在于，在所述在确定出所述第一使用场景支持隔空手势功能的情况下，控制所述电子设备的隔空手势功能处于开启状态之后，所述方法还包括：

确定所述第一使用场景是否退出；

在确定出所述第一使用场景退出的情况下，控制所述电子设备的隔空手势功能处于关闭状态。

14.根据权利要求1所述的方法，其特征在于，所述方法还包括：

在确定出所述第一使用场景不支持隔空手势功能的情况下，控制所述电子设备的隔空手势采集模块处于关闭状态。

15.根据权利要求1所述的方法，其特征在于，所述方法还包括：

响应于用于控制所述电子设备进入休眠状态的操作或指令，控制所述电子设备的隔空手势功能处于关闭状态。

16.根据权利要求1所述的方法，其特征在于，所述方法还包括：

响应于所述隔空手势功能的开关状态变化，执行对应所述开关状态变化的提醒操作。

17.一种隔空手势交互装置，其特征在于，包括：

获取模块，用于获取电子设备当前的第一使用场景；

确定模块，用于确定获取的所述第一使用场景是否支持隔空手势功能；

控制模块，用于在确定出所述第一使用场景支持隔空手势功能的情况下，控制所述电子设备的隔空手势功能处于开启状态；在确定出所述第一使用场景不支持隔空手势功能的情况下，控制所述电子设备的隔空手势功能处于关闭状态；

其中，所述电子设备的隔空手势采集模块在所述隔空手势功能处于开启状态、且隔空手势采集范围内存在有隔空手势的情况下，执行隔空手势采集操作，以及在所述隔空手势功能处于关闭状态的情况下，不执行隔空手势采集操作。

18.一种电子芯片，其特征在于，包括：

处理器，其用于执行存储在存储器上的计算机程序指令，其中，当所述计算机程序指令被所述处理器执行时，触发所述电子芯片执行权利要求1-16中任一项所述的方法。

19.一种电子设备，其特征在于，所述电子设备包括用于存储计算机程序指令的存储器、用于执行计算机程序指令的处理器和通信装置，其中，当所述计算机程序指令被该处理器执行时，触发所述电子设备执行如权利要求1-16中任一项所述的方法。

20.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，当其在计算机上运行时，使得计算机执行如权利要求1-16中任一项所述的方法。

21.一种计算机程序产品，其特征在于，所述计算机程序产品包括计算机程序，当所述计算机程序在计算机上运行时，使得所述计算机执行如权利要求1-16中任一项所述的方法。

Images