CN111880714A - 页面控制方法及相关装置 - Google Patents

Abstract

本申请实施例公开了一种页面控制方法及相关装置，应用于电子设备，包括：显示第一页面内容；检测用户的第一手势，确定与所述第一手势适配的参考手势；检测用户的第二手势；若检测到所述第二手势为所述参考手势中的手势，则根据所述第一手势和所述第二手势确定针对所述第一页面内容的预设操作的操作距离和操作速度；对所述第一页面内容按照所述操作距离和所述操作速度执行所述预设操作。本申请实施例有利于通过手势操作实现对页面的智能控制。

Description

页面控制方法及相关装置

技术领域

本申请涉及页面显示处理技术领域，具体涉及一种页面控制方法及相关装置。

背景技术

随着手机等智能终端的快速发展，用户使用智能终端的时间也越来越多，提高智能终端人机交互的便捷性是当前亟需研究的热点问题。目前主流的人机交互方案仍然是以触摸操作为主，由于存在很多用户无法随时伸出双手操作手机的场景，触摸操作在很多场景下无法实现。现有技术中，虽然可以通过手势交互功能来帮助用户对手机屏幕进行操作，但是当前的手势操作功能没有从用户的角度去考量用户的使用体验，用户在通过手势操作来控制手势屏幕，特别是对手机屏幕实施滑动操作时，仍存在一些问题，导致用户体验不高。

发明内容

本申请实施例提供一种页面控制方法及相关装置，有利于通过手势操作实现对页面的智能控制。

第一方面，本申请实施例提供一种页面控制方法，应用于电子设备，所述方法包括：

显示第一页面内容；

检测用户的第一手势，确定与所述第一手势适配的参考手势；

检测用户的第二手势；

若检测到所述第二手势为所述参考手势中的手势，则根据所述第一手势和所述第二手势确定针对所述第一页面内容的预设操作的操作距离和操作速度；

对所述第一页面内容按照所述操作距离和所述操作速度执行所述预设操作。

第二方面，本申请实施例提供一种页面控制装置，应用于电子设备，所述页面控制装置包括显示单元、检测定单元、确定单元和处理单元，

所述显示单元，用于显示第一页面内容；

所示检测单元，用于检测用户的第一手势，确定与所述第一手势适配的参考手势；

所述检测单元，还用于检测用户的第二手势；

所述确定单元，用于若检测到所述第二手势为所述参考手势中的手势，则根据所述第一手势和所述第二手势确定针对所述第一页面内容的预设操作的操作距离和操作速度；

所示处理单元，用于对所述第一页面内容按照所述操作距离和所述操作速度执行所述预设操作。

第三方面，本申请实施例提供一种电子设备，包括处理器、存储器、通信接口以及一个或多个程序，其中，所述一个或多个程序被存储在所述存储器中，并且被配置由所述处理器执行，所述程序包括用于执行本申请实施例第一方面任一方法中的步骤的指令。

第四方面，本申请实施例提供了一种芯片，包括：处理器，用于从存储器中调用并运行计算机程序，使得安装有所述芯片的设备执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。

第五方面，本申请实施例提供了一种计算机可读存储介质，其中，所述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，所述计算机程序使得计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。

第六方面，本申请实施例提供了一种计算机程序，其中，所述计算机程序可操作来使计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。该计算机程序可以为一个软件安装包。

可见，本示例中，电子设备首先显示第一页面内容，其次，检测用户的第一手势，确定与所述第一手势适配的参考手势，然后，检测用户的第二手势，接着，若检测到所述第二手势为所述参考手势中的手势，则根据所述第一手势和所述第二手势确定针对所述第一页面内容的预设操作的操作距离和操作速度，最后，对所述第一页面内容按照所述操作距离和所述操作速度执行所述预设操作。由于在检测到用户的第一手势和第二手势时，可以根据第一手势和第二手势确定用户手势的滑动幅度和滑动距离，进而确定适配用户滑动手势的预设操作以及预设操作的操作距离和操作速度，从而可以按照操作距离和操作速度对第一页面显示内容执行预设操作，有利于帮助用户通过手势操作实现对屏幕页面显示内容的智能控制。

附图说明

下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。

图1A是本申请实施例提供的一种电子设备10的结构方框图；

图1B是本申请实施例提供的一种设置有Android系统的软硬件系统的架构示意图；

图1C是本申请实施例提供的一种电子设备10的架构图；

图2A是本申请实施例提供的一种页面控制方法的流程示意图；

图2B是本申请实施例提供的一种第一手势和第二手势的参考示意图；

图2C是本申请实施例提供的另一种第一手势和第二手势的参考示意图；

图2D是本申请实施例提供的一种第一页面内容下滑的参考示意图；

图2E是本申请实施例提供的一种第一页面内容上滑的参考示意图；

图3是本申请实施例提供的一种页面控制装置的功能单元组成框图；

图4是本申请实施例提供的另一种页面控制装置的功能单元组成框图。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。

在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。

请参考图1A，其示出了本申请一个示例性实施例提供的电子设备10的结构方框图。该电子设备10可以是具备通信能力的电子设备，该电子设备可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其他处理设备，以及各种形式的用户设备(User Equipment，UE)，移动台(Mobile Station，MS)，电子设备(terminal device)等等。本申请中的电子设备10可以包括一个或多个如下部件：处理器110、存储器120和输入输出装置130。

处理器110可以包括一个或者多个处理核心。处理器110利用各种接口和线路连接整个电子设备10内的各个部分，通过运行或执行存储在存储器120内的指令、程序、代码集或指令集，以及调用存储在存储器120内的数据，执行电子设备10的各种功能和处理数据。处理器110可以包括一个或多个处理单元，例如：处理器110可以包括中央处理器(CentralProcessing Unit，CPU)、应用处理器(application processor，AP)、调制解调处理器、图形处理器(graphics processing unit，GPU)、图像信号处理器(image signal processor，ISP)、控制器、视频编解码器、数字信号处理器(digital signal processor，DSP)、基带处理器，和/或神经网络处理器(neural-network processing unit，NPU)等。其中，控制器可以是电子设备10的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号，产生操作控制信号，完成取指令和执行指令的控制。CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示内容的渲染和绘制；调制解调器用于处理无线通信。数字信号处理器用于处理数字信号，除了可以处理数字图像信号，还可以处理其他数字信号。NPU为神经网络(neural-network，NN)计算处理器，通过借鉴生物神经网络结构，例如借鉴人脑神经元之间传递模式，对输入信息快速处理，还可以不断的自学习。通过NPU可以实现电子设备10的智能认知等应用，例如：图像识别，人脸识别，语音识别，文本理解等。处理器110中可以设置存储器，用于存储指令和数据。在一些实施例中，处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据，可从所述存储器中直接调用。避免重复存取，减少处理器110的等待时间，提高系统效率。

可以理解的是，上述处理器110在实际产品中可以映射为系统级芯片(System ona Chip，SOC)，上述处理单元和/或接口也可以不集成到处理器110中，单独通过一块通信芯片或者电子元器件实现对应的功能。上述各模块间的接口连接关系，只是示意性说明，并不构成对电子设备10的结构的唯一限定。

存储器120可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。可选地，该存储器120包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器120可用于存储指令、程序、代码、代码集或指令集。存储器120可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等，该操作系统可以是安卓(Android)系统(包括基于Android系统深度开发的系统)、苹果公司开发的IOS系统(包括基于IOS系统深度开发的系统)或其它系统。存储数据区还可以存储电子设备10在使用中所创建的数据(比如电话本、音视频数据、聊天记录数据)等。

电子设备10的软件系统可以采用分层架构，事件驱动架构，微核架构，微服务架构，或云架构。本申请实施例以分层架构的Android系统和IOS系统为例，示例性说明电子设备10的软件架构。

如图1B所示的设置有Android系统的软硬件系统的架构示意图，存储器120中可存储有Linux内核层220、系统运行库层240、应用框架层260和应用层280，其中，层与层之间通过软件接口通信，Linux内核层220、系统运行库层240和应用框架层260属于操作系统空间。

应用层280属于用户空间，应用层280中运行有至少一个应用程序，这些应用程序可以是操作系统自带的原生应用程序，也可以是第三方开发者所开发的第三方应用程序，具体可以包括密码、眼球追踪、相机，图库，日历，通话，地图，导航，WLAN，蓝牙，音乐，视频，短信息等应用程序。

应用框架层260提供了构建应用层的应用程序可能用到的各种API，开发者也可以通过使用这些API来构建自己的应用程序，比如窗口管理器、内容提供器、视图系统、电话管理器、资源管理器、通知管理器、消息管理器、活动管理器、包管理器、定位管理。窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕等。内容提供器用来存放和获取数据，并使这些数据可以被应用程序访问。所述数据可以包括视频，图像，音频，拨打和接听的电话，浏览历史和书签，电话簿等。视图系统包括可视控件，例如显示文字的控件，显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如，包括短信通知图标的显示界面，可以包括显示文字的视图以及显示图片的视图。电话管理器用于提供电子设备10的通信功能。例如通话状态的管理(包括接通，挂断等)。资源管理器为应用程序提供各种资源，比如本地化字符串，图标，图片，布局文件，视频文件等等。通知管理器使应用程序可以在状态栏中显示通知信息，可以用于传达告知类型的消息，可以短暂停留后自动消失，无需用户交互。比如通知管理器被用于告知下载完成，消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知，例如后台运行的应用程序的通知，还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息，发出提示音，电子设备振动，指示灯闪烁等。消息管理器可用于存储各个APP上报的消息的数据，并对各个APP上报的数据进行处理。

系统运行库层240通过一些C/C++库来为Android系统提供了主要的特性支持。如SQLite库提供了数据库的支持，OpenGL/ES库提供了3D绘图的支持，Webkit库提供了浏览器内核的支持等。在系统运行库层240中还提供有安卓运行时库(Android Runtime)，它主要提供了一些核心库，能够允许开发者使用Java语言来编写Android应用。

Linux内核层220为电子设备10的各种硬件提供了底层的驱动，如显示驱动、音频驱动、摄像头驱动、蓝牙驱动、Wi-Fi驱动、电源管理等。

应理解，本申请实施例所述的界面显示方法既可以应用于安卓系统，也可以应用于其他操作系统，如IOS系统等，此处仅以安卓系统为例进行说明，但不构成限定。

下面结合图1C对目前常见的电子设备形态进行详细说明，可以理解的是，本申请实施例示意的结构并不构成对电子设备10的具体限定。在本申请另一些实施例中，电子设备10可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实现。

请参考图1B，本申请实施例提供了一种电子设备10，该电子设备10包括第一图像传感器100、相机串行接口解码器200、图像信号处理器300、数字信号处理器400和第二图像传感器500，所述图像信号处理器300包括轻量图像前端310和图像前端320，其中，所述第一图像传感器100连接所述相机串行接口解码器200，所述相机串行接口解码器200连接所述图像信号处理器300的所述轻量图像前端310，所述轻量图像前端310连接所述数字信号处理器400；

所述数字信号处理器400用于通过所述相机串行接口解码器200、所述轻量图像前端310接收来自所述第一图像传感器100采集的第一手势图和第二手势图的图像数据，以及调用手势识别模型对所述第一手势和第二手势进行手势识别，并确定所述第一手势切换到所述第二手势时对应的操作距离和操作速度，所述图像前端320用于传输所述电子设备10的第二图像传感器500所采集的图像数据，或者，所述图像前端320用于传输所述第一图像传感器100所采集的所述第一手势图和第二手势图的图像数据。

其中，所述第二图像传感器500在图1B中通过虚线框表示为可选实现方式。

其中，所述第一手势图和第二手势图的图像数据可以是MIPI RAW图像数据，也可以是YUV图像数据。

其中，所述手势识别模型用于根据输入的手势图输出得到该手势图的手势位置信息和手势类别信息。需要注意的是，虽然第一图像传感器100通过图像信号处理器300的轻量图像前端310传输第一手势图和第二手势图的图像数据，但图像信号处理器300并不会对该第一手势图和第二手势图的图像数据进行进一步处理，图像信号处理器300仅会对通过图像前端320传输的图像数据。并且，由于轻量图像前端310只是负责接口输入，并不做其它的事情，所以它的功耗相对于启用图像前端320传输图像数据(此种情况需要启用图像信号处理器300的其他模块进行图像数据的处理)的现有方案相对更低。

其中，所述第一图像传感器100可以是低功耗图像感应器，所述第二图像传感器500可以是前置摄像头中的图像感应器，所述电子设备通过所述第一图像传感器100实现基于情境感知的应用功能包括以下至少一种：

1.隐私保护，例如社交应用程序APP来了女朋友的新消息，银行发来工资到账新短信，其中的隐私信息不希望他人看到，电子设备通过第一图像传感器100能够检测到陌生人的人眼注视户主手机屏幕时黑屏等。

2.隔空操作，用户正在做饭，将手机放在一旁查看菜谱，这时有重要电话打入，而用户手上满是油污，不便直接操作手机，电子设备通过第一图像传感器100能够检测到用户的隔空手势并执行该隔空手势对应的操作。

3.注视不灭屏，看菜谱或看电子书,常有一页会让人认真地反复阅读,不一会就到了快要自动灭屏的时间，电子设备通过第一图像传感器100能够检测到户主用户仍然注视着屏幕，则不启用自动灭屏功能。

目前，通过手势操作可以对电子设备执行预设操作，例如在用户浏览屏幕时，通过手势操作实现屏页面的向上滑动和向下滑动，但是现有技术中，屏幕的上滑和下滑都是滑动指定的距离，没有感知到用户滑动的速度，不能智能的进行滑动距离的动态调整以及滑动速度的动态调整，本申请提出一种利用手势识别实现页面控制的方法，通过识别用户在手势滑动操作已经手势滑动操作过程中的手势滑动距离和手势滑动速度，评估出页面需要滑动的距离，从而用户可以通过控制手势滑动速度的快慢动态的智能调整页面的滑动快慢以及滑动距离。

针对上述问题，本申请实施例提出一种页面控制方法，下面结合附图进行详细说明。

请参阅图2A，图2A是本申请实施例提供的一种页面控制方法的流程示意图，如图所示，该方法包括：

步骤201、电子设备显示第一页面内容。

其中，第一页面内容可以是电子设备系统页面显示的内容，也可以是应用页页面显示的内容，应用页面可以是游戏应用页面、社交应用页面、视频应用页面等页面，此处不作任何限定。由于电子设备包括第一图像传感器，通过第一图像传感器可以实时获取用户的操作手势，从而用户可以通过不同的操作手势实现对第一页面内容的操作。

步骤202、电子设备检测用户的第一手势，确定与所述第一手势适配的参考手势。

其中，用户可以通过手势操作实现对第一页面内容进行预设操作，电子设备在通过第一图像传感器检测到用户的第一手势时，首先确定与第一手势适配的参考手势，从而在检测到参考手势后即可执行预设操作。电子设备可以通过训练后的手势识别模型来识别第一手势，在检测到第一手势时，先通过第一图像传感器获取第一手势的第一手势图，将第一手势图输入训练后的手势识别模型，便可输出得到第一手势的手势类别信息和手势位置信息，从而再进一步确定第一手势适配的参考手势。

在本可能的示例中，所述方法还包括：将训练集中的多张手势图输入初始手势识别模型，所述训练集包括多张手势图以及所述多张手势图的标准手势位置、标准手势类别，所述多张手势图是在预设的多种场景下拍摄得到的；调整所述初始手势识别模型中的各项参数，得到所述训练后的手势识别模型，所述训练后的手势识别模型输出的所述多张手势图的手势位置、手势类别和所述多张手势图的标准手势位置、标准手势类别匹配。

其中，在实施本申请提供的页面控制方法之前，需要先对初始手势识别模型进行训练，具体训练包括将训练集中的多张手势图输入初始手势识别模型中，训练集包括多张手势图以及多张手势图的标准手势位置信息，标准手势类别信息，手势位置信息包括手部的多个部位的位置信息，例如每个手指、手掌、手背的位置信息或者其多个特征点的位置信息。手势类别信息包括的手势类别有手掌和手背两个类别，主要用于识别当前手势为手掌还是手背。

其中，手势识别模型例如可以是CNN网络模型，基于SSD网络模型进行修改，原始SSD网络模型基于vgg16 backbone网络的基础上，通过将backbone修改为mobilenetv1网络模型，在网络模型满足精度要求的情况下，大幅度提升模型的运行速度，在训练过程中，采用了softmax loss和facal loss进行联合训练，经过反复验证和训练，可以使手势识别网络模型的精度和速度得意提升。使用训练集中的训练数据经过反复迭代训练数据可以得到识别精度非常高的手势识别模型，在CNN模型结构设计方便，通过裁减模型，优化网模型，可以使模型以非常低的macs来实现在手机端的快速运行，此外，训练集中的多张手势图为在多种预设场景下采集到的，例如在强光、黑暗、室外、室内等多种场景下采集多张手势图对初始手势识别模型进行训练，从而训练后的手势识别模型可以在多种场景下都有很高的检测精度。

可见，本实例中，由于预先采集了在多种场景下获取到的手势图作为训练集以对初始手势识别模型进行训练，从而训练后的手势识别模型可以在多种场景下都可以准确识别到用户当前的手势，通过训练后的手势识别模型可以检测用户的第一手势，并且得到第一手势的手势位置信息和手势类别信息，从而可以确定与第一手势适配的参考手势。

在本可能的示例中，所述确定与所述第一手势适配的参考手势，包括：获取所述第一手势的第一手势图；将所述第一手势图输入所述训练后的手势识别模型，得到所述第一手势的手势类别信息；根据所述手势类别信息确定所述第一手势为手掌手势时，确定与所述第一手势适配的参考手势为手背手势；或者，根据所述手势类别信息确定所述第一手势为手背手势时，确定与所述第一手势适配的参考手势为手掌手势。

其中，手势类别包括手掌和手势，通过第一图像传感器获取第一手势的第一手势图，将第一手势图输入训练后的手势识别模型，由手势识别模型来识别第一手势图是手掌图像还是手背图像，训练后的手势识别模型输出第一手势的手势类别信息，根据手势类别信息确定第一手势为手掌手势时，则与第一手势适配的参考手势为手背手势，或者，根据手势类别信息确定第一手势为手背手势时，则与第一手势适配的参考手势为手掌手势。

可见，本示例中，获取第一手势的第一手势图，将第一手势图输入训练后的手势识别模型，即可确定第一手势的类别，即第一手势时手掌手势还是手背手势，从而，确地与第一手势适配的参考手势，第一手势和参考手势为不同的手势，当第一手势为手掌手势时，参考手势则为手背手势，第一手势为手背手势时，参考手势为手掌手势。

在本可能的示例中，所述第一手势包括时序在前的预备手势和时序在后的确认手势；所述检测用户的第一手势之后，以及确定与所述第一手势适配的参考手势，所述方法还包括：获取所述第一手势的预备手势关联的操作指令集合，所述操作指令集合包括所述预设操作指令；确定所述预备手势关联的确认手势集合；在检测到所述第一手势的确认手势为所述确认手势集合中的手势，且所述确认手势关联的是预设操作指令时，确定所述第一手势为有效手势。

其中，第一手势包括时序在前的预备手势和时序在后的确认手势，在检测到用户的第一手势之后，首先获取第一手势的预设手势关联的操作指令集合，操作指令集合中包括预设操作指令，其次确定预备手势关联的确认手势集合，如果检测到第一手势的确认手势为确认手势集合中的手势，且确认手势关联的预设操作指令时，就可以执行第一手势为有效手势，进而继续手势识别的完整过程。

举例说明，第一手势包括预设手势和确认手势，预备手势和确认手势可以是相同的手势，例如都是手掌手势或者手背手势，预备手势和确认手势也可以是不同的手势，例如预设手势是对着屏幕比二，确认手势是手掌手势，第一手势的预备手势关联的操作指令集合中，包括预设操作指令，预设手势还关联后确认手势集合，只有在预备手势之后检测到确认手势集中的手势时，电子设备才会做出一定的响应，确认手势集合中的不同手势可以实现不同的功能，例如滑动屏幕，切换应用，退出应用界面，打开相机的摄像头等操作，在检测到第一手势的确认手势时确认手势集合中的手势，且确认手势关联的预设操作指令时，即可确定第一手势为有效手势。

步骤203、电子设备检测用户的第二手势。

其中，通过第一图像传感器可以获取第二手势的第二手势图，通过手势识别模型可以识别出第二手势，在检测到第二手势时，若第二手势和第一手势的参考手势匹配时，即可执行针对第一页面内容的预设操作，预设操作包括向上滑动第一页面内容和向下滑动第一页面内容。

在本可能的示例中，所述方法还包括：在检测到所述第一手势为手掌手势，所述第二手势为手背手势时，确定所述预设操作为控制显示屏向下滑动所述第一页面内容；或者，在检测到所述第一手势为手背手势，所述第二手势为手掌手势时，确定所述预设操作为控制显示屏向上滑动所述第一页面内容。

其中，电子设备在检测到用户手势为手掌下滑的得到手背时，一般执行页面下滑操作，在检测到用户手势为手背上滑得到手掌时，一般执行页面上话操作。如图2B和图2C所示，为用户视角下的第一手势和第二手势操作图，由于第一手势时序在前，第二手势时序在后，因此，在检测到第一手势为手掌手势，第二手势为手背手势时，表明用户的手势滑动是手掌下滑得到手背，此时需要执行的预设操作为控制显示屏向下滑动第一页面内容，在检测到第一手势为手背手势，第二手势为手掌手势时，表明用户的手势滑动是手背上滑得到手掌此时需要执行的预设操作为控制显示屏向上滑动第一页面内容。

可见，本实例中，用户的滑动手势组合为第一手势加第二手势，在确定的第一手势后，只要在检测到和第一手势的参考手势匹配的第二手势时，即可执行预设操作，第一手势和第二手势的组合决定了预设操作是向上滑动屏幕还是向下滑动屏幕，从而实现对第一页面内容的滑动显示。

步骤204、电子设备若检测到所述第二手势为所述参考手势中的手势，则根据所述第一手势和所述第二手势确定针对所述第一页面内容的预设操作的操作距离和操作速度。

其中，在检测到第二手势为第一手势适配的参考手势时，则进一步根据第一手势和第二手势确定针对第一页面的预设操作以及操作距离和操作速度。即根据第一手势和第二手势确定用户从手掌滑动到手背的距离，或者用户为手背滑动到手掌的距离，以及滑动的速度。

在本可能的示例中，所述根据所述第一手势和所述第二手势确定针对所述第一页面内容的预设操作的操作距离和操作速度，包括：确定检测到所述第一手势的第一时刻和检测到所述第二手势的第二时刻之间的间隔时长；将所述第一手势的第一手势图和所述第二手势的第二手势图，分别输入所述训练后的手势识别模型，得到所述第一手势图的第一手势位置信息，以及所述第二手势图的第二手势位置信息；根据所述第一手势位置信息和所述第二手势位置信息，确定所述预设操作对应的操作距离；根据所述操作距离和所述间隔时长，确定所述操作速度。

其中，先确定检测到第一手势的第一时刻和检测到第二手势的第二时刻，再确定第一时刻和第二时刻之间的间隔时长，第一时刻可以是AON拍摄到第一手势图的时间，第二时刻可以是AON拍摄到第二手势图的时间，将第一手势图和第二手势图输入手势识别模型后，可以得到第一手势图的第一手势位置信息，以及第二手势图的第二手势位置信息，根据第一手势位置信息和第二手势位置信息，可以确定预设操作的操作距离，从而根据操作距离和间隔时长，确定操作速度。

其中，手势位置信息包括用户手部多个特征部位在手势图中的位置，通过对比特定部位，例如中指指尖位置在第一手势图和第二手势图中的位置，确定中指的滑动距离，从而根据滑动距离确定操作距离。其中操作距离和页面滑动举例可以是一比一的关系，可以是手势一次的滑动对应显示屏一页的滑动，同理，用户手势滑动速度和屏幕页面滑动速度可以是一对一关系，也可以是指定的比例关系。

可见，本示例中，通过检测到的第一手势和第二手势，确定用户手势操作对应的滑动距离和滑动速度，从而根据用户手势的滑动距离和滑动速度确定预设操作的操作距离和操作速度，有利于帮助用户通过手势操作实现对页面的智能控制。

在本可能的示例中，所述根据所述第一手势位置信息和所述第二手势位置信息，确定所述预设操作对应的操作距离，包括：从所述第一手势图中选取用户手部的多个特征点，并从所述第一手势位置信息中获取所述多个特征点在所述第一手势图中的第一位置信息；从所述第二手势位置信息中获取所述多个特征点在所述第二手势图中的第二位置信息；根据所述第一位置信息和所述第二位置信息，计算用户手部从所述第一手势滑动到所述第二手势时对应的滑动幅度；根据所述滑动幅度确定所述操作距离。

其中，从第一手势图中选取用户手部的多个特征点，例如可以是某根手指上的多个特征点，或者是五根手势上的多个特征点，先从第一手势位置信息中获取这多个特征点的第一位置信息，再从第二手势位置信息中获取这多个特征点的第二位置信息，由于用户的手势操作是从第一手势滑动到第二手势，因此通过对比多个特征点在第一手势图中的位置，以及在第二手势图中的位置，可以确定用户手势滑动的距离，具体视线中，分别确定多个特征点中每个特征点在滑动距离，再求平均值，记得得到用户手部的滑动距离，根据用户手部的滑动距离确定操作距离。

步骤205、电子设备对所述第一页面内容按照所述操作距离和所述操作速度执行所述预设操作。

其中，预设操作包括向上滑动第一页面内容和向下滑动第一页面内容，在滑动第一页面内容的过程中，按照操作距离和操作速度执行滑动操作，操作距离和操作速度适合用户手势的滑动幅度以及滑动速度适配的，因此，用户可以通过手势滑动智能的调整屏幕页面的滑动。如图2D和图2E所示，为本申请提供的一种页面滑动的参考示例图，可见，用户通过手势操作实现了的第一页面内容的下滑和上滑，同时可以通过手势的滑动速度和距离来控制第一页面内容的滑动速度和滑动距离。

可见，本示例中，电子设备首先显示第一页面内容，其次，检测用户的第一手势，确定与所述第一手势适配的参考手势，然后，检测用户的第二手势，接着，若检测到所述第二手势为所述参考手势中的手势，则根据所述第一手势和所述第二手势确定针对所述第一页面内容的预设操作的操作距离和操作速度，最后，对所述第一页面内容按照所述操作距离和所述操作速度执行所述预设操作。由于在检测到用户的第一手势和第二手势时，可以根据第一手势和第二手势确定用户手势的滑动幅度和滑动距离，进而确定适配用户滑动手势的预设操作以及预设操作的操作距离和操作速度，从而可以按照操作距离和操作速度对第一页面显示内容执行预设操作，有利于帮助用户通过手势操作实现对屏幕页面显示内容的智能控制。

本申请实施例提供一种页面控制装置，该页面控制装置可以为电子设备。具体的，页面控制装置用于执行以上页面控制方法中电子设备所执行的步骤。本申请实施例提供的页面控制装置可以包括相应步骤所对应的模块。

本申请实施例可以根据上述方法示例对页面控制装置进行功能模块的划分，例如，可以对应各个功能划分各个功能模块，也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。本申请实施例中对模块的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。

在采用对应各个功能划分各个功能模块的情况下，图3示出上述实施例中所涉及的页面控制装置的一种可能的结构示意图。如图3所示，页面控制装置包括显示单元30、检测单元31、确定单元32和处理单元33，

所述显示单元30，用于显示第一页面内容；

所示检测单元31，用于检测用户的第一手势，确定与所述第一手势适配的参考手势；

所述检测单元31，还用于检测用户的第二手势；

所述确定单元32，用于若检测到所述第二手势为所述参考手势中的手势，则根据所述第一手势和所述第二手势确定针对所述第一页面内容的预设操作的操作距离和操作速度；

所示处理单元33，用于对所述第一页面内容按照所述操作距离和所述操作速度执行所述预设操作。

可见，本示例中，电子设备首先显示第一页面内容，其次，检测用户的第一手势，确定与所述第一手势适配的参考手势，然后，检测用户的第二手势，接着，若检测到所述第二手势为所述参考手势中的手势，则根据所述第一手势和所述第二手势确定针对所述第一页面内容的预设操作的操作距离和操作速度，最后，对所述第一页面内容按照所述操作距离和所述操作速度执行所述预设操作。由于在检测到用户的第一手势和第二手势时，可以根据第一手势和第二手势确定用户手势的滑动幅度和滑动距离，进而确定适配用户滑动手势的预设操作以及预设操作的操作距离和操作速度，从而可以按照操作距离和操作速度对第一页面显示内容执行预设操作，有利于帮助用户通过手势操作实现对屏幕页面显示内容的智能控制。

在一个可能的示例中，所述处理单元33具体用于：将训练集中的多张手势图输入初始手势识别模型，所述训练集包括多张手势图以及所述多张手势图的标准手势位置信息、标准手势类别信息，所述多张手势图是在预设的多种场景下拍摄得到的；以及用于调整所述初始手势识别模型中的各项参数，得到所述训练后的手势识别模型，所述训练后的手势识别模型输出的所述多张手势图的手势位置信息、手势类别信息和所述多张手势图的标准手势位置信息、标准手势类别信息匹配。

在一个可能的示例中，在所述确定与所述第一手势适配的参考手势方面，所述检测单元31具体用于：获取所述第一手势的第一手势图；以及用于将所述第一手势图输入所述训练后的手势识别模型，得到所述第一手势的手势类别信息；以及用于根据所述手势类别信息确定所述第一手势为手掌手势时，确定与所述第一手势适配的参考手势为手背手势；或者，根据所述手势类别信息确定所述第一手势为手背手势时，确定与所述第一手势适配的参考手势为手掌手势。

在一个可能的示例中，所述检测单元31具体用于：在检测到所述第一手势为手掌手势，所述第二手势为手背手势时，确定所述预设操作为控制显示屏向下滑动所述第一页面内容；或者，在检测到所述第一手势为手背手势，所述第二手势为手掌手势时，确定所述预设操作为控制显示屏向上滑动所述第一页面内容。

在一个可能的示例中，所述第一手势包括时序在前的预备手势和时序在后的确认手势；所述检测用户的第一手势之后，以及确定与所述第一手势适配的参考手势之前，所述检测单元31具体用于：获取所述第一手势的预备手势关联的操作指令集合，所述操作指令集合包括所述预设操作指令；以及用于确定所述预备手势关联的确认手势集合；以及用于在检测到所述第一手势的确认手势为所述确认手势集合中的手势，且所述确认手势关联的是预设操作指令时，确定所述第一手势为有效手势。

在一个可能的示例中，在所述根据所述第一手势和所述第二手势确定针对所述第一页面内容的预设操作的操作距离和操作速度方面，所述确定单元32具体用于：确定检测到所述第一手势的第一时刻和检测到所述第二手势的第二时刻之间的间隔时长；以及用于将所述第一手势的第一手势图和所述第二手势的第二手势图，分别输入所述训练后的手势识别模型，得到所述第一手势图的第一手势位置信息，以及所述第二手势图的第二手势位置信息；以及用于根据所述第一手势位置信息和所述第二手势位置信息，确定所述预设操作对应的操作距离；以及用于根据所述操作距离和所述间隔时长，确定所述操作速度。

在一个可能的示例中，在所述根据所述第一手势位置信息和所述第二手势位置信息，确定所述预设操作对应的操作距离方面，所述确定单元32具体用于：从所述第一手势图中选取用户手部的多个特征点，并从所述第一手势位置信息中获取所述多个特征点在所述第一手势图中的第一位置信息；以及用于从所述第二手势位置信息中获取所述多个特征点在所述第二手势图中的第二位置信息；以及用于根据所述第一位置信息和所述第二位置信息，计算用户手部从所述第一手势滑动到所述第二手势时对应的滑动幅度；以及用于根据所述滑动幅度确定所述操作距离。

其中，上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述，在此不再赘述。

在采用集成的单元的情况下，本申请实施例提供的页面控制装置的结构示意图如图4所示。在图4中，页面控制装置4包括：处理模块40和通信模块41。处理模块40用于对页面控制装置的动作进行控制管理，例如，显示单元30、检测单元31、确定单元32和处理单元33所执行的步骤，和/或用于执行本文所描述的技术的其它过程。通信模块41用于支持页面控制装置与其他设备之间的交互。如图4所示，页面控制装置还可以包括存储模块42，存储模块42用于存储页面控制装置的程序代码和数据，例如存储上述检测单元31计算的角度值。

其中，处理模块40可以是处理器或控制器，例如可以是中央处理器(CentralProcessing Unit，CPU)，通用处理器，数字信号处理器(Digital Signal Processor，DSP)，ASIC，FPGA或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。所述处理器也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等等。通信模块41可以是收发器、RF电路或通信接口等。存储模块42可以是存储器。

其中，上述方法实施例涉及的各场景的所有相关内容均可以援引到对应功能模块的功能描述，在此不再赘述。上述页面控制装置3和页面控制装置4均可执行上述图2A所示的页面控制方法中电子设备所执行的步骤。

本申请实施例还提供了一种芯片，其中，该芯片包括处理器，用于从存储器中调用并运行计算机程序，使得安装有所述芯片的设备执行如上述方法实施例中电子设备所描述的部分或全部步骤。

本申请实施例还提供了一种计算机可读存储介质，其中，所述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，所述计算机程序使得计算机执行如上述方法实施例中电子设备所描述的部分或全部步骤。

本申请实施例还提供了一种计算机可读存储介质，其中，所述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，所述计算机程序使得计算机执行如上述方法实施例中网络侧设备所描述的部分或全部步骤。

本申请实施例还提供了一种计算机程序产品，其中，所述计算机程序产品包括计算机程序，所述计算机程序可操作来使计算机执行如上述方法实施例中电子设备所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。

本申请实施例所描述的方法或者算法的步骤可以以硬件的方式来实现，也可以是由处理器执行软件指令的方式来实现。软件指令可以由相应的软件模块组成，软件模块可以被存放于随机存取存储器(Random Access Memory，RAM)、闪存、只读存储器(Read OnlyMemory，ROM)、可擦除可编程只读存储器(Erasable Programmable ROM，EPROM)、电可擦可编程只读存储器(Electrically EPROM，EEPROM)、寄存器、硬盘、移动硬盘、只读光盘(CD-ROM)或者本领域熟知的任何其它形式的存储介质中。一种示例性的存储介质耦合至处理器，从而使处理器能够从该存储介质读取信息，且可向该存储介质写入信息。当然，存储介质也可以是处理器的组成部分。处理器和存储介质可以位于ASIC中。另外，该ASIC可以位于接入网设备、目标网络设备或核心网设备中。当然，处理器和存储介质也可以作为分立组件存在于接入网设备、目标网络设备或核心网设备中。

本领域技术人员应该可以意识到，在上述一个或多个示例中，本申请实施例所描述的功能可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DigitalSubscriber Line，DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如，软盘、硬盘、磁带)、光介质(例如，数字视频光盘(DigitalVideo Disc，DVD))、或者半导体介质(例如，固态硬盘(Solid State Disk，SSD))等。

以上所述的具体实施方式，对本申请实施例的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本申请实施例的具体实施方式而已，并不用于限定本申请实施例的保护范围，凡在本申请实施例的技术方案的基础之上，所做的任何修改、等同替换、改进等，均应包括在本申请实施例的保护范围之内。

Claims (10)

1.一种页面控制方法，其特征在于，应用于电子设备，所述方法包括：

显示第一页面内容；

检测用户的第一手势，确定与所述第一手势适配的参考手势；

检测用户的第二手势；

若检测到所述第二手势为所述参考手势中的手势，则根据所述第一手势和所述第二手势确定针对所述第一页面内容的预设操作的操作距离和操作速度；

对所述第一页面内容按照所述操作距离和所述操作速度执行所述预设操作。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

将训练集中的多张手势图输入初始手势识别模型，所述训练集包括多张手势图以及所述多张手势图的标准手势位置信息、标准手势类别信息，所述多张手势图是在预设的多种场景下拍摄得到的；

调整所述初始手势识别模型中的各项参数，得到所述训练后的手势识别模型，所述训练后的手势识别模型输出的所述多张手势图的手势位置信息、手势类别信息和所述多张手势图的标准手势位置信息、标准手势类别信息匹配。

3.根据权利要求1或2所述的方法，其特征在于，所述确定与所述第一手势适配的参考手势，包括：

获取所述第一手势的第一手势图；

将所述第一手势图输入所述训练后的手势识别模型，得到所述第一手势的手势类别信息；

根据所述手势类别信息确定所述第一手势为手掌手势时，确定与所述第一手势适配的参考手势为手背手势；或者，

根据所述手势类别信息确定所述第一手势为手背手势时，确定与所述第一手势适配的参考手势为手掌手势。

4.根据权利要求3所述的方法，其特征在于，所述方法还包括：

在检测到所述第一手势为手掌手势，所述第二手势为手背手势时，确定所述预设操作为控制显示屏向下滑动所述第一页面内容；或者，

在检测到所述第一手势为手背手势，所述第二手势为手掌手势时，确定所述预设操作为控制显示屏向上滑动所述第一页面内容。

5.根据权利要求1或2所述的方法，其特征在于，所述第一手势包括时序在前的预备手势和时序在后的确认手势；所述检测用户的第一手势之后，以及确定与所述第一手势适配的参考手势之前，所述方法还包括：

获取所述第一手势的预备手势关联的操作指令集合，所述操作指令集合包括所述预设操作指令；

确定所述预备手势关联的确认手势集合；

在检测到所述第一手势的确认手势为所述确认手势集合中的手势，且所述确认手势关联的是预设操作指令时，确定所述第一手势为有效手势。

6.根据权利要求1或2所述的方法，其特征在于，所述根据所述第一手势和所述第二手势确定针对所述第一页面内容的预设操作的操作距离和操作速度，包括：

确定检测到所述第一手势的第一时刻和检测到所述第二手势的第二时刻之间的间隔时长；

将所述第一手势的第一手势图和所述第二手势的第二手势图，分别输入所述训练后的手势识别模型，得到所述第一手势图的第一手势位置信息，以及所述第二手势图的第二手势位置信息；

根据所述第一手势位置信息和所述第二手势位置信息，确定所述预设操作对应的操作距离；

根据所述操作距离和所述间隔时长，确定所述操作速度。

7.根据权利要求6所述的方法，其特征在于，所述根据所述第一手势位置信息和所述第二手势位置信息，确定所述预设操作对应的操作距离，包括：

从所述第一手势图中选取用户手部的多个特征点，并从所述第一手势位置信息中获取所述多个特征点在所述第一手势图中的第一位置信息；

从所述第二手势位置信息中获取所述多个特征点在所述第二手势图中的第二位置信息；

根据所述第一位置信息和所述第二位置信息，计算用户手部从所述第一手势滑动到所述第二手势时对应的滑动幅度；

根据所述滑动幅度确定所述操作距离。

8.一种页面控制装置，其特征在于，应用于电子设备，所述页面控制装置包括显示单元、检测定单元、确定单元和处理单元，

所述显示单元，用于显示第一页面内容；

所示检测单元，用于检测用户的第一手势，确定与所述第一手势适配的参考手势；

所述检测单元，还用于检测用户的第二手势；

所述确定单元，用于若检测到所述第二手势为所述参考手势中的手势，则根据所述第一手势和所述第二手势确定针对所述第一页面内容的预设操作的操作距离和操作速度；

所示处理单元，用于对所述第一页面内容按照所述操作距离和所述操作速度执行所述预设操作。

9.一种电子设备，其特征在于，包括处理器、存储器、通信接口，以及一个或多个程序，所述一个或多个程序被存储在所述存储器中，并且被配置由所述处理器执行，所述程序包括用于执行如权利要求1-7任一项所述的方法中的步骤的指令。

10.一种计算机可读存储介质，其特征在于，存储用于电子数据交换的计算机程序，其中，所述计算机程序使得计算机执行如权利要求1-7任一项所述的方法。

Images