CN108733193B - 智能调整帧率的方法、装置、存储介质及智能终端 - Google Patents

Abstract

本申请实施例公开了一种智能调整帧率的方法、装置、存储介质及智能终端。该方法包括检测针对前台运行的应用程序的第一触摸事件；在所述第一触摸事件由模拟事件触发时，根据所述第一触摸事件确定应用程序状态；根据所述应用程序状态选择几何体差异信息中各个维度的预设阈值；确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息，根据所述几何体差异信息与所述预设阈值调整图像处理模块执行渲染操作的帧率。采用上述技术方案，在挂机状态下调高几何体差异信息中各个维度的预设阈值，以减少送往图像处理模块的数据量，可以有效地降低智能终端的功耗。

Description

智能调整帧率的方法、装置、存储介质及智能终端

技术领域

本申请实施例涉及功率节省技术，尤其涉及一种智能调整帧率的方法、装置、存储介质及智能终端。

背景技术

目前，智能手机或平板电脑等智能终端因其在处理能力及功能上的优势，逐渐成为人们生活、工作及娱乐的必需品。

然而，随着智能终端上安装的应用程序的增加，在运行这些应用程序时的功耗成为影响智能终端的续航能力的一个重要因素。特别是游戏应用程序，其耗电量通常高于其它应用程序，相关技术中在智能终端运行游戏应用时，往往采用降低特效及解析度等方式来降低游戏功耗。但是，此种方式会对画面品质产生较大影响，亟待改进。

发明内容

本申请实施例提供一种智能调整帧率的方法、装置、存储介质及智能终端，可以优化智能终端的节能方案，进而，有效地降低智能终端的功耗。

第一方面，本申请实施例提供了一种智能调整帧率的方法，包括：

检测针对前台运行的应用程序的第一触摸事件；

在所述第一触摸事件由模拟事件触发时，根据所述第一触摸事件确定应用程序状态；

根据所述应用程序状态选择几何体差异信息中各个维度的预设阈值，其中，几何体差异信息至少包括如下三个维度：几何体变化量、位移量及缩放量；

确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息，根据所述几何体差异信息与所述预设阈值调整图像处理模块执行渲染操作的帧率。

第二方面，本申请实施例还提供了一种智能调整帧率的装置，该装置包括：

事件检测模块，用于检测针对前台运行的应用程序的第一触摸事件；

状态确定模块，用于在所述第一触摸事件由模拟事件触发时，根据所述第一触摸事件确定应用程序状态；

阈值调整模块，用于根据所述应用程序状态选择几何体差异信息中各个维度的预设阈值，其中，几何体差异信息至少包括如下三个维度：几何体变化量、位移量及缩放量；

帧率调整模块，用于确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息，根据所述几何体差异信息与所述预设阈值调整图像处理模块执行渲染操作的帧率。

第三方面，本申请实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述第一方面所述的智能调整帧率的方法。

第四方面，本申请实施例还提供了一种智能终端，包括存储器，处理器及存储在存储器上并可在处理器运行的计算机程序，所述处理器执行所述计算机程序时实现如上述第一方面所述的智能调整帧率的方法。

本申请实施例提供一种智能调整帧率的方案，通过检测针对前台运行的应用程序的第一触摸事件；在该第一触摸事件由模拟事件触发时，检测预设时间区间内的第二触摸事件，并根据第二模拟事件确定应用程序状态；根据该应用程序状态动态调整几何体差异信息中各个维度的预设阈值；确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息，根据该几何体差异信息与预设阈值调整图像处理模块执行渲染操作的帧率。采用上述技术方案，由触摸事件判定智能终端是否为挂机状态，并在挂机状态下调高几何体差异信息中各个维度的预设阈值，以减少送往图像处理模块的数据量，可以有效地降低智能终端的功耗。

附图说明

图1是本申请实施例提供的一种智能调整帧率的方法的流程图；

图2是本申请实施例提供的一种图像绘制流程的示意图；

图3是本申请实施例提供的另一种智能调整帧率的方法的流程图；

图4是本申请实施例提供的又一种智能调整帧率的方法的流程图；

图5是本申请实施例提供的一种智能调整帧率的装置的结构框图；

图6是本申请实施例提供的一种智能终端的结构示意图；

图7是本申请实施例提供的一种智能手机的结构框图。

具体实施方式

下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本申请，而非对本申请的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本申请相关的部分而非全部结构。

在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理，但是其中的许多步骤可以被并行地、并发地或者同时实施。此外，各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。

图1为本申请实施例提供的一种智能调整帧率的方法的流程图，本实施例可适用于游戏挂机状态下降低智能终端功耗的情况，该方法可以由智能调整帧率的装置来执行，其中，该装置可由软件和/或硬件实现，一般可集成于智能手机、平板电脑或掌上游戏机等智能终端中。如图1所示，该方法包括：

步骤110、检测针对前台运行的应用程序的第一触摸事件。

需要说明的是，前台运行的应用程序可以认为是在智能终端的触摸屏(即触摸显示屏)中显示的应用。由于应用程序切至后台通常会被冻结，不进行图像数据的绘制，暂不考虑后台运行的应用程序。

需要说明的是，用户针对前台运行的应用程序向智能终端输入触摸操作，智能终端由检测到的触摸操作触发触摸事件。触摸操作包括但不限于作用于触摸屏上的触摸操作，以及，通过体感技术检测到的触摸操作。由此可知，触摸事件可以由触摸屏触发，还可以由预设的体感检测传感器触发。在某些场景下，智能终端可以模拟触摸事件，以将该模拟的触摸事件输出至应用程序，从而控制应用程序执行该模拟的触摸事件对应的操作。例如，用户在玩游戏的过程中，因故需要暂时离开智能终端但又不想终止游戏，可以设置挂机功能，即采用设定程序模拟用户在游戏中的操作的技术。因此，触摸事件还可以由模拟事件触发。由模拟事件触发的触摸操作不是由触摸屏发出的，即未检测到触摸屏驱动上报按键信息。可以预先为触发触摸事件的主体定义预设标识。在触摸事件是由触摸屏上报时，为该触摸事件添加屏触发标识。在触摸事件由预设的体感检测传感器上报时，为该触摸事件添加体感触发标识。在触摸事件由模拟事件触发时，为该触摸事件添加模拟触发标识。

步骤120、在所述第一触摸事件由模拟事件触发时，根据所述第一触摸事件确定应用程序状态。

示例性的，在第一触摸事件由模拟事件触发时，确定前台运行的应用程序的状态为挂机状态。

为了提高准确度，避免频繁地进行预设阈值的切换，可以在第一触摸事件由模拟事件触发时，再检测其后预设时间区间内的第二触摸事件，并根据第二触摸事件是否由模拟事件触发的判定结果确定应用程序状态。

需要说明的是，第二触摸事件是在第一触摸事件是由模拟事件触发的前提下检测的触摸事件。也就是说，若第一触摸事件不是由模拟事件触发，则不检测第二触摸事件，从而不对默认的预设阈值进行调整。其中，默认的预设阈值可以是预设白名单中存储的几何体变化量阈值、位移量阈值及缩放量阈值。预设白名单中记录了设定数量的可以通过GIFT(Graphics Frame Rate Tuner，图形帧率调谐器)调整帧率的应用程序，以控制帧率调整降功耗功能的生效范围，避免对智能终端的画面显示产生较大影响。其中，GIFT通过判断帧与帧之间的变化量多少来判断场景为静态场景还是动态场景，从而使GPU可以自适应的调整帧率。

需要说明的是，应用程序状态包括挂机状态及非挂机状态(即未处于挂机状态)。

示例性的，若第一触摸事件由模拟事件触发，则启动计时器连续计时预设时间长度，在该预设时间长度内，检测触摸操作，将检测到的触摸操作触发的触摸事件记为第二触摸操作。例如，可以在检测到第一触摸事件由模拟事件触发时，启动计时器计时5秒钟，检测该5秒内的触摸操作。若检测到触摸操作，则将其触发的触摸事件记为第二触摸操作。

判断预设时间长度内检测到的第二触摸事件是否均由模拟事件触发，若是，则确定前台运行的应用程序处于挂机状态，否则，确定前台运行的应用程序未处于挂机状态。也就是说，若第二触摸事件均由模拟事件触发，则确定前台运行的应用程序处于挂机状态。若第二触摸事件均由触摸屏触发，或者部分由触摸屏触发，部分由体感检测传感器触发，则确定前台运行的应用程序未处于挂机状。

步骤130、根据所述应用程序状态选择几何体差异信息中各个维度的预设阈值。

需要说明的是，几何体差异信息至少包括如下三个维度：几何体变化量、位移量及缩放量。其中，几何体变化量(Geometry)，简称G-Value，包括几何体信息的变化量，例如，增加或减少顶点，以及增加或减少拓扑边界等。几何体信息存储于几何体类中，是点(0维)、线(1维)、面(2维)、体(3维)等维数(dim)不同的基本形状的集合。几何体类包括两个数组，一个存储顶点序号，另一个存储拓扑边界序号。位移量(Motion)，简称M-Value，包括几何体坐标的变化量。缩放量(Scale)，简称S-Value，包括几何体在触摸显示屏上投影的大小的变化量。

相应的，预设阈值至少包括如下三个维度：几何体变化量阈值、位移量阈值和缩放量阈值。对于几何体变化量阈值，其取值范围为0-1，且值越大，表示用户对相邻两帧之间的几何体变化量的接受程度越大，当前帧数据越可能被丢弃。对于位移量阈值，其取值范围为0-1，且值越大，表示用户对相邻两帧之间的物体移动变化量的接受程度越大，当前帧数据越可能被丢弃。对于缩放量阈值，其取值范围为0-1，且值越大，表示用户对相邻两帧之间的物体大小变化量的接受程度越大，当前帧数据越可能被丢弃。示例性的，可以将几何体变化量阈值记为预设第一阈值，将位移量阈值记为预设第二阈值，以及，将缩放量阈值记为预设第三阈值。

示例性的，可以预先设置两组预设阈值，规定第一组预设阈值在应用程序处于挂机状态时被启用，第二组预设阈值在应用程序处于非挂机状态时被启用，且第一组预设阈值的三个维度的取值中至少有一个大于第二组预设阈值中对应维度的取值。该预设阈值越大代表用户对相邻两帧之间的目标对象的变化的接受度越大，越容易丢弃帧数据，其中，目标对象包括几何体变化量、物体移动变化量以及物体大小变化量中至少一个维度。

若应用程序处于挂机状态，则调高几何体差异信息中各个维度的预设阈值。可以采用的方式是启用第一组预设阈值，以便于GIFT根据该第一组预设阈值进行绘制决策。

若检测到应用程序结束挂机状态，恢复非挂机状态，则恢复几何体差异信息中各个维度的预设阈值。可以采用的方式是切换至启用第二组预设阈值，以便于GIFT根据该第二组预设阈值进行绘制决策。

步骤140、确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息，根据所述几何体差异信息与所述预设阈值调整图像处理模块执行渲染操作的帧率。

示例性的，读取该图像数据包含的几何体信息。其中，所述几何体信息包括顶点信息和拓扑边界信息。对该几何体信息进行归一化处理得到第二几何体参数。需要说明的是，根据几何体信息可以确定几何体大小、坐标和形状。可以由图像数据中选择预设数量的目标几何体。例如，可以将游戏中玩家角色和非玩家角色对应的几何体标记为目标几何体。从而，读取图像数据包含的几何体信息可以是读取图像数据中玩家角色对应的第一几何体信息，以及非玩家角色对应的第二几何体信息。

以第一几何体信息为例，说明对几何体信息进行归一化处理的方式。根据第一几何体信息包括的顶点信息和拓扑边界信息确定玩家角色对应的几何体的分辨率，即横纵像素的数量。将玩家角色对应的几何体的分辨率除以该图像数据对应的目标图像的分辨率，实现对几何体信息G的归一化。类似的，根据第一几何体信息包括的顶点信息和拓扑边界信息确定玩家角色对应的几何体的分辨率，即横纵像素的数量。将玩家角色对应的几何体的分辨率除以触摸显示屏的分辨率，实现对缩放数据S的归一化。将触摸显示屏的左下角作为坐标原点，将显示区域在横向上的最远点标记为1得到横轴，并将显示区域在纵向上的最远点标记为1得到纵轴。根据第一几何体信息对应的玩家角色在目标图像中的位置将该玩家角色投影至触摸显示屏对应的坐标系中，使玩家角色对应的几何体的坐标取值在0至1之间，实现对位移数据M的归一化。将归一化后的G、M和S记为第二几何体参数。

需要说明的是，若几何体为非规则图形，则分别计算纵向平均长度和横向平均长度，并以该纵向平均长度为长边，该横向平均长度为短边，构建该非规则图形的几何体的内接矩形。以该内接矩形的分辨率代表游戏玩家对应的几何体的分辨率，采用上述类似方式执行归一化。

采用相邻两帧图像数据中几何体信息的归一化结果做差，得到几何体变化量G-Value。相似的，采用相邻两帧图像数据中位移数据的归一化结果做差，得到位移量M-Value。相似的，采用相邻两帧图像数据中缩放数据的归一化结果做差，得到缩放量S-Value。由于在获取待绘制的图像时，系统已经完成对相邻的上一帧画面的包含的几何体信息的归一化处理，所以，可以由预设缓存内获取该相邻的上一帧画面对应的第一几何体参数。其中，第一几何体参数包括几何体信息的归一化结果、位移数据的归一化结果和缩放数据的归一化结果。计算该第二几何体参数与该第一几何体参数的差值，作为几何体差异信息。

若几何体差异信息的各个维度的数值均小于预设阈值，则放弃调用图像处理模块对待绘制的图像数据进行绘制；若几何体差异信息的各个维度的数值中至少一个超过预设阈值，则调用图像处理模块对待绘制的图像数据进行绘制。图像处理模块可以是GPU。

若几何体变化量小于预设第一阈值、位移量小于预设第二阈值且缩放量小于预设第三阈值，则放弃调用图像处理模块对该图像数据进行绘制；否则，调用所述图像处理模块对该图像数据进行绘制。从而，实现实时调整图像处理模块执行渲染操作的帧率的效果。例如，前台运行的应用程序在上一秒中送入GIFT60帧图像数据，经绘制决策后，调用GPU进行绘制的图像数据是50帧，即帧率由60fps降低为50fps。

图2是本申请实施例提供的一种图像绘制流程的示意图。如图2所示，前台运行的应用程序准备待绘制的帧数据，在准备好一帧该帧数据时，主动推送至CPU。在CPU中内置GIFT(Graphics Frame Rate Tuner)模块，或者在CPU与GPU之间增加GIFT模块。CPU调用GIFT模块判断该帧数据与相邻的上一帧数据的几何体变化量G-Value是否小于预设第一阈值。若大于预设第一阈值，则通过OpenGL ES API及EGL调用GPU根据待绘制的帧数据绘制一帧目标图像，GPU将该目标图像送至触摸显示屏的显存(Frame Buffer)。若小于预设第一阈值，则进一步判断该帧数据与相邻的上一帧数据的位移量M-Value是否小于预设第二阈值。若大于预设第二阈值，则通过OpenGL ES API及EGL调用GPU根据待绘制的帧数据绘制一帧目标图像，GPU将该目标图像送至触摸显示屏的显存(Frame Buffer)。若小于预设第二阈值，则进一步判断该帧数据与相邻的上一帧数据的缩放量S-Value是否小于预设第三阈值。若大于预设第三阈值，则通过OpenGL ES API及EGL调用GPU根据待绘制的帧数据绘制一帧目标图像，GPU将该目标图像送至触摸显示屏的显存(Frame Buffer)。若小于预设第三阈值，则放弃调用GPU对该帧数据进行绘制，也就是说丢弃该帧数据，并控制GPU休眠一帧时间，以等待下一帧数据。实现休眠一帧的时间的方式可以是在eglSwapBuffer中休眠一帧的时间(即等待1个垂直同步信号Vsync时间)。由于eglSwapBuffer的接口实现是利用双缓冲进行Swap的时候，Front Display和Back Surface进行实际意义上的地址交换，下次屏幕刷新时，Front Display的内容会显示到触摸显示屏上。eglSwapBuffer中休眠一帧的时间也意味着，在丢弃一帧数据时，若检测到Vsync，暂不进行Swap操作，而在下一个Vsync到来时，执行Swap操作，交换Front Display和Back Surface的地址。其中，Back Surface是绘制目的地，可以看成是属于Frame Buffer上的一个内存块，也可以理解为一个本地窗口提供的显示内存块。

需要说明的是，Android系统在显示刷新的过程中引入了同步(Vsync)刷新机制。具体地，Vsync刷新机制其实就是在整个显示流程中，插入“心跳”即垂直同步(Vsync)信号，由显示控制器发送给CPU，用于产生Vsync中断，以控制每次图层绘制操作和图层合成操作都需要按照心跳来完成。

本实施例的技术方案，通过检测针对前台运行的应用程序的第一触摸事件；在该第一触摸事件由模拟事件触发时，检测预设时间区间内的第二触摸事件，并根据第二模拟事件确定应用程序状态；根据该应用程序状态动态选择几何体差异信息中各个维度的预设阈值；确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息，根据该几何体差异信息与预设阈值调整图像处理模块执行渲染操作的帧率，实现由触摸事件判定智能终端是否为挂机状态，并在挂机状态下调高几何体差异信息中各个维度的预设阈值，以减少送往图像处理模块进行渲染的数据量，可以有效地降低智能终端的功耗。

图3是本申请实施例提供的另一种智能调整帧率的方法的流程图。如图3所示，该方法包括：

步骤301、获取前台运行的应用程序的应用标识。

其中，应用标识是一个应用程序区别与其它应用程序的唯一标识，例如，应用标识可以是应用包名或进程名等。

在检测到应用程序启动，且在前台运行时，获取该应用程序的包名或进程名。

步骤302、根据所述应用标识判断所述应用程序是否属于预设白名单，若是，则执行步骤303，否则，执行步骤313。

需要说明的是，预设白名单用于存储需要通过GIFT进行绘制决策的应用程序。也就是说，若查询到当前启动的应用程序属于预设白名单，则确定需要通过GIFT判断该应用程序输出的帧数据是被丢弃还是被绘制，否则，调用GPU绘制该应用程序输出的帧数据。还可以通过预设白名单存储几何体变化量阈值、位移量阈值、缩放量阈值及是否进行触摸判断等参数。

示例性的，当应用程序启动时，根据该应用标识查询预设白名单，以确定是否需要通过GIFT判断该应用程序输出的帧数据是被丢弃还是被绘制。

需要说明的是，挂机状态与非挂机状态下，几何体变化量阈值、位移量阈值、缩放量阈值可以选择不同组取值。

可以理解的是，若应用程序不属于预设白名单，则调用图像处理模块采用默认帧率对其进行绘制。其中，默认帧率可以由该应用程序的配置文件中读取。

需要说明的是，预设白名单可以由厂商服务器根据用户的历史使用记录进行筛选，并在智能终端联网后推送至智能终端。预设白名单的筛选标准包括：静态场景节能比例大于10％；以及，在动态场景(如触摸、场景切换等)下，无卡顿情况等。例如，由应用商店中选择排行榜中前设定数量的应用程序(例如根据下载次数进行排序得到的排行榜等)，按照上述筛选标准进行筛序，将筛序结果添加至预设白名单，并在线推送至用户端。若预设白名单有更新，先向智能终端推送更新通知，以提示用户下载更新后的预设白名单。若更新后的预设白名单被下载成功，则可以采用更新后的预设白名单更新本地预设白名单。

步骤303、获取触摸检测标识的标识值，根据该标识值判断是否需要进行触摸检测，若是，则执行步骤304，否则执行步骤308。

示例性的，在应用程序启动时，根据该应用程序标识查询预设白名单。若该应用程序属于预设白名单，则读取触摸检测标识的标识值(记为T-Value)。若该标识值为代表需要进行触摸检测的值，则执行步骤304。

需要说明的是，若不需要检测触摸，则默认GIFT采用相邻的上一次确定的应用程序状态对应的预设阈值。

步骤304、检测针对前台运行的应用程序的第一触摸事件。

步骤305、判断第一触摸事件是否由模拟事件触发，若是，则执行步骤306，否则，执行步骤313。

步骤306、检测预设时间区间内的第二触摸事件，并根据所述第二触摸事件确定应用程序状态。

步骤307、根据所述应用程序状态选择几何体差异信息中各个维度的预设阈值。

需要说明的是，第一组预设阈值的三个维度的取值中至少有一个大于第二组预设阈值中对应维度的取值。其中，第一组预设阈值为挂机状态下的预设阈值，第二组预设阈值为非挂机状态下的预设阈值。

步骤308、获取一帧前台运行的应用程序输出的待绘制的图像数据。

需要说明的是，待绘制的图像数据为前台运行的应用程序准备好的待绘制的帧数据。该帧数据由应用程序推送至CPU，由CPU判断是否送入GPU。

步骤309、读取待绘制的图像数据包含的几何体信息，对所述几何体信息进行归一化处理得到第二几何体参数。

步骤310、获取相邻的上一帧图像对应的第一几何体参数，计算所述第二几何体参数与所述第一几何体参数的差值，作为几何体差异信息。

步骤311、判断几何体差异信息中各个维度的取值是否均小于预设阈值中对应维度的阈值，若是，则执行步骤312，否则，执行步骤313。

若几何体变化量小于几何体变化量阈值、位移量小于位移量阈值且缩放量小于缩放量阈值，则执行步骤312。

步骤312、判断待绘制的图像数据的上一帧图像数据是否被丢弃，若是，则执行步骤313，否则执行步骤314。

若待绘制的图像数据经GIFT模块判定可以丢弃，则CPU相应的为其添加一个丢弃标识，将该待绘制的图像数据及丢弃标识关联存储于预设缓存内。在CPU检测到下一帧待绘制的图像时，可以由该预设缓存内读取该待绘制图像数据的丢弃标识，以确定相邻的上一帧图像数据是否被丢弃。

步骤313、调用所述图像处理模块根据所述待绘制的图像数据执行绘制操作。

步骤314、丢弃所述待绘制的图像数据。

为了保证图像的画面质量，可以在丢弃待绘制的图像数据之前，判断待绘制的图像数据的上一帧画面数据是否被丢弃。若该待绘制的图像数据的上一帧画面数据已经被丢弃，则调用GPU针对该待绘制的图像数据进行渲染。若该待绘制的图像数据的上一帧画面数据未被丢弃，则丢弃所述待绘制的图像数据，并使GPU休眠一帧的时间。其中，一帧的时间是指GPU正常绘制一帧图像所花费的时间。采用上述方式，可以避免因连续丢弃多帧而影响画面的流畅性。例如，若相邻的上一帧数据被正常绘制，则丢弃该帧数据；若相邻的上一帧数据被丢弃，则调用GPU对该帧数据进行绘制。

本实施例的技术方案，通过采用预设白名单设置绘制决策功能的生效范围，并在待绘制的图像数据满足绘制决策中的丢弃条件时，判断该待绘制的图像数据的相邻的上一帧图像数据是否被丢弃，从而确定是否丢弃本帧图像数据，在降低智能终端功耗的同时，可以减小对智能终端中显示画面的影响。

图4是本申请实施例提供的又一种智能调整帧率的方法的流程图。如图4所示，该方法包括：

步骤401、检测前台运行的应用程序。

获取前台运行的应用程序的包名或进程名。

步骤402、判断对所述应用程序的图像数据进行渲染时是否调用预设应用程序编程接口API，若是，则执行步骤403，否则，执行步骤414。

需要说明的是，可以采用预设白名单记录对应用程序的图像数据进行渲染是采用哪些应用程序编程接口API。可选的，还可以监控通常用来进行图像数据渲染的API相关的预设组件，若检测到预设组件被调用，则确定采用对应的API进行渲染。

步骤403、获取在预设时间区间内所述应用程序发出绘制请求的频率。

在对前台运行的应用程序输出的图像数据进行渲染的API是openGL或Vulkan时，启动计时器，记录预设时间长度，并统计在该预设时间长度内应用程序发出绘制请求的次数，从而确定请求绘制的频率。

步骤404、判断所述频率是否均超过预设频率阈值，若是，则执行步骤405，否则，执行步骤414。

示例性的，假设应用程序在10秒内一直以超过50次/s的频率请求绘制，说明GPU的绘制帧率一直超过50FPS。

若预设频率阈值为50，则若10秒内的频率一直大于50，则执行步骤405。

步骤405、在需要进行触摸检测时，检测针对前台运行的应用程序的第一触摸事件。

步骤406、判断第一触摸事件是否由模拟事件触发，若是，则执行步骤407，否则，执行步骤414。

通过监控触摸屏驱动对于按键信息的上报情况，或者电压变化情况，检测有无由触摸屏触发的第一触摸事件。若检测到第一触摸事件，但不是触摸屏触发的，再判断是否由体感传感器触发，若不是，则确定第一触摸事件由模拟事件触发。

步骤407、检测预设时间区间内的第二触摸事件，并根据所述第二触摸事件确定应用程序状态。

步骤408、根据所述应用程序状态选择几何体差异信息中各个维度的预设阈值。

步骤409、获取一帧前台运行的应用程序输出的待绘制的图像数据。

步骤410、读取待绘制的图像数据包含的几何体信息，对所述几何体信息进行归一化处理得到第二几何体参数。

步骤411、获取相邻的上一帧图像对应的第一几何体参数，计算所述第二几何体参数与所述第一几何体参数的差值，作为几何体差异信息。

步骤412、判断几何体差异信息中各个维度的取值是否均小于预设阈值中对应维度的阈值，若是，则执行步骤413，否则，执行步骤414。

若几何体变化量小于预设第一阈值、位移量小于预设第二阈值且缩放量小于预设第三阈值，则执行步骤413。

步骤413、判断待绘制的图像数据的上一帧图像数据是否被丢弃，若是，则执行步骤414，否则执行步骤415。

步骤414、调用所述图像处理模块根据所述待绘制的图像数据执行绘制操作。

步骤415、丢弃所述待绘制的图像数据。

本实施例的技术方案，通过判断前台运行的应用程序是否采用预设API进行渲染操作，并在前台运行的应用程序采用预设API进行渲染操作时，监控预设时间区间内前台运行的应用程序请求绘制操作的频率，根据监控结果判断是否采用GIFT进行绘制决策，并在待绘制的图像数据满足绘制决策中的丢弃条件时，判断该待绘制的图像数据的相邻的上一帧图像数据是否被丢弃，从而确定是否丢弃本帧图像数据，在降低智能终端功耗的同时，可以减小对智能终端中显示画面的影响。

图5是本申请实施例提供的一种智能调整帧率的装置的结构框图。该装置可以通过软件和/或硬件实现，可被集成于智能手机、平板电脑或掌上游戏机等智能终端中，用于执行本申请实施例提供的智能调整帧率的方法。如图5所示，该装置包括：

事件检测模块510，用于检测针对前台运行的应用程序的第一触摸事件；

状态确定模块520，用于在所述第一触摸事件由模拟事件触发时，根据所述第一触摸事件确定应用程序状态；

阈值调整模块530，用于根据所述应用程序状态选择几何体差异信息中各个维度的预设阈值，其中，几何体差异信息至少包括如下三个维度：几何体变化量、位移量及缩放量；

帧率调整模块540，用于确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息，根据所述几何体差异信息与所述预设阈值调整图像处理模块执行渲染操作的帧率。

本实施例的技术方案提供一种智能调整帧率的装置，实现由触摸事件判定智能终端是否为挂机状态，并在挂机状态下调高几何体差异信息中各个维度的预设阈值，以减少送往图像处理模块进行渲染的数据量，可以有效地降低智能终端的功耗。

可选的，状态确定模块520具体用于：

若所述第一触摸事件由模拟事件触发，则启动计时器连续计时预设时间长度，获取所述预设时间长度内的第二触摸事件；

若所述第二触摸事件均由模拟事件触发，则确定所述应用程序处于挂机状态；

若所述第二触摸事件由触摸屏触发，则确定所述应用程序未处于挂机状态。

可选的，还包括：

触摸检测判定模块，用于在检测针对前台运行的应用程序的第一触摸事件之前，获取触摸检测标识的标识值，根据该标识值判断是否需要进行触摸检测；

若是，则执行检测针对前台运行的应用程序的第一触摸事件的操作，且在所述第一触摸事件由触摸屏触发时，调用图像处理模块执行渲染操作；

否则，执行确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息的操作。

可选的，还包括：

应用查询模块，用于获取前台运行的应用程序的应用标识；

根据所述应用标识判断所述应用程序是否属于预设白名单；

若是，则执行检测针对前台运行的应用程序的第一触摸事件的操作。

可选的，还包括：

频率判断模块，用于检测前台运行的应用程序，判断对所述应用程序的图像数据进行渲染时是否调用预设应用程序编程接口API；

若是，则获取在预设时间区间内所述应用程序发出绘制请求的频率，判断所述频率是否均超过预设频率阈值；

若是，则执行检测针对前台运行的应用程序的第一触摸事件的操作。

可选的，帧率调整模块540具体用于：

读取待绘制的图像数据包含的几何体信息，其中，所述几何体信息包括顶点信息和拓扑边界信息，所述待绘制的图像数据由前台运行的应用程序输出；

对所述几何体信息进行归一化处理得到第二几何体参数；

获取与所述待绘制的图像数据对应的当前图像相邻的上一帧图像，确定所述上一帧图像对应的第一几何体参数；

计算所述第二几何体参数与所述第一几何体参数的差值，作为几何体差异信息。

可选的，帧率调整模块540包括：

帧率降低子模块，用于若几何体变化量小于预设第一阈值、位移量小于预设第二阈值且缩放量小于预设第三阈值，则降低图像处理模块执行渲染操作的帧率；

帧率维持子模块，用于若几何体变化量、位移量及缩放量中至少一个大于相应的预设阈值(几何体变化量与预设第二阈值比较、位移量与预设第三阈值比较、缩放量与预设第三阈值比较)，调用所述图像处理模块采用预设帧率执行渲染操作。

可选的，帧率降低子模块具体用于：

在几何体变化量小于预设第一阈值、位移量小于预设第二阈值且缩放量小于预设第三阈值时，判断待绘制的图像数据的上一帧图像数据是否被丢弃；

若所述上一帧图像数据被丢弃，则调用所述图像处理模块根据所述待绘制的图像数据执行绘制操作；

若所述上一帧图像数据未被丢弃，则丢弃所述待绘制的图像数据。

本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行智能调整帧率的方法，该方法包括：

检测针对前台运行的应用程序的第一触摸事件；

在所述第一触摸事件由模拟事件触发时，根据所述第一触摸事件确定应用程序状态；

根据所述应用程序状态选择几何体差异信息中各个维度的预设阈值，其中，几何体差异信息至少包括如下三个维度：几何体变化量、位移量及缩放量；

确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息，根据所述几何体差异信息与所述预设阈值调整图像处理模块执行渲染操作的帧率。

存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括：安装介质，例如CD-ROM、软盘或磁带装置；计算机系统存储器或随机存取存储器，诸如DRAM、DDR RAM、SRAM、EDO RAM，兰巴斯(Rambus)RAM等；非易失性存储器，诸如闪存、磁介质(例如硬盘或光存储)；寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外，存储介质可以位于程序在其中被执行的第一计算机系统中，或者可以位于不同的第二计算机系统中，第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。

当然，本申请实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的智能调整帧率的操作，还可以执行本申请任意实施例所提供的智能调整帧率的方法中的相关操作。

本申请实施例提供了一种智能终端，该智能终端内具有操作系统，该智能终端中可集成本申请实施例提供的智能调整帧率的装置。其中，智能终端可以为智能手机、PAD(平板电脑)及掌上游戏机等。图6是本申请实施例提供的一种智能终端的结构示意图。如图6所示，该智能终端包括存储器610及处理器620。所述存储器610，用于存储计算机程序、第二触摸事件、应用程序状态、预设阈值、图像数据及几何体差异信息等；所述处理器620读取并执行所述存储器610中存储的计算机程序。所述处理器620在执行所述计算机程序时实现以下步骤：检测针对前台运行的应用程序的第一触摸事件；在所述第一触摸事件由模拟事件触发时，根据所述第一触摸事件确定应用程序状态；根据所述应用程序状态选择几何体差异信息中各个维度的预设阈值，其中，几何体差异信息至少包括如下三个维度：几何体变化量、位移量及缩放量；确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息，根据所述几何体差异信息与所述预设阈值调整图像处理模块执行渲染操作的帧率。

可选的，处理器包括CPU和GPU，其中，CPU用于检测针对前台运行的应用程序的第一触摸事件；在所述第一触摸事件由模拟事件触发时，根据所述第一触摸事件确定应用程序状态；根据所述应用程序状态选择几何体差异信息中各个维度的预设阈值；确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息，根据所述几何体差异信息与所述预设阈值调整图像处理模块。GPU用于根据CPU的调用执行绘制图像数据的操作，得到目标图像。

上述示例中列举的存储器及处理器均为智能终端的部分元器件，所述智能终端还可以包括其它元器件。以智能手机为例，说明上述智能终端可能的结构。图7是本申请实施例提供的一种智能手机的结构框图。如图7所示，该智能手机可以包括：存储器701、中央处理器(Central Processing Unit，CPU)702(又称处理器，以下简称CPU)、图像处理模块(如图形处理器Graphics Processing Unit，简称GPU)713、外设接口703、RF(RadioFrequency，射频)电路705、音频电路706、扬声器711、触摸显示屏712、电源管理芯片708、输入/输出(I/O)子系统709、其他输入/控制设备710以及外部端口704，这些部件通过一个或多个通信总线或信号线707来通信。

应该理解的是，图示智能手机700仅仅是智能终端的一个范例，并且智能手机700可以具有比图中所示出的更多的或者更少的部件，可以组合两个或更多的部件，或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。

下面就本实施例提供的集成有智能调整帧率的装置的智能手机进行详细的描述。

存储器701，所述存储器701可以被CPU702、外设接口703等访问，所述存储器701可以包括高速随机存取存储器，还可以包括非易失性存储器，例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。在存储器701中存储计算机程序，还可以存储第二触摸事件、应用程序状态、预设阈值、图像数据及几何体差异信息等。

外设接口703，所述外设接口703可以将设备的输入和输出外设连接到CPU702和存储器701。

I/O子系统709，所述I/O子系统709可以将设备上的输入输出外设，例如触摸显示屏712和其他输入/控制设备710，连接到外设接口703。I/O子系统709可以包括显示控制器7091和用于控制其他输入/控制设备710的一个或多个输入控制器7092。其中，一个或多个输入控制器7092从其他输入/控制设备710接收电信号或者向其他输入/控制设备710发送电信号，其他输入/控制设备710可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是，输入控制器7092可以与以下任一个连接：键盘、红外端口、USB接口以及诸如鼠标的指示设备。

触摸显示屏712，所述触摸显示屏712是用户终端与用户之间的输入接口和输出接口，将可视输出显示给用户，可视输出可以包括图形、文本、图标、视频等。

GPU713，用于在CPU702的调用下，由存储器701中获取待绘制的图形数据，并根据待绘制的图像数据绘制目标图像，将目标图像送至触摸显示屏712的显存(Frame Buffer)。

I/O子系统709中的显示控制器7091从触摸显示屏712接收电信号或者向触摸显示屏712发送电信号。触摸显示屏712检测触摸显示屏上的接触，显示控制器7091将检测到的接触转换为与显示在触摸显示屏712上的用户界面对象的交互，即实现人机交互，显示在触摸显示屏712上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是，设备还可以包括光鼠，光鼠是不显示可视输出的触摸敏感表面，或者是由触摸显示屏形成的触摸敏感表面的延伸。

RF电路705，主要用于建立手机与无线网络(即网络侧)的通信，实现手机与无线网络的数据接收和发送。例如收发短信息、电子邮件等。具体地，RF电路705接收并发送RF信号，RF信号也称为电磁信号，RF电路705将电信号转换为电磁信号或将电磁信号转换为电信号，并且通过该电磁信号与通信网络以及其他设备进行通信。RF电路705可以包括用于执行这些功能的已知电路，其包括但不限于天线系统、RF收发机、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC(COder-DECoder，编译码器)芯片组、用户标识模块(Subscriber Identity Module，SIM)等等。

音频电路706，主要用于从外设接口703接收音频数据，将该音频数据转换为电信号，并且将该电信号发送给扬声器711。

扬声器711，用于将手机通过RF电路705从无线网络接收的语音信号，还原为声音并向用户播放该声音。

电源管理芯片708，用于为CPU702、I/O子系统及外设接口所连接的硬件进行供电及电源管理。

本申请实施例提供的智能终端，可以实现由触摸事件判定智能终端是否为挂机状态，并在挂机状态下调高几何体差异信息中各个维度的预设阈值，以减少送往图像处理模块进行渲染的数据量，可以有效地降低智能终端的功耗。

上述实施例中提供的智能调整帧率的装置、存储介质及智能终端可执行本申请任意实施例所提供的智能调整帧率的方法，具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节，可参见本申请任意实施例所提供的智能调整帧率的方法。

注意，上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解，本申请不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此，虽然通过以上实施例对本申请进行了较为详细的说明，但是本申请不仅仅限于以上实施例，在不脱离本申请构思的情况下，还可以包括更多其他等效实施例，而本申请的范围由所附的权利要求范围决定。

Claims (11)

1.一种智能调整帧率的方法，其特征在于，包括：

检测针对前台运行的应用程序的第一触摸事件；

在所述第一触摸事件由模拟事件触发时，根据所述第一触摸事件确定应用程序状态；

根据所述应用程序状态选择几何体差异信息中各个维度的预设阈值，其中，几何体差异信息至少包括如下三个维度：几何体变化量、位移量及缩放量，所述几何体变化量包括几何体信息的变化量，所述几何体信息包括顶点信息和拓扑边界信息；

确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息，根据所述几何体差异信息与所述预设阈值调整图像处理模块执行渲染操作的帧率。

2.根据权利要求1所述的方法，其特征在于，在所述第一触摸事件由模拟事件触发时，根据所述第一触摸事件确定应用程序状态，包括：

若所述第一触摸事件由模拟事件触发，则启动计时器连续计时预设时间长度，获取所述预设时间长度内的第二触摸事件；

若所述第二触摸事件均由模拟事件触发，则确定所述应用程序处于挂机状态；

若所述第二触摸事件由触摸屏触发，则确定所述应用程序未处于挂机状态。

3.根据权利要求1所述的方法，其特征在于，在检测针对前台运行的应用程序的第一触摸事件之前，还包括：

获取触摸检测标识的标识值，根据该标识值判断是否需要进行触摸检测；

若是，则执行检测针对前台运行的应用程序的第一触摸事件的操作，且在所述第一触摸事件由触摸屏触发时，调用图像处理模块执行渲染操作；

否则，执行确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息的操作。

4.根据权利要求1所述的方法，其特征在于，还包括：

获取前台运行的应用程序的应用标识；

根据所述应用标识判断所述应用程序是否属于预设白名单；

若是，则执行检测针对前台运行的应用程序的第一触摸事件的操作。

5.根据权利要求1所述的方法，其特征在于，还包括：

检测前台运行的应用程序，判断对所述应用程序的图像数据进行渲染时是否调用预设应用程序编程接口API；

若是，则获取在预设时间区间内所述应用程序发出绘制请求的频率，判断所述频率是否均超过预设频率阈值；

若是，则执行检测针对前台运行的应用程序的第一触摸事件的操作。

6.根据权利要求1所述的方法，其特征在于，确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息，包括：

读取待绘制的图像数据包含的几何体信息，其中，所述几何体信息包括顶点信息和拓扑边界信息，所述待绘制的图像数据由前台运行的应用程序输出；

对所述几何体信息进行归一化处理得到第二几何体参数；

获取与所述待绘制的图像数据对应的当前图像相邻的上一帧图像，确定所述上一帧图像对应的第一几何体参数；

计算所述第二几何体参数与所述第一几何体参数的差值，作为几何体差异信息。

7.根据权利要求1至6中任一项所述的方法，其特征在于，根据所述几何体差异信息与所述预设阈值调整图像处理模块执行渲染操作的帧率，包括：

若几何体变化量小于预设第一阈值、位移量小于预设第二阈值且缩放量小于预设第三阈值，则降低图像处理模块执行渲染操作的帧率；

否则，调用所述图像处理模块采用预设帧率执行渲染操作。

8.根据权利要求7所述的方法，其特征在于，降低图像处理模块执行渲染操作的帧率，包括：

在几何体变化量小于预设第一阈值、位移量小于预设第二阈值且缩放量小于预设第三阈值时，判断待绘制的图像数据的上一帧图像数据是否被丢弃；

若所述上一帧图像数据被丢弃，则调用所述图像处理模块根据所述待绘制的图像数据执行绘制操作；

若所述上一帧图像数据未被丢弃，则丢弃所述待绘制的图像数据。

9.一种智能调整帧率的装置，其特征在于，包括：

事件检测模块，用于检测针对前台运行的应用程序的第一触摸事件；

状态确定模块，用于在所述第一触摸事件由模拟事件触发时，根据所述第一触摸事件确定应用程序状态；

阈值调整模块，用于根据所述应用程序状态选择几何体差异信息中各个维度的预设阈值，其中，几何体差异信息至少包括如下三个维度：几何体变化量、位移量及缩放量，所述几何体变化量包括几何体信息的变化量，所述几何体信息包括顶点信息和拓扑边界信息；

帧率调整模块，用于确定前台运行的应用程序中相邻两帧图像数据的几何体差异信息，根据所述几何体差异信息与所述预设阈值调整图像处理模块执行渲染操作的帧率。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至8中任一项所述的智能调整帧率的方法。

11.一种智能终端，包括存储器，处理器及存储在存储器上并可在处理器运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至8中任一项所述的智能调整帧率的方法。

Images