CN111341286A - 屏幕显示控制方法、装置、存储介质及终端 - Google Patents

Abstract

本申请实施例公开了一种屏幕显示控制方法、装置、存储介质及终端。该方法包括：分析当前显示画面的画面内容；根据分析结果预测画面内容的变化情况信息；根据变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域；对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示，其中，不同变化等级的显示区域对应不同的屏幕刷新率。本方案利用计算机视觉图像识别技术学习用户屏幕的展示规律，预测出屏幕中不同区域的内容变化情况，并基于不同内容的变化趋势，选取不用的刷新率对画面内容进行局部刷新显示，在保证终端屏幕显示效果的同时降低终端功耗。

Description

屏幕显示控制方法、装置、存储介质及终端

技术领域

本申请涉及显示技术领域，尤其涉及一种屏幕显示控制方法、装置、存储介质及终端。

背景技术

目前，市场上已经出现搭载90Hz刷新率屏幕的智能移动终端，这种智能移动终端相比传统目前绝大多数的60Hz智能移动终端有比较明显的体验提示，会在视觉上看起来更流畅。

较高刷新率屏幕能带来更流畅的显示体验，但随之而来的是终端功耗的提升。终端屏幕一直保持在高刷新率的场景下，续航时间相比传统的低刷新率屏幕会缩短不少，导致终端功耗较大。

发明内容

本申请实施例提供一种屏幕显示控制方法、装置、存储介质及终端，可以在保证终端屏幕显示效果的同时降低终端功耗。

第一方面，本申请实施例提供一种屏幕显示控制方法，包括：

分析当前显示画面的画面内容；

根据分析结果预测画面内容的变化情况信息；

根据所述变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域；

对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示，其中，不同变化等级的显示区域对应不同的屏幕刷新率。

第二方面，本申请实施例提供了一种屏幕显示控制装置，包括：

分析单元，用于分析当前显示画面的画面内容；

预测单元，用于根据分析结果预测画面内容的变化情况信息；

划分单元，用于根据所述变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域；

显示单元，用于对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示，其中，不同变化等级的显示区域对应不同的屏幕刷新率。

第三方面，本申请实施例还提供了一种计算机可读存储介质，所述存储介质中存储有多条指令，所述指令适于由处理器加载以执行上述的屏幕显示控制方法。

第四方面，本申请实施例还提供了一种终端，包括处理器及存储器，所述处理器与所述存储器电性连接，所述存储器用于存储指令和数据，处理器用于执行上述的屏幕显示控制方法。

本申请实施中，通过分析当前显示画面的画面内容；根据分析结果预测画面内容的变化情况信息；根据变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域；对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示，其中，不同变化等级的显示区域对应不同的屏幕刷新率。本方案利用计算机视觉图像识别技术学习用户屏幕的展示规律，预测出屏幕中不同区域的内容变化情况，并基于不同内容的变化趋势，选取不用的刷新率对画面内容进行局部刷新显示，在保证终端屏幕显示效果的同时降低终端功耗。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的屏幕显示控制方法的一流程示意图。

图2是本申请实施例提供的屏幕显示控制方法的一应用场景图。

图3是本申请实施例提供的屏幕显示控制装置的另一应用场景图。

图4是本申请实施例提供的屏幕显示控制装置的一结构示意图。

图5是本申请实施例提供的屏幕显示控制装置的另一结构示意图。

图6是本申请实施例提供的终端的一结构示意图。

图7是本申请实施例提供的终端的另一结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请实施例提供一种屏幕显示控制方法、装置、存储介质及终端。以下将分别进行详细说明。

在一实施例中，提供一种屏幕显示控制方法，应用于智能手机、平板电脑、笔记本电脑等终端设备中。参考图1，该屏幕显示控制方法的具体流程可以如下：

101、分析当前显示画面的画面内容。

具体的，可以对发当前终端屏幕显示的画面内容进行多方面的分析，以获取该显示画面的画面特点、属性等信息。在一些实施例中，在分析当前显示画面的画面内容时，具体可以包括以下流程：

(11)分析当前显示画面的界面布局；

(12)获取当前显示画面中不同界面组件的属性信息；

(13)基于界面布局和属性信息，对当前画面显示的画面内容进行分析。

其中，该界面布局可以包括当前显示画面中各个实体的位置布局信息。其中，该实体可以包括终端可识别的控件(如按钮、输入框等)、图标、及常规实体(如人物、动植物、车船等现实世界中存在的实体)等。

而界面组件则可以为选择框、编辑框、展示框、按钮等用于搭建界面整体架构的控件。界面组件的属性信息，即可包括该界面组件的功能、尺寸大小、在当前界面的所处位置等信息。例如，有些界面组件用于展示画面、有些界面组件用于内容输入。

通过结合界面布局、及界面组件的属性信息，对当前画面显示的画面内容进行分析，可以有效确定画面内容中各部分内容的属性，并进一步可区分出可变更部分、不可变更部分或无需变更部分等。

102、根据分析结果预测画面内容的变化情况信息。

具体的，可基于上述分析结果预测画面内容中各个部分的变化情况信息。

本实施例在，可以预先采取AI(Artificial Intelligence，人工智能)的计算机视觉图像识别技术，来学习用户使用终端屏幕时该屏幕的场景、及展示规律。例如，通过机器学习，可发现有些长时间使用的应用的某些布局视觉界面变化非常不明显甚至不变，而有些布局视觉界面实时变化。终端可通过对屏幕中各个画面的特征、变化更新的规律、及场景进行学习，以训练其基于画面内容来预测显示画面中各个部分的变化情况信息的能力。

在一些实施例中，为了可以降低机器学习的难度，节省终端功耗，可以采取增加特征的方式，对机器学习进一步限定范围。例如，可以将增加当前显示画面的所属应用类型信息，以使得终端可以仅在该应用类型对应的一些画面特征、变化规律等范围内进行预测，以降低运算难度、及提高预测结果的精准性。

也即，在根据分析结果预测画面内容的变化情况信息之前，还可以确定当前显示画面所属应用的应用类型。其中，应用类型可以包括游戏类应用、音频类应用、视频类应用、购物类应用、社交类应用等等。

在一些实施例中，分析结果可以包括：不同布局区域的画面内容的内容类型。其中，内容类型指该部分内容属于哪一方面的内容。例如，该内容类型可以包括标识类(如信号标识、时间标识)、操作控件类(如按钮)、提示类(如进度条)、展示阅读类(如游戏画面、文章内容)等等。

则在根据分析结果预测画面内容的变化情况信息时，具体可以根据不同布局区域的画面内容的内容类型、及所述应用类型，并基于预设算法模型预测相应画面内容的变化概率。其中，预设算法模型可以是预先训练好的概率预测模型，用以对从当前显示画面中提取的特征，结合画面内容的内容类型和所属应用类型进行进行概率预测，以预测画面中各个部分内容的变化概率。

103、根据变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域。

具体的，基于预测得到的当前显示画面的变化情况信息，对屏幕区域进行划分，将变化情况相同或相近的区域划分为同一等级的显示区域，从而得到不同变化等级的显示区域。其中，该变化等级可以根据实际需求进行划分。例如，可以划分为两个等级、三个等级或其他更多等级。需要说明的是，不同变化等级的显示区域内显示内容的变化情况不相同。

例如，以变化等级划分为二级为例，变化等级为一级，则对应显示区域内的内容在接下来变化的概率较低，或变化的频率较低；变化等级为二级，则对应显示区域内的内容在接下来变化的概率较大，或变化的频率较高。

例如，以变化等级划分为三级为例，变化等级为一级，则对应显示区域内的内容在接下来变化的概率较低，或变化的频率较低；变化等级为二级，则对应显示区域内的内容在接下来变化的概率稍大，或变化的频率稍高；变化等级为二级，则对应显示区域内的内容在接下来变化的概率较大，或变化的频率较高。

在一些实施例中，变化情况信息可以包括变化概率。则步骤“根据变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域”，可以包括以下流程：

(21)从多个概率区间中确定每一变化概率对应所处的概率区间；

(22)将处于相同概率区间下的画面内容所在屏幕区域，划分为相同变化等级的显示区域。

例如，以两个变化等级的显示区域为例，参考图2，屏幕区域中圆圈内区域为属于同一概率区间对应的区域，其中该三个圆圈部分对应的变化概率可以不相同；而其余部分属于另一概率区间对应的区域。则在本实施例中，假设圆圈内显示画面的变化概率小于圆圈外显示画面的变化概率，则可将圆圈内显示区域划分为第一变化等级的显示区域，将剩余部分划分为第二变化等级的显示区域。

104、对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示，其中，不同变化等级的显示区域对应不同的屏幕刷新率。

在本实施例中，可以预先设定不同变化等级的显示区域对应需要的屏幕刷新率。实际应用中，可以设定变化概率越大的概率区间，对应匹配的屏幕刷新率越高。也即，对屏幕进行分区域的采用不同刷新率进行显示，对于画面内容变化频繁的区域采用高刷新率进行内容显示更新，对于画面内几乎不变、或变化慢的区域，采用低刷新率进行内容显示更新。例如，对于变化概率越大的概率区间对应的显示区域(即高频变化显示区域)可采用90HZ的刷新率进行画面的更新显示，以保证该显示区域中画面的及时更新；对于变化概率越大的概率区间对应的显示区域(即中低频变化显示区域)可采用60HZ的刷新率进行画面的更新显示，以降低屏幕的功耗。

参考图3，以音乐播放界面为例，该界面的区域A1中状态栏的各种图标和信号标识、以及界面中的播放按钮等内容较为稳定显示的区域A2和A3，可以采用低刷新率进行显示；而对于中间区域的歌词滚动区域B1、和进度条显示区域B2，则可以采用高刷新率进行显示。

在一些实施例中，对于一些对视觉观看要求(或显示需求)较高的场景(如游戏情景)，可以采用较高的刷新率对其视觉观看要求(或显示需求)较高的区域进行显示。也即，在对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示时，具体可以包括以下流程：

(31)确定显示区域在当前显示画面中的重要等级；

(32)对显示区域的变化等级和重要等级进行加权处理；

(33)根据加权处理结果，为显示区域匹配相应的屏幕刷新率进行内容更新显示。

其中，该重要等级与该显示区域在屏幕中视觉观看要求(或显示需求)成正比，视觉观看要求(或显示需求)越高的显示区域对应的重要等级越高。在对该显示区域进行刷新率的匹配时，具体可以结合显示区域的变化等级和重要等级两者，进行加权处理后得到加权处理后的值。并基于加权处理后的值的大小或高低，来为该显示区域匹配适合的刷新率。例如，在竞技游戏场景中的某一显示区域的变化等级较低，但其为用于显示对手位置的关键区域，重要等级极高。那么，可以结合该场景的背景信息(如为竞技类游戏场景)匹配适合的权重信息，并基于该权重信息对变化等级和重要等级进行加权处理，共同评估该显示区域需使用到的刷新率高低，以提升屏幕信息显示的准确性，避免用户错过重要信息。

由上可知，本实施例提供的屏幕显示控制方法分析当前显示画面的画面内容；根据分析结果预测画面内容的变化情况信息；根据变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域；对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示，其中，不同变化等级的显示区域对应不同的屏幕刷新率。本方案利用计算机视觉图像识别技术学习用户屏幕的展示规律，预测出屏幕中不同区域的内容变化情况，并基于不同内容的变化趋势，选取不用的刷新率对画面内容进行局部刷新显示，在保证终端屏幕显示效果的同时降低终端功耗。

在本申请又一实施例中，还提供一种屏幕显示控制装置，该屏幕显示控制装置可以软件或硬件的形式集成在终端中，该终端具体可以包括手机、平板电脑、笔记本电脑等设备。如图4所示，该屏幕显示控制装置300可以包括：分析单元301、预测单元302、划分单元303及显示单元304，其中：

分析单元301，用于分析当前显示画面的画面内容；

预测单元302，用于根据分析结果预测画面内容的变化情况信息；

划分单元303，用于根据所述变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域；

显示单元304，用于对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示，其中，不同变化等级的显示区域对应不同的屏幕刷新率。

在一些实施例中，所述分析单元301可以用于：

分析当前显示画面的界面布局；

获取当前显示画面中不同界面组件的属性信息；

基于所述界面布局和所述属性信息，对当前画面显示的画面内容进行分析。

参考图5，在一些实施例中，该屏幕显示控制装置还可以包括：

确定单元305，用于在根据分析结果预测画面内容的变化情况信息之前，确定当前显示画面所属应用的应用类型；

所述分析结果包括：不同布局区域的画面内容的内容类型，所述预测单元302可以用于：

根据不同布局区域的画面内容的内容类型、及所述应用类型，基于预设算法模型预测相应画面内容的变化概率。

在一些实施例中，变化情况信息包括变化概率，该划分单元303可以用于：

从多个概率区间中确定每一变化概率对应所处的概率区间；

将处于相同概率区间下的画面内容所在屏幕区域，划分为相同变化等级的显示区域。

在一些实施例中，变化概率越大的概率区间，对应匹配的屏幕刷新率越高。

在一些实施例中，显示单元304可以用于：

确定所述显示区域在当前显示画面中的重要等级；

对所述显示区域的变化等级和重要等级进行加权处理；

根据加权处理结果，为所述显示区域匹配相应的屏幕刷新率进行内容更新显示。

由上可知，本申请实施例提供的屏幕显示控制装置，通过分析当前显示画面的画面内容；根据分析结果预测画面内容的变化情况信息；根据变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域；对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示，其中，不同变化等级的显示区域对应不同的屏幕刷新率。本方案利用计算机视觉图像识别技术学习用户屏幕的展示规律，预测出屏幕中不同区域的内容变化情况，并基于不同内容的变化趋势，选取不用的刷新率对画面内容进行局部刷新显示，在保证终端屏幕显示效果的同时降低终端功耗。

在本申请又一实施例中还提供一种终端，该终端可以是智能手机、平板电脑等终端设备。如图6所示，终端400包括处理器401和存储器402。其中，处理器401与存储器402电性连接。

处理器401是终端400的控制中心，利用各种接口和线路连接整个终端的各个部分，通过运行或加载存储在存储器402内的应用，以及调用存储在存储器402内的数据，执行终端的各种功能和处理数据，从而对终端进行整体监控。

在本实施例中，终端400中的处理器401会按照如下的步骤，将一个或一个以上的应用的进程对应的指令加载到存储器402中，并由处理器401来运行存储在存储器402中的应用，从而实现各种功能：

分析当前显示画面的画面内容；

根据分析结果预测画面内容的变化情况信息；

根据所述变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域；

对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示，其中，不同变化等级的显示区域对应不同的屏幕刷新率。

在一些实施例中，在分析当前显示画面的画面内容时，处理器401还执行以下步骤：

分析当前显示画面的界面布局；

获取当前显示画面中不同界面组件的属性信息；

基于所述界面布局和所述属性信息，对当前画面显示的画面内容进行分析。

在一些实施例中，在根据分析结果预测画面内容的变化情况信息之前，处理器401还执行以下步骤：

确定当前显示画面所属应用的应用类型。

所述分析结果包括：不同布局区域的画面内容的内容类型；在根据分析结果预测画面内容的变化情况信息时，处理器401还执行以下步骤：

根据不同布局区域的画面内容的内容类型、及所述应用类型，基于预设算法模型预测相应画面内容的变化概率。

在一些实施例中，变化情况信息包括变化概率；在根据所述变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域时，处理器401还执行以下步骤：

从多个概率区间中确定每一变化概率对应所处的概率区间；

将处于相同概率区间下的画面内容所在屏幕区域，划分为相同变化等级的显示区域。

在一些实施例中，变化概率越大的概率区间，对应匹配的屏幕刷新率越高。

在一些实施例中，在对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示时，处理器401还执行以下步骤：

确定所述显示区域在当前显示画面中的重要等级；

对所述显示区域的变化等级和重要等级进行加权处理；

根据加权处理结果，为所述显示区域匹配相应的屏幕刷新率进行内容更新显示。

存储器402可用于存储应用和数据。存储器402存储的应用中包含有可在处理器中执行的指令。应用可以组成各种功能模块。处理器401通过运行存储在存储器402的应用，从而执行各种功能应用以及屏幕显示控制。

在一些实施例中，如图7所示，终端400还包括：显示屏403、控制电路404、射频电路405、输入单元406、传感器408以及电源409。其中，处理器401分别与显示屏403、控制电路404、射频电路405、输入单元406、摄像头407、传感器408以及电源409电性连接。

显示屏403可用于显示由用户输入的信息或提供给用户的信息以及终端的各种图形用户接口，这些图形用户接口可以由图像、文本、图标、视频和其任意组合来构成。

控制电路404与显示屏403电性连接，用于控制显示屏403显示信息。

射频电路405用于收发射频信号，以通过无线通信与终端或其他终端建立无线通讯，与服务器或其他终端之间收发信号。

输入单元406可用于接收输入的数字、字符信息或用户特征信息(例如指纹)，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。其中，输入单元406可以包括指纹识别模组。

摄像头407可用于采集图像信息。其中，该摄像头可以是具有一个镜头的单摄像头，也可以具有两个或多个镜头。

传感器408用于采集外部环境信息。传感器408可以包括环境亮度传感器、加速度传感器、光传感器、运动传感器、以及其他传感器。

电源409用于给终端400的各个部件供电。在一些实施例中，电源409可以通过电源管理系统与处理器401逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

尽管图7中未示出，终端400还可以包括扬声器、蓝牙模块等，在此不再赘述。

由上可知，本申请实施例提供的终端，通过分析当前显示画面的画面内容；根据分析结果预测画面内容的变化情况信息；根据变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域；对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示，其中，不同变化等级的显示区域对应不同的屏幕刷新率。本方案利用计算机视觉图像识别技术学习用户屏幕的展示规律，预测出屏幕中不同区域的内容变化情况，并基于不同内容的变化趋势，选取不用的刷新率对画面内容进行局部刷新显示，在保证终端屏幕显示效果的同时降低终端功耗。

在一些实施例中，还提供了一种计算机可读存储介质，该存储介质中存储有多条指令，该指令适于由处理器加载以执行上述任一屏幕显示控制方法。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，RandomAccess Memory)、磁盘或光盘等。

以上对本申请实施例所提供的屏幕显示控制方法、装置、存储介质及终端进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种屏幕显示控制方法，其特征在于，包括：

分析当前显示画面的画面内容；

根据分析结果预测画面内容的变化情况信息；

根据所述变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域；

对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示，其中，不同变化等级的显示区域对应不同的屏幕刷新率。

2.根据权利要求1所述的屏幕显示控制方法，其特征在于，所述分析当前显示画面的画面内容，包括：

分析当前显示画面的界面布局；

获取当前显示画面中不同界面组件的属性信息；

基于所述界面布局和所述属性信息，对当前画面显示的画面内容进行分析。

3.根据权利要求2所述的屏幕显示控制方法，其特征在于，在根据分析结果预测画面内容的变化情况信息之前，所述方法还包括：

确定当前显示画面所属应用的应用类型；

所述分析结果包括：不同布局区域的画面内容的内容类型；所述根据分析结果预测画面内容的变化情况信息，包括：

根据不同布局区域的画面内容的内容类型、及所述应用类型，基于预设算法模型预测相应画面内容的变化概率。

4.根据权利要求3所述的屏幕显示控制方法，其特征在于，所述变化情况信息包括变化概率；所述根据所述变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域，包括：

从多个概率区间中确定每一变化概率对应所处的概率区间；

将处于相同概率区间下的画面内容所在屏幕区域，划分为相同变化等级的显示区域。

5.根据权利要求4所述的屏幕显示控制方法，其特征在于，变化概率越大的概率区间，对应匹配的屏幕刷新率越高。

6.根据权利要求1-5任一项所述的屏幕显示控制方法，其特征在于，所述对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示，包括：

确定所述显示区域在当前显示画面中的重要等级；

对所述显示区域的变化等级和重要等级进行加权处理；

根据加权处理结果，为所述显示区域匹配相应的屏幕刷新率进行内容更新显示。

7.一种屏幕显示控制装置，其特征在于，包括：

分析单元，用于分析当前显示画面的画面内容；

预测单元，用于根据分析结果预测画面内容的变化情况信息；

划分单元，用于根据所述变化情况信息对屏幕进行区域划分，得到不同变化等级的显示区域；

显示单元，用于对不同变化等级的显示区域匹配相应的屏幕刷新率进行内容更新显示，其中，不同变化等级的显示区域对应不同的屏幕刷新率。

8.根据权利要求7所述的屏幕显示控制装置，其特征在于，所述显示单元用于：

确定所述显示区域在当前显示画面中的重要等级；

对所述显示区域的变化等级和重要等级进行加权处理；

根据加权处理结果，为所述显示区域匹配相应的屏幕刷新率进行内容更新显示。

9.一种计算机可读存储介质，其特征在于，所述存储介质中存储有多条指令，所述指令适于由处理器加载以执行权利要求1-6任一项所述的屏幕显示控制方法。

10.一种终端，其特征在于，包括处理器及存储器，所述处理器与所述存储器电性连接，所述存储器用于存储指令和数据；所述处理器用于执行权利要求1-6任一项所述的屏幕显示控制方法。

Images