CN106874017B - 一种移动终端的显示场景识别方法、装置及移动终端 - Google Patents

一种移动终端的显示场景识别方法、装置及移动终端 Download PDF

Info

Publication number
CN106874017B
CN106874017B CN201710142061.5A CN201710142061A CN106874017B CN 106874017 B CN106874017 B CN 106874017B CN 201710142061 A CN201710142061 A CN 201710142061A CN 106874017 B CN106874017 B CN 106874017B
Authority
CN
China
Prior art keywords
layer
mobile terminal
target
display
pid
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710142061.5A
Other languages
English (en)
Other versions
CN106874017A (zh
Inventor
彭德良
苟生俊
易永鹏
袁晓日
甘高亭
郑志勇
杨海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201710142061.5A priority Critical patent/CN106874017B/zh
Publication of CN106874017A publication Critical patent/CN106874017A/zh
Priority to PCT/CN2017/106942 priority patent/WO2018161586A1/zh
Application granted granted Critical
Publication of CN106874017B publication Critical patent/CN106874017B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明实施例公开了一种移动终端的显示场景识别方法、装置及移动终端。该方法包括:获取移动终端中运行的应用程序的进程标识;获取应用程序绘制的图层集合中每个图层的图层属性;根据进程标识和图层属性识别移动终端的显示场景。本发明实施例通过采用上述技术方案,可根据移动终端运行的应用程序的进程标识和图层属性准确地识别出移动终端的显示场景。

Description

一种移动终端的显示场景识别方法、装置及移动终端
技术领域
本发明实施例涉及显示技术领域,尤其涉及一种移动终端的显示场景识别方法、装置及移动终端。
背景技术
目前,移动终端的显示屏幕尺寸越来越大,所装载的应用程序以及所能够实现的功能也越来越丰富,用户每天会花费大量的时间来使用移动终端,所以移动终端的显示效率以及耗电情况等成为考量移动终端工作性能的重要指标。
移动终端在运行过程中所显示的内容千变万化,所对应的显示场景也有很多种,为了方便对移动终端的改进,就需要对显示场景进行识别,因此,亟需一种能够识别出移动终端当前显示场景的方案。
发明内容
本发明实施例提供一种移动终端的显示场景识别方法、装置及移动终端,可以识别出移动终端的显示场景。
第一方面,本发明实施例提供了一种移动终端的显示场景识别方法,包括:
获取移动终端中运行的应用程序的进程标识;
获取所述应用程序绘制的图层集合中每个图层的图层属性;
根据所述进程标识和所述图层属性识别移动终端的显示场景。
第二方面,本发明实施例提供了一种移动终端的显示场景识别装置,包括:
进程标识获取模块,用于获取移动终端中运行的应用程序的进程标识;
图层属性获取模块,用于获取所述应用程序绘制的图层集合中每个图层的图层属性;
显示场景识别模块,用于根据所述进程标识和所述图层属性识别移动终端的显示场景。
第三方面,本发明实施例提供了一种移动终端,包括存储器,处理器及存储在存储器上并可在处理器运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现以下步骤:
获取移动终端中运行的应用程序的进程标识;
获取所述应用程序绘制的图层集合中每个图层的图层属性;
根据所述进程标识和所述图层属性识别移动终端的显示场景。
本发明实施例中提供的移动终端的显示场景识别方案,获取移动终端中运行的应用程序的进程标识,获取应用程序绘制的图层集合中每个图层的图层属性,根据进程标识和图层属性识别移动终端的显示场景。通过采用上述技术方案,可根据移动终端运行的应用程序的进程标识和图层属性准确地识别出移动终端的显示场景。
附图说明
图1为本发明实施例提供的一种移动终端的显示场景识别方法的流程示意图;
图2为本发明实施例提供的另一种移动终端的显示场景识别方法的流程示意图;
图3为本发明实施例提供的一种显示过程示意图;
图4为本发明实施例提供的Vsync显示刷新机制的示意图;
图5为本发明实施例提供的另一种移动终端的显示场景识别方法的流程示意图;
图6为本发明实施例提供的一种移动终端的显示场景识别装置的结构框图;
图7为本发明实施例提供的一种移动终端的结构示意图。
具体实施方式
下面结合附图并通过具体实施方式来进一步说明本发明的技术方案。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理,但是其中的许多步骤可以被并行地、并发地或者同时实施。此外,各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
图1为本发明实施例提供的一种移动终端的显示场景识别方法的流程示意图,该方法可以由移动终端的显示场景识别装置执行,其中该装置可由软件和/或硬件实现,一般可集成在移动终端中。如图1所示,该方法包括:
步骤101、获取移动终端中运行的应用程序的进程标识。
示例性的,本发明实施例中的移动终端具体可为手机、智能手表、平板电脑、游戏机、个人数字助理和数字多媒体播放器等包含显示屏的设备。
本发明实施例对移动终端中装载的操作系统不做限定,可以是安卓(Android)系统、手机窗口(Windows Phone,WP)操作系统、Linux及IOS系统等等。示例性的,为了便于说明,本发明实施例以常见的Android系统进行后续的说明。
移动终端中通常会装载很多应用程序(APP),正在运行的应用程序,尤其是在前台运行的应用程序是用于区分显示场景的重要因素。可以选用应用程序的名称或者包名等标识来识别显示场景,但这样做会存在一些问题。以Android系统为例,虽然每个应用程序都有一个唯一的包名作为标识,但其不能够反映具体的显示场景,识别结果不够准确。因为一个应用程序中往往需要实现多个功能,这些功能的实现可能是相互独立的,例如微信中有聊天、相册、视频通话和公众号等多个功能,每个功能可被视为一个独立的应用程序来实现的,因此不同的功能应该对应不同的显示场景,若仅以包名来标识当前运行的应用程序则无法准确确定具体的显示场景。包名是Android系统中的概念,其他操作系统可能无此概念,但若使用与包名等同的概念,如应用程序的名称,同样会存在上述问题。
示例性的,应用程序中的某个功能可能是由一个或多个进程来实现的,通过进程标识(如进程名)可识别出应用程序当前在实现具体哪个功能,也即能够识别出该功能对应的显示场景。因此,本步骤中获取移动终端中运行的应用程序的进程标识,用于后续的显示场景识别。
步骤102、获取应用程序绘制的图层集合中每个图层的图层属性。
可选的,图层属性包括图层标识(如图层名称或编号)、缓存数据是否为空、横屏或竖屏模式、可见区域的属性、透明区域的属性、是否存在更新区域、更新区域的属性以及图像信息中的至少一个。
示例性的,对于一个图层来说,其对应的缓存数据存储在其对应的缓存区域内,若缓存数据为全0,则表示缓存数据为空,此时该图层可理解为一个空白的图层。对于同一名称或编号的图层,应用程序会以一定的绘制帧率进行绘制,对于接收到的当前图层,可将当前图层与之前绘制的图层(预设时长内接收到的图层)进行比较(例如比较各个坐标位置对应的灰度值是否发生变化)来判断当前图层是否存在更新区域,本发明实施例对预设时长的具体数值不做限定。
进一步的,所述可见区域的属性包括以下至少一项:可见区域是否为空(应用程序在绘制完一个图层后,该图层对应的缓存数据中包括图层中的可见区域的坐标信息,一般可见区域为一个矩形,当这个矩形的四个顶点的坐标均相同时,则可认为可见区域为空),可见区域的数量、形状、尺寸和位置;所述透明区域的属性包括以下至少一项:透明区域的数量、形状、尺寸、位置以及与其他图层的可见区域的相对位置;所述更新区域的属性包括以下至少一项:更新区域的数量、位置、形状、尺寸以及面积与屏幕面积的比值;所述图像信息包括以下至少一项:图像是否为纯色(包括颜色数据为全0)、色阶、灰阶、色调、对比度、亮度、饱和度、透明度和模糊度中的至少一个。
以上列举了很多种图层属性,在用于识别显示场景时,可根据其中的任意一种或多种的组合来用于识别显示场景,当然,还可以有其他图层属性与上述列举的项目进行组合。
步骤103、根据进程标识和图层属性识别移动终端的显示场景。
示例性的,当需要获取多种图层属性时,可根据图层属性的集合确定相应的图层场景类别,再根据进程标识和图层场景类别识别移动终端的显示场景。
进一步的,可事先将不同进程标识和不同图层场景类别进行排列组合,得到不同的场景描述集合,预先建立不同的场景描述项与不同的显示场景的对应关系,得到预设场景对应关系。在本步骤中,根据进程标识和图层场景类别确定当前场景描述项,根据当前场景描述项查询预设场景对应关系,进而得到移动终端的当前显示场景,达到识别移动终端的显示场景的目的。
示例性的,以应用程序为视频播放应用为例,一般包括三个图层:一个显示视频内容的图层,可定义为U1;两个SurfaceView类型的图层,一个用于显示弹幕内容,可定义为U2,另一个用于显示用户界面(User Interface,UI)控件(如播放进度条、音量控制条以及各种控制按钮等)和广告,可定义为U3。图层标识即上述的U1、U2和U3。当图层集合中包含U1和U2时对应第一图层场景、当图层集合中包含U1和U3时对应第二图层场景。进一步的,为了更加精确地确定图层场景,可引入更多的图层属性,如图层集合中包含U1和U3,且U3中仅包含单一的矩形的更新区域时,对应第三图层场景。
本发明实施例提供的移动终端的显示场景识别方案,获取移动终端中运行的应用程序的进程标识,获取应用程序绘制的图层集合中每个图层的图层属性,根据进程标识和图层属性识别移动终端的显示场景。通过采用上述技术方案,可根据移动终端运行的应用程序的进程标识和图层属性准确地识别出移动终端的显示场景。
在上述技术方案的基础上,本发明实施例提供的移动终端的显示场景识别方法还可包括:获取触摸数据;相应的,根据所述进程标识和所述图层属性识别移动终端的显示场景可包括:根据所述进程标识、所述图层属性和所述触摸数据识别移动终端的显示场景。
示例性的,触摸数据可包括触摸位置、触摸面积及触摸时长等数据。具体的,可对触摸数据进行统计分析,根据统计分析结果确定相应的触摸事件,再根据进程标识、图层属性和触摸事件识别移动终端的显示场景。例如,触摸事件可包括无事件(如预设时段内未检测到触摸屏被触摸)、点击事件、离开事件(如由触摸变为释放触摸)、慢速滑动事件和快速滑动事件等。
根据进程标识、图层属性和触摸数据三类因素来进行显示场景的识别,可进一步提高显示场景识别的准确度。
在上述技术方案的基础上,本发明实施例提供的移动终端的显示场景识别方法还可包括:通过预设类型的传感器获取传感数据。相应的,所述根据所述进程标识、所述图层属性和所述触摸数据识别移动终端的显示场景,包括:根据所述进程标识、所述图层属性、所述触摸数据和所述传感数据识别移动终端的显示场景。
示例性的,所述预设类型的传感器包括:距离传感器、光线传感器、磁场传感器、重量传感器、加速度传感器、方向传感器、陀螺仪传感器、旋转向量传感器、气压传感器、温度传感器和湿度传感器中的至少一种。优选的,所述预设类型的传感器包括以上至少两种传感器。具体的传感器类型可根据移动终端所集成的传感器的类型来确定,且本发明实施例对同一类型的传感器的数量不做限定。
具体的,可检测当前处于运行状态的传感器有哪些,可从中选择部分或全部传感器,用于通过所选择的传感器获取传感数据。传感器的选择策略可预先设置,也可根据传感器与应用程序的预设对应关系来确定,利用所述运行的应用程序查询该预设对应关系,得到相应的传感器的类型。
示例性的,所获取的传感数据可以是当前时刻的传感数据,也可以是当前时刻之前的预设时间段内的传感数据,本发明实施例不做限定。
示例性的,可对传感数据进行统计分析,根据统计分析结果确定相应的传感器事件,再根据进程标识、图层属性、触摸时间以及传感器事件识别移动终端的显示场景。示例性的,以加速度传感器为例,可通过对加速度传感器对应的传感数据进行统计分析,得到移动终端当前处于静止状态(第一传感器事件)、慢速前进状态(第二传感器事件)还是快速前进状态(第三传感器事件),假设确定的传感器事件为第二传感器事件,将第二传感器事件与当前获取到的进程标识、图层属性以及触摸事件进行组合,得到当前的场景描述项,进而识别移动终端的显示场景。
需要说明的是,本发明实施例中可将进程名、传感数据、触摸数据和图层属性作为显示场景的识别元素,各元素的获取顺序本发明实施例不做限定,且识别元素的种类越多识别出来的显示场景越精确。
在上述技术方案的基础上,可预先设立白名单,当所获取的识别元素部分或全部或指定识别元素处于预设白名单时,则进行显示场景的识别,否则,不需要进行显示场景的识别。可选的,“根据所述进程标识和所述图层属性识别所述移动终端的显示场景”可优化为:判断所述进程标识是否处于预设进程白名单中,若是,则根据所述进程标识和所述图层属性识别所述移动终端的显示场景。同理,其他步骤也可进行类似的优化。此处优化的好处在于,可有选择性的进行显示场景的识别,减少不必要的场景识别所消耗的系统资源。可选的,假设识别元素包括进程名、图层属性和触摸数据,当触摸数据对应的触摸数据处于预设触摸事件白名单中时,根据进程名、图层属性和触摸数据确定显示场景;当触摸数据对应的触摸数据未处于预设触摸事件白名单中时,根据进程名和图层属性确定显示场景,两种方式相当于局部变量和全局变量的关系,当局部变量存在时优先使用局部变量进行显示场景识别,否则使用全局变量进行显示场景识别。
图2为本发明实施例提供的另一种移动终端的显示场景识别方法的流程示意图,该方法包括如下步骤:
步骤201、获取移动终端中运行的应用程序的进程标识。
步骤202、获取所述应用程序绘制的图层集合中每个图层的图层属性。
步骤203、根据所述进程标识和所述图层属性识别移动终端的显示场景。
步骤204、根据所识别出的显示场景确定相应的目标绘制帧率、目标合成帧率、目标刷新率、目标显示亮度和目标分辨率中的至少一种。
为了便于理解,下面以Android系统为例,对Android系统中显示画面从生成到显示的过程进行简单的说明。图3为本发明实施例提供的一种显示过程示意图。
首先,在应用(Application)层,每个应用程序(以下简称应用或APP)包含1个或多个图层,各个应用APP1、APP2…APPN按照自己的应用设计情况(一般由对应的安装包APK决定)各自单独执行图层绘制(Render)操作(即绘制图层上的图像),并在绘制操作处理完成后,各应用将所绘制的所有图层发送给执行图层合成操作的图层合成模块(Surfaceflinger)。
然后,在应用框架(Framework)层,所有图层(包括可见图层和不可见图层)组成一个图层列表,定义为ListAll。图层合成模块从ListAll中挑选出可见图层组成可见图层列表,定义为DisplayList。随后,图层合成模块从系统中三个可循环使用的帧缓冲器(FrameBuffer,简称BF或buffer)中,找出一个空闲的FB,并在该空闲的FB上,根据应用配置信息,例如哪个图层应该置底、哪个图层应该置顶、哪个区域为可见区以及哪个区域为透明区等等,通过合成(Compose)操作,将DisplayList中包含的图层叠加在一起,得到最终的待显示画面。
最后,在内核(Kernel)层,可以将待显示画面传输给显示硬件(包括显示控制器和显示屏),使待显示画面最终显示在显示屏上。这里对显示屏的类型不做限定,例如可以是液晶显示器(Liquid Crystal Display,LCD)。
另外,Android系统在显示刷新的过程中引入了同步(Vsync)刷新机制。图4为本发明实施例提供的Vsync显示刷新机制的示意图。具体地,Vsync刷新机制其实就是在整个显示流程中,插入“心跳”即系统同步(Vsync)信号,由显示控制器发送给CPU,用于产生Vsync中断,以控制每次图层绘制操作和图层合成操作都需要按照心跳来完成,从而将整个显示过程中的关键步骤都纳入到Vsync的统一管理机制。Vsync信号的频率目前常见为60Hz。如图4所示,假设Vsync信号周期为T,不考虑信号的传输延迟,第一个Vsync信号Vsync1到达CPU后,CPU向各应用转发该第一个Vsync信号Vsync1,各应用响应用户在显示屏上的触摸滑动等操作,开始执行绘制操作;在各应用完成绘制操作后,得到各应用所绘制的多个图层。第二个Vsync信号Vsync2到达CPU后,CPU向图层合成模块转发该第二个Vsync信号Vsync2,图层合成模块开始执行图层合成操作,将各应用所绘制的多个图层进行合成,生成待显示画面。第三个Vsync信号Vsync3到达CPU后,系统开始执行显示刷新,并将该待显示画面最终显示在显示屏上。由上述描述可知,应用程序、图层合成模块和显示屏接收到的Vsync信号的频率是一致的,且是预先设置好的固定值。
在移动终端图层绘制、合成和刷新显示的流程中,存在3种帧率:绘制帧率、合成帧率和刷新率。
其中,绘制帧率为图层绘制完成后,触发图层合成模块进行图层合成的帧率,可以理解为单位时间(例如,1秒钟)绘制的图层帧数。所述绘制帧率包括应用程序的绘制帧率和图层的绘制帧率。系统中运行的应用程序可能有多个,每个应用程序可能包括多个图层,例如,上述举例中视频播放器应用程序一般包括三个图层U1、U2和U3。所述应用程序的绘制帧率为应用程序单位时间内执行绘制操作的次数,其中,执行一次绘制操作时可能绘制了一个或者多个图层。所述图层的绘制帧率为同一编号或名称(如前面的U1、U2或U3)的图层单位时间内被触发绘制的次数。
合成帧率为把各个应用程序绘制的图层合成为一个待显示画面的帧率,可以理解为单位时间合成的画面帧数。
刷新率为移动终端显示屏画面刷新的帧率。一般,显示屏会以60Hz的刷新率刷新。
示例性的,为了便于说明,将目标绘制帧率、目标合成帧率、目标刷新率、目标显示亮度和目标分辨率统称为目标参数值。
步骤205、根据所确定的目标绘制帧率、目标合成帧率、目标刷新率、目标显示亮度和目标分辨率中的至少一种执行相应的图层绘制、图层合成、显示画面刷新和显示屏亮度调节中的至少一种操作。
其中,目标绘制帧率可以是应用程序绘制图层时的最大绘制帧率。根据目标绘制帧率执行图层绘制操作可以是将发送至应用程序的参考信号(如上文所述的发送给应用程序的Vsync信号)的频率更改为目标绘制帧率,也可变更应用程序的图层绘制操作对参考信号的响应机制来将应用程序绘制图层时的最大绘制帧率限制在目标绘制帧率以内。例如,接收到的第2n+1个信号响应,接收到的第2n个信号不响应;又如,以n个(如5个)信号为一组,每组中的第一类预设编号(如1,2,4,5)的信号响应,第二类预设编号(如4)的信号不响应。
所述目标合成帧率可以是图层合成模块(如Surface flinger)合成图层时的最大合成帧率。根据目标合成帧率执行图层合成操作可以是将发送至图层合成模块的参考信号(如Vsync信号)的频率更改为目标合成帧率,也可变更图层合成模块的图层合成操作对参考信号的响应机制来将应用程序绘制图层时的最大绘制帧率限制在目标绘制帧率以内(如上述举例)。
根据目标刷新率执行显示画面刷新操作可以将发给显示屏的参考信号(如Vsync信号)的频率调整至目标刷新率,也可变更显示屏的显示画面刷新操作对参考信号的响应机制来实现使画面刷新的频率等于目标刷新率(如上述举例)。
由上述描述可知,本发明实施例中应用程序、图层合成模块和显示屏接收到的Vsync信号的频率是各自独立的,可以相同也可以不同,这样设置的好处在于,可根据不同的显示场景选择不同的信号频率的组合,优化显示控制。
根据目标显示亮度执行显示屏亮度调节可以是将显示屏亮度调节至目标显示亮度对应的数值,包括将显示屏的亮度值调到最低(熄灭屏幕)或最高。
所述目标分辨率可包含图层的目标分辨率和显示画面的目标分辨率。根据图层的目标分辨率执行图层绘制操作可以是由应用程序根据图层的目标分辨率绘制相应的图层。根据显示画面的目标分辨率执行图层合成操作可以是由图层合成模块根据显示画面的目标分辨率在合成图层之前将各图层的分辨率调整至显示画面的目标分辨率;也可以是由图层合成模块在执行图层合成操作的过程中将待显示画面的分辨率调整至显示画面的目标分辨率。其中,调整分辨率可通过图像处理相关手段实现。
本发明实施例提供的移动终端的显示场景识别方法,在识别出当前的显示场景后,根据所识别出来的显示场景确定相应的目标参数值,再根据目标参数值执行相应的操作,可对移动终端的显示进行更加合理的控制。
在上述技术方案的基础上,还可根据所识别出来的显示场景执行更多的操作。示例性的,可通过添加标记位来实现,标记位上的不同数值对应不同的操作。
图5为本发明实施例提供的另一种移动终端的显示场景识别方法的流程示意图,如图5所示,该方法包括:
步骤501、获取移动终端中运行的应用程序的进程标识。
步骤502、获取应用程序绘制的图层集合中每个图层的图层属性,根据图层属性确定图层场景类别。
步骤503、通过预设类型的传感器获取传感数据,根据传感数据确定传感器事件。
步骤504、获取触摸数据,根据触摸数据确定触摸事件。
步骤505、根据进程标识、图层场景类别、传感器事件和触摸事件识别移动终端的显示场景。
示例性的,下表1中给出了一种进程标识、图层场景类别、传感器事件和触摸事件与显示场景的对应关系,传感器以加速度传感器为例,图层属性以视频播放应用中的三个图层标识(U1、U2和U3)为例:
表1进程标识、图层场景类别、传感器事件和触摸事件与显示场景的对应关系
进程标识 图层场景类别 传感器事件 触摸事件 显示场景
进程A U1和U2 静止 点击 场景1
进程A U1和U2 运动 点击 场景2
进程A U1和U2 静止 慢速滑动 场景3
进程A U1和U2 运动 慢速滑动 场景4
进程A U1和U2 静止 快速滑动 场景5
进程A U1和U2 运动 快速滑动 场景6
进程B U1和U2 静止 点击 场景7
进程A U1和U3 静止 点击 场景13
步骤506、根据所识别出的显示场景确定相应的目标绘制帧率、目标合成帧率和目标刷新率。
需要说明的是,为了便于理解,本发明实施例中的目标绘制帧率以应用程序的目标绘制帧率为例进行说明,目标绘制帧率还可以细致到图层的目标绘制帧率。
示例性的,下表2中给出了显示场景与目标绘制帧率、目标合成帧率和目标刷新率的对应关系:
表2显示场景与目标绘制帧率、目标合成帧率和目标刷新率的对应关系
显示场景 目标绘制帧率(Hz) 目标合成帧率(Hz) 目标刷新率(Hz)
场景1 50 50 50
场景2 48 48 48
场景3 53 53 53
场景4 51 51 51
场景5 58 58 58
场景6 55 55 58
场景7 58 58 58
场景13 52 52 52
步骤507、根据所确定的目标绘制帧率、目标合成帧率和目标刷新率、执行相应的图层绘制、图层合成和显示画面刷新操作。
本发明实施例提供的移动终端的显示场景识别方法,根据进程标识、图层场景类别、传感器事件和触摸事件识别移动终端的显示场景,再根据显示场景执行个性化的图层绘制、图层合成和显示画面刷新操作,能够更加合理地控制移动终端的显示,当目标绘制帧率、目标合成帧率和目标刷新率低于正常的频率时,还可达到降低系统功耗的效果。
图6为本发明实施例提供的一种移动终端的显示场景识别装置的结构框图,该装置可由软件和/或硬件实现,一般集成在移动终端中,可通过执行移动终端的显示场景识别方法来进行显示场景识别。如图6所示,该装置包括:
进程标识获取模块601,用于获取移动终端中运行的应用程序的进程标识;
图层属性获取模块602,用于获取所述应用程序绘制的图层集合中每个图层的图层属性;
显示场景识别模块603,用于根据所述进程标识和所述图层属性识别移动终端的显示场景。
本发明实施例提供的移动终端的显示场景识别装置,可根据移动终端运行的应用程序的进程标识和图层属性准确地识别出移动终端的显示场景。
可选的,该装置还包括:
触摸数据获取模块,用于获取触摸数据;
所述显示场景识别模块用于:
根据所述进程标识、所述图层属性和所述触摸数据识别移动终端的显示场景。
可选的,该装置还包括:
传感数据获取模块,用于通过预设类型的传感器获取传感数据;
所述显示场景识别模块用于:
根据所述进程标识、所述图层属性、所述触摸数据和所述传感数据识别移动终端的显示场景。
可选的,所述图层属性包括缓存数据是否为空、横屏或竖屏模式、可见区域的属性、透明区域的属性、是否存在更新区域、更新区域的属性以及图像信息中的至少一个。
可选的,所述可见区域的属性包括以下至少一项:
可见区域是否为空,可见区域的数量、形状、尺寸和位置;
所述透明区域的属性包括以下至少一项:
透明区域的数量、形状、尺寸、位置以及与其他图层的可见区域的相对位置;
所述更新区域的属性包括以下至少一项:
更新区域的数量、位置、形状、尺寸以及面积与屏幕面积的比值;
所述图像信息包括以下至少一项:
图像是否为纯色、色阶、灰阶、色调、对比度、亮度、饱和度、透明度和模糊度中的至少一个。
可选的,该装置还包括:
目标参数值确定模块,用于在根据所述进程标识和所述传感数据识别移动终端的显示场景之后,根据所识别出的显示场景确定相应的目标绘制帧率、目标合成帧率、目标刷新率、目标显示亮度和目标分辨率中的至少一种;
操作执行模块,用于根据所确定的目标绘制帧率、目标合成帧率、目标刷新率、目标显示亮度和目标分辨率中的至少一种执行相应的图层绘制、图层合成、显示画面刷新和显示屏亮度调节中的至少一种操作。
本发明实施例提供了一种移动终端,该移动终端中可集成本发明实施例提供的移动终端的显示场景识别装置。图7为本发明实施例提供的一种移动终端的结构示意图。如图7所示,该移动终端可以包括:壳体(图中未示出)、存储器701、中央处理器(CentralProcessing Unit,CPU)702(又称处理器,以下简称CPU)、电路板(图中未示出)和电源电路(图中未示出)。所述电路板安置在所述壳体围成的空间内部;所述CPU702和所述存储器701设置在所述电路板上;所述电源电路,用于为所述移动终端的各个电路或器件供电;所述存储器701,用于存储可执行程序代码;所述CPU702通过读取所述存储器701中存储的可执行程序代码来运行与所述可执行程序代码对应的计算机程序,以实现以下步骤:
获取移动终端中运行的应用程序的进程标识;
获取所述应用程序绘制的图层集合中每个图层的图层属性;
根据所述进程标识和所述图层属性识别所述移动终端的显示场景。
所述移动终端还包括:外设接口703、RF(Radio Frequency,射频)电路705、音频电路706、扬声器711、电源管理芯片708、输入/输出(I/O)子系统709、触摸屏712、其他输入/控制设备710以及外部端口704,这些部件通过一个或多个通信总线或信号线707来通信。
应该理解的是,图示移动终端700仅仅是移动终端的一个范例,并且移动终端700可以具有比图中所示出的更多的或者更少的部件,可以组合两个或更多的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
下面就本实施例提供的用于显示场景识别的移动终端进行详细的描述,该移动终端以手机为例。
存储器701,所述存储器701可以被CPU702、外设接口703等访问,所述存储器701可以包括高速随机存取存储器,还可以包括非易失性存储器,例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
外设接口703,所述外设接口703可以将设备的输入和输出外设连接到CPU702和存储器701。
I/O子系统709,所述I/O子系统709可以将设备上的输入输出外设,例如触摸屏712和其他输入/控制设备710,连接到外设接口703。I/O子系统709可以包括显示控制器7091和用于控制其他输入/控制设备710的一个或多个输入控制器7092。其中,一个或多个输入控制器7092从其他输入/控制设备710接收电信号或者向其他输入/控制设备710发送电信号,其他输入/控制设备710可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是,输入控制器7092可以与以下任一个连接:键盘、红外端口、USB接口以及诸如鼠标的指示设备。
触摸屏712,所述触摸屏712是用户移动终端与用户之间的输入接口和输出接口,将可视输出显示给用户,可视输出可以包括图形、文本、图标、视频等。
I/O子系统709中的显示控制器7091从触摸屏712接收电信号或者向触摸屏712发送电信号。触摸屏712检测触摸屏上的接触,显示控制器7091将检测到的接触转换为与显示在触摸屏712上的用户界面对象的交互,即实现人机交互,显示在触摸屏712上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是,设备还可以包括光鼠,光鼠是不显示可视输出的触摸敏感表面,或者是由触摸屏形成的触摸敏感表面的延伸。
RF电路705,主要用于建立手机与无线网络(即网络侧)的通信,实现手机与无线网络的数据接收和发送。例如收发短信息、电子邮件等。具体地,RF电路705接收并发送RF信号,RF信号也称为电磁信号,RF电路705将电信号转换为电磁信号或将电磁信号转换为电信号,并且通过该电磁信号与通信网络以及其他设备进行通信。RF电路705可以包括用于执行这些功能的已知电路,其包括但不限于天线系统、RF收发机、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC(COder-DECoder,编译码器)芯片组、用户标识模块(Subscriber Identity Module,SIM)等等。
音频电路706,主要用于从外设接口703接收音频数据,将该音频数据转换为电信号,并且将该电信号发送给扬声器711。
扬声器711,用于将手机通过RF电路705从无线网络接收的语音信号,还原为声音并向用户播放该声音。
电源管理芯片708,用于为CPU702、I/O子系统及外设接口所连接的硬件进行供电及电源管理。
本发明实施例提供的移动终端,可根据移动终端运行的应用程序的进程标识和图层属性准确地识别出移动终端的显示场景。
上述实施例中提供的移动终端的显示场景识别装置及移动终端可执行本发明任意实施例所提供的移动终端的显示场景识别方法,具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节,可参见本发明任意实施例所提供的移动终端的显示场景识别方法。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (9)

1.一种移动终端的显示场景识别方法,其特征在于,包括:
获取移动终端中运行的应用程序的进程标识;
获取所述应用程序绘制的图层集合中每个图层的图层属性,所述图层属性包括图层标识、缓存数据是否为空、横屏或竖屏模式;
根据属于预设白名单的所述进程标识和所述图层属性识别所述移动终端的显示场景。
2.根据权利要求1所述的方法,其特征在于,还包括:
获取触摸数据;
所述根据属于预设白名单的所述进程标识和所述图层属性识别移动终端的显示场景,包括:
根据所述进程标识、所述图层属性和所述触摸数据识别移动终端的显示场景。
3.根据权利要求2所述的方法,其特征在于,还包括:
通过预设类型的传感器获取传感数据;
所述根据所述进程标识、所述图层属性和所述触摸数据识别移动终端的显示场景,包括:
根据所述进程标识、所述图层属性、所述触摸数据和所述传感数据识别移动终端的显示场景。
4.根据权利要求1-3任一所述的方法,其特征在于,在识别移动终端的显示场景之后,还包括:
根据所识别出的显示场景确定相应的目标绘制帧率、目标合成帧率、目标刷新率、目标显示亮度和目标分辨率中的至少一种;
根据所确定的目标绘制帧率、目标合成帧率、目标刷新率、目标显示亮度和目标分辨率中的至少一种执行相应的图层绘制、图层合成、显示画面刷新和显示屏亮度调节中的至少一种操作。
5.一种移动终端的显示场景识别装置,其特征在于,包括:
进程标识获取模块,用于获取移动终端中运行的应用程序的进程标识;
图层属性获取模块,用于获取所述应用程序绘制的图层集合中每个图层的图层属性,所述图层属性包括图层标识、缓存数据是否为空、横屏或竖屏模式;
显示场景识别模块,用于根据属于预设白名单的所述进程标识和所述图层属性识别所述移动终端的显示场景。
6.根据权利要求5所述的装置,其特征在于,还包括:
触摸数据获取模块,用于获取触摸数据;
所述显示场景识别模块用于:
根据属于预设白名单的所述进程标识、所述图层属性和所述触摸数据识别移动终端的显示场景。
7.根据权利要求6所述的装置,其特征在于,还包括:
传感数据获取模块,用于通过预设类型的传感器获取传感数据;
所述显示场景识别模块用于:
根据所述进程标识、所述图层属性、所述触摸数据和所述传感数据识别移动终端的显示场景。
8.根据权利要求5-7任一所述的装置,其特征在于,还包括:
目标参数值确定模块,用于在识别移动终端的显示场景之后,根据所识别出的显示场景确定相应的目标绘制帧率、目标合成帧率、目标刷新率、目标显示亮度和目标分辨率中的至少一种;
操作执行模块,用于根据所确定的目标绘制帧率、目标合成帧率、目标刷新率、目标显示亮度和目标分辨率中的至少一种执行相应的图层绘制、图层合成、显示画面刷新和显示屏亮度调节中的至少一种操作。
9.一种移动终端,其特征在于,包括存储器,处理器及存储在存储器上并可在处理器运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现以下步骤:
获取移动终端中运行的应用程序的进程标识;
获取所述应用程序绘制的图层集合中每个图层的图层属性,所述图层属性包括图层标识、缓存数据是否为空、横屏或竖屏模式;
根据属于预设白名单的所述进程标识和所述图层属性识别所述移动终端的显示场景。
CN201710142061.5A 2017-03-10 2017-03-10 一种移动终端的显示场景识别方法、装置及移动终端 Active CN106874017B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201710142061.5A CN106874017B (zh) 2017-03-10 2017-03-10 一种移动终端的显示场景识别方法、装置及移动终端
PCT/CN2017/106942 WO2018161586A1 (zh) 2017-03-10 2017-10-19 移动终端的显示场景识别方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710142061.5A CN106874017B (zh) 2017-03-10 2017-03-10 一种移动终端的显示场景识别方法、装置及移动终端

Publications (2)

Publication Number Publication Date
CN106874017A CN106874017A (zh) 2017-06-20
CN106874017B true CN106874017B (zh) 2019-10-15

Family

ID=59171415

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710142061.5A Active CN106874017B (zh) 2017-03-10 2017-03-10 一种移动终端的显示场景识别方法、装置及移动终端

Country Status (2)

Country Link
CN (1) CN106874017B (zh)
WO (1) WO2018161586A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106874017B (zh) * 2017-03-10 2019-10-15 Oppo广东移动通信有限公司 一种移动终端的显示场景识别方法、装置及移动终端
CN109426830B (zh) * 2017-08-29 2022-05-17 武汉安天信息技术有限责任公司 一种自动识别移动终端场景的方法和装置
CN108156508B (zh) * 2017-12-28 2020-10-20 北京安云世纪科技有限公司 弹幕信息处理的方法、装置、移动终端、服务器及系统
CN109726303A (zh) * 2018-12-28 2019-05-07 维沃移动通信有限公司 一种图像推荐方法和终端
WO2022089043A1 (zh) 2020-10-30 2022-05-05 海信视像科技股份有限公司 显示设备、几何图形识别方法及多图层叠加显示方法
CN112672199B (zh) * 2020-12-22 2022-07-29 海信视像科技股份有限公司 一种显示设备及多图层叠加方法
CN113032884B (zh) * 2021-04-07 2023-03-17 深圳大学 建筑空间量化方法、装置、设备与计算机可读存储介质
CN113672326B (zh) * 2021-08-13 2024-05-28 康佳集团股份有限公司 应用窗口录屏方法、装置、终端设备及存储介质
CN114510207B (zh) * 2022-02-28 2024-09-13 亿咖通(湖北)技术有限公司 图层合成方法、装置、设备、介质及程序产品
CN115690269B (zh) * 2022-10-31 2023-11-07 荣耀终端有限公司 一种视图对象的处理方法及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103593155A (zh) * 2013-11-06 2014-02-19 华为终端有限公司 显示帧生成方法和终端设备
CN104731543A (zh) * 2015-03-23 2015-06-24 深圳市欧珀通信软件有限公司 一种屏幕刷新率的显示方法和装置
CN105739670A (zh) * 2016-02-01 2016-07-06 广东欧珀移动通信有限公司 用于移动终端的显示方法、装置和移动终端
CN106020987A (zh) * 2016-05-31 2016-10-12 广东欧珀移动通信有限公司 处理器中内核运行配置的确定方法以及装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103050108B (zh) * 2012-12-17 2015-12-02 华为终端有限公司 一种屏幕背光动态调整方法以及用户终端
CN105278811B (zh) * 2015-10-23 2022-06-07 三星电子(中国)研发中心 智能终端的屏幕显示装置和方法
CN106874017B (zh) * 2017-03-10 2019-10-15 Oppo广东移动通信有限公司 一种移动终端的显示场景识别方法、装置及移动终端
CN106919400A (zh) * 2017-03-10 2017-07-04 广东欧珀移动通信有限公司 一种移动终端的显示场景识别方法、装置及移动终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103593155A (zh) * 2013-11-06 2014-02-19 华为终端有限公司 显示帧生成方法和终端设备
CN104731543A (zh) * 2015-03-23 2015-06-24 深圳市欧珀通信软件有限公司 一种屏幕刷新率的显示方法和装置
CN105739670A (zh) * 2016-02-01 2016-07-06 广东欧珀移动通信有限公司 用于移动终端的显示方法、装置和移动终端
CN106020987A (zh) * 2016-05-31 2016-10-12 广东欧珀移动通信有限公司 处理器中内核运行配置的确定方法以及装置

Also Published As

Publication number Publication date
CN106874017A (zh) 2017-06-20
WO2018161586A1 (zh) 2018-09-13

Similar Documents

Publication Publication Date Title
CN106874017B (zh) 一种移动终端的显示场景识别方法、装置及移动终端
CN106791212B (zh) 一种移动终端刷新率的控制方法、装置及移动终端
CN106936995B (zh) 一种移动终端帧率的控制方法、装置及移动终端
CN106951055B (zh) 一种移动终端的显示控制方法、装置及移动终端
CN106919400A (zh) 一种移动终端的显示场景识别方法、装置及移动终端
CN106919358B (zh) 一种移动终端的显示控制方法、装置及移动终端
CN106933587A (zh) 一种图层绘制控制方法、装置及移动终端
CN106933526B (zh) 一种动态调节屏幕刷新率的方法、装置及移动终端
CN111966251B (zh) 卡片显示方法、电子设备及计算机可读存储介质
CN106657681B (zh) 一种移动终端刷新率的控制方法、装置及移动终端
CN106919243B (zh) 一种移动终端的控制方法、装置及移动终端
CN106919401B (zh) 一种动态调节分辨率的方法、装置及移动终端
CN106941563A (zh) 一种移动终端刷新率的控制方法、装置及移动终端
CN106933527A (zh) 一种移动终端的显示控制方法、装置及移动终端
CN106941625A (zh) 一种移动终端的播放控制方法、装置及移动终端
CN106919402A (zh) 一种移动终端的控制方法、装置及移动终端
CN106933327A (zh) 一种移动终端帧率的控制方法、装置及移动终端
CN106933361A (zh) 一种移动终端的显示控制方法、装置及移动终端
CN106951054A (zh) 一种应用程序的控制方法、装置及移动终端
CN106896899A (zh) 一种移动终端图像绘制的控制方法、装置及移动终端
CN107402713B (zh) 加快黑屏手势处理的方法、装置、存储介质及移动终端
CN109753892A (zh) 人脸皱纹的生成方法、装置、计算机存储介质和终端
CN107450838A (zh) 黑屏手势的响应方法、装置、存储介质及移动终端
CN108733193A (zh) 智能调整帧率的方法、装置、存储介质及智能终端
CN106933329B (zh) 一种移动终端适配节能等级的方法、装置及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant after: OPPO Guangdong Mobile Communications Co., Ltd.

Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant before: Guangdong OPPO Mobile Communications Co., Ltd.

GR01 Patent grant
GR01 Patent grant