CN106936995B - 一种移动终端帧率的控制方法、装置及移动终端 - Google Patents

一种移动终端帧率的控制方法、装置及移动终端 Download PDF

Info

Publication number
CN106936995B
CN106936995B CN201710142513.XA CN201710142513A CN106936995B CN 106936995 B CN106936995 B CN 106936995B CN 201710142513 A CN201710142513 A CN 201710142513A CN 106936995 B CN106936995 B CN 106936995B
Authority
CN
China
Prior art keywords
frame per
mobile terminal
target object
synthesis
priority
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710142513.XA
Other languages
English (en)
Other versions
CN106936995A (zh
Inventor
彭德良
易永鹏
苟生俊
袁晓日
甘高亭
郑志勇
杨海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201710142513.XA priority Critical patent/CN106936995B/zh
Publication of CN106936995A publication Critical patent/CN106936995A/zh
Priority to PCT/CN2017/106941 priority patent/WO2018161585A1/zh
Priority to EP17900057.5A priority patent/EP3584765B1/en
Application granted granted Critical
Publication of CN106936995B publication Critical patent/CN106936995B/zh
Priority to US16/565,348 priority patent/US10863213B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234381—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/22—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
    • G09G5/30—Control of display attribute
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4621—Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00—Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02—Details of power systems and of start or stop of display operation
    • G09G2330/021—Power management, e.g. power saving
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G09G2340/0435—Change or adaptation of the frame rate of the video stream
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/10—Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/20—Details of the management of multiple sources of image data

Abstract

本发明实施例公开了一种移动终端帧率的控制方法、装置及移动终端，所述方法包括：获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口；根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率；根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成。本发明实施例提供的技术方案，可以合理的控制移动终端的合成帧率。

Description

一种移动终端帧率的控制方法、装置及移动终端
技术领域
本发明实施例涉及移动终端技术领域，尤其涉及一种移动终端帧率的控制方法、装置及移动终端。
背景技术
随着移动终端技术的发展，各式各样的移动终端已成为人们生活工作中不可或缺的工具。在安装有操作系统的移动终端中，移动终端通过不断刷新显示画面来呈现不同时刻下的各种显示画面。
在手机等移动终端中的显示刷新流程中主要包括画面绘制操作、画面合成操作和显示操作。各应用如桌面或视频等，执行绘图(Render)操作，以分别绘制各自的图像；待所有应用完成Render操作后，系统执行合成(Compose)操作，以将各应用所绘制的图像合成为一个显示帧；将该显示帧输出到屏幕上进行最终显示。相关技术中的移动终端在各个操作中帧率的控制方法存在缺陷，需要改进。
发明内容
本发明实施例提供一种移动终端帧率的控制方法、装置及移动终端，可以合理的控制移动终端的合成帧率。
在第一方面，本发明实施例提供了一种移动终端帧率的控制方法，包括：
获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口；
根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率；
根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成。
在第二方面，本发明实施例提供了一种移动终端帧率的控制装置，包括：
绘制帧率获取模块，用于获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口；
合成帧率确定模块，用于根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率；
待显示画面合成模块，用于根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成。
在第三方面，本发明实施例提供了一种移动终端，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现以下步骤：
获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口；
根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率；
根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成。
本发明实施例通过获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口，根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率，以根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成，可以合理的控制移动终端的合成帧率。
附图说明
图1是本发明一个实施例提供的一种移动终端帧率的控制方法的流程图；
图2是本发明一个实施例提供的一种显示过程的示意图；
图3是本发明一个实施例提供的Vsync显示刷新机制的示意图；
图4是本发明一个实施例提供的一种移动终端帧率的控制方法的流程图；
图5是本发明一个实施例提供的一种移动终端帧率的控制装置的结构示意图；
图6是本发明一个实施例提供的一种移动终端的结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚，下面结合附图对本发明具体实施例作进一步的详细描述。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部内容。在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理，但是其中的许多操作可以被并行地、并发地或者同时实施。此外，各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
图1给出了本发明一个实施例提供的一种移动终端帧率的控制方法的流程图，本实施例的方法可以由移动终端帧率的控制装置来执行，该装置可通过硬件和/或软件的方式实现，所述装置可作为移动终端一部分设置在所述移动终端的内部。
如图1所示，本实施例提供的移动终端帧率的控制方法包括以下步骤：
步骤101、获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口。
其中，获取所述各个目标对象的绘制帧率的方式可以包括：获取各个目标对象在当前运行场景下的实时绘制帧率，或者从设定白名单中获取各个目标对象在当前运行场景下的绘制帧率。
在移动终端的运行过程中可能存在各种各样的运行场景，示例1，当前运行了一个应用程序，例如视频全屏播放的场景；示例2，当前同时运行了多个应用程序，例如同时显示浏览器应用的内容和安全卫士应用以浮标形式展现的内容；示例3，当前运行了一个或者多个窗口，其中，每个窗口中可显示一个或多个应用程序。在设定白名单中，可以根据运行场景为目标对象设置与运行场景对应的绘制帧率。
其中，移动终端的运行场景可以根据运行的应用程序的进程标识进行区分，进一步的，还可以根据进程标识结合触摸数据进行运行场景的识别和区分，示例性的，触摸数据可包括触摸位置、触摸面积及触摸时长等数据。具体的，可对触摸数据进行统计分析，根据统计分析结果确定相应的触摸事件，再根据进程标识和触摸事件识别移动终端的运行场景。例如，触摸事件可包括无事件(如预设时段内未检测到触摸屏被触摸)、点击事件、离开事件(如由触摸变为释放触摸)、慢速滑动事件和快速滑动事件等。
该方法还包括设定各个目标对象的优先级的步骤，根据应用程序的应用属性或者窗口属性来设置应用程序或者窗口的优先级，例如，可将应用类型为视频的应用设置为最高优先级，社交软件类型的应用如微信、QQ设置为中级优先级，阅读器类型的应用设置为最低优先级。可以将活动类型的窗口设置为高优先级，非活动窗口设置为低优先级。可以理解的是，优先级的等级可以设置2个、3个或者其他个数。
步骤102、根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率。
为了便于理解，下面以Android系统为例，对Android系统中显示画面从生成到显示的过程进行简单的说明。图2为本发明一个实施例提供的一种显示过程的示意图。
首先，在应用(Application)层，每个应用程序(以下简称应用或APP)按照自己的应用设计情况(一般由对应的安装包APK决定)各自单独执行图像绘制(Render)操作，并在绘制操作处理完成后，各应用将所绘制的所有图像发送给执行图像合成操作的合成模块(Surface flinger)。
然后，在应用框架(Framework)层，系统有三个帧缓冲器(Frame Buffer，FB)，三个FB可以循环使用。Surface flinger从三个FB中找出一个空闲的FB，并在该空闲的FB上，根据应用配置信息，例如哪个图像应该置底、哪个图像应该置顶、哪个图像采用透底效果等，通过合成(Compose)操作，将各个应用分别绘制的多个图像叠加在一起，得到最终显示的显示帧(待显示画面)。
最后，在内核(Kernel)层，可以将待显示画面通过移动终端显示处理(MobileDisplay Process，MDP)模块传输给显示硬件(包括显示控制器和显示屏，使待显示画面最终显示在显示屏上。这里对显示屏的类型不做限定，例如可以是液晶显示器(LiquidCrystal Display，LCD)。
另外，Android系统在显示刷新的过程中，引入了同步(Vsync)刷新机制。图3给出了本发明一个实施例提供的Vsync显示刷新机制的示意图。具体地，Vsync刷新机制其实就是在整个显示流程中，插入“心跳”即系统同步(Vsync)信号，由显示控制器发送给CPU，用于产生Vsync中断，以控制每次Render操作和Compose操作都需要按照心跳来完成，从而将整个显示过程中的关键步骤都纳入到Vsync的统一管理机制。Vsync信号频率目前常见为60Hz。
如图3所示，假设Vsync信号周期为T，不考虑信号的传输延迟，第一个Vsync信号Vsync1到达CPU后，CPU控制合成模块向各应用转发该第一个Vsync信号Vsync1，各应用响应于用户在显示屏上的触摸滑动等操作，开始执行Render操作；并在各应用完成Render操作后，得到各应用所绘制的多个图像。第二个Vsync信号Vsync2到达CPU后，CPU控制显示控制器向合成模块转发该第二个Vsync信号Vsync2，合成模块开始执行图像合成操作，将各应用所绘制的多个图像进行合成，生成待显示画面。第三个Vsync信号Vsync3到达CPU后，系统开始执行显示刷新，并将该待显示画面最终显示在显示屏上。
在移动终端图像绘制、合成和刷新显示的流程中，存在3种帧率：绘制帧率、合成帧率和刷新率。
其中，绘制帧率为应用程序在图像绘制完成后，触发合成模块合成的帧率，可以理解为应用程序单位时间(例如，1秒钟)绘制图像的次数。
合成帧率为把各个应用程序的绘制图像合成为一个待显示画面的帧率。
刷新率为移动终端的显示屏显示画面刷新的帧率。
本发明的帧率控制方法主要涉及上述待显示画面显示流程中的图像绘制操作。其中，绘制操作的执行方式，可以为软件方式、硬件方式或其他方式。软件方式一般是在移动终端设备的CPU中使用算法实现绘制操作。硬件方式一般是在移动终端设备的GPU(GraphicProcessing Unit，图形处理器)或移动终端显示处理(Mobile Display Process，MDP)模块中使用专用芯片来实现绘制操作。
本发明的帧率控制方法主要涉及上述待显示画面显示流程中的图像绘制和合成操作。其中，绘制和合成操作的执行方式，可以为软件方式、硬件方式或其他方式。软件方式一般是在移动终端设备的CPU中使用算法实现。硬件方式一般是在移动终端设备的GPU(Graphic Processing Unit，图形处理器)或移动终端显示处理(Mobile DisplayProcess，MDP)模块中使用专用芯片来实现。
本实施例提供的方法在确定移动终端的合成帧率时，可以充分考虑当前运行的各个目标对象的绘制帧率和设定优先级，可以将所述各个目标对象的绘制帧率与对应的权值的乘积的和值，确定为移动终端的合成帧率，或者将优先级最高的目标对象的绘制帧率确定为移动终端的合成帧率。
该步骤102可以包括：将所述各个目标对象的绘制帧率与对应的权值的乘积的和值，确定为移动终端的合成帧率，其中，所述和值小于移动终端的显示屏的最大刷新率；或者，根据所述各个目标对象的绘制帧率和设定优先级，将优先级最高的目标对象的绘制帧率确定为移动终端的合成帧率。
下面对绘制帧率与合成帧率的关系进行说明：合成帧率C的取值范围为：Pmax≤C≤min(Psum，刷新率)，其中，Pmax为所有应用程序绘制帧率中最大的绘制帧率，Psum为所有应用程序绘制帧率的和值。示例性的，若有3个应用程序在运行，显示屏的最大刷新率为60。各个应用程序的绘制帧率分别是20，30，40，因为，在同一个Vsync信号图像绘制操作中，可能有1个或者2个或者3个应用程序在该Vsync信号内执行绘制操作，不同的应用程序在单位时间内的每次绘制操作可能在相同的Vsync信号内执行也可能在不同的Vsync信号内执行，那么合成帧率C的取值为[40，60]。
其中，将优先级最高的目标对象的绘制帧率确定为合成帧率的原因是，一般用户关注的是优先级最高的目标对象，若将优先级最高的目标对象的绘制帧率设置为合成帧率，不仅可以保证该优先级最高的应用程序所绘制的图像都能够被合成，还能够减少其他优先级较低的应用程序的绘制图像的合成操作，降低了移动终端中用于执行合成操作的CPU或者GPU的功耗。如上述示例，若优先级较高的应用程序的绘制帧率为40，那么合成帧率在实际合成过程中的取值为[40，60]，通过将合成帧率设置为40，可以降低合成操作的频率，降低功耗。
步骤103、根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成。
根据所述合成帧率，将各个目标对象绘制的图像进行合成，以合成待显示画面进行显示。
该方法还可以包括：接收用户的优先级更新指令，根据所述优先级更新指令更新所述各个目标对象的优先级。
该方法还可以包括：将移动终端的显示屏的刷新率设置为与所述合成帧率相同。将所述显示屏的刷新率设为与所述合成帧率相同，相比显示屏以固定的60HZ进行刷新，可以降低移动终端的显示屏的功耗。
本实施例提供的移动终端的帧率的控制方法，通过获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口，根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率，以根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成，可以合理的控制移动终端的合成帧率。
图4给出了本发明一个实施例提供的一种移动终端帧率的控制方法的流程图。如图4所示，本实施例提供的方法包括以下步骤：
步骤201、获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口。
步骤202、根据所述各个目标对象的设定优先级确定各自对应的权值。
其中，设定优先级高的权值相应可以大一些，所述各个目标对象各自对应的权值的和为1。示例性的，当前运行的3个应用程序中应用1对应的优先级最高为1级，应用2对应的优先级为2级，应用3对应的优先级为3级，那么可确定应用1-3各自对应的权值为0.6、0.4和0.2。
步骤203、将所述各个目标对象的绘制帧率与对应的权值的乘积的和值，确定为移动终端的合成帧率。其中，所述和值小于移动终端的显示屏的最大刷新率。
如上述示例，可将0.6*P1+0.4*P2+0.2*P3的和值X确定为合成帧率，所述X小于显示屏的最大刷新率，若X大于显示屏的最大刷新率，则可将合成帧率设置为显示屏的最大刷新率。其中，P1为应用1的绘制帧率，P2为应用2的绘制帧率，P3为应用3的绘制帧率。
该步骤这样设置的好处是：根据当前运行的各个应用程序的优先级来确定合成帧率，相比于单独根据各个应用程序的绘制帧率来确定合成帧率，能够更加贴合当前运行场景下优先级高的应用程序或者窗口来进行合成帧率的控制。
步骤204、根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成。
根据所述合成帧率，将各个目标对象绘制的图像进行合成，以合成待显示画面进行显示。
本实施例提供的方法，通过获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口，并根据所述各个目标对象的设定优先级确定各自对应的权值，将所述各个目标对象的绘制帧率与对应的权值的乘积的和值确定移动终端的合成帧率，以根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成，可以合理的控制移动终端的合成帧率。
图5为本发明一个实施例提供的一种移动终端帧率的控制装置的结构示意图，该装置可由软件和/或硬件实现，集成在移动终端中。如图5所示，该装置包括绘制帧率获取模块31、合成帧率确定模块32和待显示画面合成模块33。
绘制帧率获取模块31，用于获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口；
合成帧率确定模块32，用于根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率；
待显示画面合成模块33，用于根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成。
进一步的，所述绘制帧率获取模块用于：
从设定白名单中获取移动终端的各个目标对象在当前运行场景下的绘制帧率。
进一步的，所述合成帧率确定模块用于：
根据所述各个目标对象的绘制帧率和设定优先级，将优先级最高的目标对象的绘制帧率确定为移动终端的合成帧率。
进一步的，所述绘制帧率获取模块用于：
获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级；
根据所述各个目标对象的设定优先级确定各自对应的权值；
所述合成帧率确定模块用于：
将所述各个目标对象的绘制帧率与对应的权值的乘积的和值，确定为移动终端的合成帧率，其中，所述和值小于移动终端的显示屏的最大刷新率。
进一步的，所述装置还包括：
优先级更新模块，用于接收用户的优先级更新指令，根据所述优先级更新指令更新所述各个目标对象的优先级。
进一步的，所述装置还包括：
刷新率设置模块，用于将移动终端的显示屏的刷新率设置为与所述合成帧率相同。
本实施例提供的装置，通过获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口，根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率，以根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成，可以合理的控制移动终端的合成帧率。
图6为本发明一个实施例提供的一种移动终端的结构示意图，该移动终端可以包括本发明任意实施例提供的移动终端帧率的控制装置，如图6所示，该移动终端可以包括：存储器401、中央处理器(Central Processing Unit，CPU)402(又称处理器，以下简称CPU)、所述存储器401，用于存储可执行程序代码；所述处理器402通过读取所述存储器401中存储的可执行程序代码来运行与所述可执行程序代码对应的程序，以用于执行：获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口；根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率；根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成。
所述移动终端还包括：外设接口403、RF(Radio Frequency，射频)电路405、音频电路406、扬声器411、电源管理芯片408、输入/输出(I/O)子系统409、触摸屏(显示屏)412、其他输入/控制设备410以及外部端口404，这些部件通过一个或多个通信总线或信号线407来通信。
应该理解的是，图示移动终端400仅仅是移动终端的一个范例，并且移动终端400可以具有比图中所示出的更多的或者更少的部件，可以组合两个或更多的部件，或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
下面就本实施例提供的用于控制帧率的移动终端进行详细的描述，该移动终端以手机为例。
存储器401，所述存储器401可以被CPU402、外设接口403等访问，所述存储器401可以包括高速随机存取存储器，还可以包括非易失性存储器，例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
外设接口403，所述外设接口403可以将设备的输入和输出外设连接到CPU402和存储器401。
I/O子系统409，所述I/O子系统409可以将设备上的输入输出外设，例如触摸屏412和其他输入/控制设备410，连接到外设接口403。I/O子系统409可以包括显示控制器4091和用于控制其他输入/控制设备410的一个或多个输入控制器4092。其中，一个或多个输入控制器4092从其他输入/控制设备410接收电信号或者向其他输入/控制设备410发送电信号，其他输入/控制设备410可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是，输入控制器4092可以与以下任一个连接：键盘、红外端口、USB接口以及诸如鼠标的指示设备。
触摸屏412，所述触摸屏412是用户终端与用户之间的输入接口和输出接口，将可视输出显示给用户，可视输出可以包括图形、文本、图标、视频等。
I/O子系统409中的显示控制器4091从触摸屏412接收电信号或者向触摸屏412发送电信号。触摸屏412检测触摸屏上的接触，显示控制器4091将检测到的接触转换为与显示在触摸屏412上的用户界面对象的交互，即实现人机交互，显示在触摸屏412上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是，设备还可以包括光鼠，光鼠是不显示可视输出的触摸敏感表面，或者是由触摸屏形成的触摸敏感表面的延伸。
RF电路405，主要用于建立手机与无线网络(即网络侧)的通信，实现手机与无线网络的数据接收和发送。例如收发短信息、电子邮件等。具体地，RF电路405接收并发送RF信号，RF信号也称为电磁信号，RF电路405将电信号转换为电磁信号或将电磁信号转换为电信号，并且通过该电磁信号与通信网络以及其他设备进行通信。RF电路405可以包括用于执行这些功能的已知电路，其包括但不限于天线系统、RF收发机、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC(COder-DECoder，编译码器)芯片组、用户标识模块(Subscriber Identity Module，SIM)等等。
音频电路406，主要用于从外设接口403接收音频数据，将该音频数据转换为电信号，并且将该电信号发送给扬声器411。
扬声器411，用于将手机通过RF电路405从无线网络接收的语音信号，还原为声音并向用户播放该声音。
电源管理芯片408，用于为CPU402、I/O子系统及外设接口403所连接的硬件进行供电及电源管理。
上述移动终端可执行本发明任意实施例所提供的方法，具备执行方法相应的功能模块，通过获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口，根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率，以根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成，可以合理的控制移动终端的合成帧率。
上述仅为本发明的较佳实施例及所运用的技术原理。本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行的各种明显变化、重新调整及替代均不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由权利要求的范围决定。

Claims (13)

1.一种移动终端帧率的控制方法，其特征在于，包括：
获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口；
根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率；
根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成。
2.根据权利要求1所述的方法，其特征在于，所述获取移动终端当前运行的各个目标对象的绘制帧率包括：
从设定白名单中获取移动终端的各个目标对象在当前运行场景下的绘制帧率。
3.根据权利要求1所述的方法，其特征在于，所述根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率包括：
根据所述各个目标对象的绘制帧率和设定优先级，将优先级最高的目标对象的绘制帧率确定为移动终端的合成帧率。
4.根据权利要求1所述的方法，其特征在于，所述获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级包括：
获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级；
根据所述各个目标对象的设定优先级确定各自对应的权值；
所述根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率包括：
将所述各个目标对象的绘制帧率与对应的权值的乘积的和值，确定为移动终端的合成帧率，其中，所述和值小于移动终端的显示屏的最大刷新率。
5.根据权利要求1-4任一项所述的方法，其特征在于，还包括：
接收用户的优先级更新指令，根据所述优先级更新指令更新所述各个目标对象的优先级。
6.根据权利要求1-4任一项所述的方法，其特征在于，还包括：
将移动终端的显示屏的刷新率设置为与所述合成帧率相同。
7.一种移动终端帧率的控制装置，其特征在于，包括：
绘制帧率获取模块，用于获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口；
合成帧率确定模块，用于根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率；
待显示画面合成模块，用于根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成。
8.根据权利要求7所述的装置，其特征在于，所述绘制帧率获取模块用于：
从设定白名单中获取移动终端的各个目标对象在当前运行场景下的绘制帧率。
9.根据权利要求7所述的装置，其特征在于，所述合成帧率确定模块用于：
根据所述各个目标对象的绘制帧率和设定优先级，将优先级最高的目标对象的绘制帧率确定为移动终端的合成帧率。
10.根据权利要求7所述的装置，其特征在于，所述绘制帧率获取模块用于：
获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级；
根据所述各个目标对象的设定优先级确定各自对应的权值；
所述合成帧率确定模块用于：
将所述各个目标对象的绘制帧率与对应的权值的乘积的和值，确定为移动终端的合成帧率，其中，所述和值小于移动终端的显示屏的最大刷新率。
11.根据权利要求7-10任一项所述的装置，其特征在于，还包括：
优先级更新模块，用于接收用户的优先级更新指令，根据所述优先级更新指令更新所述各个目标对象的优先级。
12.根据权利要求7-10任一项所述的装置，其特征在于，还包括：
刷新率设置模块，用于将移动终端的显示屏的刷新率设置为与所述合成帧率相同。
13.一种移动终端，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现以下步骤：
获取移动终端当前运行的各个目标对象的绘制帧率和设定优先级，所述目标对象包括应用程序或者窗口；
根据所述各个目标对象的绘制帧率和设定优先级，确定移动终端的合成帧率；
根据所述合成帧率，进行所述当前运行的各个目标对象的待显示画面的合成。
CN201710142513.XA 2017-03-10 2017-03-10 一种移动终端帧率的控制方法、装置及移动终端 Active CN106936995B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201710142513.XA CN106936995B (zh) 2017-03-10 2017-03-10 一种移动终端帧率的控制方法、装置及移动终端
PCT/CN2017/106941 WO2018161585A1 (zh) 2017-03-10 2017-10-19 电子设备帧率的控制方法、装置、存储介质及电子设备
EP17900057.5A EP3584765B1 (en) 2017-03-10 2017-10-19 Method and apparatus for controlling frame rate of electronic device, storage medium, and electronic device
US16/565,348 US10863213B2 (en) 2017-03-10 2019-09-09 Method and device for controlling frame rate of electronic device, storage medium, and electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710142513.XA CN106936995B (zh) 2017-03-10 2017-03-10 一种移动终端帧率的控制方法、装置及移动终端

Publications (2)

Publication Number Publication Date
CN106936995A CN106936995A (zh) 2017-07-07
CN106936995B true CN106936995B (zh) 2019-04-16

Family

ID=59432566

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710142513.XA Active CN106936995B (zh) 2017-03-10 2017-03-10 一种移动终端帧率的控制方法、装置及移动终端

Country Status (4)

Country Link
US (1) US10863213B2 (zh)
EP (1) EP3584765B1 (zh)
CN (1) CN106936995B (zh)
WO (1) WO2018161585A1 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106936995B (zh) * 2017-03-10 2019-04-16 Oppo广东移动通信有限公司 一种移动终端帧率的控制方法、装置及移动终端
CN109413480B (zh) * 2018-09-30 2021-10-08 Oppo广东移动通信有限公司 画面处理方法、装置、终端及存储介质
CN109640168B (zh) * 2018-11-27 2020-07-24 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备和计算机可读介质
CN112863457A (zh) * 2019-11-27 2021-05-28 深圳市万普拉斯科技有限公司 显示亮度的调节方法、装置、电子设备和存储介质
WO2021248370A1 (en) * 2020-06-10 2021-12-16 Qualcomm Incorporated Methods and apparatus for reducing frame drop via adaptive scheduling
CN111933071B (zh) * 2020-08-10 2022-04-01 昆山国显光电有限公司 显示面板的驱动方法和驱动装置
CN111951206A (zh) * 2020-08-19 2020-11-17 Oppo（重庆）智能科技有限公司 图像合成方法、图像合成装置及终端设备
CN113157228B (zh) * 2021-02-01 2022-07-05 中国船舶重工集团公司第七0九研究所 一种多源帧率互异型高帧率显示控制装置及方法
CN113655880A (zh) * 2021-08-03 2021-11-16 Oppo广东移动通信有限公司 界面渲染方法、装置、终端设备及计算机可读存储介质
US20230083932A1 (en) * 2021-09-13 2023-03-16 Apple Inc. Rendering for electronic devices
CN113946304A (zh) * 2021-09-29 2022-01-18 湖北亿咖通科技有限公司 可见窗口的合成方法、合成装置和多屏系统
CN115273763B (zh) * 2022-06-16 2024-02-06 北京小米移动软件有限公司 画面合成帧率调整方法及装置、显示设备及存储介质
CN115665482B (zh) * 2022-11-09 2023-06-30 腾讯科技（深圳）有限公司 视频渲染方法、装置、计算机设备和存储介质

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6473088B1 (en) * 1998-06-16 2002-10-29 Canon Kabushiki Kaisha System for displaying multiple images and display method therefor
US8542221B1 (en) * 2009-06-25 2013-09-24 Nvidia Corporation Method and system for optimizing display power reduction through a continuously variable refresh rate adjustment
US20130039408A1 (en) * 2011-02-07 2013-02-14 Screenovate Technologies Ltd Method for enhancing compression and transmission process of a screen image
US9589540B2 (en) * 2011-12-05 2017-03-07 Microsoft Technology Licensing, Llc Adaptive control of display refresh rate based on video frame rate and power efficiency
US9141264B2 (en) * 2011-12-14 2015-09-22 International Business Machines Corporation Variable refresh rates for portions of shared screens
CN103593155B (zh) 2013-11-06 2016-09-07 华为终端有限公司 显示帧生成方法和终端设备
CN104765594B (zh) * 2014-01-08 2018-07-31 联发科技（新加坡）私人有限公司 一种显示图形用户界面的方法及装置
US10127002B2 (en) * 2014-04-10 2018-11-13 Screenovate Technologies Ltd. Method for real-time multimedia interface management
KR101599888B1 (ko) * 2014-05-02 2016-03-04 삼성전자주식회사 적응적 영상 데이터 압축 방법 및 장치
CN104091579B (zh) * 2014-05-30 2017-01-04 西安中兴新软件有限责任公司 一种调整屏幕刷新率的方法及终端
US20150348496A1 (en) * 2014-05-30 2015-12-03 Pixtronix, Inc. Systems and methods for selecting display operation modes
CN104282286B (zh) * 2014-10-30 2017-03-08 广东欧珀移动通信有限公司 根据应用场景调整智能移动终端显示刷新率的方法及系统
CN105611316B (zh) * 2014-11-21 2019-05-03 华为终端（东莞）有限公司 一种调整帧率的方法、装置及系统
KR102282365B1 (ko) * 2015-02-06 2021-07-27 삼성전자주식회사 Os들의 화면을 통합하여 표시하는 방법 및 장치
CN104714874A (zh) 2015-02-28 2015-06-17 深圳市中兴移动通信有限公司 一种移动终端内存智能优化的方法及移动终端
CN104731543B (zh) * 2015-03-23 2018-03-16 广东欧珀移动通信有限公司 一种屏幕刷新率的显示方法和装置
CN105739670B (zh) * 2016-02-01 2019-02-05 Oppo广东移动通信有限公司 用于移动终端的显示方法、装置和移动终端
CN105869560B (zh) 2016-04-01 2019-04-26 Oppo广东移动通信有限公司 一种显示屏刷新帧率调整方法及装置
CN106095417B (zh) * 2016-05-31 2019-04-05 Oppo广东移动通信有限公司 一种前景应用程序界面刷新同步方法及系统
CN106201551A (zh) * 2016-07-22 2016-12-07 宇龙计算机通信科技(深圳)有限公司 一种应用程序退出方法及装置
CN106354455B (zh) * 2016-08-17 2019-09-13 青岛海信电器股份有限公司 人机界面显示处理装置及其方法
CN106412276A (zh) * 2016-09-26 2017-02-15 宇龙计算机通信科技(深圳)有限公司 调节终端参数的方法及移动终端
CN106936995B (zh) * 2017-03-10 2019-04-16 Oppo广东移动通信有限公司 一种移动终端帧率的控制方法、装置及移动终端

Also Published As

Publication number Publication date
EP3584765A4 (en) 2020-03-11
CN106936995A (zh) 2017-07-07
US20200007914A1 (en) 2020-01-02
EP3584765B1 (en) 2021-11-10
WO2018161585A1 (zh) 2018-09-13
US10863213B2 (en) 2020-12-08
EP3584765A1 (en) 2019-12-25

Similar Documents

Publication Publication Date Title
CN106936995B (zh) 一种移动终端帧率的控制方法、装置及移动终端
CN106791212B (zh) 一种移动终端刷新率的控制方法、装置及移动终端
CN106657681B (zh) 一种移动终端刷新率的控制方法、装置及移动终端
CN106919358B (zh) 一种移动终端的显示控制方法、装置及移动终端
CN106933526B (zh) 一种动态调节屏幕刷新率的方法、装置及移动终端
CN106941563B (zh) 一种移动终端刷新率的控制方法、装置及移动终端
US11100901B2 (en) Method for controlling rendering of layers, terminal, and storage medium
CN106933328B (zh) 一种移动终端帧率的控制方法、装置及移动终端
CN106919401B (zh) 一种动态调节分辨率的方法、装置及移动终端
CN106951055B (zh) 一种移动终端的显示控制方法、装置及移动终端
EP3584676B1 (en) Method, device, medium, and electronic apparatus for dynamically adjusting power saving level of terminal
CN106874017B (zh) 一种移动终端的显示场景识别方法、装置及移动终端
EP3584677A1 (en) Method and device for controlling mobile terminal, and mobile terminal
CN106933327B (zh) 一种移动终端帧率的控制方法、装置及移动终端
CN109157839A (zh) 帧率调控方法、装置、存储介质及终端
CN106657680A (zh) 一种移动终端帧率的控制方法、装置及移动终端
CN106896899A (zh) 一种移动终端图像绘制的控制方法、装置及移动终端
CN106776259B (zh) 一种移动终端帧率检测方法、装置及移动终端
CN106933361A (zh) 一种移动终端的显示控制方法、装置及移动终端
CN108733193A (zh) 智能调整帧率的方法、装置、存储介质及智能终端
CN112905134A (zh) 一种刷新显示的方法、装置和电子设备
CN110572867A (zh) 一种降低电子设备功耗的方法及装置
CN109753262A (zh) 帧显示处理方法、装置、终端设备及存储介质
CN114339410A (zh) 插帧方法、装置及电子设备
CN110609599A (zh) 双屏终端的显示方法、装置、存储介质及终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant after: OPPO Guangdong Mobile Communications Co., Ltd.

Address before: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant before: Guangdong OPPO Mobile Communications Co., Ltd.

GR01 Patent grant
GR01 Patent grant