CN112866612A - 插帧方法、装置、终端及计算机可读存储介质 - Google Patents

插帧方法、装置、终端及计算机可读存储介质 Download PDF

Info

Publication number
CN112866612A
CN112866612A CN202110260877.4A CN202110260877A CN112866612A CN 112866612 A CN112866612 A CN 112866612A CN 202110260877 A CN202110260877 A CN 202110260877A CN 112866612 A CN112866612 A CN 112866612A
Authority
CN
China
Prior art keywords
terminal
interpolation
frame
time
condition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110260877.4A
Other languages
English (en)
Other versions
CN112866612B (zh
Inventor
慕伟虎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN202110260877.4A priority Critical patent/CN112866612B/zh
Publication of CN112866612A publication Critical patent/CN112866612A/zh
Application granted granted Critical
Publication of CN112866612B publication Critical patent/CN112866612B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0127Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping

Abstract

本公开涉及一种插帧方法、装置、终端及计算机可读存储介质,所述方法包括:确定终端是否处于高帧率场景;在终端处于高帧率场景的情况下,确定终端是否满足预设条件;当在所述终端处于高帧率场景的情况下确定出终端满足预设条件时,确定插帧时间段,并采用非线性插帧算法在所述插帧时间段内所述终端的显示画面进行插帧处理。本公开基于终端的当前应用场景是否处于高帧率场景和终端在该高帧率场景下是否满足预设条件,确定采用的插帧算法,既实现终端显示画面不卡顿和质量高的目的,同时有效地降低了对终端资源的占用。

Description

插帧方法、装置、终端及计算机可读存储介质
技术领域
本公开涉及电子信息技术领域,尤其涉及一种插帧方法、装置、终端及计算机可读存储介质。
背景技术
相关技术中,对于显示设备来说,显示设备显示图象的质量在很大程度上取决于分辨率和刷新率的高低。由于刷新率会受到硬件限制,软件算法优化就显得尤为重要。
目前,通常使用插帧方法用来提升显示设备的刷新率,尤其是游戏场景下更需要高刷新率。但是,目前对显示设备任何使用到画面的应用场景都一味的追求高刷新率,忽略了高刷新率的插帧算法给设备的运行内存带来的影响。
发明内容
为克服相关技术中存在的问题,本公开提供一种插帧方法、装置、终端及计算机可读存储介质。
根据本公开实施例的第一方面,提供一种插帧方法,应用于终端,所述方法包括:
确定所述终端是否处于高帧率场景;
在所述终端处于高帧率场景的情况下,确定所述终端是否满足预设条件;
当在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件时,确定插帧时间段,并采用非线性插帧算法在所述插帧时间段内所述终端的显示画面进行插帧处理。
可选地,所述当在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件时,确定插帧时间段,并采用非线性插帧算法在所述插帧时间段内所述终端的显示画面进行插帧处理包括:
将在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件的时刻确定为起始时刻;
根据所述起始时刻和第一预设时长确定插帧时间段;
采用以下计算式在所述插帧时间段内对所述终端的显示画面进行插帧处理,其中,所述计算式包括:
Figure BDA0002969918880000021
其中,f(x)表示第x时刻的图像帧,
Figure BDA0002969918880000022
为待插入图像帧,Δxk为第a时刻与第k时刻的时间差,n为需要插入的总帧数,所述第a时刻与第b时刻之间的时间长度等于所述插帧时间段的时间差,且所述第a时刻为所述当前时刻。
可选地,所述在所述终端处于高帧率场景的情况下,确定所述终端是否满足预设条件,包括:
在所述终端处于高帧率场景的情况下,获取所述终端的网速信息;
在所述网速信息低于预设网速阈值的情况下,确定所述终端满足预设条件。
可选地,所述在所述终端处于高帧率场景的情况下,确定所述终端是否满足预设条件,包括:
在所述终端处于高帧率场景的情况下,获取所述终端在第二预设时长内显示画面中的元素的变化情况;
根据所述元素的变化情况,确定所述终端是否满足预设条件。
可选地,所述方法还包括:
在所述终端处于非高帧率场景下,采用线性插帧算法对所述终端的显示画面进行插帧处理。
可选地,所述方法还包括:
当在所述终端处于高帧率场景的情况下确定出所述终端不满足预设条件时,采用线性插帧算法对所述终端的显示画面进行插帧处理。
根据本公开实施例的第二方面,提供一种插帧装置,所述装置包括:
模式确定模块,被配置为确定终端是否处于高帧率场景;
条件确定模块,被配置为在所述终端处于高帧率场景的情况下,确定所述终端是否满足预设条件;
第一插帧模块,被配置为当在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件时,确定插帧时间段,并采用非线性插帧算法在所述插帧时间段内所述终端的显示画面进行插帧处理。
可选地,所述第一插帧模块包括:
第一确定子模块,被配置为将在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件的时刻确定为起始时刻;
第二确定子模块,被配置为根据所述起始时刻和第一预设时长确定插帧时间段;
插帧子模块,被配置为采用以下计算式在所述插帧时间段内对所述终端的显示画面进行插帧处理:
Figure BDA0002969918880000031
其中,f(x)表示第x时刻的图像帧,
Figure BDA0002969918880000032
为待插入图像帧,Δxk为第a时刻与第k时刻的时间差,n为需要插入的总帧数,所述第a时刻与第b时刻之间的时间长度等于所述插帧时间段的时间差,且所述第a时刻为所述当前时刻。
根据本公开实施例的第三方面,提供一种终端,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
确定所述终端是否处于高帧率场景;
在所述终端处于高帧率场景的情况下,确定所述终端是否满足预设条件;
当在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件时,确定插帧时间段,并采用非线性插帧算法在所述插帧时间段内所述终端的显示画面进行插帧处理。
根据本公开实施例的第四方面,提供一种计算机可读存储介质,其上存储有计算机程序指令,该程序指令被处理器执行时实现本公开第一方面所提供的插帧方法的步骤。
本公开的实施例提供的技术方案可以包括以下有益效果:
确定终端是否处于高帧率场景;在所述终端处于高帧率场景的情况下,确定所述终端是否满足预设条件;当在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件时,确定插帧时间段,并采用非线性插帧算法在所述插帧时间段内所述终端的显示画面进行插帧处理。也就是说,本公开基于终端的当前应用场景是否处于高帧率场景和终端在该高帧率场景下的是否满足预设条件,确定采用的插帧算法。对刷新率要求高的高帧率场景(例如游戏场景)采用非线性插帧算法,实现该场景下显示画面不卡顿和画质高的目的,相反地,在终端不处于高帧率场景或终端在该高帧率场景下不满足预设条件时,则不会采用非线性插帧算法进行插帧,有效地降低了对终端资源的占用。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是根据一示例性实施例示出的一种插帧方法的流程图。
图2是根据一示例性实施例示出的一种插帧方法的另一流程图。
图3是根据一示例性实施例示出的一种插帧方法的另一流程图。
图4是根据一示例性实施例示出的一种插帧装置的框图。
图5是根据一示例性实施例示出的一种终端的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
首先,对本公开的应用场景进行介绍。本公开可以应用于具有显示功能的终端。在现实环境中,由于硬件对终端的限制,若想实现终端在显示上的高刷新率,只能在软件算法上进行优化,因此,插帧算法应运而生。可以理解的是,插帧算法的不同,对终端所占用的运行内存并不相同。也就是说,高刷新率的插帧算法比低刷新率的插帧算法所占用的资源(如运行内存)要更多。而对于一些帧率要求较低的场景,可以采用相对较低刷新率插帧算法进行插帧即可满足高质量的画面显示。但是,相关技术中并未考虑到插帧算法对终端资源造成的影响。
为了解决上述问题,本公开提供一种插帧算法、装置及计算机可读存储介质。下面结合具体实施例对本公开进行说明。
图1是根据一示例性实施例示出的一种插帧方法的流程图,如图1所示,包括以下步骤:
S101,确定终端是否处于高帧率场景。
需要说明的是,本插帧算法应用于具有显示功能的终端,该终端包括但不限于固定设备和移动设备,例如,所述固定设备包括但不限于:个人电脑(Personal Computer,PC)等;所述移动设备包括但不限于:手机、平板电脑等,本公开对此不作限定。
示例地,在本步骤中,终端可以通过检测其是否正在使用游戏类的应用程序来确定终端是否处于高帧率场景。高帧率场景表征需要高刷新率的场景,其中,刷新率是指电子束对屏幕上的图像重复扫描的次数,刷新率越高,所显示的图象(画面)稳定性就越好。
示例地,高帧率场景例如可以是游戏场景。
在高帧率场景是游戏场景的情况下,若终端检测到其正在使用游戏类的应用程序,则可以确定所述终端处于高帧率场景。相反,则可以确定终端处于非高帧率场景。
示例地,终端可以判断终端的当前显示界面是否为预设游戏应用。具体来讲,终端读取当前显示界面的应用名,与终端预设的游戏应用相比较,如果匹配,则确定所述终端处于高帧率场景。
在一种实施方式中,开发人员可以在终端内存储游戏应用的列表,该列表中包括各游戏应用的应用名,终端可以在读取到当前显示界面的应用名后,查询该列表,在该应用名存在该列表中时,确定终端处于高帧率场景。
S102,在终端处于高帧率场景的情况下,确定终端是否满足预设条件。
需要说明的是,检测终端是否满足预设条件表征终端当前是否存在掉帧。可以理解的是,在高帧率场景下且终端处于掉帧的情况下,需要采用刷新率高的插帧算法对终端进行插帧,以解决终端的显示画面出现卡顿等问题。
S103,当在终端处于高帧率场景的情况下确定出终端满足预设条件时,确定插帧时间段,并采用非线性插帧算法在插帧时间段内终端的显示画面进行插帧处理。
需要说明的是,所述插帧时间段是以当前时刻为起始点延长第一预设时长所得到的时间段。第一预设时长是根据实际情况进行设定的。示例地,在第一预设时长为2秒(S)时,则终端是以当前时刻为起点的2秒(S)之内的时间段对终端进行插帧处理。
需要说明的是,非线性插帧算法相较于线性插帧算法的刷新率更高,也就是说,非线性插帧算法比线性插帧算法能更好的解决终端拖影和卡顿的问题。相对应地,非线性插帧算法比线性插帧算法需要占用终端更多的资源。
采用上述技术方案,基于终端的当前应用场景是否处于高帧率场景和终端在该高帧率场景下的是否满足预设条件,确定采用的插帧算法。对刷新率要求高的场景采用非线性插帧算法,实现该场景下显示画面不卡顿和质量高的目的,相反地,在终端不处于高帧率场景或终端在高帧率场景下不满足预设条件时,则不会采用非线性插帧算法进行插帧,有效地降低了对终端资源的占用。
可选地,图1所示的步骤S103可以包括:
首先,将在终端处于高帧率场景的情况下确定出终端满足预设条件的时刻确定为起始时刻,再根据起始时刻和第一预设时长确定插帧时间段。示例地,以第一预设时长为2秒(S),且以当前时刻是12:13:45为例,确定对终端插帧的时间段是12:13:45-12:13:47。
然后,采用以下计算式在所述插帧时间段内对所述终端的显示画面进行插帧处理:
Figure BDA0002969918880000071
其中,f(x)表示第x时刻的图像帧,
Figure BDA0002969918880000072
为待插入图像帧,Δxk为第a时刻与第k时刻的时间差,n为需要插入的总帧数,所述第a时刻与第b时刻之间的时间长度等于所述插帧时间段的时间差,且所述第a时刻为所述当前时刻。
可以理解的是,第b时刻表示当前时刻延长第一预设时长所对应的时刻,第x时刻=[a,b]中的任一时刻,
Figure BDA0002969918880000081
表征从第a时刻至第b时刻的图像相似度,
Figure BDA0002969918880000082
可以采用相关现有技术中的非线性运动预测模型进行预测得到,本实施例对此不作赘述。基于上述内容,采用上述计算式可以确定在插帧时间段内需要插入的总帧数,并根据该总帧数,和每一帧所对应的待插入图像帧,对插帧时间段内所述终端的显示画面进行插帧处理。
在本公开中,目前相关技术中的线性插帧算法是基于物体帧间的运动均是匀速的前提下实现插帧的,但是,考虑到在现实中,物体帧间的运动都是非匀速的。由此,对于复杂运动场景下,线性插帧算法会出现拖影及慢放卡顿等问题。而采用上述非线性的插帧算法,可以有效地解决线性插帧算法在运动复杂场景下所存在的运动轨迹边界伪像过重、卡顿、拖影等问题,提高了终端显示界面的画质。
可选地,图1所示的步骤S102可以包括:
在所述终端处于高帧率场景的情况下,获取所述终端的网速信息;在所述网速信息低于预设网速阈值的情况下,确定所述终端满足预设条件。
其中,网速一般是指上传和下载数据时,请求和返回数据所用的时间长短。预设网速阈值可以根据实际情况进行设定。本实施例对此不作限定。
在上述技术方案中,由于在网速低于预设网速阈值时可能出现掉帧。因此,在此种情况下,可以对终端进行非线性插帧处理,以确保画质稳定,不会出现卡顿、拖影等问题。
可选地,图1所示的步骤S102还可以包括:
在所述终端处于高帧率场景的情况下,获取所述终端在第二预设时长内显示画面中的元素的变化情况;根据所述元素的变化情况,确定所述终端是否满足预设条件。
其中,第二预设时长可以根据实际情况进行设定。
应当说明的是,所述变化情况反映在所述第二预设时长内显示画面的变化程度。
示例地,所述元素可以是像素点对应的像素值。可以理解的是,针对某一时间段,在某一点的像素值发生较大变化时,表明终端显示画面会发生较大的场景切换,也即表征终端满足预设条件。
在上述技术方案中,在终端的显示画面中的元素发生较大变化的情况下,可以对终端进行插帧处理,以解决终端的显示画面出现卡顿的问题,提升了画质。
图2是根据一示例性实施例示出的一种插帧方法的另一流程图。参照图2,包括以下步骤:
S201,确定终端是否处于高帧率场景。
S202,在终端处于高帧率场景的情况下,确定终端是否满足预设条件。
S203,当在终端处于高帧率场景的情况下确定出终端满足预设条件时,确定插帧时间段,并采用非线性插帧算法在插帧时间段内终端的显示画面进行插帧处理。
S204,在终端处于非高帧率场景的情况下,采用线性插帧算法对终端进行插帧处理。
在步骤S204中,非高帧率场景例如可以是视频模式、网页浏览模式等。相对应地,视频模式是终端的当前显示界面在视频应用下终端所处的模式。网页浏览模式是终端的当前显示界面在浏览器应用下终端所处的模式。
可以理解的是,在视频场景下和浏览网页的场景下,线性插帧算法足以解决显示画面画质不高的问题,因此,在此种情况下,采用线性插帧算法对终端进行插帧处理。在本公开中,通过对终端的场景进行检测,分别在不同的场景下合理化地选择不同的插帧算法,以在保证终端显示画质的前提下降低对终端资源的占用。
值得说明的是,上述步骤S201的实施过程与图1所示的步骤S101的实施过程类似,本实施例在此不作赘述。
上述步骤S202的实施过程与图1所示的步骤S102的实施过程类似,本实施例在此不作赘述。
上述步骤S203的实施过程与图1所示的步骤S103的实施过程类似,本实施例在此不作赘述。
图3是根据一示例性实施例示出的一种插帧方法的另一流程图。参照图3,包括以下步骤:
S301,确定终端是否处于高帧率场景。
S302,在终端处于高帧率场景的情况下,确定终端是否满足预设条件。
S303,当在终端处于高帧率场景的情况下确定出终端满足预设条件的情况下,确定插帧时间段,并采用非线性插帧算法在插帧时间段内终端的显示画面进行插帧处理。
S304,在终端不满足预设条件的情况下,采用线性插帧算法对终端进行插帧处理。
S305,在终端处于非高帧率场景的情况下,采用线性插帧算法对终端进行插帧处理。可以理解的是,考虑到在高帧率场景下且在终端不出现掉帧的情况下,可以采用刷新率低的插帧算法对终端进行插帧,就足以提升显示画面的画质。因此,在高帧率场景下且若终端不满足预设条件,可以采用线性插帧算法对终端进行插帧处理。在本公开中,通过对终端的场景进行检测,分别在不同的场景下合理化地选择不同的插帧算法,以在保证终端显示画质的前提下降低对终端资源的占用。
值得说明的是,上述步骤S301的实施过程与图1所示的步骤S101的实施过程类似,本实施例在此不作赘述。
上述步骤S302的实施过程与图1所示的步骤S102的实施过程类似,本实施例在此不作赘述。
上述步骤S303的实施过程与图1所示的步骤S103的实施过程类似,本实施例在此不作赘述。
上述步骤S305的实施过程与图1所示的步骤S204的实施过程类似,本实施例在此不作赘述。
图4是根据一示例性实施例示出的一种插帧装置的框图。参照图4,该装置包括模式确定模块401,条件确定模块402和第一插帧模块403。
该模式确定模块401,被配置为确定终端是否处于高帧率场景。
该条件确定模块402,被配置为在所述终端处于高帧率场景的情况下,确定所述终端是否满足预设条件。
该第一插帧模块403,被配置为当在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件时,确定插帧时间段,并采用非线性插帧算法在所述插帧时间段内所述终端的显示画面进行插帧处理。
可选地,所述第一插帧模块403包括:
第一确定子模块,被配置为将在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件的时刻确定为起始时刻;
第二确定子模块,被配置为根据所述起始时刻和第一预设时长确定插帧时间段;
插帧子模块,被配置为采用以下计算式在所述插帧时间段内对所述终端的显示画面进行插帧处理:
Figure BDA0002969918880000111
其中,f(x)表示第x时刻的图像帧,
Figure BDA0002969918880000112
为待插入图像帧,Δxk为第a时刻与第k时刻的时间差,n为需要插入的总帧数,所述第a时刻与第b时刻之间的时间长度等于所述插帧时间段的时间差,且所述第a时刻为所述当前时刻。
可选地,所述条件确定模块402包括:
第一获取子模块,被配置为在所述终端处于高帧率场景的情况下,获取所述终端的网速信息。
第一条件确定子模块,被配置为在所述网速信息低于预设网速阈值的情况下,确定所述终端满足预设条件。
可选地,所述条件确定模块402包括:
第二获取子模块,被配置为在所述终端处于高帧率场景的情况下,获取所述终端在第二预设时长内显示画面中的元素的变化情况;
第二条件确定子模块,被配置为根据所述元素的变化情况,确定所述终端是否满足预设条件。
可选地,所述装置400还包括:
第二插帧模块,被配置为在所述终端处于非高帧率场景下,采用线性插帧算法对所述终端的显示画面进行插帧处理。
可选地,所述装置400还包括:
第三插帧模块,被配置为当在所述终端处于高帧率场景确定出所述终端不满足预设条件时,采用线性插帧算法对所述终端的显示画面进行插帧处理。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本公开还提供一种计算机可读存储介质,其上存储有计算机程序指令,该程序指令被处理器执行时实现本公开提供的插帧方法的步骤。
本公开还公开一种终端,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
确定终端是否处于高帧率场景;
在所述终端处于高帧率场景的情况下,确定所述终端是否满足预设条件;
当在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件时,确定插帧时间段,并采用非线性插帧算法在所述插帧时间段内所述终端的显示画面进行插帧处理。
图5是根据一示例性实施例示出的一种终端500的框图。例如,终端500可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图5,终端500可以包括以下一个或多个组件:处理组件502,存储器504,电力组件506,多媒体组件508,音频组件510,输入/输出(I/O)的接口512,传感器组件514,以及通信组件516。
处理组件502通常控制终端500的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件502可以包括一个或多个处理器520来执行指令,以完成上述的插帧方法的全部或部分步骤。此外,处理组件502可以包括一个或多个模块,便于处理组件502和其他组件之间的交互。例如,处理组件502可以包括多媒体模块,以方便多媒体组件508和处理组件502之间的交互。
存储器504被配置为存储各种类型的数据以支持在终端500的操作。这些数据的示例包括用于在终端500上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器504可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件506为终端500的各种组件提供电力。电力组件506可以包括电源管理系统,一个或多个电源,及其他与为终端500生成、管理和分配电力相关联的组件。
多媒体组件508包括在所述终端500和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件508包括一个前置摄像头和/或后置摄像头。当终端500处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件510被配置为输出和/或输入音频信号。例如,音频组件510包括一个麦克风(MIC),当装置500处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器504或经由通信组件516发送。在一些实施例中,音频组件510还包括一个扬声器,用于输出音频信号。
输入/输出(I/O)接口512为处理组件502和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件514包括一个或多个传感器,用于为终端500提供各个方面的状态评估。例如,传感器组件514可以检测到终端500的打开/关闭状态,组件的相对定位,例如所述组件为终端500的显示器和小键盘,传感器组件514还可以检测终端500或终端500一个组件的位置改变,用户与终端500接触的存在或不存在,终端500方位或加速/减速和终端500的温度变化。传感器组件514可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件514还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件514还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件516被配置为便于终端500和其他设备之间有线或无线方式的通信。终端500可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件516经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件516还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,终端500可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述插帧方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器504,上述指令可由终端500的处理器520执行以完成上述插帧方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
在另一示例性实施例中,还提供一种计算机程序产品,该计算机程序产品包含能够由可编程的装置执行的计算机程序,该计算机程序具有当由该可编程的装置执行时用于执行上述的上述插帧方法的代码部分。
本领域技术人员在考虑说明书及实践本公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (10)

1.一种插帧方法,其特征在于,应用于终端,所述方法包括:
确定所述终端是否处于高帧率场景;
在所述终端处于高帧率场景的情况下,确定所述终端是否满足预设条件;
当在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件时,确定插帧时间段,并采用非线性插帧算法在所述插帧时间段内对所述终端的显示画面进行插帧处理。
2.根据权利要求1所述的方法,其特征在于,所述当在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件时,确定插帧时间段,并采用非线性插帧算法在所述插帧时间段内对所述终端的显示画面进行插帧处理包括:
将在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件的时刻确定为起始时刻;
根据所述起始时刻和第一预设时长确定插帧时间段;
采用以下计算式在所述插帧时间段内对所述终端的显示画面进行插帧处理:
Figure FDA0002969918870000011
其中,f(x)表示第x时刻的图像帧,
Figure FDA0002969918870000012
为待插入图像帧,Δxk为第a时刻与第k时刻的时间差,n为需要插入的总帧数,所述第a时刻与第b时刻之间的时间差等于所述插帧时间段的时间长度,且所述第a时刻为所述起始时刻。
3.根据权利要求1所述的方法,其特征在于,所述在所述终端处于高帧率场景的情况下,确定所述终端是否满足预设条件,包括:
在所述终端处于高帧率场景的情况下,获取所述终端的网速信息;
在所述网速信息低于预设网速阈值的情况下,确定所述终端满足预设条件。
4.根据权利要求1所述的方法,其特征在于,所述在所述终端处于高帧率场景的情况下,确定所述终端是否满足预设条件,包括:
在所述终端处于高帧率场景的情况下,获取所述终端在第二预设时长内显示画面中的元素的变化情况;
根据所述元素的变化情况,确定所述终端是否满足预设条件。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述终端处于非高帧率场景下,采用线性插帧算法对所述终端的显示画面进行插帧处理。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当在所述终端处于高帧率场景的情况下确定出所述终端不满足预设条件时,采用线性插帧算法对所述终端的显示画面进行插帧处理。
7.一种插帧装置,其特征在于,所述装置包括:
模式确定模块,被配置为确定终端是否处于高帧率场景;
条件确定模块,被配置为在所述终端处于高帧率场景的情况下,确定所述终端是否满足预设条件;
第一插帧模块,被配置为当在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件的情况下时,确定插帧时间段,并采用非线性插帧算法在所述插帧时间段内所述终端的显示画面进行插帧处理。
8.根据权利要求7所述的装置,其特征在于,所述第一插帧模块包括:
第一确定子模块,被配置为将在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件的时刻确定为起始时刻;
第二确定子模块,被配置为根据所述起始时刻和第一预设时长确定插帧时间段;
插帧子模块,被配置为采用以下计算式在所述插帧时间段内对所述终端的显示画面进行插帧处理:
Figure FDA0002969918870000031
其中,f(x)表示第x时刻的图像帧,
Figure FDA0002969918870000032
为待插入图像帧,Δxk为第a时刻与第k时刻的时间差,n为需要插入的总帧数,所述第a时刻与第b时刻之间的时间长度等于所述插帧时间段的时间差,且所述第a时刻为所述当前时刻。
9.一种终端,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
确定所述终端是否处于高帧率场景;
在所述终端处于高帧率场景的情况下,确定所述终端是否满足预设条件;
当在所述终端处于高帧率场景的情况下确定出所述终端满足预设条件时,确定插帧时间段,并采用非线性插帧算法在所述插帧时间段内所述终端的显示画面进行插帧处理。
10.一种计算机可读存储介质,其上存储有计算机程序指令,其特征在于,该程序指令被处理器执行时实现权利要求1~6中任一项所述方法的步骤。
CN202110260877.4A 2021-03-10 2021-03-10 插帧方法、装置、终端及计算机可读存储介质 Active CN112866612B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110260877.4A CN112866612B (zh) 2021-03-10 2021-03-10 插帧方法、装置、终端及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110260877.4A CN112866612B (zh) 2021-03-10 2021-03-10 插帧方法、装置、终端及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN112866612A true CN112866612A (zh) 2021-05-28
CN112866612B CN112866612B (zh) 2023-02-21

Family

ID=75993924

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110260877.4A Active CN112866612B (zh) 2021-03-10 2021-03-10 插帧方法、装置、终端及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN112866612B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116091292A (zh) * 2022-08-17 2023-05-09 荣耀终端有限公司 数据处理方法和相关装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0787493A (ja) * 1993-09-14 1995-03-31 Oki Electric Ind Co Ltd フレーム内挿方法
CN106375772A (zh) * 2016-08-29 2017-02-01 北京小米移动软件有限公司 视频播放方法及装置
US20180176574A1 (en) * 2015-05-25 2018-06-21 Peking University Shenzhen Graduate School Method and system for video frame interpolation based on optical flow method
CN109600666A (zh) * 2018-12-12 2019-04-09 网易(杭州)网络有限公司 游戏场景中的视频播放方法、装置、介质以及电子设备
CN111147787A (zh) * 2019-12-27 2020-05-12 Oppo广东移动通信有限公司 插帧处理方法及相关设备
CN111277895A (zh) * 2018-12-05 2020-06-12 阿里巴巴集团控股有限公司 一种视频插帧方法和装置
CN112203034A (zh) * 2020-09-30 2021-01-08 Oppo广东移动通信有限公司 帧率控制方法、装置以及电子设备
CN112199140A (zh) * 2020-09-09 2021-01-08 Oppo广东移动通信有限公司 应用插帧方法及相关装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0787493A (ja) * 1993-09-14 1995-03-31 Oki Electric Ind Co Ltd フレーム内挿方法
US20180176574A1 (en) * 2015-05-25 2018-06-21 Peking University Shenzhen Graduate School Method and system for video frame interpolation based on optical flow method
CN106375772A (zh) * 2016-08-29 2017-02-01 北京小米移动软件有限公司 视频播放方法及装置
CN111277895A (zh) * 2018-12-05 2020-06-12 阿里巴巴集团控股有限公司 一种视频插帧方法和装置
CN109600666A (zh) * 2018-12-12 2019-04-09 网易(杭州)网络有限公司 游戏场景中的视频播放方法、装置、介质以及电子设备
CN111147787A (zh) * 2019-12-27 2020-05-12 Oppo广东移动通信有限公司 插帧处理方法及相关设备
CN112199140A (zh) * 2020-09-09 2021-01-08 Oppo广东移动通信有限公司 应用插帧方法及相关装置
CN112203034A (zh) * 2020-09-30 2021-01-08 Oppo广东移动通信有限公司 帧率控制方法、装置以及电子设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116091292A (zh) * 2022-08-17 2023-05-09 荣耀终端有限公司 数据处理方法和相关装置
CN116091292B (zh) * 2022-08-17 2023-11-21 荣耀终端有限公司 数据处理方法和相关装置

Also Published As

Publication number Publication date
CN112866612B (zh) 2023-02-21

Similar Documents

Publication Publication Date Title
CN106657780B (zh) 图像预览方法和装置
EP3136391B1 (en) Method, device and terminal device for video effect processing
US11061202B2 (en) Methods and devices for adjusting lens position
CN107888984B (zh) 短视频播放方法及装置
CN112114765A (zh) 投屏方法、装置及存储介质
CN106534951B (zh) 视频分割方法和装置
CN106775235B (zh) 屏幕壁纸展示方法和装置
CN108829475B (zh) Ui绘制方法、装置及存储介质
CN112866612B (zh) 插帧方法、装置、终端及计算机可读存储介质
CN114356476B (zh) 内容显示方法、装置、电子设备及存储介质
CN114500821B (zh) 拍照方法及装置、终端及存储介质
US11600300B2 (en) Method and device for generating dynamic image
CN114827721A (zh) 视频特效处理方法、装置、存储介质及电子设备
CN114442792A (zh) 处理器的运行频率调整方法、装置及存储介质
CN109714247B (zh) 群聊信息处理方法、装置、电子设备及存储介质
CN108769780B (zh) 广告播放方法和装置
CN106604088B (zh) 缓冲区中数据的处理方法、装置及设备
CN111610899A (zh) 界面展示方法、界面展示装置及存储介质
CN111538447A (zh) 信息展示方法、装置、设备及存储介质
CN113709538B (zh) 一种多媒体数据播放方法、装置、电子设备及存储介质
CN110955328B (zh) 电子设备的控制方法、装置及存储介质
US20210360189A1 (en) Video processing method and apparatus, and storage medium
CN115564637A (zh) 图像处理方法、装置、终端及存储介质
CN115705230A (zh) 数据加载方法、装置、及存储介质
CN115866129A (zh) 应用场景识别方法、装置、终端及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant