CN114339410A - 插帧方法、装置及电子设备 - Google Patents
插帧方法、装置及电子设备 Download PDFInfo
- Publication number
- CN114339410A CN114339410A CN202111626875.9A CN202111626875A CN114339410A CN 114339410 A CN114339410 A CN 114339410A CN 202111626875 A CN202111626875 A CN 202111626875A CN 114339410 A CN114339410 A CN 114339410A
- Authority
- CN
- China
- Prior art keywords
- target
- frame
- frame rate
- video
- frame interpolation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012966 insertion method Methods 0.000 title description 2
- 238000000034 method Methods 0.000 claims abstract description 56
- 238000003780 insertion Methods 0.000 claims description 27
- 230000037431 insertion Effects 0.000 claims description 18
- 230000002452 interceptive effect Effects 0.000 claims description 18
- 230000003993 interaction Effects 0.000 claims description 7
- 230000004044 response Effects 0.000 claims description 5
- 238000009432 framing Methods 0.000 claims 1
- 230000000694 effects Effects 0.000 description 27
- 230000008569 process Effects 0.000 description 11
- 230000009471 action Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 238000007599 discharging Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
Abstract
本申请公开了一种插帧方法、装置及电子设备。该方法包括:获取目标视频的输出帧率、目标帧率和目标类别信息,目标帧率与插帧处理后的目标视频的帧率相关联,目标类别信息用于指示目标视频的插帧范围;根据输出帧率和目标帧率,确定目标插帧方式;根据目标类别信息和目标插帧方式,对目标视频进行插帧处理。
Description
技术领域
本申请属于通信技术领域,具体涉及一种插帧方法、装置及电子设备。
背景技术
通常,当电子设备在对应用程序进行插帧处理时,可以使用该方法在应用程序输出的帧基础上,以固定间隔插入一帧,以提升电子设备对应用程序进行插帧处理时的流畅性。
然而,上述插帧策略较为固定,因此,该插帧策略的使用场景较为单一,备的插帧策略的灵活性较差,效率较低。
发明内容
本申请实施例的目的是提供一种插帧方法、装置及电子设备,能够提升电子设备的插帧策略的灵活性,提升了电子设备处理插帧的效率。
第一方面,本申请实施例提供了一种插帧方法,该插帧方法包括:获取目标视频的设置帧率、目标帧率和目标类别信息,目标帧率与插帧处理后的目标视频的帧率相关联,目标类别信息用于指示目标视频的插帧范围;根据设置帧率和目标帧率,确定目标插帧方式;根据目标类别信息和目标插帧方式,对目标视频进行插帧处理。
第二方面,本申请实施例提供了一种插帧装置,该插帧装置包括:获取模块、确定模块和处理模块。获取模块,用于获取目标视频的设置帧率、目标帧率和目标类别信息,目标帧率与插帧处理后的目标视频的帧率相关联,目标类别信息用于指示目标视频的插帧范围。确定模块,用于根据获取模块获取的设置帧率和目标帧率,确定目标插帧方式。处理模块,用于根据确定模块确定的目标类别信息和目标插帧方式,对目标视频进行插帧处理。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
第六方面,本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如第一方面所述的方法。
在本申请实施例中,电子设备可以获取目标视频的设置帧率、目标帧率和目标类别信息,目标帧率与插帧处理后的目标视频的帧率相关联,目标类别信息用于指示目标视频的插帧范围;根据设置帧率和目标帧率,确定目标插帧方式;根据目标类别信息和目标插帧方式,对目标视频进行插帧处理。由于电子设备可以根据目标视频的设置帧率、目标帧率和目标类别信息确定插帧方式,并采用该插帧方式对目标视频进行插帧处理,因此,电子设备可以动态地确定插帧的实施方式以及插帧的作用范围,如此,提升了电子设备确定插帧策略的灵活性,并且在提升电子设备显示目标视频的流畅性的同时,也提升了电子设备对目标视频进行插帧处理的效果。
附图说明
图1是本申请实施例提供的一种插帧方法的示意图之一;
图2是本申请实施例提供的一种手机的界面的实例示意图;
图3是本申请实施例提供的一种插帧装置的结构示意图;
图4是本申请实施例提供的一种电子设备的硬件结构示意图之一;
图5是本申请实施例提供的一种电子设备的硬件结构示意图之二。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的插帧方法进行详细地说明。
本申请实施例中,电子设备可以获取目标视频的设置帧率和目标类别信息,并根据设置帧率和目标类别信息,确定目标视频的目标帧率,从而电子设备可以采用目标帧率对目标视频进行插帧处理;相较于传统技术中,只能采用在应用程序输出的帧基础上,以固定间隔插入一帧,以提升电子设备对目标视频进行插帧处理时的流畅性的方案,本申请实施例可以根据设置帧率和目标类别信息,以确定插帧的实施方式和作用范围,并灵活地设置目标视频的目标帧率,从而电子设备可以采用目标帧率动态地对目标视频进行插帧处理,如此,提升了电子设备显示目标视频的流畅性,也提升了电子设备对目标视频进行插帧处理的效果。
本申请实施例提供一种插帧方法,图1示出了本申请实施例提供的一种插帧方法的流程图。如图1所示,本申请实施例提供的插帧方法可以包括下述的步骤201至步骤203。
步骤201、电子设备获取目标视频的设置帧率、目标帧率和目标类别信息。
本申请实施例中,目标帧率与插帧处理后的目标视频的帧率相关联,目标类别信息用于指示目标视频的插帧范围。
本申请实施例中,用户可以在电子设备中打开任意一个应用程序(例如游戏类应用程序),以使得电子设备可以显示该应用程序的视频(例如目标视频:游戏类应用程序中的游戏画面、浏览器中的视频画面等),然后电子设备可以检测该目标视频是否需要进行插帧处理,并在检测到该目标视频需要进行插帧处理的情况下,电子设备可以获取该目标视频的设置帧率、目标帧率和目标类别信息,以根据该目标视频的设置帧率和目标类别信息,确定目标视频的插帧方式。
可选地,本申请实施例中,上述设置帧率可以为系统默认设置帧率参数、用户预先设置的设置帧率参数、用户历史使用的设置帧率参数或用户实时设置的设置帧率参数,具体的可以根据实际使用确定,本申请实施例不做任何限制。
需要说明的是,上述设置帧率是指目标视频的设置帧率级别信息(例如30帧、60帧或90帧等)。
可选地,本申请实施例中,上述目标类别信息可以为系统默认类别信息、用于预先设置的类别信息、用户历史使用的类别信息或用户实时选择的类别信息,具体的可以根据实际使用确定,本申请实施例不做任何限制。
可选地,本申请实施例中,上述目标类别信息可以包括节省功耗类和提升效果类。
可选地,在上述步骤201之前,本申请实施例提供的插帧方法还包括下述的步骤301,步骤201可以具体通过下述的步骤201a和步骤201b实现。
步骤301、电子设备显示插帧交互界面。
本申请实施例中,插帧交互界面中包括至少一个类别标识和至少一个帧率标识,每个类别标识分别用于指示插帧的一种类别信息,每个帧率标识分别用于指示插帧的一种帧率。
可选地,本申请实施例中,在用户打开戏类应用程序时,电子设备可以显示该游戏应用程序的界面,并在该游戏应用程序的界面中显示插帧交互界面。
步骤201a、电子设备显示插帧交互界面,获取目标视频的设置帧率,并接收用户对至少一个类别标识中的目标类别标识和至少一个帧率标识中的目标帧率标识的第一输入。
可选地,本申请实施例中,电子设备在屏幕中显示目标视频的情况下,用户可以对目标视频的显示界面进行输入,以触发电子设备显示插帧交互界面,并在该设置交互界面显示至少一个类别标识和至少一个帧率标识,每个类别标识分别用于指示插帧的一种类别信息,每个帧率标识分别用于指示插帧的一种帧率,然后用户可以在交互界面上对任意一个类别标识(例如目标类别标识)和任意一个帧率(例如目标帧率)进行第一输入(例如对设置交互界面中已显示的目标帧率参数进行选择输入或在交互界面的预设区域输入目标帧率参数),以触发电子设备将目标视频当前使用的设置帧率参数处理/更新为用户需求的帧率参数。
本申请实施例中,电子设备在获取目标视频的设置帧率和目标类别信息之前,可以在电子设备的屏幕中显示目标视频,并在该目标视频的显示界面上显示插帧交互界面,以使得用户可以在该插帧交互界面中进行输入。
本申请实施例中,上述一种类别信息分别指示一种插帧范围。
可选地,本申请实施例中,电子设备可以在目标视频的显示界面悬浮显示插帧交互界面。
可选地,本申请实施例中,电子设备还可以将屏幕划分为两个区域,以在第一区域显示目标视频的播放界面,并在第二区域显示插帧交互界面。
可选地,本申请实施例中,上述至少一个插帧类别标识可以包括优化功耗标识和提升帧率标识。
可选地,本申请实施例中,上述优化功耗标识用于指示节省功耗类别信息,上述提升帧率标识用于指示提升效果类别信息。
可选地,本申请实施例中,上述优化功耗标识指示第一插帧效果,上述提升帧率标识指示第二插帧效果。
可选地,本申请实施例中,上述第一插帧效果为电子设备显示目标视频的功耗低于电子设备进行插帧处理前显示目标视频的功耗,且电子设备显示目标视频的流畅性相当于或优于电子设备进行插帧处理前显示目标视频的流畅性;上述第二插帧效果为电子设备显示目标视频的功耗相当于或大于电子设备进行插帧处理前显示目标视频的功耗,且电子设备显示目标视频的流畅性优于电子设备进行插帧处理前显示目标视频的流畅性。
需要说明的是,由于电子设备在控制目标视频的输出帧率时,可以节省中央处理器(Central Processing Unit,CPU)/图形处理器(Graphics Processing Unit,GPU)的消耗,因此使得电子设备在进行插帧处理后功耗降低;由于电子设备中的插帧芯片的消耗,因此使得电子设备在进行插帧处理后功耗增加;若控制帧率节省的功耗大于插帧芯片的消耗,则为节省功耗类,即优化功耗标识对应的效果(第一插帧效果);若控制帧率节省的功耗小于插帧芯片的消耗,则为提升效果类,即提升帧率标识对应的效果(第二插帧效果)。
可选地,本申请实施例中,上述第一输入可以为对用户的点击输入(例如单击输入、双击输入或预设点击次数的输入等)、长按输入或滑动输入等。具体的可以根据实际使用需求设置,本申请实施例中不做限制。
示例性地,以电子设备为手机为例,如图2所示,手机显示目标视频的显示界面10,从而可以在该显示界面10上显示插帧交互界面11,以使得手机可以在该插帧交互界面11上显示至少一个类别标识(例如提升帧率标识、优化功耗标识)和至少一个帧率标识(例如60帧、90帧、120帧)并分别在每个标识对应的位置显示一个控件,用户可以对多个标识中的类别标识对应的控件进行输入,以触发电子设备将目标类别标识指示的类别信息确定为目标类别信息,并触发电子设备将目标帧率标识指示的帧率信息确定为目标帧率信息。
步骤201b、电子设备响应于第一输入,将目标类别标识指示的类别信息确定为目标类别信息,将目标帧率标识指示的帧率确定为目标帧率。
本申请实施例中,电子设备在接收到用户对目标插类别标识和目标帧率标识的第一输入之后,可以将目标类别标识指示的类别信息确定为目标类别信息,并将目标帧率标识指示的帧率信息确定为目标帧率信息,以使得电子设备获取目标类别信息和目标帧率信息,确定目标帧率。
本申请实施例中,在电子设备可以显示插帧交互界面上的情况下,用户可以对目标类别标识和目标帧率标识进行第一输入,在丰富了电子设备的插帧类别的同时,也使得电子设备可以根据用户的需求确定目标视频的类别信息,提升了电子设备确定目标视频类别信息的灵活性。
步骤202、电子设备根据设置帧率和目标帧率,确定目标插帧方式。
本申请实施例中,电子设备在获取到目标帧率和设置帧率之后,根据设置帧率和目标帧率,确定目标视频的插帧方式。
可选地,目标帧率大于等于设置帧率,步骤202可以具体通过下述的步骤202a1和步骤202a2,或者通过步骤202b实现。
步骤202a1、在设置帧率大于第一帧率的情况下,AP主控芯片将目标视频的输出帧率设置为第一帧率。
其中,第一帧率的数值为目标帧率的数值的二分之一。
可选地,本申请实施例中,电子设备中的AP主控芯片可以将目标视频的输出帧率设置为第一帧率。
可选地,本申请实施例中,电子设备可以先从图像合成系统的缓冲队列(bufferqueue)中申请一个缓冲(buffer),然后将目标视频的显示内容填充至该buffer中,以使得电子设备的图像合成系统可以对该目标视频的显示内容进行合成,然后电子设备可以通过控制目标视频指示的应用程序申请获得buffer的时间间隔的方式,将应用程序申请获得buffer的时间间隔控制为目标帧率的二分之一所对应的时间间隔,以将目标视频的输出帧率设置为第一帧率。
步骤202a2、独立插帧芯片对第一帧率的目标视频进行插帧处理,得到第二帧率的目标视频,第二帧率的数值为第一帧率的数值的两倍。
可选地,本申请实施例中,电子设备可以通过独立插帧芯片对第一帧率的目标视频进行插帧处理,以得到第二帧率的目标视频,其中,第二帧率的数值为第一帧率的数值的两倍。
步骤202b1、在设置帧率小于或等于第一帧率的情况下,独立插帧芯片对目标视频进行插帧处理,得到第三帧率的目标视频。
本申请实施例中,第三帧率的数值为设置帧率的数值的两倍;
其中,第一帧率的数值为目标帧率的数值的二分之一。
可选地,本申请实施例中,在设置帧率小于或等于第一帧率的情况下,AP主控芯片输出目标视频的输出帧率的数值与设置帧率的数值相同,独立插帧芯片接收到应用处理器AP主控芯片传输过来的目标视频后,对目标视频进行插帧处理,得到第三帧率的目标视频。
步骤203、电子设备根据目标类别信息和目标插帧方式,对目标视频进行插帧处理。
本申请实施例中,电子设备可以采用与目标帧率对应的插帧帧率和目标类别信息对应的插帧生效范围,对目标视频进行插帧处理。
需要说明的是,插帧处理是指电子设备采用目标帧率在目标视频的帧基础上进行插帧。
可选地,本申请实施例中,上述步骤203具体可以通过下述的步骤203a实现。
步骤203a、插帧芯片采用目标插帧方式,对目标视频中与目标类别信息对应的视频片段进行插帧处理。
可选地,本申请实施例中,电子设备在确定目标类别信息对应的插帧范围后,可以根据插帧范围,从目标视频中选取与插帧范围对应的视频片段,并采用目标帧率对这些视频片段进行插帧处理。
本申请实施例中,电子设备可以根据用户选择的目标类别信息,采用目标帧率,对目标视频中与目标类别信息对应的视频片段进行插帧处理,因此,电子设备可以灵活地确定插帧效果、插帧方式以及插帧作用的范围,如此,提升了电子设备确定插帧策略的灵活性,也丰富了电子设备对目标视频进行插帧处理的效果。
可选地,本申请实施例中,目标视频为游戏视频,上述步骤203a中的具体可以通过下述的步骤203a1和步骤203a2,或者,步骤203a1和步骤203a3。
步骤203a1、电子设备实时检测游戏视频所处的游戏状态。
可选地,本申请实施例中,电子设备可以通过检测模块实时检测游戏视频所处的游戏状态,并根据不同的而游戏状态,对游戏视频做出与游戏状态对应的插帧处理。
本申请实施例中,上述游戏状态可以分为游戏对局状态或非游戏对局状态。
步骤203a2、在目标类别信息指示第一插帧范围、且游戏视频中的视频片段的游戏状态为目标状态的情况下,独立插帧芯片采用目标插帧方式,对处于目标状态的视频片段进行插帧处理。
本申请实施例中,目标状态为游戏对局状态或非游戏对局状态。
本申请实施例中,若用户选择的目标类别标识对应的目标类别信息指示第一插帧范围(即节省功耗),且游戏视频中的视频片段的游戏状态为游戏对局状态或非游戏对局状态,电子设备可以采用与第一插帧范围对应的目标帧率,对游戏视频中的游戏对局状态视频或非游戏对局状态视频进行插帧处理。
步骤203a3、在目标类别信息指示第二插帧范围、且游戏视频中的视频片段的游戏状态为游戏对局状态的情况下,独立插帧芯片采用目标插帧方式,对处于游戏对局状态的视频片段进行插帧处理。
本申请实施例中,若用户选择的目标类别标识对应的目标类别信息指示第二插帧范围(即提升帧率),且游戏视频中的视频片段的游戏状态为游戏对局状态,电子设备可以采用与第二插帧范围对应的目标帧率,对游戏视频中的游戏对局状态的视频片段进行插帧处理。
需要说明的是,当电子设备显示游戏视频时,通常,由于用户对游戏视频中的游戏对局状态的视频的流畅性要求更高,而对非游戏对局状态的视频的流畅性要求较低,因此,若用户选择第一插帧范围,则电子设备可以采用目标帧率,对游戏对局状态的视频或非游戏对局状态的视频进行插帧处理,若用户选择第二插帧范围,则用户可以采用目标帧率,对游戏对局状态的视频进行插帧处理。
本申请实施例中,电子设备可以根据用户的需求,动态地确定在游戏视频中的插帧实施方式以及作用范围,以达到在游戏视频中降低功耗和增强视频流畅性的最优效果,因此,在降低电子设备运行游戏类应用程序并显示游戏视频的功耗的同时,也可以使得游戏类应用程序显示游戏视频的流畅性达到最优的效果,如此,提升了电子设备显示游戏视频的效果,降低了电子设备对游戏视频进行插帧处理的功耗的同时,提升了电子设备显示游戏视频的流畅性。
本申请实施例提供一种插帧方法,由于电子设备可以根据目标视频的设置帧率、目标帧率和目标类别信息确定插帧方式,并采用该插帧方式对目标视频进行插帧处理,因此,电子设备可以动态地确定插帧的实施方式以及插帧的作用范围,如此,提升了电子设备确定插帧策略的灵活性,并且在提升电子设备显示目标视频的流畅性的同时,降低了电子设备对目标视频进行插帧处理的功耗,也提升了电子设备对目标视频进行插帧处理的效果。
需要说明的是,本申请实施例提供的插帧方法,执行主体可以为电子设备,插帧装置,或者该插帧装置中的用于执行插帧方法的控制模块。本申请实施例中以电子设备执行插帧方法为例,说明本申请实施例提供的插帧的方法。
图3示出了本申请实施例中涉及的插帧装置的一种可能的结构示意图。如图3所示,该插帧装置70可以包括:获取模块71、确定模块72和处理模块73。
其中,获取模块71,用于获取目标视频的设置帧率、目标帧率和目标类别信息,目标帧率与插帧处理后的目标视频的帧率相关联,目标类别信息用于指示目标视频的插帧范围。确定模块72,用于根据获取模块71获取的设置帧率和目标帧率,确定目标插帧方式。处理模块73,用于根据确定模块72确定的目标类别信息和目标插帧方式,对目标视频进行插帧处理。
本申请实施例提供一种插帧装置,由于电子设备可以根据目标视频的设置帧率、目标帧率和目标类别信息确定插帧方式,并采用该插帧方式对目标视频进行插帧处理,因此,电子设备可以动态地确定插帧的实施方式以及插帧的作用范围,如此,提升了电子设备确定插帧策略的灵活性,并且在提升电子设备显示目标视频的流畅性的同时,降低了电子设备对目标视频进行插帧处理的功耗,也提升了电子设备对目标视频进行插帧处理的效果。
在一种可能的实现方式中,插帧装置70还包括显示模块。显示模块,用于在获取模块71获取目标视频的设置帧率、目标帧率和目标类别信息之前,显示插帧交互界面,插帧交互界面中包括至少一个类别标识和至少一个帧率标识,每个类别标识分别用于指示插帧的一种类别信息,每个帧率标识分别用于指示插帧的一种帧率。
在一种可能的实现方式中,获取模块71,具体用于显示插帧交互界面,获取目标视频的设置帧率,并接收用户对至少一个类别标识中的目标类别标识和至少一个帧率标识中的目标帧率标识的第一输入;并响应于第一输入,将目标类别标识指示的类别信息确定为目标类别信息,将目标帧率标识指示的帧率确定为目标帧率。
在一种可能的实现方式中,目标帧率大于等于设置帧率,确定模块72,具体用于在设置帧率大于第一帧率的情况下,AP主控芯片将目标视频的输出帧率设置为第一帧率;独立插帧芯片对第一帧率频的目标视频进行插帧处理,得到第二帧率的目标视频,第二帧率的数值为第一帧率的数值的两倍;在设置帧率小于或等于第一帧率的情况下,独立插帧芯对目标视频进行插帧处理,得到第三帧率的目标视频,第三帧率的数值为设置帧率的数值的两倍;其中,第一帧率的数值为目标帧率的数值的二分之一。
在一种可能的实现方式中,处理模块73,具体用于插帧芯片采用目标插帧方式,对目标视频中与目标类别信息对应的视频片段进行插帧处理。
在一种可能的实现方式中,目标视频为游戏视频。处理模块73,具体用于实时检测游戏视频所处的游戏状态;在目标类别信息指示第一插帧范围、且游戏视频中的视频片段的游戏状态为目标状态的情况下,独立插帧芯片采用目标插帧方式,对处于目标状态的视频片段进行插帧处理,目标状态为游戏对局状态或非游戏对局状态;在目标类别信息指示第二插帧范围、且游戏视频中的视频片段的游戏状态为游戏对局状态的情况下,独立插帧芯片采用目标插帧方式,对处于游戏对局状态的视频片段进行插帧处理。
本申请实施例中的插帧装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA)等,非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的插帧装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的插帧装置能够实现上述方法实施例实现的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
可选地,如图4所示,本申请实施例还提供一种电子设备90,包括处理器91,存储器92,存储在存储器92上并可在所述处理器91上运行的程序或指令,该程序或指令被处理器91执行时实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图5为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备100包括但不限于:射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、以及处理器110等部件。
本领域技术人员可以理解,电子设备100还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图5中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,射频单元101,用于获取目标视频的设置帧率、目标帧率和目标类别信息,目标帧率与插帧处理后的目标视频的帧率相关联,目标类别信息用于指示目标视频的插帧范围。处理器110,用于根据设置帧率和目标帧率,确定目标插帧方式。处理器110,用于根据目标类别信息和目标插帧方式,对目标视频进行插帧处理。
本申请实施例提供一种电子设备,由于电子设备可以根据目标视频的设置帧率、目标帧率和目标类别信息确定插帧方式,并采用该插帧方式对目标视频进行插帧处理,因此,电子设备可以动态地确定插帧的实施方式以及插帧的作用范围,如此,提升了电子设备确定插帧策略的灵活性,并且在提升电子设备显示目标视频的流畅性的同时,降低了电子设备对目标视频进行插帧处理的功耗,也提升了电子设备对目标视频进行插帧处理的效果。
可选地,本申请实施例中,显示单元106,用于在获取目标视频的设置帧率、目标帧率和目标类别信息之前,显示插帧交互界面,插帧交互界面中包括至少一个类别标识和至少一个帧率标识,每个类别标识分别用于指示插帧的一种类别信息,每个帧率标识分别用于指示插帧的一种帧率。
可选地,本申请实施例中,射频单元101,具体用于显示插帧交互界面,获取目标视频的设置帧率,并接收用户对至少一个类别标识中的目标类别标识和至少一个帧率标识中的目标帧率标识的第一输入;并响应于第一输入,将目标类别标识指示的类别信息确定为目标类别信息,将目标帧率标识指示的帧率确定为目标帧率。
可选地,本申请实施例中,目标帧率大于等于设置帧率,处理器110,具体用于在设置帧率大于第一帧率的情况下,AP主控芯片将目标视频的输出帧率设置为第一帧率;独立插帧芯片对第一帧率频的目标视频进行插帧处理,得到第二帧率的目标视频,第二帧率的数值为第一帧率的数值的两倍;在设置帧率小于或等于第一帧率的情况下,独立插帧芯对目标视频进行插帧处理,得到第三帧率的目标视频,第三帧率的数值为设置帧率的数值的两倍;其中,第一帧率的数值为目标帧率的数值的二分之一。
可选地,本申请实施例中,处理器110,具体用于插帧芯片采用目标插帧方式,对目标视频中与目标类别信息对应的视频片段进行插帧处理。
可选地,本申请实施例中,目标视频为游戏视频。处理器110,具体用于实时检测游戏视频所处的游戏状态;在目标类别信息指示第一插帧范围、且游戏视频中的视频片段的游戏状态为目标状态的情况下,独立插帧芯片采用目标插帧方式,对处于目标状态的视频片段进行插帧处理,目标状态为游戏对局状态或非游戏对局状态;在目标类别信息指示第二插帧范围、且游戏视频中的视频片段的游戏状态为游戏对局状态的情况下,独立插帧芯片采用目标插帧方式,对处于游戏对局状态的视频片段进行插帧处理。
本申请实施例提供的电子设备能够实现上述方法实施例实现的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本实施例中各种实现方式具有的有益效果具体可以参见上述方法实施例中相应实现方式所具有的有益效果,为避免重复,此处不再赘述。
应理解的是,本申请实施例中,输入单元104可以包括图形处理器(GraphicsProcessing Unit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元106可包括显示面板1061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板1061。用户输入单元107包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸屏。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器109可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如上述视频生成方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (12)
1.一种插帧方法,其特征在于,所述方法包括:
获取目标视频的设置帧率、目标帧率和目标类别信息,所述目标帧率与插帧处理后的目标视频的帧率相关联,所述目标类别信息用于指示所述目标视频的插帧范围;
根据所述设置帧率和所述目标帧率,确定目标插帧方式;
根据所述目标类别信息和所述目标插帧方式,对所述目标视频进行插帧处理。
2.根据权利要求1所述的方法,其特征在于,
所述获取目标视频的设置帧率、目标帧率和目标类别信息之前,所述方法还包括:
显示插帧交互界面,所述插帧交互界面中包括至少一个类别标识和至少一个帧率标识,每个类别标识分别用于指示插帧的一种类别信息,每个帧率标识分别用于指示插帧的一种帧率;
所述获取目标视频的设置帧率、目标帧率和目标类别信息,包括:
显示插帧交互界面,获取所述目标视频的设置帧率,并接收用户对所述至少一个类别标识中的目标类别标识和所述至少一个帧率标识中的目标帧率标识的第一输入;
响应于所述第一输入,将所述目标类别标识指示的类别信息确定为所述目标类别信息,将所述目标帧率标识指示的帧率确定为目标帧率。
3.根据权利要求1或2所述的方法,其特征在于,所述目标帧率大于等于所述设置帧率,所述根据所述设置帧率和所述目标帧率,确定目标插帧方式,包括:
在所述设置帧率大于第一帧率的情况下,应用处理器AP主控芯片将所述目标视频的输出帧率设置为第一帧率;独立插帧芯片对第一帧率的目标视频进行插帧处理,得到第二帧率的目标视频,所述第二帧率的数值为所述第一帧率的数值的两倍;
在所述设置帧率小于或等于第一帧率的情况下,独立插帧芯对目标视频进行插帧处理,得到第三帧率的目标视频,所述第三帧率的数值为所述设置帧率的数值的两倍;
其中,所述第一帧率的数值为所述目标帧率的数值的二分之一。
4.根据权利要求1所述的方法,其特征在于,所述根据所述目标类别信息和所述目标插帧方式,对所述目标视频进行插帧处理,包括:
所述插帧芯片采用所述目标插帧方式,对所述目标视频中与所述目标类别信息对应的视频片段进行插帧处理。
5.根据权利要求4所述的方法,其特征在于,所述目标视频为游戏视频;
所述插帧芯片采用所述目标插帧方式,对所述目标视频中与所述目标类别信息对应的视频片段进行插帧处理,包括:
实时检测所述游戏视频所处的游戏状态;
在所述目标类别信息指示第一插帧范围、且所述游戏视频中的视频片段的游戏状态为目标状态的情况下,所述独立插帧芯片采用所述目标插帧方式,对处于所述目标状态的视频片段进行插帧处理,所述目标状态为游戏对局状态或非游戏对局状态;
在所述目标类别信息指示第二插帧范围、且所述游戏视频中的视频片段的游戏状态为游戏对局状态的情况下,所述独立插帧芯片采用所述目标插帧方式,对处于所述游戏对局状态的视频片段进行插帧处理。
6.一种插帧装置,其特征在于,所述插帧装置包括:获取模块、确定模块和处理模块;
所述获取模块,用于获取目标视频的设置帧率、目标帧率和目标类别信息,所述目标帧率与插帧处理后的目标视频的帧率相关联,所述目标类别信息用于指示所述目标视频的插帧范围;
所述确定模块,用于根据所述获取模块获取的所述设置帧率和所述目标帧率,确定目标插帧方式;
所述处理模块,用于根据所述确定模块确定的所述目标类别信息和所述目标插帧方式,对所述目标视频进行插帧处理。
7.根据权利要求6所述的装置,其特征在于,所述插帧装置还包括显示模块;
所述显示模块,用于在所述获取模块获取所述目标视频的设置帧率、目标帧率和目标类别信息之前,显示插帧交互界面,所述插帧交互界面中包括至少一个类别标识和至少一个帧率标识,每个类别标识分别用于指示插帧的一种类别信息,每个帧率标识分别用于指示插帧的一种帧率;
所述获取模块,具体用于显示插帧交互界面,获取所述目标视频的设置帧率,并接收用户对所述至少一个类别标识中的目标类别标识和所述至少一个帧率标识中的目标帧率标识的第一输入;并响应于所述第一输入,将所述目标类别标识指示的类别信息确定为所述目标类别信息,将所述目标帧率标识指示的帧率确定为目标帧率。
8.根据权利要求6或7所述的装置,其特征在于,所述目标帧率大于等于所述设置帧率,所述确定模块,具体用于在所述设置帧率大于第一帧率的情况下,应用处理器AP主控芯片将所述目标视频的输出帧率设置为第一帧率;独立插帧芯片对第一帧率频的目标视频进行插帧处理,得到第二帧率的目标视频,所述第二帧率的数值为所述第一帧率的数值的两倍;
在所述设置帧率小于或等于第一帧率的情况下,独立插帧芯对目标视频进行插帧处理,得到第三帧率的目标视频,所述第三帧率的数值为所述设置帧率的数值的两倍;
其中,所述第一帧率的数值为所述目标帧率的数值的二分之一。
9.根据权利要求7所述的装置,其特征在于,所述处理模块,具体用于所述插帧芯片采用所述目标插帧方式,对所述目标视频中与所述目标类别信息对应的视频片段进行插帧处理。
10.根据权利要求9所述的装置,其特征在于,所述目标视频为游戏视频;
所述处理模块,具体用于实时检测所述游戏视频所处的游戏状态;在所述目标类别信息指示第一插帧范围、且所述游戏视频中的视频片段的游戏状态为目标状态的情况下,所述独立插帧芯片采用所述目标插帧方式,对处于所述目标状态的视频片段进行插帧处理,所述目标状态为游戏对局状态或非游戏对局状态;在所述目标类别信息指示第二插帧范围、且所述游戏视频中的视频片段的游戏状态为游戏对局状态的情况下,所述独立插帧芯片采用所述目标插帧方式,对处于所述游戏对局状态的视频片段进行插帧处理。
11.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1至5中任一项所述的插帧方法的步骤。
12.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1至5中任一项所述的插帧方法的步骤。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111626875.9A CN114339410A (zh) | 2021-12-28 | 2021-12-28 | 插帧方法、装置及电子设备 |
PCT/CN2022/142409 WO2023125553A1 (zh) | 2021-12-28 | 2022-12-27 | 插帧方法、装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111626875.9A CN114339410A (zh) | 2021-12-28 | 2021-12-28 | 插帧方法、装置及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114339410A true CN114339410A (zh) | 2022-04-12 |
Family
ID=81015476
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111626875.9A Pending CN114339410A (zh) | 2021-12-28 | 2021-12-28 | 插帧方法、装置及电子设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN114339410A (zh) |
WO (1) | WO2023125553A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023125553A1 (zh) * | 2021-12-28 | 2023-07-06 | 维沃移动通信有限公司 | 插帧方法、装置及电子设备 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109688461A (zh) * | 2019-01-16 | 2019-04-26 | 京东方科技集团股份有限公司 | 视频播放方法及装置 |
CN110933315A (zh) * | 2019-12-10 | 2020-03-27 | Oppo广东移动通信有限公司 | 图像数据处理方法及相关设备 |
CN112057842A (zh) * | 2020-09-11 | 2020-12-11 | Oppo广东移动通信有限公司 | 帧率控制方法、装置以及电子设备 |
CN112203034A (zh) * | 2020-09-30 | 2021-01-08 | Oppo广东移动通信有限公司 | 帧率控制方法、装置以及电子设备 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6140651B2 (ja) * | 2014-06-06 | 2017-05-31 | 株式会社コロプラ | ゲームプログラム |
CN108646906B (zh) * | 2018-03-27 | 2021-06-25 | Oppo广东移动通信有限公司 | 帧率调整方法、装置、存储介质及智能终端 |
CN112198954B (zh) * | 2020-10-23 | 2022-10-21 | Tcl通讯(宁波)有限公司 | 帧率设置方法、装置、存储介质及移动终端 |
CN113674136A (zh) * | 2021-08-26 | 2021-11-19 | 北京壳木软件有限责任公司 | 一种画面渲染方法、装置及电子设备 |
CN114339410A (zh) * | 2021-12-28 | 2022-04-12 | 维沃移动通信有限公司 | 插帧方法、装置及电子设备 |
-
2021
- 2021-12-28 CN CN202111626875.9A patent/CN114339410A/zh active Pending
-
2022
- 2022-12-27 WO PCT/CN2022/142409 patent/WO2023125553A1/zh unknown
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109688461A (zh) * | 2019-01-16 | 2019-04-26 | 京东方科技集团股份有限公司 | 视频播放方法及装置 |
CN110933315A (zh) * | 2019-12-10 | 2020-03-27 | Oppo广东移动通信有限公司 | 图像数据处理方法及相关设备 |
CN112057842A (zh) * | 2020-09-11 | 2020-12-11 | Oppo广东移动通信有限公司 | 帧率控制方法、装置以及电子设备 |
CN112203034A (zh) * | 2020-09-30 | 2021-01-08 | Oppo广东移动通信有限公司 | 帧率控制方法、装置以及电子设备 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023125553A1 (zh) * | 2021-12-28 | 2023-07-06 | 维沃移动通信有限公司 | 插帧方法、装置及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
WO2023125553A1 (zh) | 2023-07-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106936995B (zh) | 一种移动终端帧率的控制方法、装置及移动终端 | |
CN112540740A (zh) | 分屏显示方法、装置、电子设备和可读存储介质 | |
CN111816139A (zh) | 屏幕刷新率切换方法和电子设备 | |
CN112596609A (zh) | 显示处理方法、显示处理装置和可穿戴设备 | |
WO2023125553A1 (zh) | 插帧方法、装置及电子设备 | |
CN112565909B (zh) | 视频播放方法、装置、电子设备及可读存储介质 | |
CN113794795A (zh) | 信息共享方法、装置、电子设备及可读存储介质 | |
CN112905134A (zh) | 一种刷新显示的方法、装置和电子设备 | |
CN112817555A (zh) | 音量控制方法及音量控制装置 | |
CN112286612A (zh) | 信息显示方法、装置及电子设备 | |
CN112035877A (zh) | 信息隐藏方法、装置、电子设备及可读存储介质 | |
CN113271494B (zh) | 视频帧处理方法、装置和电子设备 | |
CN113230649B (zh) | 显示控制方法和装置 | |
CN112637409B (zh) | 内容输出方法、装置和电子设备 | |
CN112418942A (zh) | 广告显示方法、装置及电子设备 | |
CN115543137A (zh) | 视频播放方法和装置 | |
CN113721876A (zh) | 投屏处理方法及相关设备 | |
CN112199149A (zh) | 界面渲染方法、装置及电子设备 | |
CN112511890A (zh) | 视频图像处理方法、装置及电子设备 | |
CN114547436A (zh) | 页面显示方法、装置、电子设备及存储介质 | |
CN113835657A (zh) | 显示方法及电子设备 | |
CN112910875A (zh) | 显示方法及装置 | |
CN113806000A (zh) | 显示方法、装置和电子设备 | |
CN112399238A (zh) | 视频播放方法、装置及电子设备 | |
CN112181565A (zh) | 屏幕显示方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |