CN113852776A - 插帧方法及电子设备 - Google Patents
插帧方法及电子设备 Download PDFInfo
- Publication number
- CN113852776A CN113852776A CN202111051181.7A CN202111051181A CN113852776A CN 113852776 A CN113852776 A CN 113852776A CN 202111051181 A CN202111051181 A CN 202111051181A CN 113852776 A CN113852776 A CN 113852776A
- Authority
- CN
- China
- Prior art keywords
- module
- video
- data
- line
- motion compensation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012966 insertion method Methods 0.000 title claims description 5
- 238000012545 processing Methods 0.000 claims abstract description 118
- 238000000034 method Methods 0.000 claims abstract description 42
- 238000003780 insertion Methods 0.000 claims description 50
- 230000037431 insertion Effects 0.000 claims description 50
- 230000015572 biosynthetic process Effects 0.000 claims description 23
- 238000003786 synthesis reaction Methods 0.000 claims description 23
- 230000006837 decompression Effects 0.000 claims description 10
- 238000013144 data compression Methods 0.000 claims description 6
- 238000009432 framing Methods 0.000 claims description 5
- 238000004891 communication Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- VJTAZCKMHINUKO-UHFFFAOYSA-M chloro(2-methoxyethyl)mercury Chemical compound [Cl-].COCC[Hg+] VJTAZCKMHINUKO-UHFFFAOYSA-M 0.000 description 3
- 238000007906 compression Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Controls And Circuits For Display Device (AREA)
- Television Systems (AREA)
Abstract
本申请公开了一种插帧方法及电子设备,属于终端设备技术领域。该电子设备包括:数据处理器、运动补偿显示插帧芯片和显示屏,所述数据处理器的输出端与所述运动补偿显示插帧芯片的输入端连接;所述运动补偿显示插帧芯片包括行缓存模块、图像分层处理模块和运动补偿显示插帧模块,其中,所述行缓存模块的输入端与所述数据处理器的输出端连接,所述行缓存模块的输出端分别与所述图像分层处理模块的输入端和所述显示屏连接,所述图像分层处理模块的输出端与所述运动补偿显示插帧模块的输入端连接,所述运动补偿显示插帧模块的输出端与所述显示屏连接。
Description
技术领域
本申请属于终端设备技术领域,具体涉及一种插帧方法及电子设备。
背景技术
随着终端设备的不断发展,用户对显示效果及画质的要求也不断提高。当前的终端设备采用独立显示增强芯片,对视频源进行插帧运动补偿(Motion Estimation andMotion Compensation,MEMC),以使得画面进行高帧率显示。
但当前的高帧率显示设计只针对全屏显示下的视频进行处理,而无法对分屏显示不同应用程序时的视频进行处理,影响用户体验。
发明内容
本申请实施例提供一种电子设备,能够解决现有处理器无法对分屏显示的视频及你从插帧处理的问题。
第一方面,本申请实施例提供了一种电子设备,包括:数据处理器、运动补偿显示插帧芯片和显示屏,所述数据处理器的输出端与所述运动补偿显示插帧芯片的输入端连接;
所述运动补偿显示插帧芯片包括行缓存模块、图像分层处理模块和运动补偿显示插帧模块,其中,所述行缓存模块的输入端与所述数据处理器的输出端连接,所述行缓存模块的输出端分别与所述图像分层处理模块的输入端和所述显示屏连接,所述图像分层处理模块的输出端与所述运动补偿显示插帧模块的输入端连接,所述运动补偿显示插帧模块的输出端与所述显示屏连接;
其中,在所述数据处理器接收到待显示于所述显示屏的视频源数据的情况下,所述数据处理器将所述视频源数据发送至所述运动补偿显示插帧芯片的行缓存模块,所述行缓存模块逐行读取所述视频源数据,并将视频数据发送至所述图像分层处理模块,所述图像分层处理模块将所述视频数据发送至所述运动补偿显示插帧模块,所述运动补偿显示插帧模块对所述视频数据进行插帧处理,并将插帧处理后的视频数据发送至所述显示屏,所述视频源数据包括视频数据。
第二方面,本申请实施例提供一种插帧方法,应用于第一方面所述的电子设备,所述方法包括:
在数据处理器接收到待显示于显示屏的视频源数据的情况下,所述数据处理器将所述视频源数据发送至运动补偿显示插帧芯片的行缓存模块;
所述行缓存模块逐行读取所述视频源数据,并将视频数据发送至图像分层处理模块,其中,所述视频源数据包括视频数据;
所述图像分层处理模块将所述视频数据发送至运动补偿显示插帧模块;
所述运动补偿显示插帧模块对所述视频数据进行插帧处理,并将插帧处理后的视频数据发送至所述显示屏进行显示。
第三方面,本申请实施例提供一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第二方面所述的方法的步骤。
第四方面,本申请实施例提供一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第二方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第二方面所述的方法。
在本申请实施例中,该电子设备包括数据处理器、运动补偿显示插帧芯片和显示屏,数据处理器的输出端与运动补偿显示插帧芯片的输入端连接,运动补偿显示插帧芯片包括行缓存模块、图像分层处理模块和运动补偿显示插帧模块,行缓存模块的输入端与数据处理器的输出端连接,行缓存模块的输出端分别与图像分层处理模块的输入端和显示屏连接,图像分层处理模块的输出端与运动补偿显示插帧模块的输入端连接,运动补偿显示插帧模块的输出端与显示屏连接,在数据处理器接收到待显示于显示屏的视频源数据的情况下,数据处理器将视频源数据发送至运动补偿显示插帧芯片的行缓存模块,行缓存模块逐行读取视频源数据,并将视频数据发送至图像分层处理模块,图像分层处理模块将视频数据发送至运动补偿显示插帧模块,运动补偿显示插帧模块对视频数据进行插帧处理,并将插帧处理后的视频数据发送至显示屏。在本申请实施例中,通过运动补偿显示插帧芯片中的行缓存模块对数据处理器传输的视频源数据进行逐行读取,以提取视频源数据中的视频数据,再通过运动补偿显示插帧芯片中的图像分层处理模块提取出视频数据中的视频信息,然后对提取出的视频信息进行插帧处理,可以先对视频信息进行提取,然后再进行插帧处理,解决了现有技术中无法对分屏中的视频信息进行插帧处理的问题。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是本申请的一个实施例提供的一种电子设备的结构示意图;
图2是本申请的一个实施例提供的一种电子设备的结构示意图;
图3是本申请的一个实施例提供的一种显示屏的示意图;
图4是本申请的一个实施例提供的一种插帧方法的流程图;
图5是本申请的一个实施例提供的一种电子设备的结构示意图;
图6是本申请的一个实施例提供的一种电子设备的硬件结构示意图。
图中,100-数据处理器;200-运动补偿显示插帧芯片;300-显示屏;31-第一区域;32-第二区域;33-显示分屏线。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图1-6,通过具体的实施例及其应用场景对本申请实施例提供的一种插帧方法及电子设备进行详细地说明。
如图1所示,该电子设备可以包括:数据处理器、运动补偿显示插帧芯片和显示屏。
具体地,数据处理器的输出端与运动补偿显示插帧芯片的输入端连接;运动补偿显示插帧芯片包括行缓存模块、图像分层处理模块和运动补偿显示插帧模块,其中,行缓存模块的输入端与数据处理器的输出端连接,行缓存模块的输出端分别与图像分层处理模块的输入端和显示屏连接,图像分层处理模块的输出端与运动补偿显示插帧模块的输入端连接,运动补偿显示插帧模块的输出端与显示屏连接。
其中,在数据处理器接收到待显示于显示屏的视频源数据的情况下,数据处理器将视频源数据发送至运动补偿显示插帧芯片的行缓存模块,行缓存模块逐行读取视频源数据,并将视频数据发送至图像分层处理模块,图像分层处理模块将视频数据发送至运动补偿显示插帧模块,运动补偿显示插帧模块对视频数据进行插帧处理,并将插帧处理后的视频数据发送至显示屏,视频源数据包括视频数据。
值得说明的是,通过运动补偿(Motion Estimation and Motion Compensation,MEMC)显示插帧芯片中的MEMC显示插帧模块,对视频进行插帧处理,可以提升视频的帧率,例如,视频源的视频帧率为30每秒传输帧率(frames per second,fps),经过MEMC显示插帧模块后,视频帧率可以提升至60fps或90fps。
在本申请实施例中,该电子设备包括数据处理器、运动补偿显示插帧芯片和显示屏,数据处理器的输出端与运动补偿显示插帧芯片的输入端连接,运动补偿显示插帧芯片包括行缓存模块、图像分层处理模块和运动补偿显示插帧模块,行缓存模块的输入端与数据处理器的输出端连接,行缓存模块的输出端分别与图像分层处理模块的输入端和显示屏连接,图像分层处理模块的输出端与运动补偿显示插帧模块的输入端连接,运动补偿显示插帧模块的输出端与显示屏连接,在数据处理器接收到待显示于显示屏的视频源数据的情况下,数据处理器将视频源数据发送至运动补偿显示插帧芯片的行缓存模块,行缓存模块逐行读取视频源数据,并将视频数据发送至图像分层处理模块,图像分层处理模块将视频数据发送至运动补偿显示插帧模块,运动补偿显示插帧模块对视频数据进行插帧处理,并将插帧处理后的视频数据发送至显示屏。在本申请实施例中,通过运动补偿显示插帧芯片中的行缓存模块对数据处理器传输的视频源数据进行逐行读取,以提取视频源数据中的视频数据,再通过运动补偿显示插帧芯片中的图像分层处理模块提取出视频数据中的视频信息,然后对提取出的视频信息进行插帧处理,可以先对视频信息进行提取,然后再进行插帧处理,解决了现有技术中无法对分屏中的视频信息进行插帧处理的问题,提升视频的帧率。
在本申请的一个可能的实施方式中,如图2所示,视频数据可以包括视频信息和界面(UI)信息。相应地,运动补偿显示插帧芯片还可以包括:第一缓冲模块、第二缓冲模块和第一图像合成模块。
具体地,第一缓冲模块的输入端与图像分层处理模块的输出端连接,用于存储图像分层处理模块输出的视频信息,第一帧缓冲模块的输出端与运动补偿显示插帧模块的输入端连接,运动补偿显示插帧模块的输出端与第一图像合成模块的输入端连接;第二帧缓冲模块的输入端与图像分层处理模块的输出端连接,用于存储图像分层处理模块输出的界面信息,第二帧缓冲模块的输出端与第一图像合成模块的输入端连接;第一图像合成模块的输出端与显示屏连接。
其中,图像分层处理模块可以将视频数据中的视频信息和UI信息进行分离处理,进而后续可以对视频信息进行插帧处理。
在本申请实施例中,图像分层处理模块将视频数据中的视频信息与UI信息(如弹幕等)分离,然后将视频信息发送至第一缓冲模块进行存储,将UI信息发送至第二缓冲模块进行存储,第一缓冲模块将视频信息发送至运动补偿显示插帧模块中,运动补偿显示插帧模块对视频信息进行插帧处理,然后将处理后的视频信息发送至第一图像合成模块,第二缓冲模块将UI信息发送至第一图像合成模块,第一图像合成模块将UI信息和插帧处理后的视频信息进行合成,得到完整的视频数据。通过图像分层处理模块将视频数据中的视频信息与UI信息分离,可以单独对视频帧率进行插帧,以使得画面进行高帧率显示。
在本申请的一个可能的实施方式中,显示屏包括视频区域和非视频区域,相应地,数据处理器包括标识模块,用于对待显示于视频区域和非视频区域的视频源数据作出不同的标识。
也就是说,显示屏有可能既包括视频区域,例如某视频应用(APP),又包括非视频区域,例如某聊天APP,也即,一个显示界面分为至少两个区域,至少一个区域显示视频区域,至少一个区域显示非视频区域,此时,则需要将视频区域和非视频区域进行划分,以便后续提升视频区域的帧率。
具体地,可以通过对不同区域标记不同的标识,以区分待显示于视频区域的视频源数据和待显示于非视频区域的视频源数据。
示例性的,如图3所示,第一区域31为视频区域,此区域为某视频APP的播放界面,第二区域32为非视频区域,此区域为某聊天APP的聊天界面,第一区域31和第二区域32中间为显示分屏线33。将待显示于显示屏上的一帧画面总行数确定为Ln,在分屏线的左边的视频显示区域第一区域31的行数记作L1、L2、……、Lm,右边的视频显示区域第二区域32的行数记作Lm+1、Lm+2、……、Ln;其中,n和m为整数,n>m。将第一区域31的每一行均标记有m的标识,将第二区域32的每一行均标记有n的标识,后续运动补偿显示插帧芯片中的行缓存模块可以通过各自的标识区分待显示于视频区域的视频源数据和待显示于非视频区域的视频源数据,即将视频数据和非视频数据进行位置区分,以使得运动补偿显示插帧模块对视频数据进行插帧处理,提升视频区域的帧率。
进一步地,视频源数据可以包括非视频数据,行缓存模块逐行读取视频源数据,并将视频源数据分为视频数据和非视频数据。相应地,运动补偿显示插帧芯片还可以包括:第三帧缓冲模块和第二图像合成模块。
具体地,第三帧缓冲模块的输入端与行缓存模块的输出端连接,用于存储行缓存模块输出的非视频数据,第三帧缓冲模块的输出端与第二图像合成模块的输入端连接;第一图像合成模块的输出端与第二图像合成模块的输入端连接;第二图像合成模块的输出端与显示屏连接。
值得说明的是,行缓存模块可以逐行读取视频源数据,并可以根据视频源数据中的标识,将视频源数据区分为视频数据和非视频数据,上述实施例中已经详细描述得到的视频数据的后续处理步骤,本实施例中不做赘述,得到的非视频数据发送至第三缓冲模块中进行存储,待上述视频数据处理完成后,共同发送至第二图像合成模块中进行合成处理,最后发送至显示屏,显示屏以视频区域和非视频区域对上述视频数据和非视频数据进行显示,其中视频区域显示的视频为插帧处理后的视频数据,使得视频可以高帧率显示,提升用户体验。
在本申请的一个可能的实施方式中,视频区域可以包括应用视频区域,运动补偿显示插帧芯片可以包括多个图像分层处理模块和多个运动补偿是插帧模块。
其中,应用视频区域的个数与图像分层处理模块的个数和运动补偿显示插帧模块的个数相同。
也就是说,本申请实施例提供的电子设备可以处理多个视频区域和多个非视频区域共同显示在显示屏的情况。具体地处理过程在上述实施例中已经详细描述,考虑到文本简洁,本实施例中不再赘述。
在本申请的一个可能的实施方式中,数据处理器包括数据压缩模块,相应地,运动补偿显示插帧芯片包括数据解压模块。
具体地,数据压缩模块的输入端用于接收待显示于显示屏的视频源数据,并压缩,数据压缩模块的输出端与数据解压模块的输入端连接,数据解压模块的输出端与行缓存模块连接。
也就是说,在数据处理器中的数据可以先经过压缩后发送至运动补偿显示插帧芯片,相应地,运动补偿显示插帧芯片中也需要数据解压模块对压缩后的数据进行解压处理。通过压缩和解压处理可以减小数据的占用空间,使得数据的发送接收更快,提升数据处理速度。
如图4所示,本申请实施例还提供了一种插帧方法,应用于上述任一实施例提供的电子设备。该插帧方法可以包括S401至S404所示的步骤。
在S401中,在数据处理器接收到待显示于显示屏的视频源数据的情况下,数据处理器将视频源数据发送至运动补偿显示插帧芯片的行缓存模块。
在S402中,行缓存模块逐行读取视频源数据,并将视频数据发送至图像分层处理模块。
其中,视频源数据包括视频数据。
在S403中,图像分层处理模块将视频数据发送至运动补偿显示插帧模块。
在S404中,运动补偿显示插帧模块对视频数据进行插帧处理,并将插帧处理后的视频数据发送至显示屏进行显示。
在本申请实施例中,首先在数据处理器接收到待显示于显示屏的视频源数据的情况下,数据处理器将视频源数据发送至运动补偿显示插帧芯片的行缓存模块,然后行缓存模块逐行读取视频源数据,并将视频数据发送至图像分层处理模块,其中,视频源数据包括视频数据,图像分层处理模块将视频数据发送至运动补偿显示插帧模块,最后运动补偿显示插帧模块对视频数据进行插帧处理,并将插帧处理后的视频数据发送至显示屏进行显示。在本申请实施例中,通过运动补偿显示插帧芯片中的行缓存模块对数据处理器传输的视频源数据进行逐行读取,以提取视频源数据中的视频数据,再通过运动补偿显示插帧芯片中的图像分层处理模块提取出视频数据中的视频信息,然后对提取出的视频信息进行插帧处理,可以先对视频信息进行提取,然后再进行插帧处理,解决了现有技术中无法对分屏中的视频信息进行插帧处理的问题,提升视频的帧率。
在本申请的一个可能的实施方式中,视频数据包括视频信息和界面信息;图像分层处理模块将视频数据发送至运动补偿显示插帧模块,可以包括以下步骤。
图像分层处理模块将视频数据分为视频信息和界面信息;图像分层处理模块将视频信息发送至运动补偿显示插帧模块。
在本申请实施例中,图像分层处理模块将视频数据中的视频信息与UI信息(如弹幕等)分离,然后将视频信息发送至运动补偿显示插帧模块中,运动补偿显示插帧模块对视频信息进行插帧处理。通过图像分层处理模块将视频数据中的视频信息与UI信息分离,可以单独对视频帧率进行插帧,以使得画面进行高帧率显示。
在本申请的一个可能的实施方式中,显示屏包括视频区域和非视频区域;在数据处理器将视频源数据发送至运动补偿显示插帧芯片的行缓存模块之前,该插帧方法还可以包括:数据处理器对待显示于视频区域的视频源数据逐行进行第一标识,对待显示于非视频区域的视频源数据逐行进行第二标识。
也就是说,显示屏有可能既包括视频区域,例如某视频应用(APP),又包括非视频区域,例如某聊天APP,也即,一个显示界面分为至少两个区域,至少一个区域显示视频区域,至少一个区域显示非视频区域,此时,则需要将视频区域和非视频区域进行划分,以便后续提升视频区域的帧率。
具体地,可以通过对不同区域标记不同的标识,以区分待显示于视频区域和非视频区域的视频源数据,例如,对待显示于视频区域的视频源数据逐行进行第一标识,对待显示于非视频区域的视频源数据逐行进行第二标识。
示例性的,如图3所示,第一区域31为视频区域,此区域为某视频APP的播放界面,第二区域32为非视频区域,此区域为某聊天APP的聊天界面,第一区域31和第二区域32中间为显示分屏线33。将待显示于显示屏上的一帧画面总行数确定为Ln,在分屏线的左边的视频显示区域第一区域31的行数记作L1、L2、……、Lm,右边的视频显示区域第二区域32的行数记作Lm+1、Lm+2、……、Ln;其中,n和m为整数,n>m。将第一区域31的每一行均标记有m的标识,将第二区域32的每一行均标记有n的标识,后续运动补偿显示插帧芯片中的行缓存模块可以通过各自的标识区分待显示于视频区域的视频源数据和待显示于非视频区域的视频源数据,即将视频数据和非视频数据进行位置区分,以使得运动补偿显示插帧模块对视频数据进行插帧处理,提升视频区域的帧率。
在本申请的一个可能的实施方式中,视频源数据包括非视频数据;行缓存模块逐行读取视频源数据,可以包括:行缓存模块逐行读取视频源数据,并按照不同标识将视频源数据分为视频数据和非视频数据。
在本申请的一个可能的实施方式中,在数据处理器对待显示于视频区域的视频源数据逐行进行第一标识,对待显示于非视频区域的视频源数据逐行进行第二标识之后,该插帧方法还可以包括:对标识后的视频源数据进行压缩,得到压缩数据。
相应地,在行缓存模块逐行读取视频源数据之前,该插帧方法还可以包括:对压缩数据进行解压,得到标识后的视频源数据。
也就是说,在数据处理器中的数据可以先经过压缩后发送至运动补偿显示插帧芯片,相应地,运动补偿显示插帧芯片中也需要数据解压模块对压缩后的数据进行解压处理。通过压缩和解压处理可以减小数据的占用空间,使得数据的发送接收更快,提升数据处理速度。
可选地,如图5所示,本申请实施例还提供一种电子设备500,包括处理器501,存储器502,存储在存储器502上并可在所述处理器501上运行的程序或指令,该程序或指令被处理器501执行时实现上述插帧方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图6为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备600包括但不限于:射频单元601、网络模块602、音频输出单元603、输入单元604、传感器605、显示单元606、用户输入单元607、接口单元608、存储器609、以及处理器610等部件。
本领域技术人员可以理解,电子设备600还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器610逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图6中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器610,用于在数据处理器接收到待显示于显示屏的视频源数据的情况下,数据处理器将视频源数据发送至运动补偿显示插帧芯片的行缓存模块;行缓存模块逐行读取视频源数据,并将视频数据发送至图像分层处理模块,其中,视频源数据包括视频数据;图像分层处理模块将视频数据发送至运动补偿显示插帧模块;运动补偿显示插帧模块对视频数据进行插帧处理,并将插帧处理后的视频数据发送至显示屏进行显示。
在本申请实施例中,首先在数据处理器接收到待显示于显示屏的视频源数据的情况下,数据处理器将视频源数据发送至运动补偿显示插帧芯片的行缓存模块,然后行缓存模块逐行读取视频源数据,并将视频数据发送至图像分层处理模块,其中,视频源数据包括视频数据,图像分层处理模块将视频数据发送至运动补偿显示插帧模块,最后运动补偿显示插帧模块对视频数据进行插帧处理,并将插帧处理后的视频数据发送至显示屏进行显示。在本申请实施例中,通过运动补偿显示插帧芯片中的行缓存模块对数据处理器传输的视频源数据进行逐行读取,以提取视频源数据中的视频数据,再通过运动补偿显示插帧芯片中的图像分层处理模块提取出视频数据中的视频信息,然后对提取出的视频信息进行插帧处理,可以先对视频信息进行提取,然后再进行插帧处理,解决了现有技术中无法对分屏中的视频信息进行插帧处理的问题,提升视频的帧率。
应理解的是,本申请实施例中,输入单元604可以包括图形处理器(GraphicsProcessing Unit,GPU)6041和麦克风6042,图形处理器6041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元606可包括显示面板6061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板6061。用户输入单元607包括触控面板6071以及其他输入设备6072。触控面板6071,也称为触摸屏。触控面板6071可包括触摸检测装置和触摸控制器两个部分。其他输入设备6072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器609可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器610可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器610中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述插帧方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述插帧方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (12)
1.一种电子设备,其特征在于,包括:数据处理器、运动补偿显示插帧芯片和显示屏,所述数据处理器的输出端与所述运动补偿显示插帧芯片的输入端连接;
所述运动补偿显示插帧芯片包括行缓存模块、图像分层处理模块和运动补偿显示插帧模块,其中,所述行缓存模块的输入端与所述数据处理器的输出端连接,所述行缓存模块的输出端分别与所述图像分层处理模块的输入端和所述显示屏连接,所述图像分层处理模块的输出端与所述运动补偿显示插帧模块的输入端连接,所述运动补偿显示插帧模块的输出端与所述显示屏连接;
其中,在所述数据处理器接收到待显示于所述显示屏的视频源数据的情况下,所述数据处理器将所述视频源数据发送至所述运动补偿显示插帧芯片的行缓存模块,所述行缓存模块逐行读取所述视频源数据,并将视频数据发送至所述图像分层处理模块,所述图像分层处理模块将所述视频数据发送至所述运动补偿显示插帧模块,所述运动补偿显示插帧模块对所述视频数据进行插帧处理,并将插帧处理后的视频数据发送至所述显示屏,所述视频源数据包括视频数据。
2.根据权利要求1所述的电子设备,其特征在于,所述视频数据包括视频信息和界面信息;所述运动补偿显示插帧芯片还包括:第一帧缓冲模块、第二帧缓冲模块和第一图像合成模块;
所述第一帧缓冲模块的输入端与所述图像分层处理模块的输出端连接,用于存储所述图像分层处理模块输出的视频信息,所述第一帧缓冲模块的输出端与所述运动补偿显示插帧模块的输入端连接,所述运动补偿显示插帧模块的输出端与所述第一图像合成模块的输入端连接;
所述第二帧缓冲模块的输入端与所述图像分层处理模块的输出端连接,用于存储所述图像分层处理模块输出的界面信息,所述第二帧缓冲模块的输出端与所述第一图像合成模块的输入端连接;
所述第一图像合成模块的输出端与所述显示屏连接。
3.根据权利要求1所述的电子设备,其特征在于,所述显示屏包括视频区域和非视频区域;所述数据处理器包括标识模块,用于对待显示于所述视频区域和所述非视频区域的所述视频源数据作出不同的标识。
4.根据权利要求3所述的电子设备,其特征在于,所述视频源数据包括非视频数据,所述行缓存模块逐行读取所述视频源数据,并将所述视频源数据分为视频数据和非视频数据;所述运动补偿显示插帧芯片还包括:第三帧缓冲模块和第二图像合成模块;
所述第三帧缓冲模块的输入端与所述行缓存模块的输出端连接,用于存储所述行缓存模块输出的非视频数据,所述第三帧缓冲模块的输出端与所述第二图像合成模块的输入端连接;
第一图像合成模块的输出端与所述第二图像合成模块的输入端连接;
所述第二图像合成模块的输出端与所述显示屏连接。
5.根据权利要求3所述的电子设备,其特征在于,所述视频区域包括多个应用视频区域,所述运动补偿显示插帧芯片包括多个图像分层处理模块和多个运动补偿显示插帧模块,其中,所述应用视频区域的个数与所述图像分层处理模块的个数和所述运动补偿显示插帧模块的个数均相同。
6.根据权利要求1所述的电子设备,其特征在于,所述数据处理器包括数据压缩模块,所述运动补偿显示插帧芯片包括数据解压模块;
所述数据压缩模块的输入端用于接收所述待显示于所述显示屏的视频源数据,并压缩,所述数据压缩模块的输出端与所述数据解压模块的输入端连接,所述数据解压模块的输出端与所述行缓存模块连接。
7.一种插帧方法,应用于如权利要求1-6任一项所述的电子设备,其特征在于,所述方法包括:
在数据处理器接收到待显示于显示屏的视频源数据的情况下,所述数据处理器将所述视频源数据发送至运动补偿显示插帧芯片的行缓存模块;
所述行缓存模块逐行读取所述视频源数据,并将视频数据发送至图像分层处理模块,其中,所述视频源数据包括视频数据;
所述图像分层处理模块将所述视频数据发送至运动补偿显示插帧模块;
所述运动补偿显示插帧模块对所述视频数据进行插帧处理,并将插帧处理后的视频数据发送至所述显示屏进行显示。
8.根据权利要求7所述的插帧方法,其特征在于,所述视频数据包括视频信息和界面信息;
所述图像分层处理模块将所述视频数据发送至运动补偿显示插帧模块,包括:
所述图像分层处理模块将所述视频数据分为视频信息和界面信息;
所述图像分层处理模块将所述视频信息发送至所述运动补偿显示插帧模块。
9.根据权利要求7所述的插帧方法,其特征在于,所述显示屏包括视频区域和非视频区域;
在所述数据处理器将所述视频源数据发送至运动补偿显示插帧芯片的行缓存模块之前,所述方法还包括:
所述数据处理器对待显示于所述视频区域的视频源数据逐行进行第一标识,对待显示于所述非视频区域的视频源数据逐行进行第二标识。
10.根据权利要求9所述的插帧方法,其特征在于,所述视频源数据包括非视频数据;所述行缓存模块逐行读取所述视频源数据,包括:
所述行缓存模块逐行读取所述视频源数据,并按照不同标识将所述视频源数据分为视频数据和非视频数据。
11.根据权利要求9所述的插帧方法,其特征在于,在所述数据处理器对待显示于所述视频区域的视频源数据逐行进行第一标识,对待显示于所述非视频区域的视频源数据逐行进行第二标识之后,所述方法还包括:
对标识后的视频源数据进行压缩,得到压缩数据;
在所述行缓存模块逐行读取所述视频源数据之前,所述方法还包括:
对所述压缩数据进行解压,得到标识后的视频源数据。
12.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求7-11任一项所述的插帧方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111051181.7A CN113852776B (zh) | 2021-09-08 | 2021-09-08 | 插帧方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111051181.7A CN113852776B (zh) | 2021-09-08 | 2021-09-08 | 插帧方法及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113852776A true CN113852776A (zh) | 2021-12-28 |
CN113852776B CN113852776B (zh) | 2024-06-04 |
Family
ID=78973528
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111051181.7A Active CN113852776B (zh) | 2021-09-08 | 2021-09-08 | 插帧方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113852776B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115048173A (zh) * | 2022-06-17 | 2022-09-13 | Oppo广东移动通信有限公司 | 插帧方法、装置、存储介质及电子设备 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120170654A1 (en) * | 2011-01-03 | 2012-07-05 | Apple Inc. | Video coding system using implied reference frames |
WO2014150240A1 (en) * | 2013-03-20 | 2014-09-25 | Google Inc. | Interpolated video tagging |
US20180205909A1 (en) * | 2017-01-16 | 2018-07-19 | Gopro, Inc. | Apparatus and methods for the selection of one or more frame interpolation techniques |
CN111327959A (zh) * | 2020-03-05 | 2020-06-23 | Oppo广东移动通信有限公司 | 视频插帧方法及相关装置 |
CN111355861A (zh) * | 2020-05-25 | 2020-06-30 | 深圳市康帕斯科技发展有限公司 | 一种多屏视频同步拼接装置和方法 |
CN112004086A (zh) * | 2020-08-21 | 2020-11-27 | Oppo广东移动通信有限公司 | 视频数据处理方法及装置 |
CN112422873A (zh) * | 2020-11-30 | 2021-02-26 | Oppo(重庆)智能科技有限公司 | 插帧方法、装置、电子设备及存储介质 |
CN113014936A (zh) * | 2021-02-24 | 2021-06-22 | 北京百度网讯科技有限公司 | 视频插帧方法、装置、设备以及存储介质 |
CN113141537A (zh) * | 2021-04-02 | 2021-07-20 | Oppo广东移动通信有限公司 | 视频插帧方法、装置、存储介质以及终端 |
-
2021
- 2021-09-08 CN CN202111051181.7A patent/CN113852776B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120170654A1 (en) * | 2011-01-03 | 2012-07-05 | Apple Inc. | Video coding system using implied reference frames |
WO2014150240A1 (en) * | 2013-03-20 | 2014-09-25 | Google Inc. | Interpolated video tagging |
US20180205909A1 (en) * | 2017-01-16 | 2018-07-19 | Gopro, Inc. | Apparatus and methods for the selection of one or more frame interpolation techniques |
CN111327959A (zh) * | 2020-03-05 | 2020-06-23 | Oppo广东移动通信有限公司 | 视频插帧方法及相关装置 |
CN111355861A (zh) * | 2020-05-25 | 2020-06-30 | 深圳市康帕斯科技发展有限公司 | 一种多屏视频同步拼接装置和方法 |
CN112004086A (zh) * | 2020-08-21 | 2020-11-27 | Oppo广东移动通信有限公司 | 视频数据处理方法及装置 |
CN112422873A (zh) * | 2020-11-30 | 2021-02-26 | Oppo(重庆)智能科技有限公司 | 插帧方法、装置、电子设备及存储介质 |
CN113014936A (zh) * | 2021-02-24 | 2021-06-22 | 北京百度网讯科技有限公司 | 视频插帧方法、装置、设备以及存储介质 |
CN113141537A (zh) * | 2021-04-02 | 2021-07-20 | Oppo广东移动通信有限公司 | 视频插帧方法、装置、存储介质以及终端 |
Non-Patent Citations (1)
Title |
---|
冯俊威;蒋志翔;: "面向屏幕拼接的数字视频插值算法及FPGA实现", 计算机工程与设计, no. 22, 28 November 2009 (2009-11-28) * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115048173A (zh) * | 2022-06-17 | 2022-09-13 | Oppo广东移动通信有限公司 | 插帧方法、装置、存储介质及电子设备 |
CN115048173B (zh) * | 2022-06-17 | 2024-09-13 | Oppo广东移动通信有限公司 | 插帧方法、装置、存储介质及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN113852776B (zh) | 2024-06-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220201205A1 (en) | Video stream processing method, device, terminal device, and computer-readable storage medium | |
CN112306607B (zh) | 截图方法和装置、电子设备和可读存储介质 | |
CN105611215A (zh) | 一种视频通话方法及装置 | |
CN112363785A (zh) | 一种终端显示方法、终端及计算机可读存储介质 | |
CN113835656A (zh) | 显示方法、装置及电子设备 | |
CN108989869B (zh) | 视频画面播放方法、装置、设备及计算机可读存储介质 | |
CN113015007B (zh) | 视频插帧方法、装置及电子设备 | |
CN112947810B (zh) | 界面显示方法、装置和电子设备 | |
CN113126862B (zh) | 截屏方法、装置、电子设备以及可读存储介质 | |
CN105554430A (zh) | 一种视频通话方法、系统及装置 | |
CN113835657A (zh) | 显示方法及电子设备 | |
CN113285866A (zh) | 信息发送方法、装置和电子设备 | |
CN114339072A (zh) | 图像处理电路、方法和电子设备 | |
CN113014801A (zh) | 录像方法、装置、电子设备及介质 | |
CN113852776B (zh) | 插帧方法及电子设备 | |
CN113721876A (zh) | 投屏处理方法及相关设备 | |
CN112199149A (zh) | 界面渲染方法、装置及电子设备 | |
CN115866314B (zh) | 视频播放方法及其装置 | |
CN113891158B (zh) | 视频播放方法、装置、系统、电子设备和存储介质 | |
CN113518143B (zh) | 界面输入源切换方法、装置和电子设备、存储介质 | |
CN113364915B (zh) | 信息显示方法、装置和电子设备 | |
CN115718581A (zh) | 信息显示方法、装置、电子设备和存储介质 | |
CN114285956A (zh) | 视频分享电路、方法、装置及电子设备 | |
CN111897441B (zh) | 表情添加方法、装置及电子设备 | |
CN114339410A (zh) | 插帧方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |