CN111541940A - 显示设备的运动补偿方法、装置、电视机及存储介质 - Google Patents
显示设备的运动补偿方法、装置、电视机及存储介质 Download PDFInfo
- Publication number
- CN111541940A CN111541940A CN202010371514.3A CN202010371514A CN111541940A CN 111541940 A CN111541940 A CN 111541940A CN 202010371514 A CN202010371514 A CN 202010371514A CN 111541940 A CN111541940 A CN 111541940A
- Authority
- CN
- China
- Prior art keywords
- code stream
- motion compensation
- frame rate
- stream information
- display device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/426—Internal components of the client ; Characteristics thereof
- H04N21/42607—Internal components of the client ; Characteristics thereof for processing the incoming bitstream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
Abstract
本发明公开了一种显示设备的运动补偿方法,所述方法包括以下步骤:获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息;从所述码流信息中提取关键帧;根据所述关键帧运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。本发明还公开了一种显示设备的运动补偿装置、电视机及计算机可读存储介质。通过运动补偿芯片直接对关键帧进行运动补偿,避免序列异常时运动补偿芯片无法正常进行帧率转换而导致显示画面运动不流畅,使得无论码流序列正常与否,运动补偿芯片都能正常进行帧率转换,从而保证显示设备能够流畅的进行片源播放。
Description
技术领域
本发明涉及视频处理及显示技术领域,尤其涉及一种显示设备的运动补偿方法、显示设备的运动补偿装置、电视机及计算机可读存储介质。
背景技术
现如今,随着人们生活水平的提高,人们对于显示设备的性能要求页越来越高,尤其是对显示设备在播放视频时的流畅度提出了更高的要求,使得运动补偿已经是中高端显示设备必不可少的一项性能评价指标。
目前,针对于显示设备所播放视频的显示画面,运动补偿的实现方式通常包括两种,一种是通过显示设备的主控芯片SOC直接做运动补偿,另一种是应用显示设备的FRC芯片去完成运动补偿。若通过应用FRC芯片的方式实现运动补偿,则在前端的主控芯片SOC输送给FRC芯片码流序列过于复杂时,会出现无法正常进行帧率转换的情况,从而导致所播放视频的显示画面运动不流畅的现象。
上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。
发明内容
本发明主要目的在于提供一种显示设备的运动补偿方法、运动补偿装置及计算机可读存储介质,旨在解决现有技术中运动补偿芯片无法对复杂序列进行帧率转换导致显示设备视频播放不流畅的问题。
为实现上述目的,本发明提供一种显示设备的运动补偿方法,所述方法包括以下步骤:
获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息;
从所述码流信息中提取关键帧;
根据所述关键帧运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。
可选地,所述方法,还包括:
根据所述码流信息对应的码流序列确定所述码流序列的序列类型;
若所述码流信息对应的码流序列为第一类序列,则执行从所述码流信息中提取关键帧的步骤;
若所述码流信息对应的码流序列为第二类序列,则运用运动补偿芯片对所述码流信息中的每一帧执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。
可选地,所述根据所述码流信息对应的码流序列确定所述码流序列的序列类型的步骤包括:
判断所述码流信息对应的码流序列是否与运动补偿芯片预先存储的码流序列相匹配;
若不匹配,则判定码流信息对应的码流序列为第一类序列;
若匹配,则判定码流信息对应的码流序列为第二类序列。
可选地,所述方法,还包括:
确定所述码流信息对应的帧率转换次数;
判断所述帧率转换次数是否超过预设次数;
若超过,则执行从所述码流信息中提取关键帧的步骤。
可选地,所述获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息的步骤之前,包括:
判断显示设备的画面输入信号的帧率是否小于第一帧率;
若小于,则将所述画面输入信号的帧率转换至所述第一帧率,并将转换后的画面信号的码流信息传输给主芯片。
可选地,所述将转换后的画面信号的码流信息传输给主芯片,以获取所述主芯片传输的码流信息的步骤之后,包括:
判断显示设备进行画面输出时对应的目标帧率是否小于第二帧率;
若小于或等于,则运用主芯片将接收到的画面信号的帧率转换至目标帧率,以对所述显示设备的显示画面进行运动补偿。
可选地,所述判断显示设备进行画面输出时对应的目标帧率是否小于第二帧率的步骤之后,包括:
若显示设备进行画面输出时对应的目标帧率大于第二帧率,则运用运动补偿芯片将所获取自主芯片的画面信号转换至所述目标帧率,以对所述显示设备的显示画面进行运动补偿。
此外,为实现上述目的,本发明还提供一种显示设备的运动补偿装置,所述显示设备的运动补偿装置包括存储器、处理器及存储在所述处理器上并可在处理器上运行的显示设备的运动补偿程序,所述处理器执行所述显示设备的运动补偿程序时实现如上所述显示设备的运动补偿方法的步骤。
此外,为实现上述目的,本发明还提供一种电视机,所述电视机包括存储器、处理器及存储在所述处理器上并可在处理器上运行的显示设备的运动补偿程序,所述处理器执行所述显示设备的运动补偿程序时实现如上所述显示设备的运动补偿方法的步骤。
此外,为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有显示设备的运动补偿程序,所述显示设备的运动补偿程序被处理器执行时实现如上所述的显示设备的运动补偿方法的步骤。
本发明实施例中,通过获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息,然后从所述码流信息中提取关键帧,根据所述关键帧运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿,如此,根据提取的关键帧直接运用运动补偿芯片进行运动补偿,避免运动补偿芯片接收到异常的码流序列时无法正常进行帧率转换,从而保证无论所接收到的码流序列是否正常,运动补偿芯片都能正常进行运动补偿,使得显示设备能够基于正常的运动补偿流畅的进行片源播放。
附图说明
图1为本发明实施例方案涉及的硬件运行环境的显示设备的运动补偿装置结构示意图;
图2是本发明显示设备的运动补偿方法第一实施例的流程示意图;
图3为本发明显示设备的运动补偿方法第二实施例的流程示意图;
图4为本发明显示设备的运动补偿方法第三实施例的流程示意图;
图5为本发明显示设备的运动补偿方法第四实施例的流程示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明的主要解决方案是:获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息;从所述码流信息中提取关键帧;根据所述关键帧运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。
目前,显示设备的画面运动补偿方法主要有两种:一种是通过显示设备的主控芯片SOC直接做运动补偿,另一种是应用显示设备的FRC芯片去完成运动补偿。然而,虽然通过FRC芯片能够进行更高帧率的转换,但是在前端主控芯片SOC输送给FRC芯片的码流序列过于复杂时,通过FRC芯片进行运动补偿会出现无法正常进行帧率转换的情况,从而导致所播放视频的显示画面运动不流畅的现象。因而,本发明提出一种显示设备的运动补偿方法、运动补偿装置及计算机可读存储介质,通过获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息,然后从所述码流信息中提取关键帧,再根据所述关键帧直接运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿,避免主芯片输送的码流序列复杂时运动补偿芯片无法正常进行帧率转换,从而保证无论码流序列异常与否,运动补偿芯片都能对所接收的码流进行运动补偿,使得显示设备能够流畅的进行片源播放。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的显示设备的运动补偿装置结构示意图。
如图1所示,该显示设备的运动补偿装置可以包括:通信总线1002,处理器1001,例如CPU,用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地,显示设备的运动补偿装置还可以包括摄像头、RF(Radio Frequency,射频)电路,传感器、音频电路及WiFi模块等等。其中,传感器比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示屏的亮度,接近传感器可在移动终端移动到耳边时,关闭显示屏和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;当然,移动终端还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器、温度传感器等其他传感器,在此不再赘述。
本领域技术人员可以理解,图1中示出的显示设备的运动补偿装置结构并不构成对显示设备的运动补偿装置的限定,可以包括比图示更多或更少的部件,或组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及显示设备的运动补偿程序。
在图1所示的显示设备的运动补偿装置中,网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;用户接口1003主要用于连接客户端(用户端),与客户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的显示设备的运动补偿装置程序,并执行以下操作:
获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息;
从所述码流信息中提取关键帧;
根据所述关键帧运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。
可选地,处理器1001可以调用存储器1005中存储的显示设备的运动补偿程序,还执行以下操作:
根据所述码流信息对应的码流序列确定所述码流序列的序列类型;
若所述码流信息对应的码流序列为第一类序列,则执行从所述码流信息中提取关键帧的步骤;
若所述码流信息对应的码流序列为第二类序列,则运用运动补偿芯片对所述码流信息中的每一帧执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。
可选地,处理器1001可以调用存储器1005中存储的显示设备的运动补偿程序,还执行以下操作:
判断所述码流信息对应的码流序列是否与运动补偿芯片预先存储的码流序列相匹配;
若不匹配,则判定码流信息对应的码流序列为第一类序列;
若匹配,则判定码流信息对应的码流序列为第二类序列。
可选地,处理器1001调用存储器1005中存储的显示设备的运动补偿程序,并执行以下操作:
确定所述码流信息对应的帧率转换次数;
判断所述帧率转换次数是否超过预设次数;
若超过,则执行从所述码流信息中提取关键帧的步骤。
可选地,所述获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息的步骤之前,处理器1001可以调用存储器1005中存储的显示设备的运动补偿程序,还执行以下操作:
判断显示设备的画面输入信号的帧率是否小于第一帧率;
若小于,则将所述画面输入信号的帧率转换至所述第一帧率,并将转换后的画面信号的码流信息传输给主芯片。
可选地,所述将转换后的画面信号的码流信息传输给主芯片,以获取所述主芯片传输的码流信息的步骤之后,处理器1001可以调用存储器1005中存储的显示设备的运动补偿程序,还执行以下操作:
判断显示设备进行画面输出时对应的目标帧率是否小于第二帧率;
若小于或等于,则运用主芯片将接收到的画面信号的帧率转换至目标帧率,以对所述显示设备的显示画面进行运动补偿。
可选地,所述判断显示设备进行画面输出时对应的目标帧率是否小于第二帧率的步骤之后,处理器1001可以调用存储器1005中存储的显示设备的运动补偿程序,还执行以下操作:
若显示设备进行画面输出时对应的目标帧率大于第二帧率,则运用运动补偿芯片将所获取自主芯片的画面信号转换至所述目标帧率,以对所述显示设备的显示画面进行运动补偿。
参照图2,图2为本发明显示设备的运动补偿方法的第一实施例流程图,本实施例中,所述显示设备的运动补偿方法包括以下步骤:
步骤S10:获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息;
运动补偿是一种描述编码相邻的视频帧差别的方法,具体用于描述前面一帧的每个像素块怎样移动到当前帧中的某个位置去,常被用于视频压缩/视频编解码器以减少视频序列中的空域冗余。为了提高显示设备的显示画面运动流畅度,需要对显示设备的显示画面进行运动补偿。目前,实现运动补偿的方式有两种:一种是直接用机器(显示设备)的主芯片SOC(System on Chip,片上系统)进行运动补偿,另一种是借助FRC(Frame RateConversion,帧率转换)芯片完成运动补偿。然而,现有的SOC芯片只能以最高60Hz的帧率解码4K分辨率的视频,对于一些需要实现高帧率(如,120Hz)转换的显示设备或在用户要求较高或是应用于特定场景时,还需借助FRC芯片进行运动补偿,以达到更好的补偿效果。其中,所述FRC芯片主要是利用帧率转换技术,对相邻的两幅画面的信号进行运算,然后由处理器生成介于两幅图之间的过渡画,将前后两幅画面顺畅的连接起来,以达到更加流畅的视觉效果。因而,本实施例中,为了提高显示设备的视频播放流畅度,所述显示设备至少应该包括主芯片与运动补偿芯片,所述主芯片尤指SOC芯片,所述运动补偿芯片尤指FRC芯片。并且所述显示设备可包括电视机、电脑及手机等具有显示功能的终端设备。
在主芯片接收到播放器传输的画面信号后,会对所述画面信号的码流信息进行识别并进行帧率转换,然后将转换后的码流信息传输给运动补偿芯片,以从所述码流信息中提取关键帧。其中所述码流信息至少应该包含码流序列,所述码流序列可以这样理解:如24Hz的码流,以每秒24帧的帧率播放时,每帧都不一样,此时的码流序列为10101010......,若将24Hz转换为48Hz,则需要对24帧进行复制,码流序列会变成11001100……,即,在当前帧与前一帧相同时用1来表示,不同时用0来表示,为了方便描述,通常会将1110011100......对应的码流序列表示为32,将11001100......对应的码流序列表示为22。在获取码流信息后,由于所述码流信息对应的码流序列存在两种情况:一种是FRC芯片能够正常识别的码流序列,一种是FRC芯片无法正常识别的码流序列。因而,为了提高运动补偿效果,使得不同情况下FRC芯片都能有较好的补偿效果,需要针对不同的情况需要采取不同的处理手段。
步骤S20:从所述码流信息中提取关键帧;
在所述码流信息对应的码流序列FRC芯片能够正常识别时,可以直接运用FRC芯片对所述码流信息中的每一帧视频帧进行帧率转换,以完成对显示设备输入片源的运动补偿。当然,在其他实施例中,为了提升处理效率,也可以是只提取关键帧进行运动补偿,所述关键帧指的是开始转换前最原始帧率对应的视频帧,所述关键帧对应的帧率通常为24Hz或30Hz;若所述码流信息对应的码流序列FRC芯片不能正常识别,则由于转换前最原始帧率对应的码流序列通常都为FRC芯片可以识别的序列,因而,需要从所述码流信息中提取关键帧,直接对提取的关键帧进行运动补偿,使得无论所述码流信息对应的码流序列是否为正常序列,FRC芯片都能进行运动补偿,从而提高显示设备片源播放时的流畅度。提取关键帧的具体步骤可以是:利用芯片内部的缓冲寄存器,存储并分析接收到的码流信息,在缓冲寄存器中码流信息一帧一帧的分别储存,然后利用芯片对缓冲寄存器中收到的一帧帧的信息进行对比分析,从而分析得到哪些是关键帧。具体的分析过程可以是根据码流信息对应的帧信息将当前帧与前一帧的码流信息进行对比,判断是否存在差异,若当前帧与前一帧的码流信息一致,则将所述前一帧记为关键帧,若当前帧与前一帧的码流信息不一致,则将当前帧记为差异帧。
步骤S30:根据所述关键帧运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。
由于运动补偿芯片是通过对相邻的两幅画面的信号进行运算生成介于两幅图之间的过渡画面,利用该过渡画面将两幅画面顺畅的连接起来实现运动补偿,因而在提取关键帧后,直接运用运动补偿芯片在所获取的关键帧之间生成过渡画面,来实现帧率转换。这里对帧率转换所采用的具体算法不做限定,可根据具体的应用场景进行选取。以块匹配法为例,块匹配法是图像序列稳定中最常用的一种算法,不需要对图像序列进行任何预处理,只在原始图像数据上进行运算,因此保留了图像序列中每一帧图像的全部信息,其确定预测快的原理如下:若利用快匹配法对所提取的关键帧进行帧率转换,则需要将所提取的每一帧图像分割成一系列子块图像(矩形块),然后计算当前帧中每一子块与相邻帧中的各子块的误差函数,把具有最小误差的相邻帧的对应子块作为当前块的预测块,并把此两块的相对位移定义为位移矢量(运动矢量)。基于所确定的预测块就可以将不同关键帧之间通过相应的预测块连接起来,从而使得显示设备的显示画面能够以更高的帧率更加流畅的进行片源播放。
本实施例通过获取显示设备主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息,然后,从所述码流信息中提取关键帧,再根据所述关键帧运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿,避免运动补偿芯片无法正常识别主芯片传输的码流序列导致显示设备的视频播放不流畅,从而保证无论所接收的码流序列异常与否,运动补偿芯片都能正常进行帧率转换,使得显示设备能够基于正常的运动补偿流畅的进行视频播放。
参照图3,图3为本发明显示设备的运动补偿方法的第二实施例流程图,本实施例中,所述显示设备的运动补偿方法包括以下步骤:
步骤S11:获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息;
步骤S12:根据所述码流信息对应的码流序列确定所述码流序列的序列类型;
步骤S13:若所述码流信息对应的码流序列为第一类序列,则执行从所述码流信息中提取关键帧的步骤;
步骤S14:若所述码流信息对应的码流序列为第二类序列,则运用运动补偿芯片对所述码流信息中的每一帧执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。
在获取所述主芯片传输的码流信息后,由于所述码流信息对应的码流序列可能FRC芯片能够识别,也可能FRC芯片不能识别,为了保证不同情况下FRC芯片都能有较好的补偿效果,在运用运动补偿芯片进行运动补偿之前,需要确定所获取的码流信息对应的码流序列的序列类型,以针对不同的序列类型采取不同的补偿方案。具体可以是先根据所述码流信息对应的码流序列确定所述码流序列的序列类型,所述序列类型至少可包括FRC芯片难以识别的第一序列类型,以及FRC芯片能够识别的第二序列类型。基于所确定的序列类型,若所述码流信息对应的码流序列为FRC芯片难以识别的第一类序列,则从所述码流信息中提取关键帧,根据所述关键帧运用运动补偿芯片执行帧率转换操作。若所述码流信息对应的码流序列为FRC芯片能够识别的第二类序列,则运用运动补偿芯片对所述码流信息中的每一帧执行帧率转换操作。
由于在生产时已经预先将FRC芯片能够识别的码流序列写入FRC芯片,因而在一具体的实施例中,将已写入FRC芯片的码流序列作为FRC能够识别的正常码流序列,只需要将所获取的主芯片传输的码流信息对应的码流序列与预先写入FRC芯片的码流序列进行对比便可以确定所获取的码流信息对应的码流序列是否为FRC能够识别的码流序列,从而确定所获取的码流信息对应的码流序列的序列类型。具体可以是先判断所获取的码流信息对应的码流序列是否与运动补偿芯片预先存储的码流序列相匹配,若不匹配,则判定码流信息对应的码流序列为第一类序列,若匹配,则判定码流信息对应的码流序列为第二类序列,从而给予不同类型的码流序列,运用不同的运动补偿方案进行帧率转换,以更加合理的提高显示设备的视频播放流畅度。
本实施例通过获取所述主芯片传输的码流信息,然后根据所述码流信息对应的码流序列确定所述码流序列的序列类型,在所述码流信息对应的码流序列为第一类序列时,执行从所述码流信息中提取关键帧的步骤,根据所述关键帧运用运动补偿芯片执行帧率转换操作,而在所述码流信息对应的码流序列为第二类序列时,基于所述码流信息中的每一帧运用运动补偿芯片执行帧率转换操作,从而针对不同的序列类型,采用不同的帧率转换方案进行运动补偿,以更加合理有效的提高视频播放的流畅度。
参照图4,图4为本发明显示设备的运动补偿方法的第三实施例流程图,本实施例中,所述显示设备的运动补偿方法包括以下步骤:
步骤S21:获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息;
步骤S31:确定所述码流信息对应的帧率转换次数;
步骤S41:判断所述帧率转换次数是否超过预设次数;
步骤S51:若超过,则执行从所述码流信息中提取关键帧的步骤;
步骤S61:根据所述关键帧运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。
通常情况下,以W81P芯片的信息传输为例,若电视机连接播放器输入HDMI(HighDefinition Multimedia Interface,高清多媒体接口)信号,则在码流原始帧率为24Hz/30Hz时,播放器会设置以50Hz的帧率输出HDMI信号给显示设备,此时显示设备的主芯片会将接收到的码流转为60Hz输出,然后FRC芯片在接收到码流后会将接收到的码流转为120Hz输出。在上述过程中,播放器先将片源做了一次pull down(可理解为帧率转换)将24Hz/30Hz片源转换至50Hz,然后由于前端的输出信号为HDMI信号,而SOC芯片由于功能限制只能输出60Hz的帧率,因而,经过前端SOC芯片后又pull down一次,将帧率从50Hz转至60Hz,如此在经过两次pull down后,传输给FRC芯片的码流序列一般会没有规律或者是即使有规律也可能会很复杂,而此时FRC芯片可能不支持这种序列,就会一直抖动,导致视频播放画面模糊或卡顿。
因而,本实施例中,将码流信息对应的帧率转换次数作为判断是否需要提取关键帧,以基于关键帧进行帧率转换的依据。具体地,在获取主芯片传输的码流信息后,先基于所述码流信息确定码流源码所经历的帧率转换次数,然后判断所确定的帧率转换次数是否超过预设次数,所述预设次数可以基于不同的显示设备及不同的播放器等预先进行设定,所设定的预设次数可以是与显示设备在不利用运动补偿芯片FRC时所能转换的最高帧率相关联,即转换至所述最高频率所需对原始码流进行帧率转换的转换次数;也可以是以帧率转后码流序列的复杂程序或是否规律为依据进行设定。在所确定的帧率转换次数超过预设次数(包括等于预设次数)时,说明所获取的主芯片传输的码流信息对应的码流序列FRC芯片不能正常识别以进行帧率转换,此时,可以直接从所获取的码流信息中提取原始码流作为关键帧,根据所述关键帧运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。如果所确定的帧率转换次数小于预设次数时,说明所获取的主芯片传输的码流信息对应的码流序列FRC芯片能够正常识别以进行帧率转换,此时无需提取关键帧,可以直接通过FRC芯片对所获取的码流信息进行帧率转换,达到运动补偿的目的。
本实施例通过将码流信息对应的帧率转换次数作为是否需要提取关键帧判断依据,在获取主芯片传输的码流信息后,确定所述码流信息对应的帧率转换次数,并判断所述帧率转换次数是否超过预设次数,若所述帧率转换次数超过预设次数,则执行从所述码流信息中提取关键帧的步骤,然后根据所述关键帧运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。通过判断原始码流的帧率转换次数是否超过预设次数,从而在超过预设次数时,码流序列异常(复杂或无规律)的情况下,直接提取关键帧进行帧率转换;而在原始码流的帧率转换次数小于预设次数,码流序列正常的情况下,直接对所获取的码流信息进行解码,不仅能够保证无论码流序列正常与否,运动补偿芯片都能正常进行帧率转换,而且能够针对不同的序列情况作出不同的补偿方案,提高了运动补偿的效果,从而提高了显示设备播放视频信号的流畅度。
参照图5,图5为本发明显示设备的运动补偿方法的第四实施例流程图,本实施例中,所述显示设备的运动补偿方法包括以下步骤:
步骤S31:判断显示设备的画面输入信号的帧率是否小于第一帧率;
步骤S32:若小于或等于,则基于播放器所设置的帧率将所述画面输入信号的帧率转换至所述第一帧率,并将转换后的画面信号的码流信息传输给主芯片;
步骤S33:获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息;
步骤S34:从所述码流信息中提取关键帧;
步骤S35:根据所述关键帧运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。
本实施例中,以电视机为例,所述电视机设有HDMI接口发送未压缩的音频及视频信号。通常电视机会将片源对应的原始码流以播放器所设置的帧率,通过HDMI接口输出HDMI信号给电视机的处理系统,然后由电视机的主控芯片SOC进行帧率转换,若电视机包含运动补偿芯片FRC,则在需要转换至更高帧率进行播放时,还需运用FRC芯片进一步进行帧率转换,以提高视频播放的流畅度。通常情况下,片源帧率与HDMI接口输出的帧率及SOC芯片处理后的帧率及FRC芯片处理后的帧率都会有所不同。因而,在系统获取所述主芯片传输的码流信息之前,先判断显示设备的画面输入信号的帧率是否小于第一帧率,所述第一帧率尤指播放器所支持设置的最高帧率,所述显示设备的画面输入信号的帧率尤指片源对应的原始码流帧率。若显示设备的画面输入信号的帧率大于或等于第一帧率,则直接通过播放器进行片源播放而无需进行帧率转换,若小于第一帧率,则需要将显示设备的画面输入信息的帧率转换至第一帧率,再通过HDMI接口将转换至第一帧率后的视频信号传输至电视机的处理系统;然后在处理系统接收到转换至第一帧率后的视频信号后,判断显示设备进行画面输出时对应的目标帧率是否小于第二帧率,所述目标帧率即片源在显示设备上进行播放所需帧率;所述第二帧率则指的是SOC芯片所支持转换的最高帧率。在所述目标帧率小于第二帧率时,说明利用SOC芯片就可以接收到的画面信号转换至目标帧率,此时,可以直接运用SOC芯片进行帧率转换,而无需借助FRC芯片。然而,若所述目标帧率大于第二帧率,则因受到SOC芯片所支持转换的帧率范围限制,此时,仅仅通过SOC芯片不足以将接收到的画面信号转换至目标帧率,还需借助FRC芯片,在SOC芯片将所接收到画面信号转换至SOC芯片所支持转换的最高帧率(通常为60Hz)后,经由系统将转换后的画面信号再传输给FRC芯片,由FRC芯片将所接收到的画面信号转换至所述目标帧率。
本实施例通过判断显示设备的画面输入信号的帧率是否小于第一帧率,在若小于或等于第一帧率时,基于播放器所设置的帧率将所述画面输入信号的帧率转换至所述第一帧率,并将转换后的画面信号的码流信息传输给主芯片,然后获取所述主芯片传输的码流信息,从所述码流信息中提取关键帧,根据所述关键帧运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿,通过对显示设备的画面输入信号的帧率作出判断,针对不同的输入片源采用不同的帧率转换方案,从而更加合理的利用显示设备的处理资源,降低资源占用率。
此外,本发明实施例还提供一种显示设备的运动补偿装置,所述显示设备的运动补偿装置包括存储器、处理器及存储在所述处理器上并可在处理器上运行的显示设备的运动补偿程序,所述处理器执行所述显示设备的运动补偿程序时实现如上所述显示设备的运动补偿方法的步骤。
此外,本发明实施例还提供一种电视机,所述电视机包括存储器、处理器及存储在所述处理器上并可在处理器上运行的显示设备的运动补偿程序,所述处理器执行所述显示设备的运动补偿程序时实现如上所述显示设备的运动补偿方法的步骤。
此外,本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有显示设备的运动补偿程序,所述显示设备的运动补偿程序被处理器执行时实现如上所述的显示设备的运动补偿方法的步骤。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,电视,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种显示设备的运动补偿方法,其特征在于,所述显示设备包括主芯片和运动补偿芯片,所述显示设备的运动补偿方法包括以下步骤:
获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息;
从所述码流信息中提取关键帧;
根据所述关键帧运用运动补偿芯片执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。
2.如权利要求1所述的显示设备的运动补偿方法,其特征在于,所述方法,还包括:
根据所述码流信息对应的码流序列确定所述码流序列的序列类型;
若所述码流信息对应的码流序列为第一类序列,则执行从所述码流信息中提取关键帧的步骤;
若所述码流信息对应的码流序列为第二类序列,则运用运动补偿芯片对所述码流信息中的每一帧执行帧率转换操作,以对所述显示设备的显示画面进行运动补偿。
3.如权利要求2所述的显示设备的运动补偿方法,其特征在于,所述根据所述码流信息对应的码流序列确定所述码流序列的序列类型的步骤包括:
判断所述码流信息对应的码流序列是否与运动补偿芯片预先存储的码流序列相匹配;
若不匹配,则判定码流信息对应的码流序列为第一类序列;
若匹配,则判定码流信息对应的码流序列为第二类序列。
4.如权利要求1所述的显示设备的运动补偿方法,其特征在于,所述方法,还包括:
确定所述码流信息对应的帧率转换次数;
判断所述帧率转换次数是否超过预设次数;
若超过,则执行从所述码流信息中提取关键帧的步骤。
5.如权利要求1所述的显示设备的运动补偿方法,其特征在于,所述获取所述主芯片传输的码流信息,所述码流信息为所述主芯片接收到的画面信号对应的码流信息的步骤之前,包括:
判断显示设备的画面输入信号的帧率是否小于第一帧率;
若小于,则将所述画面输入信号的帧率转换至所述第一帧率,并将转换后的画面信号的码流信息传输给主芯片。
6.如权利要求5所述的显示设备的运动补偿方法,其特征在于,所述将转换后的画面信号的码流信息传输给主芯片,以获取所述主芯片传输的码流信息的步骤之后,包括:
判断显示设备进行画面输出时对应的目标帧率是否小于第二帧率;
若小于或等于,则运用主芯片将接收到的画面信号的帧率转换至目标帧率,以对所述显示设备的显示画面进行运动补偿。
7.如权利要求6所述的显示设备的运动补偿方法,其特征在于,所述判断显示设备进行画面输出时对应的目标帧率是否小于第二帧率的步骤之后,包括:
若显示设备进行画面输出时对应的目标帧率大于第二帧率,则运用运动补偿芯片将所获取自主芯片的画面信号转换至所述目标帧率,以对所述显示设备的显示画面进行运动补偿。
8.一种显示设备的运动补偿装置,其特征在于,所述装置包括存储器、处理器及存储在存储器上并可在处理器上运行的显示设备的运动补偿程序,所述处理器执行所述显示设备的运动补偿程序时实现权利要求1-7中任一项所述的显示设备的运动补偿方法的步骤。
9.一种电视机,其特征在于所述电视机包括存储器、处理器及存储在存储器上并可在处理器上运行的显示设备的运动补偿程序,所述处理器执行所述显示设备的运动补偿程序时实现权利要求1-7中任一项所述的显示设备的运动补偿方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有显示设备的运动补偿程序,所述显示设备的运动补偿程序被处理器执行时实现如权利要求1-7中任一项所述的显示设备的运动补偿方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010371514.3A CN111541940B (zh) | 2020-04-30 | 2020-04-30 | 显示设备的运动补偿方法、装置、电视机及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010371514.3A CN111541940B (zh) | 2020-04-30 | 2020-04-30 | 显示设备的运动补偿方法、装置、电视机及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111541940A true CN111541940A (zh) | 2020-08-14 |
CN111541940B CN111541940B (zh) | 2022-04-08 |
Family
ID=71980240
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010371514.3A Active CN111541940B (zh) | 2020-04-30 | 2020-04-30 | 显示设备的运动补偿方法、装置、电视机及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111541940B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112788337A (zh) * | 2020-12-28 | 2021-05-11 | 深圳创维-Rgb电子有限公司 | 视频自动运动补偿方法、装置、设备及存储介质 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070296811A1 (en) * | 2006-05-22 | 2007-12-27 | Shinichiro Miyazaki | Video Signal Processing Apparatus and Image Display Apparatus |
CN101309356A (zh) * | 2007-05-16 | 2008-11-19 | 奇景光电股份有限公司 | 用于帧率升频转换的装置及方法 |
CN102714726A (zh) * | 2010-01-15 | 2012-10-03 | 杜比实验室特许公司 | 使用元数据的用于时间缩放的边缘增强 |
KR20130037962A (ko) * | 2011-10-07 | 2013-04-17 | 삼성디스플레이 주식회사 | 표시 장치 |
CN103188509A (zh) * | 2011-12-28 | 2013-07-03 | 三星电子株式会社 | 用于多个3d内容的信号处理装置、显示装置、及其方法 |
CN104601999A (zh) * | 2014-12-31 | 2015-05-06 | 乐视网信息技术(北京)股份有限公司 | 一种基于关键帧的编码方法及装置 |
CN105306866A (zh) * | 2015-10-27 | 2016-02-03 | 青岛海信电器股份有限公司 | 帧率转换方法及装置 |
US20160100127A1 (en) * | 2014-10-01 | 2016-04-07 | Samsung Electronics Co., Ltd. | Display apparatus and control method thereof |
CN105791735A (zh) * | 2014-12-24 | 2016-07-20 | 中国电信股份有限公司 | 用于视频通话码流动态调整的方法和系统 |
CN105991955A (zh) * | 2015-03-20 | 2016-10-05 | 联发科技股份有限公司 | 内容自适应帧率转换方法以及相关装置 |
CN109376603A (zh) * | 2018-09-25 | 2019-02-22 | 北京周同科技有限公司 | 一种视频识别方法、装置、计算机设备及存储介质 |
US10230920B1 (en) * | 2017-12-06 | 2019-03-12 | Pixelworks, Inc. | Adjusting interpolation phase for MEMC using image analysis |
CN109756778A (zh) * | 2018-12-06 | 2019-05-14 | 中国人民解放军陆军工程大学 | 一种基于自适应运动补偿的帧率转换方法 |
CN110270092A (zh) * | 2019-06-27 | 2019-09-24 | 三星电子(中国)研发中心 | 用于电子设备的帧率提升的方法及装置以及电子设备 |
-
2020
- 2020-04-30 CN CN202010371514.3A patent/CN111541940B/zh active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070296811A1 (en) * | 2006-05-22 | 2007-12-27 | Shinichiro Miyazaki | Video Signal Processing Apparatus and Image Display Apparatus |
CN101309356A (zh) * | 2007-05-16 | 2008-11-19 | 奇景光电股份有限公司 | 用于帧率升频转换的装置及方法 |
CN102714726A (zh) * | 2010-01-15 | 2012-10-03 | 杜比实验室特许公司 | 使用元数据的用于时间缩放的边缘增强 |
KR20130037962A (ko) * | 2011-10-07 | 2013-04-17 | 삼성디스플레이 주식회사 | 표시 장치 |
CN103188509A (zh) * | 2011-12-28 | 2013-07-03 | 三星电子株式会社 | 用于多个3d内容的信号处理装置、显示装置、及其方法 |
US20160100127A1 (en) * | 2014-10-01 | 2016-04-07 | Samsung Electronics Co., Ltd. | Display apparatus and control method thereof |
CN105791735A (zh) * | 2014-12-24 | 2016-07-20 | 中国电信股份有限公司 | 用于视频通话码流动态调整的方法和系统 |
CN104601999A (zh) * | 2014-12-31 | 2015-05-06 | 乐视网信息技术(北京)股份有限公司 | 一种基于关键帧的编码方法及装置 |
CN105991955A (zh) * | 2015-03-20 | 2016-10-05 | 联发科技股份有限公司 | 内容自适应帧率转换方法以及相关装置 |
CN105306866A (zh) * | 2015-10-27 | 2016-02-03 | 青岛海信电器股份有限公司 | 帧率转换方法及装置 |
US10230920B1 (en) * | 2017-12-06 | 2019-03-12 | Pixelworks, Inc. | Adjusting interpolation phase for MEMC using image analysis |
CN109376603A (zh) * | 2018-09-25 | 2019-02-22 | 北京周同科技有限公司 | 一种视频识别方法、装置、计算机设备及存储介质 |
CN109756778A (zh) * | 2018-12-06 | 2019-05-14 | 中国人民解放军陆军工程大学 | 一种基于自适应运动补偿的帧率转换方法 |
CN110270092A (zh) * | 2019-06-27 | 2019-09-24 | 三星电子(中国)研发中心 | 用于电子设备的帧率提升的方法及装置以及电子设备 |
Non-Patent Citations (2)
Title |
---|
ZHENG REN: "《Frame rate up-conversion with motion region segmentation based optimization》", 《2012 5TH INTERNATIONAL CONGRESS ON IMAGE AND SIGNAL PROCESSING》 * |
南立园: "《基于运动和深度信息的立体视频帧率提升算法研究》", 《中国优秀硕士学位论文全文数据库》 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112788337A (zh) * | 2020-12-28 | 2021-05-11 | 深圳创维-Rgb电子有限公司 | 视频自动运动补偿方法、装置、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN111541940B (zh) | 2022-04-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7085420B2 (en) | Text detection in continuous tone image segments | |
CN108833938B (zh) | 用于选取视频封面的方法和设备 | |
CN109040792B (zh) | 一种视频重定向的处理方法、云终端和云桌面服务器 | |
WO2017135133A1 (en) | Communication apparatus, communication control method, and computer program | |
US20120120312A1 (en) | Image synthesizing device, coding device, program, and recording medium | |
US8477842B2 (en) | Encoding method of screen frame and electronic device applying the same | |
WO2020108091A1 (zh) | 视频处理方法、装置、电子设备及存储介质 | |
CN112601096A (zh) | 视频解码方法、装置、设备及可读存储介质 | |
KR100719841B1 (ko) | 썸네일 생성 및 표시 방법 | |
US9729931B2 (en) | System for managing detection of advertisements in an electronic device, for example in a digital TV decoder | |
CN111541940B (zh) | 显示设备的运动补偿方法、装置、电视机及存储介质 | |
US20130039429A1 (en) | Computer display content coding method and system | |
CN114710637A (zh) | Web端监控视频流低时延处理方法、装置、设备及介质 | |
CN112261417B (zh) | 视频推送方法及系统、设备及可读存储介质 | |
US20070122045A1 (en) | System for scaling a picture unit from a first video resolution format to a second video resolution format | |
CN112543348A (zh) | 远程录屏方法、装置、设备及计算机可读存储介质 | |
US10924784B2 (en) | Transmitting device, transmitting method, receiving device, and receiving method | |
CN110891195A (zh) | 花屏图像的生成方法、装置、设备和存储介质 | |
CN103188449A (zh) | 显示设备和可与其连接的外部外围装置以及图像显示方法 | |
CN113207003B (zh) | 一种视频图像的运动估计方法及电子设备 | |
US11776445B2 (en) | Image processing device and image processing method | |
US20170091896A1 (en) | Independent multi-source display device | |
US20090074054A1 (en) | Resolution-converting apparatus, resolution-converting method and previewing apparatus | |
KR101164313B1 (ko) | 비디오 영상의 인코딩 오류 검출 방법 및 시스템 | |
US20170201710A1 (en) | Display apparatus and operating method thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |