CN105744358A - 视频播放的处理方法及装置 - Google Patents

视频播放的处理方法及装置 Download PDF

Info

Publication number
CN105744358A
CN105744358A CN201610158743.0A CN201610158743A CN105744358A CN 105744358 A CN105744358 A CN 105744358A CN 201610158743 A CN201610158743 A CN 201610158743A CN 105744358 A CN105744358 A CN 105744358A
Authority
CN
China
Prior art keywords
video image
resolution
resolution format
frame
converted
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610158743.0A
Other languages
English (en)
Other versions
CN105744358B (zh
Inventor
刘杰
张智华
丁强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Visual Technology Co Ltd
Original Assignee
Qingdao Hisense Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Hisense Electronics Co Ltd filed Critical Qingdao Hisense Electronics Co Ltd
Priority to CN201610158743.0A priority Critical patent/CN105744358B/zh
Priority to CN201810668619.8A priority patent/CN108833975B/zh
Publication of CN105744358A publication Critical patent/CN105744358A/zh
Application granted granted Critical
Publication of CN105744358B publication Critical patent/CN105744358B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42653—Internal components of the client ; Characteristics thereof for processing graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供一种视频播放的处理方法，包括：获取待播放的视频对应的解码后的视频图像；若待播放的视频的码率或者帧率小于或等于预设值则在将每帧视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式之前，当每帧视频图像的分辨率格式与第一分辨率格式不匹配时，将每帧视频图像的分辨率格式转换为第一分辨率格式；若码率或者帧率大于预设值则在视频图像的第三分辨率格式与第四分辨率格式不匹配时，将视频图像的第三分辨率格式转换为第四分辨率格式；根据预先获取的视频图像的第三分辨率格式，将转换为第四分辨率格式的视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式。本发明不会存在黑屏问题。

Description

视频播放的处理方法及装置
技术领域
本发明涉及通信技术领域，尤其涉及一种视频播放的处理方法及装置。
背景技术
随着电视技术的发展，越来越多的用户使用电视作为观看视频的终端设备。用户在使用电视机进行视频点播时，经常会遇到由于网络速度的变更，造成视频播放过程中的卡顿、黑屏或者延时等问题。
图1为现有的视频播放处理流程示意图。由于网络带宽存在实时变化的问题，因此为了应对网络带宽的变化，针对同一视频节目中，一些视频播放网站的后台服务器会存在480P/720P/1080I/1080P/2160P等各种分辨率的信号源，在视频播放过程中，后台服务器会根据用户实际的网络带宽来推送相应的视频格式，满足在用户观看过程中没有数据缓冲，卡顿，延迟的问题；如图1所示，服务器端发送的信号被SOC芯片中的解码模块(Decoder)解码后变成一帧帧图像送到图像处理(VDP/DDP)模块进行画质(PictureQuality，简称PQ)处理，然后被送到显示处理(Scaler)模块做缩放处理(Upscaler或者Downscaler处理)例如计算像素与像素之间的差异性运算出新的像素点，最后被送给显示屏处理，在整个的处理过程中，信号是一帧一帧处理(如图1中F1)，当遇到有分辨率变化时，显示处理模块就需要做相应的算法处理，而显示处理模块中的缩放算法在依据分辨率调整的这个过程中是需要时间来处理的(通常用插入2到3帧的黑屏信号或者当前帧的静止信号代替)，由于显示处理模块直接驱动后级显示屏的定时器/计数器控制寄存器(TimerControlRegister，简称TCON)，在这段没有信号输出的时间中采用黑屏信号来代替。
在实际的分辨率转化过程中，为了避免SOC芯片处理带宽有限例如只能处理帧率或码率在30Hz以下的输入信号，以及遇到当输入信号分辨率变化时进行算法切换较为耗时以至于不得不插入黑屏信号等，可能会加入更高处理能力的帧率转换FRC芯片(FrameRateConverter简称FRC)来进行相应的算法处理，但是若网络带宽等原因使得进入SOC的视频信号的分辨率发生变化，如果前端的SOC将解码后的视频图像直接输出给FRC的话，由于需要最终提供给显示屏的视频图像的PixelClock(像素时钟)会在SOC输出的视频图像的分辨率不同的时候发生变化，如1920×108060Hz的时钟周期为148.5MHz，3840×216060Hz的时钟周期为597MHz，那么FRC在处理视频信号和屏的分辨率统一的同时还需要重新同步时钟，这个过程也同样需要较长时间，也会不可避免的存在黑屏的现象。
因此，现有技术的问题是，不管是单独通过SOC芯片处理，还是增加FRC芯片协助处理，在遇到输入信号的分辨率变化时，都会不可避免的存在黑屏问题。
发明内容
本发明提供一种视频播放的处理方法及装置，以克服现有技术中当视频信号的分辨率发生变化时会存在黑屏的问题。
第一方面，本发明提供一种视频播放的处理方法，包括：
获取待播放的视频对应的解码后的视频图像；
若所述待播放的视频的码率或者帧率小于或等于预设值，则在将每帧所述视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式之前，当每帧所述视频图像的分辨率格式与第一分辨率格式不匹配时，将每帧所述视频图像的分辨率格式转换为第一分辨率格式；
其中，转换为第一分辨率格式的视频图像中包括有效像素点和通过有效像素点复制出的像素点；所述有效像素点为转换前的视频图像中的像素点；
若所述待播放的视频的码率或者帧率大于预设值，则在所述视频图像的第三分辨率格式与第四分辨率格式不匹配时，将所述视频图像的第三分辨率格式转换为所述第四分辨率格式；
根据预先获取的所述视频图像的第三分辨率格式，将转换为第四分辨率格式的视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式；
其中，转换为第四分辨率格式的视频图像中包括有效像素点和非有效像素点；所述有效像素点为转换前的视频图像中的像素点。
第二方面，本发明提供一种视频播放的处理装置，包括：
解码模块，用于获取待播放的视频对应的解码后的视频图像；
确定模块，用于确定所述待播放的视频的码率或者帧率；
格式转换模块，用于若所述待播放的视频的码率或者帧率小于或等于预设值，则在将每帧所述视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式之前，当每帧所述视频图像的分辨率格式与第一分辨率格式不匹配时，将每帧所述视频图像的分辨率格式转换为所述第一分辨率格式；
其中，转换为第一分辨率格式的视频图像中包括有效像素点和通过有效像素点复制出的像素点；所述有效像素点为转换前的视频图像中的像素点；
第一显示处理模块，用于若所述待播放的视频的码率或者帧率大于预设值，则在所述视频图像的第三分辨率格式与第四分辨率格式不匹配时，将所述视频图像的第三分辨率格式转换为所述第四分辨率格式；帧频转换模块，用于根据预先获取的所述视频图像的第三分辨率格式，将转换为第四分辨率格式的视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式；
其中，转换为第四分辨率格式的视频图像中包括有效像素点和非有效像素点；所述有效像素点为转换前的视频图像中的像素点。
本发明视频播放的处理方法及装置，通过获取解码后的视频图像，然后若所述码率或者帧率小于或等于预设值，则在将每帧所述视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式之前，当每帧所述视频图像的分辨率格式与第一分辨率格式不匹配时，将每帧所述视频图像的分辨率格式转换为第一分辨率格式，由于在转换为与显示屏匹配的第二分辨率格式之前已经将视频图像的分辨率格式进行了统一，转换过程相对简单，只是将有效像素点进行了复制，而且在转换为与显示屏匹配的第二分辨率格式时由于无需切换格式转换算法，处理时间较短，因此不用插入黑屏信号，与现有技术相比，不会造成播放过程中因分辨率发生变化后所引起的黑屏问题；若所述码率或者帧率大于预设值，则在视频图像的第三分辨率格式与第四分辨率格式不匹配时，将视频图像的第三分辨率格式转换为第四分辨率格式；根据预先获取的视频图像的第三分辨率格式，将转换为第四分辨率格式的视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式；与现有技术相比而言，当码率或者帧率大于预设值时，对解码后输出的视频图像进行统一的分辨率格式转换，转换成统一的第四分辨率格式的视频图像，即由于转化为第四分辨率的视频图像是通过非有效像素点的填充，使得在转化为与显示屏匹配的第儿分辨率之前，都统一为第四分辨率，也就是对于FRC来说，SOC的视频信号输出是稳定的，即需要输出给显示屏的PixelClock像素时钟不会发生变化，相应的也就不需要FRC进行时钟同步的处理，同时在FRC在对视频图像进行相应的分辨率格式转换之前，已经提前获知该视频图像的第三分辨率格式，因此处理过程时间较短，进一步的使得造成因待播放的视频的分辨率发生变化而引起的黑屏的技术问题得到改善。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为现有的视频播放处理流程示意图；
图2为本发明视频播放的处理方法一实施例的流程图；
图3为本发明视频播放的处理方法一实施例的处理流程示意图；
图4为本发明方法一实施例中的视频图像分辨率格式转换示意图；
图5为本发明方法另一实施例中的视频图像分辨率格式转换示意图；
图6为本发明视频播放的处理装置一实施例的结构示意图；
图7为本发明电视一实施例的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例的视频播放的处理方法可以应用于电视、手机、个人电脑(PC)、平板电脑等设备中，以解决上述问题，本发明下述实施例中主要阐述如何通过信号处理方式上的改变，来保证视频信号分辨率发生变化时无黑屏、无卡顿、无延时缓冲显示。
图2为本发明视频播放的处理方法一实施例的流程图。图3为本发明视频播放的处理方法一实施例的处理流程示意图。图4为本发明方法一实施例中的视频图像分辨率格式转换示意图。如图2所示，本实施例以该视频播放的处理方法应用于电视中来举例说明，方法包括：
步骤201、获取待播放的视频对应的解码后的视频图像；
步骤202、若待播放的视频的码率或者帧率小于或等于预设值，则在将每帧视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式之前，当每帧视频图像的分辨率格式与第一分辨率格式不匹配时，将每帧视频图像的分辨率格式转换为第一分辨率格式；
其中，转换为第一分辨率格式的视频图像中包括有效像素点和通过有效像素点复制出的像素点；有效像素点为转换前的视频图像中的像素点；
步骤203、若待播放的视频的码率或者帧率大于预设值，则在视频图像的第三分辨率格式与第四分辨率格式不匹配时，将视频图像的第三分辨率格式转换为第四分辨率格式；
步骤204、根据预先获取的视频图像的第三分辨率格式，将转换为第四分辨率格式的视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式；
其中，转换为第四分辨率格式的视频图像中包括有效像素点和非有效像素点；有效像素点为转换前的视频图像中的像素点。
在本实施例中，步骤202和203之前还可以包括步骤201’，即确定待播放视频的码率或帧率，该步骤与步骤201没有前后顺序的关系，对于本领域技术人员，先执行步骤201’，后执行步骤201同样可以解决本发明的技术问题，达到对应的技术效果。
具体来说，服务器中的同一视频内容可能保存有不同分辨率格式(其帧率不会发生变化，仅仅是分辨率的不同)，包括但不限于以下几种，每种分辨率对应一种模式：
3840×2160-----模式1
2880×1440-----模式2
2560×1440-----模式3
1920×1080-----模式4
1280×720-----模式5
720×576-----模式6
640×480-----模式7
320×240-----模式8
在进行播放处理时，先获取用户请求的待播放的视频对应的解码后的视频图像；可以是图3中解码模块进行解码获取视频图像；
获取的待播放视频可以是服务器根据当前用户的网络带宽主动推送的与当前用户的网络带宽匹配的分辨率格式的视频信号，也可以是SOC根据监测的当前用户的网络带宽向服务器请求的与当前用户的网络带宽匹配的分辨率格式的视频信号。
确定该视频的码率或者帧率，假设图3中格式转换模块的带宽只能支持300MHz，则若待播放的视频为3840×2160分辨率，帧率为30Hz，或，帧率为60Hz的所有分辨率格式的视频，此时码率或者帧率小于或等于一预设值，则采用步骤202的方法进行处理，处理过程如下(采用路径1的处理过程)：
对于解码后的视频图像来说，在将每帧视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式之前，当每帧视频图像的分辨率格式与第一分辨率格式不匹配时，对每帧视频图像依次进行分辨率格式转换，统一为第一分辨率格式，图3仅示出了3帧视频图像F1、F2、F3，转换后的视频图像如图3所示的F1′、F2′、F3′，其余帧的视频图像类似，将解码后的所有视频图像依次进行分辨率格式转换。
其中，转换规则可以将原视频图像中的有效像素点进行简单的复制。
由于视频源会根据用户的网络带宽实时变换分辨率，因此经过解码器解码后的视频图像的分辨率在不同时刻是不统一的，因此需要经过格式转换模块处理成统一的第一分辨率格式。
例如，第一分辨率格式假设为3840×2160，解码后的视频图像的分辨率格式为模式4，则需要将1920×1080分辨率的视频图像转换为3840×2160分辨率的视频图像，具体可以是通过将原视频图像中的每一行的像素点分别复制1行，生成2160行像素，并将处理后的视频图像中的每一列的像素点复制3行，生成3840列像素，最终转换为3840×2160的视频图像；在本发明其他实施方式中，还可以通过其他方式进行分辨率格式转换，本发明对此并不限定。
如图4所示，上面两帧视频图像分辨率格式为1920×1080，第一分辨率格式也为1920×1080，第3帧视频图像分辨率格式为1280×720，第一分辨率格式为1920×1080，则将第3帧视频图像进行分辨率格式转换然后再输出进行画质处理。
或者，第一分辨率格式假设为3840×2160，解码后的视频图像的分辨率格式不同，假设前3帧视频图像的分辨率格式为模式1，第4帧开始分辨率格式变为模式4，则先进行分辨率格式转换，将该分辨率格式与前面几帧视频图像的分辨率格式进行统一，此时虽然也需要一定的处理时间，但是由于转换规则较为简单，处理速度较快，然后经过图像处理VDP/DDP模块、显示处理模块、显示屏后的视频信号的分辨率是稳定的，不会造成播放过程中因分辨率发生变化后所引起的黑屏问题。
由于前端SOC中的显示处理模块的带宽限制为300MHz(SOC处理能力有限)，只能支持到4K×2K30Hz，因此无法满足更高帧率60Hz的信号的分辨率和显示屏适配的要求，对于此类高帧率或者码率的视频信号，可以在上述SOC方案的基础上在输出至显示屏之前增加处理能力更强的帧率转换器(FrameRateConverter简称FRC)来进行相应的算法处理，但是若网络带宽等原因使得进入SOC的视频信号的分辨率发生变化，如果前端的SOC将解码后的视频图像直接输出给FRC的话，由于需要最终提供给显示屏的视频图像的PixelClock(像素时钟)会在SOC输出的视频图像的分辨率不同的时候发生变化，如1920×108060Hz的时钟周期为148.5MHz，3840×216060Hz的时钟周期为597MHz，那么FRC在处理视频信号和显示屏的分辨率统一的同时还需要重新同步时钟，这个过程也同样需要较长时间，也会不可避免的存在黑屏的现象。
因此，本发明实施例中，当待播放的视频为3840×2160分辨率，帧率为60Hz，此时码率或者帧率大于对应的预设码率或者预设帧率，则采用步骤203、步骤204的方法进行处理，处理过程如下(采用路径2的处理过程)：
对于解码后的视频图像来说，解码模块会监测视频图像的第三分辨率格式的变化，解码模块将第1帧视频图像的第三分辨率格式通知FRC，后续解码模块若监测到分辨率发生变化时，会将该视频图像的第三分辨率格式通知给FRC进行分辨率格式转换的算法准备；具体可以将第三分辨率格式的标识发送给FRC；SOC在视频图像的第三分辨率格式与第四分辨率格式不匹配时，将视频图像的第三分辨率格式转换为第四分辨率格式。即在将每帧视频图像发送给FRC之前，对每帧视频图像依次进行分辨率格式转换，统一为第四分辨率格式，图3仅示出了3帧视频图像F1、F2、F3，转换后的视频图像如图3所示的F1′、F2′、F3′，其余帧的视频图像类似，将解码后的所有视频图像依次进行分辨率格式转换。
其中，转换规则可以是将与第四分辨率格式差异的像素补充为黑色像素点或其他非有效像素点，转换成第四分辨率格式的视频图像。
第四分辨率可为预设好的某一种格式的分辨率，例如可将第四分辨率预设为1920×1080，后续解码后获得的视频图像的第三分辨率格式都需要与第四分辨率格式匹配，若不匹配，则需要将视频图像的第三分辨率格式转换为第四分辨率格式；当然也可以是根据获取到解码后的视频图像对应的分辨率格式决定的，例如，初始进行播放时，视频源对应的视频图像的分辨率格式可以为1920×1080，可将该分辨率设置为第四分辨率，在带宽发生变化时，可能视频源的分辨率格式会进行调整，可能变成720×576格式，此时视频图像对应的第三分辨率720×576格式与第四分辨率1920×1080格式不同，因此需要将当前的第三分辨率720×576格式转换为第四分辨率1920×1080格式。
由于视频源会根据用户的网络带宽实时变换分辨率，因此经过解码器解码后的视频图像的分辨率在不同时刻是不统一的，为了保证输出至FRC的视频图像的PixelClock的统一，从而避免黑屏现象，因此需要经过SOC处理成统一的第四分辨率格式。
然后，对于SOC中依次输出的每帧视频图像，根据预先获取的该视频图像的第三分辨率格式对该视频图像的第四分辨率格式进行转换处理，以获取与显示屏匹配的第二分辨率格式。这里可以是获取到解码后视频图像时预先通知给FRC的。
具体来说，如图3所示，显示处理模块可以依次对解码后的视频图像进行分辨率格式转换处理，获取第四分辨率格式的视频图像；然后将转换处理后的该视频图像输出至FRC再次进行分辨率格式转换处理；由FRC根据预先获知的分辨率格式的标识(如ModeIndex)调用相应的算法进行处理，处理成与显示屏匹配的第二分辨率格式；其中，第四分辨率格式可以为显示屏的分辨率；后端FRC再统一做相应处理；FRC可以根据图像缩放插值算法进行分辨率格式转换。
例如，与显示屏匹配的第二分辨率格式假设为3840×2160，解码后的视频图像的第三分辨率格式为模式4，则如图4所示，可以将1920×1080分辨率的视频图像转换为3840×2160分辨率的视频图像，具体可以是将1920×1080的原始图像作为有效像素点，然后将3840×2160分辨率其他的部分采用黑色像素点来补充完整；在本发明其他实施方式中，还可以通过其他方式进行分辨率格式转换处理，本发明对此并不限定。
在FRC中进行分辨率格式转换处理时，具体可以是在原视频图像相邻像素点之间经过插值算法计算填充一个新的像素点的方式转换分辨率格式；在本发明其他实施方式中，还可以通过其他算法进行分辨率格式转换，本发明对此并不限定。
图像缩放插值算法，包括如线性插值算法、最近邻插值算法、双线性内插值算法等等。
或者，与显示屏匹配的第二分辨率格式假设为3840×2160，解码后的视频图像的第三分辨率格式为320×240，或者1280×720，则在显示处理模块中可以先将第三分辨率格式转换为第四分辨率格式1920×1080，然后输出给FRC，由FRC进行最终的分辨率格式转换处理，以获取与显示屏匹配的第二分辨率格式的视频图像。
下面进行举例说明：
待播放的视频在刚开始播放时，经过解码后，会将视频图像的第三分辨率格式通知给FRC，当FRC接收到该视频图像之前已经知道该视频图像的第三分辨率格式，以便于FRC调用相应的处理算法进行分辨率格式的转换；缓存模块输出的视频图像可以经过图像处理VDP/DDP模块的色彩控制(ColorManager)、降噪、清晰度、超解像、伽马Gamma等画质效果处理、显示处理模块可以将经过画质效果处理之后的视频图像作为有效像素，同时将与第四分辨率格式差异的像素补充为黑色像素点或其他非有效像素点，转换成第四分辨率格式的视频图像；之后，在帧率转换器(FRC)中根据当前帧的第三分辨率格式获取对应的有效像素点，并根据与显示屏匹配的第二分辨率格式，依次对所述显示处理模块中输出的视频图像进行相应的分辨率格式转换处理，处理成与显示屏匹配的第二分辨率格式；我们假设第4帧的第三分辨率格式发生变化与第四分辨率格式不匹配，解码模块例如可以通过串行总线(Inter-IntegratedCircuit，简称I2C)或者串行外设接口(SerialPeripheralInterface，简称SPI)经高速串行V-By-One接口将第4帧的第三分辨率格式通知FRC，FRC获取到第三分辨率格式后，在接收到显示处理模块输出的第4帧的视频图像时，调用相应的分辨率格式对应的算法进行分辨率格式转换处理；在整个过程中，FRC从显示处理模块获取到的视频图像以及FRC到显示屏的信号分辨率始终是稳定的，像素时钟是统一的，且FRC在对视频图像进行分辨率格式转换之前，已经提前获知该视频图像的第三分辨率格式，因此处理过程时间较短，不会造成因待播放的视频的分辨率发生变化而引起的黑屏问题。
在本实施例中，如果后端的FRC只能实现2倍Upscaler处理的情况下，与显示屏匹配的分辨率格式假设为3840×2160，解码后的视频图像的分辨率格式为模式5、6、7、8，则需要在发给缓存模块之前进行分辨率格式转换，将分辨率格式统一转换调整为1920×1080的分辨率格式，此时可以通过将有效像素点进行复制实现分辨率格式转换，然后在缓存模块输出之后显示处理模块做预处理，其他与上述方案一致；如果FRC可以实现12倍的Upscaler处理，直接用上述方案就可以实现。
本实施例提供的视频播放的处理方法，通过获取解码后的视频图像，然后若所述码率或者帧率小于或等于预设值，则在将每帧所述视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式之前，当每帧所述视频图像的分辨率格式与第一分辨率格式不匹配时，将每帧所述视频图像的分辨率格式转换为第一分辨率格式，由于在转换为与显示屏匹配的第二分辨率格式之前已经将视频图像的分辨率格式进行了统一，转换过程相对简单，只是将有效像素点进行了复制，而且在转换为与显示屏匹配的第二分辨率格式时由于无需切换格式转换算法，处理时间较短，因此不用插入黑屏信号，与现有技术相比，不会造成播放过程中因分辨率发生变化后所引起的黑屏问题；若所述码率或者帧率大于预设值，则在视频图像的第三分辨率格式与第四分辨率格式不匹配时，将视频图像的第三分辨率格式转换为第四分辨率格式；根据预先获取的视频图像的第三分辨率格式，将转换为第四分辨率格式的视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式；与现有技术相比而言，当码率或者帧率大于预设值时，对解码后输出的视频图像进行统一的分辨率格式转换，转换成统一的第四分辨率格式的视频图像，即由于转化为第四分辨率的视频图像是通过非有效像素点的填充，使得在转化为与显示屏匹配的第儿分辨率之前，都统一为第四分辨率，也就是对于FRC来说，SOC的视频信号输出是稳定的，即需要输出给显示屏的PixelClock像素时钟不会发生变化，相应的也就不需要FRC进行时钟同步的处理，同时在FRC在对视频图像进行相应的分辨率格式转换之前，已经提前获知该视频图像的第三分辨率格式，因此处理过程时间较短，进一步的使得造成因待播放的视频的分辨率发生变化而引起的黑屏的技术问题得到改善
在上述实施例的基础上，将每帧视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式，具体可以通过如下方式实现：
根据图像缩放插值算法，将转换后的每帧视频图像的第一分辨率格式转换为与显示屏匹配的第二分辨率格式。
例如，与显示屏匹配的第二分辨率格式假设为3840×2160，统一的第一分辨率格式为模式4，则需要将1920×1080分辨率的视频图像转换为3840×2160分辨率的视频图像，具体可以是在原视频图像相邻像素点之间经过插值算法计算填充一个新的像素点的方式转换分辨率格式；在本发明其他实施方式中，还可以通过其他算法进行分辨率格式转换，本发明对此并不限定。
图像缩放插值算法，包括如线性插值算法、最近邻插值算法、双线性内插值算法等等。
或者，与显示屏匹配的第二分辨率格式假设为1920×1080，第一分辨率格式为模式1，则将第一分辨率格式的视频图像进行图像分辨率转换Downscaler处理，将分辨率格式转换为模式4。
本发明实施例中，由于在转换为与显示屏匹配的第二分辨率格式之前，已经将分辨率格式进行了统一，因此经过图像处理VDP/DDP模块、显示处理模块、显示屏后的视频信号的分辨率是稳定的，不会造成播放过程中因分辨率发生变化后所引起的黑屏问题。
在上述实施例的基础上，将每帧视频图像的分辨率格式转换为第一分辨率格式之后，还包括：
对于转换后的每帧视频图像，将转换为第一分辨率格式的P1帧视频图像依次保存在第一缓存模块中；其中，P1为正整数；
将每帧视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式，包括：
获取从第一缓存模块中匀速输出的每帧视频图像，并将视频图像的第一分辨率格式转化为第二分辨率格式；
将每帧视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式之后，还包括：
将转换为第二分辨率格式后的每帧视频图像输出到显示屏。
具体来说，对于转换后的视频图像来说，首先将第1帧至第P1帧视频图像依次保存在第一缓存模块中；第一缓存模块的功能可以由其中，P1为正整数，例如图3取值为P1＝3。
然后，对随后转换为第一分辨率格式的第N+P1帧视频图像，当将缓存模块中保存的转换后的第N帧视频图像输出后，即缓存模块中保存的视频图像的帧数小于P1时，将第N+P1帧视频图像保存在缓存模块中；例如，N初始为1，P1＝3，第一缓存模块中保存3帧视频图像，然后在第一缓存模块中保存的第1帧视频图像输出后，将第4帧视频图像保存在第一缓存模块中；N加1，重复执行上述步骤，直至将所有视频图像都输出。
其中，P1可根据实际图像开始播放的缓冲时间及缓存模块的容量综合决定，由于不同分辨率格式的变换时间不同，第一缓存模块的图像≤P1帧。
保存在第一缓存模块中的目的是保证第一缓存模块里面始终有几帧视频图像存在，这是由于第一分辨率格式转换时对于不同的分辨率格式所需要的时间虽然差异较小，但是经处理一定数量后的图像帧，在不同分辨率上仍有一定的时间差异；因此从第N+P1帧开始逐帧进行处理，并根据后面的第一缓存模块存储的视频图像的输出情况，存储到第一缓存模块中，即第一缓存模块中只要少于P1帧视频图像，就将新处理的第N+P1帧放入第一缓存模块中，保证第一缓存模块中始终终有1到P1帧视频图像。
第一缓存模块的主要作用是对经过统一的分辨率格式转换后的视频图像进行缓存，能同时存储P1帧视频图像，并实时的将视频图像以一定的速率一帧一帧的匀速输出给后续的各个功能处理模块。
本实施例中，由于第一缓存模块中保存了一定数量的转换后的视频图像，即使后续进行格式转换处理的时间较长时，也可以先将第一缓存模块中的视频图像输出，而不用插入黑屏信号，与现有技术相比，不会造成播放过程中因分辨率发生变化后所引起的黑屏问题。
进一步的，将视频图像的第一分辨率格式转化为第二分辨率格式之前，还包括：
对从第一缓存模块中匀速输出的每帧视频图像进行图像画质处理。
具体来说，将第一缓存模块中匀速输出的每帧视频图像依次进行色彩控制(ColorManager)、降噪、清晰度、超解像、伽马Gamma等画质效果处理；如图3所示，VDP/DDP为图像处理模块，用于对缓存模块输出的视频图像进行ColorManager、降噪、清晰度、超解像、Gamma等画质效果处理；
显示处理模块，用于对图像处理模块输出的视频图像进行可选的帧频转换、运动补偿及电光转化处理，使得视频图像最终在屏幕端进行显示；
显示屏(Panel)可以为液晶屏模块，包含定时器/计数器控制寄存器(TCON)、面板等。
上述实施例的方法步骤201-203都可以在SOC中实现，步骤204可以在FRC中实现。
在上述实施例的基础上，进一步的，步骤201之后步骤203之前还可以进行如下操作：
对于解码后的每帧视频图像，将解码后的P2帧视频图像依次保存在第二缓存模块中；其中，P2为正整数；
对应的，步骤203具体可以采用如下方式实现：
获取从第二缓存模块中匀速输出的每帧视频图像，在视频图像的第三分辨率格式与第四分辨率格式不匹配时，片上系统SOC将视频图像的第三分辨率格式转换为第四分辨率格式。
具体来说，对于解码后的视频图像来说，首先将第1帧至第P2帧视频图像依次保存在第二缓存模块中；第二缓存模块的功能可以由图3中的缓存模块的功能实现；其中，P2为正整数，例如图3取值为P2＝3。
然后，对第二缓存模块中匀速输出的每帧视频图像，在视频图像的第三分辨率格式与第四分辨率格式不匹配时，片上系统SOC的显示处理模块将视频图像的第三分辨率格式转换为第四分辨率格式。
当将第二缓存模块中保存的第N帧视频图像输出后，即第二缓存模块中保存的视频图像的帧数小于P2时，将第N+P2帧视频图像保存在第二缓存模块中；例如，N初始为1，P2＝3，第二缓存模块中保存3帧视频图像，然后在第二缓存模块中保存的第1帧视频图像输出后，将第4帧视频图像保存在第二缓存模块中；N加1，重复执行上述步骤，直至将所有视频图像都输出。
其中，P2可根据实际图像开始播放的缓冲时间及第二缓存模块的容量综合决定，由于不同分辨率格式的变换时间不同，第二缓存模块的图像≤P2帧。
保存在第二缓存模块中的目的是保证第二缓存模块里面始终有几帧视频图像存在，这是由于分辨率格式转换时对于不同的分辨率格式所需要的时间虽然差异较小，但是经处理一定数量后的图像帧，在不同分辨率上仍有一定的时间差异；因此从第N+P2帧开始逐帧进行处理，并根据后面的第二缓存模块存储的视频图像的输出情况，存储到第二缓存模块中，即第二缓存模块中只要少于P2帧视频图像，就将新处理的第N+P2帧放入第二缓存模块中，保证第二缓存模块中始终终有1到P2帧视频图像。
第二缓存模块的主要作用是对经过解码模块解码后的视频图像进行缓存，能同时存储P2帧视频图像(如F1，F2，F3)，并实时的将视频图像以一定的速率一帧一帧的匀速输出给后续的各个功能处理模块；
具体来说，如图3所示，显示处理模块可以依次对第二缓存模块中输出的视频图像进行分辨率格式转换处理，获取第四分辨率格式的视频图像；然后将转换处理后的该视频图像输出至FRC再次进行分辨率格式转换处理；由FRC根据至少P2帧前送过来的分辨率格式的标识(如ModeIndex)调用相应的算法进行处理，处理成与显示器匹配的第二分辨率格式。
图5为本发明方法另一实施例中的视频图像分辨率格式转换示意图。在上述实施例的基础上，进一步的，步骤204具体可以采用如下方式实现：
FRC根据预先获取的视频图像的第三分辨率格式从转换为第四分辨率格式的视频图像中提取有效像素点，并将视频图像的第四分辨率格式转换为与显示屏匹配的第二分辨率格式。
具体来说，SOC的显示处理模块依次对解码后的每帧视频图像进行转换预处理，在第N帧视频图像对应的第三分辨率格式与第四分辨率格式不匹配时，显示处理模块对第N帧视频图像进行分辨率转换处理，以获取转换处理后的第N′帧视频图像，并输出至FRC处理；
具体可以是如第四分辨率格式为3840×2160，将解码后输出的1920×1080的视频图像作为有效像素点，然后将3840×2160分辨率其他的部分采用黑色像素点来补充完整。
FRC根据提前通知的分辨率格式调用相应的算法进行分辨率格式转换处理，具体做法为：根据获取的第N′帧视频图像对应的第三分辨率格式，对转换处理后的第N′帧视频图像进行还原处理，获取第N′帧视频图像中的有效像素点，并根据有效像素点和与显示屏匹配的第二分辨率格式，对有效像素点进行分辨率格式转换处理，处理成与显示屏一致的第二分辨率格式。
本实施例中，第N帧和第N′帧为时间序列上的同一帧，只是图像本身有变化。
举例来说，如图3所示，FRC中有不同分辨率格式的处理算法，分辨率格式如前述实施例的模式1-8。如图5所示，假设缓存模块输出的视频图像第三分辨率格式与第四分辨率格式不匹配，则可以先经过显示处理模块预处理后，再发给FRC处理，FRC根据第散分辨率格式对显示处理模块预处理后的视频图像进行处理，处理成与显示屏匹配的第二分辨率格式，图5中左边的图像对应的是显示处理模块处理后的视频图像，右边是FRC处理后的视频图像。
如图5所示，上面一帧视频图像的第一分辨率格式为2560×1440，第二分辨率格式为3840×2160，第2帧视频图像的第一分辨率格式为3840×2160，第二分辨率格式为3840×2160。
进一步的，在本实施例中，步骤205之前还可以进行如下操作：
片上系统SOC将解码后的第1帧视频图像的第一分辨率格式通知给帧频转换模块FRC；
对于随后的每帧视频图像，SOC监测视频图像的第三分辨率格式的变化情况，若监测到第M帧视频图像的第三分辨率格式与第M-1帧视频图像的第三分辨率格式不同，则将第M帧视频图像的第三分辨率格式通知给帧频转换模块FRC，以使所述FRC在接收到第M帧视频图像时已预先获取到第M帧视频图像的第三分辨率格式；
其中，M为大于1的正整数。
具体的，当SOC的解码模块监测到源端的视频图像的第三分辨率格式发生变化后，会通过I2C或者SPI经V-By-One接口通知FRC变化后的第三分辨率格式，即通知FRC该视频图像的第三分辨率格式，以便于FRC在接收到显示处理模块输出的该视频图像后可以调用相应的处理方法对视频图像的分辨率格式进行转化。FRC的主要作用就是将接收到的视频图像还原出原始有效的分辨率，并将该视频图像转换为与显示屏的第二分辨率格式一致的视频图像。
本实施例中，在发给FRC之前，在显示处理模块中进行预处理，这样做的主要目的是保证进入FRC的视频图像的分辨率是固定的，不会发生任何变化，像素时钟是统一的；假设第四分辨率格式为3840×2160，而解码后的第N帧视频图像的分辨率格式为1920×1080，则将该第N帧视频图像统一处理成第四分辨率格式3840×2160，这个过程并不是对视频图像本身做分辨率格式转换Upscaler处理，而是把原视频图像作为有效像素点，作为3840×2160的一部分，当原视频图像的分辨率低于3840×2160时，其余的部分用黑色像素点或其他非有效像素点来替代，如图5中的左半部分。
或者，假设第四分辨率格式为3840×2160，解码后的视频图像的分辨率格式为3840×2160，而与显示屏匹配的第二分辨率格式假设为1920×1080，则在显示处理模块中可以不做处理直接输出给FRC，由FRC进行分辨率格式转换处理(Downscaler处理)，以获取与显示屏匹配的第二分辨率格式的视频图像。
假设第4帧的第三分辨率格式发生变化与第四分辨率格式不匹配，则此时实际上系统正在处理F1，解码模块例如可以通过I2C或者SPI经V-By-One接口将第4帧的第三分辨率格式通知FRC，FRC获取到第三分辨率格式后，在接收到显示处理模块输出的第4帧的视频图像时，调用相应的处理算法对分辨率格式转换处理；在整个过程中从显示处理模块到FRC，FRC到显示屏的信号分辨率始终是稳定的，像素时钟是统一的，而且FRC在对视频图像进行分辨率格式转换之前，已经提前3帧获知该视频图像的第三分辨率格式，因此处理过程时间较短，不会造成因待播放的视频的分辨率发生变化而引起的黑屏问题。
本实施例提供的视频播放的处理方法，通过将第1帧视频图像的第一分辨率格式以及后续监测到第三分辨率格式发生变化时，同步将视频图像的第三分辨率格式通知给FRC进行算法准备；解码后的视频图像依次保存在第二缓存模块中，以使第二缓存模块中保存的图像帧个数为P2；然后显示处理模块依次对第二缓存模块中输出的视频图像进行分辨率格式转换处理获取第四分辨率格式的视频图像，并将转换处理后的视频图像输出至FRC进行处理，由FRC根据至少P2帧前送过来的第三分辨率格式调用相应的算法进行处理；与现有技术相比而言，对解码后输出的视频图像进行统一的分辨率格式转换，转换成统一的第四分辨率格式的视频图像，即由于转化为第四分辨率的视频图像是通过非有效像素点的填充，使得在转化为与显示屏匹配的第儿分辨率之前，都统一为第四分辨率，也就是对于FRC来说，SOC的视频信号输出是稳定的，即需要输出给显示屏的PixelClock像素时钟不会发生变化，相应的也就不需要FRC进行时钟同步的处理，同时在FRC在对视频图像进行相应的分辨率格式转换之前，已经提前获知该视频图像的第三分辨率格式，因此处理过程时间较短，进一步的使得造成因待播放的视频的分辨率发生变化而引起的黑屏的技术问题得到改善。
上述实施例中，FRC之前的模块都为SOC中的模块。
在上述实施例的基础上，进一步的，本实施例中在步骤101之前，还可以进行如下操作：
监测当前用户的网络带宽；
则获取待播放的视频对应的解码后的视频图像，具体可以采用如下方式实现：
获取与当前用户的网络带宽对应的分辨率格式的待播放的视频；
对待播放的视频进行解码处理，获取解码后的视频图像。
具体来说，在本实施例中，假设当前的视频图像的分辨率格式如模式1，而此时的用户网络带宽不足以播放该分辨率格式的视频，则SOC会根据监测到的当前用户的网络带宽向服务器请求与当前用户的网络带宽对应的分辨率格式的待播放的视频，从而避免了视频播放过程中出现卡顿现象。
可选的，在本实施例中，步骤101还可以通过如下方式实现：
接收服务器推送的与当前用户的网络带宽对应的分辨率格式的待播放的视频；
对待播放的视频进行解码处理，获取解码后的视频图像。
具体来说，服务器端会根据用户的网络带宽推送相应的分辨率格式的视频，从而避免了视频播放过程中出现卡顿现象。
当前的视频图像的分辨率格式如模式1，而此时的用户网络带宽不足以播放该分辨率格式的视频，则服务器端会根据用户的网络带宽推送相应的分辨率格式的视频。
图6为本发明视频播放的处理装置一实施例的结构示意图。如图6所示，本实施例的视频播放的处理装置，可以包括：解码模块、格式转换模块、第一显示处理模块和帧频转换模块；
解码模块，用于获取待播放的视频对应的解码后的视频图像；
格式转换模块，用于若所述待播放的视频的码率或者帧率小于或等于预设值，则在将每帧所述视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式之前，当每帧所述视频图像的分辨率格式与第一分辨率格式不匹配时，将每帧所述视频图像的分辨率格式转换为所述第一分辨率格式；
其中，转换为第一分辨率格式的视频图像中包括有效像素点和通过有效像素点复制出的像素点；所述有效像素点为转换前的视频图像中的像素点；
第一显示处理模块，用于若所述待播放的视频的码率或者帧率大于预设值，则在所述视频图像的第三分辨率格式与第四分辨率格式不匹配时，将所述视频图像的第三分辨率格式转换为所述第四分辨率格式；帧频转换模块，用于根据预先获取的所述视频图像的第三分辨率格式，将转换为第四分辨率格式的视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式；
其中，转换为第四分辨率格式的视频图像中包括有效像素点和非有效像素点；所述有效像素点为转换前的视频图像中的像素点。
可选地，作为一种可实施的方式，还包括：
第一缓存模块，用于依次保存转换为所述第一分辨率格式的P1帧视频图像；其中，P1为正整数；
第二显示处理模块，用于：
获取从所述第一缓存模块中匀速输出的每帧所述视频图像，并将所述视频图像的所述第一分辨率格式转化为所述第二分辨率格式；
将转换为所述第二分辨率格式后的每帧视频图像输出到所述显示屏。
可选地，作为一种可实施的方式，本实施例的装置，第二显示处理模块，具体用于根据图像缩放插值算法，将转换后的每帧视频图像的所述第一分辨率格式转换为与所述显示屏匹配的第二分辨率格式。
可选地，作为一种可实施的方式，所述第二显示处理模块，还用于对从所述第一缓存模块中匀速输出的每帧所述视频图像进行图像画质处理。
可选地，作为一种可实施的方式，还包括：
第二缓存模块，用于依次保存解码后的P2帧视频图像；其中，P2为正整数；
所述第一显示处理模块，具体用于：
获取从所述第二缓存模块中匀速输出的每帧所述视频图像，在所述视频图像的第三分辨率格式与所述第四分辨率格式不匹配时，将所述视频图像的第三分辨率格式转换为所述第四分辨率格式。
可选地，作为一种可实施的方式，所述帧频转换模块，具体用于：
根据预先获取的所述视频图像的第三分辨率格式从转换为第四分辨率格式的视频图像中提取有效像素点，并将所述视频图像的第四分辨率格式转换为与显示屏匹配的第二分辨率格式。
可选地，作为一种可实施的方式，所述解码模块，具体用于：
将解码后的第1帧视频图像的第三分辨率格式通知给帧频转换模块；
对于随后的每帧视频图像，监测视频图像的第三分辨率格式的变化情况，若监测到所述第M帧视频图像的第三分辨率格式与第M-1帧视频图像的第三分辨率格式不同，则将所述第M帧视频图像的第三分辨率格式通知给帧频转换模块，以使所述帧频转换模块在接收到所述第M帧视频图像时已预先获取到所述第M帧视频图像的第三分辨率格式；
其中，M为大于1的正整数。
可选地，作为一种可实施的方式，本实施例的装置，还包括：
监测模块，用于监测用户当前的网络带宽；
所述解码模块，具体用于：
获取与所述当前用户的网络带宽对应的分辨率格式的所述待播放的视频；
对所述待播放的视频进行解码处理，获取所述解码后的视频图像。
可选地，作为一种可实施的方式，本实施例的装置，还包括：
接收模块，用于接收服务器推送的与当前用户的网络带宽对应的分辨率格式的所述待播放的视频；
所述解码模块，具体用于：
对所述待播放的视频进行解码处理，获取所述解码后的视频图像。
需要说明的是，对于装置实施例而言，由于其基本相应于方法实施例，所以相关之处参见方法实施例的部分说明即可。
图7为本发明电视一实施例的结构示意图。如图7所示，本实施例的电视，可以包括：处理器701、存储器702和通信接口703；
其中，存储器702，用于存储程序；具体地，程序可以包括程序代码，所述程序代码包括计算机操作指令。存储器702可能包含随机存取存储器(randomaccessmemory，简称RAM)，也可能还包括非易失性存储器(non-volatilememory)，例如至少一个磁盘存储器。
通信接口703，用于接收信号或数据；
处理器701，用于执行存储器存储的程序，用于执行本发明方法实施例所提供的技术方案，其实现原理和技术效果类似，可参考方法实施例部分的说明，此处不再赘述。
在本发明实施例中，处理器具体可以包括SOC、FRC。
上述实施例中的解码模块、监测模块、格式转换模块、第一显示处理模块、第二显示模块和帧频转换模块可以由处理器实现；
第一缓存模块和第二缓存模块可以由存储器实现；接收模块可以由通信接口实现。
需要说明的是，对于电视实施例而言，由于其基本相应于方法实施例，所以相关之处参见方法实施例的部分说明即可。
本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (13)

1.一种视频播放的处理方法，其特征在于，包括：
获取待播放的视频对应的解码后的视频图像；
若所述待播放的视频的码率或者帧率小于或等于预设值，则在将每帧所述视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式之前，当每帧所述视频图像的分辨率格式与第一分辨率格式不匹配时，将每帧所述视频图像的分辨率格式转换为第一分辨率格式；
其中，转换为第一分辨率格式的视频图像中包括有效像素点和通过有效像素点复制出的像素点；所述有效像素点为转换前的视频图像中的像素点；
若所述待播放的视频的码率或者帧率大于预设值，则在所述视频图像的第三分辨率格式与第四分辨率格式不匹配时，将所述视频图像的第三分辨率格式转换为所述第四分辨率格式；
根据预先获取的所述视频图像的第三分辨率格式，将转换为第四分辨率格式的视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式；
其中，转换为第四分辨率格式的视频图像中包括有效像素点和非有效像素点；所述有效像素点为转换前的视频图像中的像素点。
2.根据权利要求1所述的方法，其特征在于，所述将每帧所述视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式，包括：
根据图像缩放插值算法，将转换后的每帧视频图像的所述第一分辨率格式转换为与所述显示屏匹配的第二分辨率格式。
3.根据权利要求1所述的方法，其特征在于，所述将每帧所述视频图像的分辨率格式转换为第一分辨率格式之后，还包括：
对于转换后的每帧视频图像，将转换为所述第一分辨率格式的P1帧视频图像依次保存在第一缓存模块中；其中，P1为正整数；
所述将每帧所述视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式，包括：
获取从所述缓存模块中匀速输出的每帧所述视频图像，并将所述视频图像的所述第一分辨率格式转化为所述第二分辨率格式；
所述将每帧所述视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式之后，还包括：
将转换为所述第二分辨率格式后的每帧视频图像输出到所述显示屏。
4.根据权利要求1所述的方法，其特征在于，所述将所述视频图像的第三分辨率格式转换为所述第四分辨率格式，包括：
片上系统SOC将所述视频图像的第三分辨率格式转换为所述第四分辨率格式。
5.根据权利要求1所述的方法，其特征在于，获取待播放的视频对应的解码后的视频图像之后，还包括：
对于解码后的每帧视频图像，将解码后的P2帧视频图像依次保存在第二缓存模块中；其中，P2为正整数；
在所述视频图像的第三分辨率格式与第四分辨率格式不匹配时，将所述视频图像的第三分辨率格式转换为所述第四分辨率格式，包括：
获取从所述第二缓存模块中匀速输出的每帧所述视频图像，在所述视频图像的第三分辨率格式与所述第四分辨率格式不匹配时，片上系统SOC将所述视频图像的第三分辨率格式转换为所述第四分辨率格式。
6.根据权利要求1所述的方法，其特征在于，根据预先获取的所述视频图像的第三分辨率格式，将转换为第四分辨率格式的视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式，包括：
所述FRC根据预先获取的所述视频图像的第三分辨率格式从转换为第四分辨率格式的视频图像中提取有效像素点，并将所述视频图像的第四分辨率格式转换为与显示屏匹配的第二分辨率格式。
7.根据权利要求1所述的方法，其特征在于，根据预先获取的所述视频图像的第三分辨率格式，将转换为第四分辨率格式的视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式之前，还包括：
片上系统SOC将解码后的第1帧视频图像的第三分辨率格式通知给帧频转换模块FRC；
对于随后的每帧视频图像，所述SOC监测视频图像的第三分辨率格式的变化情况，若监测到所述第M帧视频图像的第三分辨率格式与第M-1帧视频图像的第三分辨率格式不同，则将所述第M帧视频图像的第三分辨率格式通知给帧频转换模块FRC，以使所述FRC在接收到所述第M帧视频图像时已预先获取到所述第M帧视频图像的第三分辨率格式；
其中，M为大于1的正整数。
8.根据权利要求1-7任一项所述的方法，其特征在于，获取待播放的视频对应的解码后的视频图像之前，还包括：
监测当前用户的网络带宽；
则获取待播放的视频对应的解码后的视频图像，包括：
获取与所述当前用户的网络带宽对应的分辨率格式的所述待播放的视频；
对所述待播放的视频进行解码处理，获取所述解码后的视频图像。
9.根据权利要求1-7任一项所述的方法，其特征在于，所述获取待播放的视频对应的解码后的视频图像，包括：
接收服务器推送的与当前用户的网络带宽对应的分辨率格式的所述待播放的视频；
对所述待播放的视频进行解码处理，获取所述解码后的视频图像。
10.一种视频播放的处理装置，其特征在于，包括：
解码模块，用于获取待播放的视频对应的解码后的视频图像；
格式转换模块，用于若所述待播放的视频的码率或者帧率小于或等于预设值，则在将每帧所述视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式之前，当每帧所述视频图像的分辨率格式与第一分辨率格式不匹配时，将每帧所述视频图像的分辨率格式转换为所述第一分辨率格式；
其中，转换为第一分辨率格式的视频图像中包括有效像素点和通过有效像素点复制出的像素点；所述有效像素点为转换前的视频图像中的像素点；
第一显示处理模块，用于若所述待播放的视频的码率或者帧率大于预设值，则在所述视频图像的第三分辨率格式与第四分辨率格式不匹配时，将所述视频图像的第三分辨率格式转换为所述第四分辨率格式；
帧频转换模块，用于根据预先获取的所述视频图像的第三分辨率格式，将转换为第四分辨率格式的视频图像的分辨率格式转换为与显示屏匹配的第二分辨率格式；
其中，转换为第四分辨率格式的视频图像中包括有效像素点和非有效像素点；所述有效像素点为转换前的视频图像中的像素点。
11.根据权利要求10所述的装置，其特征在于，还包括：
第一缓存模块，用于依次保存转换为所述第一分辨率格式的P1帧视频图像；其中，P1为正整数；
第二显示处理模块，用于：
获取从所述第一缓存模块中匀速输出的每帧所述视频图像，并将所述视频图像的所述第一分辨率格式转化为所述第二分辨率格式；
将转换为所述第二分辨率格式后的每帧视频图像输出到所述显示屏。
12.根据权利要求10所述的装置，其特征在于，还包括：
第二缓存模块，用于依次保存解码后的P2帧视频图像；其中，P2为正整数；
所述第一显示处理模块，具体用于：
获取从所述第二缓存模块中匀速输出的每帧所述视频图像，在所述视频图像的第三分辨率格式与所述第四分辨率格式不匹配时，将所述视频图像的第三分辨率格式转换为所述第四分辨率格式。
13.根据权利要求10或12所述的装置，其特征在于，所述帧频转换模块，具体用于：
根据预先获取的所述视频图像的第三分辨率格式从转换为第四分辨率格式的视频图像中提取有效像素点，并将所述视频图像的第四分辨率格式转换为与显示屏匹配的第二分辨率格式。
CN201610158743.0A 2016-03-18 2016-03-18 视频播放的处理方法及装置 Active CN105744358B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610158743.0A CN105744358B (zh) 2016-03-18 2016-03-18 视频播放的处理方法及装置
CN201810668619.8A CN108833975B (zh) 2016-03-18 2016-03-18 视频播放的处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610158743.0A CN105744358B (zh) 2016-03-18 2016-03-18 视频播放的处理方法及装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201810668619.8A Division CN108833975B (zh) 2016-03-18 2016-03-18 视频播放的处理方法及装置

Publications (2)

Publication Number Publication Date
CN105744358A true CN105744358A (zh) 2016-07-06
CN105744358B CN105744358B (zh) 2018-09-14

Family

ID=56250922

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201610158743.0A Active CN105744358B (zh) 2016-03-18 2016-03-18 视频播放的处理方法及装置
CN201810668619.8A Active CN108833975B (zh) 2016-03-18 2016-03-18 视频播放的处理方法及装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201810668619.8A Active CN108833975B (zh) 2016-03-18 2016-03-18 视频播放的处理方法及装置

Country Status (1)

Country Link
CN (2) CN105744358B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106534840A (zh) * 2016-10-31 2017-03-22 青岛海信电器股份有限公司 视频信号的检测方法和装置
CN106909533A (zh) * 2016-11-14 2017-06-30 上海仪电鑫森科技发展有限公司 适用于多平台的考试编辑系统
CN106970770A (zh) * 2017-03-31 2017-07-21 联想(北京)有限公司 一种显示调整方法、电子设备及装置
TWI629661B (zh) * 2017-10-17 2018-07-11 冠捷投資有限公司 Overclocking display method and display
CN108573477A (zh) * 2018-03-14 2018-09-25 深圳怡化电脑股份有限公司 消除图像摩尔纹的方法、系统及终端设备
CN108874945A (zh) * 2018-06-04 2018-11-23 联想(北京)有限公司 一种数据处理方法及电子设备
CN109068172A (zh) * 2018-08-01 2018-12-21 威创集团股份有限公司 处理器开窗方法、装置、设备及可读存储介质
CN110636372A (zh) * 2019-10-08 2019-12-31 未来电视有限公司 视频解码方法、视频解码器的初始化方法以及装置
CN111479154A (zh) * 2020-04-03 2020-07-31 海信视像科技股份有限公司 音画同步的实现设备、方法及计算机可读存储介质
CN112637656A (zh) * 2020-12-15 2021-04-09 海宁奕斯伟集成电路设计有限公司 通道配置方法、装置、电子设备以及可读存储介质
CN112752152A (zh) * 2020-12-28 2021-05-04 海信视像科技股份有限公司 投送视频播放方法及显示设备
US11326891B2 (en) * 2018-08-21 2022-05-10 Samsung Electronics Co., Ltd. Method for providing image to vehicle and electronic device therefor

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112449229B (zh) * 2019-09-04 2022-01-28 海信视像科技股份有限公司 一种音画同步处理方法及显示设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030090592A1 (en) * 2001-11-13 2003-05-15 Callway Edward G. System for improved ratiometric expansion and method thereof
US20050134735A1 (en) * 2003-12-23 2005-06-23 Genesis Microchip Inc. Adaptive display controller
CN1925544A (zh) * 2005-08-31 2007-03-07 松下电器产业株式会社 图像数据处理装置
CN101883277A (zh) * 2009-05-08 2010-11-10 尚福兵 低分辨率视频文件播放方法及装置
CN104410904A (zh) * 2014-12-25 2015-03-11 安科智慧城市技术（中国）有限公司 视频播放方法和装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007066012A (ja) * 2005-08-31 2007-03-15 Toshiba Corp 映像描画装置、方法およびプログラム
JP5089214B2 (ja) * 2007-03-27 2012-12-05 キヤノン株式会社 画像処理方法及びその装置、コンピュータプログラム及び記憶媒体
JP4435251B2 (ja) * 2008-08-29 2010-03-17 株式会社東芝 映像表示装置、映像再生装置、映像表示方法および映像再生方法
US8681866B1 (en) * 2011-04-28 2014-03-25 Google Inc. Method and apparatus for encoding video by downsampling frame resolution
CN103489173B (zh) * 2013-09-23 2016-08-17 百年金海科技有限公司 一种视频图像超分辨率重建方法
CN103596015B (zh) * 2013-11-05 2017-04-05 广东威创视讯科技股份有限公司 图像处理方法和系统
CN110688081B (zh) * 2014-04-28 2024-05-17 华为终端有限公司 一种在屏幕上显示数据的方法及显示控制装置
CN104135637A (zh) * 2014-07-01 2014-11-05 宁波摩米创新工场电子科技有限公司 低分辨率转换成高分辨率的图像处理方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030090592A1 (en) * 2001-11-13 2003-05-15 Callway Edward G. System for improved ratiometric expansion and method thereof
US20050134735A1 (en) * 2003-12-23 2005-06-23 Genesis Microchip Inc. Adaptive display controller
CN1925544A (zh) * 2005-08-31 2007-03-07 松下电器产业株式会社 图像数据处理装置
CN101883277A (zh) * 2009-05-08 2010-11-10 尚福兵 低分辨率视频文件播放方法及装置
CN104410904A (zh) * 2014-12-25 2015-03-11 安科智慧城市技术（中国）有限公司 视频播放方法和装置

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106534840B (zh) * 2016-10-31 2018-10-26 青岛海信电器股份有限公司 视频信号的检测方法和装置
CN106534840A (zh) * 2016-10-31 2017-03-22 青岛海信电器股份有限公司 视频信号的检测方法和装置
CN106909533A (zh) * 2016-11-14 2017-06-30 上海仪电鑫森科技发展有限公司 适用于多平台的考试编辑系统
CN106970770B (zh) * 2017-03-31 2020-08-25 联想(北京)有限公司 一种显示调整方法、电子设备及装置
CN106970770A (zh) * 2017-03-31 2017-07-21 联想(北京)有限公司 一种显示调整方法、电子设备及装置
TWI629661B (zh) * 2017-10-17 2018-07-11 冠捷投資有限公司 Overclocking display method and display
CN108573477A (zh) * 2018-03-14 2018-09-25 深圳怡化电脑股份有限公司 消除图像摩尔纹的方法、系统及终端设备
CN108874945A (zh) * 2018-06-04 2018-11-23 联想(北京)有限公司 一种数据处理方法及电子设备
CN109068172A (zh) * 2018-08-01 2018-12-21 威创集团股份有限公司 处理器开窗方法、装置、设备及可读存储介质
US11326891B2 (en) * 2018-08-21 2022-05-10 Samsung Electronics Co., Ltd. Method for providing image to vehicle and electronic device therefor
CN110636372A (zh) * 2019-10-08 2019-12-31 未来电视有限公司 视频解码方法、视频解码器的初始化方法以及装置
CN111479154A (zh) * 2020-04-03 2020-07-31 海信视像科技股份有限公司 音画同步的实现设备、方法及计算机可读存储介质
CN112637656A (zh) * 2020-12-15 2021-04-09 海宁奕斯伟集成电路设计有限公司 通道配置方法、装置、电子设备以及可读存储介质
CN112752152A (zh) * 2020-12-28 2021-05-04 海信视像科技股份有限公司 投送视频播放方法及显示设备
CN112752152B (zh) * 2020-12-28 2022-11-25 海信视像科技股份有限公司 投送视频播放方法及显示设备

Also Published As

Publication number Publication date
CN108833975B (zh) 2021-05-18
CN108833975A (zh) 2018-11-16
CN105744358B (zh) 2018-09-14

Similar Documents

Publication Publication Date Title
CN105744358A (zh) 视频播放的处理方法及装置
TWI529656B (zh) Image display system and image processing method
CN105681720B (zh) 视频播放的处理方法及装置
US20110096146A1 (en) Method and system for response time compensation for 3D video processing
US8072443B2 (en) Techniques to switch between video display modes
CN110868625A (zh) 一种视频播放方法、装置、电子设备及存储介质
US20170118442A1 (en) Apparatus and method for converting a frame rate
KR101742182B1 (ko) 영상 데이터 처리 방법, 및 이를 수행하는 표시 장치
EP1607934A2 (en) Blur reduction in liquid crystal displays by frame rate control
US20120256962A1 (en) Video Processing Apparatus and Method for Extending the Vertical Blanking Interval
JP2012182673A (ja) 映像表示装置及び映像処理方法
CN200983644Y (zh) 多屏显示拼接控制装置
CN101651813A (zh) 驱动显示装置的方法以及使用该方法的显示装置驱动电路
CN105812923B (zh) 基于视频点播的播放处理方法及装置
US6919902B2 (en) Method and apparatus for fetching pixel data from memory
TW201349856A (zh) 影像顯示系統與影像處理方法
CN113596450B (zh) 视频图像压缩方法、解压缩方法、处理方法及装置、设备
CN103108148A (zh) 视频帧的插帧方法以及信息处理设备
CN202285412U (zh) 低帧率传输或运动图像闪烁消除系统
JP2011040004A (ja) 画像処理装置及び画像処理方法
CN108965764B (zh) 图像处理方法及电子设备
CN111295703A (zh) 影像处理装置、显示装置、影像处理方法、控制程序、以及记录介质
KR101642841B1 (ko) 재생성 클럭신호 기반 멀티비전 시스템 용 영상신호 지터 제거 장치 및 방법
CN112468756B (zh) 一种视频信号无失帧显示方法及显示设备
WO2021042661A1 (zh) 一种显示设备及图像输出方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 266100 Zhuzhou Road, Laoshan District, Shandong, No. 151, No.

Patentee after: Hisense Video Technology Co.,Ltd.

Address before: 266100 Zhuzhou Road, Laoshan District, Shandong, No. 151, No.

Patentee before: HISENSE ELECTRIC Co.,Ltd.

CP01 Change in the name or title of a patent holder