CN112055231A - 视频解码方法、解码装置、解码器及电子设备 - Google Patents

视频解码方法、解码装置、解码器及电子设备 Download PDF

Info

Publication number
CN112055231A
CN112055231A CN202010899503.2A CN202010899503A CN112055231A CN 112055231 A CN112055231 A CN 112055231A CN 202010899503 A CN202010899503 A CN 202010899503A CN 112055231 A CN112055231 A CN 112055231A
Authority
CN
China
Prior art keywords
image
knowledge
random access
frame
decoded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010899503.2A
Other languages
English (en)
Other versions
CN112055231B (zh
Inventor
曾飞洋
林聚财
江东
殷俊
方诚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN202010899503.2A priority Critical patent/CN112055231B/zh
Publication of CN112055231A publication Critical patent/CN112055231A/zh
Application granted granted Critical
Publication of CN112055231B publication Critical patent/CN112055231B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请属于编解码技术领域,特别是涉及视频解码方法、解码装置、解码器及电子设备,方法包括:获得新解码的知识图像;判断知识图像缓冲区是否填满预设数量的历史知识图像;若是,移除知识图像缓冲区中的至少部分历史知识图像;添加新解码的知识图像于知识图像缓冲区。本申请实施例的视频解码方法通过建立知识图像管理机制,确定知识图像解码缓冲区的大小和知识图像的在缓冲区的进出方法。确定的管理机制使得知识图像的解码过程与主位流的解码过程可以集成到一个解码器中,提高知识图像在实现过程中的确定性。

Description

视频解码方法、解码装置、解码器及电子设备
技术领域
本申请属于编解码技术领域,特别是涉及视频解码方法、解码装置、解码器及电子设备。
背景技术
视频图像包含着大量的数据,通常需要对视频像素数据(RGB、YUV等)进行压缩编码后,才会对其进行传输或存储。压缩编码后的数据称之为视频码流,视频码流通过有线或者无线网络传输至用户端,再进行解码观看。
然而,现有解码技术,尤其是AVS3技术中,知识图像解码后如何保存及更新不受编码标准的约束,完全依靠用户根据系统层信息来管理,造成了知识图像在实现过程中的存在不确定性,影响解码过程。
发明内容
本申请主要解决的技术问题是知识图像在实现过程中的不确定性,提供一种视频解码方法、解码装置、解码器及电子设备,规范知识图像管理,提高知识图像在实现过程中的确定性。
为解决上述技术问题,本申请采用的一个技术方案是一种视频解码方法,方法包括:获得新解码的知识图像;判断知识图像缓冲区是否填满预设数量的历史知识图像;若是,移除知识图像缓冲区中的至少部分历史知识图像;添加新解码的知识图像于知识图像缓冲区。
本申请实施例的有益效果是:区别于现有技术,本申请实施例的视频解码方法,其中知识图像缓冲区可以填满预设数量的知识图像,在新解码的知识图像都尝试移入知识图像缓冲区,在知识图像缓冲区中填满预设数量时,可以移除知识图像缓冲区中已缓存的历史知识图像,进而可以移入新解码的知识图像,以确保知识图像缓冲区中缓冲的知识图像的数量在预设数量内,可以防止知识图像缓冲区中的知识图像无限增加;本申请实施例通过建立知识图像管理机制,确定知识图像解码缓冲区的大小和知识图像在缓冲区进出的方法;确定的管理机制使得知识图像的解码过程与主位流的解码过程可以集成到一个解码器中,提高知识图像在实现过程中的确定性,改善知识图像在实现过程中不确定所在成的系统层的工作开销较大,降低系统层的工作开销。
此外,本申请还包括第二种技术方案,一种视频解码装置包括获取单元、判断单元、移除单元和添加单元,其中,获取单元用于获得新解码的知识图像;判断单元用于判断知识图像缓冲区是否填满预设数量的历史知识图像;移除单元用于知识图像缓冲区填满预设数量的历史知识图像时,移除知识图像缓冲区中的至少部分历史知识图像;添加单元添加新解码的知识图像于知识图像缓冲区。
此外,本申请还包括第三种技术方案,一种视频解码方法,所述方法包括:
从图像序列码流的序列头中第一帧参考知识图像帧的图像头获取所述图像序列中所有参考知识图像帧所要参考的知识图像索引;
解析所述知识图像索引所对应的知识图像码流,获得知识图像。
此外,本申请还包括第四种技术方案,一种视频解码装置,包括获取单元和解析单元,其中,获取单元用于从图像序列码流的序列头中第一帧参考知识图像帧的图像头获取所述图像序列中所有参考知识图像帧所要参考的知识图像索引;解析单元用于解析所述知识图像索引所对应的知识图像码流,获得知识图像。
此外,本申请还包括第五种技术方案,一种视频解码方法,包括:从视频码流的当前图像帧获得起始码;从起始码中确定当前图像帧的类型为二级随机接入图像,二级随机接入图像只以一帧一级随机接入图像作为参考图像可以进行解码的图像,一级随机接入图像是可以独立解码的图像;参考当前图像帧所参考的一级随机接入图像,以解析当前图像帧。
此外,本申请还包括第六种技术方案,一种视频解码方法,包括获取单元、确定单元和参考单元;其中,获取单元用于从视频码流的当前图像帧获得起始码;确定单元用于从起始码中确定当前图像帧的类型为二级随机接入图像,二级随机接入图像只以一帧一级随机接入图像作为参考图像可以进行解码的图像,一级随机接入图像是可以独立解码的图像;参考单元用于参考当前图像帧所参考的一级随机接入图像,以解析当前图像帧。
此外,本申请还包括第七种技术方案,一种视频解码方法包括:从视频码流的当前图像帧获得起始码;确定当前图像帧的类型为非二级随机接入图像及非一级随机接入图像,以及确定当前图像帧的显示顺序在二级随机接入图像之后;其中,二级随机接入图像只以一帧一级随机接入图像作为参考图像可以进行解码的图像,一级随机接入图像是可以独立解码的图像;确定当前图像帧的参考图像为选自于最近的二级随机接入图像,或最近的二级随机接入图像与当前图像帧之间的图像帧,或最近的二级随机接入图像所参考的一级图像;参考参考图像以解析当前图像帧。
此外,本申请还包括第八种技术方案,一种视频解码装置,包括获取单元、第一确定单元、第二确定单元和参考单元,其中,获取单元用于从视频码流的当前图像帧获得起始码;第一确定单元用于确定当前图像帧的类型为非二级随机接入图像及非一级随机接入图像、以及确定当前图像帧的显示顺序在二级随机接入图像之后;其中,二级随机接入图像只以一帧一级随机接入图像作为参考图像可以进行解码的图像,一级随机接入图像是可以独立解码的图像;第二确定单元用于确定当前图像帧的参考图像为选自于最近的二级随机接入图像,或最近的二级随机接入图像与当前图像帧之间的图像帧,或最近的二级随机接入图像所参考的一级图像;参考单元用于参考当前图像帧的参考图像以解析当前图像帧。
此外,本申请还包括第九种技术方案,一种解码器,包括存储器和处理器,处理器用于调用存储器中所存储的计算机程序以执行上述视频解码方法。
此外,本申请还包括第十种技术方案,一种存储介质,存储介质存储有计算机程序,计算机程序被执行时实现上述视频解码方法。
此外,本申请还包括第十一种技术方案,一种电子设备,包括上述解码器。
附图说明
图1是本申请视频解码方法第一实施例的流程示意图;
图2是本申请视频解码方法第二实施例的流程示意图;
图3是本申请知识图像缓冲区第一实施例结构框图;
图4是本申请视频解码方法第三实施例的流程示意图;
图5是本申请视频解码方法第四实施例的流程示意图;
图6是本申请知识图像缓冲区第二实施例结构框图;
图7a是本申请移除知识图像缓冲区中的移除标志信息标志的可以被移除的历史知识图像第一实施例的流程示意图;
图7b是本申请移除知识图像缓冲区中的移除标志信息标志的可以被移除的历史知识图像第二实施例的流程示意图;
图8a是本申请视频解码方法第五实施例的流程示意图;
图8b是本申请图像序列参考关系一实施例示意图;
图8c是本申请视频解码方法第六实施例的流程示意图;
图8d是本申请视频解码方法第七实施例的流程示意图;
图9是本申请视频解码方法第五实施例的流程示意图;
图10是本申请视频解码方法第六实施例的流程示意图;
图11是本申请视频序列的图像帧参考关系一实施例示意图;
图12是本申请视频解码装置第一实施例的结构示意图;
图13a是本申请视频解码装置第二实施例的结构示意图;
图13b是本申请视频解码装置第三实施例的结构示意图;
图14是本申请视频解码装置第四实施例的结构示意图;
图15a本申请解码器一实施例的结构示意图;
图15b本申请解码器另一实施例的结构示意图;
图16是本申请存储介质一实施例的结构示意图;
图17是本申请电子设备一实施例的结构示意图。
具体实施方式
为使本申请的目的、技术方案及效果更加清楚、明确,以下参照附图并举实施例对本申请进一步详细说明。
本申请中的术语“第一”、“第二”、“第三”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”、“第三”的特征可以明示或者隐含地包括至少一个该特征。本申请的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,在不冲突的情况下,本文所描述的实施例可以与其它实施例相结合。
本申请实施例提供一种视频解码方法,如图1所示,包括:
S110:获得新解码的知识图像。
本申请实施例中,知识图像是可以进行独立解码的图像,知识图像可以作为参考帧,不应用于显示,知识图像构成的码流为知识位流,用于显示的视频帧的码流为主位流,在对含有主位流和知识位流的视频码流解码过程中,解码至知识位流时,可以获得新解码的知识图像。
S120:判断知识图像缓冲区是否填满预设数量的历史知识图像。
本申请实施例中,知识图像缓冲区可以用于缓存解码知识图像,当获得新解码的知识图像时,需要判断知识图像缓冲区是否填满,若知识图像缓冲区未填满,则新解码的知识图像可以直接填入于知识图像缓冲区中,直至知识图像缓冲区填满为止。本申请实施例中的预设数量为设定的大于0的整数,例如,预设数量为4、15等。在知识图像缓冲区未填满时,也可以移除知识图像缓冲区中不被参考的历史知识图像。
具体地,本申请实施例中,可以通过判断知识图像缓冲区中缓存的历史知识图像的数量,并通过将缓存的历史知识图像的数量与预设数量进行比较,以判断知识图像缓冲区是否填满。
本申请实施例中,历史知识图像在知识图像缓冲区中的通过知识图像索引标识区分知识图像。例如,本申请实施例的知识图像缓冲区可以缓存预设数量为4帧的历史知识图像,如图3所示,知识图像缓冲区中已经存在4帧历史知识图像L1、L2、L3和L4,则其分别表示索引为1、2、3、4的历史知识图像,则确定知识图像缓冲区填满预设数量的历史知识图像。
若是,则执行S130:移除知识图像缓冲区中的至少部分历史知识图像。
当确定知识图像缓冲区填满时,通过移除知识图像缓冲区中的部分或全部历史知识图像,例如,移除一个历史知识图像L1或一个历史知识图像L3,或同时移除L1、L2、L3和L4,以便于知识图像缓冲区可以移入新解码的知识图像。
S140:添加新解码的知识图像于知识图像缓冲区中。
本申请实施例中通过将新解码的知识图像L5添加于知识图像缓冲区中,此时,可以保证知识图像缓冲区中的历史知识图像和新解码的知识图像的数量和小于等于预设数量,可以防止知识图像缓冲区中的知识图像无限增加。
本申请实施例的知识图像缓冲区可以填满预设数量的知识图像,在新解码的知识图像都尝试移入知识图像缓冲区,在知识图像缓冲区中填满预设数量时,可以移除知识图像缓冲区中已缓存的历史知识图像,进而可以移入新解码的知识图像,以确保知识图像缓冲区中缓存的知识图像的数量在预设数量内,可以防止知识图像缓冲区中的知识图像无限增加,本申请实施例通过建立知识图像管理机制,确定了知识图像解码缓冲区的大小和知识图像的在缓冲区的进出方法。确定的管理机制使得知识图像的解码过程与主位流的解码过程可以集成到一个解码器中,提高知识图像在实现过程中的确定性,改善知识图像在实现过程中不确定所在成的系统层的工作开销较大,降低系统层的工作开销。
具体的,如图2所示,本申请一实施例中,S110获得新解码的知识图像之前包括:
S100:从历史知识图像的视频码流的序列头中获取知识图像缓冲区预设数量标识。
本申请实施例,在含有历史知识图像的视频码流中,即含有主位流和知识位流的视频码流解,其在编码过程历史知识图像的视频码流的序列头中已经存储有知识图像缓冲区预设数量标识,即用于表示知识图像缓冲区可以容纳预设数量的知识图像。本申请实施例中,从历史知识图像的视频码流的序列头中获取知识图像缓冲区预设数量标识,即获取知识图像缓冲区可以存储预设数量的知识图像。
S101:以知识图像缓冲区预设数量标识定义的窗口大小为缓冲区滑动窗口大小,建立知识图像缓冲区。
本申请实施例中,知识图像缓冲区定义滑动窗口,预设数量标识用于标识知识图像缓冲区中滑动窗口大小,例如预设数量为N,则滑动窗口的大小为N,则建立的知识图像缓冲区中最多只能存储N帧知识图像。
如图4所示,本申请一实施例中,移除知识图像缓冲区中的至少部分历史知识图像,包括:
S230:移除知识图像缓冲区中生存周期最长的历史知识图像。
本申请实施例中,知识图像缓冲区生存周期最长的历史知识图像不再被作为参考帧的概率较大,可以移除生存周期最长的历史知识图像,以使得知识图像缓冲区呈现未满的状态。
具体地,本申请实施例中,知识图像缓冲区中的历史知识图像按照生存周期的长度排序,依次排布于知识图像缓冲区的滑动窗口中,例如,如图3所示,本申请实施例中的滑动窗口大小为4,且已存储4帧历史知识图像L1、L2、L3和L4,4帧历史知识图像L1、L2、L3和L4按照生存周期的长度依次排序,其中历史知识图像L1的生存周期最长,历史知识图像L4的生存周期最短。
添加新解码的知识图像于知识图像缓冲区中包括:
S240:按照知识图像生存周期的长度排序,将新解码的知识图像添加到知识图像缓冲区,并使得新解码的知识图像紧邻于滑动窗口中生存周期最短的历史知识图像,以使得添加新解码的知识图像后的知识图像按照生存周期长度排序。
本申请实施例中,新解码的知识图像L5,在添加新解码的知识图像时,将新解码的知识图像添加至知识图像缓冲区中时,使得新解码的知识图像L5紧邻滑动窗口中生存周期最短的历史知识图像L4,使得知识图像缓冲区中的历史知识图像和新解码的知识图像L2、L3、L4和L5按照生存周期的长度依次排序,以便于后期获得新解码的知识图像时,添加和删除历史知识图像。
具体地,本申请实施例的视频解码方法包括:
S200:从历史知识图像的视频码流的序列头中获取知识图像缓冲区预设数量标识。
S201:以知识图像缓冲区预设数量标识定义的窗口大小为缓冲区滑动窗口大小,建立知识图像缓冲区。
S210:获得新解码的知识图像。
S220:判断知识图像缓冲区是否填满预设数量的历史知识图像。
本申请实施例中,知识图像缓冲区可以用于缓存解码知识图像,当获得新解码的知识图像时,需要判断知识图像缓冲区是否填满,若知识图像缓冲区未填满,则新解码的知识图像可以直接填入于知识图像缓冲区中,直至知识图像缓冲区填满为止。本申请实施例中的预设数量为设定的大于1的整数,例如,预设数量为4、15等。
具体地,本申请实施例中,可以通过判断知识图像缓冲区中缓存的历史知识图像的数量,并通过将缓存的历史知识图像的数量与预设数量进行比较,以判断知识图像缓冲区是否填满。
本申请实施例中,历史知识图像在知识图像缓冲区中的通过知识图像索引标识区分知识图像。例如,本申请实施例的知识图像缓冲区可以缓存预设数量为4帧的历史知识图像,如图3所示,知识图像缓冲区中已经存在4帧历史知识图像L1、L2、L3和L4,则其分别表示索引为1、2、3、4的历史知识图像,则确定知识图像缓冲区填满预设数量的历史知识图像。
在另一实施例中,可以通过判断知识图像缓冲区中是否有空的窗口,若有空的窗口,则确定知识图像缓冲区未填满;若无空的窗口,则确定知识图像缓冲区已填满。
若是,S230:移除知识图像缓冲区中生存周期最长的历史知识图像。
S240:按照知识图像生存周期的长度排序,将新解码的知识图像添加到知识图像缓冲区,并使得新解码的知识图像紧邻于滑动窗口中生存周期最短的历史知识图像,以使得添加新解码的知识图像后的知识图像按照生存周期长度排序。
其中,本申请实施例中,如图1所示,历史知识图像的视频码流的序列头中新增用于标识知识图像缓存滑动窗口大小的句法可命名为library_picture_buffer_size等。该句法所代表的值应为大于等于0的无符号整数。具体见表1所示的序列头定义的句法,其中,library_picture_buffer_size表示最大知识图像缓冲区大小,表1中,最大知识图像缓冲区大小为4位无符号整数。表示解码当前位流所需要的最大的知识图像缓冲区的大小(以单幅知识图像存储缓冲区大小为单位),library_picture_buffer_size的值应大于等于0,小于15。
表1序列头定义
Figure BDA0002659336290000071
如图5所示,本申请另一实施例中,获得新解码的知识图像之后包括:
S311:从新解码的知识图像中的帧内图像头中获取移除标志信息,移除标志信息用于标识知识图像缓冲区中的可以被移除的历史知识图像。
移除知识图像缓冲区中的至少部分知识图像,包括:
S330:移除知识图像缓冲区中的移除标志信息标志的可以被移除的历史知识图像。
具体的,本申请实施例的视频解码方法,如图5所示,包括:
S300:从历史知识图像的视频码流的序列头中获取知识图像缓冲区预设数量标识。
本申请实施例,在含有历史知识图像的视频码流中,即含有主位流和知识位流的视频码流解,其在编码过程中历史知识图像的视频码流的序列头中已经存储有知识图像缓冲区预设数量标识,即用于表示知识图像缓冲区可以容纳预设数量的知识图像。本申请实施例中,从历史知识图像的视频码流的序列头中获取知识图像缓冲区预设数量标识,即获取知识图像缓冲区可以存储预设数量的知识图像。本申请实施例中知识图像缓冲区中预设数量标识用于表示最多可以存储N帧知识图像。
S301:以知识图像缓冲区预设数量标识定义的窗口大小为缓冲区滑动窗口大小,建立知识图像缓冲区。
本申请实施例中,知识图像缓冲区定义滑动窗口,预设数量标识用于标识知识图像缓冲区中滑动窗口大小,如图6所示,例如预设数量为N,则滑动窗口的大小为N,建立的知识图像缓冲区10中最多只能存储N帧知识图像。更为具体地,本申请实施例中,N=3,则建立的知识图像缓冲区10中最多只能存储3帧知识图像。
S310:获得新解码的知识图像。
本申请实施例中,知识图像是可以进行独立解码的图像,知识图像可以作为参考图像,不应用于显示,知识图像构成的码流为知识位流,用于显示的视频帧的码流为主位流,在对含有主位流和知识位流的视频码流解码过程中,解码至知识位流时,可以获得新解码的知识图像。例如新解码的知识图像L5,其中,5表示新解码的知识图像的索引。
S311:从新解码的知识图像中的帧内图像头中获取移除标志信息,移除标志信息用于标识知识图像缓冲区10中的可以被移除的历史知识图像。
例如,本申请实施例中,新解码的知识图像L5的帧内图像头中有移除标志信息,例如,移除标志信息可以表示历史知识图像信息已不被参考。本申请实施例中,移除标志信息是可以移除的历史知识图像索引,或不可以被移除的历史知识图像索引。若移除标志信息标志不可以被移除的历史知识图像索引,则使可以确定知识图像缓冲区10中要保留的可以被参考的知识图像索引,从而可以确定不可以被移除的历史知识图像索引。
例如本申请实施例中,在新解码的帧内图像头中增加句法标志,该句法标志用于标识移除标志信息,用于标识知识图像缓存中的哪些知识图像不再被参考。例如移除标志信息标志可以移除的历史知识图像索引。
具体的,本申请实施例中知识图像缓冲区10缓存有历史知识图像L2、L3和L4,其知识图像索引分别为2、3、4;本申请实施例中,移除标志信息是可以移除的历史知识图像索引,例如是3,表示历史知识图像L3可以被移除。在另一实施例中,移除标志信息标志可以移除的历史知识图像索引为2和3,表示历史知识图像L2和L3可以被移除。
在其他实施例移除标志信息是不可以移除的历史知识图像索引,例如是3,表示历史知识图像L3不可以被移除,则L2和L4可以被移除。
S320:判断知识图像缓冲区10是否填满预设数量的历史知识图像。
本申请实施例中,知识图像缓冲区10可以用于缓存解码知识图像,当获得新解码的知识图像时,需要判断知识图像缓冲区10是否填满,若知识图像缓冲区10未填满,则新解码的知识图像可以直接填入于知识图像缓冲区10中,直至知识图像缓冲区10填满为止。本申请实施例中的预设数量为设定的大于0的整数,例如,预设数量为3等。
具体地,本申请实施例中,可以通过判断知识图像缓冲区10中缓存的历史知识图像的数量,并通过将缓存的历史知识图像的数量与预设数量进行比较,以判断知识图像缓冲区10是否填满。
本申请实施例中,历史知识图像在知识图像缓冲区10中的通过知识图像索引标识区分知识图像。例如,本申请实施例的知识图像缓冲区10可以缓存预设数量为3帧的历史知识图像,如图6所示,知识图像缓冲区10中已经存在3帧历史知识图像L2、L3和L4,则其分别表示索引为2、3、4的历史知识图像,则确定知识图像缓冲区10填满预设数量的历史知识图像。
若是,则S330:移除知识图像缓冲区10中的移除标志信息标志的可以被移除的历史知识图像。
如图5所示,本申请实施例中,移除标志信息表示历史知识图像L3可以被移除。则可以依据历史知识图像索引3移除已不被参考的历史知识图像。
在另一实施例中,移除知识图像缓冲区10中的移除标志信息标志的可以被移除的至少两个历史知识图像;移除标志信息标志可以移除的历史知识图像索引为2和3,表示历史知识图像L2和L3可以被移除。则移除知识图像缓冲区10中的移除标志信息标志的可以被移除的至少两个历史知识图像;同时移除历史知识图像L2和L3,使得形成知识图像缓冲区10形成未满的状态。
S340:添加新解码的知识图像于知识图像缓冲区10中。
本申请实施例中,可以将新解码的知识图像L5移入知识图像缓冲区10中,移入的新解码的知识图像与历史知识图像可以随意排序于知识图像缓冲区10的滑动窗口,例如,本申请实施例中,移除历史知识图像L3,则可以将新解码的知识图像L5移入L3所在窗口,使得L5位于L2和L4之间;也可以置于L4之后,形成L2、L4、L5的排序。本申请实施例中,对添加的新解码的知识图像与历史知识图像的排序并不做具体限定,也可以随意排序。
如图7a所示,在本申请一实施例中,S330移除知识图像缓冲区中的移除标志信息标志的可以被移除的历史知识图像,包括:
S331:依据移除标注信息中的索引信息,确定知识图像缓冲区中可以被移除的历史知识图像。
例如,移除标志信息表示历史知识图像L3可以被移除。则可以依据历史知识图像索引信息3,确定知识图像缓冲区中可以被移除的历史知识图像L3。
S332:移除可以被移除的历史知识图像。
移除可以被移除的历史知识图像L2即可以形成知识图像缓冲区未满状态。
如图7b所示,在本申请另一实施例中,S331依据移除标注信息中的索引信息,确定知识图像缓冲区中可以被移除的知识图像包括:
S3311:计算新解码的知识图像的图像索引与可以被移除的历史知识图像的图像索引的差值。
本申请实施例中,通过计算新解码知识图像的图像索引信息与可以被移除的历史知识图像的图像索引的差值,使得计算出的差值在一相对稳定的范围内,同时计算出的差值相对较小,所占用的字节较小。例如,在一实施例中,新解码的知识图像L203的图像索引为203,可以被移除的历史知识图像L200的图像索引为200,则新解码的知识图像L203的图像索引与可以被移除的历史知识图像L200的图像索引的差值为3,占用两个字节。若直接根据以被移除的历史知识图像L200的图像索引200进行移除历史知识图像时,所占用八个字节。
S3312:依据新解码的知识图像的图像索引和差值,将可以被移除的历史知识图像移除于知识图像缓冲区。
本申请实施例通过新解码的知识图像L203的图像索引203和差值3,可以确定知识图像缓冲区中可以被移除的历史知识图像L200的图像索引200,从而可以移除可以被移除的历史知识图像,即可以移除历史知识图像L200。
如图8a所示,本申请一实施例实施例的视频解码方法,视频解码方法包括:
S610:从图像序列码流的序列头中第一帧参考知识图像帧(RL图像)的图像头获取图像序列中所有参考知识图像帧(RL图像)所要参考的知识图像索引。
本申请实施例中,图像序列码流对应主节流,本申请实施例的在序列头中第一帧参考知识图像帧的图像头中存储有该图像序列中所有的参考知识图像帧,本申请实施例通过在第一帧的参考知识图像帧的图像头中获取所有图像序列中所有参考知识图像帧(RL图像)所要参考的知识图像索引,以避免每一帧都要判断是否要解码新的知识图像。
如图8b所示,图像序列中依次包括的图像帧为RL1、若干P图像、RL2、若干P图像和RL3。
其中,RL1、RL2、RL3分别参考知识图像的知识图像索引分别为0、1和2,本申请实施例中,通过在参考知识图像帧RL1的图像头中获取所有要参考的知识图像索引0、1和2。
S620:解析知识图像索引所对应的知识图像码流,获得知识图像。
本申请实施例通过在序列头中第一帧参考知识图像帧中时,解析图像获取所有的要参考的知识图像码流,获得所有知识图像,并存储于知识图像缓冲区中,以避免常规的P帧或B帧等图像帧的每一帧都要判断是否要更新知识图像缓冲区,减少解码器的工作量。具体地,本申请实施例在解码第一帧参考知识图像帧(RL1)时,解析知识图像索引0、1和2所对应的知识图像码流,获得知识图像,获取知识图像L0、L1和L2,并将知识图像L0、L1和L2存储于知识图像缓冲区中,避免位于RL1和RL2之间的若干P图像在解码时可以不需要判断是否要更新知识图像缓冲区,例如,其中POC为2的P帧以知识图像L1为参考图像时,不需删除知识图像缓冲区中的L0和L2,不需要更新知识图像缓冲区,减少解码器的工作量;本申请实施例中,RL2的图像头中获取所有要参考的知识图像索引0、1和2,可以不更新知识图像缓冲区,RL2的图像头中获取所有要参考的知识图像索引0、1和2,在解析RL3可以删除知识图像缓冲区中知识图像索引0的知识图像L0,更新知识图像缓冲区。
本申请实施例的上述视频解码方法,可以发生在随机访问条件下,也可以发生在顺序访问的条件下,其中,在顺序访问的条件下,本申请实施例的步骤610和620之前要进行先解码知识图像码流中一帧或几帧知识图像,再执行步骤610和620。
在本申请另一实施例中,如图8c所示,S620解析知识图像索引所对应的知识图像码流,获得知识图像包括:
S621:判断知识图像缓冲区中是否存储部分知识图像索引所对应的历史知识图像。
通过判断知识图像缓冲区中是否存储有部分知识图像索引所对应的历史知识图像,例如,知识图像缓冲区已存储有知识图像L1,则在解析知识图像码流时,可以不需要解析知识图像索引1所对应的知识图像码流。若是,则执行S621,可以避免重复解析知识图像码流,减少解码器工作量。若否,直接解析知识图像索引所对应的知识图像码流,获取知识图像。
S622:解析剩余部分知识图像索引所对应的知识图像码流,获取知识图像。
本申请实施例通过解析剩余部分知识图像索引所0和2所对应的知识图像码流,以获取知识图像L0和L2,并将知识图像L0和L2移入至知识图像缓冲区,使得知识图像缓冲区中存储知识图像L0、L1和L2,以便于图像序列码流作的解析。
如图8d所示,本申请一实施例实施例的视频解码方法,方法还包括:
S710:对视频码流进行解码,以得到解码图像。
S720:将解码图像存储于解码图像缓存区。
本申请实施例中的解码图像缓存区和知识图像缓冲区为相互独立的区域,可以避免相互影像,以便于当前解码图像从独立的知识图像缓冲区中索引知识图像。
本申请实施例中,步骤S710和S720可以发生在,获得新解码的知识图像步骤之后,也可以发生在获得新解码的知识图像之前。
在播放视频时,很多场合有随机接入的需求。比如在直播丢帧时,解码器无法构建帧之间的参考关系,无法正常解码。此时解码器将寻找下一个随机接入帧重新开始解码。或是在点播中要从某一时刻播放视频时,解码器一般从该时刻对应帧的前一个随机接入帧开始解码。为了满足随机接入的需求,编码器会周期性的插入一个随机接入帧到码流中。随机接入帧一般都为I帧。然而一般I帧的码流尺寸较大,在传输过程中对带宽的冲击较强,所以编码过程中一般不会频繁插入I帧。但插入I帧的周期间隔越大,随机接入过程中需要等待的时间就越长。为了解决上述技术问题,可以随机接入帧之间插入只参考前一随机接入帧的P帧或B帧,可以减少随机接入所需的读取和解码开销。
如图9所示,在本申请一实施例中,一种视频解码方法,包括:
S410:从视频码流的当前图像帧获得起始码。
本申请实施例中,在对视频码流进行解码时,可以从当前图像帧获得起始码,起始码中包含当前图像帧的类型信息。
S420:从起始码中确定当前图像帧的类型为二级随机接入图像,二级随机接入图像只以一帧一级随机接入图像作为参考图像可以进行解码的图像,一级随机接入图像是可以独立解码的图像。
本申请实施例定义一级随机接入图像,不需要参考其他图像就能够独立解码的图像。如I图像、背景帧图像和AVS3中的知识图像。
本申请实施例同时还定义二级随机接入图像,只以一帧一级随机接入图像作为参考图像可以进行解码的图像。
本申请实施例中,通过固化随机接入图像的参考关系,定义二级随机接入图像,并在二级随机接入图像中的起始码中写入该图像的类型,即可获取该二级图像的参考关系,起始码中不需要有关于参考索引标识相关句法,没有句法层面的解析成本,可实现高效的随机接入。
在本申请一具体实施例中,二级随机接入图像只以一帧最近一级随机接入图像作为参考图像可以进行解码的图像。可以限定二级随机接入图像所参考的一级随机接入图像的位置。在其他实施例中,二级随机接入图像也可以只以一帧第二接近的一级随机接入图像作为参考图像。
具体地,二级随机接入图像为只以一帧一级随机接入图像作为参考图像可以进行解码的单向帧间预测编码图像或双向帧间预测编码图像;本申请实施例中的双向帧间预测编码图像所参考的两帧为同一帧一级随机接入图像作为参考图像。
一级图像包括知识图像、I图像(帧内编码图像)或背景帧图像。
S430:参考一级随机接入图像,以解析当前图像帧。
本申请实施例中,通过仅参考当前图像帧所参考的一级随机接入图像,通过帧间预测以解析当前图像帧。例如在一实施例中,固化当前图像所参考的最近的一级随机接入图像作为参考图像,在其他实施例中,固化当前图像所参考的第二接近的一级随机接入图像作为参考图像。以最接近的一级随机接入图像作为参考图像解析当前图像帧,或以第二接近的一级随机接入图像作为参考图像解析当前图像帧。
本申请实施例中,二级随机接入图像的起始码可从AVS3标准中选择一个保留的起始码作为二级随机接入图像的起始码,如表2所示,本例中选择B4作为二级随机接入图像起始码。
二级随机接入帧间图像头可大部分复用AVS3标准中的帧间图像头(见表4),但移除所有关于参考索引标识相关句法,使得形成的二级随机接入帧间图像头(见表3),通过对比表3和表4可以看出本申请实施例的帧间图像头没有句法层面的解析成本,可实现高效的随机接入。
表2起始码类型值
Figure BDA0002659336290000122
表3二级随机接入图像头定义
Figure BDA0002659336290000121
表4现有AVS3标准中帧间预测图像头
Figure BDA0002659336290000131
如图10所示,在本申请一实施例中,一种视频解码方法,包括:
S510:从视频码流的当前图像帧获得起始码。
本申请实施例中,在对视频码流进行解码时,可以从当前图像帧获得起始码,起始码中包含当前图像帧的类型信息。
S520:确定当前图像帧的类型为非二级随机接入图像及非一级随机接入图像、以及确定当前图像帧的显示顺序在二级随机接入图像之后;其中,二级随机接入图像只以一帧一级随机接入图像作为参考图像可以进行解码的图像,一级随机接入图像是可以独立解码的图像。
本申请实施例通过确定当前图像帧为普通的P帧或B帧,而并非以及随机接入图像、也并非为二级随机接入图像。
本申请实施例定义一级随机接入图像,不需要参考其他图像就能够独立解码的图像。如I图像、背景帧图像和AVS3中的知识图像。
本申请实施例同时还定义二级随机接入图像,只以一帧一级随机接入图像作为参考图像可以进行解码的图像。
本申请实施例中,通过固化随机接入图像的参考关系,定义二级随机接入图像,并在二级随机接入图像中的起始码中写入该图像的类型,即可获取该二级图像的参考关系,起始码中不需要所有关于参考索引标识相关句法,没有句法层面的解析成本,可实现高效的随机接入。
在本申请一具体实施例中,二级随机接入图像只以一帧最近一级随机接入图像作为参考图像可以进行解码的图像。可以限定二级随机接入图像所参考的以及随机接入图像的位置。在其他实施例中,二级随机接入图像也可以只以一帧第二接近的一级随机接入图像作为参考图像。
具体地,二级随机接入图像为只以一帧一级随机接入图像作为参考图像可以进行解码的单向帧间预测编码图像或双向帧间预测编码图像;本申请实施例中的双向帧间预测编码图像所参考的两帧为同一帧一级随机接入图像作为参考图像。一级图像包括知识图像、I图像或背景帧图像。
如图11所示视频序列的图像帧参考关系,本申请实施例以当前图像帧为普通的P帧为例进行说明。
视频序列中依次包括的图像帧为F0、SR0、P0、P1…SR1…Pn…SR2。
其中,一级随机接入图像:F0,其中F0可以是I帧也可以是知识图像;二级随机接入图像:SR0、SR1、SR2,普通图像帧:P帧,P0…Pn。图11中箭头指向为指向参考图像,SR0参考F0,P0参考F0或SR0,P1参考F0或P0,SR1参考F0,SR2参考F0,假定当前图像帧为Pn。
S530:确定当前图像帧的参考图像为选自于最近的二级随机接入图像,或最近的二级随机接入图像与当前图像帧之间的图像帧,或最近的二级随机接入图像所参考的一级图像。
本申请实施例中,当前图像帧参考图像帧可以选自于最近的二级随机接入图像SR1;也可选自于最近的二级随机接入图像SR1与当前图像帧Pn之间的图像帧,例如P6、P7等;也可以是最近的二级随机接入图像SR1所参考的一级接入图像F0。例如,本申请实施例的当前图像帧的参考图像为最近的二级随机接入图像SR1。
S540:参考当前图像帧的参考图像以解析当前图像帧。
本申请实施例中,通过确定的当前图像帧的参考图像,解析当前图像帧所参考的参考图像,并通过帧间预测解析当前图像帧。在点播时候,如果要随机播放当前图像帧,只需要读取并解码一级接入图像F0、二级随机接入图像SR1和当前图像帧即可。
本申请实施例,二级随机接入图像帧类型层面标识了该帧只能参考随机接入帧,固化了二级随机接入图像的参考关系,即不需要解析参考索引就能确定二级随机接入图像的参考帧,可实现高效的随机接入且二级随机接入图像的码流尺寸较小,插入二级随机接入图像的周期间隔越可以相对较小,降低随机接入过程中需要等待的时间。
如图12所示,本申请实施例一种视频解码装置第一实施例,视频解码装置包括获取单元11、判断单元12、移除单元13和添加单元14,其中,获取单元11用于获得新解码的知识图像;判断单元12用于判断知识图像缓冲区是否填满预设数量的历史知识图像;移除单元13用于知识图像缓冲区填满预设数量的历史知识图像时,移除知识图像缓冲区中的至少部分历史知识图像;添加单元14添加新解码的知识图像于知识图像缓冲区中。
如图13a所示,本申请实施例一种视频解码装置第二实施例,视频解码装置包括获取单元21、确定单元22、参考单元23,其中,获取单元21用于从视频码流的当前图像帧获得起始码;确定单元22用于从起始码中确定当前图像帧的类型为二级随机接入图像,二级随机接入图像只以一帧一级随机接入图像作为参考图像可以进行解码的图像,一级随机接入图像是可以独立解码的图像;参考单元23用于参考当前图像帧所参考的一级随机接入图像,以解析当前图像帧。
如图13b所示,本申请实施例一种视频解码装置第三实施例,一种视频解码装置,包括获取单元31、第一确定单元32、第二确定单元33和参考单元34,其中,获取单元31用于从视频码流的当前图像帧获得起始码;第一确定单元32用于确定当前图像帧的类型为非二级随机接入图像及非一级随机接入图像、以及确定当前图像帧的显示顺序在二级随机接入图像之后;其中,二级随机接入图像只以一帧一级随机接入图像作为参考图像可以进行解码的图像,一级随机接入图像是可以独立解码的图像;第二确定单元33用于确定当前图像帧的参考图像为选自于最近的二级随机接入图像,或最近的二级随机接入图像与当前图像帧之间的图像帧,或最近的二级随机接入图像所参考的一级图像;参考单元34用于参考当前图像帧的参考图像以解析当前图像帧。
如图14所示,本申请实施例一种视频解码装置第三实施例,一种视频解码装置包括获取单元71和解析单元72,获取单元71用于从图像序列码流的序列头中第一帧参考知识图像帧的图像头获取所述图像序列中所有参考知识图像帧所要参考的知识图像索引;
解析单元72用于解析所述知识图像索引所对应的知识图像码流,获得知识图像。
图15a是本申请解码器一实施例的结构示意图。如图15a所示,该解码器包括处理器41、与处理器耦接的存储器42。
其中,存储器42存储有用于实现上述任一实施例的方法的计算机程序;处理器41用于执行存储器42存储的计算机程序以实现上述方法实施例的步骤。其中,处理器41还可以称为CPU(CeNtralProcessiNgUNit,中央处理单元)。处理器41可能是一种集成电路芯片,具有信号的处理能力。处理器41还可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
如图15b所示,本申请一实施例的存储器42还包括知识图像缓冲区421和解码图像缓冲区422,其中,解码图像缓存区421(DPB)用于缓冲解码后的解码图像,知识图像缓冲区422(LDPB)用于缓冲解码的知识图像,解码图像缓存区421(DPB)和知识图像缓冲区422(LDPB)为相互独立的区域,可以避免相互影像,以便于当前解码图像从独立的知识图像缓冲区中索引知识图像。
图16是本申请存储介质一实施例的结构示意图。如图16所示,本申请实施例的存储介质50存储有计算机程序51,该计算机程序51被执行时实现本申请上述实施例提供的方法。其中,该计算机程序51可以形成程序文件以软件产品的形式存储在上述存储介质50中,以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本申请各个实施方式方法的全部或部分步骤。而前述的存储介质50包括:U盘、移动硬盘、只读存储器(ROM,Read-ONly Memory)、随机存取存储器(RAM,RaNdomAccess Memory)、磁碟或者光盘等各种可以存储程序代码的介质,或者是计算机、服务器、手机、平板等终端设备。
本申请电子设备一实施例的结构示意图。如图17所示,该电子设备60可以但不限于包括解码器61(前面涉及的解码器),也可以为其他能够实现上述方法步骤的其他解码器,在此不作具体限定。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅是示意性的,例如,单元的划分,仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。以上仅为本申请的实施方式,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。

Claims (25)

1.一种视频解码方法,其特征在于,所述方法包括:
获得新解码的知识图像;
判断知识图像缓冲区是否填满预设数量的历史知识图像;
若是,则移除所述知识图像缓冲区中的至少部分所述历史知识图像;
添加所述新解码的知识图像于所述知识图像缓冲区中。
2.根据权利要求1所述的视频解码方法,其特征在于,
所述获得新解码的知识图像之前包括:
从所述历史知识图像的视频码流的序列头中获取知识图像缓冲区预设数量标识。
3.根据权利要求1所述的视频解码方法,其特征在于,
所述获得新解码的知识图像之后包括:
从所述新解码的知识图像中的帧内图像头中获取移除标志信息,所述移除标志信息用于标识所述知识图像缓冲区中的可以被移除的所述历史知识图像;
所述移除所述知识图像缓冲区中的至少部分所述知识图像包括:
移除所述知识图像缓冲区中的所述移除标志信息标志的可以被移除的所述历史知识图像。
4.根据权利要求3所述的视频解码方法,其特征在于,
所述移除所述知识图像缓冲区中的所述移除标志信息标志的可以被移除的所述历史知识图像包括:
依据移除标注信息中的索引,确定所述知识图像缓冲区中可以被移除的所述历史知识图像,
移除所述可以被移除的所述历史知识图像。
5.根据权利要求3所述的视频解码方法,其特征在于,
所述移除标志信息包括:可以移除的历史知识图像索引,或不可以被移除的历史知识图像索引。
6.根据权利要求3所述的视频解码方法,其特征在于,
其中,所述存储移除标志信息标志至少两个知识图像可以被移除于所述知识图像缓冲区;
所述移除所述知识图像缓冲区中的所述移除标志信息标志的可以被移除的所述历史知识图像包括:
移除所述知识图像缓冲区中的所述移除标志信息标志的可以被移除的至少两个所述历史知识图像。
7.根据权利要求4所述的视频解码方法,其特征在于,
所述依据移除标注信息中的索引信息,确定所述知识图像缓冲区中可以被移除的所述知识图像包括:
计算所述新解码的知识图像的图像索引与所述可以被移除的所述历史知识图像的图像索引的差值;
依据所述新解码的知识图像的图像索引和所述差值,将所述可以被移除的所述历史知识图像移除于所述知识图像缓冲区。
8.根据权利要求1所述的视频解码方法,其特征在于,
所述获得新解码的知识图像之前包括:
在随机访问条件下,从图像序列码流的序列头中第一帧参考知识图像帧的图像头获取所述图像序列中所有参考知识图像帧所要参考的知识图像索引;
所述获得新解码的知识图像包括:
解析所述知识图像索引所对应的知识图像码流,获得知识图像。
9.根据权利要求8所述的视频解码方法,其特征在于,
所述解析所述知识图像索引所对应的知识图像码流,获得知识图像包括:
判断所述知识图像缓冲区中是否存储部分所述知识图像索引所对应的历史知识图像;
若是,解析剩余部分所述知识图像索引所对应的知识图像,获取知识图像。
10.根据权利要求1所述的视频解码方法,其特征在于,
所述获得新解码的知识图像之前包括:
从所述新解码的知识图像的视频码流的当前图像帧获得起始码;
从所述起始码中确定当前图像帧的类型为二级随机接入图像,所述二级随机接入图像只以一帧一级随机接入图像作为参考图像可以进行解码的图像,所述一级随机接入图像是可以独立解码的图像;
参考所述一级随机接入图像,以解析所述当前图像帧。
11.根据权利要求10所述的视频解码方法,其特征在于,
所述二级随机接入图像只以一帧最近一级随机接入图像作为参考图像可以进行解码的图像;
所述参考所述当前图像帧所参考的所述一级随机接入图像,以解析所述当前图像帧包括:
仅参考所述当前图像帧所参考的最近一级所述随机接入图像,解析当前图像帧。
12.根据权利要求10所述的视频解码方法,其特征在于,
所述从所述知识图像的视频码流的当前图像帧获得起始码之后,还包括:
确定当前图像帧的类型为非所述二级随机接入图像及非所述一级随机接入图像,以及确定所述当前图像帧的显示顺序在所述二级随机接入图像之后;
确定所述当前图像帧的参考图像为选自于所述最近的二级随机接入图像,或所述最近的二级随机接入图像与所述当前图像帧之间的图像帧,或所述最近的二级随机接入图像所参考的一级图像;
参考所述当前图像帧的参考图像以解析所述当前图像帧。
13.根据权利要求10所述的视频解码方法,其特征在于,所述二级随机接入图像为只以一帧一级随机接入图像作为参考图像可以进行解码的单向帧间预测编码图像或双向帧间预测编码图像;
所述一级图像包括知识图像、帧内编码图像或背景帧图像。
14.根据权利要求1所述的视频解码方法,其特征在于,所述方法还包括:
对视频码流进行解码,以得到解码图像;
将所述解码图像存储于解码图像缓存区。
15.一种视频解码装置,其特征在于,包括:
获取单元,用于获得新解码的知识图像;
判断单元,用于判断知识图像缓冲区是否填满预设数量的历史知识图像;
移除单元,用于知识图像缓冲区填满预设数量的历史知识图像时,移除所述知识图像缓冲区中的至少部分所述历史知识图像;
添加单元,添加新解码的所述知识图像于所述知识图像缓冲区。
16.一种视频解码方法,其特征在于,所述方法包括:
从图像序列码流的序列头中第一帧参考知识图像帧的图像头获取所述图像序列中所有参考知识图像帧所要参考的知识图像索引;
解析所述知识图像索引所对应的知识图像码流,获得知识图像。
17.一种视频解码装置,其特征在于,包括:
获取单元,用于从图像序列码流的序列头中第一帧参考知识图像帧的图像头获取所述图像序列中所有参考知识图像帧所要参考的知识图像索引;
解析单元,用于解析所述知识图像索引所对应的知识图像码流,获得知识图像。
18.一种视频解码方法,其特征在于,包括:
从视频码流的当前图像帧获得起始码;
从所述起始码中确定当前图像帧的类型为二级随机接入图像,所述二级随机接入图像只以一帧一级随机接入图像作为参考图像可以进行解码的图像,所述一级随机接入图像是可以独立解码的图像;
参考所述一级随机接入图像,以解析所述当前图像帧。
19.一种视频解码装置,其特征在于,包括:
获取单元,用于从视频码流的当前图像帧获得起始码;
确定单元,用于从所述起始码中确定当前图像帧的类型为二级随机接入图像,所述二级随机接入图像只以一帧一级随机接入图像作为参考图像可以进行解码的图像,所述一级随机接入图像是可以独立解码的图像;
参考单元,用于参考所述当前图像帧所参考的所述一级随机接入图像,以解析所述当前图像帧。
20.一种视频解码方法,其特征在于,包括:
从视频码流的当前图像帧获得起始码;
确定当前图像帧的类型为非所述二级随机接入图像及非所述一级随机接入图像、以及确定所述当前图像帧的显示顺序在所述二级随机接入图像之后;其中,所述二级随机接入图像只以一帧一级随机接入图像作为参考图像可以进行解码的图像,所述一级随机接入图像是可以独立解码的图像;
确定所述当前图像帧的参考图像为选自于所述最近的二级随机接入图像,或所述最近的二级随机接入图像与所述当前图像帧之间的图像帧,或所述最近的二级随机接入图像所参考的一级图像;
参考所述参考图像以解析所述当前图像帧。
21.一种视频解码装置,其特征在于,包括:
获取单元,用于从视频码流的当前图像帧获得起始码;
第一确定单元,用于确定当前图像帧的类型为非所述二级随机接入图像及非所述一级随机接入图像,以及确定所述当前图像帧的显示顺序在所述二级随机接入图像之后;其中,所述二级随机接入图像只以一帧一级随机接入图像作为参考图像可以进行解码的图像,所述一级随机接入图像是可以独立解码的图像;
第二确定单元,用于确定所述当前图像帧的参考图像为选自于所述最近的二级随机接入图像,或所述最近的二级随机接入图像与所述当前图像帧之间的图像帧,或所述最近的二级随机接入图像所参考的一级图像;
参考单元,用于参考所述当前图像帧的参考图像以解析所述当前图像帧。
22.一种解码器,其特征在于,包括存储器和处理器,所述处理器用于调用所述存储器中所存储的计算机程序以执行如权利要求1-14、16、18或20中任一项所述视频解码方法。
23.根据权利要求22所述的解码器,其特征在于,所述存储器包括知识图像缓冲区和解码图像缓冲区。
24.一种存储介质,其特征在于,所述存储介质存储有计算机程序,所述计算机程序被执行时实现如权利要求1-14、16、18或20中任一项所述视频解码方法。
25.一种电子设备,其特征在于,包括如权利要求22或23所述的解码器。
CN202010899503.2A 2020-08-31 2020-08-31 视频解码方法、解码装置、解码器及电子设备 Active CN112055231B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010899503.2A CN112055231B (zh) 2020-08-31 2020-08-31 视频解码方法、解码装置、解码器及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010899503.2A CN112055231B (zh) 2020-08-31 2020-08-31 视频解码方法、解码装置、解码器及电子设备

Publications (2)

Publication Number Publication Date
CN112055231A true CN112055231A (zh) 2020-12-08
CN112055231B CN112055231B (zh) 2021-10-15

Family

ID=73606753

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010899503.2A Active CN112055231B (zh) 2020-08-31 2020-08-31 视频解码方法、解码装置、解码器及电子设备

Country Status (1)

Country Link
CN (1) CN112055231B (zh)

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030202602A1 (en) * 2002-04-30 2003-10-30 Apostolopoulos John G. Compression of images and image sequences through adaptive partitioning
CN1535029A (zh) * 2003-12-31 2004-10-06 中国科学院计算技术研究所 一种参考图像缓冲区管理方法
EP2290614A1 (en) * 2008-06-23 2011-03-02 Panasonic Corporation Synthesis device and synthesis method
US20110110416A1 (en) * 2009-11-12 2011-05-12 Bally Gaming, Inc. Video Codec System and Method
CN102664806A (zh) * 2012-04-26 2012-09-12 重庆网力视界科技有限公司 一种流媒体分发方法和装置
CN104685889A (zh) * 2012-09-28 2015-06-03 瑞典爱立信有限公司 视频序列图像的解码和编码
CN108668132A (zh) * 2018-05-07 2018-10-16 联发科技(新加坡)私人有限公司 管理解码图像缓冲区的方法、图像解码器以及存储介质
CN109144445A (zh) * 2018-07-24 2019-01-04 深圳市创易联合科技有限公司 无线传屏方法及装置
CN110876083A (zh) * 2018-08-29 2020-03-10 浙江大学 指定参考图像的方法及装置及处理参考图像请求的方法及装置
CN111246284A (zh) * 2020-03-09 2020-06-05 深圳创维-Rgb电子有限公司 视频流播放方法、系统、终端及存储介质
CN111405291A (zh) * 2019-01-02 2020-07-10 浙江大学 视频编解码方法与装置
CN111416981A (zh) * 2019-01-07 2020-07-14 华为技术有限公司 视频图像解码、编码方法及装置
CN111416977A (zh) * 2019-01-07 2020-07-14 华为技术有限公司 视频编码器、视频解码器及相应方法
CN111416976A (zh) * 2019-01-08 2020-07-14 华为技术有限公司 视频解码方法、视频编码方法、装置、设备及存储介质
CN111526365A (zh) * 2019-02-01 2020-08-11 浙江大学 位流检验方法、解码方法及其装置

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030202602A1 (en) * 2002-04-30 2003-10-30 Apostolopoulos John G. Compression of images and image sequences through adaptive partitioning
WO2003094113A1 (en) * 2002-04-30 2003-11-13 Hewlett-Packard Development Company, L.P. Compression of images and image sequences through adaptive partitioning
CN1535029A (zh) * 2003-12-31 2004-10-06 中国科学院计算技术研究所 一种参考图像缓冲区管理方法
EP2290614A1 (en) * 2008-06-23 2011-03-02 Panasonic Corporation Synthesis device and synthesis method
US20110110416A1 (en) * 2009-11-12 2011-05-12 Bally Gaming, Inc. Video Codec System and Method
CN102664806A (zh) * 2012-04-26 2012-09-12 重庆网力视界科技有限公司 一种流媒体分发方法和装置
CN104685889A (zh) * 2012-09-28 2015-06-03 瑞典爱立信有限公司 视频序列图像的解码和编码
CN108668132A (zh) * 2018-05-07 2018-10-16 联发科技(新加坡)私人有限公司 管理解码图像缓冲区的方法、图像解码器以及存储介质
CN109144445A (zh) * 2018-07-24 2019-01-04 深圳市创易联合科技有限公司 无线传屏方法及装置
CN110876083A (zh) * 2018-08-29 2020-03-10 浙江大学 指定参考图像的方法及装置及处理参考图像请求的方法及装置
CN111405291A (zh) * 2019-01-02 2020-07-10 浙江大学 视频编解码方法与装置
CN111416981A (zh) * 2019-01-07 2020-07-14 华为技术有限公司 视频图像解码、编码方法及装置
CN111416977A (zh) * 2019-01-07 2020-07-14 华为技术有限公司 视频编码器、视频解码器及相应方法
CN111416976A (zh) * 2019-01-08 2020-07-14 华为技术有限公司 视频解码方法、视频编码方法、装置、设备及存储介质
CN111526365A (zh) * 2019-02-01 2020-08-11 浙江大学 位流检验方法、解码方法及其装置
CN111246284A (zh) * 2020-03-09 2020-06-05 深圳创维-Rgb电子有限公司 视频流播放方法、系统、终端及存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
左旭光: ""基于多层结构的视频编码研究"", 《中国博士学位论文全文数据库》 *
苏阳平: ""H.264高清视频解码器中存储结构的设计与验证"", 《中国优秀硕士学位论文全文数据库》 *

Also Published As

Publication number Publication date
CN112055231B (zh) 2021-10-15

Similar Documents

Publication Publication Date Title
JP6133400B2 (ja) スケーラブルなデータ・ストリームおよびネットワーク・エンティティ
KR102058759B1 (ko) 디코딩된 픽쳐 버퍼 및 참조 픽쳐 목록들에 관한 상태 정보의 시그널링 기법
KR100424762B1 (ko) 영상 데이터 제공 시스템 및 방법
US9635376B2 (en) Method and apparatus to prioritize video information during coding and decoding
CN110784740A (zh) 视频处理方法、装置、服务器及可读存储介质
CN105847825A (zh) 视频编码码流的编码、索引存储和访问方法及相应装置
CN112714320A (zh) 一种解码方法、解码设备及计算机可读存储介质
EP2117235A2 (en) Apparatus and method for managing reference frame buffer in layered video coding
CN111405291B (zh) 视频编解码方法与装置
CN102196249A (zh) 监控数据回放方法及编码器、视频管理服务器
CN112055231B (zh) 视频解码方法、解码装置、解码器及电子设备
US20070292109A1 (en) Method of and apparatus for reproducing compression encoded video data stream
CN104980763B (zh) 一种视频码流、视频编解码方法及装置
WO2023071469A1 (zh) 视频处理方法、电子设备及存储介质
CN111263097A (zh) 媒体数据传输方法及相关设备
CN111988626B (zh) 帧参考方法、设备及存储介质
CN115941972A (zh) 图像传输方法、装置、设备及存储介质
US11323730B2 (en) Temporally-overlapped video encoding, video decoding and video rendering techniques therefor
CN114827724A (zh) 视频播放方法以及相关设备
CN110113641B (zh) 视频数据的传输方法、装置、边缘服务节点及介质
CN114615549B (zh) 流媒体seek方法、客户端、存储介质和移动设备
CN112738508A (zh) 视频编码方法、确定方法、处理方法、服务器及vr终端
CN118118692A (zh) 视频码流的传输和解析方法、装置和设备
CN117082249A (zh) 视频编码方法、视频解码方法、编码器、解码器以及介质
CN113261283A (zh) 视频处理方法、装置及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant