CN103797797A - 参考画面信号通知 - Google Patents

参考画面信号通知 Download PDF

Info

Publication number
CN103797797A
CN103797797A CN201280032629.3A CN201280032629A CN103797797A CN 103797797 A CN103797797 A CN 103797797A CN 201280032629 A CN201280032629 A CN 201280032629A CN 103797797 A CN103797797 A CN 103797797A
Authority
CN
China
Prior art keywords
picture
buffer
identifier
reference picture
buffer descriptor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280032629.3A
Other languages
English (en)
Other versions
CN103797797B (zh
Inventor
乔纳坦·萨缪尔森
理卡尔德·肖伯格
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Telefonaktiebolaget LM Ericsson AB
Original Assignee
Telefonaktiebolaget LM Ericsson AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=46197673&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=CN103797797(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Telefonaktiebolaget LM Ericsson AB filed Critical Telefonaktiebolaget LM Ericsson AB
Publication of CN103797797A publication Critical patent/CN103797797A/zh
Application granted granted Critical
Publication of CN103797797B publication Critical patent/CN103797797B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/43—Hardware specially adapted for motion estimation or compensation
    • H04N19/433—Hardware specially adapted for motion estimation or compensation characterised by techniques for memory access
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/58—Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/50—Queue scheduling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

通过从视频流(1)的画面(10)的编码表示(60)获取缓冲器描述来对编码表示(60)进行解码。缓冲器描述信息用于确定至少一个画面标识符，该至少一个画面标识符将相应参考画面(40、42)标识为针对画面(10)的解码参考。基于确定的画面标识符来更新解码画面缓冲器(530、650)。画面(10)本身的编码表示(60)包括解码器(400)需要用以标识对编码画面(60)进行解码所需的参考画面(40、42)的信息。

Description

参考画面信号通知
技术领域
实施例大体上涉及与视频编码和解码相关的参考画面管理，具体地，涉及参考画面信号通知和缓冲器管理。
背景技术
H.264(也称作运动画面专家组-4(MPEG-4)高级视频编码(AVC))是现有的视频编码标准。它由采用时间和空间预测的基于块的混合视频编码方案构成。
高效视频编码(HEVC)是当前正在联合协作团队-视频编码(JCT-VC)中开发的新视频编码标准。JCT-VC是MPEG与国际电信联盟电信标准化部(ITU-T)之间的协作计划。当前，定义了工作草案(WD)，该工作草案包括大宏块(针对最大编码单元，缩写为LCU)和多个其他新的工具，并且比H.264／AVC明显更有效。
在接收机处，解码器接收表示画面的比特流，即，压缩数据的视频数据分组。压缩数据包括有效载荷和控制信息。控制信息包括例如关于哪些参考画面应当被存储在参考画面缓冲器(也称作解码画面缓冲器(DPB))中的信息。该信息是针对先前接收的画面的相对参考。此外，解码器对接收的比特流进行解码，并且显示解码画面。此外，根据控制信息将解码画面存储在解码画面缓冲器中。当解码器对后续画面进行解码时，解码器使用这些存储的参考画面。
在HEVC的工作草案中针对解码画面缓冲器操作的过程的工作假设是它们将在很大程度上是从H.264／AVC继承的。图1中示出了该方案当在H.264／AVC中设计时的简化流程图。
在对画面进行实际解码之前，如果序列参数集合(SPS)语法元素gaps_in_frame_num_value_allowed_flag为1，则对片(slice)首部中的frame_num进行解析以检测frame_num中的可能间断。frame_num指示解码顺序。如果检测到frame_num中的间断，则创建“不存在”帧并且将这些帧插入到解码画面缓冲器(DPB)中。
不论在frame_num中是否存在间断，下一个步骤是对当前画面进行实际解码。如果画面的片首部包含存储器管理控制操作(MMCO)命令，则在对画面进行解码之后应用自适应存储器控制过程，以获得针对要存储在解码画面缓冲器中的画面的相对参考；否则，应用滑动窗过程以获得针对要存储在解码画面缓冲器中的画面的相对参考。作为最后一个步骤，应用“缓冲(bumping)”过程以按正确的顺序传送画面。
H.264／AVC的问题是其对包含下面的表格1中所描述的类型2、3、4、5或6的MMCO的画面丢失的脆弱性。
表格1——针对H.264／AVC的存储器管理控制操作值
Figure BDA0000449799440000021
丢失不包含MMCO的画面或者包含类型0或1的画面当然对于解码过程是严重的。丢失画面的像素值将不可用，并且可能由于错误的帧间预测而在很长一段时间影响将来的画面。还存在这样的风险，即，例如如果丢失画面包含将一个短期参考画面标记为“不用于参考”的MMCO(否则，该短期参考画面将包含在后续画面的参考画面列表中)，则针对丢失画面之后的几个画面的参考画面列表将是错误的。然而，解码过程通常可以通过使用约束的帧内块、帧内片或者通过其他方式恢复这种丢失。
但是如果包含类型2、3、4、5或6的MMCO的画面丢失，则存在这样的风险，即，DPB中的长期画面的数量与接收到画面的情况下的数量不同，这导致针对所有后续画面的“不正确的”滑动窗过程。也即是说，编码器和解码器将包含不同数量的短期画面，这导致滑动窗过程的不同步行为。不能通过使用约束的帧内块、帧内片或类似技术来恢复该丢失(即使使用开放画面组(GOP)帧内画面也不能恢复该丢失)。确保从这种丢失恢复的唯一方式是通过即时解码器刷新(IDR)画面或者通过消除丢失的MMCO的影响的MMCO。使得该情形甚至更差的是解码器将不一定知道滑动窗过程是不同步的，因此甚至在反馈信道可用的应用中也不能向编码器报告问题或者请求IDR画面。
减小丢失重要的MMCO信息的一种方式是使用dec_ref_pic_marking_repetition补充增强信息(SEI)消息。然而，编码器将不知道解码器是否能够利用dec_ref_pic_marking_repetition SEI消息。此外，存在dec_ref_pic_marking_repetition SEI消息也丢失的风险。
因此，需要不具有现有解决方案的缺点和限制的有效的参考画面信号通知和缓冲器管理。
发明内容
总体目的是提供与视频编码和解码相关的有效的参考画面信号通知和缓冲器管理。
可以通过本文所公开的实施例来满足该目的和其他目的。
实施例的一个方案涉及用于对多个画面构成的视频流中的画面的编码表示进行解码的方法。该方法包括：从画面的编码表示中获取定义至少一个参考画面的缓冲器描述信息。基于缓冲器描述信息来确定标识所述至少一个参考画面中的相应参考画面的至少一个画面标识符。相应参考画面用作所述画面的解码参考。基于所确定的至少一个画面标识符来更新解码画面缓冲器。
实施例的有关方案定义了一种解码器，被配置为对多个画面构成的视频流中的画面的编码表示进行解码。解码器包括：数据获取器，被配置为从画面的编码表示中获取定义至少一个参考画面的缓冲器描述信息。解码器的画面标识符确定器被配置为基于缓冲器描述信息来确定至少一个画面标识符，该至少一个画面标识符将所述至少一个参考画面中的相应参考画面标识为所述画面的解码参考。解码器还包括缓冲器管理器，被配置为基于所述至少一个画面标识符来更新解码画面缓冲器。
实施例的另一有关方案定义了解码器，包括：输入部分，被配置为接收视频流中的多个画面的编码表示。解码器还包括：处理器，被配置为处理存储在存储器中的计算机程序的代码装置。当在处理器上运行代码装置时，代码装置使处理器从画面的编码表示中获取定义至少一个参考画面的缓冲器描述信息。还使处理器基于缓冲器描述信息来确定至少一个画面标识符，该至少一个画面标识符将所述至少一个参考画面中的相应参考画面标识为所述画面的解码参考。代码装置还使处理器基于至少一个画面标识符来更新解码画面缓冲器。解码器的输出部分被配置为输出视频流中的解码画面。
实施例的另一方案涉及对多个画面构成的视频流中的画面进行编码的方法。该方法包括：针对所述画面，确定所述多个画面中的至少一个参考画面作为所述画面的编码参考。该方法还包括：针对每一个参考画面，提供标识参考画面的画面标识符。基于至少一个画面标识符来产生定义所述至少一个参考画面的缓冲器描述信息。将缓冲器描述信息插入到所述画面的编码表示中。
实施例的有关方案定义了一种编码器，被配置为对多个画面构成的视频流中的画面进行编码。编码器包括：参考画面确定器，被配置为针对所述画面，确定视频流中的至少一个参考画面作为所述画面的编码参考。编码器还包括：画面标识符提供器，被配置为针对每一个参考画面，提供标识参考画面的画面标识符。缓冲器描述信息产生器被配置为基于至少一个参考画面标识符来产生缓冲器描述信息。数据插入器将缓冲器描述信息插入到所述画面的编码表示中。
实施例的另一有关方案定义了一种编码器，包括：输入部分，被配置为接收视频流中的多个画面，以及处理器，被配置为处理存储在存储器中的计算机程序的代码装置。当在处理器上运行代码装置时，代码装置使处理器针对视频流中的画面，确定视频流中的至少一个参考画面作为所述画面的编码参考。还使处理器针对每一个参考画面，提供标识参考画面的画面标识符，并且基于至少一个画面标识符来产生缓冲器描述信息。代码装置还使处理器将缓冲器描述信息插入到所述画面的编码表示中。编码器还包括：输出部分，被配置为输出画面的编码表示。
与正确的参考画面管理取决于先前编码的画面已经被正确地接收和解码的现有技术解决方案明显不同，这些实施例以绝对和显式的方式而不是相对或隐式的方式提供了用于参考画面的缓冲器描述信息。因此，画面的编码表示包含与在解码期间哪些参考画面要用于参考有关的信息，独立于视频流中的先前画面的编码表示。
因此，这些实施例使参考画面管理和信号通知对于错误不那么脆弱，这是因为解码器将只需根据包含在当前画面中的信息来对当前画面进行参考画面管理，而不是依赖于先前画面中正确传送和解释的缓冲器操作。
附图说明
通过参照结合附图给出的以下描述，将最佳地理解本发明及其其他目的和优点，在附图中：
图1是H.264／AVC参考缓冲器方案的简化流程图；
图2是具有两个时间层的编码结构的示例；
图3是根据一个实施例对画面进行编码的方法的流程图；
图4是根据一个实施例的具有多个画面的视频流；
图5是根据一个实施例的画面的编码表示；
图6是图3中的方法的附加的可选步骤的流程图；
图7是图3中的方法的附加的可选步骤以及图3中的产生缓冲器描述信息的实施例的流程图；
图8是具有(子)GOP大小8的编码结构的示例；
图9是根据一个实施例对画面的编码表示进行解码的方法的流程图；
图10是图9中的确定画面标识符的实施例的流程图；
图11是图9中的获取缓冲器描述信息的实施例的流程图；
图12是图9中的确定画面标识符的另一实施例的流程图；
图13是图9中的方法的附加的可选步骤的流程图；
图14是图9中的方法的附加的可选步骤的流程图；
图15是编码结构的示例；
图16是根据一个实施例的参考缓冲器方案的简化流程图；
图17是根据一个实施例的发射机的示意性框图；
图18是根据一个实施例的编码器的示意性框图；
图19是根据另一实施例的编码器的示意性框图；
图20是根据一个实施例的接收机的示意性框图；
图21是根据一个实施例的解码器的示意性框图；以及
图22是根据另一实施例的解码器的示意性框图。
具体实施方式
在附图中，相同的附图标记用于类似或相应的元素。
本实施例大体上涉及对视频流的画面(在本领域中，也称作帧)进行编码和解码。具体地说，本实施例涉及与视频编码和解码相关的管理参考画面以及从编码器到解码器的关于这些参考画面的信号通知。
例如由H.264／MPEG-4AVC和HEVC表示的视频编码将参考画面用作用于对当前画面的像素数据进行编码和解码的预测或参考。在本领域中，这通常被称作帧间编码，其中，相对于这些参考画面对画面进行编码和解码。为了能够对编码画面进行解码，解码器由此必须知道哪些参考画面用于当前的编码画面并且必须能够访问这些参考画面。通常，解码器使用解码画面缓冲器(DPB)(在本文中也表示为参考画面缓冲器)来存储参考画面。然后，重要的是，当对编码画面进行解码时，存储在解码画面缓冲器中的参考画面确实是正确的参考画面，否则，解码器将在解码过程期间使用错误的参考画面，这使得呈现的视频的质量下降。
现有技术可能遇到与当承载MMCO信息的画面意外丢失时使用不正确的参考画面有关的问题，这一点在背景部分中进行了讨论。以下面H.264执行的示例说明了现有技术的该问题。假设解码画面缓冲器存储具有画面标识符300、302和303的三个短期画面以及具有画面标识符0和3的两个长期画面。然后，编码器可能产生具有MMCO类型2命令的新的编码画面，该MMCO类型2命令规定长期画面0应当不用于参考。如果已经在解码器处正确地接收到该编码画面，则将长期画面0标记为不用于参考，并且参考画面列表将为{300，302，303，3}。然而，如果具有MMCO类型2命令的编码画面丢失，则未向解码器通知应当将长期画面0标记为不用于参考，因此参考画面列表取而代之地是{300，302，303，0，3}。如果在解码器处接收到的下一个编码画面包括关于参考画面列表中的位置3处的参考画面要用作针对画面中的宏块的预测的信息，则如果MMCO类型2命令丢失，那么将存在问题。如果在解码器处正确地接收到MMCO类型2命令，则参考画面列表中的位置3处的参考画面将与长期画面3相对应，这是因为该参考画面占据参考画面列表中的位置3(如果以0开始的话)。然而，在丢失MMCO类型2命令的情况下，参考画面列表中的位置3取而代之地被长期画面0占据。这意味着来自长期画面0的像素数据而不是来自长期画面标识符3的正确像素数据将用作预测基础。
因此，现有解决方案具有正确的参考画面管理取决于先前解码的画面已经被正确地接收和解码的问题。
本实施例通过使用与现有技术根本不同的方法来信号通知参考画面而不具有现有技术的这些问题。本实施例取而代之地以绝对或显式的方式而不是相对或隐式的方式指定哪些解码画面要用于参考画面。换言之，针对当前画面的编码表示(即，比特流)包含与要用于参考的画面(即，参考画面)有关的信息，而独立于先前画面的编码表示的信息。因此，可以认为，维持正确的解码画面缓冲器的逻辑责任从解码器移交给比特流。看待它的一种方式是认为与要用于画面的帧间预测和运动向量预测的参考画面有关的信息包含在画面的控制信息中。因此，针对相对于其他画面编码和解码的每一个画面，信号通知解码画面缓冲器的状态。
根据实施例的一个方案，提供了一种创建例如数据结构等的缓冲器描述信息的方法，该数据结构例如是具有与哪些画面要用于参考画面(即，存储在解码画面缓冲器(也称作参考画面缓冲器)中以用于后续编码的参考画面)有关的绝对信息的通用表格。缓冲器描述信息的至少一部分被插入到由编码器编码的比特流中。
图3是根据一个实施例对画面进行编码的方法的流程图。该方法总体在步骤S1开始，在步骤S1，将多个画面构成的视频流中的至少一个参考画面确定为编码参考。在一个实施例中，步骤S1确定用作要编码的当前画面的编码参考的一个或多个参考画面。因此，然后参考一个或多个参考画面对当前画面的像素数据进行编码。备选地或此外，在步骤S1中确定的至少一个参考画面可以用作视频流中的后续画面(即，在当前画面之后编码和解码的画面)的编码参考。因此，根据解码顺序(和编码顺序)，该后续画面在当前画面之后。在特定实施例中，S1针对当前画面将视频流中的任何参考画面确定为当前画面的编码参考并且将视频流中的任何参考画面确定为后续画面的编码参考。因此，在特定的实施例中，步骤S1确定按解码顺序在当前画面之前并且可以用于针对当前画面或者根据解码顺序在当前画面之后的任何画面的帧间预测的所有参考画面。
图4通过示出具有多个画面10、40、42、50的视频流1示意性地说明了该构思。当前画面10可以包括包含要解码的像素块30(例如，宏块，也称作树块或编码单元)的一个或多个片20、22。画面10、40、42、50下面的箭头指示解码关系。当前画面10与先前参考画面40和后续参考画面42相关地被解码。先前参考画面40根据输出顺序在当前画面10之前，后续参考画面42根据输出顺序在当前画面10之后，但是先前参考画面40和后续参考画面42根据解码顺序均在当前画面10之前。此外，该后续参考画面42用作视频流1中的后续画面50的参考画面。因此，在特定实施例中，步骤S1可以将参考画面确定为图4中的画面40、42。
图3的下一个步骤S2针对在步骤S1中确定的至少一个参考画面中的每一个参考画面提供相应的画面标识符。该画面标识符(可以与其他数据一起)用以无歧义地标识参考画面。因此，可以将画面标识符视为针对要用作参考画面的画面的绝对参考。这意味着，给定参考画面的画面标识符和可选的其他数据，可以正确地标识有关参考画面。
存在可以用作根据实施例的画面标识符的多个可用的备选方式。例如，画面标识符可以是解码顺序号、显示顺序号、输出顺序号、或者显示顺序号和附加的标识符的组合或者可以用于无歧义地标识画面的甚至任何其他信息。
这些画面标识符的示例包括画面顺序计数(POC)、帧号(frame_num)、或者POC和附加的标识符(additional_picture_id)。
在特定的实施例中，画面标识符的实际值与附加的信息或其他数据(例如，画面标识符在步骤S3中产生的缓冲器描述信息中的位置)一起用于无歧义地标识有关的参考画面。因此，缓冲器描述信息所标识或获得的缓冲器描述使得能够无歧义地标识有关参考画面。在一个实施例中，诸如POC或者POC加上附加的标识符等的画面标识符本身可以用于无歧义地标识参考画面。
在本文中使用无歧义地标识参考画面以指示画面标识符本身或者画面标识符与缓冲器描述信息中的其他信息(例如，缓冲器描述标识符定义画面标识符的顺序)一起用于显式地标识参考画面。因此，给定画面标识符或者画面标识符和其他信息使得能够标识视频流的画面中的有关参考画面。
在步骤S1的特定实施例中，针对当前画面所确定的参考画面的总数可以受到从编码器向解码器信号通知的参数(例如，表示为max_num_ref_frames的参数)的限制。
优选地，针对在步骤S1中确定的每一个参考画面执行步骤S2，这一点用线L1示意性地示出。
可以从在步骤S1中确定的参考画面的首部部分读取或者以其他方式从表示来自步骤S1的参考画面的数据获取在步骤S2中提供的画面标识符。
下一个步骤S3产生缓冲器描述的信息，也称作参考画面集合(RPS)。在本文中将该信息表示为缓冲器描述信息。基于在步骤S2中提供的画面标识符来产生缓冲器描述信息。该缓冲器描述信息定义(优选地，无歧义地定义)在步骤S1中确定的至少一个参考画面。因此，可以根据缓冲器描述信息导出至少一个参考画面的相应画面标识符。
在步骤S4中，将所产生的缓冲器描述信息插入到当前画面的编码表示中。因此，编码画面承载缓冲器描述信息，该缓冲器描述信息可以在解码器处使用以定义和标识对当前画面和／或视频流的任何后续画面进行解码所需的参考画面。
因此，在从编码器向解码器提供的编码画面的控制信息中提供了缓冲器描述信息。缓冲器描述信息至少包含解码器标识解码画面缓冲器中要使用的参考画面所需的信息。
因此，可以将缓冲器描述信息视为标识缓冲器描述的信息，缓冲器描述是与当前画面相关联的参考画面集合。它是由按解码顺序在当前画面之前并且可以用于当前画面或者按解码顺序在当前画面之后的任何画面的帧间预测的所有参考画面构成。
在一个实施例中，缓冲器描述信息包含或者定义与即使画面不用于帧间预测或运动向量预测或任何其他预测也由解码器在解码过程中使用的每一个画面有关的信息。该信息可以包括但不限于：解码顺序、显示顺序、时间层信息和视图信息。
如上所述，可以通过缓冲器描述信息信号通知的参考画面的数量可能受到参数max_num_ref_frames的限制。然而，缓冲器描述信息可以定义少于该最大数量的画面，在该情况下，剩余画面被解释为“空的”。
优选地，针对视频流中除了任何即时解码器刷新(IDR)画面以外的每一个画面执行图3关于步骤S1至S4的方法，这一点用线L2示意性地示出，其中，IDR画面引起解码画面缓冲器刷新，因此不需要任何缓冲器描述信息。因此，编码器产生的每一个编码表示优选地承载缓冲器描述信息，该缓冲器描述信息定义用于对当前画面和／或视频流中的任何后续画面进行编码和解码的参考画面。
实施例的该方法相对于使用MMCO命令的现有技术的相对参考画面信号通知提供了明显的优势。通过视频流中的画面的每一个编码表示中的缓冲器描述信息显式地信号通知参考画面使得参考画面管理对错误不那么脆弱并且增加了解码器的错误鲁棒水平。因此，不是依赖于先前画面中的正确传送和解释的缓冲器操作，解码器只需要依赖于包含在当前画面的编码表示中的信息。
在特定实施例中，在步骤S4中插入到画面的编码表示中的缓冲器描述信息实际上是缓冲器描述本身。因此，缓冲器描述信息然后包括在步骤S2中提供的画面标识符的列表或者允许计算在步骤S2中提供的画面标识符的数据。下面将结合图6进一步描述后一种情况。
例如，缓冲器描述可以定义具有画面标识符3、5和6的列表作为当前画面的参考画面。在步骤S4中插入到编码表示中的缓冲器描述信息然后将包括这些画面标识符3、5和6。
通常更加比特高效(即，通常需要更少量的比特或符号来定义画面标识符)的备选方法是信号通知相对于针对当前画面信号通知的画面属性(即，画面标识符)的值的参考画面属性。例如，如果当前画面具有画面标识符7，则具有标识符3、5和6的参考画面的列表可以定义为-1、-2和-4，这通常可以由与3、5、6相比更少的比特来表示(特别是如果可变长度编码用于画面标识符的话)。
图6示意性地示出了该方法。该方法从图3的步骤S2继续。在下一个步骤S10中，针对在步骤S2中提供的每一个画面标识符，计算该画面标识符与标识当前画面的画面标识符之间的差值。作为该计算的结果，获得差值或增量(delta)标识符或值。然后，该方法继续到图3的步骤S3，在步骤S3中，基于计算出的差值或增量标识符来产生缓冲器描述信息。
因此，在该情况下，缓冲器描述信息可以包括增量标识符-1、-2和-4而不是3、5和6。
在一个实施例中，增量显示顺序信息或增量POC被包含在使用可变长度代码(VLC)编码的缓冲器描述中。在特定实施例中，针对absolute_delta_POC_minus_one使用VLC来对增量POC进行编码，并且只有当number_of_reorder_frames>0时，才信号通知针对增量POC_sign的标记，即，单个比特，否则，推断符号为负。
在提供画面标识符(画面标识符本身或增量标识符)的显式信号通知的上述实施例中，缓冲器描述信息实际上将构成当前画面的缓冲器描述。然后，将该缓冲器描述信息插入到画面的编码表示中。
可以将缓冲器描述信息作为控制信息包含在编码表示中的适当位置处。图5示意性地示出了画面的编码表示60的示例。编码表示60包括表示片中的像素块的编码像素数据的视频有效载荷数据66。编码表示60还包括承载控制信息的片首部65。片首部65与视频有效载荷和网络抽象层(NAL)首部64一起形成作为从编码器输出的实体的NAL单元。可以将附加首部(例如，实时传输协议(RTP)首部63、用户数据报协议(UDP)首部62和互联网协议(IP)首部61)添加至该NAL单元以形成可以从编码器向解码器发送的数据分组。对NAL单元进行的这种形式的封装仅构成与视频传输有关的示例。处理NAL单元(例如，文件格式、MPEG-2传输流、MPEG-2程序流等)的其他方法是可能的。
然后，可以将缓冲器描述信息包含在片首部65、另一画面首部或由编码器和解码器符合的标准规定的另一数据结构中。
在另一实施例中，插入到画面的编码表示60中的缓冲器描述信息不必与当前画面的缓冲器描述相同，而是使得能够标识和获取缓冲器描述。因此，在该实施例中，插入到画面的编码表示60中的缓冲器描述信息通过指向承载画面标识符或使得能够计算画面标识符的数据(例如，增量标识符)的缓冲器描述，间接地定义在步骤S1中确定的至少一个参考画面。
在该情况下，可以由与画面的编码表示60相关联的数据结构承载缓冲器描述。此类数据结构的示例包括画面参数集合(PPS)67和序列参数集合(SPS)68。PPS67和／或SPS68可以直接包含在编码表示60中，但是通常通过在编码表示60中包括PPS标识符和／或SPS标识符而与之相关联。例如，每一个片首部65可以包括通知哪一个PPS67要应用于当前画面的PPS标识符。有关的PPS67可以进而包括通知哪一个SPS68要应用于PPS67并且因此应用于当前画面的SPS标识符。
然后，可以将缓冲器描述插入到分配给当前画面的PPS67或SPS68中。在该情况下，插入到编码表示60中的PPS标识符或SPS标识符构成插入到编码表示60中的缓冲器描述信息。该PPS标识符或SPS标识符使得能够获取定义参考画面的画面标识符的缓冲器描述，因此PPS标识符或SPS标识符间接地定义了画面标识符。
PPS67和SPS68仅构成与画面的编码表示60相关联并且可以用于承载根据实施例的缓冲器描述信息的数据结构的示例。
图7示出了在数据结构中信号通知一个或多个缓冲器描述使得相同的缓冲器描述可以用于多个画面的备选实施例。
方法在步骤S20中开始，在步骤S20中，产生诸如表格等的数据结构。数据结构包括多个预定义缓冲器描述，每一个预定义缓冲器描述定义至少一个参考画面。
产生的数据结构的每一个缓冲器描述可以直接定义画面标识符，即，包括画面标识符列表。然而，该方法在数据结构中通常需要相当多的预定义缓冲器描述。更有效的方法是将多个预定义缓冲器描述的使用与增量标识符的信号通知相结合，如上文所讨论的。在该情况下，每一个预定义缓冲器描述包括至少一个相应的增量标识符，在解码器处将该增量标识符与当前画面的画面标识符结合使用以计算预定义缓冲器描述的画面标识符。
下面的表格1示出了这种具有增量标识符的数据结构的示例，其可以用于如图8中所示的视频流。图8的视频流以IDR画面开始，该IDR画面是移除了对在IDR画面之前发送的数据的所有依赖的帧内(I)编码帧，即，它将所有参考画面标记为“不用于参考”。IDR画面不需要缓冲器描述，这是因为它清空了解码画面缓冲器。图8的视频流具有提供不同的时间层中的画面的分层视频的形式，其中，不同的时间层是由图8中的时间标识符(temporal_id)n、n+1、n+2来标识的。
表格1——具有预定义缓冲器描述的数据结构
Figure BDA0000449799440000141
表格1示出了指示增量POC(dP)和temporal_id(tId)的缓冲器描述表格的示例。该表格是使用包括两个最近参考画面(POC(当前)-1和POC(当前)-2)和来自最低时间层的在POC(当前)-3到POC(当前)-10的范围中的两个参考画面的方案构成。
编码器对该表格的示例性使用是，针对具有POC=n的画面，向解码器信号通知表格条目(n％4)(即，n模4)。在该示例中，解码画面缓冲器由四个画面(画面缓冲器1至画面缓冲器4)构成。哪些画面取决于当前画面的POC和使用哪个条目。例如，如果具有POC=7的画面使用条目3，则解码画面缓冲器中的参考画面将由具有POC{6，5，4，0}的画面构成。
从编码器向解码器信号通知在步骤S20中产生的数据结构。可以根据多个实施例来执行该信号通知。数据结构可以承载在PPS、SPS、新参数集合、或者由编码器和解码器符合的标准规定的另一数据结构中。通过步骤S21示意性地说明了这一点，在步骤S21中，将数据结构插入到与视频流的编码表示相关联的PPS或SPS中。在该情况下，优选地，步骤S22将PPS标识符或SPS标识符插入到画面的编码表示中，例如，插入到片首部中。然后，该PPS标识符或SPS标识符使得能够标识当对当前画面进行解码时可用的数据结构。
该方法继续到图7的步骤S1和S2，在图7的步骤S1和S2中，确定参考画面并且针对当前画面提供画面标识符。下一个步骤S23，基于在步骤S2中提供的至少一个画面标识符来从在步骤S20中产生的数据结构中选择缓冲器描述。
一旦已经选择了诸如表格1中的条目等的缓冲器描述，步骤S24就产生包括所选择的缓冲器描述的标识符(例如，条目号)的缓冲器描述信息。该方法继续到步骤S4，在步骤S4中，将缓冲器描述信息插入到画面的编码表示中。
因此，为了指定哪一个缓冲器描述用于当前画面，可以信号通知针对当前画面的标识符。该标识符的示例是在当前画面的片首部中信号通知的非负整数，该非负整数按信号通知缓冲器描述的顺序表示缓冲器描述的编号。
在典型的实现中，针对视频流执行一次或者针对视频流中具有多个画面的集合执行一次步骤S20。这意味着然后针对视频流或针对具有多个画面的集合产生单个此类数据结构。优选地，针对视频流或具有多个画面的集合中的每一个画面执行图7的后续步骤S21至S24。
因此，诸如表格等的数据结构可以在编码器中被创建并且发送到解码器。在编码比特流的控制信息中，提供要使用的条目号。通过使用该表格，解码器可以通过检测解码比特流中的条目号并且使用该条目号在表格中查找条目，来获得关于哪些画面要用作参考画面的绝对信息。然后，该条目用于确定哪些画面要存储在解码画面缓冲器中。
在例如SPS中引入缓冲器描述条目减小了在片首部中显式地信号通知缓冲器描述的比特开销。这些缓冲器描述可以用于相同序列(即，视频流)中的多个片／画面，因此减小了针对每一个画面所需的比特的数量。
在一个实施例中，对于PPS中的每一个缓冲器描述条目，所有参考画面的delta_POC和temporal_id可能存在。优选地，针对PPS中的条目所描述的画面，将可选的additional_picture_id推断为0。
根据另一实施例，可以组合缓冲器描述的显式信号通知与针对具有多个预定义缓冲器描述的通用数据结构中的条目(例如，上述表格中的条目)的参考信号通知。在该情况下，可以由解码器组合这些信号通知以形成针对当前画面的最终缓冲器描述。组合显式信号通知和参考信号通知的一种方式是将由显式信号通知描述的参考画面集合与由参考信号通知描述的参考画面集合进行联合以形成联合参考画面集合。
在该情况下，图3的步骤S3优选地包括产生缓冲器描述信息以包括在步骤S23中选择的缓冲器描述的标识符并且包括定义至少一个参考画面的信息。这种定义至少一个参考画面的信息可以是参考画面本身的画面标识符或者可以根据其计算画面标识符的增量标识符。
优选地，在长时段期间用于参考的画面(长期参考画面)由该长期参考画面可用作其参考的画面的片首部中的显式描述指示。原因在于，将不便于在PPS或SPS中信号通知的预定义缓冲器描述中包括POC号之间的每一个间距。
在特定实施例中，画面的编码表示优选地包括用于指示是否已经为当前画面选择了缓冲器描述信息的显式信号通知和／或缓冲器描述信息的隐式信号通知的标记。例如，该标记可以包含在画面的编码表示的片首部中或者包含在某一其他控制信息字段中。
在特定实施例中，画面10可以由一个或多个片20、22构成，如图4所示。在该情况下，片20、22是画面10的可独立解码的部分。换言之，即使相同画面10的另一编码片的数据丢失，也可以对编码片进行解码。
在这种方法中，图3的步骤S1优选地针对画面中的每一个片确定视频流的至少一个参考画面。然后，第一片将可以使用一个或多个参考画面构成的第一集合，并且第二片将可以使用一个或多个参考画面构成的第二集合。第二集合可以与第一集合相同或者与第一集合不同。参考画面中的至少一个也可以是第一集合和第二集合共有的。
优选地，步骤S2针对在步骤S1中针对画面中的至少一个片(优选地，针对所有片)确定的所有参考画面确定画面标识符。然后，在步骤S3中，基于这些画面标识符产生缓冲器描述信息，从而定义参考画面。在一个实施例中，针对每一个片，将在步骤S3中产生的缓冲器描述插入到画面的编码表示的相应片首部中。因此，画面的编码表示的每一个片首部优选地承载缓冲器描述信息的相应实例。更优选地，承载在画面的第一片的片首部中的缓冲器描述信息与承载在画面的第二片的片首部中的缓冲器描述信息相同。
视频编码和解码也可以应用于所谓的可缩放或分层视频。例如，在H.264／MPEG-4AVC和可缩放视频编码(SVC)中，通过在SVC中定义子序列并使用temporal_id并且插入“不存在”帧来支持时间可缩放性。然而，为了支持时间可缩放性，当涉及使用MMCO时，对较高时间层中的画面进行限制。与丢弃时间层并且插入“不存在”画面并应用滑动窗过程不同，编码器负责确保一个时间层中的MMCO不会影响较低时间层中的画面。
这对编码器在选择编码结构和参考画面使用方面施加了限制。例如，考虑图2中的示例。假设即使每一个画面仅使用两个参考画面来进行帧间预测，解码画面缓冲器中的参考帧的最大数量(max_num_ref_frames)是三。原因在于，每一个画面必须保存来自另一时间层的一个额外画面，该额外画面将被下一个画面用于帧间预测。
为了使画面POC=0和画面POC=2在对画面POC=4进行解码时可用，画面POC=3必须具有将画面1标记为不可用的显式参考画面标记命令(MMCO)。
然而，如果(例如，由网络节点)移除时间层1，则针对所有奇数编号的画面，在frame_num中将存在间断。将针对这些画面创建“不存在”画面，并且将应用滑动窗过程。这将导致具有将画面POC=0标记为不可用的“不存在”画面POC=3。因此，当对画面POC＝4进行解码时，它将不可用于预测。因为编码器不能使解码过程针对以下两种情况是相同的：当对所有画面进行解码时以及当仅对最低层进行解码时，因此根据现有技术，图2中的编码结构示例不能用于时间可缩放性。
因此，现有解决方案针对某些编码结构具有时间可缩放性的问题，这是因为当以相对的方式信号通知参考画面信息时，与当前画面的参考画面有关的信息受到从比特流中移除先前画面的影响。通过使用本实施例，时间可缩放性将不会像现有技术中一样受到约束，这是因为由于以绝对的方式信号通知参考画面信息，因此当前画面的参考画面不受从比特流中移除先前画面的影响。
在具有分组为多个层的画面的可缩放视频流的情况下，图3的步骤S2优选地包括提供画面标识符和标识多个层中参考画面所属的层的时间层信息。然后，在步骤S3中，基于至少一个画面标识符和时间层信息来产生缓冲器描述信息。这意味着缓冲器描述信息由此定义至少一个画面标识符和时间层信息。
例如，针对使用ceil(log2(max_temporal_layers_minusl))个比特信号通知的缓冲器描述中的每一个画面，包括诸如temporal_id等的时间层信息从而信号通知temporal_id。时间可缩放性仅是这些实施例可以被应用于的多层视频的示例。其他类型包括每一个画面具有画面标识符和查看标识符的多层视频。可缩放性的其他示例包括空间可缩放性、信噪比(SNR)可缩放性、比特深度可缩放性和色度格式可缩放性。
这些实施例暗指时间下转换(temporal down-switching)始终是可能的。每一个时间层与更低层将构成子序列。这些子序列不需要显式信号通知。
总体上，编码器自由地选择哪些画面要包含在缓冲器描述中，并且可以使其选择基于诸如按显示顺序的最近画面等的任意方面。通常，编码器选择缓冲器描述以尝试在符合边界约束集合的同时实现最大压缩。这种约束的一个示例是由于存储器大小造成的参考画面的最大数量。另一示例是当在解码之前从比特流中移除比特流中的某些编码画面时视频流也将可解码。另一示例是只能选择可用于解码画面缓冲器中的参考的画面作为参考画面。
因此，在一个实施例中，图3的步骤S1包括：通过在符合至少一个边界约束的同时最大化画面的编码表示的压缩效率，来确定当前画面的至少一个参考画面。然后，优选地，从预定义的参考画面的最大数量和当从视频流的编码表示中移除画面的至少一个编码表示时也产生视频流的可解码的编码表示中选择所述至少一个边界约束。
根据实施例的另一方案，提供了一种方法，其中，接收编码视频或数据流，在编码视频流中检测缓冲器描述信息，并且基于缓冲器描述信息来确定对要用作用于对当前画面进行解码的参考画面或者用作用于将来解码的参考画面的画面的绝对参考。在解码画面缓冲器中存储要用作参考画面的画面。
图9是根据一个实施例对画面的编码表示进行解码的方法的流程图。该方法在步骤S30开始，在步骤S30中，从画面的编码表示中获取定义至少一个参考画面的缓冲器描述信息。在步骤S31中，缓冲器描述信息用于确定至少一个画面标识符，该至少一个画面标识符优选地无歧义地将相应的参考画面标识为画面的解码参考。在步骤S32中，使用在步骤S31中确定的至少一个参考画面标识符来更新解码画面缓冲器。
一旦已经将解码画面缓冲器更新为包括用于对画面进行解码所需的正确参考画面，该方法通常继续到步骤S33，在步骤S33中，基于画面的编码表示和包含在、存在于或存储在解码画面缓冲器中并且基于缓冲器描述信息标识的参考画面中的至少一个来对画面进行解码。
在优选的实施例中，如图9中所示，在更新解码画面缓冲器之后执行解码步骤S33。
在步骤S32中更新解码画面缓冲器优选地暗指由确定的画面标识符标识的参考画面被标记为“用于参考”或者被标记为“用于预测”以指示该参考画面要用作针对当前画面和／或任何后续画面的解码参考或预测。在特定实施例中，参考画面可以被标记为用于短期参考或者用于长期参考。
在特定实施例中，步骤S30从画面的编码表示中获取定义多个参考画面的缓冲器描述信息。在该实施例中，步骤S31可以基于缓冲器描述信息来确定i)将相应参考画面标识为针对画面的解码参考的至少一个画面标识符、以及ii)将相应参考画面标识为针对视频流的按解码顺序的后续画面的解码参考的至少一个画面标识符。在备选实施例中，缓冲器描述信息将相应参考画面的一个或多个画面标识符标识为针对当前画面的解码参考和／或将相应参考画面的一个或多个画面标识符标识为视频流的按解码顺序的后续画面的解码参考。
步骤S32优选地更新解码画面缓冲器以包括由在步骤S31中确定的至少一个画面标识符标识的相应参考画面。
如本文先前所讨论的，缓冲器描述信息可以被提供在画面的编码表示的片首部或另一控制信息字段中。在该情况下，图9的步骤S30包括从画面的编码表示的片首部中获取缓冲器描述信息。多片画面通常包括多个片首部。在该情况下，每一个片首部优选地包括相同的缓冲器描述信息。然后，在步骤S30中从画面的第一片首部中获取缓冲器描述信息是足够的，这是因为画面的任何剩余片首部将包括相同的缓冲器描述信息。然后，如果第一片丢失，则其他片首部中的缓冲器描述信息可以用于错误恢复。
缓冲器描述信息可以显式地包括参考画面的画面标识符。在该情况下，步骤S30简单地从缓冲器描述信息中获取至少一个画面标识符。
在备选实施例中，缓冲器描述信息包括增量值或增量标识符。图10是示出了图9中的步骤S31针对这种情况的实施例的流程图。然后，该方法从图9的步骤S30继续。下一个步骤S40基于缓冲器描述信息来获取相应的增量标识符。在步骤S41中将增量标识符与当前画面的画面标识符一起使用以计算参考画面的画面标识符。然后，该方法继续到图10的步骤S32。
因此，在该实施例中，解码器使用可用于当前画面的信息来根据信号通知的缓冲器描述信息构造针对当前画面的最终缓冲器描述。该信息包括但不限于：当前POC(POC(curr))，其与信号通知的增量POC一起可以使用以按照POC(ref)=POC(curr)+增量POC计算参考画面(POC(ref))的POC。
另一实施例涉及使用多个预定义缓冲器描述。图11示意性地示出了这种方法。在第一步骤S50中，获取包括多个预定义缓冲器描述的数据结构。在优选的实施例中，基于画面的编码表示中承载的信息来获取数据结构。例如，可以将数据结构作为画面的编码表示的PPS或SPS的一部分从编码器端向解码器端进行信号通知。在这种情况下，在步骤S50中，基于用作画面的编码表示中(例如，片首部中)的缓冲器描述信息的一部分的PPS标识符或SPS标识符从PPS或SPS中获取数据结构。备选地，从片首部中获取PPS标识符，并且PPS进而包括SPS标识符，其中，如果将数据结构作为SPS的一部分进行信号通知，则可以使用SPS标识符。
下一个步骤S51从画面的编码表示(例如，从片首部)中获取作为缓冲器描述信息的一部分的缓冲器描述的标识符。在步骤S52中，采用该标识符以标识步骤S50中获取的数据结构中的哪个预定义缓冲器描述用于当前画面。然后，该方法继续到图1的步骤S31，在步骤S31中，根据标识的预定义缓冲器描述来确定画面标识符。
通过使用本实施例，可以在非常少开销的情况下将最佳缓冲器方案应用于任何编码结构。在片首部中只需要针对PPS等中的正确缓冲器描述的参考。注意，缓冲器描述还可以被置于画面首部等或者在画面中的所有片之间共享的参数集合中。重要的属性是，要用于对特定画面进行解码的缓冲器描述与画面一起发送而不是像现有技术中一样与按解码顺序的先前画面一起发送。此外，缓冲器描述信息用于信号通知解码画面缓冲器中应当被保存以对视频流中的每一个相应画面进行解码的所有参考画面，而不是信号通知当单个数据分组意外丢失时可能引起编码器端与解码器端之间的长期失配的增量信息。
如本文先前所公开的，可以组合画面的编码表示中的缓冲器描述的显式信号通知和针对数据结构中的预定义缓冲器描述的参考信号通知。组合显式信号通知和参考信号通知的一种方式是将由显式信号通知描述的参考画面集合与由参考信号通知描述的参考画面集合进行联合以形成联合参考画面集合。然后，为了具有不超过参考画面的最大数量(max_num_ref_frames)的最终缓冲器描述，可以从联合参考画面集合中移除包含在由参考信号通知描述的参考画面集合中但不包含在显式信号通知中的一个或多个参考画面。优选地，以画面在通用缓冲器描述(即，预定义缓冲器描述)中列出的顺序，即从最后一个开始向前，移除画面。
图12是示出了这种方法的流程图。该方法从图9中的步骤S30和图11中的步骤S52继续。因此，在该实施例中，缓冲器描述信息包括在图11的步骤S51中获取的缓冲器描述的描述符和在图9的步骤S30中获取的定义至少一个参考画面的信息。在步骤S30中获取的该信息可以是实际的画面标识符或者先前提到的增量标识符。
下一个步骤S60根据在图11中的步骤S52中标识的预定义缓冲器描述来确定标识相应参考画面的至少一个画面标识符的第一集合。相应地，在步骤S61中，根据在图9的步骤S30中获取的信息来确定标识相应参考画面的至少一个画面标识符的第二集合。可以以任意顺序按顺序执行步骤S60和S61或者至少部分地并行执行步骤S60和S61。
下一个步骤S62基于在步骤S60中确定的第一集合和在步骤S61中确定的第二集合来形成画面标识符的联合集合。
可选的但优选的下一个步骤S63将联合集合中的画面标识符的最大数量(IDS)与参考画面的最大数量(MAX)(即，通常在SPS中信号通知的参数max_num_ref_frames)进行比较。如果联合集合中的画面标识符的总数超过可以存储在解码画面缓冲器中的参考画面的最大数量，则该方法继续到步骤S64。该步骤S64移除包含在第一集合中但是不包含在第二集合中的一个或多个画面标识符，直到联合集合中的画面标识符的总数不再超过参考画面的最大数量为止。因此，通过移除在步骤S60中确定的画面标识符更新了联合集合。优选地，以画面标识符在图11的步骤S52中标识的预定义缓冲器描述中列出的顺序，即从最后一个画面标识符开始向前，移除画面标识符。
在特定实施例中，画面的编码表示优选地包括用于指示是否已经为当前画面选择了缓冲器描述信息的显式信号通知和／或缓冲器描述信息的隐式信号通知的标记。在该情况下，解码器从画面的编码表示(例如，从片首部或从某一其他控制信息字段)中获取标记，以确定已经用于当前画面的缓冲器描述信息的信号通知的类型。
图13是示出了图9中的方法的附加步骤的流程图，通过这些附加步骤，在步骤S32中更新的解码画面缓冲器用于解码目的。
一旦在步骤S32中更新了解码画面缓冲器，画面可能在解码画面缓冲器中可用但是不包含在缓冲器描述中。因此，在一个实施例中，解码器从解码画面缓冲器中移除在解码画面缓冲器中可用但是不包含在缓冲器描述中的画面，或者将这些画面标记为“不用于参考”或“不用于预测”。因此，在该实施例中，在包含缓冲器描述的画面的画面解码过程之前，由解码器执行从解码画面缓冲器中移除参考画面或者将画面标记为“不用于参考”。
步骤S70通过从解码画面缓冲器中移除存储在解码画面缓冲器中但是不与根据缓冲器描述信息确定的至少一个画面标识符中的任意一个相关联的任何参考画面示出了该过程。在该步骤S70的备选实施例中，不必从解码画面缓冲器中移除参考画面。步骤S70的该实施例将存储在解码画面缓冲器中但是不与根据缓冲器描述信息确定的至少一个画面标识符中的任意一个相关联的任何参考画面标记为不用于参考或者不用于预测。这意味着，标记的参考画面将不用作针对当前画面或者针对视频流中的任何后续画面的预测基础。因此，如果需要得到解码画面缓冲器中的可用位置，则解码器可以输出标记的参考画面。在特定实施例中，标记为不用于参考的画面不能包含在缓冲器描述中并且能够被重新标记为用于参考。
在特定实施例中，优选地，在步骤S70中将存在于解码画面缓冲器中并且与基于缓冲器描述信息确定的画面标识符中的任意一个相关联的任何参考画面标记为用于参考。在一个实施例中，可以将参考画面标记为用于短期参考或者用于长期参考。优选地，基于缓冲器描述信息来这两个特定备选方式之间进行选择。
步骤S71示出了附加的可选实施例。该实施例输出画面中的由解码器根据缓冲器描述标记为不用于参考的零个或更多个画面以由解码器进行显示。针对输出的一个此类示例性过程是来自H.264／MPEG-4AVC的缓冲过程。输出在本文中是指输出以进行显示。在H.264和HEVC中，哪些画面用作参考画面以及哪些画面要输出(即，显示)是不同的。这意味着可以在将画面作为参考画面(即，标记为不用于参考的参考画面)进行移除之前输出画面，或者可以在输出画面之前通过将画面标记为不用于参考来将该画面作为参考帧进行移除。
在解码过程期间，可能发生这样的情况，即，缓冲器描述包含与不可用因此不能用于参考画面的画面(也称作帧)有关的信息。在一个实施例中，如果缓冲器描述包含与在解码画面缓冲器中不可用的画面有关的信息，则解码器可以产生多个“不存在”画面。可以向每一个此类画面提供变量赋值保存信息，即使画面不可用于帧间预测或运动向量预测，解码器也可以在解码过程中使用变量赋值保存信息。该信息可以包括但不限于：解码顺序号、显示顺序号、时间层信息、视图信息，即，诸如frame_num、POC、termporal_id和view_id等的参数。
在一个实施例中，在包含缓冲器描述信息的画面的画面解码过程之前，由解码器执行对不存在画面的产生。
步骤S72和S73示出了这种实施例。步骤S72将根据缓冲器描述信息确定的至少一个画面标识符和与已经存储在解码画面缓冲器中的参考画面相关联的画面标识符进行比较。如果在存储在解码画面缓冲器中的参考画面的画面标识符中未找到确定的画面标识符，则确定与确定的画面标识符相关联的画面丢失或不存在。在一个实施例中，在步骤S73中可选地产生不存在画面并且将不存在画面存储在解码画面缓冲器中。然后，向该不存在画面分配根据缓冲器描述信息获得的与该特定画面有关的任何参数，例如，画面标识符。然后，该方法继续到图9的步骤S33，在步骤S33中，可以开始解码过程。
优选地，将在缓冲器描述中信号通知但是不存在于解码画面缓冲器中的画面标记为“不存在”。然而，因为这些画面的POC和temporal_id包含在缓冲器描述中，因此不需要参考画面列表修改的显式信号通知。如果“不存在”画面不用于参考，则解码过程将在无需额外信号通知的情况下正确地进行(并且没有在显式地信号通知参考画面列表修改的情况下并入的开销)。
在一个实施例中，在第一步骤中，由解码器执行在步骤S70中对零个或更多个画面的标记。在第二步骤中，由解码器在步骤S71中输出零个或更多个画面。在第三步骤中，由解码器在步骤S73中产生零个或更多个“不存在”画面。
在备选实施例中，在第一步骤中，由解码器在步骤S70中执行对零个或更多个画面的标记。然后，由解码器针对在缓冲器描述中描述的在解码画面缓冲器中不可用的每一个画面执行输出画面(S71)和产生不存在画面(S73)的迭代过程。
通过在对当前画面进行画面解码之前应用缓冲器操作(例如，画面标记过程)从而具有要应用于当前画面的显式缓冲器描述，进一步增强了实施例。这使得参考画面管理甚至更不易发生错误，改善了时间可缩放性的可能性，并且减小了由于参考画面列表修改信号通知引入的开销。
在一个实施例中，缓冲器描述可以包含解码器在参考画面列表初始化或参考画面列表修改或参考画面列表组合中使用的信息。示例是在缓冲器描述中列出画面的顺序可以用作参考画面列表初始化中参考画面列表之一的初始顺序。因此，当创建参考画面列表时，可以使用缓冲器描述信息。
图14是示出了这种方法的流程图。该方法从图9的步骤S32继续。下一个步骤S80基于缓冲器描述信息来执行参考画面列表初始化。在步骤S80的特定实施例中，通过根据缓冲器描述信息定义在图9的步骤S31中确定的至少一个画面标识符的顺序在参考画面列表中对参考画面进行排序，来基于缓冲器描述信息执行参考画面列表初始化。
在一个实施例中，针对包含在缓冲器描述中的画面规定约束。示例性约束是如果tId(A)<tId(B)，则在缓冲器描述中针对具有temporal_id tId(B)的画面B描述的具有temporal_id tId(A)的画面A不可能是不存在画面。
在一个实施例中，还可以通过缓冲器描述信号通知针对解码画面缓冲器中的画面的属性的改变。示例是通过在缓冲器描述中信号通知针对时间层和／或显示顺序的新值来改变画面的时间层和／或显示顺序。
图16是根据一个实施例的参考缓冲器方案的简化流程图。在该方案中，如图16中所示，在对画面的第一片首部进行解析之后但是在画面解码之前使用解码画面缓冲器的描述来应用所有解码画面缓冲器操作。例如，缓冲器描述是在片首部中显式地或者通过参考在PPS中信号通知的预定义结构来信号通知的。
由此，本实施例对解码过程提供了较大构思改变。在传统的H.264／MPEG-4AVC和HEVC的当前设计中，向解码器隐式地提供相对操作，即，滑动窗，或者显式地提供相对操作，即，MMCO，并且解码器负责应用这些相对操作并且跟踪参考画面，即，哪些画面可以用于参考。在所提出的方案中，在当前画面中(例如，在片首部中)信号通知参考画面，即，哪些画面可以用于参考，从而消除对隐式地和显式地信号通知的相对操作的需要。
这意味着，每一个画面将具有参考画面的绝对描述，而不是像在H.264／MEPG-4AVC中一样的相对描述，在H.264／MEPG-4AVC中，根据MMCO或者通过使用滑动窗过程来获取增量信息。
根据特定实施例，缓冲器描述包含解码画面缓冲器中的所有参考画面的delta_POC、termporal_id和additional_picture_id，以提供针对要用作参考画面的画面的绝对参考。delta_POC用于按POC(ref)=POC(current)+delta_POC来计算参考画面的POC。在一个实施例中，画面将由POC和additional_picture_id对来标识。Temporal_id被包含在缓冲器描述中以使得能够在丢失或移除画面的情况下进行正确的参考画面列表修改，例如，时间可缩放性。但是，本方案不限于码字delta_POC、temporal_id和additional_picture_id。与画面相关联并且用于参考画面处理的任何码字可以用作画面标识符，并且可以相对于当前画面的值包含在缓冲器描述中(例如，POC和delta_POC)或者绝对的包含在缓冲器描述中(例如，temporal_id)。
优选地，解码画面缓冲器中不是缓冲器描述的一部分的所有画面被标记为不用于参考。
在H.264／MPEG-4AVC中，传送画面以进行输出的过程(在图1中也称作”缓冲”过程)有时是在解码之前执行的，即，如果在frame_num中存在间断的话。”缓冲”过程也在解码和画面标记之后执行。
在图16的所提出的方案中，”缓冲”过程是在解码之前应用的。可以认为在传送画面以进行输出之前这对解码过程施加了额外延迟。然而，应当注意的是，一旦解码画面缓冲器中的非显示画面的数量大于或等于num_reorder_frames，就已经唯一地定义了在解码过程步骤之后要显示的第一画面。因此，解码器可以在解码过程步骤之后直接传送该画面以进行显示。因此，所提出的方案的延迟等于当前HEVC方案的延迟。
在H.264／MPEG-4AVC中，语法元素frame_num用于标识解码画面缓冲器中的画面并且用于检测frame_num中的间断。如果gaps_in_frame_num_allowed等于1，则解码器将“不存在”帧插入到解码画面缓冲器中，以使滑动窗过程正确地操作。
在图16中所示的所提出的方案中，POC和additional_picture_id的组合可以用于标识解码画面缓冲器中的画面。所提出的方案无需包含滑动窗过程。因此，建议移除语法元素frame_num和gaps_in_frame_num_allowed。
图15示出了实施例可以被应用于的编码结构的示例。在图15中的示例中，按解码顺序的第二画面将在其缓冲器描述中包括POC0，而按解码顺序的第三画面将在其缓冲器描述中包括POC0和POC4。按解码顺序的第四画面必须不仅在其缓冲器描述中包括POC0和POC2，而且还包括POC4，这是因为该画面将用于将来参考。除非按解码顺序的第五画面即将用于将来参考，否则该第五画面无需在其缓冲器描述中包括POC0。如果POC0未包含在缓冲器描述中，则将使其不用于参考。
在图15中的示例中，additional_picture_id(或者additional_id)对于所有画面均为0。除非由于POC回绕因此存在可用于参考的具有相同的POC的两个不同的画面，否则推荐将additional_picture_id设置为0。如果对于两个不同的画面而言POC是相同的，则additional_picture_id优选地是不同的，以不会无条件地用新画面替换旧画面。可以使用additional_picture_id以提供在H.264／MPEG-4AVC中由长期画面提供的所有功能和可能性。因此，在特定实施例中，构成画面标识符的一部分的additional_picture_id可以用于信号通知参考画面要用于长期参考还是短期参考。
考虑编码器希望使用具有POC14和设置为0的additional_picture_id的画面A作为“长期画面”的示例。只要编码器希望画面A可用于参考，编码器然后就必须确保画面A包含在A之后的所有画面的片首部中的缓冲器描述中。如果编码器希望对具有POC14的另一画面(由于POC回绕)进行编码并且A仍然可用于参考，则编码器应当选择另一additional_picture_id值(例如，1)以避免将A作为参考画面进行替换。
对于将用于在短时段期间参考的画面(短期参考画面)，推荐将additional_picture_id设置为0，以最小化比特开销。对于将用于在长时段期间参考的画面(长期画面)，推荐编码器确保没有具有相同POC和相同additional_picture_id的两个画面同时可用于预测。
实施例的另一方案定义了被配置为创建定义哪些画面要用于参考画面(即，存储在解码画面缓冲器中以用于后续解码的参考画面)的缓冲器描述信息的编码器。缓冲器描述信息的至少一部分被插入到由编码器编码的比特流中。
图18是编码器100的实施例的示意性框图。编码器100被配置为对包括多个画面的视频流的画面进行编码。编码器100包括参考画面确定器110，被配置为针对视频流的多个画面中的当前画面确定至少一个参考画面。至少一个参考画面用作针对当前画面的编码参考。编码器100的画面标识符提供器120被配置为提供由参考画面确定器110确定的每一个参考画面的相应画面标识符。由画面标识符提供器120提供的画面标识符标识其相关联的参考画面。由画面标识符提供器120提供的画面标识符通过列出对当前画面进行编码和解码所需的参考画面以及可选的对视频流的后续画面进行编码和解码所需的视频流的任何先前参考画面的画面标识符来共同构成针对当前画面的缓冲器描述。
编码器100还包括缓冲器描述信息产生器130，被配置为产生定义由参考画面确定器110确定的至少一个参考画面的缓冲器描述的信息，即，缓冲器描述信息。缓冲器描述信息产生器130被配置为基于来自画面标识符提供器120的至少一个画面标识符来产生该缓冲器描述信息。
数据插入器140被实现在编码器100中以将由缓冲器描述信息产生器130产生的缓冲器描述信息插入到当前画面的编码表示中。因此，视频流的与当前画面有关的编码比特流承载缓冲器描述信息。这意味着，画面的编码表示将承载定义有关信息(即，画面标识符)的缓冲器描述信息，解码器需要该有关信息来更新针对当前画面的解码画面缓冲器从而实现对画面的编码表示的解码。
如本文先前已经讨论的，参考画面确定器110优选地被配置为不仅将视频流的任何参考画面确定为针对当前画面的编码参考，而且将任何参考画面(优选地，存在于视频流中的按解码顺序在当前画面之前的任何参考画面)确定为针对根据解码顺序的一个或多个后续画面的编码参考。
在特定实施例中，每一个画面可以由一个或多个片构成。然后，可以将每一个此类片独立于相同画面的其他片进行编码和解码。因此，优选地，参考画面确定器110针对至少一个片(优选地，针对画面的每一个片)确定要用于对特定片进行编码和解码的至少一个参考画面。优选地，画面标识符提供器120为由参考画面确定器110针对当前画面(即，针对其所有片)确定的所有参考画面提供相应的画面标识符。由此，缓冲器描述信息产生器130基于这些提供的画面标识符来产生缓冲器描述信息。在优选的实施例中，数据插入器140被配置为将缓冲器描述信息插入到画面的编码表示的相应片首部中。在该情况下，当前画面的每一个片首部优选地承载相同的缓冲器描述信息。这使得即使画面的另一片意外丢失，也能够对给定片进行解码。
此外，如本文先前所讨论的，画面的编码表示中的控制信息中的其他位置可以用于承载缓冲器描述信息。
实施例的缓冲器描述可以包括参考画面的画面标识符。备选地，缓冲器描述包括增量标识符，该增量标识符可以与当前画面的画面标识符一起使用以计算参考画面的画面标识符。
在该情况下，编码器100优选地包括标识符计算器150，被配置为针对由画面标识符提供器120提供的每一个画面标识符，计算该画面标识符与当前画面的画面标识符之间的差值。该差值与针对参考画面的增量标识符相对应。缓冲器描述信息产生器130然后被配置为基于由标识符计算器150计算出的至少一个差值／增量标识符来产生缓冲器描述信息。缓冲器描述信息由此相对于当前画面的画面标识符定义参考画面的至少一个画面标识符。
画面的编码表示可以将由画面标识符提供器120提供的画面标识符或者由标识符计算器150计算出的增量标识符作为缓冲器描述信息承载在例如片首部中。这在画面的编码表示中提供了缓冲器描述的显式信号通知。
在备选实施例中，编码器100包括数据结构产生器160，被配置为产生包括多个预定义缓冲器描述的数据结构。每一个此类预定义缓冲器描述由此定义至少一个参考画面。数据结构由此可以用于视频流中的多个画面以提供在针对这些画面进行解码时要使用的缓冲器描述。缓冲器描述信息产生器130由此被配置为基于由画面标识符提供器120针对当前画面提供的至少一个画面标识符来选择数据结构的缓冲器描述。与至少一个参考画面标识符正确匹配的缓冲器描述由此被选择，并且由缓冲器描述信息产生器130产生的缓冲器描述信息包括所选择的缓冲器描述的标识符。
然后，由数据结构产生器160产生的数据结构可以被插入到与视频流的编码表示相关联的控制信息字段中(例如，插入到PPS或SPS中)。有关控制信息的标识符(即，PPS标识符或SPS标识符)(可以具有针对PPS的PPS标识符的形式，PPS进而包括针对有关SPS的SPS标识符)优选地被包含在当前画面的编码表示的控制信息中(例如，包含在片首部中)。在一个实施例中，片首部或其他控制信息字段由此承载控制信息标识符和所选择的缓冲器描述的标识符作为缓冲器描述信息。
可以组合画面标识符的显式信号通知和画面标识符的参考信号通知的上述描述实施例。在该情况下，缓冲器描述信息产生器130被配置为产生缓冲器描述信息，该缓冲器描述信息包括所选择的缓冲器描述的标识符，优选地还包括控制信息标识符，并且包括定义参考画面的画面标识符的诸如增量标识符或显式画面标识符等的信息。
编码器100可以使用画面标识符的先前讨论的示例中的任意一个，例如，无歧义地标识参考画面的POC值、或者POC值和附加标识符。
视频流可以是画面被分组为多个层的可缩放视频流。在该情况下，画面标识符提供器120被配置为针对每一个参考画面提供画面标识符和时间层信息或者标识参考画面所属的层的标识符。缓冲器描述信息产生器130然后基于至少一个画面标识符并且基于时间层信息来产生缓冲器描述信息。因此，缓冲器描述信息优选地定义至少一个画面标识符和时间层信息。
参考画面确定器110优选地被配置为确定至少一个参考画面作为用于对当前画面进行帧间预测和／或运动向量预测的编码参考。由此可以通过最大化画面的编码表示的压缩或编码效率(即，最小化表示编码表示所需的诸如比特等的符号的数量)来确定至少一个参考画面。优选地，在符合从具有预定义的参考画面的最大数量和当从视频流的编码表示中移除画面的至少一个编码表示时也产生视频流的可解码表示中选择的至少一个边界约束的同时执行该压缩最大化。其他备选的或附加的边界约束是所选择的参考画面必须可用于在解码画面缓冲器中进行参考和预测。
可以至少部分地用软件实现编码器。在如图19中所示的此类实施例中，编码器300包括输入部分310，被配置为接收视频流的多个画面。编码器300还包括处理器330，被配置为处理存储在存储器340中的计算机程序的代码装置。当在处理器330上运行代码装置时，该代码装置使处理器330针对视频流的画面确定视频流的至少一个参考画面作为针对该画面的编码参考。还使处理器330针对每一个参考画面提供标识参考画面的画面标识符，并且基于至少一个画面标识符来产生定义至少一个参考画面的缓冲器描述信息。还使处理器330将缓冲器描述信息插入到画面的编码表示中。编码器330还包括输出部分320，被配置为输出画面的编码表示。
处理器330可以是通用或专门适配的计算机、处理器或微处理器，例如，中央处理单元(CPU)。软件包括执行图18的至少参考画面确定器110、画面标识符提供器120、缓冲器描述信息产生器130和数据插入器140的操作的计算机程序代码单元或软件代码部分。
程序可以完全或部分地存储在一个或多个适合的易失性计算机可读介质或数据存储装置(例如，RAM)或者一个或多个非易失性计算机可读介质或数据存储装置(例如，磁盘、CD-ROM、DVD磁盘、硬盘、ROM或闪存)之上或之中。数据存储装置可以是本地数据存储装置，或者在远端被提供在例如数据服务器中。软件因此可以被装载到计算机或等同处理系统的操作存储器中以由处理器执行。计算机／处理器不必专用于仅执行上述功能，而且还可以执行其他软件任务。用于定义编码器300的程序代码的非限制性示例包括单指令多数据(SIMD)代码。
备选地，可以用硬件实现编码器。电路元件存在多种变形，其可以被使用和组合以实现图18中的编码器100的单元110-160的功能。这些变形由实施例涵盖。编码器100的硬件实现的特定示例是数字信号处理器(DSP)硬件和集成电路技术中的实现，包括通用电子电路和专用电路二者。
根据实施例的一个方案，提供了如图17中所示的发射机200。发射机200包括输入部分210，被配置为接收视频流的多个画面10。将画面10转发给例如图18中或者图19中所示的编码器100，编码器100被配置为对多个画面10进行编码以产生多个画面的相应编码表示。发射机200的输出部分220被配置为将多个画面的相应编码表示作为承载实施例的缓冲器描述信息的编码比特流进行输出。
实施例的一个方案涉及用于检测缓冲器描述信息并且用于基于检测到的缓冲器描述来确定针对要用作用于解码的参考画面的画面的绝对参考的解码器，以及用于存储要用作参考画面的画面的缓冲器。
图21是根据一个实施例的解码器400的示意性框图。解码器400被配置为对包括多个画面的视频流的画面的编码表示进行解码。解码器400包括数据获取器410，被配置为从画面的编码表示中获取定义至少一个参考画面的缓冲器描述信息。画面标识符确定器420使用该缓冲器描述信息，其中，画面标识符确定器420被配置为确定至少一个画面标识符，该至少一个画面标识符将相应参考画面标识为针对画面的解码参考。解码器400还包括缓冲器管理器430，被配置为基于由画面标识符确定器420确定的至少一个画面标识符来更新解码器400的或者与解码器400相关联的解码画面缓冲器。
在特定实施例中，数据获取器410被配置为从画面的编码表示中获取定义多个画面标识符的缓冲器描述信息。画面标识符确定器420然后被配置为基于获取的缓冲器描述信息来确定将相应参考画面标识为针对画面的解码参考的至少一个画面标识符和将相应参考画面标识为视频流的针对根据解码顺序的后续画面的解码参考的至少一个画面标识符。
缓冲器管理器430优选地被配置为更新解码画面缓冲器以包括由至少一个画面标识符标识的相应参考画面。
因此，由画面的编码表示承载的缓冲器描述信息用于标识需要存储在解码画面缓冲器中以对当前画面进行解码并且对视频流的后续画面进行解码的参考画面。缓冲器描述信息由此向解码器400提供了更新解码画面缓冲器以存储正确的参考画面所需的信息。
一旦缓冲器管理器430已经更新了解码画面缓冲器，解码器400就可以基于画面的编码表示和存储在更新的解码画面缓冲器中的至少一个参考画面来对画面进行解码。
优选地，在画面的编码表示的控制信息中提供缓冲器描述信息。例如，数据获取器410可以被配置为从画面的编码表示的片首部中获取缓冲器描述信息。在该情况下，优选地，从针对当前画面接收的第一片首部获取缓冲器描述，这是因为画面的任何剩余片首部将优选地承载相同的缓冲器描述信息。
获取的缓冲器描述信息可以包括要存储在解码画面缓冲器中的参考画面的显式画面标识符。在备选实施例中，缓冲器描述信息定义参考画面的相应增量标识符。画面标识符确定器420然后被配置为从缓冲器描述信息中获取至少一个增量标识符，并且基于相应的增量标识符和当前画面的画面标识符(优选地，按照增量标识符和当前画面的画面标识符之和)来计算至少一个画面标识符。
可以使用参考信号通知而不是画面的编码表示中的画面标识符或增量标识符的显式信号通知。在该实施例中，数据获取器410被配置为从画面的编码表示中获取缓冲器描述的标识符。解码器400优选地包括缓冲器描述标识器480，被配置为使用获取的缓冲器描述的标识符来从包括多个预定义缓冲器描述的数据结构中标识缓冲器描述。
在该实施例中，数据获取器410优选地还被配置为从视频流的编码表示的控制信息字段或者与视频流的编码表示相关联的控制信息字段中(例如，从PPS或SPS中)获取定义多个预定义缓冲器描述的数据结构。
在特定实施例中，画面的编码表示的控制信息字段(例如，片首部)优选地包括携带数据结构的控制信息字段(例如，PPS或SPS)的标识符。数据获取器410由此获取该标识符并且使用该标识符来标识具有数据结构的有关控制信息字段。
在另一实施例中，缓冲器描述信息包括缓冲器描述的标识符和标识至少一个画面标识符的诸如画面标识符或增量标识符等的信息。画面标识符确定420然后被配置为根据所标识的缓冲器描述(优选地，根据数据结构)来确定至少一个画面标识符的第一集合。画面标识符确定器420还根据定义至少一个画面标识符的信息来确定至少一个画面标识符的第二集合，其中，已经在画面的编码表示中(例如，以画面标识符或增量标识符的形式)显式地信号通知了该信息。然后，由画面标识符确定器420根据第一集合和第二集合来形成画面标识符的联合集合。
在特定实施例中，解码器400包括数量比较器440，被配置为将联合集合中的画面标识符的总数与可以存储在解码画面缓冲器中的参考画面的最大数量进行比较。如果联合集合中的画面标识符的总数超过参考画面的最大数量，则画面标识符确定器420被配置为移除包含在第一集合中但是不包含在第二集合中的一个或多个画面标识符，直到联合集合中的画面标识符的总数不再超过参考画面的最大数量为止。
在特定实施例中，解码器400的缓冲器管理器430被配置为移除存在于解码画面缓冲器中但是不与根据缓冲器描述信息确定的至少一个画面标识符中的任意一个相关联的任何参考画面。因此，优选地由缓冲器管理器430从解码画面缓冲器中移除存储在解码画面缓冲器中但是未根据缓冲器描述信息标识的任何参考画面。
在备选的且优选的方法中，缓冲器管理器430被配置为将存储在解码画面缓冲器中但是不与来自缓冲器描述信息的至少一个画面标识符中的任意一个相关联的所有参考画面标记为不用于参考，也称作不用于预测。
在特定实施例中，优选地，由缓冲器管理器430将存在于解码画面缓冲器中并且与基于缓冲器描述信息确定的画面标识符中的任意一个相关联的任何参考画面标记为用于参考。在一个实施例中，可以将参考画面标记为用于短期参考或者用于长期参考。优选地，基于缓冲器描述信息在这两个特定备选方式之间进行选择。
解码器400的缓冲器管理器430优选地被配置为在解码器400对当前画面进行解码之前标记任何参考画面。
在特定实施例中，解码器400包括输出部分450，被配置为在解码器400对当前画面进行解码之前输出来自解码画面缓冲器中的零个或更多个画面以进行显示。在特定实施例中，输出部分450输出被缓冲器管理器430标记为不用于参考的任何参考画面。
解码器400的可选的实施例包括：标识符比较器460，被配置为将由画面标识符确定器420确定的至少一个画面标识符与存储在解码画面缓冲器中的参考画面的画面标识符进行比较。如果由缓冲器描述信息定义的至少一个画面标识符在解码画面缓冲器中不具有匹配的参考画面，则由画面标识符确定器420确定与给定画面标识符相关联的画面不存在或者丢失。
在可选的实施例中，画面标识符确定器420被配置为产生任何不存在画面并且将该产生的画面存储在解码画面缓冲器中。优选地，由画面标识符确定器420将画面标识符和可以根据缓冲器描述信息获得的与不存在画面有关的任何其他信息分配给产生的画面。
解码器400还可以包括列表管理器470，被配置为基于缓冲器描述信息来执行参考画面列表初始化。在特定实施例中，列表管理器470被配置为通过根据缓冲器描述信息定义至少一个画面标识符的顺序在参考画面列表中对参考画面进行排序，来执行参考画面列表初始化。因此，缓冲器描述信息不仅定义参考画面的画面标识符，而且在缓冲器描述信息中定义这些画面标识符的顺序还向列表管理器470提供与形成参考画面列表有关的指令。
可以至少部分地用软件实现解码器。在如图22中所示的此类实施例中，解码器600包括输入部分610，被配置为接收视频流的多个画面的编码表示。解码器600还包括处理器630，被配置为处理存储在存储器640中的计算机程序的代码装置。当在处理器630上运行代码装置时，代码装置使处理器630从画面的编码表示中获取定义至少一个参考画面的缓冲器描述信息。代码装置还使处理器630根据缓冲器描述信息来确定标识相应参考画面的至少一个画面标识符。相应的参考画面要用作针对画面的解码参考。还使处理器630基于至少一个画面标识符来更新解码画面缓冲器650。解码器600还包括输出部分620，被配置为输出视频流的解码画面。
处理器630可以是通用或专门适配的计算机、处理器或微处理器，例如，中央处理单元(CPU)。软件包括执行图21的至少数据获取器410、画面标识符确定器420和缓冲器管理器430的操作的计算机程序代码单元或软件代码部分。
程序可以完全或部分地存储在一个或多个适合的易失性计算机可读介质或数据存储装置(例如，RAM)或者一个或多个非易失性计算机可读介质或数据存储装置(例如，磁盘、CD-ROM、DVD磁盘、硬盘、ROM或闪存)之上或之中。数据存储装置可以是本地数据存储装置，或者在远端被提供在例如数据服务器中。软件因此可以被装载到计算机或等同处理系统的操作存储器中以由处理器执行。计算机／处理器不必专用于仅执行上述功能，而且还可以执行其他软件任务。用于定义解码器600的程序代码的非限制性示例包括单指令多数据(SIMD)代码。
备选地，可以用硬件实现解码器。电路元件存在多种变形，其可以被使用和组合以实现图21中的编码器400的单元410-480的功能。这些变形由实施例涵盖。解码器400的硬件实现的特定示例是数字信号处理器(DSP)硬件和集成电路技术中的实现，包括通用电子电路和专用电路二者。
根据实施例的一个方案，提供了如图20中所示的接收机500。接收机500包括输入部分510，被配置为接收视频流的多个画面的编码表示。编码表示承载根据实施例的缓冲器描述信息。将编码表示转发给如图21或图22所示的解码器400，其中，该解码器400被配置为对多个画面的编码表示进行解码。接收机500的输出部分520被配置为输出视频流的解码画面。接收机500还包括解码画面缓冲器530，存储当解码器400对画面进行解码时要使用的参考画面。
附录
本附录给出了所提出的实施例的语法。在附录中，用下划线标记关于现有HEVC提案所添加的语法元素，并且用删除线标记移除的语法元素。
片首部
Figure BDA0000449799440000371
Figure BDA0000449799440000381
画面参数集合
pic_parameter_set_rbsp(){ 描述符
pic_parameter_set_id ue(v)
seq_parameter_set_id ue(v)
entropy_coding_mode_flag u(l)
num_ref_idx_10_default_active_minusl ue(v)
num_ref_idx_11_default_active_minusl ue(v)
pic_init_qp_minus26／*relative to 26*／ se(v)
constrained_intra_pred_flag u(l)
number_of_buffer_descriptions ue(v)
for(number_of_buffer_descriptions){
number_of_pictures_in_buffer_description ue(v)
for(number_of_pictures_in_buffer_description){
if(num_reorder_frames>0)
delta_POC_sign u(l)
absolute_delta_POC_minus_one ue(v)
temporal_id u(v)
}
rbsp_trailing_bits()
}
所提出的语义
针对缓冲器描述应用的解码过程
在针对每一个I、P或B画面的解码过程开始时，在对画面的第一片中的第一编码单元进行解码之前并且在针对参考画面列表构造的解码过程之前，调用该过程。
该过程可能导致将一个或多个画面标记为“不用于参考”。
该过程可以导致构造“不存在”画面，如在创建不存在画面中所描述的。
通过变量POC和additional_picture_id标识参考画面以在解码过程中使用。
如果并且仅当针对0至number_pictures_in_buffer_description的范围中的任意i，POC(r)=POC(curr)+delta_POC(i)并且additional_picture_id(r)=additional_picture_id(i)，解码画面缓冲器中的参考画面r才被认为是缓冲器描述的一部分。
针对缓冲器描述应用的操作序列
缓冲器描述应用按如下有序步骤进行：
1、根据当前画面是否是IDR画面，来应用以下操作。
-如果当前画面是IDR画面，则将所有参考画面标记为不用于参考。
-否则(当前画面不是IDR画面)，则应用以下有序步骤：
I、当前画面的第一片中的片首部中的缓冲器描述信息用于创建参考画面列表，也称作缓冲器描述，如创建缓冲器描述中所描述的。
II、(解码画面缓冲器中)不是缓冲器描述的一部分的所有参考画面被标记为“不用于参考”。
III、如果缓冲器描述中包括的一个或多个画面不可用于参考(即，存在于参考缓冲器中的画面被标记为“用于参考”)。则调用在创建不存在画面中描述的过程。
2、对当前画面的片进行解码。
创建缓冲器描述
如果buffef_description_reference_flag是1，则创建这样的缓冲器描述，即，针对从0到number_of_pictures_in_buffer_description-1的范围中的每一个画面i，将增量POC设置为由buffer_description_id标识的PPS缓冲器描述条目的增量POC，将temporal_id设置为由buffer_description_id标识的PPS缓冲器描述条目的temporal_id，并且将additional_picture_id设置为0。
如果buffer_description_reference_flag是0，则创建这样的缓冲器描述，即，针对从0到number_of_explicitly_signaled_pictures-1的范围中的每一个画面i，将增量POC设置为显式地信号通知的缓冲器描述的增量POC，将temporal_id设置为显式地信号通知的缓冲器描述的temporal_id，并且将additional_picture_id设置为显式地信号通知的缓冲器描述的additional_picture_id。
创建不存在画面
针对包含在当前画面的缓冲器描述中但是在解码画面缓冲器中不可用的每一个画面调用该过程。也即是说，如果当前画面的缓冲器描述包含具有POC(i)和additional_picture_id(i)的条目i，则在解码画面缓冲器中不存在标记为“用于参考”的具有POC(j)==POC(i)和additional_picture_id(j)==additional_picture_id(i)的画面j。
对于每一个此类描述，在POC被设置为POC(i)、additional_picture_id被设置为additional_picture_id(i)、temporal_id被设置为temporal_id(i)的情况下产生“不存在”画面，并且将“不存在”画面标记为“不存在”和“用于参考”。产生的帧的示例性值可以被设置为任意值。在帧间预测过程中将不涉及被标记为“不存在”的这些产生的帧。
上述实施例应被理解为本发明的几个示意性示例。本领域技术人员将理解的是，可以在不偏离本发明的范围的情况下对实施例进行多种修改、组合和改变。具体地，如果技术上可行的话，可以在其他配置中组合不同实施例中的不同部分解决方案。然而，本发明的范围由所附权利要求来限定。

Claims (56)

1.一种对多个画面(10、40、42、50)构成的视频流(1)中的画面(10)的编码表示(60)进行解码的方法，所述方法包括：
从所述画面(10)的所述编码表示(60)中获取(S30)定义至少一个参考画面(40、42)的缓冲器描述信息；以及
基于所述缓冲器描述信息来确定(S31)至少一个画面标识符，所述至少一个画面标识符将所述至少一个参考画面(40、42)中的相应参考画面(40、42)标识为所述画面(10)的解码参考；以及
基于所述至少一个画面标识符来更新(S32)解码画面缓冲器(530、650)。
2.根据权利要求1所述的方法，其中，更新(S32)所述解码画面缓冲器(530、650)包括：更新(S32)所述解码画面缓冲器(530、650)以包括由所述至少一个画面标识符标识的所述相应参考画面(40、42)。
3.根据权利要求1或2所述的方法，其中，
获取(S30)所述缓冲器描述信息包括：从所述画面(10)的所述编码表示(60)中获取(S30)定义多个参考画面(40、42)的所述缓冲器描述信息；
确定(S31)所述至少一个画面标识符包括：基于所述缓冲器描述信息来确定(S31)：(i)将所述多个参考画面(40、42)中的相应参考画面(40、42)标识为所述画面(10)的解码参考的至少一个画面标识符，以及(ii)将所述多个参考画面(40、42)中的相应参考画面(42)标识为所述视频流(1)中根据解码顺序的后续画面(50)的解码参考的至少一个画面标识符。
4.根据权利要求1至3中任意一项所述的方法，还包括：基于所述画面(10)的所述编码表示(60)和存在于所述解码画面缓冲器(530、650)中的至少一个参考画面(40、42)来对所述画面(10)进行解码(S33)，其中，对所述画面(10)进行解码是在更新所述解码画面缓冲器(530、650)之后执行的。
5.根据权利要求1至4中任意一项所述的方法，其中，更新(S32)所述解码画面缓冲器(530、650)包括：将存在于所述解码画面缓冲器(530、650)中但不与基于所述缓冲器描述信息确定的所述至少一个画面标识符中的任意一个相关联的所有参考画面标记(S70)为不用于参考。
6.根据权利要求1至5中任意一项所述的方法，其中，更新(S32)所述解码画面缓冲器(530、650)包括：将存在于所述解码画面缓冲器(530、650)中并且与基于所述缓冲器描述信息确定的所述至少一个画面标识符中的画面标识符相关联的参考画面标记(S70)为用于参考，优选地标记为用于短期参考或用于长期参考。
7.根据权利要求5或6所述的方法，其中，标记任何参考画面是在对所述画面(10)进行解码之前执行的。
8.根据权利要求1至7中任意一项所述的方法，还包括：在对所述画面(10)进行解码之前，输出(S71)来自所述解码画面缓冲器(530、650)的零个或更多个画面以进行显示。
9.根据权利要求1至8中任意一项所述的方法，其中，获取(S30)所述缓冲器描述信息包括：从所述画面(10)的所述编码表示(60)的片首部(65)中获取所述缓冲器描述信息。
10.根据权利要求1至9中任意一项所述的方法，其中，确定(S31)所述至少一个画面标识符包括：
基于所述缓冲器描述信息来获取(S40)相应增量标识符；以及
基于标识所述画面(10)的画面标识符和所述相应增量标识符来计算(S41)所述至少一个画面标识符。
11.根据权利要求1至10中任意一项所述的方法，其中，获取(S30)所述缓冲器描述信息包括：
从所述画面(10)的所述编码表示(60)中获取(S51)标识定义所述至少一个参考画面(40、42)的缓冲器描述的所述缓冲器描述信息；以及
基于所述缓冲器描述信息，从包括多个预定义缓冲器描述的数据结构中标识(S52)所述缓冲器描述，每一个预定义缓冲器描述定义至少一个参考画面(40、42)。
12.根据权利要求11所述的方法，还包括：从与所述视频流(1)的编码表示相关联的画面参数集合(67)或序列参数集合(68)中获取(S50)所述数据结构。
13.根据权利要求11或12所述的方法，其中，所述缓冲器描述信息包括标识所述缓冲器描述的标识符和定义至少一个参考画面(40、42)的信息，并且确定(S31)所述至少一个画面标识符包括：
基于所述缓冲器描述来确定(S60)标识相应参考画面的至少一个参考画面(40、42)的第一集合；
基于所述定义至少一个画面标识符的信息来确定(S61)标识相应参考画面的至少一个画面标识符的第二集合；以及
基于所述第一集合和所述第二集合来形成(S62)画面标识符的联合集合。
14.根据权利要求13所述的方法，还包括：
将所述联合集合中的画面标识符的总数与参考画面的最大数量进行比较(S63)；以及
如果所述画面标识符的总数超过所述参考画面的最大数量，则从所述联合集合中移除(S64)包含在所述第一集合中但不包含在所述第二集合中的一个或多个画面标识符，直到所述联合集合中的所述画面标识符的总数不超过所述参考画面的最大数量为止。
15.根据权利要求1至14中任意一项所述的方法，其中，更新(S32)所述解码画面缓冲器(530、650)包括：从所述解码画面缓冲器(530、650)中移除(S70)存在于所述解码画面缓冲器(530、650)中但不与根据所述缓冲器描述信息确定的所述至少一个画面标识符中的任意一个相关联的所有参考画面。
16.根据权利要求1至15中任意一项所述的方法，还包括：
将所确定的至少一个画面标识符和与存在于所述解码画面缓冲器(530、650)中的参考画面相关联的画面标识符进行比较(S72)；以及
如果在所确定的至少一个画面标识符中发现标识给定画面的画面标识符但是在所述解码画面缓冲器(530、650)中不存在所述给定画面，则确定(S73)所述给定画面不存在。
17.根据权利要求1至16中任意一项所述的方法，还包括：基于所述缓冲器描述信息来执行(S80)参考画面列表初始化。
18.根据权利要求1至17中任意一项所述的方法，其中，确定(S31)所述至少一个画面标识符包括：基于所述缓冲器描述信息来确定(S31)将所述相应参考画面(40、42)标识为所述画面(10)的解码参考的至少一个画面顺序计数POC值。
19.根据权利要求18所述的方法，其中，确定(S31)所述至少一个POC值包括：基于所述缓冲器描述信息来确定(S31)所述至少一个画面顺序计数POC值和将所述相应参考画面(40、42)标识为所述画面(10)的解码参考的至少一个附加标识符。
20.根据权利要求1至19中任意一项所述的方法，其中，所述视频流(1)是具有分组为多个层的画面(10、40、42、50)的可缩放视频流，并且获取(S30)所述缓冲器描述信息包括：获取(S30)定义所述至少一个画面标识符和标识所述多个层中所述相应参考画面(40、42)所属的相应层的层信息的所述缓冲器描述信息。
21.一种解码器(400)，被配置为对多个画面(10、40、42、50)构成的视频流(1)中的画面(10)的编码表示(60)进行解码，所述解码器(400)包括：
数据获取器(410)，被配置为从所述画面(10)的所述编码表示(60)中获取定义至少一个参考画面(40、42)的缓冲器描述信息；
画面标识符确定器(420)，被配置为基于所述缓冲器描述信息来确定至少一个画面标识符，所述至少一个画面标识符将所述至少一个参考画面(40、42)中的相应参考画面(40、42)标识为所述画面(10)的解码参考；以及
缓冲器管理器(430)，被配置为基于所述至少一个画面标识符来更新解码画面缓冲器(530)。
22.根据权利要求21所述的解码器，其中，所述缓冲器管理器(430)被配置为更新所述解码画面缓冲器(530)以包括由所述至少一个画面标识符标识的所述相应参考画面(40、42)。
23.根据权利要求21或22所述的解码器，其中，
所述数据获取器(410)被配置为从所述画面(10)的所述编码表示(60)中获取定义多个参考画面(40、42)的所述缓冲器描述信息；以及
所述画面标识符确定器(420)被配置为基于所述缓冲器描述信息来确定：(i)将所述多个参考画面(40、42)中的相应参考画面(40、42)标识为所述画面(10)的解码参考的至少一个画面标识符，以及(ii)将所述多个参考画面(40、42)中的相应参考画面(42)标识为所述视频流(1)中根据解码顺序的后续画面(50)的解码参考的至少一个画面标识符。
24.根据权利要求21至23中任意一项所述的解码器，其中，所述解码器(400)被配置为：在所述缓冲器管理器(430)已经更新所述解码画面缓冲器(530)之后，基于所述画面(10)的所述编码表示(60)和存在于所述解码画面缓冲器(530)中的至少一个参考画面(40、42)来对所述画面(10)进行解码。
25.根据权利要求21至24中任意一项所述的解码器，其中，所述缓冲器管理器(430)被配置为将存在于所述解码画面缓冲器(530)中但不与基于所述缓冲器描述信息确定的所述至少一个画面标识符中的任意一个相关联的所有参考画面标记为不用于参考。
26.根据权利要求21至25中任意一项所述的解码器，其中，所述缓冲器管理器(430)被配置为将存在于所述解码画面缓冲器(530、650)中并且与基于所述缓冲器描述信息确定的所述至少一个画面标识符中的画面标识符相关联的参考画面标记为用于参考，优选地标记为用于短期参考或用于长期参考。
27.根据权利要求25或26所述的解码器，其中，所述缓冲器管理器(430)被配置为在所述解码器(400)对所述画面(10)进行解码之前标记任何参考画面。
28.根据权利要求21至27中任意一项所述的解码器，还包括：输出部分(450)，被配置为在所述解码器(400)对所述画面(10)进行解码之前，输出来自所述解码画面缓冲器(530)的零个或更多个画面以进行显示。
29.根据权利要求21至28中任意一项所述的解码器，其中，所述数据获取器(410)被配置为：从所述画面(10)的所述编码表示(60)的片首部(65)中获取所述缓冲器描述信息。
30.根据权利要求21至29中任意一项所述的解码器，其中，所述画面标识符确定器(420)被配置为：i)基于所述缓冲器描述信息来获取相应增量标识符；以及ii)基于标识所述画面(10)的画面标识符和所述相应增量标识符来计算所述至少一个画面标识符。
31.根据权利要求21至30中任意一项所述的解码器，其中，所述数据获取器(410)被配置为：从所述画面(10)的所述编码表示(60)中获取标识定义所述至少一个参考画面(40、42)的缓冲器描述的所述缓冲器描述信息，所述解码器(400)还包括：缓冲器描述标识器(480)，被配置为基于所述缓冲器描述信息，从包括多个预定义缓冲器描述的数据结构中标识所述缓冲器描述，每一个预定义缓冲器描述定义至少一个参考画面(40、42)。
32.根据权利要求31所述的解码器，其中，所述数据获取器(410)被配置为：从与所述视频流(1)的编码表示相关联的画面参数集合(67)或序列参数集合(68)中获取所述数据结构。
33.根据权利要求31或32所述的解码器，其中，所述缓冲器描述信息包括标识所述缓冲器描述的标识符和定义至少一个参考画面(40、42)的信息，并且所述画面标识符确定器(420)被配置为：i)基于所述缓冲器描述来确定标识相应参考画面的至少一个画面标识符的第一集合；ii)基于定义至少一个画面标识符(40、42)的所述信息来确定标识相应参考画面的至少一个画面标识符的第二集合；以及iii)基于所述第一集合和所述第二集合来形成画面标识符的联合集合。
34.根据权利要求33所述的解码器，还包括：数量比较器(440)，被配置为将所述联合集合中的画面标识符的总数与参考画面的最大数量进行比较，其中，所述画面标识符确定器(420)被配置为：如果所述画面标识符的总数超过所述参考画面的最大数量，则从所述联合集合中移除包含在所述第一集合中但不包含在所述第二集合中的一个或多个画面标识符，直到所述联合集合中的所述画面标识符的总数不超过所述参考画面的最大数量为止。
35.根据权利要求21至34中任意一项所述的解码器，其中，所述缓冲器管理器(430)被配置为从所述解码画面缓冲器(530)中移除存储在所述解码画面缓冲器(530)中但不与根据所述缓冲器描述信息确定的所述至少一个画面标识符中的任意一个相关联的所有参考画面。
36.根据权利要求21至35中任意一项所述的解码器，还包括：标识符比较器(460)，被配置为将所确定的至少一个画面标识符和与存在于所述解码画面缓冲器(530)中的参考画面相关联的画面标识符进行比较，其中，所述画面标识符确定器(420)被配置为：如果在所确定的至少一个画面标识符中发现标识给定画面的画面标识符但是在所述解码画面缓冲器(530)中不存在所述给定画面，则确定所述给定画面不存在。
37.根据权利要求21至36中任意一项所述的解码器，还包括：列表管理器(470)，被配置为基于所述缓冲器描述信息来执行参考画面列表初始化。
38.一种接收机(500)，包括：
输入部分(510)，被配置为接收视频流(1)中的多个画面(10、40、42、50)的编码表示(60)；
根据权利要求21至37中任意一项所述的解码器(400)，被配置为对所述多个画面(10、40、42、50)的所述编码表示(60)进行解码；以及
输出部分(520)，被配置为输出所述视频流(1)的解码画面。
39.一种解码器(600)，包括：
输入部分(610)，被配置为接收视频流(1)中的多个画面(10、40、42、50)的编码表示(60)；
处理器(630)，被配置为处理存储在存储器(640)中的计算机程序的代码装置，当在所述处理器(630)上运行所述代码装置时，所述代码装置使所述处理器(630)：
从画面(10)的编码表示(60)中获取定义至少一个参考画面(40、42)的缓冲器描述信息；以及
基于所述缓冲器描述信息来确定至少一个画面标识符，所述至少一个画面标识符将所述至少一个参考画面(40、42)中的相应参考画面(40、42)标识为针对所述画面(10)的解码参考；以及
基于所述至少一个画面标识符来更新解码画面缓冲器(650)；以及
输出部分(620)，被配置为输出所述视频流(1)的解码画面。
40.一种对多个画面(10、40、42、50)构成的视频流(1)中的画面(10)进行编码的方法，所述方法包括：
针对所述画面(10)，确定所述多个画面(10、40、42、50)中的至少一个参考画面(40、42)作为所述画面(10)的编码参考；
针对所述至少一个参考画面(40、42)中的每一个参考画面(40、42)，提供(S2)标识所述参考画面(40、42)的画面标识符；
基于所述至少一个画面标识符，产生(S3)定义所述至少一个参考画面(40、42)的缓冲器描述信息；以及
将所述缓冲器描述信息插入(S4)到所述画面(10)的编码表示(60)中。
41.根据权利要求40所述的方法，其中，确定(S1)所述至少一个参考画面(40、42)包括：针对所述画面(10)，确定(S1)所述多个画面(10、40、42、50)中的任何参考画面(40、42)作为所述画面(10)的编码参考，并且确定(S1)所述多个画面(10、40、42、50)中的任意一个参考画面(42)作为所述视频流(1)中根据解码顺序的后续画面(50)的编码参考。
42.根据权利要求40或41所述的方法，其中，所述画面(10)包括至少一个片(20、22)，并且
确定(S1)所述至少一个参考画面(40、42)包括：针对所述画面(10)的至少一个片(20，22)，确定所述多个画面(10、40、42、50)中的至少一个参考画面(40、42)；以及
插入(S4)所述缓冲器描述信息包括：针对所述画面(10)的每一个片(20、22)，将所述缓冲器描述信息插入到所述画面(60)的所述编码表示(60)的相应片首部(65)中。
43.根据权利要求40至42中任意一项所述的方法，还包括：针对所述至少一个画面标识符中的每一个画面标识符，计算(S10)所述画面标识符与标识所述画面(10)的画面标识符之间的差值，其中，产生(S3)所述缓冲器描述信息包括：基于所述至少一个差值，产生相对于标识所述画面(10)的所述画面标识符定义所述至少一个画面标识符的所述缓冲器描述信息。
44.根据权利要求40至43中任意一项所述的方法，还包括：产生(S20)包括多个预定义缓冲器描述的数据结构，每一个预定义缓冲器描述定义至少一个参考画面(40、42)，其中，产生(S3)所述缓冲器描述信息包括：
基于所述至少一个画面标识符来选择(S23)所述数据结构的缓冲器描述；以及
产生(S24)包括所选择的缓冲器描述的标识符的所述缓冲器描述信息。
45.根据权利要求44所述的方法，还包括：
将所述数据结构插入(S21)到与所述视频流(1)的编码表示相关联的画面参数集合(67)或序列参数集合(68)中；以及
将所述画面参数集合(67)或所述序列参数集合(68)的标识符作为所述缓冲器描述信息的一部分插入(S22)到所述画面(10)的所述编码表示(60)的片首部(65)中。
46.根据权利要求44或45所述的方法，其中，产生(S3)所述缓冲器描述信息包括：产生包括所选择的缓冲器描述的所述标识符并且包括定义所述至少一个参考画面(40、42)中的参考画面的信息的所述缓冲器描述信息。
47.根据权利要求40至46中任意一项所述的方法，其中，确定(S1)所述至少一个参考画面(40、42)包括：针对所述画面(10)，通过在符合从预定义的参考画面(40、42)的最大数量和当从所述视频流(1)的所述编码表示中移除画面的至少一个编码表示时也产生所述视频流(1)的可解码的编码表示中选择的至少一个边界约束的同时，最大化所述画面(10)的所述编码表示(60)的压缩效率，来确定所述至少一个参考画面(40、42)。
48.一种编码器(100)，被配置为对多个画面(10、40、42、50)构成的视频流(1)中的画面(10)进行编码，所述编码器(100)包括：
参考画面确定器(110)，被配置为针对所述画面(10)，确定所述多个画面(40、42、50)中的至少一个参考画面(40、42)作为所述画面(10)的编码参考；
画面标识符提供器(120)，被配置为针对所述至少一个参考画面(40、42)中的每一个参考画面(40、42)，提供标识所述参考画面(40、42)的画面标识符；
缓冲器描述信息产生器(130)，被配置为基于所述至少一个画面标识符来产生定义所述至少一个参考画面(40、42)的缓冲器描述信息；以及
数据插入器(140)，被配置为将所述缓冲器描述信息插入到所述画面(10)的编码表示(60)中。
49.根据权利要求48所述的编码器，其中，所述参考画面确定器(110)被配置为：针对所述画面(10)，将所述多个画面(10、40、42、50)中的任意一个参考画面(40、42)确定为所述画面(10)的编码参考，并且将所述多个画面(10、40、42、50)中的任意一个参考画面(42)确定为根据解码顺序的后续画面(50)的编码参考。
50.根据权利要求48或49所述的编码器，其中，所述画面(10)包括至少一个片(20、22)，并且
所述参考画面确定器(110)被配置为针对所述画面(10)的至少一个片(20、22)确定所述多个画面(10、40、42、50)中的至少一个参考画面(40、42)；以及
所述数据插入器(140)被配置为针对所述画面(10)的每一个片(20、22)，将所述缓冲器描述信息插入到所述画面(10)的所述编码表示(60)的相应片首部(65)中。
51.根据权利要求48至50中任意一项所述的编码器，还包括：标识符计算器(150)，被配置为针对所述至少一个画面标识符中的每一个画面标识符，计算所述画面标识符与标识所述画面(10)的画面标识符之间的差值，其中，所述缓冲器描述信息产生器(130)被配置为基于所述至少一个差值来产生相对于标识所述画面(10)的所述画面标识符定义所述至少一个画面标识符的所述缓冲器描述信息。
52.根据权利要求48至51中任意一项所述的编码器，还包括：数据结构产生器(160)，被配置为产生包括多个预定义缓冲器描述的数据结构，每一个预定义缓冲器描述定义至少一个画面标识符，其中，所述缓冲器描述信息产生器(130)被配置为：i)基于所述至少一个画面标识符来选择所述数据结构的缓冲器描述，以及ii)产生包括所选择的缓冲器描述的标识符的所述缓冲器描述信息。
53.根据权利要求52所述的编码器，其中，所述数据插入器(140)被配置为：i)将所述数据结构插入到与所述视频流(1)的编码表示相关联的画面参数集合(67)或序列参数集合(68)中，以及ii)将所述画面参数集合(67)或所述序列参数集合(68)的标识符作为所述缓冲器描述信息的一部分插入到所述画面(10)的所述编码表示(60)的片首部(65)中。
54.根据权利要求52或53所述的编码器，其中，所述缓冲器描述信息产生器(130)被配置为产生包括所选择的缓冲器描述的所述标识符并且包括定义所述至少一个参考画面(40、42)中的参考画面的信息的所述缓冲器描述信息。
55.一种发射机(200)，包括：
输入部分(210)，被配置为接收视频流(1)中的多个画面(10、40、42、50)；
根据权利要求48至54中任意一项所述的编码器(100)，被配置为对所述多个画面(10、40、42、50)进行编码以产生所述多个画面(10、40、42、50)的相应编码表示(60)；以及
输出部分(20)，被配置为输出所述多个画面(10、40、42、50)的所述相应编码表示(60)。
56.一种编码器(300)，包括：
输入部分(310)，被配置为接收视频流(1)中的多个画面(10、40、42、50)；
处理器(330)，被配置为对存储在存储器(340)中的计算机程序的代码装置进行处理，当在所述处理器(330)上运行所述代码装置，所述代码装置使所述处理器(330)：
针对所述视频流(1)中的画面(10)，确定所述多个画面(10、40、42、50)中的至少一个参考画面(40、42)作为所述画面(10)的编码参考；
针对所述至少一个参考画面(40、42)中的每一个参考画面(40、42)，提供标识所述参考画面(40、42)的画面标识符；
基于所述至少一个画面标识符来产生定义所述至少一个参考画面(40、42)的缓冲器描述信息；以及
将所述缓冲器描述信息插入到所述画面(1)的编码表示(60)中；以及
输出部分(320)，被配置为输出画面(10)的编码表示(60)。
CN201280032629.3A 2011-06-30 2012-04-26 参考画面信号通知 Active CN103797797B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201161503019P 2011-06-30 2011-06-30
US61/503,019 2011-06-30
PCT/SE2012/050439 WO2013002700A1 (en) 2011-06-30 2012-04-26 Reference picture signaling

Publications (2)

Publication Number Publication Date
CN103797797A true CN103797797A (zh) 2014-05-14
CN103797797B CN103797797B (zh) 2016-07-13

Family

ID=46197673

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280032629.3A Active CN103797797B (zh) 2011-06-30 2012-04-26 参考画面信号通知

Country Status (24)

Country Link
US (9) US9706223B2 (zh)
EP (5) EP3410725B1 (zh)
JP (4) JP5616562B2 (zh)
KR (3) KR101578308B1 (zh)
CN (1) CN103797797B (zh)
AP (1) AP3858A (zh)
AU (1) AU2012276348C1 (zh)
BR (1) BR112013033191B1 (zh)
CA (2) CA2840349C (zh)
DK (4) DK3410725T3 (zh)
ES (4) ES2645943T3 (zh)
HK (1) HK1192390A1 (zh)
HU (1) HUE028853T2 (zh)
IL (1) IL230146A (zh)
MA (1) MA35202B1 (zh)
MX (1) MX2013014857A (zh)
MY (1) MY166340A (zh)
PL (4) PL3410725T3 (zh)
PT (4) PT3091744T (zh)
RU (3) RU2710903C2 (zh)
SG (1) SG10201605216XA (zh)
TR (1) TR201901275T4 (zh)
WO (1) WO2013002700A1 (zh)
ZA (2) ZA201309396B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106464886A (zh) * 2014-06-18 2017-02-22 瑞典爱立信有限公司 视频中的画面的鲁棒编码和解码
CN107257492A (zh) * 2011-09-07 2017-10-17 太阳专利托管公司 图像编码方法以及图像编码装置
CN107615762A (zh) * 2015-05-29 2018-01-19 寰发股份有限公司 用于帧内块复制模式的解码图像缓存器管理的方法
CN112690003A (zh) * 2018-09-12 2021-04-20 华为技术有限公司 参考图像列表结构的索引指示
CN112770179A (zh) * 2021-01-05 2021-05-07 武汉球之道科技有限公司 一种用于在线赛事转播的高效传输系统

Families Citing this family (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AP3858A (en) 2011-06-30 2016-10-31 Ericsson Telefon Ab L M Reference picture signalling
US9900592B2 (en) 2011-08-25 2018-02-20 Sun Patent Trust Methods and apparatuses for encoding and decoding video using periodic buffer description
PL2760205T3 (pl) 2011-09-19 2021-05-17 Sun Patent Trust Sposób dekodowania obrazów, urządzenie do dekodowania obrazów
US9131245B2 (en) 2011-09-23 2015-09-08 Qualcomm Incorporated Reference picture list construction for video coding
US9451284B2 (en) * 2011-10-10 2016-09-20 Qualcomm Incorporated Efficient signaling of reference picture sets
US8855433B2 (en) * 2011-10-13 2014-10-07 Sharp Kabushiki Kaisha Tracking a reference picture based on a designated picture on an electronic device
US8787688B2 (en) * 2011-10-13 2014-07-22 Sharp Laboratories Of America, Inc. Tracking a reference picture based on a designated picture on an electronic device
US20130094774A1 (en) * 2011-10-13 2013-04-18 Sharp Laboratories Of America, Inc. Tracking a reference picture based on a designated picture on an electronic device
US8768079B2 (en) 2011-10-13 2014-07-01 Sharp Laboratories Of America, Inc. Tracking a reference picture on an electronic device
MX2014003992A (es) 2011-10-19 2014-05-07 Panasonic Corp Metodo de codificacion de imagenes, metodo de decodificacion de imagenes, aparato de codificacion de imagenes, aparato de decodificacion de imagenes y aparato de codificacion y decodificacion de imagenes.
GB2497914B (en) * 2011-10-20 2015-03-18 Skype Transmission of video data
US9264717B2 (en) 2011-10-31 2016-02-16 Qualcomm Incorporated Random access with advanced decoded picture buffer (DPB) management in video coding
US10003817B2 (en) * 2011-11-07 2018-06-19 Microsoft Technology Licensing, Llc Signaling of state information for a decoded picture buffer and reference picture lists
ES2898887T3 (es) 2011-11-08 2022-03-09 Nokia Technologies Oy Manejo de imágenes de referencia
US9369710B2 (en) * 2012-02-06 2016-06-14 Qualcomm Incorporated Reference picture list modification for video coding
EP2830313B1 (en) 2012-04-16 2019-10-16 Samsung Electronics Co., Ltd. Method and apparatus for determining reference picture set of image
KR20130116782A (ko) 2012-04-16 2013-10-24 한국전자통신연구원 계층적 비디오 부호화에서의 계층정보 표현방식
US10051264B2 (en) 2012-04-20 2018-08-14 Qualcomm Incorporated Marking reference pictures in video sequences having broken link pictures
US10491913B2 (en) * 2012-04-24 2019-11-26 Telefonaktiebolaget L M Ericsson (Publ) Identifying a parameter set for decoding a multi-layer video representation
JP6182719B2 (ja) * 2012-06-29 2017-08-23 ヴェロス メディア インターナショナル リミテッドＶｅｌｏｓ Ｍｅｄｉａ Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｌｉｍｉｔｅｄ 符号化装置および符号化方法
US9479776B2 (en) 2012-07-02 2016-10-25 Qualcomm Incorporated Signaling of long-term reference pictures for video coding
US9584825B2 (en) 2012-09-27 2017-02-28 Qualcomm Incorporated Long-term reference picture signaling in video coding
CN105025303B (zh) 2012-09-28 2018-05-29 瑞典爱立信有限公司 视频序列图像的解码和编码
US9313500B2 (en) 2012-09-30 2016-04-12 Microsoft Technology Licensing, Llc Conditional signalling of reference picture list modification information
CN103916666B (zh) * 2013-01-09 2017-07-14 北京大学 视频编码方法、解码方法、编码器及解码器
WO2014109609A1 (ko) * 2013-01-10 2014-07-17 삼성전자 주식회사 멀티 레이어 비디오의 복호화 방법 및 장치, 멀티 레이어 비디오의 부호화 방법 및 장치
WO2014163452A1 (ko) * 2013-04-05 2014-10-09 삼성전자 주식회사 멀티 레이어 비디오의 복호화 방법 및 장치, 멀티 레이어 비디오의 부호화 방법 및 장치
KR102219909B1 (ko) * 2013-04-05 2021-02-24 삼성전자주식회사 멀티 레이어 비디오의 복호화 방법 및 장치, 멀티 레이어 비디오의 부호화 방법 및 장치
US11438609B2 (en) * 2013-04-08 2022-09-06 Qualcomm Incorporated Inter-layer picture signaling and related processes
CN105103563B (zh) * 2013-04-08 2019-05-21 寰发股份有限公司 关于缩放列表数据信令的方法和装置
JP6365924B2 (ja) * 2013-05-09 2018-08-01 サン パテント トラスト 画像復号方法及び画像復号装置
CN106416250B (zh) * 2013-12-02 2020-12-04 诺基亚技术有限公司 视频编码和解码
KR20150075040A (ko) 2013-12-24 2015-07-02 주식회사 케이티 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치
KR20150110295A (ko) 2014-03-24 2015-10-02 주식회사 케이티 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치
GB2531271A (en) * 2014-10-14 2016-04-20 Nokia Technologies Oy An apparatus, a method and a computer program for image sequence coding and decoding
CN104811721B (zh) * 2015-05-26 2017-09-22 珠海全志科技股份有限公司 视频解码数据存储方法及运动向量数据的计算方法
US10097836B2 (en) * 2015-09-28 2018-10-09 Samsung Electronics Co., Ltd. Method and device to mark a reference picture for video coding
CA3001290C (en) * 2015-10-13 2024-02-06 Sony Corporation Transmission apparatus, transmission method, reception apparatus, and reception method
KR102476207B1 (ko) 2015-11-12 2022-12-08 삼성전자주식회사 반도체 장치의 동작 방법 및 반도체 시스템
US11445223B2 (en) * 2016-09-09 2022-09-13 Microsoft Technology Licensing, Llc Loss detection for encoded video transmission
EP3831064B1 (en) * 2018-08-17 2024-02-07 Huawei Technologies Co., Ltd. Reference picture management in video coding
EP3850852A4 (en) * 2018-09-14 2021-11-17 Huawei Technologies Co., Ltd. TILE-BASED ADDRESSING IN VIDEO ENCODING
CN112740705A (zh) * 2018-09-21 2021-04-30 夏普株式会社 用于在视频编码中发送信号通知参考图片的系统和方法
EP3871416A4 (en) * 2018-11-07 2022-08-24 HFI Innovation Inc. METHOD AND APPARATUS FOR CODING OR DECODING VIDEO BLOCKS BY CURRENT IMAGE REFERENCE CODING
US11196988B2 (en) * 2018-12-17 2021-12-07 Apple Inc. Reference picture management and list construction

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008105389A (ja) * 2006-08-04 2008-05-08 Kyodo Printing Co Ltd 印刷用紙および複製画
CN101523920A (zh) * 2006-10-16 2009-09-02 汤姆森许可贸易公司 在视频操作期间使用网络抽象层单元以信号方式指示即时解码刷新的方法
US20100208828A1 (en) * 2009-02-18 2010-08-19 Novatek Microelectronics Corp. Picture decoder, reference picture information communication interface, and reference picture control method

Family Cites Families (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US631447A (en) 1898-11-16 1899-08-22 American Cotton Bale Company Press.
US5155851A (en) * 1989-05-15 1992-10-13 Bell Communications Research, Inc. Routing an incoming data stream to parallel processing stations
US5935213A (en) * 1996-05-02 1999-08-10 Fore Systems, Inc. System and method for generating explicit rate value information for flow control in ATAM network
US6252873B1 (en) * 1998-06-17 2001-06-26 Gregory O. Vines Method of ensuring a smooth transition between MPEG-2 transport streams
US6314477B1 (en) * 1998-10-30 2001-11-06 Agilent Technologies, Inc. Performance of fibre channel protocol sequence reassembly using expected frame information and buffer list calculations
KR100591806B1 (ko) * 1999-02-17 2006-06-20 마츠시타 덴끼 산교 가부시키가이샤 기록 매체에 애프터 리코딩을 실행하기 위한 정보 기록매체, 장치 및 방법
US6789128B1 (en) * 2000-03-11 2004-09-07 Oracle International Corporation System and method for reducing network traffic between two computing devices
JP2001285234A (ja) * 2000-04-04 2001-10-12 Sony Corp データ多重化装置およびデータ多重化方法、並びに記録媒体
US7376475B2 (en) * 2001-03-05 2008-05-20 Microsoft Corporation Audio buffer configuration
US6970509B2 (en) * 2001-07-31 2005-11-29 Wis Technologies, Inc. Cell array and method of multiresolution motion estimation and compensation
US7486678B1 (en) * 2002-07-03 2009-02-03 Greenfield Networks Multi-slice network processor
DK1742479T3 (da) * 2002-07-11 2009-12-14 Panasonic Corp Multihypotese B-billede virtuel displaybuffer med lån af plads i H.264 post-dekoder bufferen
JP3513148B1 (ja) * 2002-10-11 2004-03-31 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化方法、動画像復号方法、動画像符号化装置、動画像復号装置、動画像符号化プログラム、及び動画像復号プログラム
KR100693669B1 (ko) * 2003-03-03 2007-03-09 엘지전자 주식회사 피일드 매크로 블록의 레퍼런스 픽쳐 결정 방법
US7353299B2 (en) * 2003-05-29 2008-04-01 International Business Machines Corporation Method and apparatus for managing autonomous third party data transfers
US8995536B2 (en) * 2003-07-23 2015-03-31 Broadcom Corporation System and method for audio/video synchronization
JP2007503776A (ja) * 2003-08-26 2007-02-22 トムソン ライセンシング インター符号化に使われる参照画像数を最小化するための方法および装置
US7391787B1 (en) * 2003-09-11 2008-06-24 Pmc-Sierra, Inc. System and method for opportunistic request-grant switching
US7248261B1 (en) * 2003-12-15 2007-07-24 Nvidia Corporation Method and apparatus to accelerate rendering of shadow effects for computer-generated images
JP4778953B2 (ja) * 2004-03-08 2011-09-21 エヌエックスピー ビー ヴィ 拡張可能な圧縮を伴い且つ基準フレームデータを記憶して回収するためのバッファを有するビデオデコーダ
US20060013318A1 (en) 2004-06-22 2006-01-19 Jennifer Webb Video error detection, recovery, and concealment
FR2874292B1 (fr) * 2004-08-10 2007-01-26 Thales Sa Procede de mise en forme de trames d'une sequence video
US8615038B2 (en) * 2004-12-06 2013-12-24 Nokia Corporation Video coding, decoding and hypothetical reference decoder
US8054882B2 (en) * 2005-05-13 2011-11-08 Streaming Networks (Pvt.) Ltd. Method and system for providing bi-directionally predicted video coding
KR100770704B1 (ko) * 2005-08-04 2007-10-29 삼성전자주식회사 픽쳐 스킵 방법 및 장치
US8155194B2 (en) * 2005-08-05 2012-04-10 Lsi Corporation Method and apparatus for MPEG-2 to H.264 video transcoding
US7881384B2 (en) * 2005-08-05 2011-02-01 Lsi Corporation Method and apparatus for H.264 to MPEG-2 video transcoding
US9113147B2 (en) * 2005-09-27 2015-08-18 Qualcomm Incorporated Scalability techniques based on content information
WO2007080223A1 (en) * 2006-01-10 2007-07-19 Nokia Corporation Buffering of decoded reference pictures
US7769239B2 (en) * 2006-01-12 2010-08-03 Gary Demos Efficient bit-exact lossless image coding residual system
RU2443074C2 (ru) * 2006-07-06 2012-02-20 Томсон Лайсенсинг Способ и устройство для отделения номера кадра и/или счетчика очередности изображения (рос) для мультивидового видеокодирования и видеодекодирования
US8015483B2 (en) 2006-10-20 2011-09-06 Microsoft Corporation Processing an XML feed with extensible or non-typed elements
CN101578866B (zh) * 2006-10-20 2013-11-13 诺基亚公司 利用参考画面标记和参考画面列表对可缩放视频位流进行编解码的方法及装置
RU2426227C2 (ru) * 2006-11-14 2011-08-10 Квэлкомм Инкорпорейтед Кодирование кодов переменной длины с эффективным использованием памяти
JP2008177907A (ja) * 2007-01-19 2008-07-31 Fujitsu Ltd 動画データ復号装置、情報機器、動画データ復号方法および動画データ復号プログラム
JP5023739B2 (ja) * 2007-02-28 2012-09-12 ソニー株式会社 画像情報符号化装置及び符号化方法
WO2008129516A2 (en) * 2007-04-24 2008-10-30 Nokia Corporation Signaling of multiple decoding times in media files
JP4519159B2 (ja) 2007-07-12 2010-08-04 株式会社日立製作所 パケット転送装置及びパケット転送方法
JP2009260736A (ja) 2008-03-24 2009-11-05 Fujitsu Ltd エンコーディング装置、デコーディング装置、動画像処理方法、動画像処理システム、エンコーディングプログラムおよびデコーディングプログラム
EP2314072B1 (en) * 2008-07-16 2014-08-27 SISVEL International S.A. Track and track-subset grouping for multi view video decoding.
KR20110106465A (ko) * 2009-01-28 2011-09-28 노키아 코포레이션 비디오 코딩 및 디코딩을 위한 방법 및 장치
US8189666B2 (en) * 2009-02-02 2012-05-29 Microsoft Corporation Local picture identifier and computation of co-located information
JP5332773B2 (ja) * 2009-03-18 2013-11-06 ソニー株式会社 画像処理装置および方法
KR20110139304A (ko) * 2009-04-22 2011-12-28 엘지전자 주식회사 다시점 영상의 참조 픽쳐 리스트 변경 방법
JP2011082683A (ja) * 2009-10-05 2011-04-21 Sony Corp 画像処理装置、画像処理方法、及び、プログラム
TW201121331A (en) * 2009-12-10 2011-06-16 Novatek Microelectronics Corp Picture decoder
US9226045B2 (en) * 2010-08-05 2015-12-29 Qualcomm Incorporated Signaling attributes for network-streamed video data
US9516379B2 (en) * 2011-03-08 2016-12-06 Qualcomm Incorporated Buffer management in video codecs
AP3858A (en) 2011-06-30 2016-10-31 Ericsson Telefon Ab L M Reference picture signalling
WO2013048324A1 (en) * 2011-09-29 2013-04-04 Telefonaktiebolaget L M Ericsson (Publ) Reference picture list handling
US10051264B2 (en) * 2012-04-20 2018-08-14 Qualcomm Incorporated Marking reference pictures in video sequences having broken link pictures
US9609341B1 (en) * 2012-04-23 2017-03-28 Google Inc. Video data encoding and decoding using reference picture lists
CH707789A1 (de) * 2013-03-25 2014-09-30 Liebherr Machines Bulle Sa Kolben für eine Axialkolbenmaschine.
WO2015192991A1 (en) * 2014-06-18 2015-12-23 Telefonaktiebolaget L M Ericsson (Publ) Random access in a video bitstream
US10375399B2 (en) * 2016-04-20 2019-08-06 Qualcomm Incorporated Methods and systems of generating a background picture for video coding

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008105389A (ja) * 2006-08-04 2008-05-08 Kyodo Printing Co Ltd 印刷用紙および複製画
CN101523920A (zh) * 2006-10-16 2009-09-02 汤姆森许可贸易公司 在视频操作期间使用网络抽象层单元以信号方式指示即时解码刷新的方法
US20100208828A1 (en) * 2009-02-18 2010-08-19 Novatek Microelectronics Corp. Picture decoder, reference picture information communication interface, and reference picture control method

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
BORGWARDT PETER: "Multi-Picture Buffer Semantics for Interlaced Coding", 《3.JVT MEETING; 60. MPEG MEETING;20060506-20020510;FAIRFAX,US;(JOINT VIDEO TEAM OF ISO/IEC JTC1/SC29/WG11 AND ITU-T SG.16)》, no. 049, 10 May 2002 (2002-05-10), pages 7 - 11 *
RICHARD S ET AL: "Absolute signaling of reference pictures", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11》, no. 493, 22 July 2011 (2011-07-22), pages 6 - 8 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107257492A (zh) * 2011-09-07 2017-10-17 太阳专利托管公司 图像编码方法以及图像编码装置
CN107257492B (zh) * 2011-09-07 2020-04-28 太阳专利托管公司 图像编码方法以及图像编码装置
CN106464886A (zh) * 2014-06-18 2017-02-22 瑞典爱立信有限公司 视频中的画面的鲁棒编码和解码
CN106464886B (zh) * 2014-06-18 2021-03-30 瑞典爱立信有限公司 视频中的画面的鲁棒编码和解码
CN107615762A (zh) * 2015-05-29 2018-01-19 寰发股份有限公司 用于帧内块复制模式的解码图像缓存器管理的方法
CN107615762B (zh) * 2015-05-29 2020-06-26 寰发股份有限公司 一种管理解码图像缓存器并解码视频比特流的方法及装置
CN112690003A (zh) * 2018-09-12 2021-04-20 华为技术有限公司 参考图像列表结构的索引指示
CN112690003B (zh) * 2018-09-12 2022-06-28 华为技术有限公司 视频编码器、视频解码器和相关编解码方法
CN112770179A (zh) * 2021-01-05 2021-05-07 武汉球之道科技有限公司 一种用于在线赛事转播的高效传输系统

Also Published As

Publication number Publication date
ZA201500885B (en) 2016-10-26
EP3229474B1 (en) 2018-12-05
ES2645943T3 (es) 2017-12-11
EP3091744A1 (en) 2016-11-09
RU2710903C2 (ru) 2020-01-14
SG10201605216XA (en) 2016-08-30
CA2967452C (en) 2019-07-09
PT3091744T (pt) 2017-08-31
JP5889983B2 (ja) 2016-03-22
EP3091744B1 (en) 2017-08-02
ES2595732T3 (es) 2017-01-03
ES2714756T3 (es) 2019-05-29
PL2727342T3 (pl) 2017-01-31
PL3091744T3 (pl) 2018-01-31
JP2015015755A (ja) 2015-01-22
AU2012276348C1 (en) 2015-11-26
US20180338157A1 (en) 2018-11-22
RU2765751C2 (ru) 2022-02-02
KR20150043559A (ko) 2015-04-22
KR20150046359A (ko) 2015-04-29
US11770552B2 (en) 2023-09-26
DK3091744T3 (en) 2017-10-02
RU2019137954A3 (zh) 2021-11-25
IL230146A (en) 2016-07-31
EP3229474A1 (en) 2017-10-11
EP2727342B1 (en) 2016-06-29
CA2967452A1 (en) 2013-01-03
US20200288167A1 (en) 2020-09-10
RU2014102959A (ru) 2015-08-10
EP3410725A1 (en) 2018-12-05
JP2014523690A (ja) 2014-09-11
CA2840349A1 (en) 2013-01-03
BR112013033191A2 (pt) 2017-03-01
US20220174313A1 (en) 2022-06-02
KR101813768B1 (ko) 2017-12-29
US20130215975A1 (en) 2013-08-22
PT3410725T (pt) 2021-09-06
AU2012276348A1 (en) 2014-01-16
CN103797797B (zh) 2016-07-13
PT2727342T (pt) 2016-08-01
DK2727342T3 (en) 2016-10-03
ZA201309396B (en) 2015-09-30
KR101578308B1 (ko) 2015-12-16
WO2013002700A1 (en) 2013-01-03
DK3410725T3 (da) 2021-09-20
US10708618B2 (en) 2020-07-07
US9807418B2 (en) 2017-10-31
AP3858A (en) 2016-10-31
US11265576B2 (en) 2022-03-01
PT3229474T (pt) 2019-02-04
RU2016125119A3 (zh) 2019-10-15
US20170041633A1 (en) 2017-02-09
US10368088B2 (en) 2019-07-30
RU2016125119A (ru) 2018-12-04
RU2019137954A (ru) 2021-05-25
HUE028853T2 (en) 2017-01-30
PL3410725T3 (pl) 2022-02-21
MX2013014857A (es) 2014-03-26
US11792425B2 (en) 2023-10-17
JP5889982B2 (ja) 2016-03-22
JP6148293B2 (ja) 2017-06-14
US20220210468A1 (en) 2022-06-30
CA2840349C (en) 2017-07-04
KR20140053117A (ko) 2014-05-07
TR201901275T4 (tr) 2019-02-21
RU2595562C2 (ru) 2016-08-27
US20230421803A1 (en) 2023-12-28
US20180035131A1 (en) 2018-02-01
JP2015015756A (ja) 2015-01-22
EP2727342A1 (en) 2014-05-07
US20190297346A1 (en) 2019-09-26
AP2014007381A0 (en) 2014-01-31
HK1192390A1 (zh) 2014-08-15
KR101813769B1 (ko) 2017-12-29
US10063882B2 (en) 2018-08-28
JP2015222971A (ja) 2015-12-10
ES2892283T3 (es) 2022-02-03
MY166340A (en) 2018-06-25
DK3229474T3 (en) 2019-03-11
US9706223B2 (en) 2017-07-11
BR112013033191B1 (pt) 2022-05-10
JP5616562B2 (ja) 2014-10-29
EP3902258A1 (en) 2021-10-27
AU2012276348B2 (en) 2015-07-16
MA35202B1 (fr) 2014-06-02
EP3410725B1 (en) 2021-07-28
PL3229474T3 (pl) 2019-05-31

Similar Documents

Publication Publication Date Title
CN103797797A (zh) 参考画面信号通知
US9247262B2 (en) Absolute or explicit reference picture signaling
CN103843341A (zh) 用于管理视频解码过程中的画面的解码器及其方法
CN104221384A (zh) 用于发送和接收长期参考画面指示符的设备
CN103650502A (zh) 用于参考画面管理的编码器、解码器及其方法
US20140233653A1 (en) Decoder and encoder for picture outputting and methods thereof

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1192390

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1192390

Country of ref document: HK