CN105103558B - 构建层间参考图像列表 - Google Patents

构建层间参考图像列表 Download PDF

Info

Publication number
CN105103558B
CN105103558B CN201480020872.2A CN201480020872A CN105103558B CN 105103558 B CN105103558 B CN 105103558B CN 201480020872 A CN201480020872 A CN 201480020872A CN 105103558 B CN105103558 B CN 105103558B
Authority
CN
China
Prior art keywords
reference picture
identifier
list
value
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480020872.2A
Other languages
English (en)
Other versions
CN105103558A (zh
Inventor
T.鲁塞特
A.诺金
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Telefonaktiebolaget LM Ericsson AB
Original Assignee
Telefonaktiebolaget LM Ericsson AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Telefonaktiebolaget LM Ericsson AB filed Critical Telefonaktiebolaget LM Ericsson AB
Publication of CN105103558A publication Critical patent/CN105103558A/zh
Application granted granted Critical
Publication of CN105103558B publication Critical patent/CN105103558B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/573Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/58Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one

Abstract

提供了一种构建对于当前图像的层间预测的参考图像的至少一个列表的方法(200)。该方法包括:基于与参考图像相关联的可扩缩性标识符的各自值以及与所述当前图像相关联的可扩缩性标识符的值,将所述参考图像插入(210)到参考图像的第一集合或参考图像的第二集合中,以及将所述参考图像的第一集合和所述参考图像的第二集合插入(220)到所述参考图像的至少一个列表中。通过考虑对于在参考层和当前层之间的相似性的指示,实现了更高效的多层视频压缩。此外,提供了对应的计算机程序、对应的计算机程序产品,以及对应的设备。

Description

构建层间参考图像列表
技术领域
本发明涉及构建对于当前图像的层间预测的参考图像的至少一个列表的方法,用于构建对于当前图像的层间预测的参考图像的至少一个列表的设备,对应的计算机程序,以及对应的计算机程序产品。
背景技术
高效视频编码(HEVC)核心标准最近已经由国际电信联盟(ITU-T Rec.H.265)和运动图像专家组(MPEG)(ISO/IEC 23008-2/MPEG-H Part 2)完成。对于HEVC标准的分层扩展在发展中,例如,多视图扩展(MV-HEVC)、3D扩展(3D-HEVC),以及可扩缩扩展(SHVC)。可以在将来指定进一步的扩展,或现有扩展的组合。
HEVC及其扩展广泛使用预测编码工具。从解码器视角,使用用于预测的先前解码的像素数据来重建像素数据。特别地,对于图像间预测,先前解码的图像,所谓的参考图像,在当前图像的重建过程中用于预测。
根据HEVC规范,每个图像被再分成一个或多个片,以及每个片可以含有多个块(更具体地,块状编码单元和预测单元)。可以用作用于解码当前片的预测参考的图像被放置在所谓的参考图像列表中。根据HEVC规范,存在不同类型的片。对于“P片”,至多一个参考图像可以用于当前块的预测。因此,P片具有一个参考图像列表,被称为“list0”。对于“B片”,至多两个参考图像可以用于当前块的预测,其也被称为“双向预测”。因此,B片具有两个参考图像列表,被称为“list0”和“list1”。
可以借助于所谓的参考图像索引,通过信号传送用于重建特定块的参考图像。参考图像索引是在参考图像列表(诸如list0或list1)中的索引。参考图像索引连同其它数据被编码在HEVC比特流中作为编码的片数据的一部分。特别地,如果使用变长编码(VLC),则用于发送参考图像索引的码字的长度取决于索引值自身。典型地,小的参考图像索引要求更短的码字。因此,某一参考图像被放置在参考图像列表的更前面,则要求更少的比特来指示它的使用。因此,为了实现高压缩效率,典型的策略是将频繁用于预测的参考图像放置在参考图像列表的前面。
典型地,在两个步骤过程中来构建参考图像列表,(1)初始参考图像列表构建,随后(2)参考图像列表修改。步骤1是通过解码器规范被预定义的以及导致初始参考图像列表。步骤2涉及在片头部中通过信号传送参考图像列表修改命令,以及通过在初始参考图像列表上应用参考图像列表修改命令而导致最终的参考图像列表。因为发送参考图像列表修改命令需要另外的比特的传输,因此期望的是,初始参考图像列表被精心设计,以便能够用很少的比特来指示频繁使用的参考图像,产生高压缩效率。
尽管HEVC核心规范仅使用时间邻近图像用于图像间预测,即在相同时间层内的图像,但是有可能的是,多层HEVC扩展,诸如可扩缩和3D扩展,将使用来自其它层的图像,例如可扩缩层和/或视图层,作为参考图像。当前草案SHVC、MV-HEVC、和3D-HEVC规范使用专门(ad-hoc)方法用于参考图像列表构建。因此,为了改进比特效率,需要更高效的方法用于对于使用跨层参考图像的多层HEVC扩展的参考图像列表构建。
在草案SHVC(JCTVC-L1008)和MV-HEVC规范(JCT3V-C1004)中,层标识(即,与其相关联)对应于例如空间分辨率或质量(对于SHVC)、对应于相机视图(对于MV-HEVC)、或对应于深度视图(对于3D-HEVC)的一组图像。每个层具有索引i以及由层标识符layer_id来标识(参见以下的语法元素layer_id_in_nuh[i])。层索引i典型地是对于解码顺序的指示符。因此,对于每个访问单元(即,采样时间或时刻),以层索引i的顺序来解码对于每个层(视图、图像分辨率等)的多达一个图像。
此外,一组可扩缩性标识符与每个层相关联(参见以下语法元素dimension_id[i][j])。对于可扩缩性标识符的示例是“ViewId” (标识某一相机视图), “DepthFlag” (标识层是否载有深度数据), “DependencyId” (在例如空间可扩缩的情况下,指示解码依赖性), “QualityId” (指示视频质量),以及其它。
在SHVC和MV-HEVC中,在所谓的视频参数集(VPS)的扩展中通过信号来传送与高级视频表示有关的参数。以下描绘VPS扩展语法,以及一些有关语义。具体地,如以下描述的,基于对于每个层i导出了哪些可变数组RefLayerId[i][j]和NumDirectRefLayers[i],使用语法元素“direct_dependency_flag”通过信号来传送层依赖性
layer_id_in_nuh[i]指定在第i层的视频编码层(VCL)网络抽象层(NAL)单元中nuh_layer_id语法元素的值。对于从0到vps_max_layers_minus1(包含)范围中的i,当不存在时,layer_id_in_nuh[i]的值被推断为等于i。当i大于0时,layer_id_in_nuh[i]应当大于layer_id_in_nuh[i–1]。对于从0到vps_max_layers_minus1(包含)范围中的i,变量LayerIdInVps[layer_id_in_nuh[i]]被设置等于i。
dimension_id[i][j]指定第i层的第j个存在的可扩缩维度类型的标识符。当不存在时,dimension_id[i][j]的值被推断为等于0。用于dimension_id[i][j]的表示的比特的数量是dimension_id_len_minus1[j] + 1。当splitting_flag等于1时,要求以下的比特流一致性:dimension_id[i][j]应当等于 ((layer_id_in_nuh[i] & ((1 << dimBitOffset[j+1]) – 1)) >> dimBitOffset[j]) 。
如下来导出指定第i层的第smIdx可扩缩维度类型的标识符的变量ScalabilityId[i][smIdx]和指定第i层的视图标识符的变量ViewId[layer_id_in_nuh[i]]:
等于0的direct_dependency_flag[i][j]指定的是索引为j的层不是对于索引为i的层的直接参考层。等于1的direct_dependency_flag[i][j]指定的是索引为j的层可以是对于索引为i的层的直接参考层。当对于在0到vps_max_layers_minus1范围中的i和j而言direct_dependency_flag[i][j]不存在时,它被推断为等于0。
如下来导出变量NumDirectRefLayers[i] 和RefLayerId[i][j]:
基于RefLayerId[i][j]和NumDirectRefLayers[i],如下所描述的,来构建所谓的层间参考图像集。
对于层间参考图像集的解码过程的输出是层间图像RefPicSetInterLayer的更新的列表。
列表RefPicSetInterLayer首先被清空,然后如下来导出:
用于结束具有大于零的nuh_layer_id的编码图像的解码的标记过程的输出是如对于一些解码图像的“用于短期参考”的潜在更新的标记。
以下适用:
如下所描述的,时间参考图像和层间参考图像被组合成两个时间参考图像列表,RefPicListTemp0和RefPicListTemp1。最终,如下所描述的,应用潜在的参考图像列表修改命令,以及获得最终的参考图像列表RefPicList0和RefPicList1。
在对于每个P或B片的解码过程的开始,调用对于参考图像列表构建的解码过程。
通过如在HEVC基础规范(JCTVC-L1003)的子条款8.5.3.3.2中所指定的参考索引,来编址参考图像。参考索引是在参考图像列表中的索引。当解码P片时,存在单个参考图像列表RefPicList0。当解码B片时,除了RefPicList0之外还存在第二独立的参考图像列表RefPicList1。
在对于每个片的解码过程的开始时,如下来导出参考图像列表RefPicList0以及,对于B片,导出RefPicList1。
变量NumRpsCurrTempList0被设置为等于Max(num_ref_idx_l0_active_minus1 +1, NumPocTotalCurr)以及如下来构建列表RefPicListTemp0:
如下来构建列表RefPicList0:
当片是B片时,变量NumRpsCurrTempList1被设置为等于Max(num_ref_idx_l1_active_minus1 + 1, NumPocTotalCurr) 以及如下来构建列表RefPicListTemp1:
当片是B片时,如下来构建列表RefPicList1:
在以上所概述的参考图像列表初始化过程中,根据在有序数组RefPicSetInterLayer[]中的参考层的顺序,层间参考图像被附加到参考图像列表。根据参考层的层索引i,从i的小值到大值,在RefPicSetInterLayer[]中的参考层的顺序是固定的。因此,总是使用层索引i的递增顺序来插入在两种初始参考图像列表中的层间参考图像。这种顺序没有考虑不同的层的潜在的相似性或不相似性,以及因此在压缩效率,或比特率效率方面不是最优的。
发明内容
本发明的目的是提供对于以上技术和现有技术的改进的备选方案。
更具体地,本发明的目的是提供层间参考图像列表,以及特别是初始参考图像列表的改进的构建。
借助于如由独立权利要求所限定的本发明的不同方面来实现本发明的这些和其它目的。本发明的实施例特征在于从属权利要求。
根据本发明的第一方面,提供了构建对于当前图像的层间预测的参考图像的至少一个列表的方法。该方法包括:将参考图像插入到参考图像的第一集合或参考图像的第二集合中。基于与参考图像相关联的可扩缩性标识符的各自值以及与当前图像相关联的可扩缩性标识符的值,来插入参考图像。该方法还包括:将参考图像的第一集合和参考图像的第二集合插入到参考图像的至少一个列表中。
根据本发明的第二方面,提供了计算机程序。该计算机程序包括计算机可执行指令,当在被包括在设备中的处理单元上执行计算机可执行指令时,该计算机可执行指令用于使得该设备执行根据本发明的第一方面的方法。
根据本发明的第三方面,提供了计算机程序产品。该计算机程序产品包括计算机可读存储介质。该计算机可读存储介质具有被包含在其中的根据本发明的第二方面的计算机程序。
根据本发明的第四方面,提供了用于构建对于当前图像的层间预测的参考图像的至少一个列表的设备。该设备包括:被配置为用于将参考图像插入到参考图像的第一集合或参考图像的第二集合中的部件。该部件被配置为用于基于与参考图像相关联可扩缩性标识符的各自值以及与当前图像相关联的可扩缩性标识符的值,来插入参考图像。该部件还被配置为用于将参考图像的第一集合和参考图像的第二集合插入到参考图像的至少一个列表中。
本发明利用如下理解:能够通过考虑对于在参考层和当前层之间的相似性的指示,来改进参考图像列表的构建。从而,实现了更高效的多层视频压缩。通过可扩缩性标识符来提供对于相似性的此类指示。为此,当构建初始参考图像列表时,根据层间参考图像的可扩缩性标识符的它们的各自值来插入层间参考图像。
可以使用预定义的过程,例如根据可扩缩性标识符的参考图像的排序,来执行在此提出的参考图像列表的构建。备选地,借助于参考图像列表修改命令或类似的,参考图像列表可以在视频编码器处被构建,然后通过信号传送给视频解码器,例如附加的信息、元数据,然后在视频解码器处被应用。
根据本发明的实施例,参考图像,基于它们的可扩缩性标识符的各自值和与当前图像相关联的可扩缩性标识符的值的差,被插入到参考图像的第一集合或参考图像的第二集合中。
根据本发明的实施例,具有小于与当前图像相关联的可扩缩性标识符的值的可扩缩性标识符的各自值的参考图像被插入到参考图像的第一集合中,以及具有大于与当前图像相关联的可扩缩性标识符的值的可扩缩性标识符的各自值的参考图像被插入到参考图像的第二集合中。
根据本发明的实施例,对被包括在参考图像的第一集合和参考图像的第二集合中的参考图像,基于它们的可扩缩性标识符的各自值进行排序。
根据本发明的实施例,以可扩缩性标识符的递减值来排序参考图像。
根据本发明的实施例,以可扩缩性标识符的递增值来排序参考图像。
根据本发明的实施例,以参考图像的可扩缩性标识符的各自值和与当前图像相关联的可扩缩性标识符的值的递减绝对差来排序参考图像。
根据本发明的实施例,以参考图像的标识符的各自值和与当前图像相关联的可扩缩性标识符的值的递增绝对差来排序参考图像。
根据本发明的实施例,构建参考图像的两个列表,参考图像的第一集合在参考图像的第二集合的前面被插入到参考图像的第一列表中,以及参考图像的第二集合在参考图像的第一集合的前面被插入到参考图像的第二列表中。
根据本发明的实施例,参考图像的第一集合在短期参考图像的第一集合之后以及在短期参考图像的第二集合之前被插入到参考图像的第一列表中,以及在参考图像的第二列表的结尾处被插入。此外,参考图像的第二集合在短期参考图像的第二集合之后并且在短期参考图像的第一集合之前被插入到参考图像的第二列表中,以及在参考图像的第一列表的结尾处被插入。
根据本发明的实施例,基于与参考图像相关联的至少两个可扩缩性标识符,第一可扩缩性标识符和第二可扩缩性标识符,的它们的各自值和与当前图像相关联的可扩缩性标识符的各自值,参考图像被插入到参考图像的第一集合和参考图像的第二集合中。
根据本发明的实施例,可扩缩性标识符中的每个可扩缩性标识符是以下中的任何一个:指示相对空间相机捕获方位的视图标识符、指示解码顺序的依赖性标识符、指示层解码顺序的质量标识符、指示时间可扩缩信息的时间标识符,或指示层是否含有纹理或深度信息的深度标志。
根据本发明的实施例,在编码视频的方法中包括该方法。
根据本发明的实施例,在解码视频的方法中包括该方法。
根据本发明的实施例,该设备是视频编码器。
根据本发明的另一个实施例,该设备是视频解码器。
根据本发明的实施例,在移动终端中包括该设备。
尽管在某些情况下已经参考本发明的某一方面的实施例描述了本发明的优点,但是对应的推论应用于本发明的其它方面的实施例。
当学习了以下详细的公开、附图和所附权利要求书时,本发明的另外的目的、特征和优点将变得明显。本领域的技术人员认识到的是,本发明的不同特征可以被组合以创建不同于在下文中描述的那些实施例的实施例。
附图说明
参照附图,通过以下本发明的实施例的说明性而非限制性的详细描述,本发明的以上以及另外的目的、特征和优点将更好地被理解,在附图中:
图1说明了依照本发明的实施例的参考图像集构建。
图2示出了依照本发明的实施例的构建参考图像的列表的方法。
图3示出了依照本发明的实施例的视频编码器。
图4示出了依照本发明的实施例的视频解码器。
图5示出了依照本发明的实施例的视频编码器或解码器。
图6示出了依照本发明的实施例的移动终端。
所有的图是示意性的,未必按比例绘制,以及一般仅示出必需的部分以便阐明本发明,其中可以省略或仅建议其它部分。
具体实施方式
现在,在此之后将参照附图更全面地描述本发明,其中示出了本发明的某些实施例。然而,本发明可以以许多不同的形式被包含,并且不应当被解释为局限于本文中所阐述的实施例。相反,通过示例的方式来提供这些实施例,以便本公开将是彻底的和完全的,以及将向本领域的技术人员传达本发明的范围。
出于清楚的目的,对于每个实施例而言,相对于如在背景部分中描述的当前草案规范的语法和语义的差异在下文中将被加以标识。
基于ViewID的参考图像列表构建
这个实施例涉及以下情况:当前层和参考层在它们的ViewId的各自值中不同。所提出的机制包括两个步骤:
-步骤1:参考图像的两个列表,RefPicSetInterLayerBefore和RefPicSetInterLayerAfter,的导出。
取决于视图间参考图像的ViewId的值, ViewId_ref,和当前图像的ViewId的值,ViewId_curr,在列表RefLayerId[]中给出的每个视图间参考图像被插入到RefPicSetInterLayerBefore或RefPicSetInterLayerAfter中。如果ViewId_ref <ViewId_curr,则它被插入到RefPicSetInterLayerBefore中。否则,它被插入到RefPicSetInterLayerAfter中。
在图1中说明了100这种情况,图1示出了五个图像,具有在图1中从左到右递增的ViewID的各自值的当前图像(Curr)和四个参考图像(A、B、C和D)。依照本发明的实施例,在图1中被说明为具有小于当前图像Curr的ViewID的各自ViewID的参考图像A和B被插入到第一集合101中。相应地,在图1中被说明为具有大于当前图像Curr的ViewID的各自ViewID的参考图像C和D被插入到第二集合102中。
可选地,通过图像的ViewID的递减值来排序在RefPicSetInterLayerBefore(例如,集合101)中的图像,即,在RefPicSetInterLayerBefore中的参考图像的顺序是这样的:绝对差abs(ViewId_ref – ViewId_curr)是递增的。此外,通过图像的ViewID的递增值来排序在RefPicSetInterLayerAfter(例如,集合102)中的图像,即,在RefPicSetInterLayerAfter中的参考图像的顺序是这样的:绝对差abs(ViewId_ref –ViewId_curr)是递增的。
-步骤2:将视图间参考图像插入到参考图像列表RefPicListTemp0和RefPicListTemp1中。
在应用参考图像列表修改命令之前,参考图像列表RefPicListTemp0和RefPicListTemp1是参考图像列表。对于RefPicListTemp0,来自RefPicSetInterLayerBefore的图像根据它们在RefPicSetInterLayerBefore中的顺序被插入。然后,来自RefPicSetInterLayerAfter的图像根据它们在RefPicSetInterLayerAfter中的顺序被插入。对于RefPicListTemp1,来自RefPicSetInterLayerAfter的图像根据它们在RefPicSetInterLayerAfter中的顺序被插入。然后,来自RefPicSetInterLayerBefore的图像根据它们在RefPicSetInterLayerBefore中的顺序被插入。
对于层间参考图像集的解码过程的输出是两个更新的层间图像的列表,RefPicSetInterLayerBefore和RefPicSetInterLayerAfter,以及变量NumInterLayerBefore和NumInterLayerAfter。
列表RefPicSetInterLayerBefore和RefPicSetInterLayerBefore首先被清空,
用于结束具有大于0的nuh_layer_id的编码图像的解码的标记过程的输出是如对于一些解码图像的“用于短期参考”的潜在更新的标记。以下适用:
在对于每个P或B片的解码过程的开始时,调用对于参考图像列表构建的解码过程。
在对于每个片的解码过程的开始时,如下来导出参考图像列表RefPicList0,以及对于B片的RefPicList1。
变量NumRpsCurrTempList0被设置为等于Max(num_ref_idx_l0_active_minus1+1, NumPocTotalCurr)以及如下来构建列表RefPicListTemp0:
如下来构建列表RefPicList0:
当片是B片时,变量NumRpsCurrTempList1被设置为等于Max(num_ref_idx_l1_active_minus1+1, NumPocTotalCurr),如下来构建列表RefPicListTemp1:
当片是B片时,如下来构建列表RefPicList1:
根据在背景部分中引用的当前的VPS扩展语法,仅对于具有大于0的层索引的层通过信号传送ViewId。基础层(层索引0)总是具有等于0的所有可扩缩维度,即,ViewId被推断为等于0。此外,对于大于0的层索引,ViewId的值总是非负的。
根据上述所提出的过程,ViewId被解释为与视图相关联的空间相机位置。如果基础视图具有等于0的ViewId,则它将被约束为仅是“最左”或“最右”视图。为了克服这种约束,可以引入更灵活的信令,以及以下描述若干备选方案。
-备选方案A:发送对于等于0的层索引的dimension_id
-备选方案B:具有对于基础层的非必需存在的dimension_id的备选方案A
语法元素dimension_id可以对于基础层而存在,可选地通过标志来选通。可以有一个标志, 该一个标志指示对于所有可扩缩类型的基础层的dimension_id的存在。
备选地,对于每个可扩缩类型,可以有指示对于该可扩缩类型是否存在对于基础层的dimension_id的各自的标志。
-备选方案C:将ViewId解释为有符号整数
在这种情况下,对于基础层的ViewId仍然被导出为等于0。然而,对于更高层的ViewId被导出如下:它的值的一个比特被解释为符号,例如,最低比特或最高比特,以及剩余的比特被解释为大小(减1)。在以下伪代码中说明了这种情况,其中最低比特被解释为符号。
如下来导出变量ScalabilityId[i][smIdx],指定第i层的第smIdx可扩缩维度类型的标识符,以及变量ViewId[layer_id_in_nuh[i]],指定第i层的视图标识符:
基于DependencyId的参考图像列表构建
这个实施例涉及以下情况:当前层和参考层在DependencyId的它们各自值中不同。所提出的机制包括两个步骤:
-步骤1:列表RefPicSetInterLayer的导出
在列表RefLayerId[]中给出的每个层间参考图像被插入到RefPicSetInterLayer中。在RefPicSetInterLayer中的图像通过它们各自DependencyId的递减值而被排序。因此,使用DependencyId_ref作为参考图像的DependencyId 的值,以及DependencyId_curr作为当前图像的DependencyId的值,在RefPicSetInterLayer中的参考图像的顺序是这样的:绝对差abs(DependencyId_ref–DependencyId_curr)是递增的。
-步骤2:将视图间参考图像插入到参考图像列表,RefPicListTemp0和RefPicListTemp1,中。
与在背景部分中所引用的草案规范相比,步骤2没有改变。
对于层间参考图像集的解码过程的输出是更新的层间图像的列表,RefPicSetInterLayer。列表RefPicSetInterLayer首先被清空,然后如下被导出:
否则,以如在背景部分中所描述的相同方式来完成导出。
基于DependencyId和QualityId的组合的参考图像列表构建
这个实施例涉及以下情况:当前层和参考层在它们的DependencyId的各自值中不同,以及另外可以在它们的QualityId的各自值中不同。所提出的解决方案包括两个步骤。
-步骤1:列表RefPicSetInterLayer的导出
在列表RefLayerId[]中给出的每个层间参考图像被插入到RefPicSetInterLayer中。首先,在RefPicSetInterLayer中的图像通过它们的DependencyId的递减值而被排序,以及其次通过它们的QualityId的递减值而被排序。也就是说,通过DependencyId来对图像进行排序,以及如果对于列表中的一些图像而言,DependencyId是相同的,则通过QualityId的递减值对那些图像进行排序。
-步骤2:将视图间参考图像插入到参考图像列表,RefPicListTemp0和RefPicListTemp1,中。
与在背景部分中所引用的草案规范相比,步骤2没有改变。
基于DependencyId和ViewId的组合的参考图像列表构建
这个实施例涉及以下情况:当前层和参考层在它们的DependencyId和/或ViewId的各自值中不同。其它可扩缩性标识符可以以类似的方式被组合。所提出的解决方案包括两个步骤。
-步骤1:列表RefPicSetInterDependency, RefPicSetInterViewBefore,RefPicSetInterViewAfter和 RefPicSetInterDependencyView的导出。
在列表RefLayerId[]中给出的每个层间参考图像被插入到RefPicSetInterDependency, RefPicSetInterViewBefore, efPicSetInterViewAfter或RefPicSetInterDependencyView中。
与当前图像在它们的DependencyId的各自值中不同,但是在它们的ViewId的各自值中没有不同的参考图像被插入到RefPicSetInterDependency。
类似于以上所描述的,取决于与当前图像的ViewId相比的它们的ViewId的值,与当前图像在它们的ViewId的各自值中不同,但是在它们的DependencyId的各自值中没有不同的参考图像被插入到RefPicSetInterViewBefore或RefPicSetInterViewAfter中。
类似于以上所描述的,与当前图像在它们的ViewId和DependencyId的各自值两者中不同的参考图像被插入到RefPicSetInterDependencyView。类似于以上所描述的,取决于与当前图像的ViewId相比的它们的ViewId的值,这些图像可以备选地被分到两个列表中。
类似于以上所描述的,在RefPicSetInterDependency中的图像通过它们的DependencyId的递减值而被排序。
类似于以上所描述的,在RefPicSetInterViewBefore中的图像通过它们的ViewId的递减值而被排序。
类似于以上所描述的,在RefPicSetInterViewAfter中的图像通过它们的ViewId的递增值而被排序。
与当前图像的DependencyId和ViewId的值,DependencyId_curr和ViewId_curr,相比,在RefPicSetInterDependencyView中的图像通过它们的DependencyId和ViewId的值的组合而被排序。例如,之前提及的值的组合可以是绝对差的和(abs(ViewId_ref–ViewId_curr) + abs(DependencyId_ref–DependencyId_curr)),或平方差的和(ViewId_ref–ViewId_curr)2 + (DependencyId_ref–DependencyId_curr)2,或类似的组合。
-步骤2:将视图间参考图像插入到参考图像列表,RefPicListTemp0和RefPicListTemp1中。
RefPicSetInterDependency, RefPicSetInterViewBefore,RefPicSetInterViewAfter和RefPicSetInterDependencyView分别被插入到参考图像列表中,例如以RefPicSetInterViewBefore, RefPicSetInterViewAfter,RefPicSetInterDependency, RefPicSetInterDependencyView的顺序插入。
基于DependencyId和POC或ViewId和POC的组合的参考图像列表构建
这个实施例涉及以下情况:当前层和参考层在它们的DependencyId的各自值中不同,以及另外可以在它们的图像顺序计数(POC)的各自值中不同。类似地,层可以在例如ViewId,或某一其它可扩缩性标识符的各自值中不同,以及另外可以在它们的POC的值中不同。也就是说,例如层间预测用于但不限于来自相同POC或访问单元的层间预测的情况。也就是说,可以使用从在其它层中与当前图像在时间上不对齐的图像的预测。因为在这种情况下,预测既跨层(层间预测)又跨时间(时间预测),即跨域两个维度而不是一个维度,因此有时它被称为“对角”预测。
为了在视频编码方案中实现对角预测,要求关于来自参考层的哪些时间实例(即,POC的值的集合)用于预测的在编码器和解码器之间的指示和/或约定。在下文中,提出若干备选方案。
对于每个参考层,对于来自参考层的将被使用的参考图像的POC值或POC差的列表,即在参考图像的POC和当前图像的POC之间的差,例如在序列参数集(SPS)或片头部中被指示,以及被编码在比特流中。然后,解码器能够使用所指示的值用于构建参考图像列表。
备选地,由POC值所指示的将被用于预测的来自参考层的数量N个参考图像例如在SPS或片头部中被指示,以及在被编码在比特流中。基于该数量,解码器识别相对于当前图像的POC的将被用于预测的POC值或POC差的列表,以及使用该值用于构建参考图像列表。
POC值或POC差的列表的识别可以例如包含将N个先前解码的图像添加到参考图像列表中。POC值或POC差的列表的识别可以另外包含使用相同的POC值或POC差作为用于参考视图或基础视图中的时间预测。此外,可以使用值的子集,例如用于参考视图或基础视图中的时间预测的前N个POC值或POC差。
所提出的解决方案包括两个步骤。
-步骤1:列表RefPicSetInterLayer的导出。
参考图像被插入到RefPicSetInterLayer中并且与当前图像的DependencyId和POC的值相比,DependencyId_curr 和POC_curr,根据它们的DependencyId和POC的值,DependencyId_ref和POC_ref,的组合被排序。上述的值的组合可以是绝对差的和(abs(POC_ref–POC_curr) + abs(DependencyId_ref–DependencyId_curr)),平方差的和(ViewId_ref–ViewId_curr)2 + (DependencyId_ref–DependencyId_curr)2,或类似的组合。
备选地,可以首先根据递增的abs(POC_ref–POC_curr)以及其次根据递增的abs(DependencyId_ref–DependencyId_curr),或者首先根据递增的abs(DependencyId_ref–DependencyId_curr)以及其次根据递增的abs(POC_ref–POC_curr)来排序在RefPicSetInterLayer中的图像。这里,首先根据“X”来排序列表以及其次根据“Y”来排序列表意味的是,根据“X”来排序该列表,以及如果图像具有相同值的“X”,则根据“Y”来排序这些图像。
备选地,图像可以被分成三个列表,RefPicSetInterLayerPOCBefore,RefPicSetInterLayerPOCCurr,以及RefPicSetInterLayerPOCAfter,以便RefPicSetInterLayerPOCBefore含有具有小于当前图像的POC的POC的图像,RefPicSetInterLayerPOCCurr含有具有等于当前图像的POC的POC的图像,RefPicSetInterLayerPOCAfter含有具有大于当前图像的POC的POC的图像。可以根据与参考图像的POC相比的POC的递增差来排序三个列表中的每个列表。
-步骤2:将视图间参考图像插入到参考图像列表,RefPicListTemp0和RefPicListTemp1,中。
RefPicSetInterLayer被插入到参考图像列表中。RefPicSetInterLayerPOCBefore, RefPicSetInterLayerPOCCurr以及RefPicSetInterLayerPOCAfter被插入到参考图像列表中,例如对于RefPicListTemp0,以RefPicSetInterLayerPOCBefore, RefPicSetInterLayerPOCCurr,RefPicSetInterLayerPOCAfter的顺序插入,以及对于RefPicListTemp1,以RefPicSetInterLayerPOCAfter, RefPicSetInterLayerPOCCurr,RefPicSetInterLayerPOCBefore的顺序插入。
编码器侧参考图像列表构建
在这个实施例中,编码器根据之前的实施例中的一个实施例来计算参考图像列表顺序,以及将所产生的顺序,例如作为参考图像列表显式地发送给解码器。可以根据参考图像列表修改命令来完成该信令。然而,参考图像列表修改命令可能有点低效率,因为在片头部中发送它们以及因为必须对于所有参考图像而不仅是对于视图间参考图像来发送它们。因此,如以下所概述的,可以例如在序列参数集(SPS)或图像参数集(PPS)中使用备选的信令。
这里,ref_layer_idx_I0和ref_layer_idx_ I1可以指定在如在背景部分中指定的参考层RefLayers[]的列表中的索引。备选地:
这里,ref_layer_idx_I0和ref_layer_idx_I1可以指定在如在背景部分中指定的参考层RefLayers[]的列表中的索引。
基于在视图之间的距离的参考图像列表构建
这个实施例涉及以下情况:当前层和参考层属于不同的相机方位。可以从被发送给解码器的参数,诸如在当前3D-HEVC草案标准中使用的基线距离或尺度参数,来确定相对相机方位,通常基于相机基线参数来计算它。所提出的解决方案包括两个步骤。
-步骤1:两个列表RefPicSetInterLayerLeft和RefPicSetInterLayerRight的导出
被包括在列表RefLayerId[]中的每个视图间参考图像取决于它的基线参数或从基线导出的参数的各自值,被插入到RefPicSetInterLayerLeft或RefPicSetInterLayerRight中。如果对应于参考图像和当前图像的尺度参数小于零,则参考图像被插入到列表RefPicSetInterLayerLeft中,否则参考图像被插入到列表RefPicSetInterLayerRight中。根据在当前相机(视图)和对应于参考图像的相机之间的尺度参数的递减顺序,来排序在RefPicSetInterLayerLeft中的图像。以在参考图像和当前相机方位(图像)之间的尺度参数的递增值的顺序,来排序在RefPicSetInterLayerRight中的图像。
-步骤2:将视图间参考图像插入到参考图像列表,RefPicListTemp0和RefPicListTemp1,中。
在应用参考图像列表修改命令之前,RefPicListTemp0和RefPicListTemp1是参考图像列表。来自RefPicSetInterLayerBefore的图像可以与来自RefPiSetInterLayerAfter的图像分别被插入(即,在列表中的不同方位处)。
对于层间参考图像集的解码过程的输出是两个更新的层间图像的列表,RefPicSetInterLayerLeft和RefPicSetInterLayerRight,以及变量NumInterLayerLeft和NumInterLayerRight。
列表RefPicSetInterLayerLeft和RefPicSetInterLayerRight首先被清空以及接着如下被导出:
用于结束具有大于零的nuh_layer_id的编码图像的解码的标记过程的输出是如对于某些解码图像的“用于短期参考”的潜在更新的标记。以下适用:
在对于每个P或B片的解码过程的开始时,调用对于参考图像列表构建的以下解码过程。
当解码P片时,有单个参考图像列表RefPicList0。当解码B片时,除了RefPicList0之外还有第二独立的参考图像列表RefPicList1。在对于每个片的解码过程的开始时,如下来导出参考图像列表RefPicList0,以及对于B片的RefPicList1。
变量NumRpsCurrTempList0被设置为等于Max(num_ref_idx_l0_active_minus1+1, NumPocTotalCurr),以及如下来构建列表
如下来构建列表RefPicList0:
当片是B片时,变量NumRpsCurrTempList1被设置为等于Max(num_ref_idx_l1_active_minus1+1, NumPocTotalCurr),以及如下来构建列表RefPicListTemp1:
当片是B片时,如下来构建列表RefPicList1:
如下来导出指定第i层的第smIdx可扩缩维度类型的标识符的变量ScalabilityId[i][smIdx]和指定第i层的视图标识符的变量ViewId[layer_id_in_nuh[i]]:
基于ViewId的参考图像列表构建和创建参考图像列表
这个实施例涉及以下情况:当前层和参考层在它们各自的ViewId的值中不同。所提出的解决方案包括两个步骤。
-步骤1:两个列表RefPicSetInterLayerLeft和RefPicSetInterLayerRight的导出。
在列表RefLayerId[]中给出的每个视图间参考图像,取决于它的ViewId的值ViewId_Ref,以及当前图像的ViewId的值ViewId_curr,被插入到RefPicSetInterLayerLeft 或RefPicSetInterLayerRight中。如果ViewId_ref < ViewId_curr,则它被插入到RefPicSetInterLayerLeft中。否则,它被插入到RefPicSetInterLayerRight中。
可选地,根据在RefPicSetInterLayerLeft中的图像的ViewId的递减值,对该图像进行排序,即在RefPicSetInterLayerLeft中的参考图像的顺序是这样的:绝对差abs(ViewId_ref–ViewId_curr)是递增的。此外,根据在RefPicSetInterLayerRight中的图像的递增值,对该图像进行排序,即在RefPicSetInterLayerRight中的参考图像的顺序是这样的:绝对差abs(ViewId_ref–ViewId_curr)是递增的。
-步骤2:将视图间参考图像插入到参考图像列表RefPicListTemp0和RefPicListTemp1中。
在应用参考图像列表修改命令之前,RefPicListTemp0和RefPicListTemp1是参考图像列表。对于RefPicListTemp0,来自RefPicSetInterLayerLeft的图像根据它们在RefPicSetInterLayerLeft中顺序被插入。然后,来自RefPicSetInterLayerRight的图像根据它们在RefPicSetInterLayerRight中的顺序被插入。对于RefPicListTemp1,来自RefPicSetInterLayerRight的图像根据它们在RefPicSetInterLayerRight中的顺序被插入。然后,来自RefPicSetInterLayerLeft的图像根据它们在RefPicSetInterLayerLeft中的顺序被插入。
提出以下SPS扩展语法:
这里等于1的inter_view_ref_picture_list_right_first_flag设置等于1的变量interViewRefPictureListRightFirst。否则,变量interViewRefPictureListRightFirst等于0。变量interViewRefPictureListRightFirst交换列表RefPicSetInterLayerLeft和RefPicSetInterLayerRight被插入到NumRpsCurrTempList0和NumRpsCurrTempList1中的方位。
备选地,可以在片头部中或在PPS中通过信号传送标志inter_view_ref_picture_list_right_first_flag。另外,可以通过信号传送标志,以便指定是在片级别上还是在SPS级别上通过信号传送inter_view_ref_picture_list_right_first_flag。
提出以下备选的SPS扩展语法:
因此,提出以下片段语法:
如果在片级别上通过信号传送标志inter_view_ref_picture_list_right_first_slice_flag,则在片头部中的标志的值重写在SPS中的标志的值。
对于层间参考图像集的解码过程的输出是两个更新的层间图像的列表,RefPicSetInterLayerLeft和RefPicSetInterLayerRight,以及变量NumInterLayerBefore和NumInterLayerAfter。
列表RefPicSetInterLayerLeft和RefPicSetInterLayerLeft首先被清空,然后如下被导出:
用于结束具有大于0的nuh_layer_id的编码图像的解码的标记过程的输出是如对于一些解码图像的“用于短期参考”的潜在更新的标记:
在对于每个P或B片的解码过程的开始时,调用对于参考图像列表构建的以下解码过程。
当解码P片时,有单个参考图像列表RefPicList0。当解码B片时,除了RefPicList0之外还有第二独立的参考图像列表RefPicList1。
在对于每个片的解码过程的开始时,如下来导出参考图像列表RefPicList0, 以及对于B片的RefPicList1。变量被设置为等于Max(num_ref_idx_l0_active_minus1+1,NumPocTotalCurr)以及如下来构建列表RefPicListTemp0:
如下来构建列表RefPicList0:
当片是B片时,变量NumRpsCurrTempList1被设置为等于Max(num_ref_idx_l1_active_minus1+1, NumPocTotalCurr)以及如下来构建列表RefPicListTemp1:
当片是B片时,如下来构建列表RefPicList1:
备选地,当构建列表RefPicListTemp0和RefPicListTemp1时,来自列表RefPicSetLtCurr的图像可以被放置在最后的方位。
在参考图像列表构建中参考图像集的定位
这个实施例涉及以下情况:当前层和参考层在它们的ViewId的各自值中不同。所提出的解决方案包括两个步骤。
-步骤1:两个列表RefPicSetInterLayerLeft和RefPicSetInterLayerRight,或者,备选地, RefPicSetInterLayerBefore和RefPicSetInterLayerAfter的导出。
在列表RefLayerId[]中给出的每个视图间参考图像,取决于它的ViewId的值,ViewId_ref,以及当前图像的ViewId的值,ViewId_curr,被插入到RefPicSetInterLayerLeft或RefPicSetInterLayerRight中。如果ViewId_ref < ViewId_curr,则它被插入到RefPicSetInterLayerLeft中。否则,它被插入到RefPicSetInterLayerRight中。在RefPicSetInterLayerLeft中的图像通过它们的ViewId的递减值而被排序,即,在RefPicSetInterLayerLeft中的参考图像的顺序是这样的:绝对差abs(ViewId_ref–ViewId_curr)是递增的。在RefPicSetInterLayerRight中的图像通过它们的ViewId的递增值而被排序,即,在RefPicSetInterLayerRight中的参考图像的顺序是这样的:绝对差abs(ViewId_ref–ViewId_curr)是递增的。
-步骤2:将层间参考图像插入到参考图像列表RefPicListTemp0和RefPicListTemp1中。
在应用参考图像列表修改命令之前,RefPicListTemp0和RefPicListTemp1是参考图像列表。对于RefPicListTemp0,来自RefPicSetInterLayerLeft的图像根据它们在RefPicSetInterLayerLeft中的顺序被插入。然后,来自RefPicSetInterLayerRight的图像根据它们在RefPicSetInterLayerRight中的顺序被插入。对于RefPicListTemp1,来自RefPicSetInterLayerRight的图像根据它们在RefPicSetInterLayerRight中的顺序被插入。然后,来自RefPicSetInterLayerLeft的图像根据它们在RefPicSetInterLayerLeft中的顺序被插入。
提出以下SPS扩展语法:
备选地,使用以下语法,在片头部中发送方位信息:
标志flag ref_pic_set_inter_layer_left_pos指定用于将左面的层间参考图像集插入到RefPicListTemp0和RefPicListTemp1中的方位。标志ref_pic_set_inter_layer_right_pos指定用于将右面的层间参考图像集插入到RefPicListTemp0和RefPicListTemp1中的方位。标志指定在参考图像集方面的方位。备选地,标志可以指定在参考图像方面的方位。
对于层间参考图像集的解码过程的输出是两个更新的层间图像的列表,RefPicSetInterLayerLeft和 RefPicSetInterLayerRight, 以及变量NumInterLayerLeft和NumInterLayerRight。这个过程类似于对于其它实施例所描述的过程。
用于结束具有大于0的nuh_layer_id的编码图像的解码的以下标记过程的输出是如对于一些解码图像的“用于短期参考”的潜在更新的标记。以下适用:
在对于每个P或B片的解码过程的开始时,调用对于参考图像列表构建的解码过程。
当解码P片时,有单个参考图像列表RefPicList0。当时解码B片时,除了RefPicList0之外还有第二独立参考图像列表RefPicList1。
在对于每个片的解码过程的开始时,如下来导出参考图像列表RefPicList0,以及对于B片的RefPicList1。变量NumRpsCurrTempList0被设置为等于Max(num_ref_idx_l0_active_minus1+1, NumPocTotalCurr)以及如下来导出列表 RefPicListTemp0:
如下来构建列表RefPicList0:
当片是B片时,变量NumRpsCurrTempList1被设置为等于Max(num_ref_idx_l1_active_minus1+1, NumPocTotalCurr) 以及如下来构建列表RefPicListTemp1:
当片是B片时,如下来构建列表RefPicList1:
备选地,当构建列表RefPicListTemp0和RefPicListTemp1时,来自列表RefPicSetLtCurr的图像可以被放置在最后的方位。
还借助于以下非限制性示例来阐述本发明。
-示例1:可扩缩性标识符DependencyId可以对应于空间分辨率,其中较高值的DependencyId对应于较高的空间分辨率。例如,如果当前图像具有DependencyId=3,以及参考图像具有DependencyId=0,DependencyId=1,以及DependencyId=2,则具有DependencyId=2的层可能最相似于当前层,以及因此预测有可能有效地工作。此外,具有DependencyId=1的层可能第二最相似于当前层,以及具有DependencyId=0的层最不可能相似于当前层。
因此,以DependencyId=2、DependencyId=1、DependencyId=0的顺序,即以它们的DependencyId的值和对于当前图像的DependencyId的值的各自差的顺序,来插入层间参考图像。
-示例2:可扩缩性标识符QualityId可以对应于质量级别(例如,量化器步长),其中较高值的QualityId对应于较高的信号保真度。例如,如果当前层具有QualityId=3,以及参考图像具有QualityId=0,QualityId=1,以及QualityId=2,则具有QualityId=2的层可能最相似于当前层,因此预测有可能有效地工作。此外,具有QualityId=1的层可能第二最相似于当前层,以及具有QualityId=0的层最不可能相似于当前层。
因此,以QualityId=2、QualityId=1、QualityId=0的顺序,即,以它们的QualityId的值和对于当前图像的QualityId的值的各自差的顺序,来插入层间参考图像。
-示例3:可扩缩性标识符DependencyId可以对应于空间分辨率,以及可扩缩性标识符QualityId可以对应于质量级别(例如,量化器步长),其中较高值的DependencyId对应于较高的空间分辨率,以及较高值的QualityId对应于较高的信号保真度。例如,如果当前层具有DependencyId=1和QualityId=0,以及参考层分别具有DependencyId=0/QualityId=0, DependencyId=0/QualityId=1以及DependencyId=0/QualityId=2,则具有dependencyId=0/QualityId=2的层可能最相似于当前层,以及以DependencyId=0/QualityId=2, DependencyId=0/QualityId=1, DependencyId=0/QualityId=0的顺序,即,以最高值的QualityId开始以及然后以它的值的递减顺序,来插入层间参考图像。
-示例4:可扩缩性标识符ViewId可以对应于视图标识符,其中视图标识符指示空间相机方位。具有相似的相机方位的视图有可能是相似的。因此,层间参考图像可以根据它们的ViewId的值和对于当前图像的ViewId的值的差而被插入。在特定的情况下,当当前层是具有两个参考图像列表的B片时,list0可以含有具有小于当前图像的ViewId的ViewId的参考图像,以及list1可以含有具有大于当前图像的ViewId的ViewId的参考图像(或反之亦然),以及可以根据列表与当前视图的距离,即层标识符的差,对列表进行排序。例如,如果当前图像具有ViewId=2,以及参考图像具有ViewId=0、ViewId=1、ViewId=3、ViewId=4,则list0可以含有以ViewId=1,ViewId=0顺序的两个参考图像,以及list1可以含有以ViewId=3,ViewId=4顺序的两个参考图像。如果可以插入更多的参考图像,则list0可以含有ViewId=1、ViewId=0,ViewId=3,ViewId=4,以及list1可以含有ViewId=3、ViewId=4、ViewId=1、ViewId=0。
根据本发明的实施例,其中基于视图标识符的值ViewId来执行选择和排序,对于具有等于0的layer_id的层,ViewId的值被定义为等于0,以及以二进制形式通过信号传送具有大于0的layer_id的层的ViewId的值,其中一个比特表示符号,以及一个或多个比特表示大小。
根据本发明的实施例,显式地通过信号传送对于等于0的layer_id的层的ViewId的值。
-示例5:为了对列表中的参考图像进行排序,使用与相机方位有关的参数。例如,尺度参数,如在草案3D-HEVC规范中定义的,可以用于这个目的。备选地,为了对列表中的参考图像进行排序,可以使用从相机的相对方位导出的其它参数,例如基线参数。然后,以相机方位的递增,或递减距离的顺序,其对应于参考图像与当前图像在层标识符方面的差,即,在层标识符之间的差,来创建列表。
-示例6:为了创建两个参考列表,例如被称为“在前的参考视图间列表”和“在后的参考视图间列表”,或者备选地,被称为“左面的参考视图间图像列表”和“右面的参考视图间图像列表”,还可以使用从相机的相对方位导出的参数。以在对应于参考图像的相机方位和对应于当前图像的相机方位之间的递增距离的顺序,来排序这些参考图像列表。这这种情况下,一个列表可以包含图像,该图像对应于位于对应于图像的相机方位的一侧上的相机方位。因此,第二列表可以包含图像,该图像具有在对应于当前图像的相机方位的另一侧上的位置。
-示例7:为了创建两个参考列表,例如被称为“在前的参考视图间列表”和“在后的参考视图间列表”,或者备选地,被称为“左面的参考视图间图像列表”和“右面的参考视图间图像列表”,还可以使用从相机的相对方位导出的参数。当创建最终的参考图像列表时,可以分别使用这两个列表。例如,可以默认地指定或可以在比特流中通过信号传送用于将右面的参考图像列表和左面的参考图像列表插入到最终的参考图像列表的方位。
最终的参考图像列表还可以包含:例如,短期参考图像的一个或多个列表和长期参考图像的一个或多个列表,以及用于将右面的参考图像列表和左面的参考图像列表插入到最终的参考图像列表的方位可以与短期参考图像的一个或多个列表和长期参考图像的一个或多个列表被插入的方位有关。
-示例8:为了“交换”“左面的视图间参考图像列表”和“右面的参考图像列表”,可以通过信号传送标志。这里,交换意味的是,如果标志值已经被设置为“真”(或1),则被包含在“左面的视图间参考图像列表”中的参考图像将从“左面的视图间参考图像列表”中被移除并且被包含在“右面的视图间参考图像列表”中。以相同的方式,来自“右面的视图间参考图像列表”的图像将从“右面的视图间参考图像列表”中被移除并且被包含在“左面的视图间参考图像列表”。可以在SPS、PPS、片头部(或片段头部)中,或在作为比特流的一部分的另一个参数集中,通过信号传送标志。
备选地,为了确定来自“右面的视图间参考图像列表”的图像是否应当与在“左面的视图间参考图像”中的图像进行交换,可以使用隐含式判据。
-示例9:在示例4、6和7中,为了改进编码效率,可以显式地通过信号传送对于在所产生的初步参考图像列表中的所产生的参考图像集的精确方位。本示例可以被认为是示例8的扩展,其中对于第一参考图像集和第二参考图像集的精确方位的差被发送给解码器。可以以列表中的参考图像的方位以及在参考图像集方面的参考图像集方位的形式,通过信号来传送方位。
参照图2,描述了构建对于当前图像的层间预测的参考图像的至少一个列表的方法的实施例200。方法200包括:基于与参考图像相关联的可扩缩性标识符的各自值以及与当前图像相关联的可扩缩性标识符的值,将参考图像插入210到参考图像的第一集合或参考图像的第二集合中,以及将参考图像的第一集合和参考图像的第二集合插入220到参考图像的至少一个列表中。方法200还可以包括:对被包括在参考图像的第一集合和参考图像的第二集合中的参考图像,根据它们的可扩缩性标识符的各自值,进行排序230。可选地,方法200还可以包括上文所描述的步骤。
在图3中,说明了编码器的实施例300。编码器300包括至少输入部分301、输出部分302、处理器303、以及存储器304。
编码器300被布置用于经由输入部分301接收视频,即图像序列,以及处理器303被配置为执行上文中描述的过程。另外,处理器303可以被配置用于执行与本领域已知的视频编码有关的其它过程。输出部分302可以被布置用于提供用于进一步处理或在通信网上传输的比特流。
处理器的功能性可以由存储在存储器304中的计算机程序305,即软件来实现。计算机程序305包括计算机可执行指令,当在处理器303上执行时,该计算机可执行指令被适应于实现上文描述的过程。
编码器300的实施例可以被提供作为移动终端600(在图6中说明的)、平板计算机、计算机等的部件601。
在图4中,说明了解码器的实施例400。解码器400包括:至少输入部分401、输出部分402、处理器403、以及存储器404。
解码器400被布置用于经由输入部分401来接收比特流,以及处理器403被配置为执行上文描述的过程。另外,处理器403可以被配置用于执行与本领域已知的视频编码有关的其它过程。输出部分402可以被布置用于提供用于进一步处理,例如显示,的视频。处理器403的功能可以由存储在存储器404中的计算机程序405,即软件,来实现。计算机程序405包括计算机可执行指令,当在处理器403上执行时,该计算机可执行指令被适应于实现上文描述的过程。
解码器400的实施例可以被提供作为移动终端600(在图6中说明的)、平板计算机、计算机等的部件601。
解码器400的实施例可以经由通信网,诸如互联网、蜂窝网络、无线电网络等或其组合,接收来自编码器300的实施例的比特流。
在图5中,说明了视频编码器(解码器)的备选实施例500。视频编码器(解码器)500包括:如参考图3和图4描述的输入部分和输出部分(在图5中未示出),编码(解码)模块501、集合模块502、列表模块503,以及非必需的,排序模块504。集合模块502和列表模块503被配置为依照上文描述的进行操作。特别地,集合模块502被配置用于基于与参考图像相关联的可扩缩性标识符的各自值和与当前图像相关联的可扩缩性标识符的值,将参考图像插入到参考图像的第一集合或参考图像的第二集合中。此外,列表模块被配置用于将参考图像的第一集合和参考图像的第二集合插入到参考图像的至少一个列表中。
如果存在,则排序模块504被配置根据上文描述的进行操作,特别地对被包括在参考图像的第一集合和参考图像的第二集合中的参考图像,根据它们的可扩缩性标识符的各自值,进行排序。
编码器(解码器500)的实施例可以被提供作为移动终端600(在图6中说明的)、平板计算机、计算机等的部件601。
本领域的技术人员认识到的是,本发明绝不局限于上述实施例。相反,许多修改和变型可能在所附权利要求书的范围内。

Claims (43)

1.一种构建对于当前图像的层间预测的参考图像的至少一个列表的方法(200),所述方法包括:
基于与参考图像相关联的可扩缩性标识符的相应值以及与所述当前图像相关联的可扩缩性标识符的值,将所述参考图像插入(210)到参考图像的第一集合或参考图像的第二集合中;以及
将所述参考图像的第一集合和所述参考图像的第二集合插入(220)到所述参考图像的至少一个列表中。
2.根据权利要求1所述的方法,其中所述参考图像基于它们的所述可扩缩性标识符的相应值和与所述当前图像相关联的所述可扩缩性标识符的值的差,被插入(210)到所述参考图像的第一集合或所述参考图像的第二集合中。
3.根据权利要求2所述的方法,其中具有小于与所述当前图像相关联的所述可扩缩性标识符的值的所述可扩缩性标识符的相应值的参考图像被插入(210)到所述参考图像的第一集合中,以及具有大于与所述当前图像相关联的所述可扩缩性标识符的值的所述可扩缩性标识符的相应值的参考图像被插入(210)到所述参考图像的第二集合中。
4.根据权利要求1至3中的任何一项所述的方法,还包括:
对被包括在所述参考图像的第一集合和所述参考图像的第二集合中的所述参考图像,根据它们的所述可扩缩性标识符的相应值进行排序(230)。
5.根据权利要求4所述的方法,其中以所述可扩缩性标识符的递减值来排序(230)所述参考图像。
6.根据权利要求4所述的方法,其中以所述可扩缩性标识符的递增值来排序(230)所述参考图像。
7.根据权利要求4所述的方法,其中以所述参考图像的所述可扩缩性标识符的相应值和与所述当前图像相关联的所述可扩缩性标识符的值的递减的绝对差来排序(230)所述参考图像。
8.根据权利要求4所述的方法,其中以所述参考图像的所述可扩缩性标识符的相应值和与所述当前图像相关联的所述可扩缩性标识符的值的递增的绝对差来排序(230)所述参考图像。
9.根据权利要求1至3中的任何一项所述的方法,其中构建参考图像的两个列表,所述参考图像的第一集合在所述参考图像的第二集合的前面被插入(220)到所述参考图像的第一列表中,以及所述参考图像的第二集合在所述参考图像的第一集合的前面被插入到所述参考图像的第二列表中。
10.根据权利要求9所述的方法,其中:
所述参考图像的第一集合在短期参考图像的第一集合之后被插入(220)到所述参考图像的第一列表中,
所述参考图像的第一集合被插入(220)在所述参考图像的第二列表的结尾,
所述参考图像的第二集合在短期参考图像的第二集合之后并且在短期参考图像的第一集合之前被插入(220)到所述参考图像的第二列表,以及
所述参考图像的第二集合被插入(220)在所述参考图像的第一列表的结尾。
11.根据权利要求1至3中的任何一项所述的方法,其中基于与所述参考图像相关联的至少两个可扩缩性标识符,即第一可扩缩性标识符和第二可扩缩性标识符的相应值和与所述当前图像相关联的所述可扩缩性标识符的相应值,所述参考图像被插入(210)到所述参考图像的第一集合和所述参考图像的第二集合中。
12.根据权利要求1至3中的任何一项所述的方法,其中所述可扩缩性标识符中的每个可扩缩性标识符是以下中的任何一个:指示相对空间相机捕获方位的视图标识符、指示解码顺序的依赖性标识符、指示层解码顺序的质量标识符、指示时间可扩缩信息的时间标识符,或指示层是否含有纹理或深度信息的深度标志。
13.一种编码视频的方法,所述方法包括根据权利要求1至12中的任何一项所述的方法。
14.一种解码视频的方法,所述方法包括根据权利要求1至12中的任何一项所述的方法。
15.一种构建对于当前图像的层间预测的参考图像的至少一个列表的装置,包括:
用于基于与参考图像相关联的可扩缩性标识符的相应值以及与所述当前图像相关联的可扩缩性标识符的值,将所述参考图像插入到参考图像的第一集合或参考图像的第二集合中的模块;以及
用于将所述参考图像的第一集合和所述参考图像的第二集合插入到所述参考图像的至少一个列表中的模块。
16.根据权利要求15所述的装置,其中所述参考图像基于它们的所述可扩缩性标识符的相应值和与所述当前图像相关联的所述可扩缩性标识符的值的差,被插入到所述参考图像的第一集合或所述参考图像的第二集合中。
17.根据权利要求16所述的装置,其中具有小于与所述当前图像相关联的所述可扩缩性标识符的值的所述可扩缩性标识符的相应值的参考图像被插入到所述参考图像的第一集合中,以及具有大于与所述当前图像相关联的所述可扩缩性标识符的值的所述可扩缩性标识符的相应值的参考图像被插入到所述参考图像的第二集合中。
18.根据权利要求15至17中的任何一项所述的装置,还包括:
用于对被包括在所述参考图像的第一集合和所述参考图像的第二集合中的所述参考图像,根据它们的所述可扩缩性标识符的相应值进行排序的模块。
19.根据权利要求18所述的装置,其中以所述可扩缩性标识符的递减值来排序所述参考图像。
20.根据权利要求18所述的装置,其中以所述可扩缩性标识符的递增值来排序所述参考图像。
21.根据权利要求18所述的装置,其中以所述参考图像的所述可扩缩性标识符的相应值和与所述当前图像相关联的所述可扩缩性标识符的值的递减的绝对差来排序所述参考图像。
22.根据权利要求18所述的装置,其中以所述参考图像的所述可扩缩性标识符的相应值和与所述当前图像相关联的所述可扩缩性标识符的值的递增的绝对差来排序所述参考图像。
23.根据权利要求15至17中的任何一项所述的装置,其中构建参考图像的两个列表,所述参考图像的第一集合在所述参考图像的第二集合的前面被插入到所述参考图像的第一列表中,以及所述参考图像的第二集合在所述参考图像的第一集合的前面被插入到所述参考图像的第二列表中。
24.根据权利要求23所述的装置,其中:
所述参考图像的第一集合在短期参考图像的第一集合之后被插入到所述参考图像的第一列表中,
所述参考图像的第一集合被插入在所述参考图像的第二列表的结尾,
所述参考图像的第二集合在短期参考图像的第二集合之后并且在短期参考图像的第一集合之前被插入到所述参考图像的第二列表,以及
所述参考图像的第二集合被插入在所述参考图像的第一列表的结尾。
25.根据权利要求15至17中的任何一项所述的装置,其中基于与所述参考图像相关联的至少两个可扩缩性标识符,即第一可扩缩性标识符和第二可扩缩性标识符的相应值和与所述当前图像相关联的所述可扩缩性标识符的相应值,所述参考图像被插入到所述参考图像的第一集合和所述参考图像的第二集合中。
26.根据权利要求15至17中的任何一项所述的装置,其中所述可扩缩性标识符中的每个可扩缩性标识符是以下中的任何一个:指示相对空间相机捕获方位的视图标识符、指示解码顺序的依赖性标识符、指示层解码顺序的质量标识符、指示时间可扩缩信息的时间标识符,或指示层是否含有纹理或深度信息的深度标志。
27.一种编码视频的装置,包括用于执行根据权利要求1至12中的任何一项所述的方法的模块。
28.一种解码视频的装置,包括用于执行根据权利要求1至12中的任何一项所述的方法的模块。
29.一种计算机可读存储介质(304;404),其上存储有计算机可执行指令,所述计算机可执行指令当在包括在设备(300;400)中的处理单元(303;403)上被执行时促使所述设备(300;400)执行如权利要求1至14中的任何一项所述的方法。
30.一种构建对于当前图像的层间预测的参考图像的至少一个列表的设备(300;400;500;601),所述设备包括部件(301-305;401-405;501-504),所述部件被配置用于:
基于与参考图像相关联的可扩缩性标识符的相应值以及与所述当前图像相关联的可扩缩性标识符的值,将所述参考图像插入到参考图像的第一集合或参考图像的第二集合中;以及
将所述参考图像的第一集合和所述参考图像的第二集合插入到所述参考图像的至少一个列表中。
31.根据权利要求30所述的设备,所述部件被配置用于基于所述参考图像的所述可扩缩性标识符的相应值和与所述当前图像相关联的所述可扩缩性标识符的值的差,将所述参考图像被插入到所述参考图像的第一集合或所述参考图像的第二集合中。
32.根据权利要求31所述的设备,所述部件被配置用于将具有小于与所述当前图像相关联的所述可扩缩性标识符的值的所述可扩缩性标识符的相应值的参考图像插入到所述参考图像的第一集合中,以及将具有大于与所述当前图像相关联的所述可扩缩性标识符的值的所述可扩缩性标识符的相应值的参考图像插入到所述参考图像的第二集合中。
33.根据权利要求30至32中的任何一项所述的设备,所述部件还被配置用于对被包括在所述参考图像的第一集合和所述参考图像的第二集合中的所述参考图像,根据它们的所述可扩缩性标识符的相应值进行排序。
34.根据权利要求33所述的设备,所述部件被配置用于以所述可扩缩性标识符的递减值来排序所述参考图像。
35.根据权利要求33所述的设备,所述部件被配置用于以所述可扩缩性标识符的递增值来排序所述参考图像。
36.根据权利要求33所述的设备,所述部件被配置用于以所述参考图像的所述可扩缩性标识符的相应值和与所述当前图像相关联的所述可扩缩性标识符的值的递减的绝对差来排序所述参考图像。
37.根据权利要求33所述的设备,所述部件被配置用于以所述参考图像的所述可扩缩性标识符的相应值和与所述当前图像相关联的所述可扩缩性标识符的值的递增的绝对差来排序所述参考图像。
38.根据权利要求30至32中的任何一项所述的设备,所述部件被配置用于构建参考图像的两个列表,将所述参考图像的第一集合在所述参考图像的第二集合的前面插入到所述参考图像的第一列表中,以及将所述参考图像的第二集合在所述参考图像的第一集合的前面插入到所述参考图像的第二列表中。
39.根据权利要求30至32中的任何一项所述的设备,所述部件被配置用于基于与所述参考图像相关联的至少两个可扩缩性标识符的相应值,即第一可扩缩性标识符或第二可扩缩性标识符的相应值和与所述当前图像相关联的可扩缩性标识符的相应值,所述参考图像被插入到所述参考图像的第一集合和所述参考图像的第二集合中。
40.根据权利要求30至32中的任何一项所述的设备,其中所述可扩缩性标识符中的每个可扩缩性标识符是以下中的任何一个:指示相对空间相机捕获方位的视图标识符、指示解码顺序的依赖性标识符、指示层解码顺序的质量标识符、指示时间可扩缩信息的时间标识符,或指示层是否含有纹理或深度信息的深度标志。
41.根据权利要求30至32中的任何一项所述的设备,所述设备是视频编码器(300)。
42.根据权利要求30至32中的任何一项所述的设备,所述设备是视频解码器(400)。
43.一种包括根据权利要求30至42中的任何一项所述的设备(601)的移动终端(600)。
CN201480020872.2A 2013-04-12 2014-04-04 构建层间参考图像列表 Active CN105103558B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361811376P 2013-04-12 2013-04-12
US61/811376 2013-04-12
PCT/SE2014/050421 WO2014168561A1 (en) 2013-04-12 2014-04-04 Constructing inter-layer reference picture lists

Publications (2)

Publication Number Publication Date
CN105103558A CN105103558A (zh) 2015-11-25
CN105103558B true CN105103558B (zh) 2018-09-11

Family

ID=50625046

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480020872.2A Active CN105103558B (zh) 2013-04-12 2014-04-04 构建层间参考图像列表

Country Status (10)

Country Link
US (1) US10123039B2 (zh)
EP (2) EP2984841B1 (zh)
CN (1) CN105103558B (zh)
BR (1) BR112015024940B1 (zh)
ES (1) ES2587710T3 (zh)
HK (1) HK1215632A1 (zh)
MX (1) MX344186B (zh)
MY (1) MY169901A (zh)
PL (1) PL2984841T3 (zh)
WO (1) WO2014168561A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014163463A1 (ko) * 2013-04-05 2014-10-09 삼성전자 주식회사 멀티 레이어 비디오 부호화 방법 및 장치, 멀티 레이어 비디오 복호화 방법 및 장치
GB201421095D0 (en) * 2014-11-27 2015-01-14 British Broadcasting Corp HEVC Optimization techniques
WO2016173519A1 (en) * 2015-04-29 2016-11-03 Hfi Innovation Inc. Method and apparatus for intra block copy reference list construction
GB2554877B (en) * 2016-10-10 2021-03-31 Canon Kk Methods, devices, and computer programs for improving rendering display during streaming of timed media data
EP3422722A1 (en) 2017-06-30 2019-01-02 Thomson Licensing Method for encoding a matrix of image views obtained from data acquired by a plenoptic camera

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1761322A (zh) * 2003-03-03 2006-04-19 Lg电子株式会社 选择参考图像的方法
CN101040533A (zh) * 2004-10-13 2007-09-19 汤姆逊许可公司 复杂性可伸缩的视频编码和解码方法和设备

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7671894B2 (en) * 2004-12-17 2010-03-02 Mitsubishi Electric Research Laboratories, Inc. Method and system for processing multiview videos for view synthesis using skip and direct modes
KR20080066784A (ko) * 2005-10-11 2008-07-16 노키아 코포레이션 규모가변적 비디오 코딩을 위한 효율적 디코딩 화상 버퍼관리
WO2008007917A1 (en) * 2006-07-12 2008-01-17 Lg Electronics, Inc. A method and apparatus for processing a signal
US20100266042A1 (en) * 2007-03-02 2010-10-21 Han Suh Koo Method and an apparatus for decoding/encoding a video signal
WO2008133455A1 (en) * 2007-04-25 2008-11-06 Lg Electronics Inc. A method and an apparatus for decoding/encoding a video signal
JP2010183317A (ja) 2009-02-05 2010-08-19 Olympus Imaging Corp 撮像装置、画像合成表示装置、画像合成表示方法、およびプログラム
EP2406954A1 (en) * 2009-03-13 2012-01-18 Telefonaktiebolaget L M Ericsson (PUBL) Technique for bringing encoded data items into conformity with a scalable coding protocol
US9131245B2 (en) * 2011-09-23 2015-09-08 Qualcomm Incorporated Reference picture list construction for video coding
US9451284B2 (en) * 2011-10-10 2016-09-20 Qualcomm Incorporated Efficient signaling of reference picture sets
US9549180B2 (en) * 2012-04-20 2017-01-17 Qualcomm Incorporated Disparity vector generation for inter-view prediction for video coding
US9325990B2 (en) * 2012-07-09 2016-04-26 Qualcomm Incorporated Temporal motion vector prediction in video coding extensions
US9398284B2 (en) * 2012-08-16 2016-07-19 Qualcomm Incorporated Constructing reference picture lists for multi-view or 3DV video coding
KR102238567B1 (ko) * 2012-09-19 2021-04-08 퀄컴 인코포레이티드 디스패리티 벡터 유도를 위한 화상들의 선택
EP2966868B1 (en) * 2012-10-09 2018-07-18 HFI Innovation Inc. Method for motion information prediction and inheritance in video coding
US20140218473A1 (en) * 2013-01-07 2014-08-07 Nokia Corporation Method and apparatus for video coding and decoding
US9781416B2 (en) * 2013-02-26 2017-10-03 Qualcomm Incorporated Neighboring block disparity vector derivation in 3D video coding
US9992493B2 (en) * 2013-04-01 2018-06-05 Qualcomm Incorporated Inter-layer reference picture restriction for high level syntax-only scalable video coding
US20140301463A1 (en) * 2013-04-05 2014-10-09 Nokia Corporation Method and apparatus for video coding and decoding
US9930363B2 (en) * 2013-04-12 2018-03-27 Nokia Technologies Oy Harmonized inter-view and view synthesis prediction for 3D video coding

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1761322A (zh) * 2003-03-03 2006-04-19 Lg电子株式会社 选择参考图像的方法
CN101040533A (zh) * 2004-10-13 2007-09-19 汤姆逊许可公司 复杂性可伸缩的视频编码和解码方法和设备

Also Published As

Publication number Publication date
CN105103558A (zh) 2015-11-25
EP3079365A1 (en) 2016-10-12
MX2015014188A (es) 2015-12-11
BR112015024940A2 (pt) 2017-07-18
EP2984841A1 (en) 2016-02-17
US20160323598A1 (en) 2016-11-03
MY169901A (en) 2019-06-13
HK1215632A1 (zh) 2016-09-02
US10123039B2 (en) 2018-11-06
MX344186B (es) 2016-12-08
BR112015024940B1 (pt) 2023-01-24
EP2984841B1 (en) 2016-06-08
WO2014168561A1 (en) 2014-10-16
PL2984841T3 (pl) 2016-12-30
ES2587710T3 (es) 2016-10-26

Similar Documents

Publication Publication Date Title
CN105325001B (zh) 面向深度的视图间运动向量预测
CN101785317B (zh) 使用区域视差向量的多视角编码视频中的运动跳过模式的方法和装置
CN104604236B (zh) 用于视频编码的方法和装置
CN101366285B (zh) 用于多视角视频编码的方法和装置
CN104205819B (zh) 用于视频编码的方法和装置
CN103650505B (zh) 视频译码中的运动向量预测
CN105409220B (zh) 用于视频译码的经解码图片缓冲器操作
CN104584549B (zh) 用于视频编码的方法和装置
CN105830447B (zh) 用于视频信息的可缩放译码的装置及方法
CN104115493B (zh) 用于多视图视频译码mvc兼容三维视频译码3dvc的参数集的激活
CN105379288B (zh) 处理对视频译码的照明补偿
CN105103558B (zh) 构建层间参考图像列表
CN109792533A (zh) 在视频译码中用于仿射运动模型的运动向量预测
CN110024401A (zh) 用于时间扩缩性支持的修改适应性环路滤波器时间预测
CN105122814B (zh) 可包含未对准irap图片的多层位流的跨层poc对准
CN101611633B (zh) 用于针对多视角视频编码和解码解耦合帧号和/或图像顺序计数(poc)的方法和装置
CN104885459B (zh) 用于多层译码的多分辨率经解码图片缓冲器管理
CN104272741A (zh) 多视图译码和3d译码中的视图相依性
CN104641642A (zh) 用于视频编码的方法和装置
CN110062245A (zh) 三维视频编码的摄像机参数发信的方法和装置
CN104488269A (zh) 用于发信号通知渐进式时间层访问图片的方法
CN106105218A (zh) 在3d视频编码中处理相机参数的方法和设备
CN106105190A (zh) 用于3d‑hevc的简化高级残余预测
CN104937942A (zh) 用于视频序列编码的解码器、编码器和方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1215632

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant