CN106851319B - 推导方法及推导装置 - Google Patents

推导方法及推导装置 Download PDF

Info

Publication number
CN106851319B
CN106851319B CN201611120450.XA CN201611120450A CN106851319B CN 106851319 B CN106851319 B CN 106851319B CN 201611120450 A CN201611120450 A CN 201611120450A CN 106851319 B CN106851319 B CN 106851319B
Authority
CN
China
Prior art keywords
information
mvp
candidate
layer
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611120450.XA
Other languages
English (en)
Other versions
CN106851319A (zh
Inventor
庄子德
陈庆晔
傅智铭
黄毓文
雷少民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Inc
Original Assignee
MediaTek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Inc filed Critical MediaTek Inc
Publication of CN106851319A publication Critical patent/CN106851319A/zh
Application granted granted Critical
Publication of CN106851319B publication Critical patent/CN106851319B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Abstract

本发明揭露一种推导方法及推导装置，用于可伸缩视频编码的运动向量预测子候选项或合并候选项推导，其中视频数据被配置为一个基本层和一个增强层，且该增强层具有比该基本层更高的空间分辨率或更佳的视频品质，该推导方法包含：决定该基本层中的运动信息；以及基于该基本层中的该运动信息推导该增强层中的运动向量预测子候选项或合并候选项。本发明揭露的推导方法及推导装置提供空间伸缩和品质伸缩的能力，且可以获取更高的编码效率及/或更佳的灵活性。

Description

推导方法及推导装置
相关申请的交叉引用
本申请要求如下申请的优先权：序列号为61/495,740、2011年6月10日提交的、名称为“Scalable Coding of High Efficiency Video Coding”的美国临时专利申请，以及序列号为61/567,774、2011年12月7日提交的美国临时专利申请。上述美国临时专利申请的全部内容在此一并作为参考。
技术领域
本发明有关于视频编码，且特别地，本发明有关于将基本层的信息用于增强层编码的可伸缩视频编码(scalable video coding)。
背景技术
压缩数字视频(compressed digital video)被广泛用于各种应用，例如数字网络中的视频流以及数字信道中的视频传输。通常，单个视频内容可以不同特性在网络中传送。举例来说，用于高品质视频服务的生动的运动事件可在宽带网络中以高带宽流格式来栽送。在这些应用中，压缩视频通常保有高分辨率及高品质，从而其视频内容适合高清晰度装置，例如高清电视或高分辨率液晶显示器。相同的内容也可栽送于蜂窝数据网络，从而使所述内容可以在诸如智能手机或可联网的便携式媒体装置的便携式装置上观看。在这些应用中，由于考虑到网络带宽以及智能手机与便携式装置上典型的低分辨率显示器，视频内容通常被压缩成低分辨率和低比特率(bitrates)的格式。因此，对于不同的网络环境及不同应用来说，其对视频分辨率及视频品质的需求也非常不同。即使对于相同类型的网络而言，由于不同的网络基础能力(infrastructure)和网络流量状况，用户可用的网络带宽也各不相同。因此，在可用带宽高的时候，用户可能希望接收具有较高品质的视频，而在网络堵塞(infrastructure)发生时，则希望接收具有较低品质但却流畅的视频。在另一场景中，高端的媒体播放器能够处理高分辨率及高比特率的压缩视频，而廉价的媒体播放器则受限于有限的计算资源而只能够处理低分辨率和低比特率的压缩视频。因此，需要以可伸缩的方式来构建压缩视频，从而可以自相同的压缩比特流中推导出具有不同空间-时间分辨率及/或品质的视频。
在当前的H.264/AVC视频标准中，有一种H.264/AVC标准的扩展，叫做可伸缩视频编码(Scalable Video Coding，以下简称SVC)。基于单一比特流，SVC提供时间、空间以及品质的伸缩。SVC比特流中可分别包含从低帧率、低分辨率及低品质到高帧率、高清晰度及高品质的伸缩视频信息。因此，SVC适合各种不同视频应用，例如适合网络基础设施、流量控制、用户偏好等应用的视频广播(video broadcasting)、视频流(video streaming)、视频监控(video surveillance)。
在SVC中，有三种伸缩，即，提供时间伸缩、空间伸缩和品质伸缩。SVC利用多层(multi-layer)编码架构来实现上述三种维度的伸缩。SVC的主要目的之一是为了产生伸缩的比特流，其可以容易且快速地适用于与各种不同传输信道、显示能力以及不同计算资源相关的比特率需求，而无需进行转码(trans-coding)或再编码(re-coding)。SVC设计的一个重要特性在于伸缩是在比特流层提供的。换句话说，用于推导视频且具有降低的空间及/或时间分辨率的比特流可简单地通过从解码所需视频而需要的伸缩比特流中撷取网络抽象层(Network Abstraction Layer，以下简称为NAL)单元(或网络封包)得到。用于品质细化(quality refinement)的NAL单元可另外截去以降低比特率及相关视频的品质。
举例来说，依据H.264/AVC标准，时间伸缩可以而从基于B图像的(B-pictures)分层编码架构(hierarchical coding structure)中推导出来。图1显示了具有4个时间层的分层B图像架构以及具有8张图像的图像组的范例。图1中的图像0和图像8称为关键图像(key pictures)。关键图像的帧间预测仅仅使用先前的关键图像作为参考。两张关键图像之间的其他图像被分层预测。仅仅具有关键图像的视频可形成伸缩系统中的最粗糙的时间分辨率。时间伸缩可通过依据伸缩系统中增强层来添加B图像，从而逐步细化低水平(粗糙的)视频来达成。在图1的实施例中，在两张关键图像被编码之后，首先利用关键图像(即图像0和图像8)对图像4进行双向预测。在处理完图像4之后，图像2和图像6被处理。图像2是利用图像0和图像4来进行双向预测，而图像6则是利用图像4和图像8进行双向预测。如图1所示，在图像2和图像6被编码之后，剩余的图像，即图像1、3、5、7，则分别利用相邻的图像进行双向预测处理。因此，图像组中的处理顺序是0、8、4、2、6、1、3、5、7。依据图1所示的分层处理处理过的图像将产生分层的四级图像(hierarchical four-level pictures)，其中图像0和图像8属于第一时间顺序，图像4属于第二时间顺序，图像2和图像6属于第三时间顺序，而图像1、3、5、7则属于第四时间顺序。通过解码基本层的图像及添加更高时间层的图像就可以提供较高层的视频。举例来说，基本层的图像0和图像8可与第二时间顺序的图像4结合以形成第二层的视频。若在第二层视频的基础上进一步添加第三时间顺序的图像则可以形成第三层的视频。类似地，通过在第三层视频中添加第四时间顺序的图像则可以形成第四层的视频。相应地，所述时间伸缩也可以获取。若原始视频具有每秒30帧的帧率，则基本层视频的帧率为30/8＝3.75帧/秒。而第二层、第三层和第四层视频则对应于7.5帧/秒、15帧/秒以及30帧/秒的帧率。所述第一时间顺序的图像也称为基本层视频或基本层图像。而所述的第二时间顺序的图像到第四时间顺序的图像也被称为增强层视频或增强层图像。除了使能时间伸缩之外，分层B图像的编码架构同时也以增加编码-解码延迟的代价提升了典型的IBBP图像组架构的编码效率。
如图2所示，在SVC中，空间伸缩是基于金字塔形编码机制而被支持的。在具有空间伸缩的SVC系统中，视频序列首先被降采样(down-sampled)以获得具有不同空间分辨率(层)的较小的图像。举例来说，具有原始分辨率的图像210可被空间抽取(spatialdecimation)220处理以获取分辨率降低的图像211。如图2所示，分辨率降低的图像211可进一步被空间抽取221处理以获取分辨率进一步降低的图像212。除了二进的(dyadic)空间分辨率(其空间分辨率在每一层被减少至一半)之外，SVC还支持任意的分辨率比例，其被称为扩展的空间伸缩(Extended Spatial Scalability，以下简称ESS)图2中的SVC系统显示了具有三层的空间伸缩系统的范例，其中层0对应于具有最低空间分辨率的图像，而层2则对应于具有最高空间分辨率的图像。所述层0的图像是不参考其他层而被编码，即，单层编码(single-layer coding)。举例来说，最低层图像212是利用运动补偿及帧内预测230来编码。
与编码相关信息(例如运动信息)一样，所述运动补偿及帧内预测230会产生语法元素以用于进一步的熵编码240。图2实际上显示的是一个组合式SVC系统，其在提供空间伸缩的同时也提供品质伸缩(也被称为SNR伸缩)。所述系统也可提供时间伸缩，但其并未在图中明确显示。对于每一单层编码来说，残余编码误差都可以利用SNR增强层编码250来细化。图2中的所述SNR增强层可提供多种品质级(品质伸缩)。类似于非伸缩编码系统，每一支持的分辨率层都可以通过各自的单层运动补偿及帧内预测来编码。每一较高空间层也可基于一个或多个较低空间层而利用帧间层编码来进行编码。举例来说，在宏块或其他块架构的基础上，层1的视频可于宏块上利用基于层0视频的层间(inter-layer)预测或单层编码来进行适应性地编码。类似地，层2的视频可利用基于层1视频的层间预测或单层编码来进行适应性地编码。如图2所示，层1的图像211的编码可通过运动补偿及帧内预测231、基本层熵编码241与SNR增强层编码251来进行。类似地，层2的图像210的编码可通过运动补偿及帧内预测232、基本层熵编码242与SNR增强层编码252来进行。由于使用了层间编码，编码效率可被提升。此外，编码空间层1所需的信息可依赖于重建的层0(层间预测)。所述层间差别被称为增强层。所述H.264SVC提供三种层间预测方法：层间运动预测、层间帧内预测和层间残差预测。
在SVC中，增强层(Enhancement Layer，以下简称EL)可重复使用基本层(BaseLayer，以下简称BL)的运动信息，以减少层间运动数据冗余(redundancy)。举例来说，在mb_type被决定之前，EL的宏块编码可使用一个旗标，例如base_mode_flag，以指示EL运动信息是否由BL直接推导出。若base_mode_flag为1，则EL宏块的分割信息及相关的参考索引与运动向量都是由BL中同位的8×8块的对应数据推导得出。BL的参考图像索引会直接用于EL。而EL的运动向量则是由与BL相关的资料缩放(scaled)而得到。除此之外，缩放的BL运动向量也可用来作为EL的另一个运动向量预测子(additional motion vector predictor)。
所述层间残差预测是使用上采样BL残差信息来减少EL残差的信息。所述BL的同位残差可利用双线性滤波来分块上采样，且可被用于EL中当前块的残差的预测。所述参考层残差的上采样是在变换块(transform block)的基础上进行的，以确保没有滤波是在跨越变换块边界的情形下进行的。
类似于层间残差预测，层间帧内预测也可以减少EL的冗余纹理(texture)信息。所述EL中的预测是通过分块上采样同位的BL重建信号来产生的。在层间帧内预测上采样过程中，4抽头(4-tap)和2抽头的FIR滤波被分别用于亮度和色度分量。与层间残差预测不同，用于层间帧内预测的滤波常常在跨子块(sub-block)边界的条件下进行。为了使解码简单，层间帧内预测可被限制于仅在BL中的帧内编码宏块进行。
在SVC中，品质伸缩是通过编码由细化系数组成的多种品质EL来实现的。伸缩的视频比特流可被容易地截取或撷取以提供具有不同视频品质或比特流尺寸的不同视频比特流。在SVC中，品质伸缩(也被称为SNR伸缩)可通过两种策略提供，即粗粒度分层(CoarseGrain Scalability，以下简称为CGS)和中等粒度分层(Medium Grain Scalability，以下简称为CGS)。CGS可被视为空间分层的特例，其中BL的空间分辨率与EL的空间分辨率相同。然而，所述EL的品质较佳(EL的QP比BL的QP小)。与用于空间伸缩编码的层间预测机制相同的机制亦可应用于此。然而，其并未执行对应的上采样或去块操作。此外，层间帧内及残差预测是直接在变换(transform domain)域执行的。对于CGS中的层间预测来说，纹理信息的细化通常是通过以更小量化步长而不是用于先前CGS层的步长来重新量化EL中的残差信号而实现的。所述CGS可提供多个预设品质点(quality points)。
为了在保持合理的品质伸缩的复杂度的前提下提供更佳的比特率粒度(finerbit rate granularity)，H.264SVC使用了MGS。MGS可被视为CGS的扩展，其中在一个CGS条带(slice)中的量化系数可被分至多个MGS条带。基于其在zig-zag扫描顺序中的位置，CGS中的量化系数可被分为16个类型。这16个类型的系数可被分散至不同的条带以提供比CGS更多的品质抽取点(quality extraction points)。
在当前的HEVC中，仅提供了基于分层B(hierarchical-B)编码架构的单层编码，而没有提供空间伸缩和品质伸缩。因此，需要为当前的HEVC提供空间伸缩和品质伸缩的能力。更进一步，也需要在H.264SVC的基础上提供改进的SVC以获取更高效率及/或更佳的灵活性。
发明内容
本发明揭露一种将基本层信息用于增强层的可伸缩视频编码方法及装置，其中增强层具有比基本层更高的分辨率及/或更佳的品质。本发明的实施例利用基本层信息的各种碎片来提升增强层的编码效率。在依据本发明的一个实施中，所述方法和装置利用基本层的编码单元架构信息、模式信息、或运动信息来推导出用于增强层的对应的编码单元架构信息、模式信息、或运动向量预测子信息。所述编码单元架构信息、模式信息、或运动信息的组合亦可用于推导用于增强层的对应信息。在依据本发明的另一个实施例中，所述方法和装置基于基本层的运动向量预测子候选项或合并候选项来推导增强层的运动向量预测子候选项或合并候选项。在依据本发明的又一个实施例中，所述方法和装置基于基本层的帧内预测模式来推导增强层的帧内预测模式。
本发明的一个实施例是利用基本层的残余四叉树架构信息来推导增强层的残余四叉树架构。本发明的另一个实施例是通过再采样基本层的纹理来推导增强层的纹理。本发明的又一个实施例是通过再采样基本层的残差来推导增强层的残差的预测子。
本发明的一方面在于解决了用于增强层的上下文自适应熵编码的编码效率问题。在本发明的一个实施例中，用于处理增强层的语法元素的上下文信息是利用基本层的信息来决定的。本发明的另一方便在于解决了与环路内处理相关的编码效率问题。本发明的一个实施例是利用基本层的自适应环路滤波信息、采样点自适应偏移信息、或区块滤波信息来分别推导用于增强层的自适应环路滤波信息、采样点自适应偏移信息、或区块滤波信息。
上述可伸缩视频编码方法及装置可提供空间伸缩和品质伸缩的能力，且可以获取更高的编码效率及/或更佳的灵活性。
附图说明
图1是利用分层B图像的时间可伸缩视频编码范例的示意图。
图2是具有三个空间层的、可提供空间伸缩和品质伸缩的组合式可伸缩视频编码系统范例的示意图。
图3是用于可伸缩视频编码的编码单元架构范例的示意图，其中用于基本层的编码单元架构被伸缩并用来作为增强层的初始编码单元架构。
图4是依据本发明实施例的用于可伸缩视频编码的编码单元架构编码或运动信息编码的范例性流程图。
图5是依据本发明实施例的用于可伸缩视频编码的运动向量预测子推导或合并候选项推导的范例性流程图。
图6是依据本发明实施例的用于可伸缩视频编码的帧内预测模式推导的范例性流程图。
图7是依据本发明实施例的用于可伸缩视频编码的残余四叉树架构编码的范例性流程图。
图8是依据本发明实施例的用于可伸缩视频编码的纹理预测与再采样的范例性流程图。
图9是依据本发明实施例的用于可伸缩视频编码的残差预测与再采样的范例性流程图。
图10是依据本发明实施例的用于可伸缩视频编码的上下文自适应熵编码的范例性流程图。
图11是依据本发明实施例的用于可伸缩视频编码的自适应环路滤波信息编码、采样自适应偏移信息编码以及去块滤波信息编码的范例性流程图。
具体实施方式
在HEVC中，编码单元(Coding Unit)架构作为用于编码处理一个新的块架构被引入其中。一张图像首先被分割成最大编码单元(Large Coding Unit，以下简称为LCU)，且每一LCU被适应性地分割成CU直至获得叶编码单元(leaf coding unit)或达到最小编码单元尺寸。所述CU架构信息需要被传送到解码器端以在解码器端恢复相同的CU架构。为了提升与用于伸缩HEVC的CU架构相关的编码效率，本发明的一个实施例中允许基本层(BaseLayer，以下简称为BL)的CU架构被增强层(Enhancement Layer，以下简称为EL)重新使用。在EL的LCU级或CU级，可传送一个旗标以指示CU架构是否由BL的对应CU重新使用。若BL的CU架构被重新使用，则BL的CU架构被缩放(scaled)以匹配EL的分辨率，且已缩放BL的CU架构被EL重新使用。在某些实施例中，可被EL重新使用的CU架构信息包含CU分割旗标和残余四叉树分割旗标。此外，已缩放CU架构的叶CU可被进一步分割成子CU(sub-CU)。图3显示了CU分割重用的范例。其中分割(partition)310对应于BL的CU架构。在水平方向和垂直方向，EL的视频分辨率都是BL视频分辨率的两倍。BL的对应CU分割315的CU架构被分层两级。已缩放CU架构320接着被使用以作为用于EL的LCU的初始CU架构。EL中已缩放CU的叶CU可进一步分割成子CU，其结果如图3中330所示。可用一个旗标来指示叶CU是否被进一步分割成子CU。然而，图3仅仅显示CU架构被重用的一个范例，其他信息也可以被重用。例如：预测类型、预测尺寸(prediction size)、合并索引(merge index)、帧间参考方向、参考图像索引、运动向量、运动向量预测子(Motion Vector Predictor，以下简称MVP)索引和帧内模式。当需要时，所述信息/数据可在被用于EL中之前被缩放(scaled)。
在依据本发明的另一实施例中，用于叶CU的模式信息被重用。所述模式信息包含跳跃旗标(skip flag)、预测类型、预测尺寸、帧间参考方向、参考图像索引、运动向量、运动向量索引、合并旗标(merge flag)、合并索引(merge index)、跳跃模式、合并模式(mergemode)以及帧内模式。所述EL中叶CU的模式信息可共享BL层中对应CU的相同或已缩放模式信息。可用一个旗标来指示EL是否会重用来自BL的模式信息。对于模式信息的一个或多个碎片(pieces)来说，也可用一个旗标来指示EL是否会重用来自BL的此模式信息。在依据本发明的又一个实施例中，BL中的对应预测单元(Prediction Unit，以下简称为PU)或CU的运动信息可被重用以推导EL中的PU或CU的运动信息。所述运动信息可包含帧间预测方向、参考图像索引、运动向量(Motion Vector，以下简称为MV)、MVP、MVP索引、合并索引、合并候选项(merge candidate)、以及帧内模式。所述用于BL的运动信息可被用来作为EL中MVP信息的预测子或候选项。举例来说，BL的MV和BL的MVP可被添加至用于EL的MVP推导的MVP列表及/或合并列表(merge list)。上述BL的MV可以是BL中对应PU的MV、BL中对应PU的相邻PU的MV、BL中对应PU的合并候选项的MV、BL中对应PU的MVP、或者BL中对应PU的同位(co-located)MV。
在另一实施例中，用于EL的合并候选项的推导可利用BL的运动信息来进行。举例来说，BL中对应PU的合并候选项可被添加至合并候选项列表及/或MVP列表。上述BL的运动信息可以是BL中对应PU的运动信息、与BL中对应PU的相邻PU相关的运动信息、BL中对应PU的合并候选项、BL中对应PU的MVP、或者BL中对应PU的同位PU。在此实施例中，所述运动信息包含帧间预测方向、参考图像索引和运动向量。
在又一实施例中，BL中对应PU或CU的帧内模式可被重用于EL。举例来说，BL中对应PU或CU的帧内模式可被添加至帧内最可能模式列表(intra most probable mode list)。在依据本发明的一个实施例中，可利用BL的运动信息来预测用于EL的帧内模式。EL中帧内最可能模式列表的顺序可依据BL中的帧内预测模式信息来适应性地改变。从而，用于EL中帧内最可能模式列表的码字的码字长度可依据BL中的帧内预测模式信息来适应性地改变。举例来说，具有与编码的BL帧内模式的预测方向越近预测方向的帧内保持模式(intraremaining mode)的码字可被赋予更短的码字长度。于另一实施例中，BL帧内模式的相邻方向模式(neighboring direction mode)也可被添加至EL帧内模式编码的帧内最可能模式列表。所述BL的帧内预测模式信息可以是BL中对应PU的帧内预测模式、或者BL帧内模式的相邻方向模式、或者BL中对应PU的相邻PU的帧内预测模式。
上述选择的BL运动信息的MVP索引、合并索引、及帧内模式索引可被用于适应性地修改EL的MVP列表、合并索引列表、和帧内最可能模式列表的索引顺序。举例来说，在HEVC测试模式版本3.0(HEVC Test Model Version 3.0)中，MVP列表的顺序为{左侧MVP，上方MVP，同位MVP}({left MVP,above MVP,co-located MVP})。若对应的BL的PU选择上方MVP，则上方MVP的顺序在EL中会被前移。相应地，EL中的MVP列表将会变成{上方MVP，左侧MVP，同位MVP}({left MVP,above MVP,co-located MVP})。此外，BL的已编码MV、缩放的已编码MV、MVP候选项、缩放的MVP候选项、合并候选项以及缩放的合并候选项可替代部分EL的MVP候选项及/或合并候选项。当用于EL中PU或CU的MVP候选项或合并候选项被编码或解码所需时，则会执行基于用于BL中对应PU或CU的运动信息来推导用于EL中PU或CU的运动信息的程序。
如前文所述，用于BL的CU架构信息可被用于决定用于EL的CU架构信息。更进一步，用于BL的CU架构信息、模式信息和运动信息可被联合地(jointly)用于决定用于EL的CU架构信息、模式信息和运动信息。所述用于BL模式信息或运动信息也可被用于决定用于EL的模式信息或运动信息。当所述用于EL的CU架构信息、模式信息、运动信息或三者的任意组合需要被编码或解码时，则会执行基于用于BL的对应信息来推导用于EL的CU架构信息、模式信息、运动信息或三者的任意组合的程序。在HM-3.0中，预测残差可利用四叉树分割来进一步处理，且可为残余四叉树分割结果(results of residual quadtree partition)的每一个块选择一种编码类型。残余四叉树分割信息及编码块类型(Coding Block Pattern，以下简称为CBP)信息皆需要整合至比特流，以使解码器可恢复所述残余四叉树信息。依据本发明的一个实施例，BL中对应CU的残余四叉树分割和CBP可被重用于EL。所述四叉树分割与CBP可被缩放(scaled)并用来作为EL残余四叉树分割及CBP编码的预测子。在HEVC中，用于块变换的单元被称为变换单元(Transform Unit，以下简称为TU)，且一个TU可被分割成更小的TU。在依据本发明的一个实施例中，可传送用于EL的根TU级或TU级的一个旗标，以指示BL中对应TU的残余四叉树编码(Residual Quadtree Coding，以下简称为RQT)架构是否被用于预测EL中当前TU的RQT架构。若BL中对应TU的RQT架构被用于预测EL中当前TU的RQT架构，则BL中对应TU的RQT架构被缩放(scaled)并作为EL中当前TU的初始RQT架构。在用于EL的初始RQT架构中的叶TU中，可传送一个分割旗标用来指示所述TU是否被分割成子TU。当编码器需要编码EL的RQT架构、或解码器需要解码EL的RQT架构时，则会执行基于BL的RQT架构信息来推导EL中RQT架构的程序。
在H.264/AVC伸缩扩展中，4抽头及2抽头FIR滤波在用于亮度和色度分量的纹理信号(texture signal)的上采样操作中被分别采用。在依据本发明的一个实施例中，BL的纹理可被再采样(re-sample)以作为EL纹理的预测子(predictor)，其中所述再采样是利用改进的上采样方法来替换H.264/AVC伸缩扩展中的4抽头及2抽头FIR滤波。依据本发明的滤波是采用下述滤波或其组合：离散余弦变换内插滤波(Discrete Cosine TransformInterpolation Filter，以下简称为DCTIF)、离散正弦变换内插滤波(Discrete SineTransform Interpolation Filter，以下简称为DSTIF)、维纳滤波(Wiener filter)、非局部平均滤波(non-local mean filter)、平滑滤波(smoothing filter)、以及双边滤波(bilateral filter)。依据本发明的滤波可跨TU边界执行，或可限制于TU边界执行。依据本发明的一个实施例，层间帧内预测可跳过填充(padding)及去块程序以缓解计算量及数据依赖的问题。而BL中的采样点自适应偏移(The Sample Adaptive Offset，以下简称为SAO)、自适应环路滤波(Adaptive Loop Filter，以下简称为ALF)、非局部平均滤波、及/或平滑滤波也可被跳过。上述填充、去块、SAO、ALF、非局部平均滤波、及平滑滤波的跳过可被应用至整个LCU、叶CU、PU、TU、预设区域、LCU边界、叶CU边界、PU边界、TU边界或预设区域的边界。在另一实施例中，BL的纹理可利用滤波来处理以减少滤波后的BL纹理，所述BL纹理具有与EL纹理相同的分辨率且可被用作EL纹理的预测子。维纳滤波、ALF、非局部平均滤波、平滑滤波及SAO可在BL的纹理被用作EL纹理的预测子之前应用于BL的纹理。
为了提升图像品质，在BL的纹理被再采样之前，本发明的一个实施例将维纳滤波或适应性滤波应用至BL的纹理。可选地，维纳滤波或适应性滤波也可在BL的纹理被再采样之后应用至BL的纹理。此外，在BL的纹理被再采样之前，本发明的一个实施例还将SAO或ALF应用至BL的纹理。
在依据本发明的另一个实施例中，基于LCU或基于CU的维纳滤波及/或自适应偏移被用于层间帧内预测。所述滤波可被应用至BL纹理数据或上采样的BL纹理数据。
在H.264SVC中，2抽头FIR滤波器在用于亮度和色度分量的残差信号(residualsignal)的上采样操作中被采用。在依据本发明的一个实施例中，可利用改进的上采样方法来替换H.264SVC中的2抽头FIR滤波。所述的滤波可以是下述的一个滤波或其组合：DCTIF、DSTIF、维纳滤波、非局部平均滤波、平滑滤波、以及双边滤波。当EL具有比BL更高的空间分辨率时，上述滤波可被应用至BL残差的再采样。上述所有的滤波都可被限制于跨越(cross)TU边界或不跨越TU边界。此外，若EL具有比BL更高的分辨率或EL具有与BL相同的分辨率，则在空域(spatial domain)或频域(frequency domain)皆可执行残差预测。当EL具有比BL更高的空间分辨率时，BL残差可在频域中被再采样以形成用于EL残差的预测子。当编码器或解码器需要基于再采样的BL残差来推导EL残差的预测子时，则会执行上述通过再采样BL残差来推导EL残差的预测子的程序。
依据本发明的一个实施例，BL的信息可被用于EL中的上下文自适应熵编码(context-based adaptive entropy coding)。举例来说，上下文信息或上下文自适应二进制算数编码(Context-based Adaptive Binary Arithmetic Coding，以下简称为CABAC)的二值化可利用BL的信息。基于BL中的对应信息，所述EL可使用不同的上下文模型、不同的上下文形成方法、或不同的上下文集合。举例来说，取决于BL中的对应PU是否以跳过模式(skip mode)被编码，EL的PU可使用不同的上下文模型。在本发明的另一实施例中，用于BL中CABAC的部分上下文模型的几率(probability)或最可能符号(most probable symbol，以下简称为MPS)可被重用于推导用于EL中CABAC的部分上下文模型的初始几率或MPS。所述语法元素(syntax element)可以是分割旗标、跳过旗标、合并旗标、合并索引、色度帧内模式、亮度帧内模式、分割尺寸预测模式、帧间预测方向、运动向量差、MVP索引、参考索引、量化参数差值(delta quantization parameter)、有值旗标(significant flag)、末位有值位置(last significant position)、系数大于1(coefficient-greater-than-one)、系数值减1(coefficient-magnitude-minus-one)、ALF控制旗标、ALF旗标、ALF轨迹尺寸(ALFfootprint size)、ALF合并旗标、ALF开/关决定(ALF ON/OFF decision)ALF系数、SAO旗标、SAO类型、SAO偏移、SAO合并旗标、SAO运行(SAO run)、SAO开/关决定(SAO on/offdecision)、变换细分旗标(transform subdivision flags)、残余四叉树编码块旗标(residual quadtree Coded Block Flag)、或残余四叉树根编码块旗标(residualquadtree root Coded Block Flag)。依据BL的信息，对应于上述语法元素的码字可被适应性地改变，而且依据BL的信息，对应于EL中语法元素的码字查找表中码字顺序也可被适应性地改变。当EL的语法元素需要被编码或解码时，则利用BL的信息决定用于处理EL的语法元素的上下文信息的程序可被执行。
在本发明的一个实施例中，可利用BL中的某些ALF信息来推导EL中的ALF信息。所述ALF信息可包含滤波适应模式(filter adaptation mode)、滤波系数、滤波轨迹(filterfootprint)、区域划分(region partition)、开/关决定(ON/OFF decision)、使能旗标及合并结果(merge results)。举例来说，EL可利用BL中的部分ALF参数来作为EL中的ALF参数或ALF参数的预测子。当ALF信息被直接从BL的ALF信息再用时，则不需要为EL传送相关的ALF参数。可利用一个旗标来指示用于EL的ALF信息是否是由BL的ALF信息预测得到。若所述旗标表明用于EL的ALF信息是由BL的ALF信息预测得到，则BL的ALF信息可被缩放(scaled)并用来作为EL的ALF信息的预测子。可利用一个值(value)来指示EL的ALF信息预测子与ALF信息之间的差别(differences)。当编码器或解码器需要推导EL的ALF信息时，则上述利用BL的ALF信息来推导用于EL的ALF信息的程序被执行。
在本发明的一个实施例中，可利用BL中的某些SAO信息来推导EL中的SAO信息。所述SAO信息可包含偏移类型、偏移、区域划分、开/关决定、使能旗标、以及合并结果。举例来说，EL可利用BL中的部分SAO参数来作为用于EL的SAO参数。当SAO信息被直接从BL的SAO信息再用时，则不需要为EL传送相关的SAO参数。可利用一个旗标来指示用于EL的SAO信息是否是由BL的SAO信息预测得到。若所述旗标表明用于EL的SAO信息是由BL的SAO信息预测得到，则BL的SAO信息可被缩放(scaled)并用来作为EL的SAO信息的预测子。可利用一个值(value)来指示EL的SAO信息预测子与SAO信息之间的差别(differences)。当编码器或解码器需要推导EL的SAO信息时，则上述利用BL的SAO信息来推导用于EL的SAO信息的程序被执行。
在本发明的一个实施例中，可利用BL中的某些去块滤波(Deblocking Filter，以下简称为DF)信息来推导EL中的DF信息。所述DF信息可包含阈值，例如用于决定边界强度(Boundary Strength，以下简称为BS)的阈值α、β、及tc。所述DF信息也可包含滤波参数、开/关滤波决定、强/弱滤波选择、或滤波强度。当DF信息被直接从BL的DF信息再用时，则不需要为EL传送相关的DF参数。可利用一个旗标来指示用于EL的DF信息是否是由BL的DF信息预测得到。若所述旗标表明用于EL的DF信息是由BL的DF信息预测得到，则BL的DF信息可被缩放(scaled)并用来作为EL的DF信息的预测子。可利用一个值(value)来指示EL的DF信息预测子与DF信息之间的差别(differences)。当编码器或解码器需要推导EL的DF信息时，则上述利用BL的DF信息来推导用于EL的DF信息的程序被执行。
图4-11显示了依据本发明不同实施例的可伸缩视频编码的范例性流程图。图4是依据本发明实施例的用于可伸缩视频编码的CU架构编码或运动信息编码的范例性流程图，其中视频数据被配置为基本层(BL)和增强层(EL)，且EL具有比BL更高的空间分辨率或更佳的视频品质。用于BL中CU的CU架构、运动信息、或二者的组合在步骤410中被决定。而用于EL中对应CU的CU架构、MVP信息、或二者的组合则基于用于BL中CU的CU架构、运动信息、或二者的组合而在步骤420中被决定。图5是依据本发明实施例的用于可伸缩视频编码的MVP推导或合并候选项推导的范例性流程图，其中视频数据被配置为基本层(BL)和增强层(EL)，且EL具有比BL更高的空间分辨率或更佳的视频品质。用于BL的运动信息在步骤510中被决定。而EL中的MVP候选项或合并候选项则基于BL的运动信息而在步骤520中被推导出来。图6是依据本发明实施例的用于可伸缩视频编码的帧内预测模式推导的范例性流程图，其中视频数据被配置为基本层(BL)和增强层(EL)，且EL具有比BL更高的空间分辨率或更佳的视频品质。BL的帧内预测模式的信息在步骤610中被决定。而EL的帧内预测模式则基于BL的帧内预测模式的信息而在步骤620中被推导出来。
图7是依据本发明实施例的用于可伸缩视频编码的残余四叉树架构编码的范例性流程图，其中视频数据被配置为基本层(BL)和增强层(EL)，且EL具有比BL更高的空间分辨率或更佳的视频品质。所述BL残余四叉树编码(RQT)架构的信息在步骤710中被决定。而EL的RQT架构则基于BL的RQT架构的信息在步骤720中推导出来。图8是依据本发明实施例的用于可伸缩视频编码的纹理预测与再采样的范例性流程图，其中视频数据被配置为基本层(BL)和增强层(EL)，且EL具有比BL更高的空间分辨率或更佳的视频品质。BL的纹理的信息在步骤810中被决定。而EL的纹理的预测子则基于BL的纹理的信息在步骤820中被推导出来。图9是依据本发明实施例的用于可伸缩视频编码的残差预测与再采样的范例性流程图，其中视频数据被配置为基本层(BL)和增强层(EL)，且EL具有比BL更高的空间分辨率或更佳的视频品质。BL的残差信息在步骤910中被决定。而EL的残差的预测子则通过再采样BL的残差在步骤920中推导出来。
图10是依据本发明实施例的用于可伸缩视频编码的上下文自适应熵编码的范例性流程图，其中视频数据被配置为基本层(BL)和增强层(EL)，且EL具有比BL更高的空间分辨率或更佳的视频品质。BL的信息在步骤1010中被决定。而用于处理EL的语法元素的上下文信息则利用BL的信息在步骤1020中被决定。图11是依据本发明实施例的用于可伸缩视频编码的ALF信息编码、SAO信息编码以及DF信息编码的范例性流程图，其中视频数据被配置为基本层(BL)和增强层(EL)，且EL具有比BL更高的空间分辨率或更佳的视频品质。BL的ALF信息、SAO信息、或DF信息在步骤1110中被决定。而用于EL的ALF信息、SAO信息、或DF信息则利用BL的ALF信息、SAO信息、或DF信息在步骤1120中分别推导出来。
上述的根据本发明的可伸缩视频编码的实施例(其中增强层的编码是利用基本层的信息)可以不同硬件、软件代码、或两者的结合来实施。举例来说，依据本发明的一实施例，其可以是用来实施所述方法的、整合至视频压缩芯片中的电路、或整合至视频压缩软件中的程序代码。依据本发明的另一实施例，其也可以是数字信号处理器(Digital SignalProcessor，DSP)上执行的、用来实施所述方法的程序代码。本发明亦可包含由计算机处理器、DSP、微处理器、或现场可编程门阵列(Field Programmable Gate Array，FPGA)执行的一系列功能。依据本发明，通过执行定义了本发明实施例特定方法的机器可读软件代码或固件代码，这些处理器可被设置为执行特定的任务。所述软件代码或固件代码可通过不同的编程语言及不同格式/样式来开发。所述软件代码亦可符合不同的目标平台。然而，执行与本发明相应的任务的、具有不同代码格式、样式及语言的软件代码，以及其他方式形成的代码都应包含在本发明的范围内。
在不脱离本发明的精神及基本特征的前提下，本发明亦可用其他特定形式来实施。以上所述的实施例仅仅是为了例示本发明，并非本发明的限制。本发明的范围当所附的权利要求为准，凡依本发明权利要求所做的均等变化与修饰，皆应属本发明的涵盖范围。

Claims (6)

1.一种推导方法，用于可伸缩视频编码的运动向量预测子候选项或合并候选项推导，其中视频数据被配置为一个基本层和一个增强层，且该增强层具有比该基本层更高的空间分辨率或更佳的视频品质，该推导方法包含：
构造用于该增强层的候选列表；
决定该基本层中的运动信息；以及
基于该基本层中的该运动信息推导该增强层中的运动向量预测子候选项或合并候选项；
将该运动向量预测子候选项或合并候选项包括于该候选列表中，该候选列表包含至少一个该基本层的运动向量；以及
该基本层中的该运动向量包含该基本层中对应预测单元的相邻预测单元的运动向量、该基本层中该对应预测单元的合并候选项的运动向量、该基本层中该对应预测单元的运动向量预测子、或该基本层中该对应预测单元的同位运动向量。
2.如权利要求1所述的推导方法，其特征在于，当编码或解码该视频数据需要推导该增强层中的该运动向量预测子候选项或该合并候选项时，执行该基于该基本层中的该运动信息推导该增强层中的运动向量预测子候选项或合并候选项的步骤。
3.如权利要求1所述的推导方法，其特征在于，依据该增强层与该基本层的视频分辨率之比，该基本层中的该运动向量被放大以用于该候选列表。
4.如权利要求1所述的推导方法，其特征在于，该基本层中的至少一个运动向量用来替换该增强层中的候选列表中的至少一个运动向量预测子候选项，或者该基本层中的该至少一个运动向量被添加至该增强层中的该候选列表。
5.一种推导装置，用于可伸缩视频编码的运动向量预测子候选项或合并候选项推导，其中视频数据被配置为一个基本层和一个增强层，且该增强层具有比该基本层更高的空间分辨率或更佳的视频品质，该推导装置包含：
构造用于该增强层的候选列表；
用以决定该基本层中的运动信息的模块；以及
用以基于该基本层中的该运动信息推导该增强层中的运动向量预测子候选项或合并候选项的模块；将该运动向量预测子候选项或合并候选项包括于该候选列表中，该候选列表包含至少一个该基本层的运动向量；以及
该基本层中的该运动向量包含该基本层中对应预测单元的相邻预测单元的运动向量、该基本层中该对应预测单元的合并候选项的运动向量、该基本层中该对应预测单元的运动向量预测子、或该基本层中该对应预测单元的同位运动向量。
6.如权利要求5所述的推导装置，其特征在于，该基本层中的至少一个运动向量用来替换该增强层中的该候选列表中的至少一个运动向量预测子候选项，或者该基本层中的该至少一个运动向量被添加至该增强层中的该候选列表。
CN201611120450.XA 2011-06-10 2012-05-31 推导方法及推导装置 Active CN106851319B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201161495740P 2011-06-10 2011-06-10
US61/495,740 2011-06-10
US201161567774P 2011-12-07 2011-12-07
US61/567,774 2011-12-07
CN201280024337.5A CN103621081B (zh) 2011-06-10 2012-05-31 可伸缩视频编码方法及装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201280024337.5A Division CN103621081B (zh) 2011-06-10 2012-05-31 可伸缩视频编码方法及装置

Publications (2)

Publication Number Publication Date
CN106851319A CN106851319A (zh) 2017-06-13
CN106851319B true CN106851319B (zh) 2020-06-19

Family

ID=47295475

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201611120450.XA Active CN106851319B (zh) 2011-06-10 2012-05-31 推导方法及推导装置
CN201280024337.5A Active CN103621081B (zh) 2011-06-10 2012-05-31 可伸缩视频编码方法及装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201280024337.5A Active CN103621081B (zh) 2011-06-10 2012-05-31 可伸缩视频编码方法及装置

Country Status (5)

Country Link
US (1) US9860528B2 (zh)
EP (1) EP2719181A4 (zh)
CN (2) CN106851319B (zh)
BR (1) BR112013031215B8 (zh)
WO (1) WO2012167711A1 (zh)

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2602672C2 (ru) 2011-06-23 2016-11-20 Сан Пэтент Траст Способ декодирования изображения, способ кодирования изображения, устройство декодирования изображения, устройство кодирования изображения и устройство кодирования и декодирования изображения
USRE47366E1 (en) 2011-06-23 2019-04-23 Sun Patent Trust Image decoding method and apparatus based on a signal type of the control parameter of the current block
EP3407610B1 (en) * 2011-06-24 2019-09-04 Sun Patent Trust Coding method and coding apparatus
TWI581615B (zh) 2011-06-24 2017-05-01 Sun Patent Trust A decoding method, a coding method, a decoding device, an encoding device, and a coding / decoding device
MY169636A (en) 2011-06-27 2019-04-24 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
BR122022013246B1 (pt) 2011-06-28 2022-11-16 Sun Patent Trust Aparelho de decodificação para decodificar um parâmetro de controle para controlar decodificação de uma imagem, e aparelho de codificação para codificar um parâmetro de controle para controlar codificação de uma imagem
CN104980756A (zh) 2011-06-28 2015-10-14 三星电子株式会社 根据像素分类使用偏移调整的视频解码方法及其设备
WO2013001767A1 (ja) 2011-06-29 2013-01-03 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置及び画像符号化復号装置
MX339141B (es) 2011-06-30 2016-05-13 Panasonic Ip Corp America Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, aparato de decodificacion de imagenes, aparato de codificacion de imagenes y aparato de codificacion y decodificacion de imagenes.
JP5956571B2 (ja) * 2011-06-30 2016-07-27 ヴィディオ・インコーポレーテッド スケーラブルビデオ符号化における動き予測
WO2013001769A1 (ja) 2011-06-30 2013-01-03 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置及び画像符号化復号装置
CN106851295B (zh) 2011-07-11 2019-10-18 太阳专利托管公司 编码方法及编码装置
JP5810700B2 (ja) * 2011-07-19 2015-11-11 ソニー株式会社 画像処理装置及び画像処理方法
JP5950541B2 (ja) * 2011-11-07 2016-07-13 キヤノン株式会社 動きベクトル符号化装置、動きベクトル符号化方法及びプログラム、動きベクトル復号装置、動きベクトル復号方法及びプログラム
JP2013126157A (ja) * 2011-12-15 2013-06-24 Sony Corp 画像処理装置及び画像処理方法
KR20130085088A (ko) * 2012-01-19 2013-07-29 한국전자통신연구원 스케일러블 비디오 코딩에서의 고속 모드 결정 방법 및 그 장치
GB2499865B (en) * 2012-03-02 2016-07-06 Canon Kk Method and devices for encoding a sequence of images into a scalable video bit-stream, and decoding a corresponding scalable video bit-stream
JP6272819B2 (ja) * 2012-03-20 2018-01-31 サムスン エレクトロニクス カンパニー リミテッド スケーラブルビデオ符号化方法、復号化方法、符号化装置及び記録媒体
CN104205838B (zh) * 2012-03-22 2018-05-18 联发科技股份有限公司 可伸缩视频编码的方法以及装置
US9420285B2 (en) * 2012-04-12 2016-08-16 Qualcomm Incorporated Inter-layer mode derivation for prediction in scalable video coding
US9179145B2 (en) * 2012-07-02 2015-11-03 Vidyo, Inc. Cross layer spatial intra prediction
US9479778B2 (en) 2012-08-13 2016-10-25 Qualcomm Incorporated Device and method for coding video information using base layer motion vector candidate
US10194158B2 (en) 2012-09-04 2019-01-29 Qualcomm Incorporated Transform basis adjustment in scalable video coding
WO2014047776A1 (en) * 2012-09-25 2014-04-03 Intel Corporation Inter-layer sample adaptive filter parameters re-use for scalable video coding
US9491459B2 (en) * 2012-09-27 2016-11-08 Qualcomm Incorporated Base layer merge and AMVP modes for video coding
GB2506592B (en) * 2012-09-28 2017-06-14 Canon Kk Method, device, and computer program for motion vector prediction in scalable video encoder and decoder
US20150208097A1 (en) * 2012-09-28 2015-07-23 Sony Corporation Coding apparatus, coding method, decoding apparatus, and decoding method
TWI618397B (zh) * 2012-12-21 2018-03-11 杜比實驗室特許公司 在高位元深度視訊的可適性編碼中，高精度升取樣
US9912942B2 (en) * 2012-12-28 2018-03-06 Qualcomm Incorporated High-frequency-pass sample adaptive offset in video coding
CN116708768A (zh) * 2013-01-04 2023-09-05 Ge视频压缩有限责任公司 高效可伸缩编码概念
US9900609B2 (en) 2013-01-04 2018-02-20 Nokia Technologies Oy Apparatus, a method and a computer program for video coding and decoding
US9596465B2 (en) * 2013-01-04 2017-03-14 Intel Corporation Refining filter for inter layer prediction of scalable video coding
US9826244B2 (en) 2013-01-08 2017-11-21 Qualcomm Incorporated Device and method for scalable coding of video information based on high efficiency video coding
US20140198846A1 (en) * 2013-01-16 2014-07-17 Qualcomm Incorporated Device and method for scalable coding of video information
JP6362333B2 (ja) * 2013-02-14 2018-07-25 キヤノン株式会社 画像処理装置、画像処理方法、およびプログラム
JP6625165B2 (ja) 2013-02-14 2019-12-25 キヤノン株式会社 画像処理装置、画像処理方法、およびプログラム
KR101773413B1 (ko) 2013-04-08 2017-08-31 지이 비디오 컴프레션, 엘엘씨 효율적인 다-시점/계층 코딩을 허용하는 코딩 개념
US9686561B2 (en) * 2013-06-17 2017-06-20 Qualcomm Incorporated Inter-component filtering
US20160173904A1 (en) * 2013-07-24 2016-06-16 Samsung Electronics Co., Ltd. Method for determining motion vector and apparatus therefor
US9237359B2 (en) 2013-09-25 2016-01-12 Qualcomm Incorporated Filtering video data in video coding
US9813736B2 (en) * 2013-09-27 2017-11-07 Qualcomm Incorporated Inter-view dependency type in MV-HEVC
JP6569677B2 (ja) * 2014-08-28 2019-09-04 日本電気株式会社 ブロックサイズ決定方法及びプログラム
US10057574B2 (en) * 2015-02-11 2018-08-21 Qualcomm Incorporated Coding tree unit (CTU) level adaptive loop filter (ALF)
US10681371B2 (en) * 2015-06-07 2020-06-09 Lg Electronics Inc. Method and device for performing deblocking filtering
CN105872538B (zh) * 2016-04-18 2020-12-29 广东中星微电子有限公司 时域滤波方法和时域滤波装置
CN110115032B (zh) * 2016-12-22 2021-07-20 联发科技股份有限公司 用于视频编解码的运动细化的方法以及装置
US20190045198A1 (en) * 2017-12-28 2019-02-07 Intel Corporation Region adaptive data-efficient generation of partitioning and mode decisions for video encoding
US11039173B2 (en) * 2019-04-22 2021-06-15 Arlo Technologies, Inc. Method of communicating video from a first electronic device to a second electronic device via a network, and a system having a camera and a mobile electronic device for performing the method
WO2020262409A1 (ja) * 2019-06-25 2020-12-30 日本放送協会 符号化装置、復号装置、及びプログラム
US20210183018A1 (en) * 2019-12-17 2021-06-17 Stmicroelectronics (Grenoble 2) Sas Filtering Device, Associated System and Method

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6980596B2 (en) 2001-11-27 2005-12-27 General Instrument Corporation Macroblock level adaptive frame/field coding for digital video content
KR20050075578A (ko) * 2004-01-16 2005-07-21 삼성전자주식회사 폐루프 최적화를 지원하는 스케일러블 비디오 엔코딩 방법및 장치
US7978770B2 (en) 2004-07-20 2011-07-12 Qualcomm, Incorporated Method and apparatus for motion vector prediction in temporal video compression
DE102004059993B4 (de) * 2004-10-15 2006-08-31 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen einer codierten Videosequenz unter Verwendung einer Zwischen-Schicht-Bewegungsdaten-Prädiktion sowie Computerprogramm und computerlesbares Medium
KR100888962B1 (ko) 2004-12-06 2009-03-17 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
US7995656B2 (en) * 2005-03-10 2011-08-09 Qualcomm Incorporated Scalable video coding with two layer encoding and single layer decoding
KR100896279B1 (ko) 2005-04-15 2009-05-07 엘지전자 주식회사 영상 신호의 스케일러블 인코딩 및 디코딩 방법
KR100772873B1 (ko) 2006-01-12 2007-11-02 삼성전자주식회사 스무딩 예측을 이용한 다계층 기반의 비디오 인코딩 방법,디코딩 방법, 비디오 인코더 및 비디오 디코더
EP2118852B1 (en) 2007-03-07 2011-11-30 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Concept for synthesizing texture in a video sequence
US8503527B2 (en) 2008-10-03 2013-08-06 Qualcomm Incorporated Video coding with large macroblocks
CN101888553B (zh) 2010-06-30 2012-01-11 香港应用科技研究院有限公司 用于可伸缩视频编码的方法和装置
EP2625854A1 (en) * 2010-10-08 2013-08-14 Dolby Laboratories Licensing Corporation Scalable frame compatible multiview encoding and decoding methods
US9247249B2 (en) * 2011-04-20 2016-01-26 Qualcomm Incorporated Motion vector prediction in video coding

Also Published As

Publication number Publication date
BR112013031215A2 (pt) 2017-06-20
US9860528B2 (en) 2018-01-02
US20140003495A1 (en) 2014-01-02
EP2719181A1 (en) 2014-04-16
EP2719181A4 (en) 2015-04-15
BR112013031215B1 (pt) 2022-06-28
CN103621081A (zh) 2014-03-05
WO2012167711A1 (en) 2012-12-13
CN103621081B (zh) 2016-12-21
BR112013031215B8 (pt) 2022-07-19
RU2013154579A (ru) 2015-07-20
CN106851319A (zh) 2017-06-13

Similar Documents

Publication Publication Date Title
CN106851319B (zh) 推导方法及推导装置
AU2015230740B2 (en) Method and apparatus of scalable video coding
EP2829066B1 (en) Method and apparatus of scalable video coding
US10091515B2 (en) Method and apparatus for intra mode derivation and coding in scalable video coding
EP3011742B1 (en) Inter-component filtering
EP2965517B1 (en) Parallel processing for video coding
US9924181B2 (en) Method and apparatus of bi-directional prediction for scalable video coding
US9357211B2 (en) Device and method for scalable and multiview/3D coding of video information
US9584808B2 (en) Device and method for scalable coding of video information
KR101979284B1 (ko) 인터 예측 모드 스케일러블 코딩 방법 및 장치
US20150016500A1 (en) Device and method for scalable coding of video information
US20160088305A1 (en) Method and apparatus for processing video signal
KR102602633B1 (ko) 영상 부호화/복호화 방법 및 장치
RU2575411C2 (ru) Способ и устройство масштабируемого кодирования видео

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant