CN103947213A - 瓦片边界上的环路滤波控制 - Google Patents

瓦片边界上的环路滤波控制 Download PDF

Info

Publication number
CN103947213A
CN103947213A CN201280053020.4A CN201280053020A CN103947213A CN 103947213 A CN103947213 A CN 103947213A CN 201280053020 A CN201280053020 A CN 201280053020A CN 103947213 A CN103947213 A CN 103947213A
Authority
CN
China
Prior art keywords
value
syntactic element
loop filtering
decoding
tile
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280053020.4A
Other languages
English (en)
Other versions
CN103947213B (zh
Inventor
王益魁
钟仁肃
穆罕默德·蔡德·科班
马尔塔·卡切维奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN103947213A publication Critical patent/CN103947213A/zh
Application granted granted Critical
Publication of CN103947213B publication Critical patent/CN103947213B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/162User input
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

视频译码器可经配置以对指示是否允许跨瓦片边界的环路滤波操作(例如,解块滤波、自适应环路滤波或样本自适应偏移滤波)的语法元素进行译码。所述语法元素的第一值可指示允许跨所述瓦片边界的环路滤波,且所述语法元素的第二值可指示不允许跨所述瓦片边界的环路滤波。如果允许跨瓦片边界的环路滤波,那么额外的语法元素可具体指示对哪些边界允许或不允许环路滤波。

Description

瓦片边界上的环路滤波控制
本申请案主张2011年10月28申请的第61/553,074号美国临时申请案的权益,所述申请案的全部内容在此以引用的方式并入本文中。
技术领域
本发明涉及用于压缩视频数据的基于块的数字视频译码,且更特定来说,涉及用于控制跨瓦片边界的环路滤波操作的技术。
背景技术
数字视频能力可并入到大范围的装置中,包含数字电视、数字直播系统、例如无线电电话手持机等无线通信装置、无线广播系统、个人数字助理(PDA)、膝上型计算机、桌上型计算机、平板计算机、数码相机、数字记录装置、视频游戏装置、视频游戏控制台等。数字视频装置实施视频压缩技术,例如MPEG-2、MPEG-4或ITU-T H.264/MPEG-4第10部分(高级视频译码(AVC)),以更高效地发射及接收数字视频。视频压缩技术执行空间和时间预测以减少或移除视频序列中固有的冗余。正被作为MPEG与ITU-T之间的协作的“视频译码联合合作小组(JCTVC)”开发的例如高效率视频译码(HEVC)标准等新视频标准不断涌现和演进。这种新的HEVC标准还有时被称作H.265。
基于块的视频压缩技术可执行空间预测和/或时间预测。帧内译码依赖于空间预测来减少或移除经译码视频的给定单元内的视频块之间的空间冗余,所述给定单元可包括视频帧、视频帧的切片等。相比而言,帧间译码依赖于时间预测来减少或移除视频序列的连续译码单元的视频块之间的时间冗余。对于帧内译码,视频编码器基于经译码视频的相同单元内的其它数据来执行空间预测以压缩数据。对于帧间译码,视频编码器执行运动估计和运动补偿以跟踪经译码视频的两个或更多邻近单元的对应视频块的移动。
经译码视频块可由可用于创建或识别预测块的预测信息及指示正被译码的块与预测块之间的差异的残余数据块表示。在帧间译码的情况下,使用一或多个运动向量来从先前或后续的译码单元识别预测数据块,而在帧内译码的情况下,可使用所述预测模式来基于与正被译码的视频块相关联的CU内的数据来产生预测块。帧内译码及帧间译码两者可定义若干不同预测模式,所述预测模式可定义不同块大小及/或译码中所使用的预测技术。还可包含额外类型的语法元素作为经编码视频数据的一部分,以便控制或定义译码过程中所使用的译码技术或参数。
在基于块的预测译码之后,视频编码器可应用变换、量化和熵译码过程以进一步减小与残余块的通信相关联的位率。变换技术可包括离散余弦变换(DCT)或概念上类似的过程,例如小波变换(wavelet transform)、整数变换或其它类型的变换。在离散余弦变换过程中,作为实例,变换过程将一组像素差值转换成变换系数,其可表示像素值在频域中的能量。将量化应用于变换系数,且量化通常涉及限制与任何给定变换系数相关联的位的数目的过程。熵译码包括共同地压缩经量化变换系数的序列的一或多个过程。
可应用对视频块的滤波以作为编码和解码过程的部分,或作为对经重构的视频块的后滤波过程的部分。滤波通常用以(例如)减少成块性或基于块的视频译码所共有的其它假影。滤波器系数(有时称为滤波器分接头)可经界定或选择以便促进可减少成块性的滤波的所要水平及/或以其它方式改进视频质量。举例来说,一组滤波系数可界定如何沿视频块的边缘或视频块内的其它位置应用滤波。不同滤波系数可引起关于视频块的不同像素的不同等级的滤波。举例来说,滤波可平滑化或锐化邻近像素值的强度差异,以便帮助消除不想要的假影。
发明内容
一股来说,本发明描述用于对视频数据进行译码的技术,且更特定来说,本发明描述与视频译码的环路滤波操作相关的技术,包含控制视频数据图片内的瓦片边界处的环路滤波操作。
在一个实例中,一种对视频数据进行译码的方法包含:针对被分割为瓦片的视频数据图片对第一语法元素的第一值进行译码,其中所述第一语法元素的所述第一值指示是否允许跨所述图片内的至少一个瓦片边界的环路滤波操作;以及响应于所述第一值指示允许跨所述瓦片边界的所述环路滤波操作而执行跨所述至少一个瓦片边界的所述一或多个环路滤波操作。
在另一实例中,一种用于对视频数据进行译码的装置包含视频译码器,所述视频译码器经配置以:针对被分割为瓦片的视频数据图片对第一语法元素的第一值进行译码,其中所述第一语法元素的所述第一值指示是否允许跨所述图片内的至少一个瓦片边界的环路滤波操作;以及响应于所述第一值指示允许跨所述瓦片边界的所述环路滤波操作而执行跨所述至少一个瓦片边界的所述一或多个环路滤波操作。
在另一实例中,一种用于对视频数据进行译码的装置包含:用于针对被分割为瓦片的视频数据图片对第一语法元素的第一值进行译码的装置,其中所述第一语法元素的所述第一值指示是否允许跨所述图片内的至少一个瓦片边界的环路滤波操作;以及用于响应于所述第一值指示允许跨所述瓦片边界的所述环路滤波操作而执行跨所述至少一个瓦片边界的所述一或多个环路滤波操作的装置。
在另一实例中,一种非暂时性计算机可读存储媒体存储指令,所述指令在由一或多个处理器执行时致使所述一或多个处理器::针对被分割为瓦片的视频数据图片对第一语法元素的第一值进行译码,其中所述第一语法元素的所述第一值指示是否允许跨所述图片内的至少一个瓦片边界的环路滤波操作;以及响应于所述第一值指示允许跨所述瓦片边界的所述环路滤波操作而执行跨所述至少一个瓦片边界的所述一或多个环路滤波操作。
一或多个实例的细节陈述于附图及以下描述中。其它特征、目标及优势将从描述及附图和从权利要求书中显而易见。
附图说明
图1为说明实例性视频编码及解码系统的框图。
图2是展示用于自适应环路滤波器的基于区的分类的概念图。
图3是展示用于自适应环路滤波器的基于块的分类的概念图。
图4是展示帧的瓦片的概念图。
图5是展示帧的切片的概念图。
图6是描绘切片和瓦片边界处的自适应环路滤波器的概念图。
图7是描绘水平边界处的不对称部分滤波器的概念图。
图8是描绘垂直边界处的不对称部分滤波器的概念图。
图9是描绘水平边界处的对称部分滤波器的概念图。
图10是描绘垂直边界处的对称部分滤波器的概念图。
图11为说明实例性视频编码器的框图。
图12为说明实例性视频解码器的框图。
图13是描绘根据本发明中所描述的技术的控制跨瓦片边界的环路内滤波的实例性方法的流程图。
图14是描绘根据本发明中所描述的技术的控制跨瓦片边界的环路内滤波的实例性方法的流程图。
图15是描绘根据本发明中所描述的技术的控制跨瓦片边界的环路内滤波的实例性方法的流程图。
具体实施方式
一股来说,本发明描述用于对视频数据进行译码的技术,且更特定来说,本发明描述与视频译码的环路滤波操作相关的技术,包含控制视频数据图片内的瓦片边界处的环路滤波操作。控制瓦片边界处的环路滤波操作可(例如)在将提高译码质量时允许启用跨瓦片边界的环路滤波,而且允许在需要时停用跨瓦片边界的环路滤波,例如在可能需要启用对切片的并行解码时的例子中。可使用本发明中所描述的技术来控制的环路滤波操作的实例包含解块滤波操作、自适应环路滤波(ALF)操作,以及样本自适应偏移(SAO)滤波操作。下文将更详细地描述环路滤波的这些和其它方面。
常规上,视频译码器已将视频数据图片分割为以光栅扫描次序(例如,从左到右以及从上到下)跨图片铺设的切片。一些视频译码器现在使用水平和垂直边界将视频数据图片分割为瓦片。当分割为瓦片时,切片可以光栅扫描次序铺设在瓦片的边缘之间。举例来说,可存在两个水平瓦片边界和一个垂直瓦片边界(不包含图片自身的外边缘),从而将切片划分为六个瓦片。切片可完全存在于瓦片内,且每一瓦片可包含多个切片。
在许多例子中,可基于相邻的先前经译码的块来预测块的各种数据。举例来说,在帧内预测译码模式中,使用相邻的先前经译码块来预测当前块的像素值。同样,运动信息预测、译码模式预测以及熵译码上下文可利用来自相邻的先前经译码块的信息。在一些情况下,这些相邻的先前经译码块可跨瓦片边界(例如,水平或垂直瓦片边界)而定位。包含利用来自跨瓦片边界的另一块的数据的块的瓦片可被称作“相依的”,因为对所述瓦片的所述块进行译码取决于与不同瓦片中的不同块相关的信息。
在一些情况下,约束跨瓦片边界的预测进而使得瓦片独立(与相依相对)可为有利的。因此,在新兴的高效率视频译码(HEVC)标准中,用信号发送表示是否允许跨瓦片边界的预测的值。具体来说,可将此值称作语法元素“tile_boundary_independence_idc”。然而,在HEVC标准的一些版本中,此值仅涉及一定信息的使用,例如帧内预测信息、运动信息、译码模式信息等,且不涉及与环路滤波相关的信息。在HEVC的一些实施方案中,将环路滤波应用于瓦片边界处的块边缘,而不管“tile_boundary_independence_idc”的值如何。此可导致在执行环路滤波操作时原本独立译码的瓦片取决于另一瓦片或向另一瓦片提供信息。在一些例子中,此可导致某些缺点,例如阻止对瓦片的并行处理。
在针对HEVC中的包含物所提出的一些瓦片方案中,可通过旗标“tile_boundary_independence_idc”来控制跨所有瓦片边界的图片内预测,而不控制跨瓦片边界的环路滤波,所述图片内预测包含像素值预测、运动预测、译码模式预测以及熵译码上下文预测。然而,在一些情形中,可能需要完全独立地对由不同瓦片覆盖的一或多个区进行译码,这意味着也不跨瓦片边界执行环路滤波。下文描述两种此类情形。
在第一情形中,一系列图片被均匀分割为8个瓦片乘以9个垂直瓦片边界,其中最左边的瓦片是瓦片0,且第二最左边的瓦片是瓦片1,以此类推。这些图片中的每一者含有至少一个经预测(P)切片,意味着在整个经译码位流中在解码次序上存在在图片序列之前的图片。为了此实例的目的,假设所述解码次序与输出次序相同。在图片序列中的图片0(即,第一图片)中,瓦片0中的所有LCU被帧内译码,且其它瓦片中的所有LCU被帧间译码。在图片序列中的图片1中,瓦片1中的所有LCU被帧内译码,且其它瓦片中的所有LCU被帧间译码,以此类推。换句话说,在图片序列中的图片N中,瓦片N/8(这里的“/”表示模块除法)中的所有LCU被帧内译码,且其它瓦片中的所有LCU被帧间译码(对于0到图片序列中的图片的数目的范围内的N的任何值减去一(包含))。因此,具有N/8等于0的索引值N的每一图片可用作随机存取点(在解码从除了无法被完全正确解码的初始七个图片之外的图片开始的情况下,其后的所有图片可被正确解码的意义上)。
在以上情形中,在图片2(以及具有N/8等于2的索引值N的任何图片)中,不允许跨瓦片2与瓦片3之间的瓦片边界(即,在边界的左边的区域(还被称作刷新区域)与在边界的右边的区域(还被称作未刷新区域)之间的边界)的图片内预测以及环路滤波是理想的。一股来说,在图片N中,不允许跨瓦片N/8与瓦片N/8+1之间的瓦片边界的图片内预测以及环路滤波且允许跨其它瓦片边界的图片内预测以及环路滤波是理想的。这样,可提供无错且有效的渐进解码刷新或渐进随机存取功能性。
在第二情形中,图片序列中的每一图片被分割为一个以上瓦片,且瓦片的子集覆盖所有图片中的相同矩形区,且可与来自相同图片和其它图片的其它区独立地对所有所述图片的区进行解码。此类区还被称作可独立解码的子图片,其可为一些客户端归因于例如解码能力和网络带宽等约束以及用户偏好而需要的唯一区。在此情形中,不允许跨也是可独立解码的子图片的边界的瓦片边界的图片内预测以及环路滤波是理想的。这样,可提供无错且有效的关注区(ROI)译码。
本发明提供除了是否将瓦片边界视为对于预测操作来说是独立的之外还用信号通知是否允许跨瓦片边界的环路滤波操作的技术。因此,本发明引入用于控制跨瓦片边界的环路滤波的新的语法元素,在本发明中被称作“tile_boundary_loop_filtering_idc”。环路滤波操作一股包含解块滤波、ALF以及SAO中的任一者。一股来说,在块边缘处选择性地应用解块滤波来减少成块性假影,基于像素分类来应用ALF,且SAO用于修改直流(DC)值。
根据本发明的技术,例如针对一或多个特定边界或针对帧内或序列内的所有瓦片,可用信号通知指示是否允许跨瓦片边界的环路滤波操作的值。可在序列参数集(SPS)或图片参数集(PPS)中用信号通知此类值。SPS应用于图片序列,而PPS应用于个别图片。在其中不允许跨瓦片边界的环路滤波的例子中,可使用不利用跨瓦片边界的值的其它类型的环路滤波。
在一些实例中,可通过使用额外的用信号通知的值来实现对跨瓦片边界的环路滤波操作的更精细粒度控制。举例来说,当第一值指示允许跨瓦片边界的环路滤波操作时,额外值可特定用信号通知针对水平瓦片边界和/或垂直瓦片边界是否允许(或不允许)跨瓦片边界的环路滤波操作。作为另一实例,当第一值指示允许跨瓦片边界的环路滤波操作时,额外值可特定用信号通知哪些瓦片边界允许(或不允许)环路滤波操作。举例来说,可使用多对瓦片索引来识别特定瓦片边界。另外或在替代方案中,在一些实例中,可在切片标头中用信号通知指示被切片接触的瓦片边界是否允许(或不允许)跨瓦片边界的环路滤波的值。
如将在以下实例性阐释中的一些阐释中将清楚的,跨瓦片边界的环路滤波以及执行跨瓦片边界的环路滤波一股涉及利用与在不同瓦片中的至少两个不同像素或两个不同块相关联的信息的环路滤波操作。当停用(例如,不允许)跨瓦片边界的环路滤波时,可执行利用来自仅一个瓦片的像素或块的信息的环路滤波操作,但可停用利用来自一个以上瓦片的像素或块的信息的环路滤波操作
图1为说明根据本发明的实例的可经配置以允许或不允许跨瓦片边界的环路滤波操作的实例性视频编码和解码系统10的框图。如图1中所示,系统10包含源装置12,所述源装置经由通信信道16将经编码视频发射到目的地装置14。还可将经编码视频数据存储在存储媒体34或文件服务器36上且可由目的地装置14在需要时存取。当存储到存储媒体或文件服务器时,视频编码器20可将经译码视频数据提供给另一装置,例如网络接口、压缩光盘(CD)、蓝光或数字视频光盘(DVD)烧录器或压印设施装置,或用于将经译码视频数据存储到存储媒体的其它装置。同样,与视频解码器30分开的装置(例如,网络接口、CD或DVD读取器等)可从存储媒体检索经译码视频数据且将所检索的数据提供给视频解码器30。
源装置12和目的地装置14可包括广泛多种装置中的任一者,包含桌上型计算机、笔记本(即,膝上型)计算机、平板计算机、机顶盒、电话手持机(例如,所谓的智能电话)、电视、相机、显示装置、数字媒体播放器、视频游戏控制台等。在许多情况下,此些装置可经装备以进行无线通信。因此,通信信道16可包括无线信道、有线信道,或适合于发射经编码视频数据的无线和有线信道的组合。类似地,文件服务器36可由目的地装置14通过任何标准数据连接(包含因特网连接)进行存取。此可包含无线信道(例如,Wi-Fi连接)、有线连接(例如,DSL、缆线调制解调器,等等),或适合于存取存储于文件服务器上的经编码视频数据的以上两者的组合。
根据本发明的实例的用于控制跨瓦片边界的环路滤波的技术可应用于支持多种多媒体应用(例如,无线电视广播、有线电视传输、卫星电视传输、流式视频传输(例如,经由因特网))中的任一者的视频译码、供存储于数据存储媒体上的数字视频的编码、存储于数据存储媒体上的数字视频的解码,或其它应用。在一些实例中,系统10可经配置以支持单向或双向视频传输以支持例如视频流式传输、视频回放、视频广播和/或视频电话等应用。
在图1的实例中,源装置12包含视频源18、视频编码器20、调制器/解码器22和发射器24。在源装置12中,视频源18可包含例如视频俘获装置(例如,摄像机、含有先前俘获的视频的视频存档、用以从视频内容提供者接收视频的视频馈送接口)的源,和/或用于产生计算机图形数据以作为源视频的计算机图形系统的源,或此些源的组合。作为一个实例,如果视频源18为摄像机,则源装置12与目的地装置14可形成所谓的相机电话或视频电话。然而,一股来说,本发明中所描述的技术可适用于视频译码,且可适用于无线及/或有线应用,或其中将经编码视频数据存储于本地磁盘上的应用。
可由视频编码器20来编码经俘获的、经预先俘获的或计算机产生的视频。经编码视频信息可由调制解调器22根据通信标准(例如,无线通信协议)来调制,且经由发射器24而发射到目的地装置14。调制解调器22可包含各种混频器、滤波器、放大器或经设计以用于信号调制的其它组件。发射器24可包含经设计以用于发射数据的电路,包括放大器、滤波器及一或多个天线。
由视频编码器20编码的经俘获的、经预先俘获的或计算机产生的视频还可存储到存储媒体34或文件服务器36上,以供以后消耗。存储媒体34可包含蓝光光盘、DVD、CD-ROM、快闪存储器,或用于存储经编码视频的任何其它合适的数字存储媒体。存储在存储媒体34上的经编码视频随后可由目的地装置14存取以进行解码和回放。
文件服务器36可为能够存储经编码视频且将所述经编码视频发射到目的地装置14的任何类型的服务器。实例性文件服务器包含网络服务器(例如,对于网站)、FTP服务器、网络附接存储(NAS)装置或本地磁盘驱动器,或能够存储经编码视频数据和将所述经编码视频数据发射到目的地装置的任何其它类型的装置。经编码视频数据从文件服务器36的传输可为流式传输、下载传输,或两者的组合。文件服务器36可由目的地装置14通过任何标准数据连接(包含因特网连接)进行存取。此可包含无线信道(例如,Wi-Fi连接)、有线连接(例如,DSL、缆线调制解调器,以太网、USB等等),或适合于存取存储于文件服务器上的经编码视频数据的以上两者的组合。
图1的实例中的目的地装置14包含接收器26、调制解调器28、视频解码器30和显示装置32。目的地装置14的接收器26在信道16上接收信息,且调制解调器28解调所述信息以产生用于视频解码器30的经解调位流。在信道16上传送的信息可包含由视频编码器20产生的多种语法信息,以供视频解码器30在解码视频数据中使用。此语法还可与存储于存储媒体34或文件服务器36上的经编码视频数据包含在一起。视频编码器20和视频解码器30中的每一者可形成能够编码或解码视频数据的相应编码器-解码器(CODEC)的部分。
显示装置32可与目的地装置14一起集成,或在所述目的地装置外部。在一些实例中,目的地装置14可包含集成式显示装置,且还经配置以与外部显示装置介接。在其它实例中,目的地装置14可为显示装置。一股来说,显示装置32向用户显示经解码视频数据,且可包括多种显示装置中的任一者,例如,液晶显示器(LCD)、等离子体显示器、有机发光二极管(OLED)显示器或另一类型的显示装置。
在图1的实例中,通信信道16可包括任一无线或有线通信媒体,例如,射频(RF)频谱或一或多个物理传输线、或无线和有线媒体的任一组合。通信信道16可形成例如局域网、广域网或例如因特网的全球网络的基于包的网络的部分。通信信道16一股表示用于将视频数据从源装置12发射到目的地装置14的任何合适的通信媒体或不同通信媒体的集合,包含有线或无线媒体的任何合适组合。通信信道16可包含可用于促进从源装置12到目的地装置14的通信的路由器、交换器、基站或任何其它设备。
视频编码器20和视频解码器30可根据例如目前在开发中的高效率视频译码(HEVC)标准等视频压缩标准而操作,且可符合HEVC测试模型(HM)。被称作“HEVC工作草案8(HEVC Working Draft8)”或“WD8”的HEVC标准的最近的草案描述于布洛斯(Bross)等人的文献JCTVC-J1003“高效率视频译码(HEVC)文本规范草案8(High efficiency videocoding(HEVC)text specification draft8)”,ITU-T SG16WP3和ISO/IEC JTC1/SC29/WG11的视频译码联合合作小组(JCT-VC)第10次会议:瑞典斯德哥尔摩,2012年7月11日至20日,其至2012年10月17日为止可从http://phenix.int-evry.fr/jct/doc_end_user/documents/l0_Stockholm/wgll/JCTVC-J1003-v8.zip下载。
或者,视频编码器20和视频解码器30可根据例如ITU-T H.264标准(或者被称作MPEG4第10部分,高级视频译码(AVC))或此类标准的扩展等其它专有或产业标准而操作。然而,本发明的技术不限于任何特定译码标准。其它实例包含MPEG-2和ITU-TH.263。
尽管图1中未展示,但在一些方面中,视频编码器20及视频解码器30可各自与音频编码器及解码器集成,且可包含适当的MUX-DEMUX单元或其它硬件及软件,以处置对共同数据流或单独数据流中的音频与视频两者的编码。在一些实例中,如果适用,MUX-DEMUX单元可符合ITU H.223多路复用器协议或例如用户数据报协议(UDP)等其它协议。
视频编码器20和视频解码器30各自可经实施为例如一或多个微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑、软件、硬件、固件或其任何组合的多种合适编码器电路中的任一者。当所述技术部分地在软件中实施时,一装置可将用于软件的指令存储于合适的非暂时性计算机可读媒体中,且在硬件中使用一或多个处理器来执行所述指令以执行本发明的技术。视频编码器20和视频解码器30中的每一者可包含于一或多个编码器或解码器中,所述视频编码器和视频解码器中的任一者可在相应装置中被集成为组合式编码器/解码器(CODEC)的一部分。
视频编码器20可实施本发明的用于控制视频译码过程中的跨瓦片边界的环路滤波的技术中的任一者或全部。同样,视频解码器30可实施用于视频译码过程中的自适应环路滤波的这些技术中的任一者或全部。如本发明中所描述的视频译码器可指代视频编码器或视频解码器。类似地,视频译码单元可指代视频编码器或视频解码器。同样,视频译码可指代视频编码或视频解码。
在HEVC所提出的当前ALF中,提出两个调适模式(即,块和区调适模式)。对于区自适应模式,将帧划分为16个区,且每一区可具有一组线性滤波器系数(多个AC系数和一个DC系数),且一个区可与其它区共享相同的滤波器系数。图2是展示用于自适应环路滤波器的基于区的分类的概念图。如图2中所示,帧120被划分为16个区。这些16个区中的每一者由指示所述区所使用的特定组线性滤波器系数的编号(0到15)表示。所述数目(0到15)可为到存储于视频编码器和视频解码器两者处的预定组滤波器系数的索引编号。在一个实例中,视频编码器可在经编码视频位流中用信号通知由视频编码器用于特定区的一组滤波器系数的索引编号。基于所述用信号通知的索引,视频解码器可检索相同的预定组滤波器系数以在用于所述区的解码过程中使用。在其它实例中,显式地用信号通知用于每一区的滤波器系数。
对于基于块的模式,帧被划分为4×4块,且每一4×4块通过使用方向和活动性信息计算度量而导出一个类别。对于每一类别,可使用一组线性滤波器系数(多个AC系数和一个DC系数),且一个类别可与其它类别共享相同的滤波器系数。图3是展示用于自适应环路滤波器的基于块的分类的概念图。
以下展示方向和活动性以及基于方向和活动性的所得度量的计算:
■方向
■Ver(i,j)=abs(X(i,j)<<1-X(i,j-1)-X(i,j+1))
■Hor(i,j)=abs(X(i,j)<<1-X(i-1,j)-X(i+1,j))
■HB=∑i=0,2j=0,2H(i,j)
■VB=∑i=0,2j=0,2V(i,j)
■方向=0,1(HB>2VB),2(VB>2HB)
■活动性
■LB=HB+VB
■5个类别(0,1,2,3,4)
■度量
■活动性+5*方向
Hor_act(i,j)一股指代当前像素(i,j)的水平活动性,且Vert_act(i,j)一股指代当前像素(i,j)的垂直活动性。X(i,j)一股指代像素(i,j)的像素值。HB指代4×4块的水平活动性,其在图3的实例中是基于像素(0,0)、(0,2)、(2,0)和(2,2)的水平活动性的总和来确定。VB指代4×4块的垂直活动性,其在此实例中是基于像素(0,0)、(0,2)、(2,0)和(2,2)的垂直活动性的总和来确定。“<<1”表示乘以两个操作。基于HB和VB的值,可确定方向。作为一个实例,如果HB的值大于VB的值的2倍,那么可将所述方向确定为方向1(即,水平),其可能对应于比垂直活动性更多的水平活动性。如果VB的值大于HB的值的2倍,那么可将所述方向确定为方向2(即,垂直),其可能对应于比水平活动性更多的垂直活动性。否则,可将所述方向确定为方向0(即,没有方向),从而意味着水平或垂直活动性都不是主要的。用于各个方向的标记以及用于确定方向的比率仅构成一个实例,因为还可使用其它标记和比率。
可将4×4块的活动性(LB)确定为水平活动性与垂直活动性的总和。可将LB的值分类为一范围。此特定实例展示五个范围,但可类似地使用更多或更少的范围。基于活动性和方向的组合,可选择用于4×4像素块的滤波器。作为一个实例,可基于活动性和方向到滤波器的二维映射来选择滤波器,或可将活动性和方向组合为单个度量,且可使用所述单个度量来选择滤波器(例如,度量=活动性+5*方向)。
返回到图3,框140表示4×4像素块。在此实例中,仅使用十六个像素中的四个像素来计算用于基于块的ALF的活动性和方向度量。所述四个像素是被标记为像素141的像素(0,0)、被标记为像素142的像素(2,0)、被标记为像素143的像素(0,2)以及被标记为像素144的像素(2,2)。举例来说,像素141(即,hor_act(0,0))的水平活动性是基于左边相邻像素和右边相邻像素来确定。右边相邻像素被标记为像素145。左边相邻像素位于与4×4块不同的块中,且在图3中未展示。举例来说,像素142(即,ver_act(2,0))的垂直活动性是基于上部相邻像素和下部相邻像素来确定。下部相邻像素被标记为像素146,且上部相邻像素位于与4×4块不同的块中,且在图3中未展示。可以类似方式计算像素143和144的水平和垂直活动性。
如HEVC标准中当前所提出的,连同其它环路滤波器(例如,解块和SAO)一起执行ALF。当通过视频译码装置将滤波器应用于经存储以供未来参考的视频数据时,可称所述滤波器“在环路内”执行。以此方式,可使用环路内滤波的视频数据以供后续译码的视频数据参考。另外,视频编码器和视频解码器两者可经配置以执行大体上相同的滤波过程。所述环路滤波器可例如以特定次序处理,例如解块之后SAO之后ALF,但还可使用其它次序。在HEVC的当前工作草案中,环路滤波器中的一者是基于帧的。然而,如果在切片层级(包含熵切片)或在瓦片层级处应用环路滤波器中的任一者,那么在切片和瓦片边界处的特殊处置可为有益的。
图4是展示帧的实例性瓦片的概念图。帧160可被划分为多个最大译码单元(LCU)162。可将两个或更多LCU分组为矩形形状的瓦片。当启用基于瓦片的译码时,一起对每一瓦片内的译码单元进行译码(即,编码或解码),随后对后续的瓦片进行译码。如针对帧160所展示,瓦片161和163以水平方式定向,且具有水平边界和垂直边界两者。如针对帧170所展示,瓦片171和173以垂直方式定向,且具有水平边界和垂直边界两者。
图5是展示帧的实例性切片的概念图。帧180可被划分为切片,所述切片由以光栅扫描次序跨帧的多个连续LCU182组成。在一些实例中,切片可具有一致形状(例如,切片181),且涵盖帧中的一或多个完整行的LCU。在另一实例中,将切片界定为以栅格扫描次序的特定数目的连续LCU,且可展现出非一致形状。举例来说,帧190可被划分为切片191,所述切片由以光栅扫描次序的10个连续LCU182组成。当帧190仅有8个LCU宽时,在切片191中包含下一行中的额外两个LCU。
图6是描绘切片和瓦片边界处的自适应环路滤波器的概念图。将水平切片和/或瓦片边界201描绘为水平线,且将垂直瓦片边界202描绘为垂直线。图3中的滤波器掩模200的圆圈表示滤波器的系数,所述系数应用于切片和/或瓦片中的经重构视频块的像素。也就是说,可将滤波器的系数的值应用于对应像素的值。假设滤波器的中心定位在待滤波的像素的位置处(或紧密靠近),那么可称滤波器系数对应于与系数的位置并置的像素。还可将对应于滤波器的系数的像素称作“支持像素”,或统称为滤波器的“支持组”。通过将滤波器掩模200中的每一系数乘以其对应像素的值,且对每一所得的值求和,来计算当前像素203(对应于中心像素掩模系数CO)的经滤波值。
在本发明中,术语“滤波器”一股指代一组滤波器系数。举例来说,3×3滤波器可由一组9个滤波器系数界定,5×5滤波器可由一组25个滤波器系数界定,9×5滤波器可由一组45个滤波器系数界定,以此类推。图6中所示的滤波器掩模200是在水平方向上具有7个滤波器系数且在垂直方向上具有5个滤波器系数(中心滤波器系数虑及每一方向)的7×5滤波器,然而,任何数目的滤波器系数可适用于本发明的技术。术语“滤波器组”一股指代一或多个滤波器的群组。举例来说,一组两个3×3滤波器可包含第一组9个滤波器系数以及第二组9个滤波器系数。术语“形状”(有时称为“滤波器支持”)一股指代特定滤波器的滤波器系数行的数目以及滤波器系数列的数目。举例来说,9×9是第一形状的实例,7×5是第二形状的实例,且5×9是第三形状的实例。在一些例子中,滤波器可采取非矩形形状,包含菱形、类菱形、圆形、类圆形、六边形、八边形、交叉形状、X形状、T形状、其它几何形状,或众多其它形状或配置。图6中的实例是交叉形状,然而,可使用其它形状。
本发明引入用于控制跨瓦片边界的环路滤波的技术,所述环路滤波包含解块滤波、ALF以及SAO滤波。本发明将使用实例来阐释某些技术。这些实例中的一些可仅参考一种类型的环路滤波,例如ALF,但应理解,本发明的技术还可应用于其它类型的环路滤波器,以及环路滤波器的各种组合。
作为控制环路滤波的部分,视频编码器20在经译码位流中包含例如针对一或多个特定边界或针对帧内或序列内的所有瓦片而指示是否启用跨瓦片边界的环路滤波的语法元素的值。在一些实例中,视频编码器20可通过在所述位流中用信号通知额外的用信号通知的值来实行对跨瓦片边界的环路滤波操作的更精细粒度控制。举例来说,当第一语法元素指示允许跨瓦片边界的环路滤波操作时,视频编码器20可在所述位流中用信号通知指示针对水平瓦片边界和/或垂直瓦片边界是否允许(或不允许)跨瓦片边界的环路滤波操作的额外值。作为另一实例,当第一值指示允许跨瓦片边界的环路滤波操作时,视频编码器20可在所述位流中用信号通知用以特定识别哪些瓦片边界允许(或不允许)环路滤波操作的额外值。举例来说,可使用邻近于瓦片边界的瓦片的一或多个瓦片索引来识别特定瓦片边界。在另一实例中,视频编码器20可在所述位流中包含一系列旗标,其中每一旗标对应于特定边界,且所述旗标的值指示跨所述特定边界是否允许跨瓦片边界的环路滤波操作。另外或在替代方案中,在一些实例中,可在切片标头中用信号通知指示被切片接触的瓦片边界是否允许(或不允许)跨瓦片边界的预测的值。
如上文所论述,在一些情形中,可停用跨瓦片边界的环路滤波。可停用跨瓦片边界的环路滤波的一个原因是因为,相邻瓦片中的像素可能尚未被译码,且因此,将不可用于一些滤波器掩模。在其中停用跨瓦片边界的环路滤波的例子中,可仍执行不跨瓦片边界的环路滤波操作。在这些情况下,可将经填补数据用于不可用的像素(即,位于与当前切片或瓦片另一侧的切片或瓦片边界上的像素),且可执行滤波。
另外,本发明提出用于在不使用经填补数据来停用跨瓦片的环路滤波时执行跨瓦片边界的ALF的技术。一股来说,本发明提出在瓦片边界周围使用部分滤波器。部分滤波器是不使用通常针对滤波过程所使用的一或多个滤波器系数的滤波器。在一个实例中,本发明提出使用部分滤波器,其中至少不使用对应于瓦片边界的另一侧上的像素的滤波器系数,其中所述另一侧一股指代瓦片边界的跨正被滤波的像素或像素群组从其定位的边界而定位的侧。
图7和8展示跨越至少一个瓦片边界的滤波器掩模的实例。当针对特定瓦片边界启用跨瓦片边界的环路滤波时,可使用所展示的所有滤波器支持位置(即,对应于图7和8中的黑色圆圈和白色圆圈两者的滤波器支持位置)来用于滤波操作。当针对特定瓦片边界停用跨瓦片边界的环路滤波时,跨瓦片边界的滤波器支持位置(即,对应于图7和8中的白色圆圈的滤波器支持位置)不用于环路滤波器操作,但可使用不跨瓦片边界的滤波器支持位置(即,对应于图7和8中的黑色圆圈的滤波器支持位置)。
在一个实例中,可在瓦片边界附近使用不对称的部分滤波器。图7是描绘水平边界处的不对称部分滤波器的概念图。图8是描绘垂直边界处的不对称部分滤波器的概念图。在此方法中,当停用跨瓦片边界的滤波时,仅可用的像素(即,当前瓦片内的像素)用于滤波。瓦片边界之外的滤波器分接头被跳过。因此,不使用经填补的像素数据。图7和图8中的滤波器被称作不对称的,因为在滤波器掩模的中心的一侧(水平侧或垂直侧)上比另一侧使用更多的滤波器分接头。因为不使用整个滤波器掩模,所以可重新规格化滤波器系数以产生所需的结果。下文将更详细地论述用于重新规格化的技术。
在图7的情况1中,滤波器掩模220的中心是远离水平瓦片边界的一行像素。由于滤波器掩模220是7×5滤波器,所以在垂直方向上的一个滤波器系数对应于跨水平边界的像素。此滤波器系数被描绘为白色。如果启用跨瓦片边界的环路滤波,那么可使用跨瓦片边界的像素来用于环路滤波操作。如果停用跨瓦片边界的环路滤波,那么可不在滤波中使用对应于白色滤波器系数的像素。
同样,在情况2中,滤波器掩模225的中心在邻近于水平瓦片边界的一行像素上。在此情况下,两个滤波器系数对应于跨水平边界的像素。因此,如果停用跨瓦片边界的环路滤波,那么滤波器掩模225中的两个白色滤波器系数都不用于环路滤波。如果启用跨瓦片边界的环路滤波,那么可使用跨瓦片边界的像素以及其对应的滤波器系数两者来用于环路滤波操作。在情况1和情况2两者中,使用全部黑色滤波器系数,而不管是否启用或停用跨瓦片边界的环路滤波。
在图8的情况3中,滤波器掩模234的中心是远离垂直瓦片边界的两列像素。由于滤波器掩模234是7×5滤波器,所以在水平方向上的一个滤波器系数对应于跨垂直边界的像素。再次地,此滤波器系数被描绘为白色。如果启用跨瓦片边界的环路滤波,那么可使用跨瓦片边界的像素以及其对应的滤波器系数来用于环路滤波操作。如果停用跨瓦片边界的环路滤波,那么可不在滤波中使用跨瓦片边界的像素以及其对应的滤波器系数。
类似地,在情况4中,滤波器掩模232的中心是远离垂直瓦片边界的一列像素。在此情况下,两个滤波器系数对应于垂直边界上的像素。如果启用跨瓦片边界的环路滤波,那么可使用跨瓦片边界的两个像素以及其对应的滤波器系数来用于环路滤波操作。如果停用跨瓦片边界的环路滤波,那么可不在滤波中使用跨瓦片边界的两个像素以及其对应的滤波器系数。
在情况5中,滤波器掩模230的中心在邻近于垂直瓦片边界的一列像素上。在此情况下,三个滤波器系数对应于跨垂直边界的像素。如果启用跨瓦片边界的环路滤波,那么可使用跨瓦片边界的三个像素以及其对应的滤波器系数来用于环路滤波操作。如果停用跨瓦片边界的环路滤波,那么可不在滤波中使用跨瓦片边界的三个像素以及其对应的滤波器系数。在所有情况3、4和5中,使用全部黑色滤波器系数,而不管是否启用或停用跨瓦片边界的环路滤波。
在另一实例中,可在停用跨瓦片边界的环路滤波时在瓦片边界附近使用不对称的部分滤波器。图9是描绘水平边界处的对称部分滤波器的概念图。图10是描绘垂直边界处的对称部分滤波器的概念图。与比如图7和8中所示的不对称部分滤波器的不对称滤波器一样,在此方法中,当停用跨瓦片边界的环路滤波时,不将跨瓦片边界而安放的像素以及其对应的滤波器系数用于环路滤波操作,而且,也不使用对应于不跨瓦片边界的像素的滤波器掩模的一些系数,以便保持对称的滤波器掩模。
举例来说,在图9的情况6中,滤波器掩模240中的一个滤波器系数是跨水平切片或瓦片边界的。当停用跨瓦片边界的环路滤波时,也不使用滤波器掩模的另一侧上的水平边界内的对应滤波器系数。以此方式,保留了中心系数周围的垂直方向上的系数的对称布置。在图9的情况7中,滤波器掩模242中的两个滤波器系数是跨水平边界的。当停用跨瓦片边界的环路滤波时,也不使用所述水平边界内的中心滤波器系数的另一侧上的对应的两个滤波器系数。图10中针对垂直瓦片边界展示类似的实例。在情况8中,一个滤波器系数对应于跨垂直瓦片边界的像素。当停用跨瓦片边界的环路滤波时,不使用此系数以及滤波器掩模250的水平部分的左侧处的另一像素。类似地,在其中两个(情况9)和四个(情况10)滤波器系数对应于跨垂直边界的像素的情况下,针对滤波器掩模252和254作出滤波器掩模调整。
与图7和图8中所示的不对称部分滤波器一样,当停用跨瓦片边界的环路滤波时,不将整个滤波器掩模用于对称部分滤波器。因此,可将滤波器系数重新规格化。下文将更详细地论述用于重新规格化的技术。在其中启用跨瓦片边界的环路滤波的若干例子中,可使用图9和10中所展示的所有滤波器系数(即,白色滤波器系数以及黑色滤波器系数两者)来用于执行环路滤波操作。
是否应用部分滤波器(例如,不对称部分滤波器或对称部分滤波器)可为自适应决策。对于图7和图9中所示的实例,可针对情况1和情况6来使用部分滤波器,但针对情况2和情况7不可使用。针对情况2和情况7使用部分滤波器可不是优选的,因为未使用的滤波器系数的数目较大。替代地,可针对情况2和情况7使用下文所描述的其它技术(例如,镜射填补、跳过滤波等)。同样,对于图8和图10中所示的实例,部分滤波器的使用可适用于情况3、4、8和9,但不适用于情况5和10。
使用部分滤波器的决策还可基于其它准则。举例来说,当其对应像素不可用的系数的数目大于某一阈值时,不可使用部分滤波器。当其对应像素不可用的系数值的总和大于某一阈值时,不可使用部分滤波器。作为另一实例,当其对应像素不可用的系数值的绝对值的总和大于某一阈值时,不可使用部分滤波器。
●其一致像素不可用的系数的数目>Th1
●Sum(其一致像素不可用的系数)>Th2
●Sum(abs(其一致像素不可用的系数))>Th3。
可选择以上条件的子集来决定是否针对瓦片边界的特定切片来应用部分滤波器。
在本发明的另一实例中,可仅针对水平瓦片边界启用部分滤波,然而,在垂直边界处时,完全跳过环路滤波。更具体来说,在一个实例中,如果视频译码器确定滤波器掩模将使用垂直瓦片边界的另一侧上的像素,那么将针对所述像素跳过环路滤波。在其它实例中,如果视频译码器确定滤波器掩模将针对译码单元中的一或多个像素使用垂直瓦片边界的另一侧上的像素,那么将针对所述整个译码单元跳过ALF。在本发明的另一实例中,在所有边界中,可完全跳过ALF。
在本发明的其它实例中,当不使用部分滤波时,可在瓦片边界处应用额外的技术。在一个实例中,ALF可使用切片或瓦片边界的另一侧上的镜射的经填补像素,而不使用重复填补的像素。镜射的像素反映切片或瓦片边界的内侧上的像素值。举例来说,如果不可用的像素邻近于瓦片或切片边界,那么其将采用也邻近于所述边界的瓦片或切片边界的内侧上的像素的值(即,镜射)。同样,如果不可用的像素是远离瓦片或切片边界的一行或一列,那么其将采用也远离所述边界的一行或一列的瓦片或切片边界的内侧上的像素的值(即,镜射)。
在另一实例中,瓦片或切片边界的另一侧上的像素的经滤波值可根据以下等式来计算:a*使用经填补数据的ALF+b*经预滤波的输出,其中a+b=1。也就是说,经填补的像素(即,添加到切片或瓦片边界的另一侧的像素)乘以对应于经填补的像素的ALF系数且乘以常数“a”。随后将此值加到经预滤波的经填补的像素值与常数“b”的相乘,其中a+b=1。
可以不同方式实现对称和不对称部分滤波器的滤波器系数的重新规格化。考虑其中将原始滤波器系数标记为C_1,...,C_N的实例,其中C是特定系数的值。现在假设系数C_1,...,C_M不具有可用的对应像素(即,对应像素是跨切片或瓦片边界的)。可如下界定经重新规格化的滤波器系数:
实例1
Coeff_all=C_1+C_2+...+C_N
Coeff_part=Coeff_all-(C_1+...+C_M)
New_coeffs C_i′=C_i*Coeff_all/Coeff_part,i=M+1,...,N
在实例1中,Coeff_all表示一起求和的滤波器掩模中的所有系数的值。Coeff_part表示部分滤波器掩模中的所有系数的值。也就是说,从滤波器掩模中的所有可能的系数(Coeff_all)的总和减去对应于不可用像素的系数(C_1+...+C_M)的合计值。New_coeffs_Ci′表示在重新规格化过程之后的部分系数中的滤波器系数的值。在以上实例一中,部分滤波器中剩余的系数的值乘以滤波器掩模中的所有可能的系数(Coeff_all)的总值,且除以部分滤波器掩模中的所有系数(Coeff_part)的总值。
以下实例2展示用于将部分滤波器中的滤波器系数重新规格化的另一技术。
实例2
对于C_i的子集,i=M+1,...,N,例如添加C_k,k=1,...,M,
a.C_(M+1)′=C_(M+1)+C_1,C_(M+2)′=C_(M+2)+C_3,...或
b.C_L′=C_L+(C_1+C_2+...+C_M)
图11为说明可使用用于如本发明中所描述的控制视频译码过程中的跨瓦片边界的环路滤波的技术的视频编码器20的实例的框图。将出于说明的目的在HEVC译码的上下文中描述视频编码器20,但未关于可需要自适应环路滤波的其它译码标准或方法来限制本发明。视频编码器20可执行对视频帧内的CU的帧内译码和帧间译码。帧内译码依赖于空间预测以减少或移除给定视频帧内的视频数据中的空间冗余。帧间译码依赖于时间预测以减少或移除视频序列的当前帧与先前经译码帧之间的时间冗余。帧内模式(I模式)可指代若干基于空间的视频压缩模式中的任一者。帧间模式(例如单向预测(P模式)和或双向预测(B模式))可指代若干基于时间的视频压缩模式中的任一者。
如图11所示,视频编码器20接收视频帧内的待编码的当前视频块。在图11的实例中,视频编码器20包含运动补偿单元44、运动估计单元42、帧内预测模块46、参考帧缓冲器64、求和器50、变换模块52、量化单元54以及熵编码单元56。图11中所说明的变换模块52是将实际变换或变换的组合应用于残余数据块的单元,且将不与变换系数块混淆,所述变换系数块还可被称作CU的变换单元(TU)。为了视频块重构,视频编码器20还包含反量化单元58、反变换模块60、求和器62、解块滤波器53、SAO单元55和ALF单元57。解块滤波器53可对块边界进行滤波,以从经重构的视频移除成块性假影。在需要时,解块滤波器将通常对求和器62的输出进行滤波。
在编码过程期间,视频编码器20接收待译码的视频帧或切片。可将帧或切片划分为多个视频块,例如最大译码单元(LCU)。运动估计单元42和运动补偿单元44相对于一或多个参考帧中的一或多个块执行对所接收的视频块的帧间预测译码以提供时间压缩。帧内预测模块46可相对于在与待译码的块相同的帧或切片中的一或多个相邻块执行对所接收视频块的帧内预测译码,以提供空间压缩。
模式选择单元40可(例如)基于每一模式的速率失真结果而选择译码模式(帧内或帧间)中的一者,且将所得的经帧内译码或经帧间译码的块(例如,预测单元(PU))提供到求和器50以产生残余块数据,且提供到求和器62以重构经编码块以用于参考帧。求和器62将所预测块与来自反变换模块60的用于所述块的经反量化、反变换的数据进行组合,以重构经编码块,如下文更详细地描述。可将一些视频帧标示为I帧,其中I帧中的所有块在帧内预测模式中编码。在一些情况下,帧内预测模块46可例如当由运动估计单元42执行的运动搜索未对块产生充分预测时执行对P帧或B帧中的块的帧内预测编码。
运动估计单元42与运动补偿单元44可高度集成,但出于概念上的目的而分开予以说明。运动估计(或运动搜索)是产生估计视频块的运动的运动向量的过程。运动向量(例如)可指示当前帧中的预测单元相对于参考帧的参考样本的移位。运动估计单元42通过将预测单元与参考帧缓冲器64中存储的参考帧的参考样本进行比较来计算经帧间译码帧的预测单元的运动向量。参考样本可为被发现在像素差方面与CU的包含正被译码的PU的部分紧密匹配的块,其可通过绝对差和(SAD)、平方差和(SSD)或其它差度量来确定。参考样本可出现在参考帧或参考切片内的任何地方,且不一定在参考帧或切片的块(例如,译码单元)边界处。在一些实例中,参考样本可出现在分数像素位置处。
运动估计单元42将所计算的运动向量发送到熵编码单元56和运动补偿单元44。参考帧的由运动向量识别的部分可称作参考样本。运动补偿单元44可例如通过检索由PU的运动向量识别的参考样本来计算当前CU的预测单元的预测值。
作为由运动估计单元42和运动补偿单元44执行的帧间预测的替代方案,帧内预测模块46可对所接收的块进行帧内预测。帧内预测单元46可相对于相邻的先前经译码块(例如,当前块的上方、右上方、左上方,或左边的块(假设块的从左到右、从上到下的编码次序))来预测所接收的块。可用多种不同帧内预测模式来配置帧内预测模块46。举例来说,帧内预测模块46可基于正被编码的CU的大小而用某一数目的方向预测模式来配置,例如三十五种方向预测模式。
帧内预测模块46可通过(例如)计算各种帧内预测模式的误差值且选择产生最低误差值的模式来选择帧内预测模式。方向预测模式可包含用于组合空间上相邻的像素的值且将经组合值应用于PU中的一或多个像素位置的功能。一旦已计算PU中的所有像素位置的值,帧内预测模块46可基于PU与待编码的所接收块之间的像素差来计算预测模式的误差值。帧内预测模块46可继续测试帧内预测模式,直到发现产生可接受的误差值的帧内预测模式为止。帧内预测模块46可随后将PU发射到求和器50。
视频编码器20通过从正经译码的原始视频块减去由运动补偿单元44或帧内预测模块46计算的预测数据而形成残余块。求和器50表示执行此减法运算的组件。残余块可对应于像素差值的二维矩阵,其中残余块中的值的数目与对应于残余块的PU中的像素的数目相同。残余块中的值可对应于PU中以及待译码的原始块中位于同一地点的像素的值之间的差,即,误差。所述差可为色度或亮度差,其取决于被译码的块的类型。
变换模块52可从残余块形成一或多个变换单元(TU)。变换模块52从多个变换中选择变换。可基于一或多个译码特性(例如,块大小、译码模式等)来选择所述变换。变换模块52随后将选定的变换应用于TU,从而产生包括变换系数的二维阵列的视频块。变换模块52可在经编码视频位流中用信号通知选定的变换分区。
变换模块52可将所得的变换系数发送到量化单元54。量化单元54可随后对变换系数进行量化。熵编码单元56可随后根据扫描模式执行对矩阵中的经量化变换系数的扫描。本发明将熵编码单元56描述为执行所述扫描。然而,应理解,在其它实例中,例如量化单元54等其它处理单元可执行所述扫描。
一旦将变换系数扫描为一维阵列,熵编码单元56可对系数应用熵译码,例如CAVLC、CABAC、基于语法的上下文自适应二进制算术译码(SBAC),或另一熵译码方法。
为了执行CAVLC,熵编码单元56可针对待发射的符号选择可变长度码。可将VLC中的码字建构成使得相对较短的码对应于更有可能的符号,而较长的码对应于较不可能的符号。以此方式,与(例如)针对待发射的每一符号使用相等长度的码字相比,使用VLC可实现位节省。
为了执行CABAC,熵编码单元56可选择要应用于某一上下文的上下文模型以编码待发射的符号。所述上下文可涉及(例如)相邻值是否为非零。熵编码单元56还可对语法元素进行熵编码,所述语法元素例如为表示选定变换的信号。根据本发明的技术,熵编码单元56可基于(例如)帧内预测模式的帧内预测方向、对应于语法元素的系数的扫描位置、块类型和/或变换类型,以及用于上下文模型选择的其它因素来选择用于对这些语法元素进行编码的上下文模型。
在由熵编码单元56熵译码之后,可将所得的经编码视频发射到另一装置(例如,视频解码器30)或存档以供随后发射或检索。
在一些情况下,除熵译码之外,视频编码器20的熵编码单元56或另一单元可经配置以执行其它译码功能。举例来说,熵编码单元56可经配置以确定CU和PU的经译码块样式(CBP)值。而且,在一些情况下,熵编码单元56可执行对系数的游程长度译码。
反量化单元58和反变换模块60分别应用反量化和反变换以在像素域中重构残余块,(例如)以用于随后用作参考块。运动补偿单元44可通过将残余块加到参考帧缓冲器64的帧中的一者的预测块来计算参考块。运动补偿单元44还可将一或多个内插滤波器应用于经重构的残余块以计算子整数像素值以在运动估计中使用。求和器62将经重构的残余块添加到由运动补偿单元44产生的经运动补偿的预测块以产生经重构的视频块。
求和器62将残余块与由运动补偿单元44或帧内预测模块46产生的对应预测块进行组合以形成经解码块。环路滤波器(解块滤波器53、SAO单元55以及ALF单元57)可随后执行根据上文所描述的技术的环路滤波。具体来说,可允许跨一些瓦片的瓦片边界的环路滤波操作,且可不允许跨一些瓦片的瓦片边界执行环路滤波操作。指示是否允许跨瓦片边界的环路滤波操作的语法元素可包含于经编码视频位流中。
在环路滤波之后,经滤波的经重构视频块随后存储于参考帧缓冲器64中。经重构视频块可由运动估计单元42和运动补偿单元44用作用以对后续视频帧中的块进行帧间译码的参考块。
图12是说明对经编码视频序列进行解码的视频解码器30的实例的框图。在图12的实例中,视频解码器30包含熵解码单元70、运动补偿单元72、帧内预测模块74、反量化单元76、反变换单元78、参考帧缓冲器82、解块滤波器75、SAO单元77以及ALF单元79以及求和器80。视频解码器30在一些实例中可执行一股与关于视频编码器20(查看图11)所描述的编码回合互逆的解码回合。
熵解码单元70对经编码位流执行熵解码过程以检索变换系数的一维阵列。所使用的熵解码过程取决于视频编码器20所使用的熵译码(例如,CABAC、CAVLC等)。由编码器使用的熵译码过程可在经编码位流中用信号通知或可为预定过程。
在一些实例中,熵解码单元70(或反量化单元76)可使用镜射由视频编码器20的熵编码单元56(或量化单元54)使用的扫描模式的扫描来扫描所接收的值。虽然可在反量化单元76中执行对系数的扫描,但将出于说明的目的将扫描描述为由熵解码单元70执行。另外,虽然为了易于说明而展示为单独的功能单元,但熵解码单元70、反量化单元76以及视频解码器30的其它单元的结构和功能性可彼此高度集成。
反量化单元76将提供于位流中且由熵解码单元70解码的经量化变换系数反量化(即,解量化)。反量化过程可包含常规的过程,例如,类似于针对HEVC所提出或由H.264解码标准界定的过程。反量化过程可包含使用由视频编码器20针对CU计算的量化参数QP,以确定应应用的量化程度以及同样的反量化程度。反量化单元76可在将系数从一维阵列转换为二维阵列之前或之后将变换系数反量化。
反变换模块78将反变换应用于经反量化变换系数。在一些实例中,反变换模块78可基于来自视频编码器20的信令或通过从一或多个译码特性(例如,块大小、译码模式等)推断变换来确定反变换。在一些实例中,反变换模块78可基于在包含当前块的LCU的四叉树的根节点处的用信号通知的变换来确定要应用于当前块的变换。或者,可在LCU四叉树中的叶节点CU的TU四叉树的根处用信号通知所述变换。在一些实例中,反变换模块78可应用级联反变换,其中反变换模块78将两个或两个以上反变换应用于正被解码的当前块的变换系数。
帧内预测模块74可基于用信号通知的帧内预测模式以及来自当前帧的先前经解码块的数据来产生当前帧的当前块的预测数据。
基于所检索的运动预测方向、参考帧索引以及所计算的当前运动向量,运动补偿单元产生当前部分的经运动补偿的块。这些经运动补偿的块实质上重新产生用于产生残余数据的预测性块。
运动补偿单元72可产生经运动补偿的块,可能执行基于内插滤波器的内插。待用于具有子像素精度的运动估计的内插滤波器的识别符可包含在语法元素中。运动补偿单元72可使用如由视频编码器20在视频块的编码期间所使用的内插滤波器来计算参考块的子整数像素的内插值。运动补偿单元72可根据所接收的语法信息来确定由视频编码器20使用的内插滤波器且使用所述内插滤波器来产生预测性块。
另外,在HEVC实例中,运动补偿单元72和帧内预测模块74可使用一些语法信息(例如,由四叉树提供)来确定用于对经编码视频序列的帧进行编码的LCU的大小。运动补偿单元72和帧内预测模块74还可使用语法信息来确定分裂信息,所述分裂信息描述经编码视频序列的帧的每一CU如何分裂(且同样地,子CU如何分裂)。语法信息还可包含指示如何对每一分裂进行编码的模式(例如,帧内预测或帧间预测,且对于帧内预测,帧内预测编码模式)、用于每一经帧间编码PU的一或多个参考帧(和/或含有参考帧的识别符的参考列表),以及其它信息,以对经编码视频序列进行解码。
求和器80将残余块与由运动补偿单元72或帧内预测模块74产生的对应预测块进行组合以形成经解码块。环路滤波器(解块滤波器75、SAO单元77以及ALF单元79)可随后执行根据上文所描述的技术的环路滤波。具体来说,经编码视频位流中的语法元素可允许跨一些瓦片的瓦片边界执行环路滤波操作,且可不允许跨一些瓦片的瓦片边界执行环路滤波操作。
现在将描述根据本发明的技术的用于控制跨瓦片边界的环路内滤波的实例性语法和语义。视频编码器20可例如经配置以产生包含所描述的语法元素的经译码视频数据的位流,且视频解码器30可经配置以解析此些语法元素。下表1展示可如何将本发明中所描述的语法元素实施到序列参数集中的实例。下表2展示可如何将本发明中所描述的语法元素实施到图片参数集中的实例。
表1
表2
在以上实例中,等于0的语法元素“tile_boundary_loop_filtering_idc”可指定不允许跨所有瓦片边界的环路滤波操作,包含解块环路滤波、ALF以及SAO。等于1的语法元素“tile_boundary_loop_filtering_idc”可指定允许跨所有瓦片边界的环路滤波操作。等于2的语法元素“tile_boundary_loop_filtering_idc”可指示语法元素“vertical_tile_boundary_loop_filtering_flag[i]”和“horizontal_tile_boundary_loop_filtering_flag[i]”指定允许环路滤波操作。这些值仅是一个实例,且可在其它实例中改变。
等于0的语法元素“vertical_tile_boundary_loop_filtering_flag[i]”可指定允许跨具有等于i加1的索引值的垂直瓦片边界的环路滤波操作。左边垂直图片边界的垂直瓦片边界索引是0,且从左到右计数,对于每一垂直瓦片边界增加1。等于1的语法元素“vertical_tile_boundary_loop_filtering_flag[i]可指定不允许跨具有等于i加1的索引值的垂直瓦片边界的环路滤波操作,包含解块环路滤波、ALF以及SAO。
等于0的语法元素“horizontal_tile_boundary_loop_filtering_flag[i]可指定允许跨具有等于i加1的索引值的水平瓦片边界的环路滤波操作。在一个实例中,上部水平图片边界的水平瓦片边界索引可为0,且从上到下计数,对于每一水平瓦片边界增加1。等于1的语法元素“horizontal_tile_boundary_loop_filtering_flag[i]可指定不允许跨具有等于i加1的索引值的水平瓦片边界的环路滤波操作。
在实例性解码过程中,当语法元素“horizontal_tile_boundary_loop_filtering_flag”和“vertical_tile_boundary_loop_filtering_flag”等于1时,可执行正常的滤波操作。如果语法元素“horizontal_tile_boundary_loop_filtering_flag”和“vertical_tile_boundary_loop_filtering_flag”等于0,那么可停用跨水平或垂直边界的环路内滤波操作。对于在边界附近的ALF操作,可需要存取跨边界的像素(其有时用经填补像素替代),其可导致在滤波时跨边界像素的视觉质量降级。因此,可使用如上文所描述的跨边界的ALF滤波操作的替代方式。
在另一实例中,语法元素“tile_boundary_loop_filtering_idc”可用1位译码,且当等于0时具有与在先前实例中等于0的语法元素“tile_boundary_loop_filtering_idc”相同的语义,且当等于1时具有与等于0的语法元素“tile_boundary_loop_filtering_idc相同的语义”,且语法元素“vertical_tile_boundary_loop_filtering_flag[i]”和“horizontal_tile_boundary_loop_filtering_flag[i]”不存在。换句话说,可允许针对水平和垂直瓦片边界两者的环路滤波操作,或可不允许针对水平和垂直瓦片边界两者的环路滤波操作。
在一个实例中,不允许跨其的环路滤波操作的瓦片边界可被显式地用信号通知,且可允许跨其它瓦片边界的环路滤波操作。或者,允许跨其的环路滤波操作的瓦片边界可被显式地用信号通知,且可不允许跨其它瓦片边界的环路滤波操作。在一个实例中,旗标可包含于两个相邻瓦片之间的每一瓦片边界的位流中,以指定是否允许跨瓦片边界的环路滤波操作。
在所有以上实例中,可通过一对瓦片索引来识别瓦片边界,其中每一瓦片索引识别图片中的一瓦片。瓦片索引可为图片中的所有瓦片的瓦片到瓦片光栅扫描次序的索引,从0开始。
在一个实例中,旗标可包含于每一切片的位流中,以指定是否允许跨由所述切片中的所有LCU覆盖的区内的所有瓦片边界的环路滤波操作。
图13展示描绘根据本发明的控制跨瓦片边界的环路滤波的实例性方法的流程图。图13中所示的技术可由视频编码器20或视频解码器30(一股由视频译码器)实施。视频译码器可经配置以针对被分割为瓦片的一或多个视频数据图片对表示是否允许跨所述图片内的瓦片边界的环路滤波操作的值进行译码(302)。响应于所述值指示不允许跨瓦片边界的环路滤波操作(304,否),视频译码器可对瓦片进行译码,而不对所述图片中的至少一者的瓦片之间的边界执行环路滤波操作(306)。举例来说,在其中需要并行地对两个或更多瓦片进行译码的例子中,不允许环路滤波器。响应于所述值指示允许环路滤波操作(304,是),随后视频译码器可任选地对表示允许(或不允许)环路滤波操作的一或多个边界的值进行译码(308)举例来说,视频译码器可对一系列旗标进行译码,其中每一旗标对应于特定边界,且所述旗标的值指示针对每一边界是否允许或不允许跨瓦片边界的环路滤波。视频译码器还可对允许(或不允许)跨瓦片边界的环路滤波操作的边界的显式指示进行译码。所述显式指示可例如包含边界上的一或多个瓦片的索引。
视频译码器可对图片中的至少一者的瓦片之间的至少一个边界执行环路滤波操作(310)。所述环路滤波操作可包含如上文所描述的解块滤波、自适应环路滤波以及样本自适应偏移滤波中的一或多者。
图14展示描绘根据本发明的控制跨瓦片边界的环路滤波的实例性方法的流程图。图14中所示的技术可由视频编码器20或视频解码器30(一股由视频译码器)实施。视频译码器可经配置以针对被分割为瓦片的一或多个视频数据图片对表示是否允许跨所述图片内的瓦片边界的环路滤波操作的值进行译码(310)。所述值可例如为三个可能值中的一者,其中第一值指示不允许跨所有瓦片边界的环路滤波,第二值指示允许跨所有瓦片边界的环路滤波,且第三值指示将对水平边界和垂直边界的单独语法元素进行单独译码。响应于所述值指示不允许跨瓦片边界的环路滤波操作(312,否),视频译码器可随后对瓦片进行译码,而不执行跨所述图片中的至少一者的瓦片之间的边界的环路滤波操作(314)。响应于所述组指示允许跨所有瓦片边界的环路滤波操作(316,是),视频译码器可随后执行跨水平瓦片边界和垂直瓦片边界中的至少一者的环路滤波操作(318)。
响应于所述值指示既不不允许跨所有瓦片边界也不允许跨所有瓦片边界的环路滤波操作(316,否),视频译码器可随后对指示是否允许跨水平方向上的瓦片边界的环路滤波操作的第二值进行译码(320)。视频译码器还可对指示是否允许跨垂直方向上的瓦片边界的环路滤波操作的第三值进行译码(322)。基于所述第二值和第三值,视频译码器可执行跨瓦片之间的水平边界、瓦片之间的垂直边界或两者的滤波操作(324)。
图15展示描绘根据本发明的控制跨瓦片边界的环路滤波的实例性方法的流程图。图15中所示的技术可由视频编码器20或视频解码器30(一股由视频译码器)实施。视频译码器可经配置以针对被分割为瓦片的视频数据图片对第一语法元素的第一值进行译码,其中所述第一语法元素的第一值指示允许跨所述图片内的至少一个瓦片边界的环路滤波操作(332)。视频译码器可响应于所述第一值指示允许跨瓦片边界的环路滤波操作而执行跨至少一个瓦片边界的一或多个环路滤波操作(334)。所述一或多个环路滤波操作可包含例如解块滤波操作、自适应环路滤波操作以及样本自适应偏移滤波操作中的一或多者。视频译码器可针对被分割为瓦片的第二视频数据图片对第一语法元素的第二值进行译码,其中所述第一语法元素的第二值可指示不允许跨所述图片内的瓦片边界的环路滤波操作(336)。
在一些视频译码器中,第一语法元素的第一值可指示允许跨所述图片内的所有瓦片边界的环路滤波操作,而在其它视频译码器中,第一语法元素的第一值可指示将使用额外的语法元素来识别允许(或不允许)跨瓦片边界的环路滤波操作的边界。在其中所述第一值指示将使用额外的语法元素来识别允许(或不允许)跨瓦片边界的环路滤波操作的边界的视频译码器中,视频译码器可对表示允许环路滤波操作的水平边界的值进行译码且/或对表示不允许环路滤波操作的水平边界的值进行译码。所述视频译码器可对表示允许环路滤波操作的垂直边界的值进行译码且/或对表示不允许环路滤波操作的垂直边界的值进行译码。
在其中所述第一值指示将使用额外的语法元素来识别允许(或不允许)跨瓦片边界的环路滤波操作的边界的视频译码器中,视频译码器可对表示是否允许在水平方向上跨图片内的瓦片边界的环路滤波操作的语法元素进行译码且/或对表示是否允许在垂直方向上跨图片内的瓦片边界的环路滤波操作的语法元素进行译码。
在其中所述第一值指示将使用额外的语法元素来识别允许(或不允许)跨瓦片边界的环路滤波操作的边界的视频译码器中,视频译码器可对用以指示允许跨图片内的所有瓦片边界的环路滤波操作的第一语法元素的第三值进行译码。
参考图13到15所论述的视频译码器可为视频解码器或视频编码器。当视频译码器是视频解码器时,对语法元素的值进行译码可例如涉及接收语法元素以及确定语法元素的值。当视频译码器是视频编码器时,对语法元素进行译码可对语法元素进行译码可例如涉及产生具有值的语法元素,使得所述语法元素可包含于经译码视频数据的位流中。
在一或多个实例中,所描述的功能可以硬件、软件、固件或其任何组合来实施。如果以软件实施,那么所述功能可作为一或多个指令或代码存储在计算机可读媒体上或经由计算机可读媒体进行传输且由基于硬件的处理单元执行。计算机可读媒体可包含计算机可读存储媒体(其对应于例如数据存储媒体等有形媒体)或通信媒体,通信媒体包含促进(例如)根据通信协议将计算机程序从一处传递到另一处的任何媒体。以此方式,计算机可读媒体一股可对应于(1)非暂时性的有形计算机可读存储媒体或(2)例如信号或载波等通信媒体。数据存储媒体可为可由一或多个计算机或一或多个处理器存取以检索指令、代码和/或数据结构来用于实施本发明中所描述的技术的任何可用媒体。计算机程序产品可包含计算机可读媒体。
举例来说且并非限制,所述计算机可读媒体可包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储装置、磁盘存储装置或其它磁性存储装置,快闪存储器,或可用于存储呈指令或数据结构的形式的所要程序代码且可由计算机存取的任何其它媒体。同样,可适当地将任何连接称作计算机可读媒体。举例来说,如果使用同轴电缆、光纤电缆、双绞线、数字订户线(DSL)或例如红外线、无线电及微波的无线技术从网站、服务器或其它远程源传输软件,则同轴电缆、光纤电缆、双绞线、DSL或例如红外线、无线电及微波的无线技术包括于媒体的定义中。然而,应理解,计算机可读存储媒体和数据存储媒体不包含连接、载波、信号或其它瞬时媒体,而是针对于非瞬时的、有形存储媒体。如本文中所使用,磁盘及光盘包含压缩光盘(CD)、激光光盘、光学光盘、数字多功能光盘(DVD)、软磁盘及蓝光光盘,其中磁盘通常磁性地重现数据,而光盘使用激光光学地重现数据。以上各者的组合也应包括在计算机可读媒体的范围内。
可由例如一或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)或其它等效集成或离散逻辑电路等一或多个处理器来执行所述指令。因此,如本文中所使用的术语“处理器”可指前述结构或适合于实施本文中所描述的技术的任一其它结构中的任一者。另外,在一些方面中,本文中所描述的功能性可提供于经配置以用于编码及解码的专用硬件模块和/或软件模块内,或并入组合式编解码器中。并且,可将所述技术完全实施于一或多个电路或逻辑元件中。
本发明的技术可实施于广泛多种装置或设备中,包含无线手持机、集成电路(IC)或IC组(例如,芯片组)。本发明中描述各种组件、模块或单元来强调经配置以执行所揭示的技术的装置的若干功能性方面,但不一定需要通过不同的硬件单元来实现。而是,如上文所描述,各种单元可联合合适的软件和/或固件而组合于编解码器硬件单元中或通过互操作的硬件单元的集合(包含如上文所描述的一或多个处理器)来提供。
已描述各种实例。这些及其它实例属于所附权利要求书的范围内。

Claims (51)

1.一种对视频数据进行译码的方法,所述方法包括:
针对被分割为瓦片的视频数据图片对第一语法元素的第一值进行译码,其中所述第一语法元素的所述第一值指示允许跨所述图片内的至少一个瓦片边界的环路滤波操作;以及,
响应于所述第一值指示允许跨所述瓦片边界的所述环路滤波操作而执行跨所述至少一个瓦片边界的一个或多个环路滤波操作。
2.根据权利要求1所述的方法,其中所述一个或多个环路滤波操作包括解块滤波操作以及样本自适应偏移滤波操作中的一者或多者。
3.根据权利要求1所述的方法,其中所述一个或多个环路滤波操作包括自适应环路滤波操作。
4.根据权利要求1所述的方法,其中所述第一语法元素的所述第一值指示允许跨所述图片内的所有瓦片边界的环路滤波操作。
5.根据权利要求1所述的方法,其进一步包括:
针对被分割为瓦片的第二视频数据图片对所述第一语法元素的第二值进行译码,其中所述第一语法元素的所述第二值指示不允许跨所述第二图片内的瓦片边界的环路滤波操作。
6.根据权利要求5所述的方法,其进一步包括:
并行地对所述第二图片的两个或更多瓦片进行译码。
7.根据权利要求1所述的方法,其进一步包括:
针对被分割为瓦片的第三视频数据图片对所述第一语法元素的第三值进行译码,其中所述第一语法元素的所述第三值指示允许跨所述第三图片内的所有瓦片边界的环路滤波操作。
8.根据权利要求1所述的方法,其进一步包括:
响应于所述第一语法元素的所述第一值,对表示允许所述环路滤波操作的水平边界的值进行译码。
9.根据权利要求1所述的方法,其进一步包括:
响应于所述第一语法元素的所述第一值,对表示不允许所述环路滤波操作的水平边界的值进行译码。
10.根据权利要求1所述的方法,其进一步包括:
响应于所述第一语法元素的所述第一值,对表示允许所述环路滤波操作的垂直边界的值进行译码。
11.根据权利要求1所述的方法,其进一步包括:
响应于所述第一语法元素的所述第一值,对表示不允许所述环路滤波操作的垂直边界的值进行译码。
12.根据权利要求1所述的方法,其进一步包括:
响应于所述第一语法元素的所述第一值,对表示是否允许在水平方向上跨所述图片内的瓦片边界的环路滤波操作的第二语法元素进行译码。
13.根据权利要求1所述的方法,其进一步包括:
响应于所述第一语法元素的所述第一值,对表示是否允许在垂直方向上跨所述图片内的瓦片边界的环路滤波操作的第二语法元素进行译码。
14.根据权利要求1所述的方法,其进一步包括
响应于所述第一语法元素的所述第一值,对表示是否允许跨所述图片内的水平瓦片边界的环路滤波操作的第二语法元素进行译码,且对表示是否允许跨所述图片内的垂直瓦片边界的环路滤波操作的第三语法元素进行译码。
15.根据权利要求1所述的方法,其中所述第一值对应于所述图片中的一者的切片且表示是否允许跨所述切片所接触的瓦片边界的所述环路滤波操作。
16.根据权利要求1所述的方法,其中通过视频解码器执行所述方法,且其中对所述第一语法元素的所述第一值进行译码包括接收所述第一语法元素且确定所述第一值。
17.根据权利要求1所述的方法,其中通过视频编码器执行所述方法,且其中对所述第一语法元素的所述第一值进行译码包括产生具有所述第一值的所述第一语法元素以供包含于经译码视频数据位流中。
18.一种用于对视频数据进行译码的装置,所述装置包括:
视频译码器,其经配置以:针对被分割为瓦片的视频数据图片对第一语法元素的第一值进行译码,其中所述第一语法元素的所述第一值指示允许跨所述图片内的至少一个瓦片边界的环路滤波操作;以及响应于所述第一值指示允许跨所述瓦片边界的所述环路滤波操作而执行跨所述至少一个瓦片边界的一个或多个环路滤波操作。
19.根据权利要求18所述的装置,其中所述一个或多个环路滤波操作包括解块滤波操作以及样本自适应偏移滤波操作中的一者或多者。
20.根据权利要求18所述的装置,其中所述第一语法元素的所述第一值指示允许跨所述图片内的所有瓦片边界的环路滤波操作。
21.根据权利要求18所述的装置,其中所述视频译码器进一步经配置以针对被分割为瓦片的第二视频数据图片对所述第一语法元素的第二值进行译码,其中所述第一语法元素的所述第二值指示不允许跨所述第二图片内的瓦片边界的环路滤波操作。
22.根据权利要求21所述的装置,其中所述视频译码器进一步经配置以并行地对所述第二图片的两个或更多瓦片进行译码。
23.根据权利要求18所述的装置,其中所述视频译码器进一步经配置以针对被分割为瓦片的第三视频数据图片对所述第一语法元素的第三值进行译码,其中所述第一语法元素的所述第三值指示允许跨所述第三图片内的所有瓦片边界的环路滤波操作。
24.根据权利要求18所述的装置,其中所述视频译码器进一步经配置以响应于所述第一语法元素的所述第一值,对表示允许所述环路滤波操作的水平边界的值进行译码。
25.根据权利要求18所述的装置,其中所述视频译码器进一步经配置以响应于所述第一语法元素的所述第一值,对表示不允许所述环路滤波操作的水平边界的值进行译码。
26.根据权利要求18所述的装置,其中所述视频译码器进一步经配置以响应于所述第一语法元素的所述第一值,对表示允许所述环路滤波操作的垂直边界的值进行译码。
27.根据权利要求18所述的装置,其中所述视频译码器进一步经配置以响应于所述第一语法元素的所述第一值,对表示不允许所述环路滤波操作的垂直边界的值进行译码。
28.根据权利要求18所述的装置,其中所述视频译码器进一步经配置以响应于所述第一语法元素的所述第一值,对表示是否允许在水平方向上跨所述图片内的瓦片边界的环路滤波操作的第二语法元素进行译码。
29.根据权利要求18所述的装置,其中所述视频译码器进一步经配置以响应于所述第一语法元素的所述第一值,对表示是否允许在垂直方向上跨所述图片内的瓦片边界的环路滤波操作的第二语法元素进行译码。
30.根据权利要求18所述的装置,其中所述视频译码器进一步经配置以响应于所述第一语法元素的所述第一值,对表示是否允许跨所述图片内的水平瓦片边界的环路滤波操作的第二语法元素进行译码,且对表示是否允许跨所述图片内的垂直瓦片边界的环路滤波操作的第三语法元素进行译码。
31.根据权利要求18所述的装置,其中所述第一值对应于所述图片中的一者的切片且表示是否允许跨所述切片所接触的瓦片边界的所述环路滤波操作。
32.根据权利要求18所述的装置,其中所述视频译码器包括视频解码器,且其中所述视频译码器进一步经配置以通过接收所述第一语法元素且确定所述第一值来对所述第一语法元素的所述第一值进行译码。
33.根据权利要求18所述的装置,其中所述视频译码器包括视频编码器,且其中所述视频译码器进一步经配置以通过产生具有所述第一值的所述第一语法元素以供包含于经译码视频数据位流中来对所述第一语法元素的所述第一值进行译码。
34.根据权利要求18所述的装置,其中所述装置包括以下各项中的至少一者:
集成电路;
微处理器;以及,
包含所述视频译码器的无线通信装置。
35.一种用于对视频数据进行译码的装置,所述装置包括:
用于针对被分割为瓦片的视频数据图片对第一语法元素的第一值进行译码的装置,其中所述第一语法元素的所述第一值指示允许跨所述图片内的至少一个瓦片边界的环路滤波操作;以及,
用于响应于所述第一值指示允许跨所述瓦片边界的所述环路滤波操作而执行跨所述至少一个瓦片边界的一个或多个环路滤波操作的装置。
36.根据权利要求35所述的装置,其中所述一个或多个环路滤波操作包括解块滤波操作、自适应环路滤波操作以及样本自适应偏移滤波操作中的一者或多者。
37.根据权利要求35所述的装置,其中所述第一语法元素的所述第一值指示允许跨所述图片内的所有瓦片边界的环路滤波操作。
38.根据权利要求35所述的装置,其进一步包括:
用于针对被分割为瓦片的第二视频数据图片对所述第一语法元素的第二值进行译码的装置,其中所述第一语法元素的所述第二值指示不允许跨所述第二图片内的瓦片边界的环路滤波操作。
39.根据权利要求38所述的装置,其进一步包括:
用于并行地对所述第二图片的两个或更多切片进行译码的装置。
40.根据权利要求35所述的装置,其进一步包括:
用于针对被分割为瓦片的第三视频数据图片对所述第一语法元素的第三值进行译码的装置,其中所述第一语法元素的所述第三值指示允许跨所述第三图片内的所有瓦片边界的环路滤波操作。
41.根据权利要求35所述的装置,其进一步包括:
用于响应于所述第一语法元素的所述第一值而对表示允许所述环路滤波操作的水平边界的值进行译码的装置。
42.根据权利要求35所述的装置,其进一步包括:
用于响应于所述第一语法元素的所述第一值而对表示不允许所述环路滤波操作的水平边界的值进行译码的装置。
43.根据权利要求35所述的装置,其进一步包括:
用于响应于所述第一语法元素的所述第一值而对表示允许所述环路滤波操作的垂直边界的值进行译码的装置。
44.根据权利要求35所述的装置,其进一步包括:
用于响应于所述第一语法元素的所述第一值而对表示不允许所述环路滤波操作的垂直边界的值进行译码的装置。
45.根据权利要求35所述的装置,其进一步包括:
用于响应于所述第一语法元素的所述第一值而对表示是否允许在水平方向上跨所述图片内的瓦片边界的环路滤波操作的第二语法元素进行译码的装置。
46.根据权利要求35所述的装置,其进一步包括:
用于响应于所述第一语法元素的所述第一值而对表示是否允许在垂直方向上跨所述图片内的瓦片边界的环路滤波操作的第二语法元素进行译码的装置。
47.根据权利要求35所述的装置,其进一步包括
用于响应于所述第一语法元素的所述第一值而对表示是否允许跨所述图片内的水平瓦片边界的环路滤波操作的第二语法元素进行译码的装置;以及,
用于响应于所述第一语法元素的所述第一值而对表示是否允许跨所述图片内的垂直瓦片边界的环路滤波操作的第三语法元素进行译码的装置。
48.根据权利要求35所述的装置,其中所述第一值对应于所述图片中的一者的切片且表示是否允许跨所述切片所接触的瓦片边界的所述环路滤波操作。
49.根据权利要求35所述的装置,其中所述装置包括视频解码器,且其中所述用于对所述第一语法元素的所述第一值进行译码的装置包括用于接收所述第一语法元素的装置以及用于确定所述第一值的装置。
50.根据权利要求35所述的装置,其中所述装置包括视频编码器,且其中所述用于对所述第一语法元素的所述第一值进行译码的装置包括用于产生具有所述第一值的所述第一语法元素以供包含于经译码视频数据位流中的装置。
51.一种非暂时性计算机可读存储媒体,其存储在由一个或多个处理器执行时致使所述一个或多个处理器进行以下操作的指令:
针对被分割为瓦片的视频数据图片对第一语法元素的第一值进行译码,其中所述第一语法元素的所述第一值指示允许跨所述图片内的至少一个瓦片边界的环路滤波操作;以及,
响应于所述第一值指示允许跨所述瓦片边界的所述环路滤波操作而执行跨所述至少一个瓦片边界的一个或多个环路滤波操作。
CN201280053020.4A 2011-10-28 2012-10-26 瓦片边界上的环路滤波控制 Active CN103947213B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201161553074P 2011-10-28 2011-10-28
US61/553,074 2011-10-28
US13/660,789 2012-10-25
US13/660,789 US20130107973A1 (en) 2011-10-28 2012-10-25 Loop filtering control over tile boundaries
PCT/US2012/062203 WO2013063455A1 (en) 2011-10-28 2012-10-26 Loop filtering control over tile boundaries

Publications (2)

Publication Number Publication Date
CN103947213A true CN103947213A (zh) 2014-07-23
CN103947213B CN103947213B (zh) 2017-05-24

Family

ID=47178949

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280053020.4A Active CN103947213B (zh) 2011-10-28 2012-10-26 瓦片边界上的环路滤波控制

Country Status (7)

Country Link
US (1) US20130107973A1 (zh)
EP (1) EP2772051A1 (zh)
JP (1) JP6054407B2 (zh)
KR (1) KR101670563B1 (zh)
CN (1) CN103947213B (zh)
BR (1) BR112014010101A8 (zh)
WO (1) WO2013063455A1 (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104702963A (zh) * 2015-02-13 2015-06-10 北京大学 一种自适应环路滤波的边界处理方法及装置
CN107683605A (zh) * 2015-06-24 2018-02-09 索尼公司 编码装置、解码装置和传输控制方法
CN109219958A (zh) * 2016-08-22 2019-01-15 联发科技股份有限公司 对位于图像内容不连续性边缘处的重构块不应用环路滤波处理的视频编码方法和设备和相关的视频解码方法和设备
CN110692249A (zh) * 2017-04-11 2020-01-14 Vid拓展公司 使用面部连续性的360度视频编码
CN111183646A (zh) * 2017-09-20 2020-05-19 Vid拓展公司 处理360度视频译码中的面不连续
WO2020135317A1 (en) * 2018-12-28 2020-07-02 Huawei Technologies Co., Ltd. Devices and methods for coding a picture by partitioning it into slices comprising tiles
CN112514390A (zh) * 2020-03-31 2021-03-16 深圳市大疆创新科技有限公司 视频编码的方法和装置
CN112534824A (zh) * 2019-12-31 2021-03-19 深圳市大疆创新科技有限公司 视频编码的方法和装置
WO2021160126A1 (en) * 2020-02-14 2021-08-19 Beijing Bytedance Network Technology Co., Ltd. Interplay between in-loop filtering and video slices
WO2021185311A1 (en) * 2020-03-20 2021-09-23 Mediatek Inc. Method and apparatus for signaling tile and slice partition information in image and video coding
WO2021204234A1 (en) * 2020-04-09 2021-10-14 Beijing Bytedance Network Technology Co., Ltd. Deblocking signaling in video coding
CN114402620A (zh) * 2019-09-23 2022-04-26 高通股份有限公司 用于视频编解码的交叉分量自适应环路滤波的比特移位
US20230059183A1 (en) 2020-04-07 2023-02-23 Beijing Bytedance Network Technology Co., Ltd. Signaling for inter prediction in high level syntax
US11831923B2 (en) 2020-04-17 2023-11-28 Beijing Bytedance Network Technology Co., Ltd. Presence of adaptation parameter set units
US11856237B2 (en) 2020-04-10 2023-12-26 Beijing Bytedance Network Technology Co., Ltd. Use of header syntax elements and adaptation parameter set
US11924474B2 (en) 2020-04-26 2024-03-05 Bytedance Inc. Conditional signaling of video coding Syntax Elements

Families Citing this family (62)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101215152B1 (ko) 2011-04-21 2012-12-24 한양대학교 산학협력단 인루프 필터링을 적용한 예측 방법을 이용한 영상 부호화/복호화 방법 및 장치
WO2013060250A1 (en) * 2011-10-24 2013-05-02 Mediatek Inc. Method and apparatus for non-cross-tile loop filtering
IN2014CN02948A (zh) * 2011-10-31 2015-07-03 Mitsubishi Electric Corp
KR101156667B1 (ko) 2011-12-06 2012-06-14 주식회사 에이디알에프코리아 통신 시스템의 필터 계수 설정 방법
JP6048941B2 (ja) 2012-01-27 2016-12-27 サン パテント トラスト 画像符号化方法、画像復号方法、画像符号化装置及び画像復号装置
CN108965891B (zh) 2012-01-30 2021-06-08 三星电子株式会社 用于视频编码和解码的方法和设备
KR102351132B1 (ko) * 2012-06-26 2022-01-13 엘지전자 주식회사 비디오 인코딩 방법, 비디오 디코딩 방법 및 이를 이용하는 장치
US20140241439A1 (en) * 2012-06-29 2014-08-28 Telefonaktiebolaget L M Ericsson (pulb) Transmitting Apparatus and Method Thereof for Video Processing
CN104704827B (zh) 2012-11-13 2019-04-12 英特尔公司 用于下一代视频的内容自适应变换译码
WO2015056566A1 (ja) * 2013-10-15 2015-04-23 ソニー株式会社 画像処理装置および方法
MX364032B (es) 2013-10-22 2019-04-11 Kt Corp Metodo y dispositivo para codificar/descodificar una señal de video de multicapa.
MX360338B (es) * 2013-10-29 2018-10-30 Kt Corp Metodo y dispositivo de codificacion/decodificacion de señal de video de multiples capas.
KR20150057790A (ko) * 2013-11-20 2015-05-28 삼성전자주식회사 웨이브-프런트 어프로치에 기초한 비디오 프레임의 병렬 처리 방법
CA2964642A1 (en) * 2014-10-31 2016-05-06 Mediatek Inc. Method of improved directional intra prediction for video coding
US10448015B2 (en) 2015-06-16 2019-10-15 Lg Electronics Inc. Method and device for performing adaptive filtering according to block boundary
WO2017190288A1 (en) 2016-05-04 2017-11-09 Microsoft Technology Licensing, Llc Intra-picture prediction using non-adjacent reference lines of sample values
JP2018107500A (ja) * 2016-12-22 2018-07-05 キヤノン株式会社 符号化装置、符号化方法及びプログラム、復号装置、復号方法及びプログラム
JP6902094B2 (ja) 2017-04-06 2021-07-14 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 符号化装置及び復号装置
TW201842768A (zh) * 2017-04-06 2018-12-01 美商松下電器(美國)知識產權公司 編碼裝置、解碼裝置、編碼方法及解碼方法
TWI812378B (zh) * 2017-04-06 2023-08-11 美商松下電器(美國)知識產權公司 解碼裝置、編碼裝置及電腦可讀取之非暫時性媒體
CN109587478B (zh) * 2017-09-29 2023-03-31 华为技术有限公司 一种媒体信息的处理方法及装置
CN109996069B (zh) * 2018-01-03 2021-12-10 华为技术有限公司 视频图像编解码方法及设备
US11676371B2 (en) * 2018-08-17 2023-06-13 Fotonation Limited Apparatus for processing a neural network
WO2020070120A1 (en) * 2018-10-02 2020-04-09 Telefonaktiebolaget Lm Ericsson (Publ) Picture tile attributes signaled using loop(s) over tiles
KR102629907B1 (ko) * 2018-10-02 2024-01-30 텔레호낙티에볼라게트 엘엠 에릭슨(피유비엘) 타일 그룹 id에 기초한 화상들의 인코딩 및 디코딩
KR102154407B1 (ko) * 2018-11-15 2020-09-09 한국전자기술연구원 타일 기반 스트리밍을 위한 모션 제한 av1 영상 부호화 방법 및 장치
SG11202107543SA (en) * 2019-01-09 2021-08-30 Huawei Tech Co Ltd Sub-picture layout signaling in video coding
WO2020177663A1 (en) 2019-03-02 2020-09-10 Beijing Bytedance Network Technology Co., Ltd. Restrictions on partition structures
US11910024B2 (en) * 2019-03-11 2024-02-20 Qualcomm Incorporated Boundary handling for adaptive loop filtering
SG11202109980WA (en) * 2019-03-11 2021-10-28 Huawei Tech Co Ltd Sub-picture level filtering in video coding
JP7233565B2 (ja) 2019-03-24 2023-03-06 北京字節跳動網絡技術有限公司 ビデオ処理におけるマルチパラメータ適応ループフィルタリング
CN115914627A (zh) 2019-04-15 2023-04-04 北京字节跳动网络技术有限公司 自适应环路滤波器中的裁剪参数推导
JP2022527012A (ja) 2019-04-16 2022-05-27 北京字節跳動網絡技術有限公司 映像符号化のためのon適応ループフィルタリング
WO2020216177A1 (en) 2019-04-20 2020-10-29 Beijing Bytedance Network Technology Co., Ltd. Signaling of chroma and luma syntax elements in video coding
WO2020224581A1 (en) 2019-05-05 2020-11-12 Beijing Bytedance Network Technology Co., Ltd. Chroma deblocking harmonization for video coding
KR20220006054A (ko) 2019-05-11 2022-01-14 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩을 위한 필터 디블로킹
WO2020239119A1 (en) 2019-05-30 2020-12-03 Beijing Bytedance Network Technology Co., Ltd. Adaptive loop filtering for chroma components
JP7425808B2 (ja) 2019-06-04 2024-01-31 北京字節跳動網絡技術有限公司 動き候補リスト構築プロセスの条件付き実行
CN117395397A (zh) 2019-06-04 2024-01-12 北京字节跳动网络技术有限公司 使用临近块信息的运动候选列表构建
WO2020249123A1 (en) 2019-06-14 2020-12-17 Beijing Bytedance Network Technology Co., Ltd. Handling video unit boundaries and virtual boundaries
WO2020249124A1 (en) 2019-06-14 2020-12-17 Beijing Bytedance Network Technology Co., Ltd. Handling video unit boundaries and virtual boundaries based on color format
CN117478878A (zh) 2019-07-09 2024-01-30 北京字节跳动网络技术有限公司 用于自适应环路滤波的样点确定
KR102648121B1 (ko) 2019-07-11 2024-03-18 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 적응적 루프 필터링에서의 샘플 패딩
WO2021008511A1 (en) 2019-07-14 2021-01-21 Beijing Bytedance Network Technology Co., Ltd. Geometric partition mode candidate list construction in video coding
WO2021008539A1 (en) 2019-07-15 2021-01-21 Beijing Bytedance Network Technology Co., Ltd. Classification in adaptive loop filtering
WO2021036980A1 (en) 2019-08-23 2021-03-04 Beijing Bytedance Network Technology Co., Ltd. Using boundary strength in deblocking filtering
EP4014497A4 (en) 2019-09-14 2022-11-30 ByteDance Inc. QUANTIZE PARAMETER FOR CHROMINANCE UNBLOCKING FILTERING
CN117278747A (zh) 2019-09-22 2023-12-22 北京字节跳动网络技术有限公司 自适应环路滤波中的填充过程
BR112022005502A2 (pt) * 2019-09-24 2022-06-14 Huawei Tech Co Ltd Flags de filtro para desblocagem de subimagem
JP7326600B2 (ja) 2019-09-27 2023-08-15 北京字節跳動網絡技術有限公司 異なるビデオユニット間の適応ループフィルタリング
WO2021057996A1 (en) 2019-09-28 2021-04-01 Beijing Bytedance Network Technology Co., Ltd. Geometric partitioning mode in video coding
WO2021072177A1 (en) 2019-10-09 2021-04-15 Bytedance Inc. Cross-component adaptive loop filtering in video coding
CN117956146A (zh) 2019-10-10 2024-04-30 北京字节跳动网络技术有限公司 自适应环路滤波中不可用样点位置处的填充处理
CN114586370B (zh) 2019-10-14 2024-01-23 字节跳动有限公司 在视频编解码中使用色度量化参数的方法、装置及介质
CN114946190B (zh) * 2019-11-18 2024-06-14 Lg电子株式会社 用于控制环路滤波的图像编码装置和方法
WO2021118977A1 (en) 2019-12-09 2021-06-17 Bytedance Inc. Using quantization groups in video coding
CN114902684A (zh) * 2019-12-27 2022-08-12 字节跳动有限公司 控制视频编解码中的跨边界滤波
CN114902657A (zh) 2019-12-31 2022-08-12 字节跳动有限公司 视频编解码中的自适应颜色变换
WO2021162494A1 (ko) * 2020-02-14 2021-08-19 엘지전자 주식회사 필터 가용 정보를 선택적으로 시그널링 하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
WO2021201463A1 (ko) * 2020-03-29 2021-10-07 엘지전자 주식회사 인루프 필터링 기반 영상 코딩 장치 및 방법
US11425388B2 (en) * 2020-04-05 2022-08-23 Mediatek Inc. Methods and apparatuses of coding pictures with CTU based slice partitions in video coding system
JP2021064979A (ja) * 2021-01-25 2021-04-22 キヤノン株式会社 符号化装置、符号化方法及びプログラム、復号装置、復号方法及びプログラム

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102223538A (zh) * 2011-06-17 2011-10-19 中兴通讯股份有限公司 一种并行滤波的方法和装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005033336A (ja) * 2003-07-08 2005-02-03 Ntt Docomo Inc 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム
JP5344238B2 (ja) * 2009-07-31 2013-11-20 ソニー株式会社 画像符号化装置および方法、記録媒体、並びにプログラム
US9060174B2 (en) * 2010-12-28 2015-06-16 Fish Dive, Inc. Method and system for selectively breaking prediction in video coding
AU2012294053B2 (en) * 2011-08-11 2016-07-07 Sun Patent Trust Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
WO2013060250A1 (en) * 2011-10-24 2013-05-02 Mediatek Inc. Method and apparatus for non-cross-tile loop filtering

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102223538A (zh) * 2011-06-17 2011-10-19 中兴通讯股份有限公司 一种并行滤波的方法和装置

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
A.FULDSETH: "Replacing slices with titles for high level parallelism", 《JCT-VC OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11》 *
ARILD FULDSETH 等: "Tiles", 《JCT-VC OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11》 *
CHIA-YANG TSAI等: "Slice Boundary Processing and Picture Layer Raw Byte Sequence Payload", 《JCT-VC OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11》 *
CHIH-MING FU等: ""Sample Adaptive Offset with Padding at LCU, Slice, and Image Boundaries"", 《JCT-VC OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11》 *

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104702963B (zh) * 2015-02-13 2017-11-24 北京大学 一种自适应环路滤波的边界处理方法及装置
CN104702963A (zh) * 2015-02-13 2015-06-10 北京大学 一种自适应环路滤波的边界处理方法及装置
CN107683605A (zh) * 2015-06-24 2018-02-09 索尼公司 编码装置、解码装置和传输控制方法
US11297354B2 (en) 2015-06-24 2022-04-05 Sony Corporation Encoding apparatus, decoding apparatus and transmission control method
CN107683605B (zh) * 2015-06-24 2021-12-03 索尼公司 编码装置、解码装置和传输控制方法
CN109219958A (zh) * 2016-08-22 2019-01-15 联发科技股份有限公司 对位于图像内容不连续性边缘处的重构块不应用环路滤波处理的视频编码方法和设备和相关的视频解码方法和设备
CN110692249A (zh) * 2017-04-11 2020-01-14 Vid拓展公司 使用面部连续性的360度视频编码
CN111183646A (zh) * 2017-09-20 2020-05-19 Vid拓展公司 处理360度视频译码中的面不连续
CN111183646B (zh) * 2017-09-20 2023-08-04 Vid拓展公司 用于编码的方法和装置、用于解码的方法和装置以及存储介质
US11838520B2 (en) 2018-12-28 2023-12-05 Huawei Technologies Co., Ltd. Devices and methods for coding a picture by partitioning it into slices comprising tiles
WO2020135317A1 (en) * 2018-12-28 2020-07-02 Huawei Technologies Co., Ltd. Devices and methods for coding a picture by partitioning it into slices comprising tiles
CN114402620A (zh) * 2019-09-23 2022-04-26 高通股份有限公司 用于视频编解码的交叉分量自适应环路滤波的比特移位
CN112534824A (zh) * 2019-12-31 2021-03-19 深圳市大疆创新科技有限公司 视频编码的方法和装置
WO2021134654A1 (zh) * 2019-12-31 2021-07-08 深圳市大疆创新科技有限公司 视频编码的方法和装置
WO2021160125A1 (en) * 2020-02-14 2021-08-19 Beijing Bytedance Network Technology Co., Ltd. Interplay between in-loop filtering and video tiles
WO2021160126A1 (en) * 2020-02-14 2021-08-19 Beijing Bytedance Network Technology Co., Ltd. Interplay between in-loop filtering and video slices
US11825123B2 (en) 2020-02-14 2023-11-21 Beijing Bytedance Network Technology Co., Ltd. Interplay between in-loop filtering and video tiles
WO2021185311A1 (en) * 2020-03-20 2021-09-23 Mediatek Inc. Method and apparatus for signaling tile and slice partition information in image and video coding
TWI796654B (zh) * 2020-03-20 2023-03-21 寰發股份有限公司 圖片和視訊編解碼中以信號通知片和切片分區資訊的方法和裝置
CN112514390A (zh) * 2020-03-31 2021-03-16 深圳市大疆创新科技有限公司 视频编码的方法和装置
CN112514390B (zh) * 2020-03-31 2023-06-20 深圳市大疆创新科技有限公司 视频编码的方法和装置
US11792435B2 (en) 2020-04-07 2023-10-17 Beijing Byedance Network Technology Co., Ltd. Signaling for inter prediction in high level syntax
US20230059183A1 (en) 2020-04-07 2023-02-23 Beijing Bytedance Network Technology Co., Ltd. Signaling for inter prediction in high level syntax
US11743506B1 (en) 2020-04-09 2023-08-29 Beijing Bytedance Network Technology Co., Ltd. Deblocking signaling in video coding
WO2021204234A1 (en) * 2020-04-09 2021-10-14 Beijing Bytedance Network Technology Co., Ltd. Deblocking signaling in video coding
US11856237B2 (en) 2020-04-10 2023-12-26 Beijing Bytedance Network Technology Co., Ltd. Use of header syntax elements and adaptation parameter set
US11831923B2 (en) 2020-04-17 2023-11-28 Beijing Bytedance Network Technology Co., Ltd. Presence of adaptation parameter set units
US11924474B2 (en) 2020-04-26 2024-03-05 Bytedance Inc. Conditional signaling of video coding Syntax Elements

Also Published As

Publication number Publication date
US20130107973A1 (en) 2013-05-02
JP6054407B2 (ja) 2016-12-27
BR112014010101A8 (pt) 2017-06-20
EP2772051A1 (en) 2014-09-03
JP2014534738A (ja) 2014-12-18
CN103947213B (zh) 2017-05-24
BR112014010101A2 (pt) 2017-06-13
WO2013063455A1 (en) 2013-05-02
KR101670563B1 (ko) 2016-10-28
KR20140085541A (ko) 2014-07-07

Similar Documents

Publication Publication Date Title
CN103947213A (zh) 瓦片边界上的环路滤波控制
EP3297283B1 (en) Encoding and decoding videos sharing sao parameters according to a color component
CN103891293A (zh) 用于色度分量的自适应环路滤波
CN113748677A (zh) 编码器、解码器及对应的帧内预测方法
CN104813661A (zh) 在视频译码中跨越受约束块内边界进行环路滤波
CN103703781A (zh) 使用自适应运动向量分辨率的视频译码
CN104247434A (zh) 在视频译码中在切片边界或平铺块边界周围的环路滤波
CN112385234B (zh) 图像和视频译码的设备和方法
CN103959778A (zh) 帧内脉码调制(ipcm)及无损失译码模式视频解块
CN103748875A (zh) 用于应用基于分区的滤波器的视频译码的方法和装置和存储媒体
KR20140017019A (ko) 비디오 코딩을 위한 병렬화 친화적인 병합 후보들
CN103535033A (zh) 用于样本自适应偏移的偏移类型及系数信令方法
KR20140024954A (ko) 일원화된 병합 모드 및 적응적 모션 벡터 예측 모드 후보 선택
CN104012096A (zh) 执行视频译码的运动向量预测
CN103999469A (zh) 执行相依于变换的解块滤波
CN103404144A (zh) 视频译码中的经量化脉码调制
CN103636223A (zh) 用于视频译码的多区扫描次序
CN103959779A (zh) 在视频译码中用于自适应环路滤波和样本自适应偏移的基于最大译码单元(lcu)或分区的语法
CN104054344A (zh) 对色度数据进行解块以用于视频译码
CN116208767B (zh) 一种对码流进行解码的方法、装置以及存储码流的设备
CN104205829A (zh) 合并信令及环路滤波器开/关信令
CN104126301A (zh) 在视频译码中使用码簿对环路滤波器参数进行译码
CN104067524A (zh) 具有精简的初始化值集合的上下文自适应熵译码
CN113508592A (zh) 编码器、解码器及相应的帧间预测方法
CN113170202B (zh) 用于构建应用多假设预测的块的mpm列表的编码器、解码器及相应方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant