CN108419077B - 用于执行样本自适应偏移处理的图像处理方法和设备 - Google Patents

用于执行样本自适应偏移处理的图像处理方法和设备 Download PDF

Info

Publication number
CN108419077B
CN108419077B CN201711114066.3A CN201711114066A CN108419077B CN 108419077 B CN108419077 B CN 108419077B CN 201711114066 A CN201711114066 A CN 201711114066A CN 108419077 B CN108419077 B CN 108419077B
Authority
CN
China
Prior art keywords
maximum
offset
image
sao
transform size
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711114066.3A
Other languages
English (en)
Other versions
CN108419077A (zh
Inventor
郑咏凡
边柱元
杨政烨
张爀在
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN108419077A publication Critical patent/CN108419077A/zh
Application granted granted Critical
Publication of CN108419077B publication Critical patent/CN108419077B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122—Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking

Abstract

提供一种用于执行样本自适应偏移处理的图像处理方法和设备。所述图像处理方法包括：基于最大编码单元(LCU)和编码单元(CU)，对帧图像执行编码操作；设置具有根据在编码操作中的最大变换尺寸调节的值的最大偏移；基于最大偏移，计算用于在样本自适应偏移(SAO)补偿中使用的SAO参数。

Description

用于执行样本自适应偏移处理的图像处理方法和设备
本申请要求于2017年2月10日提交到韩国知识产权局的第10-2017-0018954号韩国专利申请的权益，该韩国专利申请的公开通过引用全部包含于此。
技术领域
本发明构思涉及一种图像处理设备，更具体地，涉及一种用于执行样本自适应偏移(SAO)处理的图像处理方法和设备。
背景技术
随着用于再现和存储高分辨率或高质量视频内容的各种硬件已被开发并被引入市场中，针对用于对高分辨率或高质量视频内容进行高效编码或解码的视频编解码器的需求已经增加。就现有技术的视频编解码器而言，通过使用基于具有预定尺寸的编码单元的受限的编码方法来编码视频。
具体地，可在对视频进行编码和解码的操作期间使用调节重建图像的像素值多达SAO的方法，以最小化原始图像与重建图像之间的误差。然而，在受限的编码方法中，使用SAO的补偿性能可能受到限制。
发明内容
本发明构思提供一种图像处理方法和设备，借此可提高样本自适应偏移(SAO)补偿性能并可减少SAO参数所需的信息量。
根据本发明构思的一个方面，提供一种图像处理方法，包括：基于最大编码单元(LCU)和编码单元(CU)，对帧图像执行编码操作；设置具有根据在编码操作中的最大变换尺寸调节的值的最大偏移；基于最大偏移，计算用于在样本自适应偏移(SAO)补偿中使用的SAO参数。
根据本发明构思的另一方面，提供一种图像处理方法，包括：基于第一最大变换尺寸，对第一图像执行第一编码操作；设置与第一最大变换尺寸对应的第一最大偏移；通过计算小于或等于设置的第一最大偏移的偏移值，对第一图像执行样本自适应偏移(SAO)补偿；基于第二最大变换尺寸，对第二图像执行第二编码操作；设置与第二最大变换尺寸对应的第二最大偏移，其中，第一最大偏移与第二最大偏移的值彼此不同。
根据本发明构思的另一方面，提供一种图像处理设备，包括：变换和量化单元，被配置为基于小于或等于最大变换尺寸的处理单位，对输入图像执行变换操作和量化操作；样本自适应偏移(SAO)编码器，被配置为：接收经由针对变换的和量化的输入图像的逆变换处理和逆量化处理而产生的重建图像，并通过使用具有根据最大变换尺寸的改变调节的值的最大偏移，对重建图像执行SAO补偿。
在另一方面中，一种图像处理方法包括：基于最大编码单元(LCU)和编码单元(CU)，对帧图像执行编码操作；设置具有根据在编码操作中的最大变换尺寸调节的值的最大偏移；基于最大偏移，计算用于在样本自适应偏移(SAO)补偿中使用的SAO参数。
在一个方面中，一种图像处理方法包括：基于第一最大变换尺寸，对第一图像执行第一编码操作；设置与第一最大变换尺寸对应的第一最大偏移；通过计算小于或等于第一最大偏移的第一偏移值，对第一图像执行样本自适应偏移(SAO)补偿；基于第二最大变换尺寸，对第二图像执行第二编码操作；设置与第二最大变换尺寸对应的第二最大偏移，其中，第一最大偏移的第一值与第二最大偏移的第二值不同。
在另一方面中，一种图像处理设备包括：变换和量化单元，被配置为：基于小于或等于最大变换尺寸的处理单位，对输入图像执行变换操作和量化操作；样本自适应偏移(SAO)编码器，被配置为：接收经由针对已执行了变换操作和量化操作的输入图像的逆变换处理和逆量化处理而产生的重建图像，并通过使用具有根据最大变换尺寸的改变而调节的值的最大偏移，对重建图像执行SAO补偿。
附图说明
从下面结合附图进行的详细描述，本发明构思的示例性实施例将被更清楚地理解，其中；
图1是根据本发明构思的示例实施例的包括图像处理器设备的图像处理系统的框图；
图2和图3均是根据本发明构思的示例实施例的在图1中所示的样本自适应偏移(SAO)单元的实施方式示例的框图；
图4是根据本发明构思的示例实施例的图像发送设备的详细配置的框图；
图5A和图5B均是示出根据本发明构思的示例实施例的最大偏移的设置示例的表；
图6A至图6C是根据本发明构思的示例实施例的根据SAO编码操作中的边缘类型对像素进行分类的方法的示图；
图7是根据本发明构思的示例实施例的根据带类型对像素进行分类的实施例的示图；
图8是根据本发明构思的示例实施例的图像处理方法的流程图；
图9是根据本发明构思的另一示例实施例的图像处理方法的流程图；
图10和图11是根据本发明构思的示例实施例的设置最大偏移的示例的示图；
图12、图13A和图13B是根据本发明构思的示例实施例的设置最大偏移的另一示例的示图；
图14是根据本发明构思的示例实施例限定的具有SAO参数的句法结构的示例的示图；
图15示出根据本公开的示例实施例的编码单元的构思；
图16A至图16C是根据本发明构思的示例实施例的最大偏移设置模块的各种操作示例的框图；
图17A和图17B是根据本发明构思的可修改的示例实施例的在SAO补偿中设置最大偏移的示例的示图；
图18是根据本发明构思的示例实施例的图像处理方法的软件实施方式的示例的框图；
图19是根据本发明构思的示例实施例的图像处理设备的配置的框图；
图20是根据本发明构思的示例实施例的包括根据先前实施例的图像处理设备的计算系统的框图。
具体实施方式
在下文中，将参照附图详细描述本发明构思的示例实施例。
图1是根据本发明构思的示例实施例的包括图像处理器设备的图像处理系统10的框图。在图1中所示的图像处理系统10可包括作为根据本发明构思的一个或多个示例实施例的图像处理设备的图像发送设备100和图像接收设备200。可选地，根据本发明构思的一个或多个示例实施例的图像处理设备可具有发送图像的功能和接收图像的功能两者，因此，图像处理设备可对应于图像处理系统10。
图像处理系统10可具有各种类型。例如，图像发送设备100和图像接收设备200可经由图像处理系统10中的无线或有线网络将包括图像的信息发送到彼此或者从彼此接收包括图像的信息。如果图像处理系统10是无线通信系统，则图像发送设备100和图像接收设备200可以是分别对图像进行编码并将图像发送到基站或者对从基站接收的图像进行解码的终端装置，诸如，智能电话。可选地，图像处理系统10可以是网络系统，诸如，互联网广播系统或互联网协议电视(IPTV)系统。
图像发送设备100可根据各种视频标准(诸如，MPEG、H.264/AVC、VP8和高效视频编码(HEVC))来执行编码操作。图像编码操作可针对预定单元的图像(例如，帧图像)被执行，每个帧图像可经由帧间预测(interprediction)来压缩，或者可经由帧内预测(intraprediction)来压缩。当压缩经由帧内预测被执行时，当前帧图像可在不参考先前帧图像的情况下被压缩。此外，当压缩经由帧间预测被执行时，当前帧图像可通过参考一个或多个先前帧图像(例如，重建图像)被压缩。尽管在下文中将参照HEVC的视频标准来描述本发明构思的实施例，但本发明构思也可应用于上述的各种视频标准，诸如，H.264。
根据本发明构思的示例实施例，图像发送设备100可包括：编码器110、第一样本自适应偏移单元120(第一SAO单元120)和打包器130。此外，图像接收设备200可包括：解包器210、第二SAO单元220和解码单元230。图像发送设备100的第一SAO单元120和图像接收设备200的第二SAO单元220中的每个可执行SAO编码操作和/或SAO解码操作。例如，由于图像发送设备100可执行用于发送图像的SAO编码，因此第一SAO单元120可被称为SAO编码器。此外，由于图像接收设备200可执行用于接收图像的SAO解码，因此第二SAO单元220可被称为SAO解码器。在下文中，SAO单元可被称为SAO编码器或SAO解码器。
编码器110可基于最大编码单元(LCU)来执行编码操作。例如，LCU可针对帧图像来定义，并且LCU可根据各种视频标准而被称为宏块。例如，LCU可具有拥有多个像素的尺寸，例如，64×64像素的尺寸。
当编码被执行时，LCU可被分割为多个编码单元(CU)。LCU或CU可对应于一个编码单元，编码器110可根据编码单元执行频率变换和与像素值有关的量化操作。因此，用于执行频率变换和量化操作的单位可对应于CU，用于执行频率变换和量化操作的单位的最大值(例如，最大变换尺寸)可对应于LCU。
此外，编码器110可通过针对被编码的帧图像经由逆量化(例如，逆量化处理)、逆变换(例如，逆变换处理)等执行解码操作来产生重建图像，以执行帧间预测。此外，可执行重建像素的值被调节(或补偿)多达SAO的SAO编码，以最小化原始图像与重建图像之间的误差。第一SAO单元120可计算与包括在LCU或CU中的每个像素对应的偏移值，并可通过将重建图像的像素值加上对应的偏移值来执行样本自适应偏移(SAO)补偿。例如，包括在CU中的像素可根据预定条件被分类为多个块(例如，SAO块)，偏移值可针对每个分类的SAO块来计算。尽管编码器110和第一SAO单元120在图1中被示出为单独的元件，但这仅是为了描述的方便，第一SAO单元120可被包括在编码器110中。此外，第一SAO单元120对应于执行与SAO补偿有关的各种操作的元件，并可被称为SAO处理器。
打包器130可将如上所述编码的帧图像的数据以比特流的形式发送到图像接收设备200。打包器130可执行与编码的数据有关的打包操作，并可经由网络将包发送到图像接收设备200。除了编码的数据之外，包可包括与SAO编码操作有关的编码的SAO参数。
图像接收设备200可接收包，解包器210可从经由网络接收的包提取实际信息部分(例如，净负荷)。解码单元230可经由与接收的信息有关的解码操作在重建步骤中重建帧图像，第二SAO单元220可将重建图像的像素值调节多达偏移值，以最小化原始图像与重建图像之间的误差。当图像接收设备200具有发送图像的功能时，图像接收设备200的第二SAO单元220可以以与图像发送设备100的第一SAO单元120基本相同或相似的方式来实现。
最大偏移可针对SAO编码操作来设置，并且应用于每个像素的偏移值可等于或小于设置的最大偏移，即，存在小于或等于最大偏移的偏移值的分配。根据实施例，第一SAO单元120可包括第一最大偏移设置模块121，第一最大偏移设置模块121可针对预定的图像处理单元自适应地调节最大偏移。根据实施例，设置的最大偏移可作为与SAO编码有关的样本自适应偏移(SAO)参数而被产生，最大偏移可被编码并发送到图像接收设备200。
例如，第一最大偏移设置模块121可基于作为用于执行上述频率变换和量化操作的单位的最大变换尺寸来调节最大偏移。例如，随着最大变换尺寸增大，第一最大偏移设置模块121可减小最大偏移。另一方面，随着最大变换尺寸减小，第一最大偏移设置模块121可增大最大偏移。也就是说，随着最大变换尺寸减小，在频率变换和量化操作期间的信号丢失增加，第一最大偏移设置模块121可增加最大偏移以提高SAO编码的补偿精度。就这一点而言，当最大变换尺寸对应于LCU时，第一最大偏移设置模块121可基于LCU来调节最大偏移。
根据实施例，具有预定参考尺寸的最大变换尺寸可被限定。例如，最大变换尺寸可对应于32×32像素，具有预定值的最大偏移可相应地被限定。第一最大偏移设置模块121可将最大变换尺寸与参考尺寸进行比较，并可在最大变换尺寸大于参考尺寸时减小最大偏移，或者可在最大变换尺寸小于参考尺寸时增加最大偏移。
设置最大偏移的方法可以以各种方式来实现。例如，可针对一个帧图像来限定最大变换尺寸，基于最大变换尺寸设置的最大偏移可通常应用于所述一个帧图像。也就是说，SAO补偿可针对一个帧图像的像素根据设置的最大偏移被执行。
根据另一示例性实施例，可针对多个帧图像来限定最大变换尺寸，基于最大变换尺寸设置的最大偏移可通常应用于所述多个帧图像。根据另一示例性实施例，一个帧图像可被分割为多个区域(例如，片(slice)、第一区域、第二区域等)，可针对每个区域来限定不同的最大变换尺寸。就这一点而言，可针对所述一个针图像来设置多个最大偏移，可针对每个区域来设置具有不同值的最大偏移。根据另一示例性实施例，一个帧图像可被分割为多个CU，可针对每个CU来设置最大偏移。也就是说，每个CU可对应于用于执行上述频率变换和量化操作的一个变换尺寸，可针对每个CU来设置不同的最大偏移。
鉴于以上示例性实施例，存在一种基于第一最大变换尺寸执行对第一图像的第一编码操作的方法。存在设置与第一最大变换尺寸对应的第一最大偏移的方法。通过计算小于或等于第一最大偏移的第一偏移值来对第一图像执行样本自适应偏移(SAO)补偿，此外，基于第二最大变换尺寸，对第二图像执行第二编码操作。第二最大偏移被设置为与第二最大变换尺寸对应，其中，第一最大偏移的第一值与第二最大偏移的第二值不同。第一图像可在第一帧的第一区域中，第二图像可在第一帧的第二区域中。此外，第一最大变换尺寸对应于用于对第一图像执行第一变换操作和第一量化操作的第一最大处理单位，第二最大变换尺寸对应于用于对第二图像执行第二变换操作和第二量化操作的第二最大处理单位。此外，通过计算小于或等于第二最大偏移的第二偏移值来对第二图像执行SAO补偿，其中，当第二最大变换尺寸小于第一最大变换尺寸时，应用于第二图像的第二偏移值的第二最大值大于应用于第一图像的第一偏移值的第一最大值。
当用于设置最大偏移的单位如上所述地改变时，与SAO编码有关的各个SAO参数的发送周期也可被改变。例如，当与SAO编码有关的各个SAO参数针对一个帧图像被设置时，SAO参数可针对每个帧图像被编码，并被发送到图像接收设备200。另一方面，当与SAO编码有关的SAO参数针对一个帧图像中的每个区域被设置时，SAO参数可针对每个区域被编码，并被发送到图像接收设备200。
根据示例性实施例，第一最大偏移设置模块121可进一步地基于指示包括在每个像素中的位的数量的位深度来确定最大偏移。例如，在相同的最大变换尺寸下，第一最大偏移设置模块121可随着位深度增大(即，在像素的位深度增大)而增大最大偏移。另一方面，第一最大偏移设置模块121可随着位深度减小而减小最大偏移。也就是说，第一最大偏移设置模块121可基于最大变换尺寸和位深度的组合来设置最大偏移。
根据上述示例性实施例，应用于SAO补偿的最大偏移可自适应地被调节，因此，可提高重建图像的图片质量，并且还可提高图像发送设备100与图像接收设备200之间的信令(signaling)的压缩性能。例如，可通过自适应地增大最大偏移来减小原始图像与重建图像之间的误差，因此，可提高重建图像的图片质量。此外，可通过自适应地减小最大偏移来减小在与SAO参数有关的编码(例如，熵编码)处理期间的信息的量，因此，可提高图像发送设备100与图像接收设备200之间的信令的压缩性能。
图2和图3均是在图1中所示的第一SAO单元120的实施方式示例的框图。
参照图2，第一SAO单元120可包括第一最大偏移设置模块121和SAO参数产生器122。第一最大偏移设置模块121可根据先前的示例性实施例以各种方式设置最大偏移，例如，第一最大偏移设置模块121可通过使用指示最大变换尺寸(MTS)的第一信息Info_MTS(例如，与最大变换尺寸有关的信息)来设置最大偏移Max_offset。可选地，第一最大偏移设置模块121可通过进一步使用除了第一信息Info_MTS之外的指示位深度的第二信息Info_BD(例如，与输入图像的像素的位深度有关的信息)来设置最大偏移Max_offset。
SAO参数产生器122可基于最大偏移Max_offset来产生用于在SAO补偿中使用的各个SAO参数Para_SAO。例如，SAO参数产生器122可通过使用原始图像Source和重建图像Data_Recon来计算各个SAO参数。此外，各个SAO参数可包括诸如以下信息：设置的最大偏移Max_offset(例如，指示将被用在SAO补偿中的偏移值的参数)、将被应用于每个像素(或者，SAO块)的偏移绝对值、偏移符号和将要选择性地应用SAO补偿的像素(或者，SAO块)。来自SAO参数产生器122的SAO参数Para_SAO可用于在图像发送设备中产生重建图像。此外，SAO参数Para_SAO可被编码并发送到图像接收设备。
参照图3，第一SAO单元120可包括第一最大偏移设置模块121、SAO参数产生器122和SAO补偿器123。以与先前示例性实施例相同的方式或相似的方式，第一最大偏移设置模块121可通过使用指示最大变换尺寸的信息Info_MTS和/或指示位深度的第二信息Info_BD(例如，来自与最大变换尺寸有关的信息和与输入图像的像素的位深度有关的信息之中的至少一个)来设置最大偏移Max_offset，SAO参数产生器122可基于设置的最大偏移Max_offset来产生用于在SAO补偿中使用的SAO参数Para_SAO。此外，SAO补偿器123可接收重建图像的数据Data_Recon和SAO参数Para_SAO，可执行SAO补偿操作，并可输出SAO补偿的数据Data_SAO。
图4是根据本发明构思的示例实施例的图像发送设备100的详细配置的框图。
参照图4，图像发送设备100可包括：第一重建图像缓冲器214、第一帧间预测单元221、第一帧内预测单元222、变换和量化单元234、熵编码单元240(例如，熵编码器)和第一逆变换和逆量化单元250。此外，图像发送设备100还可包括：第一去块(deblocking)单元260、SAO单元(或者，第一SAO编码器270)和模式控制器280。在图4中所示的结构仅是示例性实施例，图像发送设备100还可包括在图4中未示出的其他各种功能块。
第一帧内预测单元222可在帧内模式下对来自当前的帧图像之中的编码单元执行帧内预测。此外，第一帧间预测单元221在帧间模式下通过使用当前的帧图像(例如，输入图像)和根据预测单元从第一重建图像缓冲器214获得的参考图像来对编码单元执行帧间预测。尽管在图4中未示出，但是图像发送设备100还可包括通过使用输入图像和参考图像执行运动估计和补偿的功能块。
从第一帧间预测单元221和第一帧内预测单元222输出的数据(例如，差分数据)可经由变换和量化单元234被输出为量化变换系数。变换和量化单元234可将空域的输入数据变换为频域的数据。例如，频率变换可以是离散余弦变换(DCT)或离散正弦变换(DST)。此外，变换和量化单元234可针对变换的频域的数据使用量化参数(QP)(例如，量化参数信息)执行量化操作。例如，QP可以是具有预定固定值的整数。可选地，在示例实施例中，变换和量化单元234可执行自适应频率加权量化。熵编码单元240可执行与量化变换系数有关的熵编码，并可将比特流发送到图像接收设备200。
量化变换系数可被提供给第一逆变换和逆量化单元250，以产生重建图像。可通过第一逆变换和逆量化单元250将量化变换系数恢复为空间域的数据，并可通过第一去块单元260对重建的空间域的数据执行去块滤波。
第一SAO编码器270可关于已执行了去块滤波的重建图像根据先前的示例性实施例来执行SAO补偿操作。例如，第一SAO编码器270可基于包括最大变换尺寸的各种信息Info来设置或调节最大偏移，并可基于设置的最大偏移通过使用针对重建图像的每个像素计算的偏移值来执行SAO补偿。
第一SAO编码器270可输出已执行了SAO补偿的数据Data_SAO，并且来自第一SAO编码器270的数据Data_SAO可作为参考图像而被存储在第一重建图像缓冲器214中。此外，第一SAO编码器270可产生与SAO补偿有关的各个SAO参数Para_SAO，并且来自第一SAO编码器270的SAO参数Para_SAO可被提供给熵编码单元240，并且因此可被熵编码并被包括在比特流中。例如，比特流可以是能够表示视频数据的网络提取层(NAL)单元流或字节流形式的比特串。
根据示例性实施例，第一SAO编码器270可对每种颜色分量执行SAO补偿。例如，针对YCrCb彩色图像，可对亮度分量(Y分量)以及第一和第二色度分量(Cr分量、Cb分量)中的每个执行SAO补偿。例如，第一SAO编码器270可确定是否对当前的帧图像的亮度分量执行SAO补偿。此外，第一SAO编码器270可确定是否对当前的帧图像的第一色度分量(Cr)和第二色度分量(Cb)执行SAO补偿，并可以以相同的方式来确定。也就是，如果对第一色度分量(Cr)执行SAO补偿，则也可对第二色度分量(Cb)执行SAO补偿。如果不对第一色度分量(Cr)执行SAO补偿，则也可不对第二色度分量(Cb)执行SAO补偿。
模式控制器280可控制变换和量化单元234的操作模式，并且例如，可调节变换和量化单元234的处理单位(例如，变换尺寸)。模式控制器280可输出用于控制变换和量化单元234的操作的各种控制信息，并且例如，与最大处理单位(例如，最大变换尺寸)有关的信息可对应于来自模式控制器280的控制信息，或者可从来自模式控制器280的控制信息被产生。此外，来自模式控制器280的各种控制信息可被熵编码并被包括在比特流中。
根据示例性实施例，发送到图像接收设备的SAO参数的格式可根据设置的最大偏移而被改变。例如，当最大偏移具有大值时，用于指示具有在最大偏移内的值的偏移值的位表示方法可与最大偏移具有小值的情况被不同地限定。例如，当具有大值的最大偏移被设置时，指示偏移值的位数量可对应于相对大的数，反之，当具有小值的最大偏移被设置时，指示偏移值的位数量可对应于相对小的数。图像发送设备可包括SAO参数中的最大偏移和偏移值，并且图像接收设备可通过参考接收的与最大偏移有关的信息来确定包括在SAO参数中的偏移值。此外，当具有小值的最大偏移被设置时，可减少与图像发送设备和图像接收设备中的SAO操作有关的信令中的信息的量。
图5A和图5B均是示出根据本发明构思的示例性实施例的最大偏移的设置示例的表。
如在先前的示例性实施例中一样，SAO编码器可针对每个帧图像、每个LCU或每个CU来设置最大偏移。当针对每个CU来设置最大偏移时，最大偏移可基于与每个CU对应的变换尺寸来设置。也就是说，尽管在图5A和图5B中示出SAO编码器基于最大变换尺寸来设置最大偏移的情况，但本发明构思的示例性实施例不限于此。
参照图5A，最大偏移的值可根据最大变换尺寸MTS而增大或减小。例如，当最大变换尺寸MTS具有预定参考尺寸Size_Ref时，最大偏移的参考值Value_Ref可相应地被限定。例如，当参考尺寸Size_Ref对应于32×32像素的尺寸时，与7对应的参考值Value_Ref可相应地被限定。如果最大偏移针对确定的LCU被设置为7，则SAO补偿可通过将针对包括在LCU或从LCU分割的CU中的像素的加上或减去最大至7的偏移值来执行。
另一方面，当最大变换尺寸MTS小于参考尺寸Size_Ref时(例如，16×16像素或8×8像素)，最大偏移Max offset可被设置为大于参考值Value_Ref。例如，最大偏移Maxoffset可根据最大变换尺寸MTS被调节为各种步长(诸如，15、31和63)。另一方面，当最大变换尺寸MTS大于参考尺寸时Size_Ref(例如，32×64像素或64×64像素)，最大偏移Maxoffset可被设置为小于参考值Value_Ref。
尽管在图5A的表中示出与32×32像素对应的最大变换尺寸MTS对应于参考尺寸Size_Ref，但本发明构思的示例性实施例不限于此。例如，在HEVC视频标准中，LCU可变化，各种尺寸(诸如，64×64和32×64)的像素可被限定为参考尺寸Size_Ref。
图5B示出SAO编码器基于最大变换尺寸MTS和位深度BD来调节或设置最大偏移Maxoffset的示例。如在图5A的示例性实施例中一样，在位深度BD相同的条件下，当最大变换尺寸MTS减小时，最大偏移Max offset可增大，并且当最大变换尺寸MTS增大时，最大偏移Maxoffset可减小。
当像素具有大的位深度BD时，包括在每个像素中的位的数量增加，并且随着每个像素值的范围增加，像素必须经由SAO补偿而被补偿的偏移值的范围需要增加。因此，在最大变换尺寸MTS相同的条件下，当位深度BD大时，最大偏移Max offset可增大，并且当位深度BD小时，最大偏移Max offset可减小。
此外，可针对位深度BD来限定预定参考位数量Num_Ref。根据上述参考，当最大变换尺寸MTS大于参考尺寸Size_Ref或者位深度BD小于参考位数量Num_Ref时，最大偏移Maxoffset可减小。另一方面，当最大变换尺寸MTS小于参考尺寸Size_Ref或者位深度BD大于参考位数量Num_Ref时，最大偏移Max offset可增大。此外，可存在诸如最大变换尺寸MTS和位深度BD二者均大于或小于参考的情况的各种条件，并且就这一点而言，最大偏移Maxoffset可经由SAO编码器中的功能操作、表信息分析等而被不同地调节。
图6A至图6C是根据SAO编码操作中的边缘类型对像素进行分类的方法的示图。图6A示出边缘类型的类别(class)，图6B和图6C示出边缘类型的种类(category)。
根据SAO编码的技术，在对像素进行分类时，像素可根据由重建像素(诸如，样本)构成的边缘类型来分类，或者像素可根据重建像素的带类型来分类。根据示例实施例，边缘可基于SAO类型限定是根据类型还是带类型来对像素进行分类。
首先将参照图6A至图6C描述根据边缘类型来对像素进行分类的示例性实施例。
图6A示出边缘类型的类别。当边缘类型的偏移针对LCU被确定时，包括在LCU中的每个重建像素的边缘类型可被确定。也就是说，当前的重建像素的边缘类别可通过将当前的重建像素与相邻像素的像素值相互比较来限定。
边缘类别的索引可被顺序分配为0、1、2和3。边缘类型出现的频率越高，边缘类别的索引就越小。
边缘类别可指示在当前的重建像素X0与两个相邻像素之间形成的一维边缘的方向。具有索引0的边缘类别可指示在当前的重建像素X0与两个水平相邻像素X1和X2之间形成边缘的情况。具有索引1的边缘类别可指示在当前的重建像素X0与两个垂直相邻像素X3和X4之间形成边缘的情况。具有索引2的边缘类别可指示在当前的重建像素X0与两个成135°对角的相邻像素X5和X8之间形成边缘的情况。具有索引3的边缘类别可指示在当前的重建像素X0与两个成45°对角的相邻像素X6和X7之间形成边缘的情况。因此，通过分析包括在当前的LCU中的重建像素的边缘方向，当前的LCU的边缘类别可被确定。
针对每个边缘类别，可根据当前的像素的边缘形状来分类种类。现在将参照图6B和图6C描述根据边缘形状的种类的示例。
图6B和图6C示出根据示例实施例的边缘类型的种类。更详细地，图6B示出用于确定边缘的种类的条件，图6C示出重建像素与相邻像素之间的边缘形状和它们的像素值c、a和b的曲线图。边缘种类可指示当前的像素是凹形边缘的最低点、位于凹形边缘的最低点周围的弧形拐角的像素、凸形边缘的最高点还是位于凸形边缘的最高点周围的弧形拐角的像素。
c可指示重建像素的索引，a和b可指示根据边缘方向的在当前的重建像素的两侧的相邻像素的索引。Xa、Xb和Xc可分别指示具有索引a、b和c的重建像素的像素值。在图6C的曲线图中，x轴可表示重建像素和在重建像素的两侧的相邻像素的索引，y轴可表示像素的像素值。
第一种类1可指示当前的像素是凹形边缘的最低点(即，局部谷(Xc<Xa &&Xc<Xb))的情况。如在第一种类1的曲线图中所示，当在相邻像素a与b之间的当前的重建像素c是凹形边缘的最低点时，当前的重建像素可被分类为第一种类1。
第二种类2可指示当前的像素位于凹形边缘的最低点周围的弧形拐角(即，凹形拐角(Xc<Xa&&Xc＝＝Xb||Xc＝＝Xa&&Xc<Xb))的情况。如在第二种类2的曲线图中所示，当在相邻像素a与b之间的当前的重建像素c位于凹形边缘的向下曲线的终点时(Xc<Xa&&Xc＝＝Xb)，或着当当前的重建像素c位于凹形边缘的向上曲线的起点时(Xc＝＝Xa&&Xc<Xb)，当前的重建像素可被分类为第二种类2。
第三种类3可指示当前的像素位于凸形边缘的最高点周围的弧形拐角(即，凸形拐角(Xc>Xa&&Xc＝＝Xb||Xc＝＝Xa&&Xc>Xb))的情况。如在第三种类3的曲线图中所示，当在相邻像素a与b之间的当前的重建像素c位于凸形边缘的向下曲线的起点时(Xc＝＝Xa&&Xc>Xb)，或者当当前的重建像素c位于凸形边缘的向上曲线的终点时(Xc>Xa&&Xc＝＝Xb)，当前的重建像素可被分类为第三种类3。
第四种类4可指示当前的像素是凸形边缘的最高点(即，局部峰(Xc>Xa &&Xc>Xb))的情况。如在第四种类4的曲线图中所示，当在相邻像素a与b之间的当前的重建像素c是凸形边缘的最高点时，当前的重建像素可被分类为第四种类4。
当当前的重建像素不满足第一种类1、第二种类2、第三种类3和第四种类4的条件时，当前的重建像素不是边缘，并因此被分类为零种类0，并且零种类0的偏移值可不被编码。
在示例实施例中，针对与相同种类对应的重建像素，重建像素与原始像素之间的差值的平均值可被确定为当前种类的偏移值。此外，偏移值可针对每个种类来确定。平均值可针对通过上述方法确定的每个种类被计算，并且就这一点而言，每个种类可对应于一个SAO块。
图7是根据带类型对像素进行分类的示例性实施例的示图。
根据示例性实施例，每个重建像素可属于多个带中的一个带。例如，根据p位采样获得的像素值可具有最小值Min、最大值Max和总范围(Min、……、(Min+2^(p-1))(＝Max))。当像素值的总范围(Min，Max)被划分为K个像素值区段时，每个像素值区段可被称为一个带。当Bk指示第k带的最大值时，带可被划分为[B0，B1-1]、[B1，B2-1]、[B2，B3-1]、……、[Bk-1，Bk]。当当前的重建像素的像素值属于带[Bk-1，Bk]时，当前的像素可被确定为属于带k。带可被均匀地或非均匀地划分。
例如，当像素值被分类为均匀的8位像素带时，像素值可被划分为32个带。更详细地，它们可被分类为带[0，7]、[8，15]、……、[240，247]和[248，255]。
从根据带类型分类的多个带之中，可确定每个重建像素的像素值所属的带。此外，指示每个带中的原始像素与重建像素之间的误差的平均值的偏移值可被确定。就这一点而言，每个带可对应于一个SAO块。
图8是根据本发明构思的示例实施例的图像处理方法的流程图。
参照图8，图像处理设备(例如，图像发送设备)可针对帧图像执行编码操作，并可执行与编码图像有关的解码操作，以产生用于在图像处理设备中的帧间预测中使用的参考图像。此外，SAO编码操作可针对重建图像被执行，SAO补偿可使用等于或小于最大偏移的偏移值来执行。
例如，变换和量化操作可在与帧图像有关的编码操作中被执行，并且变换和量化操作可针对LCU或针对通过将LCU分割至少一次而产生的CU被执行。就这一点而言，用于执行变换和量化操作的最大变换尺寸可对应于LCU，可设置具有根据最大变换尺寸调节的值的最大偏移(操作S11)。
此外，在执行SAO编码操作中，可执行与包括在CU中的像素有关的分类操作(操作S12)，CU可包括根据分类结果的一个或多个SAO块。此外，根据与像素有关的分类结果，可在设置的最大偏移内计算偏移值(操作S13)。例如，可针对多个SAO块被计算彼此不同的偏移值，相同的偏移值可被应用于属于任意一个SAO块的像素。可执行根据如上所述计算的偏移值的SAO补偿操作(操作S14)。
图9是根据本发明构思的另一示例实施例的图像处理方法的流程图。在图9中所示的第一LCU和第二LCU可被包括在同一帧图像中。可选地，第一LCU可被包括在第一帧图像中，第二LCU可被包括在第二帧图像中。
参照图9，可针对具有第一最大变换尺寸的第一LCU来设置第一最大偏移(操作S21)。此外，第一LCU可被分割为多个CU(操作S22)，或者可被分割为一个或多个编码单元，并且根据先前的示例性实施例的分类操作可针对多个CU中的每个被执行。此外，根据分类的结果，可针对每个CU执行使用在第一最大偏移内计算的偏移值的SAO补偿操作(操作S23)。
第二LCU可具有第二最大变换尺寸，第二最大变换尺寸和第一最大变换尺寸可具有彼此不同的值。因此，可针对第二LCU来设置第二最大偏移(操作S24)。根据先前的示例性实施例，当第二最大变换尺寸大于第一最大变换尺寸时，第二最大偏移可小于第一最大偏移。另一方面，当第二最大变换尺寸小于第一最大变换尺寸时，第二最大偏移可大于第一最大偏移，例如，第一最大偏移的第一值与第二最大偏移的第二值可不同，或者第一偏移的第一最大值与第二偏移的第二最大值可不同。以与第一LCU相似的方式，第二LCU可被分割为多个CU(操作S25)或一个或多个编码单元，并且可针对多个CU中的每个执行使用在第二最大偏移内计算的偏移值的SAO补偿操作(操作S26)。
图10和图11是设置最大偏移的示例的示图。
根据示例性实施例，偏移值可经由下面的第一等式1来计算。
【第一等式1】
SaoOffsetVal＝SaoOffsetSign×SaoOffsetAbs<<SaoOffsetScale
关于HEVC的参数设置，例如，在上面的第一等式1中，SaoOffsetVal可表示偏移值，SaoOffsetSign可表示偏移符号，SaoOffsetAbs可表示偏移绝对值，SaoOffsetScale可表示偏移规模信息(offset scale information)。此外，等式符号<<可表示位移位操作。
图10和图11示出根据最大变换尺寸限定偏移绝对值SaoOffsetAbs的最大值的示例。参照图10，最大偏移可经由根据预定的功能公式的操作处理(即，预定的功能公式操作)被计算。例如，SAO编码器可包括第二最大偏移设置模块310，第二最大偏移设置模块310可包括使用输入值执行预定的操作处理的操作单元311。第二最大偏移设置模块310的功能可以以硬件方式来实现，或者可通过执行存储在工作存储器(未示出)中的程序以软件的方式来实现，其中，程序能够由主处理器执行。
根据示例性实施例，操作单元311可接收信息的输入(例如，与最大变换尺寸有关的第一信息Info_MTS和与位深度有关的第二信息Info_BD的输入)，并可通过执行与第一信息Info_MTS和第二信息Info_BD有关的功能操作来计算最大偏移Max offset(或Max_offset)。也就是说，操作单元311可基于输入的第一信息Info_MTS和第二信息Info_BD实时计算最大偏移Max offset。
图11示出由在图10中所示的第二最大偏移设置模块310计算的最大偏移Maxoffset的示例。如上面所述的功能公式，根据在图11中所示的公式的操作可被执行，因此，在图11中所示的表中的最大偏移Max offset(即，最大偏移绝对值SaoOffsetAbs)可被计算。
作为该操作的示例，从位深度值和预定的位数量(例如，10位)之中选择较小的值，并计算通过将对数应用于最大(MAX)变换尺寸TxMAX获得的值与选择的值之间的差。此外，执行多达与计算的差对应的位数量的移位操作，并可将移位操作结果减去1。根据上述的操作结果，图11的表中示出以下示例：当最大变换尺寸TxMAX是32×32时，最大偏移Max offset被计算为7；当最大变换尺寸TxMAX是16×16时，最大偏移Max offset被计算为15；当最大变换尺寸TxMAX是8×8时，最大偏移Max offset被计算为31；当最大变换尺寸TxMAX是4×4时，最大偏移Max offset被计算为63。
图12至图13B是设置最大偏移的另一示例的示图。图12至图13B示出与上述的多条信息Info_MTS和Info_BD对应的最大偏移Max offset被预先计算并以表的形式被存储以及与输入的多条信息Info_MTS和Info_BD对应的最大偏移Max offset从信息表被读取的示例。此外，图12至图13B示出根据最大变换尺寸限定偏移绝对值SaoOffsetAbs的最大值的示例。
参照图12，第三最大偏移设置模块320可包括查找表(LUT)322，并且还可包括表访问单元321，其中，与关于最大变换尺寸的第一信息Info_MTS和关于位深度的第二信息Info_BD对应的最大偏移Max offset被存储在查找表322中，表访问单元321根据上述的第一信息Info_MTS和第二信息Info_BD访问查找表322。
响应于第一信息Info_MTS和第二信息Info_BD优化的最大偏移Max offset可被计算并被存储在查找表322中，并且例如，存储的最大偏移Max offset可对应于在图13A和图13B中所示的最大偏移。图13A和图13B示出在当在量化处理期间应用的QP对应于51时出现与228对应的最大误差的情况下最大偏移Max offset的计算实例。此外，尽管图13A和图13B示出在特定值的位深度(例如，8位)根据最大变换尺寸的最大偏移Max offset，但关于与具有其他值的位深度对应的最大偏移Max offset的信息也可被存储在查找表322中。
参照图13A和图13B，当最大变换尺寸是32×32时，每个像素的平均误差具有大约7.125的值，与7对应的最大偏移Max offset可被存储为对应于32×32的最大变换尺寸。相似地，与14对应的最大偏移Max offset可被存储在查找表322中以对应于16×16的最大变换尺寸，与28对应的最大偏移Maxoffset可被存储在查找表322中以对应于8×8的最大变换尺寸，与57对应的最大偏移Max offset可被存储在查找表322中以对应于4×4的最大变换尺寸。
在设置最大偏移中，下面的第二等式2指示使用根据最大变换尺寸改变上面的第一等式1中的偏移规模信息SaoOffsetScale的方式的示例。
【第二等式2】
SaoOffsetScale＝Max(0,Bitdepth-10)+5–LOG2(TxMAX)
偏移值的最大值可使用上面的第一等式1和第二等式2来调节。例如，偏移值SaoOffsetVal可根据偏移规模信息SaoOffsetScale经由移位操作而增大，偏移规模信息SaoOffsetScale的值可根据最大变换尺寸TxMAX来改变。例如，当位深度对应于11位，并且最大变换尺寸TxMAX对应于32×32时，偏移规模信息SaoOffsetScale可对应于1。也就是，根据第二等式2，随着最大变换尺寸TxMAX减小，偏移规模信息SaoOffsetScale的值增大，并且，当应用第一等式1和第二等式2时，偏移规模信息SaoOffsetScale具有大值，并且因此，最大偏移可增加。
图14是具有限定的SAO参数的句法结构的示例的示图。句法结构可被不同地修改，并且因此，下面将省略与本发明构思的示例性实施例无关的图14的详细描述。
图像发送设备可将包括在图14中所示的句法的比特流发送到图像接收设备，图像接收设备可通过对句法进行解析来获得SAO参数，并可基于SAO参数执行SAO补偿。
句法可包括指示在当前的帧图像(或片)中是否执行了SAO补偿并指示边缘类型或带类型的参数SaoTypeIdx。参数SaoTypeIdx可包括与边缘类型中的边缘种类有关的信息或与带类型中的带种类有关的信息。此外，句法可包括在帧图像中针对每个SAO块计算的偏移值(例如，SAO偏移绝对值sao_offset_abs)。根据本发明构思的示例性实施例，最大偏移可基于最大变换尺寸来调节，SAO偏移绝对值sao_offset_abs可对应于设置的最大偏移内的值。
此外，句法可包括指示针对每个像素是加上SAO偏移绝对值还是减去SAO偏移绝对值的偏移符号信息sao_offset_sign。此外，句法可包括指示来自多个SAO块之中的将执行SAO补偿的块的位置的带位置信息sao_band_position。例如，带位置信息sao_band_position可指示来自多个带之中的将执行SAO补偿的带的开始位置，并且可对从由带位置信息sao_band_position指示的带开始的预定数量的带执行SAO补偿。此外，SAO补偿可针对亮度分量和色度分量中的每个被执行，并且句法可包括指示是否针对亮度分量执行SAO补偿的信息sao_eo_class_luma和指示是否针对色度分量执行SAO补偿的信息sao_eo_class_chroma。
图15示出根据本公开的示例实施例的编码单元的构思。编码单元可以是与上述的变换尺寸或CU对应的单元。
参照图15，编码单元的尺寸可由宽度×高度来表示，并且可以是64×64、32×32、16×16和8×8。64×64的最大编码单元可被分割为64×64、64×32、32×64或32×32的编码单元，32×32的编码单元可被分割为32×32、32×16、16×32或16×16的编码单元，16×16的编码单元可被分割为16×16、16×8、8×16或8×8的编码单元，8×8的编码单元可被分割为8×8、8×4、4×8或4×4的编码单元。
例如，在第一帧图像410中，分辨率可以是1920×1080，编码单元的最大尺寸可以是64，最大深度可以是2。可选地，在第二帧图像420的情况下，分辨率可以是1920×1080，编码单元的最大尺寸可以是64，最大深度可以是3。可选地，在第三帧图像430的情况下，分辨率可以是352×288，编码单元的最大尺寸可以是16，最大深度可以是1。在图15中所示的最大深度表示从LCU到最小编码单元的分割的总数量。
当分辨率高或数据量大时，优选地，编码单元的最大尺寸大，以便提高编码效率并准确地反映图像特性。因此，具有高分辨率的第一帧图像410和第二帧图像420的编码单元的最大尺寸可被选择为64。
由于第一帧图像410的最大深度是2，因此第一帧图像410的第一编码单元415可包括具有64的长轴尺寸，并且由于深度通过分割LCU两次而被加深为两层而包括具有32和16的长轴尺寸的编码单元。另一方面，由于第三帧图像430的最大深度是1，因此第三帧图像430的第三编码单元435可包括具有16的长轴尺寸，并由于深度通过分割LCU一次而被加深为一层而包括具有8的长轴尺寸的编码单元。
由于第二帧图像420的最大深度是3，因此第二帧图像420的第二编码单元425可包括具有64的长轴尺寸，并由于深度通过分割LCU三次而被加深为三层而包括具有32、16和8的长轴尺寸的编码单元。随着深度加深，表示详细信息的能力可提高。
图16A至图16C是可应用于本发明构思的示例性实施例的最大偏移设置模块的各种操作示例的框图。在图16A至图16C中所示的第四最大偏移设置模块510A、第五最大偏移设置模块510B和第六最大偏移设置模块510C可经由根据先前的示例性实施例的各种方法来计算最大偏移Max offset，例如，可经由使用预定的功能公式的操作实时计算最大偏移Max offset，或者可通过读取以表的形式预先存储的信息(即，访问表信息)来获得最大偏移Max offset。
参照图16A，与LCU对应的图像A的尺寸可对应于最大变换尺寸，最大变换尺寸信息Info_MTS可被提供给第四最大偏移设置模块510A。与LCU对应的图像A可根据先前的示例性实施例被分割至少一次，并且变换和量化处理可针对分割的图像B1至B4中的每个被执行。
最大偏移Max offset[A]可针对与LCU对应的每个图像A被设置，例如，当最大偏移Max offset[A]被设置时，设置的最大偏移Max offset[A]可通常被应用于分割的图像B1至B4。此外，在根据先前的示例性实施例的句法结构中，基于最大偏移Max offset[A]产生的SAO参数可针对每个LCU被编码并被发送。
参照图16B，与LCU对应的图像A可被分割为多个图像B1至B4，并且最大偏移可针对多个图像B1至B4中的每个被设置。例如，第五最大偏移设置模块510B可计算并输出与图像B1至B4分别对应的最大偏移Max offset[B1:B4]。因此，彼此不同的最大偏移Max offset[B1:B4]可被应用于图像B1至B4。此外，在根据先前的示例性实施例的句法结构中，基于最大偏移Max offset[B1:B4]产生的SAO参数可针对每个CU被编码并被发送。
参照图16C，帧图像C可包括与最大编码单元(LCU)(即，多个LCU)对应的图像D1至D4，并且与至少一些LCU对应的图像可被分割为多个CU。例如，与LCU对应的图像D2可被分割为与多个CU对应的图像D21至D24。
最大偏移Max offset[C]可针对每个帧图像C被设置。例如，最大变换尺寸可针对帧图像C被限定，第六最大偏移设置模块510C可计算与最大变换尺寸对应的最大偏移Maxoffset[C]。最大偏移Max offset[C]可通常被应用于帧图像C。此外，在根据先前的示例性实施例的句法结构中，基于最大偏移Max offset[C]产生的SAO参数可针对每个帧图像被编码并被发送。
图17A和图17B是根据本发明构思的可修改的示例性实施例的调节最大偏移的示例的示图。
图17A示出与根据QP的偏移值的分布有关的实验结果曲线图的示例。图17A可以是通过将不同的QP应用于同一变换尺寸而获得的偏移值的分布的曲线图。
当QP具有小值(例如，量化参数值具有小值)时，在编码处理期间的损失可能小。因此，当QP具有小值时，SAO补偿操作所需的大多数偏移值可分布在值1的周围。也就是说，当QP具有小值时，在SAO补偿中使用的偏移值可具有小的动态范围。
另一方面，当QP具有大值时，在编码处理期间的损失可能大。因此，当QP具有大值时，与QP具有小值的情况相比，SAO补偿操作所需的偏移值可分布在各种值上。也就是说，当QP具有大值时，在SAO补偿中使用的偏移值可具有大的动态范围。
如在图17B中所示，第二SAO编码器600可包括第七最大偏移设置模块610和SAO处理器620。尽管图17B为了说明的方便而示出处理器620计算SAO参数并执行SAO补偿的SAO，但SAO参数的计算和SAO补偿可如在先前的示例性实施例中一样通过单独的功能块来执行。
第七最大偏移设置模块610可接收QP信息QP in MTS和最大变换尺寸信息Info_MTS，并可基于QP信息QP in MTS和最大变换尺寸信息Info_MTS来计算最大偏移Max_offset。根据示例性实施例，第七最大偏移设置模块610还可接收变换跳过信息Info_Tx_skip，变换跳过信息Info_Tx_skip可指示变换操作在图像处理过程期间是否已被跳过。例如，在诸如HEVC的视频标准中，量化操作可在不执行变换操作的情况下被执行，变换跳过信息Info_Tx_skip的值可根据是否执行变换操作而被改变。当变换操作没有被执行时，上述的变换尺寸可对应于最小尺寸(例如，1×1像素尺寸)。
根据示例性实施例，第七最大偏移设置模块610可在变换跳过信息Info_Tx_skip被激活时将最大偏移Max offset计算为最大值。例如，当变换跳过信息Info_Tx_skip被激活时，预定的最大值可在不执行单独的操作的情况下被计算为最大偏移Max offset。
此外，根据示例性实施例，QP信息QP in MTS可对应于应用于最大变换尺寸的QP。如在先前的示例性实施例中一样，最大偏移Max_offset可根据应用于最大变换尺寸的QP的值而增大或减小。
SAO处理器620可基于来自第七最大偏移设置模块610的最大偏移Max_offset来产生SAO参数。如在先前的示例性实施例中一样，SAO处理器620可基于原始图像Source和重建图像Data_Recon来产生SAO参数。此外，SAO参数可包括各种信息，诸如，用于SAO补偿的偏移值、偏移符号和SAO补偿位置。
根据示例性实施例，SAO处理器620可通过进一步使用QP来计算偏移值。例如，SAO处理器620可基于原始图像Source和重建图像Data_Recon的像素值来计算将被分配给像素(或者，SAO块)的偏移值。就这一点而言，计算的偏移值可根据应用于每个CU或者SAO处理单元的QP来调节。根据示例性实施例，当最大偏移Max_offset随着QP信息QP in MTS具有大值而增大时，可基于QP执行调节操作以减小偏移值。另一方面，当最大偏移Max_offset随着QP信息QP in MTS具有小值而减小时，可基于QP执行调节操作以增大偏移值。经由上述基于QP的调节操作，最优偏移值可通过考虑重建图像(或者，参考图像)的图片质量和SAO参数的信息的量而被计算。
图18是根据本发明构思的示例性实施例的图像处理方法的软件实施方式的示例的框图。
参照图18，第一图像处理设备700可包括处理器710和工作存储器720。处理器710可执行存储在工作存储器720中的程序。工作存储器720可以软件方式储存用于处理根据先前的示例性实施例的用于SAO处理的各种功能中的至少一些功能的程序，并且程序可根据功能包括最大偏移确定模块721、像素分类模块722和偏移值计算模块723。
例如，根据本发明构思的示例性实施例，处理器710可控制整体SAO处理操作。例如，处理器710可通过执行最大偏移确定模块721来确定与预定单元(例如，帧图像、LCU、CU等)有关的最大偏移。例如，当最大偏移确定模块721被执行时，根据先前的示例性实施例的功能公式操作可被执行，或者表信息的访问操作可被执行，并且基于此，最大偏移可被确定。
此外，处理器710可通过执行像素分类模块722来执行与SAO补偿有关的像素的分类操作。例如，边缘类型或带类型可应用于像素，像素可基于各种类别和种类经由分类操作被分类为一个或多个SAO块。此外，处理器710可经由偏移值计算模块723的执行针对每个像素计算用于SAO补偿的偏移值，并且根据示例性实施例，偏移值可针对经由分类操作分类的每个SAO块被计算。尽管在图18中未示出，但是使用计算的偏移值的SAO补偿操作可被执行，并且SAO补偿操作可以以硬件方式或软件方式被执行。
图19是根据本公开的示例实施例的第二图像处理设备800的配置的框图。图19的第二图像处理设备800可对应于对接收的比特流执行解码操作的图像接收设备。
第二图像处理设备800可包括：熵解码单元810、第二逆量化单元820、逆第二变换单元830、第二帧间预测单元841、第二帧内预测单元842、第二去块单元850、SAO解码器860和第二重建图像缓冲器870。
第二图像处理设备800可接收包括编码的图像数据的比特流。熵解码单元810可具有从比特流解析的帧内模式信息、帧间模式信息、SAO参数、图像数据等。从熵解码单元810提取的图像数据可以是量化变换系数。第二逆量化单元820可通过针对图像数据执行逆量化来恢复变换系数，第二逆变换单元830可通过针对恢复的变换系数执行逆变换来恢复空域的多条图像数据。
针对空域的图像数据，第二帧内预测单元842可对帧内模式的编码单元执行帧内预测。此外，第二帧间预测单元841可通过使用来自第二重建图像缓冲器870的参考图像来执行帧间预测。输出图像可通过关于已通过第二帧间预测单元841或第二帧内预测单元842的空间域的图像使用第二去块单元850和SAO解码器860的后处理操作被产生。
SAO解码器860可通过使用由熵解码单元810提取的SAO参数来执行SAO解码操作。根据本发明构思的示例性实施例，在SAO解码操作中使用的最大偏移值可针对每个帧图像、每个LCU或每个CU被调节。
图20是根据示例性实施例的计算系统900的框图，计算系统900包括根据先前的示例性实施例的图像处理设备。
参照图20，计算系统900可包括：应用处理器910、存储器装置920、存储装置930、输入/输出(I/O)装置940、电源950和图像传感器960。尽管在图20中未示出，但计算系统900还可包括用于与视频卡、声卡、存储器卡、通用串行总线(USB)装置或其他电子装置通信的端口。
应用处理器910可被实现为片上系统(SoC)。应用处理器910可执行特定的计算或任务。在一些示例性实施例中，应用处理器910可包括微处理器和中央处理器(CPU)。应用处理器910可经由地址总线、控制总线和数据总线与存储器装置920、存储装置930和输入/输出装置940通信。存储器装置920可存储计算系统900的操作所需的数据。例如，存储器装置920可被实现为动态随机存取存储器(DRAM)、移动DRAM、SRAM、闪存、PRAM、FRAM、电阻式随机存取存储器(RRAM)和/或磁阻式随机存取存储器(MRAM)。存储装置930可包括：固态驱动器(SSD)、硬盘驱动器(HDD)或CD-ROM。输入/输出装置940可包括输入工具(诸如，键盘、按键、鼠标等)和输出工具(诸如，打印机、显示器等)。电源950可提供计算系统900的操作所需的工作电压。
应用处理器910可包括执行根据本发明构思的一个或多个示例性实施例的图像处理操作的编解码模块911，编解码模块911可包括SAO单元911_1。SAO单元911_1可确定预定单位的尺寸(例如，最大变换尺寸)，并可基于预定单元的尺寸调节用于SAO补偿的最大偏移值。此外，针对每个像素的SAO补偿操作可根据调节的最大偏移值被执行。
在根据本发明构思的一个或多个示例性实施例的图像处理方法和设备中，SAO补偿性能可通过在SAO编码中自适应地增加最大偏移而增加，与SAO参数有关的信息的量可通过自适应地减小最大偏移而减小。
尽管已参照本发明构思的示例性实施例具体示出并描述了本发明构思，但将理解，在不脱离权利要求的精神和范围的情况下，可在此做出形式和细节上的各种改变。

Claims (23)

1.一种图像处理方法，包括：
基于最大编码单元(LCU)和编码单元(CU)，对帧图像执行编码操作；
设置具有根据在编码操作中的最大变换尺寸调节的值的最大偏移；
基于最大偏移，计算用于在样本自适应偏移(SAO)补偿中使用的样本自适应偏移(SAO)参数，
其中，最大变换尺寸对应于最大编码单元(LCU)，
其中，设置最大偏移的步骤包括：通过使用与最大变换尺寸有关的第一信息和与帧图像的像素的位深度有关的第二信息两者执行与第一信息和第二信息有关的预定功能公式操作，来计算最大偏移。
2.如权利要求1所述的图像处理方法，其中，最大变换尺寸与编码操作中的变换操作和量化操作的最大处理单位对应，
随着最大变换尺寸增大，最大偏移减小，并且随着最大变换尺寸减小，最大偏移增大。
3.如权利要求2所述的图像处理方法，其中，最大变换尺寸与最大编码单元(LCU)中的像素的数量对应。
4.如权利要求1所述的图像处理方法，其中，基于最大偏移计算样本自适应偏移(SAO)参数的步骤包括：
将最大编码单元(LCU)或编码单元中的像素分类为一个或多个样本自适应偏移块；
将小于或等于最大偏移的偏移值分配给所述一个或多个样本自适应偏移块中的每个。
5.如权利要求1所述的图像处理方法，其中，针对最大变换尺寸，随着帧图像的像素的位深度增大，最大偏移增大，并且随着帧图像的像素的位深度减小，最大偏移减小。
6.如权利要求1所述的图像处理方法，其中，设置最大偏移的步骤包括：通过进一步使用编码操作的量化操作中的量化参数来计算最大偏移，
针对最大变换尺寸，随着量化参数值增大，最大偏移增大，并且随着量化参数值减小，最大偏移减小。
7.如权利要求1所述的图像处理方法，其中，包括关于与最大变换尺寸对应的最大偏移的信息的表被存储在图像处理设备中，
设置最大偏移的步骤包括：基于与最大变换尺寸有关的信息的输入，通过从所述表读取关于与最大变换尺寸对应的最大偏移的信息来计算最大偏移。
8.如权利要求1所述的图像处理方法，还包括：
针对已经执行了编码操作的帧图像，重建帧图像以产生用于在帧间预测中使用的参考图像；
通过使用样本自适应偏移(SAO)参数，针对重建的帧图像执行样本自适应偏移补偿。
9.如权利要求1所述的图像处理方法，还包括：发送包括样本自适应偏移(SAO)参数和根据编码操作产生的图像数据的比特流，
其中，样本自适应偏移(SAO)参数包括指示将用在样本自适应偏移补偿中的偏移值的参数，当最大偏移减小时，指示偏移值的参数的信息的量减少。
10.一种图像处理方法，包括：
基于第一最大变换尺寸，对第一图像执行第一编码操作；
设置与第一最大变换尺寸对应的第一最大偏移；
通过计算小于或等于第一最大偏移的第一偏移值，对第一图像执行样本自适应偏移(SAO)补偿；
基于第二最大变换尺寸，对第二图像执行第二编码操作；
设置与第二最大变换尺寸对应的第二最大偏移，
其中，第一最大偏移的第一值与第二最大偏移的第二值不同，
其中，第一最大变换尺寸对应于第一编码操作的第一最大编码单元(LCU)，第二最大变换尺寸对应于第二编码操作的第二最大编码单元(LCU)，
其中，设置第一最大偏移的步骤包括：通过使用与第一最大变换尺寸有关的第一信息和与第一图像的像素的位深度有关的第二信息两者执行与第一信息和第二信息有关的预定功能公式操作，来计算第一最大偏移。
11.如权利要求10所述的图像处理方法，其中，第一图像与第一帧图像对应，第二图像与第二帧图像对应。
12.如权利要求11所述的图像处理方法，其中，当第一最大变换尺寸大于第二最大变换尺寸时，第一最大偏移小于第二最大偏移。
13.如权利要求10所述的图像处理方法，其中，第一图像在第一帧的第一区域中，第二图像在第一帧的第二区域中。
14.如权利要求10所述的图像处理方法，其中，第一最大变换尺寸与用于对第一图像执行第一变换操作和第一量化操作的第一最大处理单位对应，第二最大变换尺寸与用于对第二图像执行第二变换操作和第二量化操作的第二最大处理单位对应。
15.如权利要求10所述的图像处理方法，其中，执行样本自适应偏移(SAO)补偿的步骤包括：
针对第一图像中的一个或多个编码单元，将所述一个或多个编码单元中的每个的像素分类为一个或多个样本自适应偏移块；
针对所述一个或多个样本自适应偏移块中的每个，分配小于或等于第一最大偏移的第一偏移值；
将第一偏移值与所述一个或多个样本自适应偏移块中的每个中的每个像素的像素值相加。
16.如权利要求10所述的图像处理方法，还包括：通过计算小于或等于第二最大偏移的第二偏移值，对第二图像执行样本自适应偏移补偿，
其中，当第二最大变换尺寸小于第一最大变换尺寸时，应用于第二图像的第二偏移值的第二最大值大于应用于第一图像的第一偏移值的第一最大值。
17.如权利要求10所述的图像处理方法，其中，设置第一最大偏移的步骤包括：通过进一步使用对第一图像的第一编码操作中的量化操作中的量化参数，计算第一最大偏移。
18.一种图像处理设备，包括：
变换和量化单元，被配置为基于小于或等于最大变换尺寸的处理单位，对输入图像执行变换操作和量化操作；
样本自适应偏移(SAO)编码器，被配置为接收经由针对已执行了变换操作和量化操作的输入图像的逆变换处理和逆量化处理而产生的重建图像，并通过使用具有根据最大变换尺寸的改变而调节的值的最大偏移，对重建图像执行样本自适应偏移(SAO)补偿，
其中，最大变换尺寸对应于最大编码单元(LCU)，
其中，样本自适应偏移(SAO)编码器被配置为：通过使用与最大变换尺寸有关的第一信息和与输入图像的像素的位深度有关的第二信息两者执行与第一信息和第二信息有关的预定功能公式操作，来计算最大偏移。
19.如权利要求18所述的图像处理设备，还包括：熵编码器，被配置为通过对来自变换和量化单元的编码的图像数据和来自样本自适应偏移(SAO)编码器的样本自适应偏移参数执行熵编码，来产生比特流。
20.如权利要求18所述的图像处理设备，还包括：模式控制器，被配置为输出用于调节作为变换和量化单元的处理单位的最大变换尺寸的控制信息，
其中，样本自适应偏移(SAO)编码器还被配置为：基于来自模式控制器的控制信息，调节最大偏移。
21.如权利要求18所述的图像处理设备，其中，输入图像是帧图像，帧图像包括多个编码单元，所述多个编码单元中的一个或多个是最大编码单元，
最大偏移被应用于所述多个编码单元。
22.如权利要求18所述的图像处理设备，其中，样本自适应偏移(SAO)编码器还被配置为通过使用变换操作和量化操作中的量化参数信息来计算最大偏移。
23.如权利要求18所述的图像处理设备，其中，样本自适应偏移(SAO)编码器包括存储能够被主处理器执行的程序的存储器，
其中，存储器被配置为存储最大偏移确定模块，其中，最大偏移确定模块被配置为通过执行功能公式操作或访问表信息来确定最大偏移。
CN201711114066.3A 2017-02-10 2017-11-13 用于执行样本自适应偏移处理的图像处理方法和设备 Active CN108419077B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2017-0018954 2017-02-10
KR1020170018954A KR20180092774A (ko) 2017-02-10 2017-02-10 샘플 적응적 오프셋 처리를 수행하는 영상 처리 장치 및 영상 처리 방법

Publications (2)

Publication Number Publication Date
CN108419077A CN108419077A (zh) 2018-08-17
CN108419077B true CN108419077B (zh) 2022-04-19

Family

ID=63104895

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711114066.3A Active CN108419077B (zh) 2017-02-10 2017-11-13 用于执行样本自适应偏移处理的图像处理方法和设备

Country Status (3)

Country Link
US (1) US10631011B2 (zh)
KR (1) KR20180092774A (zh)
CN (1) CN108419077B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020056760A1 (en) * 2018-09-21 2020-03-26 Alibaba Group Holding Limited Transform selection for small size block
CN113728641B (zh) * 2019-04-23 2023-09-15 北京字节跳动网络技术有限公司 在视频编解码中有条件地使用多重变换矩阵
CN117714715A (zh) * 2019-10-08 2024-03-15 Lg电子株式会社 图像解码设备、图像编码设备和数据发送设备
CN117857819A (zh) * 2019-10-08 2024-04-09 Lg电子株式会社 图像编码设备、图像解码设备和数据发送设备
CN113489984A (zh) * 2021-05-25 2021-10-08 杭州博雅鸿图视频技术有限公司 Avs3的样点自适应补偿方法、装置、电子设备及存储介质
CN113284248B (zh) * 2021-06-10 2022-11-15 上海交通大学 一种点云有损压缩的编解码方法、装置和系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102428702A (zh) * 2009-05-16 2012-04-25 汤姆逊许可证公司 用于针对视频编码和解码的改进量化舍入偏移调节的方法和设备
CN103039073A (zh) * 2010-06-07 2013-04-10 数码士有限公司 编码/解码高分辨率图像的方法和执行该方法的装置
US20140192869A1 (en) * 2013-01-04 2014-07-10 Canon Kabushiki Kaisha Method, device, computer program, and information storage means for encoding or decoding a video sequence

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9204171B1 (en) * 2011-09-28 2015-12-01 Electronics And Telecommunications Research Institute Method for encoding and decoding images based on constrained offset compensation and loop filter, and apparatus therefor
US9185404B2 (en) * 2011-10-07 2015-11-10 Qualcomm Incorporated Performing transform dependent de-blocking filtering
KR101591352B1 (ko) 2012-04-16 2016-02-04 한국전자통신연구원 비디오 복호화 장치
US9445130B2 (en) 2013-01-09 2016-09-13 Qualcomm Incorporated Blockiness metric for large HEVC block artifacts
US20140301447A1 (en) * 2013-04-08 2014-10-09 Research In Motion Limited Methods for reconstructing an encoded video at a bit-depth lower than at which it was encoded
US9300967B2 (en) * 2013-06-19 2016-03-29 Apple Inc. Sample adaptive offset control
US10708588B2 (en) 2013-06-19 2020-07-07 Apple Inc. Sample adaptive offset control
US20160156915A1 (en) 2013-07-18 2016-06-02 Samsung Electronics Co., Ltd. Video encoding method and apparatus and video decoding method and apparatus using video format parameter delivery
WO2015053697A1 (en) 2013-10-11 2015-04-16 Telefonaktiebolaget L M Ericsson (Publ) Method and arrangement for transcoding a video bitstream
US10038919B2 (en) 2014-05-29 2018-07-31 Apple Inc. In loop chroma deblocking filter
US20150373362A1 (en) 2014-06-19 2015-12-24 Qualcomm Incorporated Deblocking filter design for intra block copy

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102428702A (zh) * 2009-05-16 2012-04-25 汤姆逊许可证公司 用于针对视频编码和解码的改进量化舍入偏移调节的方法和设备
CN103039073A (zh) * 2010-06-07 2013-04-10 数码士有限公司 编码/解码高分辨率图像的方法和执行该方法的装置
US20140192869A1 (en) * 2013-01-04 2014-07-10 Canon Kabushiki Kaisha Method, device, computer program, and information storage means for encoding or decoding a video sequence

Also Published As

Publication number Publication date
KR20180092774A (ko) 2018-08-20
US10631011B2 (en) 2020-04-21
CN108419077A (zh) 2018-08-17
US20180234702A1 (en) 2018-08-16

Similar Documents

Publication Publication Date Title
CN108419077B (zh) 用于执行样本自适应偏移处理的图像处理方法和设备
US11750809B2 (en) Encoding and decoding methods and apparatuses with multiple image block division manners
CN110720218B (zh) 与视频译码中的变换处理一起应用的帧内滤波
CN110393010B (zh) 视频译码中的帧内滤波旗标
JP2021044811A (ja) サンプルアダプティブオフセット制御
KR102229045B1 (ko) 디스플레이 스트림 압축 (dsc) 을 위한 엔트로피 코딩 기법들
CN108141591B (zh) 用于非4:4:4色度子采样的显示流压缩(dsc)的熵译码技术
US9621900B1 (en) Motion-based adaptive quantization
WO2013056097A1 (en) Coding non-symmetric distributions of data
US20190289331A1 (en) Image processing apparatus for performing filtering on restored images and filtering method thereof
US20140294068A1 (en) Sample Adaptive Offset Compensation of Video Data
US10750175B2 (en) Quantization partitioning for enhanced image compression
JP2023543985A (ja) 多用途ビデオコーディングのためのテンプレートマッチング予測
CN114270837A (zh) 用于通用视频编解码的无损模式
KR20220140871A (ko) 4:4:4 크로마 포맷의 비디오 코딩 방법 및 장치
US10003802B1 (en) Motion-based adaptive quantization
WO2021030667A1 (en) Methods and apparatus of video coding using palette mode
JP2023085351A (ja) Ｃｂｆフラグの効率的なシグナリング方法
CN114731423A (zh) 预见要添加到亮度映射斜率值的校正值的色度残差缩放
CN112740676A (zh) 帧内变换译码和广角帧内预测的协调
CN116614625B (zh) 一种视频编码的方法、装置和介质
CN116156168A (zh) 一种图像编解码方法及装置
CN116071440A (zh) 一种图像解码方法、编码方法及装置
CN115086681A (zh) 4:4:4色度格式的视频编解码的方法和装置
CN114128275A (zh) 亮度到色度量化参数表信令

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant