CN107079149B - 图像处理装置和方法 - Google Patents

图像处理装置和方法 Download PDF

Info

Publication number
CN107079149B
CN107079149B CN201580053276.9A CN201580053276A CN107079149B CN 107079149 B CN107079149 B CN 107079149B CN 201580053276 A CN201580053276 A CN 201580053276A CN 107079149 B CN107079149 B CN 107079149B
Authority
CN
China
Prior art keywords
deblocking
filter
chroma
image
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201580053276.9A
Other languages
English (en)
Other versions
CN107079149A (zh
Inventor
中神央二
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN107079149A publication Critical patent/CN107079149A/zh
Application granted granted Critical
Publication of CN107079149B publication Critical patent/CN107079149B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Abstract

本公开内容涉及用于使图像质量的降低能够被抑制的图像处理装置和方法。生成用于控制解码图像数据中的色差分量的解块滤波的控制信息作为针对解码数据的头信息，解码图像数据是通过对图像数据进行编码并且对通过对图像数据进行编码而获得的编码数据进行解码而获得的。本公开内容可以应用于例如图像处理装置等。

Description

图像处理装置和方法
技术领域
本公开内容涉及图像处理装置以及方法，并且更具体地涉及能够抑制图像质量的降低的图像处理装置和方法。
背景技术
为了提高运动图像的编码效率，已经进行了称为高效率视频编码(HEVC)的编码方案的标准化，并且已经完成了对版本1的建立(例如，参见非专利文献1)。
在版本1中，已经针对YUV4:2:0的自然图像开发了解块滤波。作为对解块滤波的控制，存在滤波执行控制(是否执行滤波)和滤波强度控制(设定的强度的程度)，但是在版本1中，两个控制都被进行为对亮度分量(也称为亮度)和色度分量(也称为色度)共用的控制(也一起(类似地)控制用于亮度的解块滤波和用于色度的解块滤波)。
引文列表
非专利文献
非专利文献1：Benjamin Bross，Gary J.Sullivan，Ye-Kui Wang，"Editors'proposed corrections to HEVC version 1,"JCTVC-M0432_v3，2013/4/25
发明内容
本发明要解决的问题
版本1的解块滤波的滤波强度是基于编码模式或解码像素值而自动决定的，但是决定滤波强度的算法被调整为适合于自然图像，并且不对应于画面内容例如计算机画面或CG图像。为此，当对画面内容的图像进行版本1的解块滤波时，针对色度分量(色度)的滤波强度太强，并且文字很可能模糊(即，图像质量很可能降低)。
由于如上所述对版本1的解块滤波的控制被进行为对亮度分量(亮度)和色度分量(色度)共用的控制，因此难以控制仅针对色度分量(色度)的滤波强度(因为针对色度分量(色度)的解块滤波的控制对于针对亮度分量(亮度)的解块滤波有影响)，难以对于画面内容的图像充分且适当地进行解块滤波(以充分抑制图像质量的降低)。
本公开内容是鉴于前述作出的，并且本公开内容期望抑制图像质量的降低。
问题的解决方案
本技术的一个方面是图像处理装置，包括：编码单元，其对图像数据进行编码；以及控制信息生成单元，其生成用于控制针对解码图像数据的色度分量的解块滤波处理的控制信息作为编码数据的头信息，解码图像数据是通过对编码数据进行解码而获得的，编码数据是通过由编码单元对图像数据进行编码而获得的。
控制信息生成单元可以生成用于控制是否进行针对解码图像数据的色度分量的解块滤波处理的控制信息作为控制信息。
控制信息生成单元可以生成用于控制针对解码图像数据的色度分量的解块滤波处理的滤波强度的控制信息作为控制信息。
控制信息生成单元可以生成用于控制针对解块滤波的参数β的偏移的控制信息作为用于控制滤波强度的控制信息。
控制信息生成单元可以生成用于控制针对解块滤波的参数tC的偏移的控制信息作为用于控制滤波强度的控制信息。
控制信息生成单元可以生成下述中至少之一：作为头信息的序列参数集的语法元素并且用于控制针对与解码图像数据的序列参数集对应的序列的色度分量的解块滤波处理的控制信息，作为头信息的图片参数集的语法元素并且用于控制针对与解码图像数据的图片参数集对应的图片的色度分量的解块滤波处理的控制信息，以及作为头信息的片头的语法元素并且用于控制针对与解码图像数据的片头对应的片的色度分量的解块滤波处理的控制信息。
图像处理装置还可以包括：滤波处理单元，其基于通过控制信息生成单元生成的控制信息进行针对解码图像数据的色度分量的解块滤波处理。
图像处理装置还可以包括：控制单元，其控制控制信息生成单元使得进行根据解码图像数据的图像的特征的解块滤波处理，并且该控制信息生成单元可以根据控制单元的控制来生成控制信息。
图像处理装置还可以包括：控制单元，其控制控制信息生成单元使得进行根据解码图像数据的颜色格式的解块滤波处理，并且该控制信息生成单元可以根据控制单元的控制来生成控制信息。
此外，本技术的一个方面是图像处理方法，包括：对图像数据进行编码；以及生成用于控制针对解码图像数据的色度分量的解块滤波处理的控制信息作为编码数据的头信息，解码图像数据是通过对编码数据进行解码而获得的，编码数据是通过对图像数据进行编码而获得的。
本技术的另一方面是图像处理装置，包括：解码单元，其对图像数据的编码数据进行解码；以及滤波处理单元，其基于编码数据的头信息中的用于控制针对解码图像数据的色度分量的解块滤波处理的控制信息来进行针对解码图像数据的色度分量的解块滤波处理，解码图像数据是通过由解码单元对编码数据进行解码而获得的。
控制信息可以是用于控制是否进行针对解码图像数据的色度分量的解块滤波处理的控制信息。
控制信息可以是用于控制针对解码图像数据的色度分量的解块滤波处理的滤波强度的控制信息。
用于控制滤波强度的控制信息可以是用于控制针对解块滤波的参数β的偏移的控制信息。
用于控制滤波强度的控制信息可以是用于控制针对解块滤波的参数tC的偏移的控制信息。
控制信息可以包括下述中至少之一：作为头信息的序列参数集的语法元素并且用于控制针对与解码图像数据的序列参数集对应的序列的色度分量的解块滤波处理的控制信息，作为头信息的图片参数集的语法元素，并且用于控制针对与解码图像数据的图片参数集对应的图片的色度分量的解块滤波处理的控制信息，以及作为头信息的片头的语法元素，并且用于控制针对与解码图像数据的片头对应的片的色度分量的解块滤波处理的控制信息，以及滤波处理单元基于控制信息中包括的信息中任何一个来进行针对解码图像数据的色度分量的解块滤波处理。
滤波处理单元优选地可以以下述顺序使用控制信息：片头的控制信息、图片参数集的控制信息，以及序列参数集的控制信息。
滤波处理单元可以基于对是否存在用于控制针对解码图像数据的解块滤波处理的控制信息进行指示的信息来参考和使用图片参数集的控制信息以及片头的控制信息。
滤波处理单元可以基于对是否存在用于控制针对解码图像数据的色度分量的解块滤波处理的控制信息进行指示的信息来参考和使用图片参数集的控制信息以及片头的控制信息。
此外，本技术的另一方面是图像处理方法，包括：对图像数据的编码数据进行解码；以及基于编码数据的头信息中的用于控制针对解码图像数据的色度分量的解块滤波处理的控制信息来进行针对解码图像数据的色度分量的解块滤波处理，解码图像数据是通过对编码数据进行解码而获得的。
在本技术的一个方面中，对图像数据进行编码，并且生成用于控制针对解码图像数据的色度分量的解块滤波处理的控制信息作为编码数据的头信息，该解码图像数据是通过对编码数据进行解码而获得的，该编码数据是通过对图像数据进行编码而获得的。
在本技术的另一方面中，对图像数据的编码数据进行解码，并且基于以下控制信息进行针对解码图像数据的色度分量的解块滤波处理，该控制信息是编码数据的头信息并且用于控制针对解码图像数据的色度分量的解块滤波处理，该解码图像数据是通过对编码数据进行解码而获得的。
本发明的效果
根据本公开内容，可以对图像数据进行编码并且对图像数据的编码数据进行解码。特别地，可以抑制图像质量的降低。
附图说明
图1是用于描述编码单元的示例性配置的图。
图2是示出与解块滤波的控制有关的图片参数集的语法的示例的图。
图3是示出与解块滤波的控制有关的片头的语法的示例的图。
图4是示出序列参数集的扩展语法的示例的图。
图5是示出图片参数集的扩展语法的示例的图。
图6是示出片头的扩展语法的示例的图。
图7是示出参数的优先级顺序的示例的图。
图8是示出图像解码装置的示例性主要配置的框图。
图9是示出头信息生成单元的示例性主要配置的框图。
图10是示出环路滤波器的示例性主要配置的框图。
图11是示出编码处理的流程的示例的流程图。
图12是示出头信息生成处理的流程的示例的流程图。
图13是示出环路滤波处理的流程的示例的流程图。
图14是示出图像解码装置的示例性主要配置的框图。
图15是示出环路滤波器的示例性主要配置的框图。
图16是示出解码处理的流程的示例的流程图。
图17是示出图片参数集的扩展语法的示例的图。
图18是示出片头的扩展语法的示例的图。
图19是示出头信息生成处理的流程的示例的流程图。
图20是示出环路滤波器的示例性主要配置的框图。
图21是示出图片参数集的扩展语法的示例的图。
图22是示出片头的扩展语法的示例的图。
图23是示出头信息生成单元的示例性主要配置的框图。
图24是示出头信息生成处理的流程的示例的流程图。
图25是示出环路滤波器的示例性主要配置的框图。
图26是示出图片参数集的扩展语法的示例的图。
图27是示出片头的扩展语法的示例的图。
图28是示出头信息生成处理的流程的示例的流程图。
图29是用于描述继图28之后的头信息生成处理的流程的示例的流程图。
图30是示出环路滤波器的示例性主要配置的框图。
图31是示出图片参数集的扩展语法的示例的图。
图32是示出片头的扩展语法的示例的图。
图33是示出参数的优先级顺序的示例的图。
图34是示出头信息生成单元的示例性主要配置的框图。
图35是示出头信息生成处理的流程的示例的流程图。
图36是示出环路滤波器的示例性主要配置的框图。
图37是示出图片参数集的扩展语法的示例的图。
图38是示出片头的扩展语法的示例的图。
图39是示出头信息生成单元的示例性主要配置的框图。
图40是示出头信息生成处理的流程的示例的流程图。
图41是示出环路滤波器的示例性主要配置的框图。
图42是示出图片参数集的扩展语法的示例的图。
图43是示出片头的扩展语法的示例的图。
图44是示出头信息生成单元的示例性主要配置的框图。
图45是示出头信息生成处理的流程的示例的流程图。
图46是用于描述继图45之后的头信息生成处理的流程的示例的流程图。
图47是示出环路滤波器的示例性主要配置的框图。
图48是示出图片参数集的扩展语法的示例的图。
图49是示出片头的扩展语法的示例的图。
图50是示出头信息生成处理的流程的示例的流程图。
图51是示出环路滤波器的示例性主要配置的框图。
图52是示出图片参数集的扩展语法的示例的图。
图53是示出片头的扩展语法的示例的图。
图54是示出头信息生成处理的流程的示例的流程图。
图55是用于描述继图54之后的头信息生成处理的流程的示例的流程图。
图56是示出环路滤波器的示例性主要配置的框图。
图57是示出计算机的显示画面的示例性主要配置的框图。
图58是示出解块滤波控制处理的流程的示例的流程图。
图59是示出参数设置处理的流程的示例的流程图。
图60是示出要编码的图像数据的颜色格式的示例的框图。
图61是示出解块滤波控制处理的流程的示例的流程图。
图62是示出参数设置处理的流程的示例的流程图。
图63是示出多视图图像编码方案的示例的图。
图64是示出应用本技术的多视图图像编码装置的示例性主要配置的图。
图65是示出应用本技术的多视图图像解码装置的示例性主要配置的图。
图66是示出可分级图像编码方案的示例的图。
图67是用于描述空间可分级编码的示例的图。
图68是用于描述时间可分级编码的示例的图。
图69是用于描述信噪比的可分级编码的示例的图。
图70是示出应用本技术的可分级图像编码装置的示例性主要配置的图。
图71是示出应用本技术的可分级图像解码装置的示例性主要配置的图。
图72是示出计算机的示例性主要配置的框图。
图73是示出电视装置的示意性配置的示例的框图。
图74是示出移动电话的示意性配置的示例的框图。
图75是示出记录/再现装置的示意性配置的示例的框图。
图76是示出图像捕获装置的示意性配置的示例的框图。
图77是示出视频设备的示意性配置的示例的框图。
图78是示出视频处理器的示意性配置的示例的框图。
图79是示出视频处理器的示意性配置的另一示例的框图。
具体实施方式
在下文中，将详细描述用于进行本公开内容的模式(在下文中被称为实施方式)。将以下述顺序进行描述。
1.第一实施方式(图像编码装置和图像解码装置)
2.第二实施方式(图像编码装置和图像解码装置)
3.第三实施方式(图像编码装置和图像解码装置)
4.第四实施方式(图像编码装置和图像解码装置)
5.第五实施方式(图像编码装置和图像解码装置)
6.第六实施方式(图像编码装置和图像解码装置)
7.第七实施方式(图像编码装置和图像解码装置)
8.第八实施方式(图像编码装置和图像解码装置)
9.第九实施方式(图像编码装置和图像解码装置)
10.第十实施方式(图像编码装置)
11.第十一实施方式(图像编码装置)
12.第十二实施方式(多视图图像编码装置和多视图图像解码装置)
13.第十三实施方式(可分级图像编码装置和可分级图像解码装置)
14.第十四实施方式(计算机)
15.第十五实施方式(应用示例)
16.第十六实施方式(组、单元、模块以及处理器)
<1.第一实施方式>
<图像编码标准化的流程>
近年来，用于通过下述操作对图像进行压缩和编码的装置已经变得普遍：为了在数字化处理图像信息时高效的信息传输和累积，通过采用数字化处理图像信息的编码方案并且通过诸如离散余弦变换的正交变换和使用图像信息特定的冗余的运动补偿来进行压缩。运动图像专家组(MPEG)等是这样的编码方案的示例。
具体地，MPEG 2(ISO/IEC 13818-2)是被定义为通用图像编码方案的标准，并且MPEG 2覆盖隔行扫描图像、逐行扫描图像、标准分辨率图像和高清晰度图像。例如，当前MPEG 2被广泛地用于宽范围的应用，例如专业用途和消费者用途。使用MPEG 2压缩方案，例如，在具有720×480像素的标准分辨率的隔行扫描图像的情况下，可以分配4Mbps至8Mbps的编码量(比特率)。此外，使用MPEG 2压缩方案，例如，在具有1920×1088像素的高分辨率的隔行扫描图像的情况下，可以分配18Mbps至22Mbps的编码量(比特率)。因此，可以实现高压缩率和出色的图像质量。
MPEG 2主要用于适于播放的高清晰度编码，但是不支持编码量(比特率)低于MPEG1的编码方案，即，高压缩率的编码方案。随着移动终端的普及，认为将来会增加对这样的编码方案的需求，因此已经对MPEG 4编码方案进行了标准化。1998年12月将图像编码方案的国际标准批准为ISO/IEC 14496-2。
此外，近年来，已经标准化了为了针对视频会议的图像编码目的的标准例如H.26L(国际电信联盟电信标准化部门Q6/16视频编码专家组(ITU-TQ6/16 VCEG))。与现有编码方案例如MPEG 2或MPEG 4中相比，H.26L需要更大的用于编码和解码的计算量，但是已知实现高编码效率。此外，当前，作为MPEG 4的一个活动，已经将结合了甚至在H.26L中不支持的功能并且基于H.26L来实现高编码效率的标准化执行为增强的压缩视频编码的联合模型。
作为标准化日程，在2003年3月建立了称为H.264和MPEG-4 Part10(在下文中称为高级视频编码(AVC))的国际标准。
此外，随着H.264/AVC的扩展，在2005年2月对包括专业用途所需要的编码工具例如RGB或4：2：2或4：4：4或8×8DCT以及在MPEG-2中指定的量化矩阵的保真度范围扩展(FRExt)进行了标准化。因此，H.264/AVC已经成为能够很好地表达电影中包括的电影噪声的编码方案，并且用于宽范围的应用例如蓝光光盘(注册商标)中。
然而，近年来，对能够压缩作为高清晰度图像的4倍的约4000×2000像素的图像或者在有限的传输容量环境如因特网中传送高清晰度图像的高压缩率编码的需求日益增长。为此，在ITU-T下提高编码效率已经在视频编码专家组(VCEG)的不断研究中。
鉴于此，目前，为了将编码效率进一步提高至比AVC中更高，作为ITU-T和国际标准化组织/国际电工委员会(ISO/IEC)的联合标准化组织的联合协作团队视频编码(JCTVC)已经对称为高效率视频编码(HEVC)的编码方案进行标准化，并且已经完成了版本1的建立(例如，参见非专利文献1)。
<编码方案>
在下文中，将结合针对高效视频编码(HEVC)方案的图像编码和解码的应用来描述本技术。
<编码单元>
在高级视频编码(AVC)方案中，定义了基于宏块和子宏块的分层结构。然而，对于用作下一代编码方案的目标的大图像帧例如超高清晰度(UHD)(4000×2000像素)而言，16×16像素的宏块不是最佳的。
另一方面，在HEVC方案中，如图1所示定义编码单元(CU)。
CU也被称为编码树块(CTB)，并且用作承担与AVC方案中的宏块类似的作用的图片单元的图像的部分区域。后者被固定为16×16像素的尺寸，但是前者不固定到某个尺寸，而是在每个序列中的图像压缩信息中指定。
例如，在要输出的编码数据中包括的序列参数集(SPS)中指定CU的最大编码单元(LCU)和最小编码单元(SCU)。
由于在每个LCU不小于SCU的范围中设置split-flag＝1，所以编码单元可以被划分为具有更小尺寸的CU。在图1的示例中，LCU的尺寸为128，并且最大可分级深度为5。当split_flag的值为“1”时，尺寸为2N×2N的CU被划分为作为低一层的具有N×N的尺寸的CU。
此外，CU被划分为作为帧内或帧间预测的处理单元的区域(图片单元的图像的部分区域)的预测单元(PU)，并且被划分为作为正交变换的处理单元的区域(图片单元的图像的部分区域)的变换单元(TU)。当前，在HEVC方案中，除了4×4和8×8以外，还可以使用16×16和32×32的正交变换。
例如在HEVC方案中，在其中定义CU并且以CU为单位进行各种类型的处理的编码方案的情况下，在AVC方案中，可以认为宏块与LCU对应，并且可以认为块(子块)与CU对应。此外，在AVC方案中，可以认为活动补偿块与PU对应。此处，由于CU具有分层结构，因此最高层的LCU的尺寸通常被设置为大于AVC方案中的宏块的尺寸，例如，诸如128×128像素。
因此，在下文中，假定LCU包括AVC方案中的宏块，并且假定CU包括AVC方案中的块(子块)。换言之，在以下描述中使用的“块”指示图片中的任意部分区域，并且，例如，不限制块的尺寸、形状和特征。换言之，“块”包括任意区域(处理单元)例如TU、PU、SCU、CU、LCU、子块、宏块或片。当然，“块”也包括其他部分区域(处理单元)。当需要限制尺寸、处理单元等时，将适当地描述。
此外，在本说明书中，当基于LCU(的水平)进行处理时，假定编码树单元(CTU)为包括最大编码单元(LCU)的CTB和参数的单元。此外，当基于CU(的水平)进行处理时，假定构成CTU的编码单元(CU)为包括编码块(CB)以及参数的单元。
<通过解块滤波的图像质量劣化>
同时，在HEVC的版本1中，已针对YUV4:2:0的自然图像开发了解块滤波。作为对解块滤波的控制，存在滤波执行控制(是否执行滤波)和滤波强度控制(设定的强度的程度)，但是在版本1中，两个控制都被进行为对亮度分量(也称为亮度)和色度分量(也称为色度)共用的控制(一起(类似地)控制用于亮度的解块滤波和用于色度的解块滤波)。
如图2所示，在版本1的图片参数集(PPS)中，关于对解块滤波的控制而适当地设置语法元素例如deblocking_filter_control_present_flag、deblocking_filter_override_enabled_flag、pps_deblocking_filter_disabeld_flag、pps_beta_offset_div2以及pps_tc_offset_div2。
deblocking_filter_control_present_flag是指示图片参数集中是否包括用于控制解块滤波的语法元素的标志。例如，当deblocking_filter_control_present_flag的值为“1”时，指示图片参数集中包括该语法元素。此外，例如，当deblocking_filter_control_present_flag的值为“0”时，指示图片参数集中不包括该语法元素。
deblocking_filter_override_enabled_flag是指示属于对应图片的片的片头中是否存在deblocking_filter_override_flag的标志。例如，当deblocking_filter_override_enabled_flag的值为“1”时，指示属于对应图片的片的片头中存在deblocking_filter_override_flag。此外，例如，当deblocking_filter_override_enabled_flag的值为“0”时，指示属于对应图片的片的片头中不存在no deblocking_filter_override_flag。
pps_deblocking_filter_disabeld_flag是指示是否将解块滤波应用于其中在属于对应图片的片中未定义slice_deblocking_filter_disabled_flag的片(即，是否进行解块滤波处理)的标志。例如，当pps_deblocking_filter_disabeld_flag的值为“1”时，指示解块滤波未应用于该片。此外，例如，当pps_deblocking_filter_disabeld_flag的值为“0”时，指示解块滤波应用于该片。
是pps_beta_offset_div2的值的两倍的值指示对属于对应图片的片中未定义slice_deblocking_filter_disabled_flag的片进行的解块滤波的参数β的初始偏移。是pps_tc_offset_div2的值的两倍的值指示对属于对应图片的片中未定义slice_deblocking_filter_disabled_flag的片进行的解块滤波的参数tC的初始偏移。换言之，它们是用于控制滤波强度(设置的强度的程度)的语法元素。
此外，如图3所示，在版本1的片头(SH)中，关于对解块滤波的控制而适当地设置语法元素例如deblocking_filter_override_flag、slice_deblocking_filter_disabeld_flag、slice_beta_offset_div2以及slice_tc_offset_div2。
deblocking_filter_override_flag是指示片头中是否包括用于控制解块滤波的语法元素的标志。例如，当deblocking_filter_override_flag的值为“1”时，指示片头中包括该语法元素。此外，例如，当deblocking_filter_override_flag的值为“0”时，指示片头中不包括该语法元素。
slice_deblocking_filter_disabeld_flag是指示是否将解块滤波应用于对应片(即，是否进行解块滤波处理)的标志。例如，当slice_deblocking_filter_disabeld_flag的值为“1”时，指示解块滤波未应用于对应片。此外，例如，当slice_deblocking_filter_disabeld_flag的值为“0”时，指示解块滤波应用于对应片。
是slice_beta_offset_div2的值的两倍的值指示对于对应片进行的解块滤波的参数β的初始偏移。是slice_tc_offset_div2的值的两倍的值指示对于对应片进行的解块滤波的参数tC的初始偏移。换言之，它们是用于控制滤波强度(设置的强度的程度)的语法元素。
版本1的解块滤波的滤波强度是基于编码模式或解码像素值自动决定的，但是决定滤波强度的算法被调整为适合于自然图像，并且不对应于画面内容例如计算机画面或CG图像。为此，当对画面内容的图像执行版本1的解块滤波时，针对色度分量(色度)的滤波强度太强，并且文字很可能模糊(即，图像质量很可能降低)。
由于如上所述对版本1的解块滤波的控制被进行为对亮度分量(亮度)和色度分量(色度)共用的控制，因此难以控制仅针对色度分量(色度)的滤波强度(因为针对色度分量(色度)的解块滤波的控制对于针对亮度分量(亮度)的解块滤波有影响)，难以对于画面内容的图像充分且适当地进行解块滤波(以充分抑制图像质量的降低)。
<针对色度分量的解块滤波的执行控制>
鉴于此，用于控制针对图像数据的色度分量(色度)的解块滤波处理的控制信息被生成并且被用作图像数据的编码数据的头信息。例如，在HEVC的编码中，对通过对当前要编码的图像数据进行编码而获得的编码数据进行解码，并且对所获得的解码图像数据进行解块滤波处理。此外，在HEVC的解码中，对图像数据的编码数据进行解码，并且对所获得的解码图像数据进行解块滤波处理。将解块滤波中用于控制仅针对解码图像数据的色度的处理的控制信息包括在头信息中，并且基于该控制信息进行在编码或解码时的解块滤波。
因此，可以与针对亮度分量(亮度)的解块滤波处理无关地控制针对色度的解块滤波处理。例如，可以执行控制使得对亮度进行解块滤波处理，但是不对色度进行解块滤波处理。此外，例如，可以抑制针对色度的滤波强度而不改变针对亮度的滤波强度。因此，可以对画面内容的图像以及自然图像进行更合适的解块滤波处理，例如，可以抑制例如画面内容的文字模糊。换言之，可以通过应用本技术来抑制图像质量的降低。
将描述更加具体的示例。在HEVC中，作为编码数据的头信息，生成例如序列参数集(SPS)、图片参数集、片头等。如图4所示，例如，在序列参数集中，用于控制针对色度的解块滤波处理的控制信息可以被设置为扩展语法。在图4的示例的情况下，sps_chroma_deblocking_filter_disabled_flag被设置为控制信息。
sps_chroma_deblocking_filter_disabled_flag是指示是否将解块滤波应用于其中在属于对应序列的片中未定义pps_chroma_deblocking_filter_disabled_flag或slice_chroma_deblocking_filter_disabled_flag(其将随后进行描述)的片的色度的标志。换言之，语法元素sps_chroma_deblocking_filter_disabeld_flag是用于控制是否进行针对色度的解块滤波处理的控制信息。例如，当sps_chroma_deblocking_filter_disabeld_flag的值为真(例如，“1”)时，不将解块滤波应用于该片的色度。此外，例如，当sps_chroma_deblocking_filter_disabeld_flag的值为假(例如，“0”)时，将解块滤波应用于该片的色度。
此外，例如，在图片参数集中，用于控制针对色度的解块滤波处理的控制信息可以被设置为如图5所示的扩展语法。在图5的示例的情况下，pps_chroma_deblocking_filter_disabled_flag被设置为控制信息。
pps_chroma_deblocking_filter_disabled_flag是指示是否将解块滤波应用于其中在属于对应图片的片中未定义slice_chroma_deblocking_filter_disabled_flag(其将随后进行描述)的片的色度的标志。换言之，语法元素pps_chroma_deblocking_filter_disabeld_flag是用于控制是否进行针对色度的解块滤波处理的控制信息。例如，当pps_chroma_deblocking_filter_disabeld_flag的值为真(例如，“1”)时，不将解块滤波应用于该片的色度。此外，例如，当pps_chroma_deblocking_filter_disabeld_flag的值为假(例如，“0”)时，将解块滤波应用于该片的色度。
此外，例如，在片头中，用于控制针对色度的解块滤波处理的控制信息可以被设置为如图6所示的扩展语法。在图6的示例的情况下，slice_chroma_deblocking_filter_disabled_flag被设置为控制信息。
slice_chroma_deblocking_filter_disabled_flag是指示是否将解块滤波应用于对应片的色度的标志。换言之，语法元素slice_chroma_deblocking_filter_disabeld_flag是用于控制是否进行针对色度的解块滤波处理的控制信息。例如，当slice_chroma_deblocking_filter_disabeld_flag的值为真(例如，“1”)时，不将解块滤波应用于该片的色度。此外，例如，当slice_chroma_deblocking_filter_disabeld_flag的值为假(例如，“0”)时，将解块滤波应用于该片的色度。
换言之，如图7所示，当sps_chroma_deblocking_filter_disabeld_flag被设置在序列参数集中时，sps_chroma_deblocking_filter_disabeld_flag的值被设置为用于控制对于针对色度的解块滤波的执行的控制值，并且此外，当pps_chroma_deblocking_filter_disabeld_flag被设置在图片参数集中时，pps_chroma_deblocking_filter_disabeld_flag的值被重写在控制值上，并且此外，当slice_chroma_deblocking_filter_disabeld_flag被设置在片头中时，slice_chroma_deblocking_filter_disabeld_flag的值被重写的控制值上。基于最终设置的控制值(即，底层的控制信息)来控制针对色度的解块滤波处理的执行。
注意，与HEVC的版本1的示例类似，基于诸如deblocking_filter_control_present_flag、deblocking_filter_override_enabled_flag、pps_deblocking_filter_disabeld_flag、pps_beta_offset_div2、pps_tc_offset_div2、deblocking_filter_override_flag、slice_deblocking_filter_disabeld_flag、slice_beta_offset_div2以及slice_tc_offset_div2的语法元素来控制针对亮度的解块滤波处理。
因此，可以与针对亮度的解块滤波处理无关地控制针对色度的解块滤波处理，并且可以抑制图像质量的降低。注意，用于控制针对色度的解块滤波处理的控制信息如上所述设置扩展语法，因此，与本技术不兼容的编码器或解码器可以跳过本技术的语法元素，并且难以应用本技术，但是可以适当地进行编码或解码。
<图像编码装置>
图8是示出作为应用本技术的图像处理装置的一个方面的图像编码装置的配置的示例的框图。图8所示的图像编码装置100例如使用HEVC的预测处理或者与HEVC等同的方案的预测处理来对运动图像的图像数据进行编码。
如图8所示，图像编码装置100包括画面重新布置缓存器111、运算单元112、正交变换单元113、量化单元114、无损编码单元115、累积缓存器116、逆量化单元117和逆正交变换单元118。图像编码装置100还包括运算单元119、环路滤波器120、帧存储器121、帧内预测单元122、帧间预测单元123、预测图像选择单元124和速率控制单元125。图像编码装置100还包括头信息生成单元131。
画面重新布置缓存器111按照显示顺序存储输入图像数据的帧的图像，按照用于根据图片组(GOP)来进行编码的帧顺序重新布置按照显示顺序存储的帧的图像，并且将其中帧的顺序被重新布置的图像提供给运算单元112。此外，画面重新布置缓存器111还将按照帧顺序重新布置的图像提供给帧内预测单元122和帧间预测单元123。此外，画面重新布置缓存器111还可以将图像提供给头信息生成单元131。
运算单元112从自画面重新布置缓存器111读取的图像中减去从帧内预测单元122或帧间预测单元123经由预测图像选择单元124提供的预测图像，并且将其差分信息(残差数据)提供给正交变换单元113。例如，在经历帧内编码的图像的情况下，运算单元112从自画面重新布置缓存器111读取的图像中减去从帧内预测单元122提供的预测图像。此外，例如，在经历帧间编码的图像的情况下，运算单元112从自画面重新布置缓存器111读取的图像中减去从帧间预测单元123提供的预测图像。
正交变换单元113对从运算单元112提供的残差数据进行诸如离散余弦变换或Karhunen-Loeve变换的正交变换。正交变换单元113将通过正交变换获得的变换系数提供给量化单元114。
量化单元114对从正交变换单元113提供的变换系数进行量化。量化单元114基于关于从速率控制单元125提供的编码量的目标值的信息来设置量化参数并且对量化参数进行量化。量化单元114将量化的变换系数提供给无损编码单元115。
无损编码单元115根据任意编码方案对在量化单元114中量化的变换系数进行编码，并且生成编码数据(也被称为编码流)。此外，无损编码单元115从头信息生成单元131获取诸如例如序列参数集、图片参数集、片头等的头信息，并且将所获取的头信息设置为编码数据的头信息。该头信息可以包括用于针对色度的解块滤波的控制信息。此外，无损编码单元115从帧内预测单元122获取指示帧内预测模式等的信息，从帧间预测单元123获取指示帧间预测模式、差分运动矢量信息等的信息，并且将各种信息包括在头信息中。
无损编码单元115提供通过编码获得的编码数据以在累积缓存器116中进行累积。
无损编码单元115的编码方案的示例包括可变长度编码或算术编码。作为可变长度编码，例如存在于H.264/AVC方案中定义的上下文自适应可变长度编码(CAVLC)。作为算术编码，例如存在上下文自适应二进制算术编码(CABAC)。
累积缓存器116暂时地保存从无损编码单元115提供的编码数据。累积缓存器116以预定定时将所保存的编码数据输出至图像编码装置100的外部。换言之，累积缓存器116还用作传送编码数据的传送单元。
此外，还将在量化单元114中量化的变换系数提供给逆量化单元117。逆量化单元117根据与由量化单元114进行的量化对应的方法来对量化的变换系数进行逆量化。逆量化单元117将通过逆量化获得的变换系数提供给逆正交变换单元118。
逆正交变换单元118根据与由正交变换单元113进行的正交变换处理对应的方法来对从逆量化单元117提供的变换系数进行逆正交变换。逆正交变换单元118将通过逆正交变换获得的输出(恢复的残差数据)提供给运算单元119。
运算单元119将经由预测图像选择单元124从帧内预测单元122或帧间预测单元123提供的预测图像添加至从逆正交变换单元118提供的恢复的残差数据，并且获得局部重构图像(在下文中也被称为解码图像)。将解码图像提供给环路滤波器120或帧内预测单元122。
环路滤波器120对从运算单元119提供的解码图像进行环路滤波处理。环路滤波处理是任意的，只要环路滤波处理是包括至少解块滤波处理的滤波处理即可。例如，环路滤波器120通过对解码图像执行解块滤波处理来去除解块失真，并且通过使用维纳滤波器进行自适应环路滤波处理来提高图像质量。
环路滤波器120从头信息生成单元131获取可以包括用于针对色度的解块滤波的控制信息的头信息，并且基于该控制信息进行解块滤波处理。此外，如果需要的话环路滤波器120还可以将在滤波处理中使用的诸如滤波系数的信息提供给无损编码单元115，使得该信息被编码。
环路滤波器120将已适当地经历滤波处理的解码图像提供给帧存储器121。
帧存储器121存储提供的解码图像，并且以预定定时将存储的解码图像提供给帧间预测单元123作为参考图像。
帧内预测单元122使用当前要处理的图片中的像素值来进行帧间预测以生成预测图像，该图片是从运算单元119提供的作为参考图像的解码图像。帧内预测单元122在预先准备的多个帧内预测模式下进行帧内预测。
帧内预测单元122在所有候选帧内预测模式下生成预测图像，使用从画面重新布置缓存器111提供的输入图像来评估预测图像的成本函数值，并且选择最优模式。当选择了最优帧内预测模式时，帧内预测单元122将在最优模式下生成的预测图像提供给预测图像选择单元124。
此外，如上所述，帧内预测单元122将指示所采用的帧内预测模式等的帧内预测模式信息适当地提供给无损编码单元115，使得帧内预测模式信息被编码。
帧间预测单元123使用从画面重新布置缓存器111提供的输入图像以及从帧存储器121提供的参考图像来进行帧间预测处理(运动预测处理和补偿处理)。更具体地，帧间预测单元123根据通过进行如帧间预测处理的运动预测而检测的运动矢量来进行运动补偿处理，并且生成预测图像(帧间预测图像信息)。帧间预测单元123在预先准备的多个帧间预测模式下进行这样的帧间预测。
帧间预测单元123在所有候选帧间预测模式下生成预测图像。帧间预测单元123使用从画面重新布置缓存器111提供的输入图像以及生成的差分运动矢量的信息来评估预测图像的成本函数值，并且选择最优模式。当选择了最优帧间预测模式时，帧间预测单元123将在最优模式下生成的预测图像提供给预测图像选择单元124。
帧间预测单元123将指示采用的帧间预测模式的信息、在编码数据被解码时用于在帧间预测模式下进行处理所必需的信息等提供给无损编码单元115，使得该信息被编码。例如，存在作为必需信息的生成的差分运动矢量的信息，并且存在作为预测运动矢量信息的指示预测运动矢量的索引的标志。
预测图像选择单元124选择要提供给运算单元112和运算单元119的预测图像的提供源。例如，在帧内编码的情况下，预测图像选择单元124选择帧内预测单元122作为预测图像的提供源并且将从帧内预测单元122提供的预测图像提供给运算单元112和运算单元119。此外，例如，在帧间编码的情况下，预测图像选择单元124选择帧间预测单元123作为预测图像的提供源并且将从帧间预测单元123提供的预测图像提供给运算单元112和运算单元119。
速率控制单元125基于在累积缓存器116中累积的编码数据的编码量来控制量化单元114的量化操作的速率，使得不发生上溢或下溢。
头信息生成单元131基于从外部提供的指令或参考信息或者从画面重新布置缓存器111提供的图像数据来生成头信息，例如，序列参数集、图片参数集以及片头。该头信息是任意的，并且可以是例如视频参数集等。头信息生成单元131可以生成用于控制针对色度的解块滤波处理的控制信息并且将该控制信息包括在头信息中。头信息生成单元131将生成的头信息提供给无损编码单元115。此外，头信息生成单元131还将生成的头信息提供给环路滤波器120。
<头信息生成单元>
图9是示出头信息生成单元131的示例性主要配置的框图。如图9所示，头信息生成单元131包括例如头控制单元141、SPS生成单元151、PPS生成单元152和SH生成单元153。SPS生成单元151包括SPS扩展语法生成单元161。PPS生成单元152包括PPS扩展语法生成单元162。SH生成单元153包括SH扩展语法生成单元163。SPS扩展语法生成单元161包括sps_chroma_deblocking_filter_disabled_flag生成单元171。PPS扩展语法生成单元162包括pps_chroma_deblocking_filter_disabled_flag生成单元172。SH扩展语法生成单元163包括slice_chroma_deblocking_filter_disabled_flag生成单元173。
头控制单元141控制SPS生成单元151、PPS生成单元152、SH生成单元153等，并且控制头信息的生成。
SPS生成单元151生成序列参数集(SPS)。SPS生成单元151还可以生成不同于由SPS扩展语法生成单元161生成的序列参数集的语法元素的任意语法元素。如图4的示例中所示，例如，SPS扩展语法生成单元161生成序列参数集的扩展语法元素。例如，当存在不同于sps_chroma_deblocking_filter_disabled_flag的扩展语法元素时，SPS扩展语法生成单元161还可以生成扩展语法元素。扩展语法元素可以是任意的。sps_chroma_deblocking_filter_disabled_flag生成单元171生成sps_chroma_deblocking_filter_disabled_flag。如上文参照图4所述，sps_chroma_deblocking_filter_disabled_flag是指示是否将解块滤波应用于其中在属于对应序列的片中未定义pps_chroma_deblocking_filter_disabled_flag或slice_chroma_deblocking_filter_disabled_flag(其将随后进行描述)的片头的色度的标志。
PPS生成单元152生成图片参数集(PPS)。PPS生成单元152还可以生成不同于由PPS扩展语法生成单元162生成的图片参数集的语法元素的任意语法元素。如图5的示例中所示，例如，PPS扩展语法生成单元162生成图片参数集的扩展语法元素。例如，当存在不同于pps_chroma_deblocking_filter_disabled_flag的扩展语法元素时，PPS扩展语法生成单元162还可以生成扩展语法元素。扩展语法元素可以是任意的。pps_chroma_deblocking_filter_disabled_flag生成单元172生成pps_chroma_deblocking_filter_disabled_flag。如上文参照图5所述，pps_chroma_deblocking_filter_disabled_flag是指示是否将解块滤波应用于其中在属于对应图片的片中未定义slice_chroma_deblocking_filter_disabled_flag(其将随后进行描述)的片的色度的标志。
SH生成单元153生成片头(SH)。SH生成单元153还可以生成不同于由SH扩展语法生成单元163生成的片头的语法元素的任意语法元素。如图6的示例中所示，例如，SH扩展语法生成单元163生成片头的扩展语法元素。例如，当存在不同于slice_chroma_deblocking_filter_disabled_flag的扩展语法元素时，SH扩展语法生成单元163还可以生成扩展语法元素。扩展语法元素可以是任意的。slice_chroma_deblocking_filter_disabled_flag生成单元173生成slice_chroma_deblocking_filter_disabled_flag。如上文参照图6所述，slice_chroma_deblocking_filter_disabled_flag是指示是否将解块滤波应用于对应片的色度的标志。
<环路滤波器>
图10是示出环路滤波器120的示例性主要配置的框图。如图10所示，环路滤波器120包括例如解块滤波控制单元181和解块滤波处理单元182。解块滤波处理单元182包括亮度解块滤波处理单元191和色度解块滤波处理单元192。
解块滤波控制单元181基于从头信息生成单元131提供的头信息来控制由解块滤波处理单元182进行的解块滤波处理(即，由亮度解块滤波处理单元191进行的针对亮度的解块滤波处理以及由色度解块滤波处理单元192进行的针对色度的解块滤波处理)。头信息可以包括用于针对色度的解块滤波的控制信息。解块滤波控制单元181进行例如针对色度的解块滤波处理的执行控制(对是否执行针对色度的解块滤波处理的控制)作为解块滤波处理的控制。
解块滤波处理单元182根据解块滤波控制单元181的控制对从运算单元119提供的解码图像进行解块滤波处理。亮度解块滤波处理单元191根据解块滤波控制单元181的控制对从运算单元119提供的解码图像进行针对亮度的解块滤波处理。色度解块滤波处理单元192根据解块滤波控制单元181的控制对从运算单元119提供的解码图像进行针对色度的解块滤波处理。解块滤波处理单元182将已经受解块滤波处理的解码图像或未经受解块滤波处理的解码图像提供给帧存储器121。
<编码处理的流程>
接下来，将描述由图像编码装置100执行的每个处理的流程的示例。首先，将参照图11的流程图来描述编码处理的流程的示例。
当编码处理开始时，在步骤S101中，头信息生成单元131生成例如诸如序列参数集(SPS)、图片参数集(PPS)和片头(SH)的头信息。
在步骤S102中，画面重新布置缓存器111按显示顺序存储输入运动图像的帧(图片)的图像，并且按编码顺序重新布置显示顺序的图片。
在步骤S103中，帧内预测单元122进行帧内预测模式的帧内预测处理。
在步骤S104中，帧间预测单元123在帧间预测模式下进行执行运动预测、运动补偿等的帧间预测处理。
在步骤S105中，预测图像选择单元124基于成本函数值等来选择在步骤S103中通过帧内预测生成的预测图像或在步骤S104中通过帧间预测生成的预测图像。
在步骤S106中，运算单元112计算其中帧的顺序是在步骤S102的处理中重新布置的输入图像与在步骤S105的处理中选择的预测图像之间的差。换言之，运算单元112生成输入图像与预测图像之间的残差数据。因此获得的残差数据的数据量减小为小于原始图像数据的数据量。因此，可以将数据量压缩为小于当图像在没有改变的情况下被编码时的数据量。
在步骤S107中，正交变换单元113对在步骤S106的处理中生成的残差数据进行正交变换。
在步骤S108中，量化单元114使用由速率控制单元125计算的量化参数来对在步骤S107的处理中获得的正交变换系数进行量化。
在步骤S109中，逆量化单元117根据与量化的特征对应的特征来对在步骤S108的处理中生成的量化的系数(也被称为量化系数)进行逆量化。
在步骤S110中，逆正交变换单元118对在步骤S109中的处理中获得的正交变换系数进行逆正交变换。
在步骤S111中，运算单元119通过将在步骤S105的处理中选择的预测图像加至在步骤S110的处理中恢复的残差数据来生成解码图像的图像数据。
在步骤S112中，环路滤波器120对在步骤S111的处理中生成的解码图像的图像数据适当地进行环路滤波处理。
在步骤S113中，帧存储器121存储被局部解码并且已经受步骤.S112的处理的解码图像。
在步骤S114中，无损编码单元115对在步骤S108的处理中获得的量化的系数进行编码。换言之，对与残差数据对应的数据进行诸如可变长度编码或算术编码的无损编码。
此外，此时，无损编码单元115将在步骤S101的处理中生成的头信息进行编码并且将编码头信息添加至通过对量化的系数进行编码而获得的编码数据。
此外，无损编码单元115对于在步骤S105的处理中选择的预测图像的预测模式相关的信息进行编码并且将该编码信息添加至编码数据的头信息。换言之，无损编码单元115根据从帧内预测单元122提供的最优帧内预测模式信息或者从帧间预测单元123提供的最优帧间预测模式来对例如信息进行编码，并且将编码信息添加至编码数据的头信息。
在步骤S115中，累积缓存器116对在步骤S114的处理中获得的编码数据等进行累积。存储在累积缓存器116中的编码数据等被适当地读取作比特流并且经由传送路径或记录介质而被传送至解码侧。
在步骤S116中，速率控制单元125基于步骤S115的处理中在累积缓存器116中累积的编码数据的编码量(生成的代码量)来控制步骤S108的量化处理的速率，使得不发生上溢或下溢。
当步骤S116的处理结束时，编码处理结束。
<头信息生成处理的流程>
接下来，将参照图12的流程图来描述在编码处理的步骤S101中执行的头信息生成处理的流程的示例。
当头信息生成处理开始时，在步骤S121中，SPS生成单元151生成序列参数集(SPS)。SPS生成单元151生成不同于序列参数集的扩展语法的语法元素，而SPS扩展语法生成单元161生成不同于序列参数集的sps_chroma_deblocking_filter_disabled_flag的语法元素。
在步骤S122中，sps_chroma_deblocking_filter_disabled_flag生成单元171生成序列参数集的sps_chroma_deblocking_filter_disabled_flag。例如，当对在属于对应序列的片中未定义pps_chroma_deblocking_filter_disabled_或slice_chroma_deblocking_filter_disabled_flag(其将随后进行描述)的片的色度进行解块滤波处理时，sps_chroma_deblocking_filter_disabled_flag生成单元171将标志的值设置为假(例如“0”)。此外，例如，当对在属于对应序列的片中未定义pps_chroma_deblocking_filter_disabled_flag或slice_chroma_deblocking_filter_disabled_flag(其将随后进行描述)的片的色度不进行解块滤波处理时，sps_chroma_deblocking_filter_disabled_flag生成单元171将标志的值设置为真(例如“1”)。例如，基于诸如预定设置的任意信息来决定标志的值。
在步骤S123,中PPS生成单元152生成图片参数集(PPS)。PPS生成单元152生成不同于图片参数集的扩展语法的语法元素，而PPS扩展语法生成单元162生成不同于图片参数集的pps_chroma_deblocking_filter_disabled_flag的扩展语法元素。
在步骤S124中，pps_chroma_deblocking_filter_disabled_flag生成单元172生成图片参数集的pps_chroma_deblocking_filter_disabled_flag。例如，当对其中在属于对应图片的片中未定义slice_chroma_deblocking_filter_disabled_flag(其将随后进行描述)的片的色度进行解块滤波处理时，pps_chroma_deblocking_filter_disabled_flag生成单元172将标志的值设置为假(例如“0”)。例如，当对在属于对应图片的片中未定义slice_chroma_deblocking_filter_disabled_flag(其将随后进行描述)的片的色度不进行解块滤波处理时，pps_chroma_deblocking_filter_disabled_flag生成单元172将标志的值设置为真(例如“1”)。例如，基于诸如预定设置的任意信息来决定标志的值。
在步骤S125中，SH生成单元153生成片头(SH)。SH生成单元153生成不同于片头的扩展语法的语法元素，而SH扩展语法生成单元163生成不同于片头的slice_chroma_deblocking_filter_disabled_flag的扩展语法元素。
在步骤S126中，slice_chroma_deblocking_filter_disabled_flag生成单元173生成片头的slice_chroma_deblocking_filter_disabled_flag。例如，当对于对应片的色度进行解块滤波处理时，slice_chroma_deblocking_filter_disabled_flag生成单元173将标志的值设置为假(例如“0”)。此外，例如，当对于对应片的色度不进行解块滤波处理时，slice_chroma_deblocking_filter_disabled_flag生成单元173将标志的值设置为真(例如“1”)。例如，基于诸如预定设置的任意信息来决定标志的值。
当步骤S126的处理结束时，头信息生成处理结束，并且处理返回图11。
由于用于控制针对图像数据的色度分量(色度)的解块滤波处理的控制信息被生成为如上所述的头信息，因此图像编码装置100(头信息生成单元131)可以与针对亮度分量(亮度)的解块滤波处理无关地控制针对色度的解块滤波处理。例如，可以进行针对亮度的解块滤波处理而不进行针对色度的解块滤波处理。因此，通过应用本技术，图像编码装置100(头信息生成单元131)可以在当图像数据被编码或被解码时进行的解块滤波处理中适当地处理画面内容的图像以及自然图像并且因此抑制了图像质量的降低。
<环路滤波处理的流程>
接下来，将参照图13的流程图来描述在图11的编码处理的步骤S112中进行的环路滤波处理的流程的示例。
当环路滤波处理开始时，在步骤S141中，解块滤波控制单元181基于在头信息中包括的pps_deblocking_filter_disabled_flag的值和slice_deblocking_filter_disabled_flag的值来控制针对解码图像的亮度的解块滤波处理的执行。上文已参照图2和图3描述了语法元素，并且slice_deblocking_filter_disabled_flag的值优先于pps_deblocking_filter_disabled_flag的值。此外，亮度解块滤波处理单元191基于该控制即根据pps_deblocking_filter_disabled_flag的值和slice_deblocking_filter_disabled_flag的值来进行针对解码图像的亮度的解块滤波处理。
在步骤S142中，解块滤波控制单元181基于在头信息中包括的sps_chroma_deblocking_filter_disabled_flag的值、pps_chroma_deblocking_filter_disabled_flag的值以及slice_chroma_deblocking_filter_disabled_flag的值来控制针对解码图像的色度的解块滤波处理的执行。上文已参照图4至图6描述了语法元素，并且pps_chroma_deblocking_filter_disabled_flag的值优先于sps_chroma_deblocking_filter_disabled_flag的值，并且slice_chroma_deblocking_filter_disabled_flag的值优先于pps_chroma_deblocking_filter_disabled_flag的值和sps_chroma_deblocking_filter_disabled_flag的值。此外，色度解块滤波处理单元192基于该控制即根据sps_chroma_deblocking_filter_disabled_flag的值、pps_chroma_deblocking_filter_disabled_flag的值和slice_chroma_deblocking_filter_disabled_flag的值来进行针对解码图像的色度的解块滤波处理。
当步骤S142的处理结束时，环路滤波处理结束，并且处理返回图11。
如上所述，基于在头信息中包括的用于控制针对图像数据的色度分量(色度)的解块滤波处理的控制信息来进行解块滤波处理，因此图像编码装置100(环路滤波器120)可以与针对亮度分量(亮度)的解块滤波处理无关地进行针对色度的解块滤波处理。例如，可以进行针对亮度的解块滤波处理而不进行针对色度的解块滤波处理。因此，通过应用本技术，图像编码装置100(环路滤波器120)可以在图像数据被编码时对画面内容的图像以及自然图像适当地进行解块滤波处理，因此抑制了图像质量的降低。
<图像解码装置>
图14是示出作为应用本技术的图像处理装置的一个方面的图像解码装置的示例性主要配置的框图。例如，图14所示的图像解码装置200对由图像编码装置100(图8)根据HEVC编码方案对图像数据进行编码而生成的编码数据进行解码。
如图14所示，图像解码装置200包括累积缓存器211、无损解码单元212、逆量化单元213、逆正交变换单元214、运算单元215、环路滤波器216和画面重新布置缓存器217。图像解码装置200还包括帧存储器218、帧内预测单元219、帧间预测单元220和预测图像选择单元221
累积缓存器211也是接收从编码侧传送的编码数据的接收单元。累积缓存器211接收并且累积传送的编码数据，并且以预定定时将编码数据提供给无损解码单元212。无损解码单元212根据HEVC方案对从累积缓存器211提供的编码数据进行解码。无损解码单元212将通过解码获得的量化的系数数据提供给逆量化单元213。
此外，无损解码单元212基于与添加了编码数据的最优预测模式相关的信息来确定是帧间预测模式还是帧内预测模式被选择为最优预测模式，并且将与最优预测模式相关的信息提供给帧内预测单元219和帧间预测单元220中的被确定为所选择的模式的一个。例如，当帧内预测模式被选择为在编码侧的最优预测模式时，将与该最优预测模式相关的信息提供给帧内预测单元219。此外，例如，当帧间预测模式被选择为在编码侧的最优预测模式时，将与该最优预测模式相关的信息提供给帧间预测单元220。
此外，无损解码单元212将逆量化需要的信息例如量化矩阵或量化参数提供给逆量化单元213，
此外，无损解码单元212将诸如序列参数集(SPS)、图片参数集(PPS)、以及片头的头信息提供给环路滤波器216。如上文结合图像编码装置100所述，头信息可以包括用于针对色度的解块滤波的控制信息。
逆量化单元213对通过由无损解码单元212根据与编码侧处的量化方案对应的方案而进行的解码获得的量化的系数数据进行逆量化。逆量化单元213将获得的系数数据提供给逆正交变换单元214。
逆正交变换单元214根据与编码侧处的正交变换方案对应的方案来对从逆量化单元213提供的正交变换系数进行逆正交变换。逆正交变换单元214通过逆正交变换处理来获得与在编码侧进行正交变换之前的状态对应的残差数据。将通过逆正交变换获得的残差数据提供给运算单元215。
运算单元215从逆正交变换单元214获取残差数据。此外，运算单元215经由预测图像选择单元221从帧内预测单元219或帧间预测单元220获取预测图像。运算单元215通过将差分图像添加至预测图像来获得与在编码侧减去预测图像之前的图像对应的解码数据。运算单元215将解码图像提供给环路滤波器216和帧内预测单元219。
环路滤波器216是与图像编码装置100(图8)的环路滤波器120类似的处理单元，并且进行与环路滤波器120的处理类似的处理。换言之，环路滤波器216对从运算单元215提供的解码图像适当地进行环路滤波处理。环路滤波处理是任意的，只要环路滤波处理是包括至少解块滤波处理的滤波处理即可。例如，环路滤波器120通过对解码图像执行解块滤波处理来去除解块失真，并且通过使用维纳滤波器进行自适应环路滤波处理来提高图像质量。
环路滤波器216从无损解码单元212获取可以包括用于针对色度的解块滤波的控制信息的头信息，并且基于该控制信息进行解块滤波处理。此外，环路滤波器216可以使用从编码侧提供的滤波系数来进行滤波处理。
环路滤波器216将已适当地经受滤波处理的解码图像提供给画面重新布置缓存器217和帧存储器218。
画面重新布置缓存器217对图像进行重新布置。换言之，按原始显示顺序重新布置在编码侧按编码顺序布置的帧的顺序。画面重新布置缓存器217将帧的顺序被重新布置的解码图像数据输出至图像解码装置200的外部。
帧存储器218存储提供的解码图像，并且以预定定时或者基于从外部例如帧间预测单元220等给出的请求来将存储的解码图像提供给帧间预测单元220作为参考图像。
将指示通过对头信息等进行解码而获得的帧内预测模式的信息从无损解码单元212适当地提供给帧内预测单元219。帧内预测单元219在编码侧处使用的帧内预测模式下将从运算单元215提供的解码图像用作参考图像来进行帧内预测，并且生成预测图像。帧内预测单元219将生成的预测图像提供给预测图像选择单元221。
帧间预测单元220从无损解码单元212获取通过对头信息进行解码而获得的信息(最优预测模式信息、参考图像信息等)。
帧间预测单元220在从无损解码单元212获取的最优预测模式信息所指示的帧间预测模式下使用从帧存储器218获取的参考图像来进行帧间预测，并且生成预测图像。
预测图像选择单元221将从帧内预测单元219提供的预测图像或从帧间预测单元220提供的预测图像提供给运算单元215。此外，运算单元215将使用运动矢量生成的预测图像添加至从逆正交变换单元214提供的残差数据，因此原始图像被解码。换言之，生成了解码图像。
<环路滤波器>
图15是示出环路滤波器216的示例性主要配置的框图。如图15所示，环路滤波器216包括例如解块滤波控制单元251和解块滤波处理单元252。解块滤波处理单元252包括亮度解块滤波处理单元261和色度解块滤波处理单元262。换言之，环路滤波器216具有与环路滤波器120的配置类似的配置并且进行类似处理。
换言之，解块滤波控制单元251与环路滤波器120的解块滤波控制单元181对应，并且基于从无损解码单元212提供的头信息来控制由解块滤波处理单元252进行的解块滤波处理(即，由亮度解块滤波处理单元261进行的针对亮度的解块滤波处理以及由色度解块滤波处理单元262进行的针对色度的解块滤波处理)。头信息可以包括用于针对色度的解块滤波的控制信息。解块滤波控制单元251进行例如针对色度的解块滤波处理的执行控制(对是否进行针对色度的解块滤波处理的控制)作为解块滤波处理的控制。
此外，解块滤波处理单元252与环路滤波器120的解块滤波处理单元182对应，并且根据解块滤波处理单元251的控制对从运算单元215提供的解码图像进行解块滤波处理。解块滤波处理单元252将已经受解块滤波处理的解码图像或未经受解块滤波处理的解码图像提供给画面重新布置缓存器217和帧存储器218。
亮度解块滤波处理单元261与环路滤波器120的亮度解块滤波处理单元191对应，并且根据解块滤波处理单元251的控制对从运算单元215提供的解码图像进行针对亮度的解块滤波处理。色度解块滤波处理单元262与环路滤波器120的色度解块滤波处理单元192对应，并且根据解块滤波处理单元251的控制对从运算单元215提供的解码图像进行针对色度的解块滤波处理。
<解码处理的流程>
接下来，将描述由图像解码装置200进行的每个处理的流程的示例。首先，将参照图16的流程图来描述解码处理的流程的示例。
当解码处理开始时，在步骤S201中，累积缓存器211对传送的比特流进行累积。在步骤S202中，无损解码单元212对在累积缓存器211中累积的比特流进行解码，并且获取诸如序列参数集(SPS)、图片参数集(PPS)、以及片头的头信息。例如，如上所述，头信息是由图像编码装置100生成的并且包括用于解块滤波的控制信息。
在步骤S203中，无损解码单元212对在累积缓存器211中累积的比特流进行解码，因此在编码侧编码的I图片、P图片、B图片等被解码。
在步骤S204中，逆量化单元213对在步骤S203的处理中获得的量化的系数进行逆量化。
在步骤S205中，逆正交变换单元214对在步骤S204中的处理中获得的正交变换系数进行逆正交变换。通过该处理，恢复了残差数据。
在步骤S206中，帧内预测单元219或帧间预测单元220进行预测处理，并且生成预测图像。换言之，预测处理是在被确定为在无损解码单元212中进行编码时应用的预测模式下进行的。更具体地，例如，当在进行编码时应用了帧内预测时，帧内预测单元219以在进行编码时被认为最优的帧内预测模式生成预测图像。此外，例如，当在进行编码时应用了帧间预测时，帧间预测单元220以在进行编码时被认为最优的帧间预测模式生成预测图像。
在步骤S207中，运算单元215将在步骤S206中生成的预测图像加至在步骤S205的处理中恢复的残差数据。因此，获得了解码图像。
在步骤S208中，环路滤波器216对在步骤S207的处理中生成的解码图像的图像数据适当地进行环路滤波处理。
在步骤S209中，画面重新布置缓存器217对已经受步骤S208的处理的解码图像的帧进行重新布置。换言之，按原始显示顺序重新布置在进行编码时重新布置的帧的顺序。将其中帧被重新布置的解码图像输出至图像解码装置200的外部。
在步骤S210中，帧存储器218存储已经受步骤S208的处理的解码图像。
当步骤S210的处理结束时，解码处理结束。
在步骤S208中，环路滤波器216与上文参照图13的流程图所描述的由图像编码装置100的环路滤波器120进行的环路滤波处理的示例类似进行环路滤波处理。换言之，对图13所示的环路滤波处理的流程的示例的描述还可以应用于对由环路滤波器216进行的环路滤波处理(即，解码处理的步骤S208的处理)的描述。
换言之，图像解码装置200(环路滤波器216)基于在头信息中包括的用于控制针对图像数据的色度分量(色度)的解块滤波处理的控制信息来进行解块滤波处理。因此，图像解码装置200(环路滤波器216)可以与针对亮度分量(亮度)的解块滤波处理无关地进行针对色度的解块滤波处理。例如，可以进行针对亮度的解块滤波处理而不进行针对色度的解块滤波处理。因此，通过应用本技术，图像解码装置200(环路滤波器216)可以在图像数据被解码时对画面内容的图像以及自然图像更加适当地进行解块滤波处理，因此抑制了图像质量的降低。
已结合将用于控制针对色度的解块滤波处理的控制信息包括在序列参数集、图片参数集和片头中的示例进行了以上描述，但是可以将控制信息存储在编码数据的头信息的任意位置中。例如，可以将控制信息包括在不同于上述示例的层的头信息例如视频参数集或区头中。此外，可以将控制信息不包括在序列参数集、图片参数集和片头中。例如，可以将控制信息包括在仅序列参数集和图片参数集中，仅图片参数集和片头中，或仅序列参数集和片头中。此外，可以将控制信息仅包括在序列参数集、图片参数集和片头中的任何一个中。
<2.第二实施方式>
<解块滤波的控制参数的使用>
可以根据与现有解块滤波相关的控制参数的值来生成用于控制针对色度的解块滤波处理的控制信息。通常，存在很少的以下情况：期望对色度进行解块滤波处理而不对亮度进行解块滤波处理。因此，可以对于对其不进行针对亮度的解块滤波处理的片不进行针对色度的解块滤波处理。换言之，对于这样的片，不需要控制(可能省略)针对色度的解块滤波处理。换言之，仅当存在将进行针对亮度的解块滤波处理的可能性时，才可以进行针对色度的解块滤波处理的控制。
可以基于与现有解块滤波相关的控制参数来容易地确定是否进行针对亮度的解块滤波处理。因此，期望的是仅当根据控制参数的值存在将进行针对亮度的解块滤波处理的可能性时才设置用于控制针对色度的解块滤波处理的控制信息。
因此，由于针对不可能经受针对亮度的解块滤波处理的片可以省略用于控制针对色度的解块滤波处理的控制信息(即，可以省略用于控制明显不需要的针对色度的解块滤波处理的控制信息)，因此可以相应地抑制编码量的增大并且抑制编码效率的降低。
将描述更加具体的示例。例如，如图17所示，在图片参数集中，仅当deblocking_filter_control_present_flag的值为真(“1”)时才可以将pps_chroma_deblocking_filter_disabled_flag设置为扩展语法元素。
如上文参照图2所述，deblocking_filter_control_present_flag是指示在图片参数集中是否存在用于控制解块滤波的语法元素的标志。换言之，deblocking_filter_control_present_flag是指示将进行针对亮度的解块滤波处理的可能性的与解块滤波相关的控制参数。
例如，当deblocking_filter_control_present_flag的值为真(“1”)时，指示图片参数集中存在用于控制解块滤波的语法元素。换言之，在这种情况下，对于属于对应图片的片而言，存在将进行针对亮度的解块滤波处理的可能性，并且也存在将进行针对色度的解块滤波处理的可能性。鉴于此，设置pps_chroma_deblocking_filter_disabled_flag。
此外，例如，当deblocking_filter_control_present_flag的值为假(“0”)时，指示图片参数集中不存在用于控制解块滤波的语法元素。换言之，在这种情况下，对于属于对应图片的片而言，不存在将进行针对亮度的解块滤波处理的可能性，并且也不需要针对色度的解块滤波处理的控制。鉴于此，省略了对pps_chroma_deblocking_filter_disabled_flag的设置。
此外，例如，如图18所示，在片头中，仅当deblocking_filter_override_flag的值为真(“1”)时才可以将slice_chroma_deblocking_filter_disabled_flag设置为扩展语法元素。
如上文参照图3所述，deblocking_filter_override_flag是指示片头中是否存在用于控制解块滤波的语法元素的标志。换言之，deblocking_filter_control_present_flag是指示将进行针对亮度的解块滤波处理的可能性的与解块滤波相关的控制参数。
例如，当deblocking_filter_override_flag的值为真(“1”)时，指示片头中存在用于控制解块滤波的语法元素。换言之，在这种情况下，对于对应片而言，存在将进行针对亮度的解块滤波处理的可能性，并且也存在将进行针对色度的解块滤波处理的可能性。鉴于此，设置slice_chroma_deblocking_filter_disabled_flag。
此外，例如，当deblocking_filter_override_flag的值为假(“0”)时，指示片头中不存在用于控制解块滤波的语法元素。换言之，在这种情况下，对于对应片而言，不存在将进行针对亮度的解块滤波处理的可能性，并且也不需要针对色度的解块滤波处理的控制。鉴于此，省略了对slice_chroma_deblocking_filter_disabled_flag的设置。
因此，由于可以在每个层的头信息例如图片参数集或片头中省略明显不需要的用于控制针对色度的解块滤波处理的控制信息，因此可以相应地抑制编码量的增大并且抑制编码效率的降低。
<图像编码装置、头信息生成单元和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像编码装置的配置与第一实施方式的图像编码装置的配置(图8)类似。此外，在这种情况下，头信息生成单元131和环路滤波器120的配置也与第一实施方式中的头信息生成单元和环路滤波器的配置(图9和图10)类似。
<编码处理的流程>
此外，在这种情况下，由图像编码装置100进行的编码处理的流程与第一实施方式的编码处理的流程(图11)类似。
<头信息生成处理的流程>
接下来，将参照图19的流程图来描述在这种情况下在编码处理的步骤S101中进行的头信息生成处理的流程的示例。
当头信息生成处理开始时，与图12的步骤S121至步骤S123的处理类似地进行步骤S231至步骤S233的处理。
在步骤S234中，头控制单元141确定图片参数集中的deblocking_filter_control_present_flag的值是否为真(“1”)。当确定deblocking_filter_control_present_flag的值为真(“1”)时，处理行进至步骤S235。
与图12的步骤S124的处理类似地进行步骤S235的处理。
当步骤S235的处理结束时，处理行进至步骤S236。此外，当在步骤S234中确定deblocking_filter_control_present_flag的值为假(“0”)时，处理行进至步骤S236。
与图12的步骤S125的处理类似地进行步骤S236的处理。
在步骤S237中，头控制单元141确定片头中的deblocking_filter_override_flag的值是否为真(“1”)。当确定deblocking_filter_override_flag的值为真(“1”)时，处理行进至步骤S238。
与图12的步骤S126的处理类似地进行步骤S238的处理。
当步骤S238的处理结束时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S237中确定deblocking_filter_override_flag的值为假(“0”)时，头信息生成处理结束，并且处理返回图11。
由于用于控制针对色度的解块滤波处理的控制信息根据与上述现有的解块滤波相关的控制参数的值来生成，因此对于其中明显不需要针对色度的解块滤波处理片而言，图像编码装置100(头信息生成单元131)可以省略用于控制针对色度的解块滤波处理的控制信息。因此，通过应用本技术，图像编码装置100(头信息生成单元131)可以抑制编码量的增大同时抑制图像质量的降低，因此抑制编码效率的降低。
<环路滤波处理的流程>
接下来，将参照图20的流程图来描述在这种情况下在编码处理的步骤S112中进行的环路滤波处理的流程的示例。
当环路滤波处理开始时，与图13的步骤S141的处理类似地进行步骤S251的处理。
在步骤S252中，解块滤波控制单元181基于在头信息中包括的deblocking_filter_control_present_flag的值来检查pps_chroma_deblocking_filter_disabled_flag的值。例如，当deblocking_filter_control_present_flag的值为真(“1”)时，解块滤波控制单元181检查pps_chroma_deblocking_filter_disabled_flag的值，并且在步骤S253的处理中使用该值。此外，例如，当deblocking_filter_control_present_flag的值为假(“0”)时，解块滤波控制单元181不检查pps_chroma_deblocking_filter_disabled_flag的值，并且在步骤S253的处理中不使用pps_chroma_deblocking_filter_disabled_flag的值。
此外，解块滤波控制单元181基于在头信息中包括的deblocking_filter_override_flag的值来检查slice_chroma_deblocking_filter_disabled_flag的值。例如，当deblocking_filter_override_flag的值为真(“1”)时，解块滤波控制单元181检查slice_chroma_deblocking_filter_disabled_flag的值，并且在步骤S253的处理中使用该值。此外，例如，当deblocking_filter_override__flag的值为假(“0”)时，解块滤波控制单元181不检查slice_chroma_deblocking_filter_disabled_flag的值，并且在步骤S253的处理中不使用slice_chroma_deblocking_filter_disabled_flag的值。
与图13的步骤S142的处理类似地进行步骤S253的处理。此处，当在步骤S252中不检查pps_chroma_deblocking_filter_disabled_flag的值和slice_chroma_deblocking_filter_disabled_flag的值时，进行针对解码图像的色度的解块滤波处理而不管该值如何。
当步骤S253的处理结束时，环路滤波处理结束，并且处理返回图11。
如上所述进行环路滤波处理，因此对于其中明显不需要针对色度的解块滤波处理的片而言，图像编码装置100(环路滤波器120)可以省略对用于控制针对色度的解块滤波处理的控制信息的参考。因此，通过应用本技术，图像编码装置100(环路滤波器120)可以抑制处理负荷的增大同时抑制图像质量的降低。
<图像解码装置和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像解码装置的配置与第一实施方式的图像解码装置的配置(图14)类似。此外，在这种情况下，环路滤波器216的配置也与第一实施方式的环路滤波器的配置(图15)类似。
<解码处理的流程>
此外，在这种情况下，由图像解码装置200进行的解码处理的流程与第一实施方式的解码处理的流程(图16)类似。
换言之，与第一实施方式类似，在解码处理的步骤S208中，环路滤波器216与上文参照图20的流程图所描述的由图像编码装置100的环路滤波器120进行的环路滤波处理的示例类似地进行环路滤波处理。换言之，对图20所示的环路滤波处理的流程的示例的描述还可以应用于对由环路滤波器216进行的环路滤波处理(即，在这种情况下解码处理的步骤S208的处理)的描述。
换言之，图像解码装置200(环路滤波器216)根据与现有的解块滤波相关的控制参数的值来生成用于控制针对色度的解块滤波处理的控制信息。因此，对于其中明显不需要针对色度的解块滤波处理的片而言，图像解码装置200(环路滤波器216)可以省略对用于控制针对色度的解块滤波处理的控制信息的参考。因此，通过应用本技术，图像解码装置200(环路滤波器216)可以抑制处理负荷的增大同时抑制图像质量的降低。
此外，例如，上述根据与现有解块滤波相关的控制参数的值来生成用于控制针对色度的解块滤波处理的控制信息可以在其中存在与现有解块滤波相关的控制参数的任意层的头信息中进行，并且可以在图片参数集和片头中的仅一个中进行。
<3.第三实施方式>
<解块滤波的控制参数的使用>
注意，可以根据与现有解块滤波相关的控制参数来生成与针对色度的解块滤波相关的控制参数。因此，可以与用于控制现有解块滤波处理的控制信息无关地指示在每层的头信息中用于控制针对色度的解块滤波处理的控制信息的存在。换言之，可以与针对亮度的解块滤波处理无关地控制对用于控制针对色度的解块滤波处理的控制信息的生成。此外，使用这样的控制参数，对其中不需要控制针对色度的解块滤波处理的片而言，可以与针对亮度的解块滤波处理无关地省略用于控制针对色度的解块滤波处理的控制信息，因此可以相应地抑制编码量的增大并且抑制编码效率的降低。
将描述更加具体的示例。如图21所示，例如，在图片参数集中，可以将chroma_deblocking_filter_control_present_flag设置为扩展语法元素，并且可以仅当chroma_deblocking_filter_control_present_flag的值为真(例如，“1”)时才将pps_chroma_deblocking_filter_disabled_flag设置为扩展语法元素。此外，此时，可以将chroma_deblocking_filter_override_enabled_flag设置为扩展语法。
chroma_deblocking_filter_control_present_flag是指示图片参数集中是否包括用于控制针对色度的解块滤波的语法元素的标志。换言之，该标志与deblocking_filter_control_present_flag对应。例如，当chroma_deblocking_filter_control_present_flag的值为真(例如，“1”)时，指示图片参数集中包括该语法元素。换言之，在这种情况下，设置pps_chroma_deblocking_filter_disabled_flag。此外，例如，当chroma_deblocking_filter_control_present_flag的值为假(例如，“0”)时，指示图片参数集中不包括该语法元素。换言之，在这种情况下，省略对pps_chroma_deblocking_filter_disabled_flag的设置。
chroma_deblocking_filter_override_enabled_flag是指示属于对应图片的片的片头中是否存在chroma_deblocking_filter_override_flag(其将随后进行描述)的标志。换言之，该标志与deblocking_filter_override_enabled_flag对应。例如，当chroma_deblocking_filter_override_enabled_flag的值为真(例如，“1”)时，指示属于对应图片的片的片头中存在chroma_deblocking_filter_override_flag。此外，例如，当chroma_deblocking_filter_override_enabled_flag的值为假(例如，“0”)时，指示属于对应图片的片的片头中不存在chroma_deblocking_filter_override_flag。
此外，例如，如图22所示，仅当设置在片头所属的图片参数集中的chroma_deblocking_filter_override_enabled_flag的值为真(例如“1”)时，才可以将chroma_deblocking_filter_override_flag设置为片头中的扩展语法元素。此外，仅当chroma_deblocking_filter_override_flag的值为真(例如，“1”)时才可以将slice_chroma_deblocking_filter_disabled_flag设置为扩展语法元素。
chroma_deblocking_filter_override_flag是指示片头中是否包括用于控制针对色度的解块滤波的语法元素的标志。换言之，该标志与deblocking_filter_override_flag对应。例如，当chroma_deblocking_filter_override_flag的值为真(例如，“1”)时，指示片头中包括该语法元素。换言之，在这种情况下，设置slice_chroma_deblocking_filter_disabled_flag。此外，例如，当chroma_deblocking_filter_override_flag的值为假(例如，“0”)时，指示片头中不包括该语法元素。换言之，在这种情况下，省略对slice_chroma_deblocking_filter_disabled_flag的设置。
因此，可以与用于控制现有解块滤波处理的控制信息无关地控制每层的头信息中用于控制针对色度的解块滤波处理的控制信息的存在。此外，使用控制参数，对其中不需要控制针对色度的解块滤波处理的片而言，可以与针对亮度的解块滤波处理无关地省略用于控制针对色度的解块滤波处理的控制信息，因此可以相应地抑制编码量的增大并且抑制编码效率的降低。
<图像编码装置和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像编码装置的配置与第一实施方式的图像编码装置的配置(图8)类似。此外，在这种情况下，环路滤波器120的配置与第一实施方式的环路滤波器的配置(图10)类似。
<头信息生成单元>
图23中示出了在这种情况下头信息生成单元131的示例性主要配置。如图23所示，头信息生成单元131基本上具有与第一实施方式的头信息生成单元(图9)类似的配置，但是PPS扩展语法生成单元162还包括chroma_deblocking_filter_control_present_flag生成单元271和chroma_deblocking_filter_override_enabled_flag生成单元272。此外，SH扩展语法生成单元163还包括chroma_deblocking_filter_override_flag生成单元273。
chroma_deblocking_filter_control_present_flag生成单元271生成图片参数集中的chroma_deblocking_filter_control_present_flag作为扩展语法。如上文参照图21所述，chroma_deblocking_filter_control_present_flag是指示图片参数集中是否包括用于控制针对色度的解块滤波的语法元素的标志。
chroma_deblocking_filter_override_enabled_flag生成单元272生成图片参数集中的chroma_deblocking_filter_override_enabled_flag作为扩展语法。如上文参照图21所述，chroma_deblocking_filter_override_enabled_flag是指示属于对应图片的片的片头中是否包括chroma_deblocking_filter_override_flag(其将随后进行描述)的标志。
chroma_deblocking_filter_override_flag生成单元273生成图片参数集中的chroma_deblocking_filter_override_flag作为扩展语法。如上文参照图22所述，chroma_deblocking_filter_override_flag是指示片头中是否包括用于控制针对色度的解块滤波的语法元素的标志。
<编码处理的流程>
此外，在这种情况下，由图像编码装置100进行的编码处理的流程与第一实施方式的编码处理的流程(图11)类似。
<头信息生成处理的流程>
接下来，将参照图24的流程图来描述在这种情况下在编码处理的步骤S101中进行的头信息生成处理的流程的示例。
当头信息生成处理开始时，与图12的步骤S121至步骤S123的处理类似地进行步骤S271至步骤S273的处理。
在步骤S274中，chroma_deblocking_filter_control_present_flag生成单元271生成图片参数集的chroma_deblocking_filter_control_present_flag作为扩展语法。
在步骤S275中，头控制单元141确定在步骤S274中设置的图片参数集的chroma_deblocking_filter_control_present_flag的值是否为真(例如，“1”)。当确定chroma_deblocking_filter_control_present_flag的值为真(例如，“1”)时，处理行进至步骤S276。
在步骤S276中，chroma_deblocking_filter_override_enabled_flag生成单元272生成图片参数集的chroma_deblocking_filter_override_enabled_flag作为扩展语法。
与图12的步骤S124的处理类似地进行步骤S277的处理。
当步骤S277的处理结束时，处理行进至步骤S278。此外，当在步骤S275中确定chroma_deblocking_filter_control_present_flag的值为假(例如，“0”)时，处理行进至步骤S278。
与图12的步骤S125的处理类似地进行步骤S278的处理。
在步骤S279中，头控制单元141确定片头中的chroma_deblocking_filter_override_enabled_flag的值是否为真(例如，“1”)。当确定chroma_deblocking_filter_override_enabled_flag的值为真(例如，“1”)时，处理行进至步骤S280。
在步骤S280中，chroma_deblocking_filter_override_flag生成单元273生成片头的chroma_deblocking_filter_override_flag作为扩展语法。
在步骤S281中，头控制单元141确定在步骤S280中生成的chroma_deblocking_filter_override_flag的值在片头中是否为真(例如，“1”)。当确定deblocking_filter_override_flag的值为真(例如，“1”)时，处理行进至步骤S282。
与图12的步骤S126的处理类似地进行步骤S282的处理。
当步骤S282的处理结束时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S279中确定chroma_deblocking_filter_override_enabled_flag的值为假(例如，“0”)时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S281中确定chroma_deblocking_filter_override_flag的值为假(例如，“0”)时，头信息生成处理结束，并且处理返回图11。
如上所述生成与针对色度的解块滤波相关的控制参数，因此可以与针对亮度的解块滤波处理无关地生成对用于控制针对色度的解块滤波处理的控制信息的生成。此外，使用控制参数，可以抑制编码量的增大并且抑制编码效率的降低。
<环路滤波处理的流程>
接下来，将参照图25的流程图来描述在这种情况下在编码处理的步骤S112中进行的环路滤波处理的流程的示例。
当环路滤波处理开始时，与图13的步骤S141的处理类似地进行步骤S301的处理。
在步骤S302中，解块滤波控制单元181基于在头信息中包括的chroma_deblocking_filter_control_present_flag的值来检查pps_chroma_deblocking_filter_disabled_flag的值。例如，当chroma_deblocking_filter_control_present_flag的值为真(例如，“1”)时，解块滤波控制单元181检查pps_chroma_deblocking_filter_disabled_flag的值，并且在步骤S303的处理中使用该值。此外，例如，当chroma_deblocking_filter_control_present_flag的值为假(例如，“0”)时，解块滤波控制单元181不检查pps_chroma_deblocking_filter_disabled_flag的值，并且在步骤S303的处理中不使用pps_chroma_deblocking_filter_disabled_flag的值。
此外，解块滤波控制单元181基于在头信息中包括的chroma_deblocking_filter_override_enabled_flag的值和chroma_deblocking_filter_override_flag的值来检查slice_chroma_deblocking_filter_disabled_flag的值。例如，当chroma_deblocking_filter_override_enabled_flag的值和chroma_deblocking_filter_override_flag的值都为真(例如，“1”)时，解块滤波控制单元181检查slice_chroma_deblocking_filter_disabled_flag的值，并且在步骤S303的处理中使用该值。此外，例如，当chroma_deblocking_filter_override_enabled_flag的值或chroma_deblocking_filter_override_flag的值为假(例如，“0”)时，解块滤波控制单元181不检查slice_chroma_deblocking_filter_disabled_flag的值，并且在步骤S303的处理中不使用slice_chroma_deblocking_filter_disabled_flag的值。
与图13的步骤S142的处理类似地进行步骤S303的处理。此处，当在步骤S302中不检查pps_chroma_deblocking_filter_disabled_flag的值和slice_chroma_deblocking_filter_disabled_flag的值时，进行针对解码图像的色度的解块滤波处理而不管所述值如何。
当步骤S303的处理结束时，环路滤波处理结束，并且处理返回图11。
当如上所述进行环路滤波处理时，对于其中不需要针对色度的解块滤波处理的片而言，图像编码装置100(环路滤波器120)可以与针对亮度的解块滤波处理无关地省略对用于控制针对色度的解块滤波处理的控制信息的参考。因此，通过应用本技术，图像编码装置100(环路滤波器120)可以抑制处理负荷的增大同时抑制图像质量的降低。
<图像解码装置和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像解码装置的配置与第一实施方式的图像解码装置的配置(图14)类似。此外，在这种情况下，环路滤波器216的配置也与第一实施方式的环路滤波器的配置(图15)类似。
<解码处理的流程>
此外，在这种情况下，由图像解码装置200进行的解码处理的流程与第一实施方式的解码处理的流程(图16)类似。
换言之，与第一实施方式类似，在解码处理的步骤S208中，环路滤波器216与上文参照图25的流程图所描述的由图像编码装置100的环路滤波器120进行的环路滤波处理的示例类似地进行环路滤波处理。换言之，对图25所示的环路滤波处理的流程的示例的描述还可以应用于对由环路滤波器216进行的环路滤波处理(即，在这种情况下解码处理的步骤S208的处理)的描述。
换言之，图像解码装置200(环路滤波器216)根据与针对色度的解块滤波相关的控制参数的值来参考和使用用于控制针对色度的解块滤波处理的控制信息。因此，对于其中不需要针对色度的解块滤波处理的片而言，图像解码装置200(环路滤波器216)可以与针对亮度的解块滤波处理无关地省略对用于控制针对色度的解块滤波处理的控制信息的参考。因此，通过应用本技术，图像解码装置200(环路滤波器216)可以抑制处理负荷的增大同时抑制图像质量的降低。
注意，例如，上述根据与针对色度的解块滤波相关的控制参数的值来生成用于控制针对色度的解块滤波处理的控制信息可以在任意层的头信息中进行，并且可以在图片参数集和片头中的仅一个中进行或者可以在任何其他头信息中进行。
<4.第四实施方式>
<解块滤波的控制参数的使用>
注意，可以基于与现有解块滤波相关的控制参数和与针对色度的解块滤波相关的控制参数两者来控制对用于控制针对色度的解块滤波处理的控制信息的生成。
因此，可以省略明显不需要的用于控制针对色度的解块滤波处理的控制信息，并且对于其中不需要控制针对色度的解块滤波处理的片而言，可以与针对亮度的解块滤波处理无关地省略用于控制针对色度的解块滤波处理的控制信息，因此可以相应地抑制编码量的增大并且抑制编码效率的降低。
将描述更加具体的示例。如图26所示，例如，在图片参数集中，可以仅当deblocking_filter_control_present_flag的值为真(“1”)时才将chroma_deblocking_filter_control_present_flag设置为扩展语法元素，并且可以仅当chroma_deblocking_filter_control_present_flag的值为真(例如，“1”)时才将pps_chroma_deblocking_filter_disabled_flag设置为扩展语法元素。此外，此时，可以将chroma_deblocking_filter_override_enabled_flag设置为扩展语法。
此外，如图27所示，例如，在片头中，可以仅当deblocking_filter_override_flag的值为真(“1”)并且在片头所属的图片参数集中设置的chroma_deblocking_filter_override_enabled_flag的值为真(例如，“1”)时才将chroma_deblocking_filter_override_flag设置为扩展语法元素，并且可以仅当chroma_deblocking_filter_override_flag的值为真(例如，“1”)时将slice_chroma_deblocking_filter_disabled_flag设置为扩展语法元素。
因此，可以与用于控制现有解块滤波处理的控制信息无关地控制在每层的头信息中用于控制针对色度的解块滤波处理的控制信息的存在。此外，使用控制参数，对于其中不需要控制针对色度的解块滤波处理的片而言，可以与针对亮度的解块滤波处理无关地省略用于控制针对色度的解块滤波处理的控制信息。此外，由于可以省略明显不需要的用于控制针对色度的解块滤波处理的控制信息，因此可以相应地抑制编码量的增大并且抑制编码效率的降低。
<图像编码装置、头信息生成单元和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像编码装置的配置与第一实施方式的图像编码装置的配置(图8)类似。此外，在这种情况下，头信息生成单元131的配置与第三实施方式的头信息生成单元的配置(图23)类似。此外，在这种情况下，环路滤波器120的配置与第一实施方式的环路滤波器的配置(图10)类似。
<编码处理的流程>
此外，在这种情况下，由图像编码装置100进行的编码处理的流程与第一实施方式的编码处理的流程(图11)类似。
<头信息生成处理的流程>
接下来，将参照图28和图29的流程图来描述在这种情况下在编码处理的步骤S101中进行的头信息生成处理的流程的示例。
当头信息生成处理开始时，与图19的步骤S231至步骤S234的处理类似地进行步骤S321至步骤S324的处理。当在步骤S324中确定deblocking_filter_control_present_flag的值为真(“1”)时，处理行进至步骤S325。
与图24的步骤S274至步骤S277的处理类似地进行步骤S325至步骤S328的处理。
当步骤S328的处理结束时，处理行进至图29的步骤S331。此外，当在图28的步骤S326中确定chroma_deblocking_filter_control_present_flag的值为假(例如，“0”)时，处理行进至图29的步骤S331。此外，当在图28的步骤S324中确定deblocking_filter_control_present_flag的值为假(“0”)时，处理行进至图29的步骤S331。
与图19的步骤S236和步骤S237的处理类似地进行图29的步骤S331和步骤S332的处理。当在步骤S332中确定deblocking_filter_override_flag的值为真(“1”)时，处理行进至步骤S333。
与图24的步骤S279至步骤S282的处理类似地进行步骤S333至步骤S336的处理。
当步骤S336的处理结束时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S335中确定chroma_deblocking_filter_override_flag的值为假(例如，“0”)时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S333中确定chroma_deblocking_filter_override_enabled_flag的值为假(例如，“0”)时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S332中确定deblocking_filter_override_flag的值为假(“0”)时，头信息生成处理结束，并且处理返回图11。
当如上所述进行处理时，图像编码装置100(头信息生成单元131)可以抑制编码量的增大并且抑制编码效率的降低同时抑制图像质量的降低。
<环路滤波处理的流程>
接下来，将参照图30的流程图来描述在这种情况下在编码处理的步骤S112中进行的环路滤波处理的流程的示例。
当环路滤波处理开始时，与图13的步骤S141的处理类似地进行步骤S351的处理。
在步骤S352中，解块滤波控制单元181基于在头信息中包括的deblocking_filter_control_present_flag的值和chroma_deblocking_filter_control_present_flag的值来检查pps_chroma_deblocking_filter_disabled_flag的值。例如，当deblocking_filter_control_present_flag的值为真(“1”)并且chroma_deblocking_filter_control_present_flag的值为真(“1”)时，解块滤波控制单元181检查pps_chroma_deblocking_filter_disabled_flag的值，并且在步骤S353的处理中使用该值。此外，例如，当deblocking_filter_control_present_flag的值为假(“0”)或当chroma_deblocking_filter_control_present_flag的值为假(例如，“0”)时，解块滤波控制单元181不检查pps_chroma_deblocking_filter_disabled_flag的值，并且在步骤S353的处理中不使用pps_chroma_deblocking_filter_disabled_flag的值。
此外，解块滤波控制单元181基于在头信息中包括的deblocking_filter_override_flag的值、chroma_deblocking_filter_override_enabled_flag的值和chroma_deblocking_filter_override_flag的值来检查slice_chroma_deblocking_filter_disabled_flag的值。例如，当deblocking_filter_override_flag的值、chroma_deblocking_filter_override_enabled_flag的值和chroma_deblocking_filter_override_flag的值为真(例如，“1”)时，解块滤波控制单元181检查slice_chroma_deblocking_filter_disabled_flag的值，并且在步骤S353的处理中使用该值。此外，例如，当deblocking_filter_override_flag的值，chroma_deblocking_filter_override_enabled_flag的值或chroma_deblocking_filter_override_flag的值为假(例如，“0”)时，解块滤波控制单元181不检查slice_chroma_deblocking_filter_disabled_flag的值，并且在步骤S353的处理中不使用slice_chroma_deblocking_filter_disabled_flag的值。
与图13的步骤S142的处理类似地进行步骤S353的处理。此处，当在步骤S352中不检查pps_chroma_deblocking_filter_disabled_flag的值和slice_chroma_deblocking_filter_disabled_flag的值时，进行针对解码图像的色度的解块滤波处理而不管所述值如何。
当步骤S353的处理结束时，环路滤波处理结束，并且处理返回图11。
当如上所述进行环路滤波处理时，对于其中明显不需要针对色度的解块滤波处理的片或者其中不需要控制针对色度的解块滤波处理的片而言，图像编码装置100(环路滤波器120)可以与针对亮度的解块滤波处理无关地省略对用于控制针对色度的解块滤波处理的控制信息的参考。因此，通过应用本技术，图像编码装置100(环路滤波器120)可以抑制处理负荷的增大同时抑制图像质量的降低。
<图像解码装置和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像解码装置的配置与第一实施方式的图像解码装置的配置(图14)类似。此外，在这种情况下，环路滤波器216的配置也与第一实施方式的环路滤波器的配置(图15)类似。
<解码处理的流程>
此外，在这种情况下，由图像解码装置200进行的解码处理的流程与第一实施方式的解码处理的流程(图16)类似。
换言之，与第一实施方式类似，在解码处理的步骤S208中，环路滤波器216与上文参照图30的流程图所描述的由图像编码装置100的环路滤波器120进行的环路滤波处理的示例类似地进行环路滤波处理。换言之，对图30所示的环路滤波处理的流程的示例的描述还可以应用于对由环路滤波器216进行的环路滤波处理(即，在这种情况下解码处理的步骤S208的处理)的描述。
换言之，图像解码装置200(环路滤波器216)根据与现有解块滤波相关的控制参数的值以及与针对色度的解块滤波相关的控制参数的值来参考和使用用于控制针对色度的解块滤波处理的控制信息。因此，对于其中明显不需要针对色度的解块滤波处理的片或者其中不需要控制针对色度的解块滤波处理的片而言，图像解码装置200(环路滤波器216)可以与针对亮度的解块滤波处理无关地省略对用于控制针对色度的解块滤波处理的控制信息的参考。因此，通过应用本技术，图像解码装置200(环路滤波器216)可以抑制处理负荷的增大同时抑制图像质量的降低。
注意，例如，上述根据与现有块滤波器相关的控制参数的值和与针对色度的解块滤波相关的控制参数的值来生成用于控制针对色度的解块滤波处理的控制信息可以在任意层的头信息中进行，并且可以在图片参数集和片头中的仅一个中进行或者可以在任何其他头信息中进行。
<5.第五实施方式>
<对滤波强度的控制>
已描述了基于用于控制针对色度的解块滤波处理的控制信息的对滤波处理的执行控制，但是本技术不限于此，并且可以基于用于控制针对色度的解块滤波处理的控制信息来控制滤波强度。
因此，可以与针对亮度分量(亮度)的解块滤波处理的滤波强度无关地控制针对色度的解块滤波处理的滤波强度。例如，可以抑制针对色度的滤波强度而不改变针对亮度的滤波强度。因此，例如，除自然图像之外，还可以对画面内容的图像进行更合适的解块滤波处理，例如，可以抑制画面内容的文字模糊。换言之，通过应用本技术，可以抑制图像质量的降低。
将描述更加具体的示例。如图31所示，例如，在图片参数集中，当deblocking_filter_control_present_flag的值为真(“1”)，而pps_deblocking_filter_disabled_flag的值为假(“0”)时，可以将pps_chroma_beta_offset_div2和pps_chroma_tc_offset_div2设置为扩展语法元素。
是pps_chroma_beta_offset_div2的值的两倍的值指示对属于对应图片的片中未定义slice_deblocking_filter_disabled_flag的片进行的针对色度的解块滤波的参数β的初始偏移。是pps_chroma_tc_offset_div2的值的两倍的值指示对属于对应图片的片片未定义slice_deblocking_filter_disabled_flag的片进行的针对色度的解块滤波的参数tC的初始偏移。换言之，它们是用于控制滤波强度(设置的强度的程度)的语法元素。
此外，如图32所示，例如，在片头中，当deblocking_filter_override__flag的值为真(“1”)，而slice_deblocking_filter_disabled_flag的值为假(“0”)时，可以将slice_chroma_beta_offset_div2和slice_chroma_tc_offset_div2设置为扩展语法元素。
是slice_chroma_beta_offset_div2的值的两倍的值指示对于对应片进行的针对色度的解块滤波的参数β的初始偏移。是slice_chroma_tc_offset_div2的值的两倍的值指示对于对应片进行的针对色度的解块滤波的参数tC的初始偏移。换言之，它们是用于控制滤波强度(设置的强度的程度)的语法元素。
如图33所示，在图片参数集中设置pps_chroma_beta_offset_div2或pps_chroma_tc_offset_div2时，其值被设置为用于控制针对色度的解块滤波的滤波强度的控制值，并且此外，当在片头中设置slice_chroma_beta_offset_div2或slice_chroma_tc_offset_div2时，其值被重写在控制值上。基于最终设置的控制值(即，底层的控制信息)来控制针对色度的解块滤波处理的滤波强度。
注意，与HEVC的版本1的示例类似，基于诸如deblocking_filter_control_present_flag、deblocking_filter_override_enabled_flag、pps_deblocking_filter_disabeld_flag、pps_beta_offset_div2、pps_tc_offset_div2、deblocking_filter_override_flag、slice_deblocking_filter_disabeld_flag、slice_beta_offset_div2以及slice_tc_offset_div2的语法元素来控制针对亮度的解块滤波处理。
因此，可以在每层的头信息中与针对亮度的解块滤波处理的滤波强度无关地控制针对色度的解块滤波的滤波强度，并且因此可以抑制图像质量的降低。
<图像编码装置和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像编码装置的配置与第一实施方式的图像编码装置的配置(图8)类似。此外，在这种情况下，环路滤波器120的配置也与第一实施方式的环路滤波器的配置(图10)类似。
<头信息生成单元>
图34中示出了在这种情况下头信息生成单元131的示例性主要配置。如图34所示，头信息生成单元131基本上具有与第一实施方式的头信息生成单元的配置(图9)类似的配置。注意，在图34中未示出SPS生成单元151，但是SPS生成单元151可以与图9的示例类似地被安装。在图34的示例中，PPS扩展语法生成单元162包括pps_chroma_beta_offset_div2生成单元281和pps_chroma_tc_offset_div2生成单元282。此外，SH扩展语法生成单元163包括slice_chroma_beta_offset_div2生成单元283和slice_chroma_tc_offset_div2生成单元284。
pps_chroma_beta_offset_div2生成单元281生成图片参数集中的pps_chroma_beta_offset_div2作为扩展语法。如上文参照图31所述，pps_chroma_beta_offset_div2是用于控制滤波强度(设置的强度的程度)的语法元素，是pps_chroma_beta_offset_div2的值的两倍的值指示对属于对应图片的片中未定义slice_deblocking_filter_disabled_flag的片进行的针对色度的解块滤波的参数β的初始偏移。
pps_chroma_tc_offset_div2生成单元282生成图片参数集中的pps_chroma_tc_offset_div2作为扩展语法。如上文参照图31所述，pps_chroma_tc_offset_div2是用于控制滤波强度(设置的强度的程度)的语法元素，是pps_chroma_tc_offset_div2的值的两倍的值指示对属于对应图片的片中未定义slice_deblocking_filter_disabled_flag的片进行的针对色度的解块滤波的参数tC的初始偏移。
slice_chroma_beta_offset_div2生成单元283生成片头中的slice_chroma_beta_offset_div2作为扩展语法。如上文参照图32所述，slice_chroma_beta_offset_div2是用于控制滤波强度(设置的强度的程度)的语法元素，是slice_chroma_beta_offset_div2的值的两倍的值指示对于对应片进行的针对色度的解块滤波的参数β的初始偏移。
slice_chroma_tc_offset_div2生成单元284生成片头中的slice_chroma_tc_offset_div2作为扩展语法。如上文参照图32所述，slice_chroma_tc_offset_div2是用于控制滤波强度(设置的强度的程度)的语法元素，是slice_chroma_tc_offset_div2的值的两倍的值指示对于对应片进行的针对色度的解块滤波的参数tC的初始偏移。
<编码处理的流程>
此外，在这种情况下，由图像编码装置100进行的编码处理的流程与第一实施方式的编码处理的流程(图11)类似。
<头信息生成处理的流程>
接下来，将参照图35的流程图来描述在这种情况下在编码处理的步骤S101中进行的头信息生成处理的流程的示例。
当头信息生成处理开始时，与图19的步骤S233和步骤S234的处理类似地进行步骤S371和步骤S372的处理。当在步骤S372中确定deblocking_filter_control_present_flag的值为真(“1”)时，处理行进至步骤S373。
在步骤S373中，头控制单元141确定图片参数集中的pps_deblocking_filter_disabled_flag的值是否为假(“0”)。当确定pps_deblocking_filter_disabled_flag的值为假(“0”)时，处理行进至步骤S374。
在步骤S374中，pps_chroma_beta_offset_div2生成单元281生成pps_chroma_beta_offset_div2作为扩展语法。在步骤S375中，pps_chroma_tc_offset_div2生成单元282生成pps_chroma_tc_offset_div2作为扩展语法。
当步骤S375的处理结束时，处理行进至步骤S376。此外，当在步骤S373中确定pps_deblocking_filter_disabled_flag的值为真(“1”)时，处理行进至步骤S376。此外，当在步骤S372中确定deblocking_filter_control_present_flag的值为假(“0”)时，处理行进至步骤S376。
与图19的步骤S236和步骤S237的处理类似地进行步骤S376和步骤S377的处理。当在步骤S377中确定deblocking_filter_override_flag的值为真(“1”)时，处理行进至步骤S378。
在步骤S378中，头控制单元141确定片头中的slice_deblocking_filter_disabled_flag的值是否为假(“0”)。当确定slice_deblocking_filter_disabled_flag的值为假(“0”)时，处理行进至步骤S379。
在步骤S379中，slice_chroma_beta_offset_div2生成单元283生成slice_chroma_beta_offset_div2作为扩展语法。在步骤S380中，slice_chroma_tc_offset_div2生成单元284生成slice_chroma_tc_offset_div2作为扩展语法。
当步骤S380的处理结束时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S378中确定slice_deblocking_filter_disabled_flag的值为真(“1”)时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S377中确定deblocking_filter_override_flag的值为假(“0”)时，头信息生成处理结束，并且处理返回图11。
当用于控制针对图像数据的色度分量(色度)的解块滤波处理的滤波强度的控制信息被生成为如上所述的头信息时，图像编码装置100(头信息生成单元131)可以与针对亮度分量(亮度)的解块滤波处理的滤波强度无关地控制针对色度的解块滤波处理的滤波强度。例如，可以抑制针对色度的滤波强度而不改变针对亮度的滤波强度。因此，通过应用本技术，图像编码装置100(头信息生成单元131)可以在当图像数据被编码或被解码时在解块滤波处理中更加适当地处理画面内容的图像以及自然图像，因此可以抑制图像质量的降低。
<环路滤波处理的流程>
接下来，将参照图36的流程图来描述在这种情况下在编码处理的步骤S112中进行的环路滤波处理的流程的示例。
当环路滤波处理开始时，在步骤S401中，解块滤波控制单元181基于头信息中包括的deblocking_filter_control_present_flag的值来检查pps_deblocking_filter_disabled_flag的值。例如，当deblocking_filter_control_present_flag的值为真(“1”)时，解块滤波控制单元181检查pps_deblocking_filter_disabled_flag的值，并且在步骤S402的处理中使用该值。此外，例如，当deblocking_filter_control_present_flag的值为假(“0”)时，解块滤波控制单元181不检查pps_deblocking_filter_disabled_flag的值，并且在步骤S402的处理中不使用pps_deblocking_filter_disabled_flag的值。
此外，解块滤波控制单元181基于头信息中包括的deblocking_filter_override_flag的值来检查slice_deblocking_filter_disabled_flag的值。例如，当deblocking_filter_override_flag的值为真(“1”)时，解块滤波控制单元181检查slice_deblocking_filter_disabled_flag的值，并且在步骤S402的处理中使用该值。此外，例如，当deblocking_filter_override__flag的值为假(“0”)时，解块滤波控制单元181不检查slice_deblocking_filter_disabled_flag的值，并且在步骤S402的处理中不使用slice_deblocking_filter_disabled_flag的值。
在步骤S402中，解块滤波控制单元181基于pps_deblocking_filter_disabled_flag的值和slice_deblocking_filter_disabled_flag的值来确定是否进行解块滤波处理。此处，解块滤波控制单元181仅基于在步骤S401中检查的语法元素的值来进行确定。当确定要进行解块滤波处理时，处理行进至步骤S403。
在步骤S403中，解块滤波控制单元181使用pps_beta_offset_div2和slice_beta_offset_div2计算针对亮度的解块滤波的参数β。
在步骤S404中，解块滤波控制单元181使用pps_tc_offset_div2和slice_tc_offset_div2计算针对亮度的解块滤波的参数tC。
在步骤S405中，解块滤波处理单元191使用在步骤S403中计算的针对亮度的参数β以及在步骤S404中确定的针对亮度的参数tC来进行针对亮度的解块滤波处理。
在步骤S406中，解块滤波控制单元181使用pps_chroma_beta_offset_div2和slice_chroma_beta_offset_div2计算针对色度的解块滤波的参数β。
在步骤S407中，解块滤波控制单元181使用pps_chroma_tc_offset_div2和slice_chroma_tc_offset_div2计算针对色度的解块滤波的参数tC。
在步骤S408中，解块滤波处理单元192使用在步骤S406中计算的针对色度的参数β以及在步骤S407中确定的针对色度的参数tC来进行针对色度的解块滤波处理。
当步骤S408的处理结束时，环路滤波处理结束，并且处理返回图11。此外，当在步骤S402中确定不进行解块滤波处理时，环路滤波处理结束，并且处理返回图11。
如上所述，基于头信息中包括的用于控制针对图像数据的色度分量(色度)的解块滤波处理的控制信息来进行解块滤波处理，因此图像编码装置100(环路滤波器120)可以与针对亮度分量(亮度)的解块滤波处理的滤波强度无关地控制针对色度的解块滤波处理的滤波强度。例如，可以抑制针对色度的滤波强度而不改变针对亮度的滤波强度。因此，通过应用本技术，图像编码装置100(环路滤波器120)可以在图像数据被编码时对画面内容的图像以及自然图像更加适当地进行解块滤波处理，因此抑制了图像质量的降低。
<图像解码装置和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像解码装置的配置与第一实施方式的图像解码装置的配置(图14)类似。此外，在这种情况下，环路滤波器216的配置也与第一实施方式的环路滤波器的配置(图15)类似。
<解码处理的流程>
此外，在这种情况下，由图像解码装置200进行的解码处理的流程与第一实施方式的解码处理的流程(图16)类似。
换言之，与第一实施方式类似，在解码处理的步骤S208中，环路滤波器216与上文参照图36的流程图所描述的由图像编码装置100的环路滤波器120进行的环路滤波处理的示例类似地进行环路滤波处理。换言之，对图36所示的环路滤波处理的流程的示例的描述还可以应用于对由环路滤波器216进行的环路滤波处理(即，在这种情况下解码处理的步骤S208的处理)的描述。
换言之，通过基于头信息中包括的用于控制针对图像数据的色度分量(色度)的解块滤波处理的控制信息来进行解块滤波处理，因此图像解码装置200(环路滤波器216)可以与针对亮度分量(亮度)的解块滤波处理的滤波强度无关地控制针对色度的解块滤波处理的滤波强度。例如，可以抑制针对色度的滤波强度而不改变针对亮度的滤波强度。因此，通过应用本技术，图像解码装置200(环路滤波器216)可以在图像数据被解码时对画面内容的图像以及自然图像更加适当地进行解块滤波处理，因此抑制了图像质量的降低。
注意，例如，上述生成用于控制针对色度的解块滤波处理的滤波强度的控制信息可以在任意层的头信息中进行，并且可以在图片参数集和片头中的仅一个中进行或者可以在任何其他头信息中进行。
<6.第六实施方式>
<滤波处理的执行控制以及对滤波强度的控制>
注意，可以生成用于控制针对色度的解块滤波处理的执行的控制信息和用于控制针对色度的解块滤波处理的滤波强度的控制信息两者。因此，可以与针对亮度分量(亮度)的解块滤波处理的控制无关地进行针对色度的解块滤波处理的执行控制和对滤波强度的控制两者。因此，例如，除自然图像之外，还可以对画面内容的图像进行更合适的解块滤波处理，例如，可以抑制例如画面内容的文字模糊。换言之，通过应用本技术，可以抑制图像质量的降低。
将描述更加具体的示例。如图37所示，例如，在图片参数集中，可以将pps_chroma_deblocking_filter_disabled_flag设置为扩展语法元素，并且当pps_chroma_deblocking_filter_disabled_flag的值为假(例如，“0”)时，可以将pps_chroma_beta_offset_div2和pps_chroma_tc_offset_div2设置为扩展语法元素。
此外，如图38所示，例如，在片头中，可以将slice_chroma_deblocking_filter_disabled_flag设置为扩展语法元素，并且当slice_chroma_deblocking_filter_disabled_flag的值为假(例如，“0”)时，可以将slice_chroma_beta_offset_div2和slice_chroma_tc_offset_div2设置为扩展语法元素。
因此，可以在每层的头信息中与针对亮度的解块滤波处理的无关地控制针对色度的解块滤波处理的执行和滤波强度，因此可以抑制图像质量的降低。
<图像编码装置和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像编码装置的配置与第一实施方式的图像编码装置的配置(图8)类似。此外，在这种情况下，环路滤波器120的配置也与第一实施方式的环路滤波器的配置(图10)类似。
<头信息生成单元>
图39中示出了在这种情况下头信息生成单元131的示例性主要配置。如图39所示，头信息生成单元131基本上具有与第五实施方式的头信息生成单元的配置(图34)类似的配置。注意，图39中还示出了SPS生成单元151。在图39的示例中，PPS扩展语法生成单元162还包括pps_chroma_deblocking_filter_disabled_flag生成单元172。此外，SH扩展语法生成单元163还包括slice_chroma_deblocking_filter_disabled_flag生成单元173。
<编码处理的流程>
此外，在这种情况下，由图像编码装置100进行的编码处理的流程与第一实施方式的编码处理的流程(图11)类似。
<头信息生成处理的流程>
接下来，将参照图40的流程图来描述在这种情况下在编码处理的步骤S101中进行的头信息生成处理的流程的示例。
当头信息生成处理开始时，与图12的步骤S121至步骤S124的处理类似地进行步骤S421至步骤S424的处理。
在步骤S425中，头控制单元141确定图片参数集中pps_chroma_deblocking_filter_disabled_flag的值是否为假(“0”)。当确定pps_chroma_deblocking_filter_disabled_flag的值为假(“0”)时，处理行进至步骤S426。
与图35的步骤S374和步骤S375的处理类似地进行步骤S426和步骤S427的处理。
当步骤S427的处理结束时，处理行进至步骤S428。此外，当在步骤S425中确定pps_chroma_deblocking_filter_disabled_flag的值为真(“1”)时，处理行进至步骤S428。
与图12的步骤S125和步骤S126的处理类似地进行步骤S428和步骤S429的处理。
在步骤S430中，头控制单元141确定片头中slice_chroma_deblocking_filter_disabled_flag的值是否为假(“0”)。当确定slice_chroma_deblocking_filter_disabled_flag的值为假(“0”)时，处理行进至步骤S431。
与图35的步骤S379和步骤S380的处理类似地进行步骤S431和步骤S432的处理。
当步骤S432的处理结束时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S430中确定slice_chroma_deblocking_filter_disabled_flag的值为真(“1”)时，头信息生成处理结束，并且处理返回图11。
如上所述，用于控制针对图像数据的色度分量(色度)的解块滤波处理的执行的控制信息和用于控制滤波强度的控制信息被生成为头信息，并且图像编码装置100(头信息生成单元131)可以与针对亮度分量(亮度)的解块滤波处理无关地控制针对色度的解块滤波处理。因此，通过应用本技术，图像编码装置100(头信息生成单元131)可以在当图像数据被编码或被解码时在解块滤波处理中更加适当地处理画面内容的图像以及自然图像，因此可以抑制图像质量的降低。
<环路滤波处理的流程>
接下来，将参照图41的流程图来描述在这种情况下在编码处理的步骤S112中进行的环路滤波处理的流程的示例。
当环路滤波处理开始时，与图36的步骤S401至步骤S405的处理类似地进行步骤S451至步骤S455的处理。
在步骤S456中，解块滤波控制单元181检查头信息中包括的pps_chroma_deblocking_filter_disabled_flag的值和slice_chroma_deblocking_filter_disabled_flag的值。
在步骤S457中，解块滤波控制单元181基于pps_chroma_deblocking_filter_disabled_flag的值和slice_chroma_deblocking_filter_disabled_flag的值来确定是否进行针对色度的解块滤波处理。当确定要进行针对色度的解块滤波处理时，处理行进至步骤S458。
与图36的步骤S406至步骤S408的处理类似地进行步骤S458至步骤S460的处理。
当步骤S460的处理结束时，环路滤波处理结束，并且处理返回图11。此外，当在步骤S457中确定不进行针对色度的解块滤波处理时，环路滤波处理结束，并且处理返回图11。此外，当在步骤S452中确定不进行解块滤波处理时，环路滤波处理结束，并且处理返回图11。
如上所述，基于头信息中包括的用于控制针对图像数据的色度分量(色度)的解块滤波处理的控制信息来进行解块滤波处理，并且图像编码装置100(环路滤波器120)可以与针对亮度分量(亮度)的解块滤波处理的控制无关地进行针对色度的解块滤波处理的执行控制以及对滤波强度的控制。因此，通过应用本技术，图像编码装置100(环路滤波器120)可以在图像数据被编码时对画面内容的图像以及自然图像更加适当地进行解块滤波处理，因此抑制了图像质量的降低。
<图像解码装置和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像解码装置的配置与第一实施方式的图像解码装置的配置(图14)类似。此外，在这种情况下，环路滤波器216的配置也与第一实施方式的环路滤波器的配置(图15)类似。
<解码处理的流程>
此外，在这种情况下，由图像解码装置200进行的解码处理的流程与第一实施方式的解码处理的流程(图16)类似。
换言之，与第一实施方式类似，在解码处理的步骤S208中，环路滤波器216与上文参照图41的流程图所描述的由图像编码装置100的环路滤波器120进行的环路滤波处理的示例类似地进行环路滤波处理。换言之，对图41所示的环路滤波处理的流程的示例的描述还可以应用于对由环路滤波器216进行的环路滤波处理(即，在这种情况下解码处理的步骤S208的处理)的描述。
换言之，图像解码装置200(环路滤波器216)基于头信息中包括的用于控制针对图像数据的色度分量(色度)的解块滤波处理的控制信息来进行解块滤波处理，因此，可以与针对亮度分量(亮度)的解块滤波处理的控制无关地进行针对色度的解块滤波处理的执行控制以及对滤波强度的控制两者。因此，通过应用本技术，图像解码装置200(环路滤波器216)可以在图像数据被解码时对画面内容的图像以及自然图像更加适当地进行解块滤波处理，因此抑制了图像质量的降低。
注意，例如，上述生成用于控制针对色度的解块滤波处理执行和滤波强度的的控制信息可以在任意层的头信息中进行，并且可以在图片参数集和片头中的仅一个中进行或者可以在任何其他头信息中进行。
<7.第七实施方式>
<解块滤波的控制参数的使用>
注意，与现有解块滤波相关的控制参数对应，可以生成与针对色度的解块滤波相关的控制参数。因此，可以与用于控制现有解块滤波处理的控制信息无关地指示每层的头信息中用于控制针对色度的解块滤波处理的控制信息的存在。换言之，可以与针对亮度的解块滤波处理无关地控制用于控制针对色度的解块滤波处理的控制信息的生成。此外，使用控制参数，针对其中不需要控制针对色度的解块滤波处理的片而言，可以与针对亮度的解块滤波处理无关地省略用于控制针对色度的解块滤波处理的控制信息，因此可以相应地抑制编码量的增大并且抑制编码效率的降低。
将描述更加具体的示例。如图42所示，例如，在图片参数集中，可以将chroma_deblocking_filter_control_present_flag设置为扩展语法元素，并且仅当chroma_deblocking_filter_control_present_flag的值为真(例如，“1”)时，才可以将chroma_deblocking_filter_override_enabled_flag和pps_chroma_deblocking_filter_disabled_flag设置为扩展语法元素。
此外，当pps_chroma_deblocking_filter_disabled_flag的值为假(例如，“0”)时，可以将pps_chroma_beta_offset_div2和pps_chroma_tc_offset_div2设置为扩展语法元素。
此外，如图43所示，例如，在片头中，当片头所属的图片参数集中设置的chroma_deblocking_filter_override_enabled_flag的值为真(例如，“1”)时，可以将chroma_deblocking_filter_override_flag设置为扩展语法元素，并且当chroma_deblocking_filter_override_flag的值为真(例如，“1”)时，可以将slice_chroma_deblocking_filter_disabled_flag设置为扩展语法元素。
此外，当slice_chroma_deblocking_filter_disabled_flag的值为假(例如，“0”)时，可以将slice_chroma_beta_offset_div2和slice_chroma_tc_offset_div2设置为扩展语法元素。
因此，可以在每层的头信息中与针对亮度的解块滤波处理的无关地控制针对色度的解块滤波处理的执行和滤波强度，因此可以抑制图像质量的降低。此外，使用控制参数，对其中不需要控制针对色度的解块滤波处理的片而言，可以与针对亮度的解块滤波处理无关地省略用于控制针对色度的解块滤波处理的控制信息，因此可以相应地抑制编码量的增大并且抑制编码效率的降低。
<图像编码装置和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像编码装置的配置与第一实施方式的图像编码装置的配置(图8)类似。此外，在这种情况下，环路滤波器120的配置也与第一实施方式的环路滤波器的配置(图10)类似。
<头信息生成单元>
图44中示出了在这种情况下头信息生成单元131的示例性主要配置。如图44所示，头信息生成单元131基本上具有与第六实施方式的头信息生成单元的配置(图39)类似的配置。此处，在图44的示例中，PPS扩展语法生成单元162还包括chroma_deblocking_filter_control_present_flag生成单元271和chroma_deblocking_filter_override_enabled_flag生成单元272。此外，SH扩展语法生成单元163还包括chroma_deblocking_filter_override_flag生成单元273。
<编码处理的流程>
此外，在这种情况下，由图像编码装置100进行的编码处理的流程与第一实施方式的编码处理的流程(图11)类似。
<头信息生成处理的流程>
接下来，将参照图45和图46的流程图来描述在这种情况下在编码处理的步骤S101中进行的头信息生成处理的流程的示例。
当头信息生成处理开始时，与图24的步骤S271至步骤S277的处理类似地进行步骤S481至步骤S487的处理。当步骤S487的处理结束时，处理行进至步骤S488。
与图40的步骤S425至步骤S427的处理类似地进行步骤S488至步骤S490的处理。
当步骤S490的处理结束时，处理行进至图46的步骤S501。此外，当在步骤图45的步骤S488中确定pps_chroma_deblocking_filter_disabled_flag的值为真(“1”)时，处理行进至步骤图46的步骤S501。此外，当在图45的步骤S485中确定chroma_deblocking_filter_control_present_flag的值为假(例如，“0”)时，处理行进至图46的步骤S501。
与图24的步骤S278至步骤S282的处理类似地进行图46的步骤S501至步骤S505的处理。当步骤S505的处理结束时，处理行进至步骤S506。
与图40的步骤S430至步骤S432的处理类似地进行步骤S506至步骤S508的处理。
当步骤S508的处理结束时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S506中确定slice_chroma_deblocking_filter_disabled_flag的值为真(“1”)时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S504中确定chroma_deblocking_filter_override_flag的值为假(例如，“0”)时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S502中确定chroma_deblocking_filter_override_enabled_flag的值为假(例如，“0”)时，头信息生成处理结束，并且处理返回图11。
如上所述，用于控制针对图像数据的色度分量(色度)的解块滤波处理的执行的控制信息和用于控制滤波强度的控制信息被生成为头信息，因此图像编码装置100(头信息生成单元131)可以与针对亮度分量(亮度)的解块滤波处理无关地控制针对色度的解块滤波处理。此外，使用控制参数，对其中不需要控制针对色度的解块滤波处理的片而言，可以与针对亮度的解块滤波处理无关地省略用于控制针对色度的解块滤波处理的控制信息，因此可以相应地抑制编码量的增大并且抑制编码效率的降低。因此，通过应用本技术，图像编码装置100(头信息生成单元131)可以抑制编码效率的降低同时抑制图像质量的降低。
<环路滤波处理的流程>
接下来，将参照图47的流程图来描述在这种情况下在编码处理的步骤S112中进行的环路滤波处理的流程的示例。
当环路滤波处理开始时，与图41的步骤S451至步骤S455的处理类似地进行步骤S521至步骤S525的处理。
在步骤S526中，解块滤波控制单元181基于头信息中包括的chroma_deblocking_filter_control_present_flag的值、chroma_deblocking_filter_override_enabled_flag的值和chroma_deblocking_filter_override_flag的值来检查pps_chroma_deblocking_filter_disabled_flag的值和slice_chroma_deblocking_filter_disabled_flag的值。
与图41的步骤S457至步骤S460的处理类似地进行步骤S527至步骤S530的处理。
当步骤S530的处理结束时，环路滤波处理结束，并且处理返回图11。此外，当在步骤S527中确定不进行针对色度的解块滤波处理时，环路滤波处理结束，并且处理返回图11。此外，当在步骤S522中确定不进行解块滤波处理时，环路滤波处理结束，并且处理返回图11。
如上所述，对于其中不需要控制针对色度的解块滤波处理的片而言，图像编码装置100(环路滤波器120)可以与针对亮度的解块滤波处理无关地省略对用于控制针对色度的解块滤波处理的控制信息的参考。因此，通过应用本技术，图像编码装置100(环路滤波器120)可以抑制处理负荷的增大同时抑制图像质量的降低。
<图像解码装置和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像解码装置的配置与第一实施方式的图像解码装置的配置(图14)类似。此外，在这种情况下，环路滤波器216的配置也与第一实施方式的环路滤波器的配置(图15)类似。
<解码处理的流程>
此外，在这种情况下，由图像解码装置200进行的解码处理的流程与第一实施方式的解码处理的流程(图16)类似。
换言之，与第一实施方式类似，在解码处理的步骤S208中，环路滤波器216与上文参照图47的流程图所描述的由图像编码装置100的环路滤波器120进行的环路滤波处理的示例类似地进行环路滤波处理。换言之，对图47所示的环路滤波处理的流程的示例的描述还可以应用于对由环路滤波器216进行的环路滤波处理(即，在这种情况下解码处理的步骤S208的处理)的描述。
换言之，图像解码装置200(环路滤波器216)可以根据与针对色度的解块解块滤波相关的控制参数的值来参考和使用用于控制针对色度的解块滤波处理的控制信息，因此对不需要控制针对色度的解块滤波的片而言，可以与针对亮度的解块滤波处理无关地省略对用于控制针对色度的解块滤波处理的控制信息的参考。因此，通过应用本技术，图像解码装置200(环路滤波器216)可以抑制处理负荷的增大同时抑制图像质量的降低。
注意，例如，上述根据与针对色度的解块滤波相关的控制参数的值来生成用于控制针对色度的解块滤波处理的控制信息可以在任意层的头信息中进行，并且可以在图片参数集和片头中的仅一个中进行或者可以在任何其他头信息中进行。
<8.第八实施方式>
<解块滤波的控制参数的使用>
注意，在第六实施方式中，此外，与第五实施方式类似，可以使用与现有解块滤波相关的控制参数来附加地控制用于控制针对色度的解块滤波处理的控制信息的生成。因此，由于可以省略明显不需要的用于控制针对色度的解块滤波处理的控制信息，因此可以相应地抑制编码量的增大并且抑制编码效率的降低。
将描述更加具体的示例。如图48所示，例如，在图片参数集中，仅当deblocking_filter_control_present_flag的值为真(“1”)时，才可以将pps_chroma_deblocking_filter_disabled_flag设置为扩展语法元素。此外，仅当pps_chroma_deblocking_filter_disabled_flag的值为假(例如，“0”)时，才可以将pps_chroma_beta_offset_div2和pps_chroma_tc_offset_div2设置为扩展语法元素。
此外，如图49所示，在片头中，仅当deblocking_filter_override_flag的值为真(“1”)时，才可以将slice_chroma_deblocking_filter_disabled_flag设置为扩展语法元素。此外，仅当slice_chroma_deblocking_filter_disabled_flag的值为假(例如，“0”)时，才可以将slice_chroma_beta_offset_div2和slice_chroma_tc_offset_div2设置为扩展语法元素。
因此，由于可以在每层的头信息中省略明显不需要的用于控制针对色度的解块滤波处理的控制信息，因此可以相应地抑制编码量的增大并且抑制编码效率的降低。
<图像编码装置、头信息生成单元和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像编码装置的配置与第一实施方式的图像编码装置的配置(图8)类似。此外，在这种情况下，头信息生成单元131的配置与第六实施方式的头信息生成单元的配置(图39)类似。此外，在这种情况下，环路滤波器120的配置与第一实施方式的环路滤波器的配置(图10)类似。
<编码处理的流程>
此外，在这种情况下，由图像编码装置100进行的编码处理的流程与第一实施方式的编码处理的流程类似(图11)。
<头信息生成处理的流程>
接下来，将参照图50的流程图来描述在这种情况下在编码处理的步骤S101中进行的头信息生成处理的流程的示例。
当头信息生成处理开始时，与图40的步骤S421和步骤S422的处理类似地进行步骤S551和步骤S552的处理。当步骤S552的处理结束时，处理行进至步骤S553。
与图35的步骤S371和步骤S372的处理类似地进行步骤S553和步骤S554的处理。当在步骤S554中确定deblocking_filter_control_present_flag的值为真(“1”)时，处理行进至步骤S555。
与图40的步骤S424至步骤S427的处理类似地进行步骤S555至步骤S558的处理。
当步骤S558的处理结束时，处理行进至步骤S559。此外，当在步骤S556中确定pps_chroma_deblocking_filter_disabled_flag为真(例如，“1”)时，处理行进至步骤S559。此外，当确定deblocking_filter_control_present_flag的值为假(“0”)时，处理行进至步骤S559。
与图35的步骤S376和步骤S377的处理类似地进行步骤S559和步骤S560的处理。当在步骤S560中确定deblocking_filter_override_flag的值为真(“1”)时，处理行进至步骤S561。
与图40的步骤S429至步骤S432的处理类似地进行步骤S561至步骤S564的处理。
当步骤S564的处理结束时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S562中slice_chroma_deblocking_filter_disabled_flag为真(例如，“1”)时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S560中确定deblocking_filter_override_flag的值为假(“0”)时，头信息生成处理结束，并且处理返回图11。
当如上所述进行头信息生成处理时，对于其中明显不需要针对色度的解块滤波处理的片而言，图像编码装置100(头信息生成单元131)可以省略用于控制针对色度的解块滤波处理的控制信息。因此，通过应用本技术，图像编码装置100(头信息生成单元131)可以抑制编码量的增大同时抑制图像质量的降低，因此抑制编码效率的降低。
<环路滤波处理的流程>
接下来，将参照图51的流程图来描述在这种情况下在编码处理的步骤S112中进行的环路滤波处理的流程的示例。
当环路滤波处理开始时，与图41的步骤S451至步骤S455的处理类似地进行步骤S581至步骤S585的处理。
在步骤S586中，解块滤波控制单元181基于头信息中包括的deblocking_filter_control_present_flag的值和deblocking_filter_override_flag的值来检查pps_chroma_deblocking_filter_disabled_flag的值和slice_chroma_deblocking_filter_disabled_flag的值。
与图41的步骤S457至步骤S460的处理类似地进行步骤S587至步骤S590的处理。
当步骤S590的处理结束时，环路滤波处理结束，并且处理返回图11。此外，当在步骤S587中确定不进行针对色度的解块滤波处理时，环路滤波处理结束，并且处理返回图11。此外，当在步骤S582中确定不进行解块滤波处理时，环路滤波处理结束，并且处理返回图11。
当如上所述进行环路滤波处理时，对于其中明显不需要针对色度的解块滤波处理的片而言，图像编码装置100(环路滤波器120)可以省略对用于控制针对色度的解块滤波处理的控制信息的参考。因此，通过应用本技术，图像编码装置100(环路滤波器120)可以抑制处理负荷的增大同时抑制图像质量的降低。
<图像解码装置和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像解码装置的配置与第一实施方式的图像解码装置的配置(图14)类似。此外，在这种情况下，环路滤波器216的配置也与第一实施方式的环路滤波器的配置(图15)类似。
<解码处理的流程>
此外，在这种情况下，由图像解码装置200进行的解码处理的流程与第一实施方式的解码处理的流程(图16)类似。
换言之，在解码处理的步骤S208中，环路滤波器216与上文参照图51的流程图所描述的由图像编码装置100的环路滤波器120进行的环路滤波处理的示例类似地进行环路滤波处理。换言之，对图51所示的环路滤波处理的流程的示例的描述还可以应用于对由环路滤波器216进行的环路滤波处理(即，在这种情况下解码处理的步骤S208的处理)的描述。
换言之，对于其中明显不需要针对色度的解块滤波处理的切而言，解码编码装置200(环路滤波器216)可以省略对用于控制针对色度的解块滤波处理的控制信息的参考。因此，通过应用本技术，图像解码装置200(环路滤波器216)可以抑制处理负荷的增大同时抑制图像质量的降低。
注意，例如，上述根据与现有块滤波器相关的控制参数的值和与针对色度的解块滤波相关的控制参数的值来生成用于控制针对色度的解块滤波处理的控制信息可以在任意层的头信息中进行，并且可以在图片参数集和片头中的仅一个中进行或者可以在任何其他头信息中进行。
<9.第九实施方式>
<解块滤波的控制参数的使用>
注意，在第七实施方式中，此外，与第五实施方式类似，可以使用与现有解块滤波相关的控制参数来附加地控制对用于控制针对色度的解块滤波处理的控制信息的生成。因此，由于可以省略明显不需要的用于控制针对色度的解块滤波处理的控制信息，因此可以相应地抑制编码量的增大并且抑制编码效率的降低。
将描述更加具体的示例。如图52所示，例如，在图片参数集中，仅当deblocking_filter_control_present_flag的值为真(“1”)时,才可以将chroma_deblocking_filter_control_present_flag设置为扩展语法元素，并且仅当chroma_deblocking_filter_control_present_flag的值为真(例如，“1”)时，才可以将chroma_deblocking_filter_override_enabled_flag和pps_chroma_deblocking_filter_disabled_flag设置为扩展语法元素。
此外，仅当pps_chroma_deblocking_filter_disabled_flag的值为假(例如，“0”)时，才可以将pps_chroma_beta_offset_div2和pps_chroma_tc_offset_div2设置为扩展语法元素。
此外，如图53所示，例如，在片头中，仅当deblocking_filter_override_flag为真(“1”)，并且片头所属的图片参数集中设置的chroma_deblocking_filter_override_enabled_flag的值为真(例如，“1”)时，才可以将chroma_deblocking_filter_override_flag设置为扩展语法元素，并且仅当chroma_deblocking_filter_override_flag的值为真(例如，“1”)时，才可以将slice_chroma_deblocking_filter_disabled_flag设置为扩展语法元素。
此外，仅当slice_chroma_deblocking_filter_disabled_flag的值为假(例如，“0”)时，才可以将slice_chroma_beta_offset_div2和slice_chroma_tc_offset_div2设置为扩展语法元素。
因此，可以省略每层的头信息中明显不需要的用于控制针对色度的解块滤波处理的控制信息，并且对于其中不需要控制针对色度的解块滤波处理的去片而言，也可以与针对亮度的解块滤波处理无关地省略用于控制针对色度的解块滤波处理的控制信息，可以相应地抑制编码量的增大并且抑制编码效率的降低。
<图像编码装置、头信息生成单元和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像编码装置的配置与第一实施方式的图像编码装置的配置(图8)类似。此外，在这种情况下，头信息生成单元131的配置与第七实施方式的头信息生成单元的配置(图44)类似。此外，在这种情况下，环路滤波器120的配置与第一实施方式的环路滤波器的配置(图10)类似。
<编码处理的流程>
此外，在这种情况下，由图像编码装置100进行的编码处理的流程与第一实施方式的编码处理的流程(图11)类似。
<头信息生成处理的流程>
接下来，将参照图54和图55的流程图来描述在这种情况下在编码处理的步骤S101中进行的头信息生成处理的流程的示例。
当头信息生成处理开始时，与图45的步骤S481和步骤S482的处理类似地进行步骤S601和步骤S602的处理。当步骤S602的处理结束时，处理行进至步骤S603。
与图35的步骤S371和步骤S372的处理类似地进行步骤S603和步骤S604的处理。当在步骤S604中确定deblocking_filter_control_present_flag的值为真(“1”)时，处理行进至步骤S605。
与图45的步骤S484至步骤S490的处理类似地进行步骤S605至步骤S611的处理。
当步骤S611的处理结束时，处理行进至图55的步骤S621。此外，当在图54的步骤S609中pps_chroma_deblocking_filter_disabled_flag为真(例如，“1”)时，处理行进至图55的步骤S621。此外，当在图54的步骤S606中确定chroma_deblocking_filter_control_present_flag的值为假(“0”)时，处理行进至图55的步骤S621。此外，当在图54的步骤S604中确定deblocking_filter_control_present_flag的值为假(“0”)时，处理行进至图55的步骤S621。
与图35的步骤S376和步骤S377的处理类似地进行图55的步骤S621和步骤S622的处理。当在图55的步骤S622中确定deblocking_filter_override_flag的值为真(“1”)时，处理行进至步骤S623。
与图46的步骤S502至步骤S508的处理类似地进行步骤S623至步骤S629的处理。
当步骤S629的处理结束时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S627中slice_chroma_deblocking_filter_disabled_flag为真(例如，“1”)时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S625中确定chroma_deblocking_filter_override_flag的值为假(“0”)时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S623中确定chroma_deblocking_filter_override_enabled_flag的值为假(“0”)时，头信息生成处理结束，并且处理返回图11。此外，当在步骤S622中确定deblocking_filter_override_flag的值为假(“0”)时，头信息生成处理结束，并且处理返回图11。
当如上所述进行头信息生成处理时，图像编码装置100(头信息生成单元131)可以对于其中明显不需要针对色度的解块滤波处理的片而言省略用于控制针对色度的解块滤波处理的控制信息并且对于其中不需要控制针对色度的解块滤波处理的片而言也与针对亮度的解块滤波处理无关地省略用于控制针对色度的解块滤波处理的控制信息。因此，通过应用本技术，图像编码装置100(头信息生成单元131)可以抑制编码量的增大同时抑制图像质量的降低，因此抑制编码效率的降低。
<环路滤波处理的流程>
接下来，将参照图56的流程图来描述在这种情况下在编码处理的步骤S112中进行的环路滤波处理的流程的示例。
当环路滤波处理开始时，与图47的步骤S521至步骤S525的处理类似地进行步骤S641至步骤S645的处理。
在步骤S646中，解块滤波控制单元181基于头信息中包括的deblocking_filter_control_present_flag的值、deblocking_filter_override_flag的值、chroma_deblocking_filter_control_present_flag的值、chroma_deblocking_filter_override_enabled_flag的值和chroma_deblocking_filter_override_flag的值来检查pps_chroma_deblocking_filter_disabled_flag的值和slice_chroma_deblocking_filter_disabled_flag的值。
与图47的步骤S527至步骤S530的处理类似地进行步骤S647至步骤S650的处理。
当步骤S650的处理结束时，环路滤波处理结束，并且处理返回图11。此外，当在步骤S647中确定不进行针对色度的解块滤波处理时，环路滤波处理结束，并且处理返回图11。此外，当在步骤S642中确定不进行解块滤波处理时，环路滤波处理结束，并且处理返回图11。
当如上所述进行环路滤波处理时，图像编码装置100(环路滤波器120)可以对于其中明显不需要针对色度的解块滤波处理的片而言省略对用于控制针对色度的解块滤波处理的控制信息的参考并且对于其中不需要控制针对色度的解块滤波处理的片而言也与针对亮度的解块滤波处理无关地省略对用于控制针对色度的解块滤波处理的控制信息的参考。因此，通过应用本技术，图像编码装置100(环路滤波器120)可以抑制处理负荷的增大同时抑制图像质量的降低。
<图像解码装置和环路滤波器>
在这种情况下，作为应用本技术的图像处理装置的一个方面的图像解码装置的配置与第一实施方式的图像解码装置的配置(图14)类似。此外，在这种情况下，环路滤波器216的配置也与第一实施方式的环路滤波器的配置(图15)类似。
<解码处理的流程>
此外，在这种情况下，由图像解码装置200进行的解码处理的流程与第一实施方式的解码处理的流程(图16)类似。
换言之，在解码处理的步骤S208中，环路滤波器216与上文参照图56的流程图所描述的由图像编码装置100的环路滤波器120进行的环路滤波处理的示例类似地进行环路滤波处理。换言之，对图56所示的环路滤波处理的流程的示例的描述还可以应用于对由环路滤波器216进行的环路滤波处理(即，在这种情况下解码处理的步骤S208的处理)的描述。
换言之，图像解码装置200(环路滤波器216)可以对于其中明显不需要针对色度的解块滤波处理的片而言省略对用于控制针对色度的解块滤波处理的控制信息的参考并且对于其中不需要控制针对色度的解块滤波处理的片而言也与针对亮度的解块滤波处理无关地省略对用于控制针对色度的解块滤波处理的控制信息的参考。因此，通过应用本技术，图像解码装置200(环路滤波器216)可以抑制处理负荷的增大同时抑制图像质量的降低。
注意，例如，上述根据与现有块滤波器相关的控制参数的值和与针对色度的解块滤波相关的控制参数的值来生成用于控制针对色度的解块滤波处理的控制信息可以在任意层的头信息中进行，并且可以在图片参数集和片头中的仅一个中进行或者可以在任何其他头信息中进行。
注意，在第五实施方式至第九实施方式中，例如，设置了与参数β或参数tC相关的语法元素例如pps_beta_offset_div2、pps_tc_offset_div2、slice_beta_offset_div2或slice_tc_offset_div2，但是与参数β或参数tC相关的语法元素可以具有任何值，只要可以导出参数β或参数tC即可。
例如，可以将与针对亮度的解块滤波的参数β(或参数tC)与针对色度的解块滤波的参数β(或参数tC)之间的差值对应的值(基于差值计算的另一值)用作与针对色度的参数β或参数tC相关的语法元素。
<10.第十实施方式>
<针对每个区域的控制信息的生成的控制>
图57示出了计算机画面的示例。由于具有多任务功能的计算机可以并行进行多个处理，因此自然图像和画面内容可以被一起显示在计算机画面中的一个画面上，该计算机画面是如图57的示例中的计算机画面的显示画面。在图57的示例中，包括自然图像的活动图像(所谓的视频图像)被显示在计算机画面的部分区域301中显示的窗口中。此外，计算机画面的背景图像(所谓的桌面背景)被显示在部分区域302上，并且例如，由计算机生成的画面内容被显示在部分区域303中显示的窗口中。
在这种情况下，计算机画面的图像的特征根据每个部分区域而不同。鉴于此，可以针对每个区域设置控制解块滤波处理的方法。例如，可以针对每个区域设置是否进行解块滤波处理、当进行解块滤波处理时设置的滤波强度的程度、是否与针对亮度的解块滤波处理的控制无关地进行针对色度的解块滤波处理的控制、当与针对亮度的解块滤波处理的控制无关地进行针对色度的解块滤波处理的控制时是否进行针对色度的解块滤波处理、当进行针对色度的解块滤波处理时设置的滤波强度的程度等。
在这种情况下，头信息生成单元131的头控制单元141可以基于例如在头信息生成处理之前从外部例如用户输入的指令或从画面重新布置缓存器111提供的图像来进行这样的设置。
<解块滤波控制处理的流程>
将参照图58的流程图来描述为了通过头控制单元141进行这样的设置而进行的解块滤波控制处理的流程的示例。
当解块滤波控制处理开始时，在步骤S671中，头控制单元141将当前要处理的图片划分成多个部分区域。划分方法是任意的。例如，可以根据当前要处理的图像的细节来进行区域划分。此外，例如，可以以作为预定区域的区块(tile)为单位来进行这样的区域划分。换言之，可以选择每个区块所属的区域。
在步骤S672中，头控制单元141对每个划分的部分区域的图像的特征进行分析。分析特征的方法是任意的。例如，通过分析，头控制单元141可以指定每个部分区域的图像是自然图像还是画面内容等。此外，可以通过更精细的分析来具体地指定例如自然图像或画面内容。当然，可以在不使用诸如自然图像或画面内容的概念的情况下进行该分析。此外，头控制单元141可以根据预定方法来实际地分析当前要处理的图像或者可以获得与来自外部的图像的特征相关的信息等。
在步骤S673中，头控制单元141基于步骤S672的分析结果根据图像的特征来对每个部分区域设置解块滤波的参数。
在步骤S674中，头控制单元141控制头信息生成处理并且生成标志信息使得反映在步骤S673中决定的设置。换言之，当如在以上实施方式中进行头信息生成处理时，基于该设置来设置参数。
当步骤S674的处理结束时，解块滤波控制处理结束。
<参数设置处理的流程>
图58的步骤S673的处理的方法(设置参数的方法)是任意的。例如，可以根据当前要处理的部分区域的图像是否是自然图像来进行对是否与针对亮度的解块滤波处理的控制无关地进行针对色度的解块滤波处理的控制的设置。
作为在图58的步骤S673中进行的参数设置处理的示例，将参照图59的流程图来描述在这种情况下的处理的流程的示例。
当参数设置处理开始时，在步骤S691中，头控制单元141确定当前要处理的部分区域的图像是否是自然图像。当确定当前要处理的部分区域的图像是自然图像时，处理进行至步骤S692。
在步骤S692中，头控制单元141将针对亮度的解块滤波处理和针对色度的解块滤波处理一起进行。换言之，使用已知的在HEVC的版本1中使用的用于控制解块滤波处理的控制信息来控制针对亮度的解块滤波处理和针对色度的解块滤波处理。当步骤S692的处理结束时，参数设置处理结束，并且处理返回图58。
此外，当在步骤S691中确定当前要处理的部分区域的图像不是自然图像时，处理进行至步骤S693。
在步骤S693中，头控制单元141将针对亮度的解块滤波处理和针对色度的解块滤波处理彼此无关地进行。换言之，使用在上述实施方式中描述的用于控制针对色度的解块滤波处理的控制信息来控制针对色度的解块滤波处理。当步骤S693的处理结束时，参数设置处理结束，并且处理返回图58。
当如上所述进行各个处理时，头控制单元141可以控制针对每个区域的解块滤波处理。因此，例如，即使自然图像和画面内容被一起显示在如图57的示例中，也可以使用更适当的参数对每个部分区域进行解块滤波处理，因此，图像编码装置100(环路滤波器120)或图像解码装置200(环路滤波器216)可以抑制图像质量的降低。
<11.第十一实施方式>
<对生成针对每个区的控制信息的控制>
注意，可以基于图像的颜色格式来设置控制解块滤波处理的方法。通常，当RGB格式的图像数据被编码时，具有与YUV格式中的Y类似的信号特征的G被选择为第一分量，但是剩余的R和B分量具有与YUV格式中的U和V不同的特征。因此，当在没有改变的情况下应用针对YUV设计的解块滤波时，图像质量很可能要降低。此外，编码效率也很可能相应地要降低。
此外，当使用SCC编解码器进行以RGB格式的编码时，计算机画面将在不改变的情况下被用作编码器的输入的可能性也较高。换言之，当前要处理的图像是画面内容的可能性为高。
鉴于此，当具有RGB颜色格式的图像数据以颜色格式被编码以生成如图60所示的示例中的比特流(RGB比特流)时，用于控制针对色度的解块滤波处理的控制信息可以被生成并且被用作比特流的头信息(编码数据)。此外，当使用YUV的颜色格式来进行编码以生成比特流(YUV比特流)时，用于控制解块滤波处理的控制信息可以被生成并且被用作比特流(编码数据)的头信息，使得色度和亮度被一起控制。
<解块滤波控制处理的流程>
将参照图61的流程图来描述在这种情况下由头控制单元141进行的解块滤波控制处理的流程的示例。
当解块滤波控制处理开始时，在步骤S701中，头控制单元141指定当前要处理的图像的颜色格式。指定方法是任意的。例如，颜色格式可以基于对当前要处理的图像的分析来指定或者可以基于从外部获取与当前要处理的图像的颜色格式相关的信息来指定。
在步骤S702中，头控制单元141根据在步骤S701中指定的颜色格式来设置解块滤波的参数。
在步骤S703中，头控制单元141控制头信息生成处理，使得生成反映在步骤S702中决定的设置的标志信息。换言之，当如在以上实施方式中进行头信息生成处理时，基于该设置来设置参数。
当步骤S703的处理结束时，解块滤波控制处理结束。
<参数设置处理的流程>
图61中的步骤S702的处理的方法(设置参数的方法)是任意的。例如，可以根据当前要处理的图像的颜色格式是否是YUV来进行对是否与针对亮度的解块滤波处理的控制无关地进行针对色度的解块滤波处理的控制的设置。
作为在图61的步骤S702中进行的参数设置处理的示例，将参照图62的流程图来描述在这种情况下的处理的流程的示例。
当参数设置处理开始时，在步骤S711中，头控制单元141确定当前要处理的图像的颜色格式是否是YUV格式。当确定当前要处理的图像的颜色格式是YUV格式时，处理进行至步骤S712。
在步骤S712中，头控制单元141将针对亮度的解块滤波处理和针对色度的解块滤波处理一起控制。换言之，使用已知的在HEVC的版本1中使用的用于控制解块滤波处理的控制信息来控制针对亮度的解块滤波处理和针对色度的解块滤波处理。当步骤S692的处理结束时，参数设置处理结束，并且处理返回图61。
此外，当在步骤S711中确定当前要处理的图像的颜色格式不是YUV格式时，处理进行至步骤S713。
在步骤S713中，头控制单元141将针对亮度的解块滤波处理和针对色度的解块滤波处理彼此无关地进行。换言之，使用在上述实施方式中描述的用于控制针对色度的解块滤波处理的控制信息来控制针对色度的解块滤波处理。当步骤S713的处理结束时，参数设置处理结束，并且处理返回图61。
当如上所述进行各个处理时，头控制单元141可以根据颜色格式来控制解块滤波处理。因此，图像编码装置100(环路滤波器120)或图像解码装置200(环路滤波器216)可以更容易地抑制图像质量的降低。
本技术可以应用于可以对通过对图像数据进行编码而获得的编码数据进行解码并且在解码时进行滤波处理的所有图像解码装置。
此外，本技术可以应用于当通过卫星广播、有线电视、因特网或诸如移动电话的网络媒介接收通过如在例如MPEG、H.26x等中的诸如离散余弦变换和运动补偿的正交变换而压缩的图像信息(比特流)时使用的图像解码装置。此外，本技术还可以应用于当对光盘、磁盘或诸如闪存的存储介质进行处理时使用的图像解码装置。
<12.第十二实施方式>
<应用于多视图图像编码和多视图图像解码>
上述一系列处理可以应用于多视图图像解码。图63示出了多视图图像编码方案的示例。
如图63所示，多视图图像包括多个视图的图像。多视图图像的多个视图包括基本视图和非基本视图，在基本视图中，仅使用其自身的视图而不使用其他视图的信息来进行编码和解码，在非基本视图中，使用其他视图的信息来进行编码和解码。可以使用基本视图的信息来对非基本视图进行编码或解码或者可以使用另一非基本视图的信息来对非基本视图进行编码或解码。
当图63中所示的多视图图像被编码或解码时，针对每个视图对多视图图像进行编码。此外，当作为结果获得的编码数据被解码时，对每个视图的编码数据(即，针对每个视图)进行解码。在以上实施方式中描述的方法可以应用于每个视图的编码或解码。因此，可以抑制每个视图的图像的图像质量的降低。换言之，即使在多视图图像的情况下，类似地，也可以抑制图像质量的降低。
<多视图图像编码装置>
图64是示出进行上述多视图图像编码的多视图图像编码装置的图。如图64所示，多视图图像编码装置600包括编码单元601、编码单元602以及多路复用器603。
编码单元601对基本视图图像进行编码，并且生成基本视图图像编码流。编码单元602对非基本视图图像进行编码，并且生成非基本视图图像编码流。多路复用器603对由编码单元601生成的基本视图图像编码流和由编码单元602生成的非基本视图图像编码流进行多路复用，并且生成多视图图像编码流。
例如，在以上实施方式中描述的图像编码装置100可以应用为多视图图像编码装置600的编码单元601和编码单元602。相应地，在以上实施方式中描述的方法可以应用于对多视图图像的编码。换言之，多视图图像编码装置600可以抑制多视图图像的图像质量的降低。
<多视图图像解码装置>
图65是示出进行上述多视图图像解码的多视图图像解码装置的图。如图65所示，多视图图像解码装置610包括解复用器611、解码单元612和解码单元613。
解复用器611对通过对基本视图图像编码流和非基本视图图像编码流进行多路复用而获得的多视图编码流进行解复用，并且提取基本视图图像编码流和非基本视图图像编码流。解码单元612对由解复用器611提取的基本视图图像编码流进行解码，并且获得基本视图图像。解码单元613对由解复用器611提取的非基本视图图像编码流进行解码，并且获得非基本视图图像。
例如，在以上实施方式中描述的图像解码装置200可以应用为多视图图像解码装置610的解码单元612和解码单元613。相应地，在以上实施方式中描述的方法可以应用于对多视图图像的编码数据的解码。换言之，多视图图像解码装置610可以抑制多视图图像的图像质量的降低。
<13.第十三实施方式>
<对可分级图像编码和可分级图像解码的应用>
此外，上述一系列处理可以应用于可分级图像解码(可分级解码)。图66示出了可分级图像编码方案的示例。
可分级图像编码(可分级编码)是以下方案，在该方案中，图像被分成多个层(分层)，使得图像数据具有针对某个参数的预定可分级功能，并且针对每层进行编码。可分级图像解码(可分级解码)是与可分级图像编码对应的解码。
如图66所示，对于图像的分层，基于具有可分级功能的某个参数来将图像划分成多个图像(层)。换言之，分层图像(可分级图像)包括某个参数的值彼此不同的多个层的图像。可分级图像的多个层包括基本层和非基本层(也被称为增强层)，在基本层中，仅使用其自身层的图像而不使用其他层的图像来进行编码和解码，在非基本层中，使用其他层的图像进行编码和解码。作为非基本层，可以使用基本层的图像，并且可以使用任何其他非基本层的图像。
通常，非基本层被配置有其自身图像与另一层的图像之间的差分图像的数据(差分数据)，使得冗余度降低。例如，当一个图像被分层成两层，即，基本层和非基本层(其也被称为增强层)时，当仅使用基本层的数据时获得质量低于原始图像的图像，而当结合基本层的数据和非基本层的数据两者时获得原始图像(即，高质量图像)。
当如上所述对图像进行分层时，可以根据情况容易地获得各种质量的图像。例如，对于具有低处理能力的终端例如移动终端而言，仅传输基本层的图像压缩信息，并且再现低空间分辨率和时间分辨率或者低质量的运动图像，而对于具有高处理能力的终端例如电视机或个人计算机而言，传送增强层和基本层的图像压缩信息，并且再现高空间分辨率和时间分辨率或者高质量的活动图像。换言之，在不进行代码转换处理的情况下，可以从服务器传送根据终端或网络的能力的图像压缩信息。
当图66中所示的可分级图像被编码或解码时，针对每层对可分级图像进行编码。此外，当作为结果获得的编码数据被解码时，对每层的编码数据(即，针对每层)进行解码。在以上实施方式中描述的方法可以应用于每层的编码和解码。因此，可以抑制每层的图像的图像质量的降低。换言之，即使在可分级图像的情况下，类似地，也可以抑制图像质量的降低。
<可分级参数>
在可分级图像编码和可分级图像解码(可分级编码和可分级解码)中，任何参数都可以具有可分级功能。例如，空间分辨率可以用作如图67所示的参数(空间可分级性)。在空间可分级性的情况下，各个层具有不同的图像分辨率。换言之，如图67所示，每个图像被分层成两层，即，分辨率在空间上低于原始图像的分辨率的基本层以及与基本层的图像组合以获得原始图像(原始空间分辨率)的增强层。当然，层的数量是示例，并且每个图片可以被分层为任意数量的层。
此外，作为具有这样的可分级性的参数，例如，如图68所示，可以应用时间分辨率(时间可分级性)。在时间可分级性的情况下，各个层具有不同的帧速率。换言之，在这种情况下，如图68所示，每个图片被分层成具有不同帧速率的层，高帧速率的运动图像可以通过将高帧速率的层加至低帧速率的层来获得，并且原始运动图像(原始帧速率)可以通过将所有层相加来获得。当然，层的数量是示例，并且每个图片可以被分层成任意数量的层。
此外，作为具有这样的可分级性的参数，例如，可以应用信噪比(SNR)(SNR可分级性)。在SNR可分级性的情况下，各个层具有不同的SNR。换言之，在这种情况下，如图69所示，每个图像被分层成两层，即，SNR低于原始图像的SNR的基本层以及与基本层的图像组合以获得原始图像(原始SNR)的增强层。换言之，对于基本层图像压缩信息而言，传送与低PSNR的图像相关的图像，并且可以通过将增强层图像压缩信息加至基本层图像压缩信息来重建高PSNR图像。当然，层的数量是示例，并且每个图片可以被分层成任意数量的层。
不同于上述示例的参数可以应用为具有可分级性的参数。例如，存在位深度可分级性，其中，基本层包括8位图像，并且可以通过将增强层加至基本层来获得10位图像。
此外，存在色度可分级性，其中，基本层包括4:2:0格式的分量图像，并且可以通过将增强层加至基本层来获得4:2:2格式的分量图像。
<可分级图像编码装置>
图70是示出进行上述可分级图像编码的可分级图像编码装置的图。如图70所示，可分级图像编码装置620包括编码单元621、编码单元622以及多路复用器623。
编码单元621对基本层图像进行编码，并且生成基本层图像编码流。编码单元622对非基本层图像进行编码，并且生成非基本层图像编码流。多路复用器623对由编码单元621生成的基本层图像编码流和由编码单元622生成的非基本层图像编码流进行多路复用，并且生成可分级图像编码流。
例如，在以上实施方式中描述的图像编码装置100可以应用为可分级图像编码装置620的编码单元621和编码单元622。相应地，在以上实施方式中描述的方法可以应用于对可分级图像的编码。换言之，可分级图像编码装置620可以抑制可分级图像的图像质量的降低。
<可分级图像解码装置>
图71是示出进行上述可分级图像解码的可分级图像解码装置的图。如图71所示，可分级图像解码装置630包括解复用器631、解码单元632和解码单元633。
解复用器631对通过对基本层图像编码流和非基本层图像编码流进行多路复用而获得的可分级图像编码流进行解复用，并且提取基本层图像编码流和非基本层图像编码流。解码单元632对由解复用器631提取的基本层图像编码流进行解码，并且获得基本层图像。解码单元633对由解复用器631提取的非基本层图像编码流进行解码，并且获得非基本层图像。
例如，在以上实施方式中描述的图像解码装置200可以应用于可分级图像解码装置630的解码单元632和解码单元633。相应地，在以上实施方式中描述的方法可以应用于对可分级图像的编码数据的解码。换言之，可分级图像解码装置装置630可以抑制可分级图像的图像质量的降低。
<14.第十四实施方式>
<计算机>
可以由硬件或软件执行上述一系列处理。当由软件执行一系列处理时，构成软件的程序安装在计算机中。此处，计算机的示例包括结合至专用硬件中的计算机以及包括安装有各种程序并且能够执行各种功能的通用个人计算机。
图72是示出通过程序执行上述一系列处理的计算机的示例性硬件配置的框图。
在图72所示的计算机800中，中央处理单元(CPU)801、只读存储器(ROM)802和随机存取存储器(RAM)803经由总线804彼此连接。
输入/输出(I/O)接口810也连接至总线804。输入单元811、输出单元812、存储单元813、通信单元814和驱动器815连接至输入/输出接口810。
例如，输入单元811包括键盘、鼠标、麦克风、触摸面板、输入终端等。例如，输出单元812包括显示器、扬声器、输出终端等。例如，存储单元813包括硬盘、RAM盘、非易失性存储器等。例如，通信单元814包括网络接口。驱动器815驱动可移除介质821例如磁盘、光盘、磁光盘或半导体存储器。
在具有以上配置的计算机中，CPU 801例如通过将存储在存储单元813中的程序通过输入/输出接口810和总线804加载至RAM 803上并且执行该程序来执行上述一系列处理。RAM 803也适当地存储例如当CPU 801执行各种处理时所需要的数据。
例如，由计算机(CPU 801)执行的程序可以被记录在可移除介质821例如封装介质等中并且被应用。在这种情况下，可移除介质821可以安装至驱动器815，然后可以通过输入/输出接口810将程序安装在存储单元813中。
此外，程序可以经由有线或无线传输介质例如局域网(LAN)、因特网或数字卫星广播来提供。在这种情况下，程序可以经由通信单元814来接收，然后被安装在存储单元813中。
此外，程序可以被安装在ROM 802或存储单元813中。
注意，程序可以是其中按照本公开内容中所描述的顺序按时间顺序进行处理的程序或者可以是其中并行或在需要时例如调用时进行处理的程序。
此外，在本说明书中，描述记录在记录介质中的程序的步骤不仅包括根据所述顺序按时间顺序进行的处理，而且还包括不一定按时间顺序处理而是并行或独立进行的处理。
此外，在本公开内容中，系统意味着两个或更多个配置元件(装置、模块(部件)等)的组，而与所有的配置元件是否被布置在单个壳体中无关。因此，容纳在单独的壳体中并且经由网络连接的多个装置以及其中多个模块容纳在单个壳体中的单个装置二者均为系统。
此外，被描述为一个装置(或处理单元)的配置可以被划分成多个装置(或处理单元)。反之，被描述为多个装置(或处理单元)的配置可以被集成至一个装置(或处理单元)中。此外，不同于上述配置的配置可以添加至每个装置(或每个处理单元)的配置。此外，当整个系统中的配置或操作基本相同时，特定装置(或处理单元)的配置的一部分可以包括在其他装置(或其他处理单元)的配置中。
以上参照附图描述了本公开内容的优选实施方式，但是本公开内容的技术范围不限于以上示例。本公开内容的领域的技术人员可以发现在所附权利要求范围内的各种修改和变型，并且应当理解，这些修改和变型自然地落入本公开内容的技术范围中。
例如，本技术可以具有云计算的配置，在云计算的配置中，多个装置一起经由网络共享和处理一个功能。
此外，以上流程图中所述的步骤可以由单个装置执行或者可以由多个装置共享和执行。
此外，当单个步骤中包括多个处理时，包括在单个步骤中的多个处理可以由单个装置执行或者可以由多个装置共享和执行。
例如，根据以上实施方式的图像解码装置可以应用于卫星广播、有线广播例如有线电视、在因特网上传递或者由蜂窝通信传递至终端的传送器或接收器、将图像记录在介质例如光盘、磁盘或闪存中的记录装置或者各种电子装置例如对来自存储介质的图像进行再现的再现装置。以下将描述四个应用示例。
<15.第十五实施方式>
<第一应用示例：电视接收器>
图73示出了应用以上实施方式的电视装置的示例性示意配置。电视装置900包括天线901、调谐器902、解复用器903、解码器904、视频信号处理单元905、显示单元906、音频信号处理单元907、扬声器908、外部接口(I/F单元)909、控制单元910、用户接口(I/F单元)911和总线912。
调谐器902从通过天线901接收的广播信号提取期望信道的信号，并且对所提取的信号进行解调。此外，调谐器902将通过解调获得的编码比特流输出至解复用器903。换言之，调谐器902接收包括编码图像的编码流，并且用作电视装置900的传送单元。
解复用器903对来自编码比特流的观看目标的节目的视频流和音频流进行解复用，并且将每个解复用的流输出至解码器904。此外，解复用器903从编码比特流中提取辅助数据例如电子节目指南(EPG)，并且将所提取的数据提供给控制单元910。注意，当编码比特流被扰码时，解复用器903可以进行解扰。
解码器904对从解复用器903输入的视频流和音频流进行解码。解码器904将通过解码处理生成的视频数据输出至视频信号处理单元905。此外，解码器904将通过解码处理生成的音频数据输出至音频信号处理单元907。
视频信号处理单元905对从解码器904输入的视频数据进行再现，并且使得视频显示在显示单元906上。此外，视频信号处理单元905可以使得经由网络提供的应用画面显示在显示单元906上。视频信号处理单元905可以根据设置对视频数据进行另外的处理例如减噪处理。视频信号处理单元905可以生成图形用户接口(GUI)例如菜单、按钮或光标的图像并且使得所生成的图像叠加在输出图像上。
显示单元906被从视频信号处理单元905提供的驱动信号驱动，并且将视频或图像显示在显示装置(例如，液晶显示器、等离子显示器或者有机电致发光显示器(OLED)(有机EL显示器))的视频平面上。
音频信号处理单元907对从解码器904输入的音频数据进行再现处理例如D/A转换和放大，并且通过扬声器908输出声音。此外，音频信号处理单元907可以对音频数据进行另外的处理例如减噪处理。
外部接口单元909为用于将电视装置900与外部装置或网络连接的接口。例如，可以由解码器904对通过外部接口单元909接收的视频流或音频流进行解码。换言之，外部接口单元909还用作电视装置900的接收包括编码图像的编码流的传送单元。
控制单元910包括处理器例如CPU和存储器例如RAM或ROM。例如，存储器存储由CPU执行的程序、程序数据、EPG数据和经由网络获取的数据。例如，当电视装置900被激活时，由CPU读取和执行存储在存储器中的程序。CPU执行程序并且例如根据从用户接口单元911输入的操作信号控制电视装置900的操作。
用户接口单元911与控制单元910连接。例如，用户接口单元911包括在用户操作电视装置900时所使用的按钮和开关以及接收远程控制信号的接收单元。用户接口单元911通过部件检测用户的操作、生成操作信号并且将生成的操作信号输出至控制单元910。
总线912将调谐器902、解复用器903、解码器904、视频信号处理单元905、音频信号处理单元907、外部接口单元909以及控制单元910彼此连接。
在具有以上配置的电视装置900中，解码器904具有以上所描述的图像解码装置200的功能。换言之，解码器904可以使用在以上实施方式中描述的方法来对编码数据进行解码。因此，电视装置900可以抑制通过对接收的编码比特率进行解码而获得的图像的图像质量的降低。
此外，在具有以上配置的电视装置900中，视频信号处理单元905可以对例如从解码器904提供的图像数据进行编码并且经由外部接口单元909将所获得的编码数据输出至电视装置900的外部。此外，视频信号处理单元905可以具有图像编码设备100的功能。换言之，视频信号处理单元905可以使用在以上实施方式中描述的方法来对从解码器904提供的图像数据进行编码。因此，电视装置900可以抑制通过对要输出的编码数据进行解码而获得的图像的图像质量的降低。
<第二应用示例：移动电话>
图74示出了应用以上实施方式的移动电话的示例性示意配置。移动电话920包括天线921、通信单元922、音频编解码器923、扬声器924、麦克风925、摄像装置单元926、图像处理单元927、多路复用/分离单元928、记录/再现单元929、显示单元930、控制单元931、操作单元932和总线933。
天线921连接至通信单元922。扬声器924和麦克风925连接至音频编解码器923。操作单元932连接至控制单元931。总线933将通信单元922、音频编解码器923、摄像装置单元926、图像处理单元927、多路复用/分离单元928、记录/再现单元929、显示单元930和控制单元931彼此连接。
移动电话920进行操作例如在各种操作模式例如语音呼叫模式、数据通信模式、拍摄模式和视频通话模式下的对音频信号的收发、对电子邮件或图像数据的收发、图像成像以及数据记录。
在语音呼叫模式下，由麦克风925生成的模拟音频信号被提供给音频编解码器923。音频编解码器923将模拟音频信号转换成音频数据，并且对经转换的音频数据进行A/D转换和压缩。然后，音频编解码器923将经压缩的音频数据输出至通信单元922。通信单元922对音频数据进行编码和调制，并且生成传送信号。然后，通信单元922通过天线921将生成的传送信号传送至基站(未示出)。此外，通信单元922将通过天线921接收的无线信号进行放大、进行频率变换并且获取接收信号。然后，通信单元922对接收信号进行解调和解码、生成音频数据并且将生成的音频数据输出至音频编解码器923。音频编解码器923对音频数据进行解压缩、进行D/A转换并且生成模拟音频信号。然后，音频编解码器923将生成的音频信号提供给扬声器924，以使得声音被输出。
此外，在数据通信模式下，例如，控制单元931根据用户通过操作单元932执行的操作来生成构成电子邮件的文本数据。此外，控制单元931使得文本显示在显示单元930上。此外，控制单元931根据用户通过操作单元932给出的传送指令生成电子邮件数据，并且将生成的电子邮件数据输出至通信单元922。通信单元922对电子邮件数据进行编码和调制，并且生成传送信号。然后，通信单元922通过天线921将生成的传送信号传送至基站(未示出)。此外，通信单元922对通过天线921接收的无线信号进行放大、进行频率变换并且获取接收信号。然后，通信单元922对接收信号进行解调和解码、恢复电子邮件数据并且将恢复的电子邮件数据输出至控制单元931。控制单元931使得电子邮件的内容显示在显示单元930上，并且将电子邮件数据提供给记录/再现单元929使得电子邮件数据被写入记录/再现单元929的存储介质中。
记录/再现单元929包括任意的可读/可写存储介质。例如，存储介质可以为内置存储介质例如RAM或闪存或者可移除存储介质例如硬盘、磁盘、磁光盘、光盘、通用串行总线(USB)存储器或存储卡。
此外，在拍摄模式下，例如，摄像装置单元926对对象进行成像、生成图像数据并且将生成的图像数据输出至图像处理单元927。图像处理单元927对从摄像装置单元926输入的图像数据进行编码并且将编码流提供给记录/再现单元929，使得编码流被存储在记录/再现单元929的存储介质中。
此外，在图像显示模式下，记录/再现单元929读取在存储介质中记录的编码流并且将编码流输出至图像处理单元927。图像处理单元927对从记录/再现单元929输入的编码流进行解码，并且将图像数据提供给显示单元930，使得其图像被显示。
此外，在视频通话模式下，例如，多路复用/分离单元928对由图像处理单元927编码的视频流和从音频编解码器923输入的音频流进行多路复用，并且将经多多路复用的流输出至通信单元922。通信单元922对流进行编码和调制，并且生成传送信号。然后，通信单元922通过天线921将生成的传送信号传送至基站(未示出)。此外，通信单元922对通过天线921接收的无线信号进行放大、进行频率变换并且获取接收信号。传送信号和接收信号可以包括编码比特流。然后，通信单元922对接收信号进行解调和解码，恢复流，并且将所恢复的流输出至多路复用/分离单元928。多路复用/分离单元928对来自输入流的视频流和音频流进行分离，并且将视频流和音频流分别输出至图像处理单元927和音频编解码器923。图像处理单元927对视频流进行解码，并且生成视频数据。视频数据被提供给显示单元930，并且由显示单元930显示一系列图像。音频编解码器923对音频流进行解压缩、进行D/A转换并且生成模拟音频信号。然后，音频编解码器923将生成的音频信号提供给扬声器924，使得声音被输出。
在具有以上配置的移动电话920中，例如，图像处理单元927可以具有图像编码装置100的功能以及图像解码装置200的功能。换言之，图像处理单元927可以使用在以上实施方式中描述的方法对图像数据进行编码并且对编码数据进行解码。因此，移动电话920可以抑制当前要处理的图像的图像质量的降低。
<第三应用示例：记录/再现装置>
图75示出了应用以上实施方式的记录/再现装置的示例性示意配置。例如，记录/再现装置940对所接收的广播节目的音频数据和视频数据进行编码，并且将编码数据存储在记录介质中。此外，例如，记录/再现装置940可以对从其他装置获取的音频数据和视频数据进行编码并且将编码数据记录在记录介质中。此外，例如，记录/再现装置940根据用户指令通过监视器和扬声器对存储在记录介质中的数据进行再现。此时，记录/再现装置940对音频数据和视频数据进行解码。
记录/再现装置940包括调谐器941、外部接口(I/F单元)942、编码器943、硬盘驱动器(HDD)944、盘驱动器945、选择器946、解码器947、在屏显示器(OSD)948、控制单元949和用户接口(I/F单元)950。
调谐器941从通过天线(未示出)接收的广播信号提取期望信道的信号，并且对所提取的信号进行解调。然后，调谐器941将通过解调获得的编码比特流输出至选择器946。换言之，调谐器941用作记录/再现装置940中的传送单元。
外部接口单元942为用于将记录/再现装置940与外部装置或网络进行连接的接口。例如，外部接口单元942可以为电气电工工程师学会(IEEE)1394接口、网络接口、USB接口或闪存接口。例如，经由外部接口单元942接收的视频数据和音频数据被输入至编码器943。换言之，外部接口单元942用作记录/再现装置940中的传送单元。
当从外部接口单元942输入的视频数据和音频数据没有被编码时，编码器943对视频数据和音频数据进行编码。然后，编码器943将编码比特流输出至选择器946。
HDD 944将其中内容数据例如视频或声音被压缩的编码比特流、各种程序以及其他数据记录在内部硬盘中。此外，当再现视频或声音时，HDD 944读取来自硬盘的数据。
盘驱动器945将数据记录在安装的记录介质中或者从安装的记录介质中读取数据。例如，安装在盘驱动器945中的记录介质可以为数字多功能光盘(DVD)磁盘(DVD-视频、DVD-随机存取存储器(DVD-RAM)、DVD-可记录(DVD-R)、DVD-可写(DVD-RW)、DVD+可记录(DVD+R)、DVD+可写(DVD+RW)等)、蓝光(注册商标)盘等。
当记录视频或声音时，选择器946选择从调谐器941或编码器943输入的编码比特流，并且将所选择的编码比特流输出至HDD 944或盘驱动器945。此外，当再现视频或声音时，选择器946将从HDD 944或盘驱动器945输入的编码比特流输出至解码器947。
解码器947对编码比特流进行解码，并且生成视频数据和音频数据。然后，解码器947将生成的视频数据输出至OSD 948。解码器947将生成的音频数据输出至外部扬声器。
OSD 948对从解码器947输入的视频数据进行再现，并且显示视频。此外，例如，OSD948可以使得GUI的图像例如菜单、按钮或光标叠加在显示的视频上。
控制单元949包括处理器例如CPU和存储器例如RAM或ROM。存储器存储由CPU执行的程序、程序数据等。例如，当记录/再现装置940被激活时，由CPU读取和执行存储在存储器中的程序。CPU执行程序，并且例如根据从用户接口单元950输入的操作信号控制记录/再现装置940的操作。
用户接口单元950与控制单元949连接。例如，用户接口单元950包括当用户操作记录/再现装置940时所使用的按钮和开关以及接收远程控制信号的接收单元。用户接口单元950通过部件检测用户的操作、生成操作信号并且将生成的操作信号输出至控制单元949。
在具有以上配置的记录/再现装置940中，例如，编码器943可以具有图像编码装置100的功能。换言之，编码器943可以使用在以上实施方式中描述的方法对图像数据进行编码。因此，记录/再现装置940可以抑制当前要处理的图像的图像质量的降低。
在具有以上配置的记录/再现装置940中，例如，解码器947可以具有图像解码装置200的功能。换言之，解码器947可以使用在以上实施方式中描述的方法对编码数据进行解码。因此，记录/再现装置940可以抑制当前要处理的图像的图像质量的降低。
<第四应用示例：成像装置>
图76示出应用以上实施方式的成像装置的示例性示意配置。成像装置960对对象进行成像、生成图像、对图像数据进行编码并且将编码数据记录在记录介质中。
成像装置960包括光学块961、成像单元962、信号处理单元963、图像处理单元964、显示单元965、外部接口(I/F)单元966、存储器967、介质驱动器968、OSD 969、控制单元970、用户接口(I/F)单元971和总线972。
光学块961连接至成像单元962。成像单元962连接至信号处理单元963。显示单元965连接至图像处理单元964。用户接口单元971连接至控制单元970。总线972将图像处理单元964、外部接口单元966、存储器967、介质驱动器968、OSD 969和控制单元970彼此连接。
光学块961包括聚焦透镜、快门机构等。光学块961在成像单元962的成像平面上形成对象的光学图像。成像单元962包括CCD(电荷耦合器件)图像传感器或CMOS(互补金属氧化物半导体)图像传感器等，并且通过光电转换将形成在成像平面上的光学图像转换成用作电信号的图像信号。然后，成像单元962将图像信号输出至信号处理单元963。
信号处理单元963对从成像单元962输入的图像信号进行各种摄像装置信号处理例如拐点校正、伽马校正和颜色校正。信号处理单元963将已经经受摄像装置信号处理的图像数据输出至图像处理单元964。
图像处理单元964对从信号处理单元963输入的图像数据进行编码，并且生成编码数据。然后，图像处理单元964将生成的编码数据输出至外部接口单元966或介质驱动器968。此外，图像处理单元964对从外部接口单元966或介质驱动器968输入的编码数据进行解码，并且生成图像数据。然后，图像处理单元964将生成的图像数据输出至显示单元965。此外，图像处理单元964可以将从信号处理单元963输入的图像数据输出至显示单元965，使得图像被显示。此外，图像处理单元964可以使得从OSD 969获取的显示数据叠加在输出至显示单元965的图像上。
OSD 969生成GUI的图像例如菜单、按钮或光标，并且将生成的图像输出至图像处理单元964。
例如，外部接口单元966被配置为USB I/O端子。例如，当对图像进行打印时，外部接口单元966将成像装置960与打印机连接。此外，驱动器根据需要连接至外部接口单元966。例如，可移除介质例如磁盘或光盘可以安装至驱动器，并且从可移除介质读取的程序可以安装在成像装置960中。此外，外部接口单元966可以被配置为连接至网络例如LAN或因特网的网络接口。换言之，外部接口单元966用作成像装置960中的传送单元。
安装在介质驱动器968中的记录介质可以为任意的可读/可写可移除介质例如磁盘、磁光盘、光盘或半导体存储器。此外，记录介质可以固定地安装在介质驱动器968中，并且例如，可以配置非暂态存储单元例如内置硬盘驱动器或固态驱动器(SSD)。
控制单元970包括处理器例如CPU以及存储器例如RAM或ROM。例如，存储器存储由CPU执行的程序、程序数据等。例如，当成像装置960被激活时，由CPU读取和执行存储在存储器中的程序。CPU执行程序，并且例如根据从用户接口单元971输入的操作信号控制成像装置960的操作。
用户接口单元971与控制单元970连接。例如，用户接口单元971包括当用户操作成像装置960时所使用的按钮、开关等。用户接口单元971通过部件检测用户的操作、生成操作信号并且将生成的操作信号输出至控制单元970。
在具有以上配置的成像装置960中，例如，图像处理单元964可以具有图像编码装置100的功能以及图像解码装置200的功能。换言之，图像处理单元964可以使用在以上实施方式中描述的方法对图像数据进行编码并且对编码数据进行解码。因此，成像装置960可以抑制当前要处理的图像的图像质量的降低。
注意，本技术也可以应用于其中从预先准备的具有不同分辨率的多个编码数据中选择合适的编码数据并且使用合适的编码数据的HTTP流送例如MPEG DASH。换言之，多个编码数据可以共享与编码或解码有关的信息。
<16.第十六实施方式>
<其他实施方式>
结合根据本技术的装置、系统等的示例描述了以上实施方式，但本技术不限于以上示例并且可以被实现为安装在装置中的任何部件或者构成系统的装置，例如用作系统大规模集成(LSI)等的处理器、使用多个处理器等的模块、使用多个模块等的单元、其中还将任何其他功能添加至单元的设置(即，装置的一些部件)等。
<视频设备(video set)>
将参照图77描述将本技术实现为设备(set)的示例。图77示出应本技术的视频设备的示例性示意配置。
近年来，电子装置的功能已经变得多样化，并且当一些部件在研发或制造中被实现为出售、提供等时，存在具有相关功能的多个部件被组合并实现为具有多个功能的设置的情况以及实现被进行为具有单个功能的部件的情况。
图77所示的视频设备1300为其中具有与图像编码和/或图像解码有关的功能的装置和具有与该功能有关的任何其他功能的装置进行组合的多功能配置。
如图77所示，视频设备1300包括模块组例如视频模块1311、外部存储器1312、功率管理模块1313和前端模块1314以及具有相关功能的装置例如连接1321、摄像装置1322和传感器1323。
模块为具有集成有若干相关部件功能的多个功能的部件。实际物理配置是任意的，但是，例如，模块被配置成使得具有相应的功能的多个处理器、电子电路元件例如电阻器和电容器、及其他装置被布置并且集成在布线基板上。此外，可以通过将其他模块或处理器与模块组合来获得新的模块。
在图77的示例的情况下，视频模块1311为具有与图像处理有关的功能的部件的组合，并且包括应用处理器、视频处理器、宽带调制解调器1333和射频(RF)模块1334。
处理器是其中具有一定功能的配置被通过片上系统(SoC)集成至半导体芯片上的一个处理器，并且也称为例如系统大规模集成(LSI)等。具有一定功能的配置可以为逻辑电路(硬件配置)，可以为CPU、ROM、RAM和使用CPU、ROM和RAM执行的程序(软件配置)，并且可以为软件配置和硬件配置的组合。例如，处理器可以包括逻辑电路、CPU、ROM、RAM等，可以通过逻辑电路(硬件配置)实现一些功能，并且可以通过由CPU执行的程序(软件配置)实现其他功能。
图77的应用处理器1331为执行与图像处理有关的应用的处理器。由应用处理器1331执行的应用可以不仅进行计算处理还根据需要控制视频模块1311的内部和外部的部件例如视频处理器1332，以便实现某功能。
视频处理器1332为具有与图像编码和/或图像解码有关的功能的处理。
宽带调制解调器1333对要通过经由宽带线路例如因特网或公共电话线路网络进行的有线宽带通信和/或无线宽带通信传送的数据(数字信号)进行数字调制并且将数据转换成模拟信号，或者对通过宽带通信接收的模拟信号进行解调并且将模拟信号转换成数据(数字信号)。例如，宽带调制解调器1333处理任意信息例如由视频处理器1332处理的图像数据、包括编码图像数据的流、应用程序或设置数据。
RF模块1334是对通过天线收发的RF信号进行频率变换处理、调制/解调处理、放大处理、滤波处理等的模块。例如，RF模块1334对由宽带调制解调器1333生成的基带信号进行例如频率变换，并且生成RF信号。此外，例如，RF模块1334对通过前端模块1314接收的RF信号进行例如频率变换，并且生成基带信号。
注意，如图77所示的虚线1341即应用处理器1331和视频处理器1332可以集成在单个处理器中。
外部存储器1312安装在视频模块1311外部，并且是具有视频模块1311所使用的存储装置的模块。外部存储器1312的存储装置可以由任何物理配置实现，但是通常用于存储大容量数据例如以帧为单位的图像数据，并且因此期望使用相对便宜的大容量半导体存储器例如动态随机存取存储器(DRAM)实现外部存储器1312的存储装置。
功率管理模块1313管理和控制视频模块1311(视频模块1311中的相应的部件)的供电。
前端模块1314为对RF模块1334提供前端功能的模块(天线侧的收发端的电路)的模块。如图77所示，前端模块1314包括例如天线单元1351、滤波器1352和放大单元1353。
天线单元1351包括收发无线电信号的天线以及外周配置。天线单元1351传送从放大单元1353提供的作为无线电信号的信号，并且将所接收的无线电信号作为电信号(RF信号)提供给滤波器1352。滤波器1352对通过天线单元1351接收的RF信号进行例如滤波处理，并且将经处理的RF信号提供给RF模块1334。放大单元1353对从RF模块1334提供的RF信号进行放大，并且将经放大的RF信号提供给天线单元1351。
连接1321是具有与外部的连接有关的功能的模块。连接1321的物理配置是任意的。例如，连接1321包括具有与由宽带调制解调器1333、外部I/O端子等支持的通信标准不同的通信功能的配置。
例如，连接1321可以包括具有基于无线通信标准例如蓝牙(注册商标)、IEEE802.11(例如，无线保真(Wi-Fi)(注册商标))、近场通信(NFC)、红外数据关联(IrDA)、收发满足标准的信号的天线等的通信功能的模块。此外，例如，连接1321可以包括具有基于有线通信标准例如通用串行总线(USB)或高清晰度多媒体接口(HDMI)(注册商标)的通信功能的模块或者满足该标准的端子。此外，例如，连接1321可以包括任何其他数据(信号)传送功能等例如模拟I/O端子。
注意，连接1321可以包括数据(信号)的传送目的地的装置。例如，连接1321可以包括从记录介质例如磁盘、光盘、磁光盘或半导体存储器读取数据或者将数据记录在记录介质中的驱动器(包括硬盘、SSD、网络附接存储(NAS)等以及可移除介质的驱动器)。此外，连接1321可以包括输出图像或声音的输出装置(监视器、扬声器等)。
摄像装置1322为具有拍摄对象并且获得对象的图像数据的功能的模块。例如，通过摄像装置1322的拍摄获得的图像数据被提供给视频处理器1332并且由视频处理器1332编码。
传感器1323为具有任意传感器功能的模块，例如声音传感器、超声波传感器、光学传感器、照度传感器、红外传感器、图像传感器、旋转传感器、角度传感器、角速度传感器、速度传感器、加速度传感器、倾斜传感器、磁识别传感器、振动传感器或温度传感器。例如，由传感器1323检测的数据被提供给应用处理器1331并且被应用等使用。
以上被描述为模块的配置可以实现为处理器，并且被描述为处理器的配置可以实现为模块。
在具有以上配置的视频设备1300中，本技术可以应用于随后要描述的视频处理器1332。因此，视频设备1300可以实现为应用本技术的设置。
<视频处理器的示例性配置>
图78示出应用本技术的视频处理器1332(图77)的示例性示意配置。
在图78的示例的情况下，视频处理器1332具有接收视频信号和音频信号的输入并且根据某方案对视频信号和音频信号进行编码的功能，以及对编码视频数据和编码音频数据进行解码并且对视频信号和音频信号进行再现和输出的功能。
如图78所示，视频处理器1332包括视频输入处理单元1401、第一图像放大/缩小单元1402、第二图像放大/缩小单元1403、视频输出处理单元1404、帧存储器1405和存储器控制单元1406。视频处理器1332还包括编码/解码引擎1407、视频基本流(ES)缓存器1408A和1408B以及音频ES缓存器1409A和1409B。视频处理器1332还包括音频编码器1410、音频解码器1411、多路复用器(MUX))1412、解复用器(DMUX))1413和流缓存器1414。
例如，视频输入处理单元1401获取从连接1321(图77)等输入的的视频信号，并且将视频信号转换成数字图像数据。第一图像放大/缩小单元1402对图像数据进行例如格式转换处理和图像放大/缩小处理。第二图像放大/缩小单元1403根据图像数据通过视频输出处理单元1404输出至的目的地的格式对图像数据进行图像放大/缩小处理，或者对图像数据进行与第一图像放大/缩小单元1402相同的格式转换处理和图像放大/缩小处理。视频输出处理单元1404对图像数据进行格式转换并将图像数据转换成模拟信号，并且将再现的视频信号输出至例如连接1321等。
帧存储器1405为由视频输入处理单元1401、第一图像放大/缩小单元1402、第二图像放大/缩小单元1403、视频输出处理单元1404和编码/解码引擎1407共享的图像数据存储器。帧存储器1405被实现为例如半导体存储器例如DRAM。
存储器控制单元1406接收来自编码/解码引擎1407的同步信号，并且根据写入在访问管理表1406A中的针对帧存储器1405的访问计划来控制对帧存储器1405的写入/读取访问。根据由编码/解码引擎1407、第一图像放大/缩小单元1402、第二图像放大/缩小单元1403等执行的处理通过存储器控制单元1406对访问管理表1406A进行更新。
编码/解码引擎1407进行对图像数据进行编码的编码处理以及对作为通过对图像数据进行编码获得的数据的视频流进行解码的解码处理。例如，编码/解码引擎1407对从帧存储器1405读取的图像数据进行编码，并且将编码图像数据作为视频流按顺序写入视频ES缓存器1408A中。此外，例如，编码/解码引擎1407按顺序从视频ES缓存器1408B读取视频流，按顺序对视频流进行解码并且将解码图像数据按顺序写入帧存储器1405中。编码/解码引擎1407在编码或解码时将帧存储器1405用作工作区域。此外，编码/解码引擎1407例如在开始每个宏块的处理时将同步信号输出至存储器控制单元1406。
视频ES缓存器1408A对由编码/解码引擎1407生成的视频流进行缓存，并且然后将视频流提供给多路复用器(MUX)1412。视频ES缓存器1408B对从解复用器(DMUX)1413提供的视频流进行缓存，并且然后将视频流提供给编码/解码引擎1407。
音频ES缓存器1409A对由音频编码器1410生成的音频流进行缓存，并且然后将音频流提供给多路复用器(MUX)1412。音频ES缓存器1409B对从解复用器(DMUX)1413提供的音频流进行缓存，并且然后将音频流提供给音频解码器1411。
例如，音频编码器1410将从例如连接1321等输入的音频信号转换成数字信号，并且根据某方案例如MPEG音频方案或音频代码数目3(AC3)方案对数字信号进行编码。音频编码器1410将作为通过对音频信号进行编码获得的数据的音频流按顺序写入音频ES缓存器1409A中。音频解码器1411对从音频ES缓存器1409B提供的音频流进行解码、进行例如至模拟信号的转换并且将再现的音频信号提供给例如连接1321等。
多路复用器(MUX)1412对视频流和音频流进行多路复用。多路复用方法(即，通过多路复用而生成的比特流的格式)是任意的。此外，在多路复用时，多路复用器(MUX)1412可以将某头信息等添加至比特流。换言之，多路复用器(MUX)1412可以通过多路复用对流格式进行转换。例如，多路复用器(MUX)1412对要转换成作为传输格式的比特流的传输流的视频流和音频流进行多路复用。此外，例如，多路复用器(MUX)1412对要转换成记录文件格式的数据(文件数据)的视频流和音频流进行进行多路复用。
解复用器(DMUX)1413通过与由多路复用器(MUX)1412进行的多路复用对应的方法对通过对视频流和音频流进行多路复用获得的比特流进行解复用。换言之，解复用器(DMUX)1413提取来自从流缓存器1414读取的比特流的视频流和音频流(将视频流和音频流进行分离)。换言之，解复用器(DMUX)1413可以通过解复用对流的格式进行转换(由多路复用器(MUX)1412进行的转换的逆转换)。例如，解复用器(DMUX)1413可以通过流缓存器1414获取从例如连接1321或宽带调制解调器1333提供的传输流，并且通过解复用将传输流转换成视频流和音频流。此外，例如，解复用器(DMUX)1413可以通过流缓存器1414获取例如通过连接1321从各种记录介质读取的文件数据，并且通过解复用将文件数据转换成视频流和音频流。
流缓存器1414对比特流进行缓存。例如，流缓存器1414对从多路复用器(MUX)1412提供的传输流进行缓存，并且以一定定时或基于外部请求等将传输流提供给例如连接1321或宽带调制解调器1333。
此外，例如，流缓存器1414对从多路复用器(MUX)1412提供的文件数据进行缓存，以一定定时或基于外部请求等将文件数据提供给例如连接1321等并且使得文件数据记录在各种记录介质中。
此外，流缓存器1414对通过例如连接1321或宽带调制解调器1333获取的传输流进行缓存，并且以一定定时或基于外部请求等将传输流提供给解复用器(DMUX)1413。
此外，流缓存器1414将从各种记录介质读取的文件数据缓存在例如连接1321等中，并且以一定定时或者基于外部请求等将文件数据提供给解复用器(DMUX)1413。
接着，将描述具有以上配置的视频处理器1332的操作。例如从连接1321等输入至视频处理器1332的视频信号被根据视频输入处理单元1401中的某方案例如4:2:2Y/Cb/Cr方案转换成数字图像数据并且被按顺序写入帧存储器1405中。数字图像数据被读出至第一图像放大/缩小单元1402或第二图像放大/缩小单元1403、经受进行至某方案例如4:2:0Y/Cb/Cr方案的格式转换的格式转换处理以及放大/减小处理，并且被再次写入帧存储器1405中。图像数据被编码/解码引擎1407编码，并且被作为视频流写入视频ES缓存器1408A中。
此外，从连接1321等输入至视频处理器1332的音频信号被音频编码器1410编码，并且被作为音频流写入音频ES缓存器1409A中。
视频ES缓存器1048A的视频流和音频ES缓存器1409A的音频流被读出至多路复用器(MUX)1412并由多路复用器(MUX)1412多路复用，并且被转换成传输流、文件数据等。由多路复用器(MUX)1412生成的传输流被缓存在流缓存器1414中，并且然后被通过例如连接1321或宽带调制解调器1333输出至外部网络。此外，由多路复用器(MUX)1412生成的文件数据被缓存在流缓存器1414中，然后被输出至例如连接1321等并且被记录在各种记录介质中。
此外，通过例如连接1321或宽带调制解调器1333从外部网络输入至视频处理器1332的传输流被缓存在流缓存器1414中并且然后被解复用器(DMUX)1413解复用。此外，从各种记录介质读入至例如连接1321等中并且然后被输入至视频处理器1332的文件数据被缓存在流缓存器1414中并且然后被解复用器(DMUX)1413解复用。换言之，输入至视频处理器1332的传输流或文件数据通过解复用器(DMUX)1413解复用成视频流和音频流。
音频流被通过音频ES缓存器1409B提供给音频解码器1411并且被解码，并且因此音频信号被再现。此外，视频流被写入视频ES缓存器1408B中、按顺序读出至编码/解码引擎1407并被编码/解码引擎1407解码并且被写入帧存储器1405中。解码图像数据经受由第二图像放大/缩小单元1403进行的放大/减小处理，并且被写入帧存储器1405中。然后，解码图像数据被读出至视频输出处理单元1404、经受进行至某方案例如4:2:2Y/Cb/Cr方案的格式转换的格式转换处理并且被转换成模拟信号，并且因此视频信号被再现。
当将本技术应用于具有以上配置的视频处理器1332时，优选的是，将本技术的以上实施方式应用于编码/解码引擎1407。换言之，例如，编码/解码引擎1407优选地具有图像编码装置100的功能以及图像解码装置200的功能。因此，视频处理器1332可以获得与以上参照图1至图62描述的实施方式的效果类似的效果。
注意，在编码/解码引擎1407中，本技术(即，图像编码装置100的功能或图像解码装置200的功能)可以由硬件例如逻辑电路或软件例如嵌入程序中之一或二者来实现。
<视频处理器的另一示例性配置>
图79示出应用本技术的视频处理器1332的另一示例性示意配置。在图79的示例的情况下，视频处理器1332具有根据一定方案对图像数据进行编码和解码的功能。
更具体地，如图79所示，视频处理器1332包括控制单元1511、显示接口1512、显示引擎1513、图像处理引擎1514和内部存储器1515。视频处理器1332还包括编解码引擎1516、存储器接口1517、多路复用/解复用器(MUX DMUX)1518、网络接口1519和视频接口1520。
控制单元1511控制视频处理器1332中的每个处理单元例如显示接口1512、显示引擎1513、图像处理引擎1514和编解码引擎1516的操作。
如图79所示，控制单元1511包括例如主CPU 1531、子CPU 1532和系统控制器1533。主CPU 1531执行例如用于控制视频处理器1332中的每个处理单元的操作的程序。主CPU1531例如根据程序生成控制信号并且将控制信号提供给每个处理单元(即，控制每个处理单元的操作)。子CPU 1532承担主CPU 1531的辅助作用。例如，子CPU 1532执行由主CPU1531执行的程序的子处理或子例程。系统控制器1533控制主CPU 1531的操作并且子CPU1532例如指定由主CPU 1531和子CPU 1532执行的程序。
显示接口1512在控制单元1511的控制下将图像数据输出至例如连接1321等。例如，显示接口1512将数字数据的图像数据转换成模拟信号，并且将模拟信号作为再现的视频信号输出至例如连接1321的监视器装置，或者将数字数据的图像数据输出至例如连接1321的监视器装置。
显示引擎1513在控制单元1511的控制下对图像数据进行各种转换处理例如格式转换处理、尺寸转换处理和色域转换处理，以遵从例如显示图像的监视器装置的硬件规范。
图像处理引擎1514在控制单元1511的控制下对图像数据进行用于提高图像质量的某图像处理例如滤波处理。
内部存储器1515是安装在视频处理器1332中并且由显示引擎1513、图像处理引擎1514和编解码引擎1516共享的存储器。内部存储器1515用于在例如显示引擎1513、图像处理引擎1514和编解码引擎1516之间进行的数据传输。例如，内部存储器1515存储从显示引擎1513、图像处理引擎1514或编解码引擎1516提供的数据，并且根据需要(例如，根据请求)将数据提供给显示引擎1513、图像处理引擎1514或编解码引擎1516。内部存储器1515可以由任何存储装置实现，但是由于内部存储器1515多用于存储小容量数据例如块单元的图像数据或参数，所以期望使用容量相对小(例如，与外部存储器1312相比)并且响应速度快的半导体存储器例如静态随机存取存储器(SRAM)来实现内部存储器1515。
编解码引擎1516进行与图像数据的编码和解码有关的处理。由编解码引擎1516支持的编码/解码方案是任意的，并且编解码引擎1516可以支持一个或更多个方案。例如，编解码引擎1516可以具有支持多个编码/解码方案的编解码功能并且使用选自所述方案中的方案进行图像数据的编码或编码数据的解码。
在图79所示的示例中，编解码引擎1516包括例如MPEG-2视频1541、AVC/H.2641542、HEVC/H.2651543、HEVC/H.265(可分级)1544、HEVC/H.265(多视图)1545和MPEG-DASH 1551作为与编解码有关的处理的功能块。
MPEG-2视频1541是根据MPEG-2方案对图像数据进行编码或解码的功能块。AVC/H.2641542是根据AVC方案对图像数据进行编码或解码的功能块。HEVC/H.2651543是根据HEVC方案对图像数据进行编码或解码的功能块。HEVC/H.265(可分级)1544是根据HEVC方案对图像数据进行可分级编码或可分级解码的功能块。HEVC/H.265(多视图)1545是根据HEVC方案对图像数据进行多视图编码或多视图解码的功能块。
MPEG-DASH 1551是根据HTTP上的MPEG动态自适应流送(MPEG-Dynamic AdaptiveStreaming，MPEG-DASH)收发图像数据的功能块。MPEG-DASH是使用超文本传输协议(HyperText Transfer Protocol，HTTP)来流送视频的技术，并且具有以下特征：从以片段为单位在先前准备的分辨率等不同的多条编码数据中选择合适的一个数据并且传送所选择的一个数据。MPEG-DASH 1551进行遵从标准的流的生成、流的传送控制等，并且使用用于对图像数据进行编码和解码的MPEG-2视频1541至HEVC/H.265(多视图)1545。
存储器接口1517为针对外部存储器1312的接口。从图像处理引擎1514或编解码引擎1516提供的数据被通过存储器接口1517提供给外部存储器1312。此外，从外部存储器1312读取的数据被通过存储器接口1517提供给视频处理器1332(图像处理引擎1514或编解码引擎1516)。
多路复用/解复用器(MUX DMUX)1518对与图像有关的各种数据例如编码数据的比特流、图像数据和视频信号进行多路复用/解复用。多路复用/分离方法是任意的。例如，在多路复用时，多路复用/解复用器(MUX DMUX)1518可以不仅将多条数据组合成一条数据并且还将某头信息等添加至数据。此外，在解复用时，多路复用/解复用器(MUX DMUX)1518可以不仅将一条数据划分成多条数据而且还将某头信息等添加至每个划分出的数据。换言之，多路复用/解复用器(MUX DMUX)1518可以通过多路复用和解复用转换数据格式。例如，多路复用/解复用器(MUX DMUX)1518可以对要转换成用作传输格式的比特流或记录文件格式的数据(文件数据)的传输流的比特流进行多路复用。当然，也可以通过解复用进行逆转换。
网络接口1519是用于例如宽带调制解调器1333或连接1321的接口。视频接口1520是用于例如连接1321或摄像装置1322的接口。
接着，将描述视频处理器1332的示例性操作。例如，当通过例如连接1321或宽带调制解调器1333从外部网络接收传输流时，传输流被通过网络接口1519提供给多路复用/解复用器(MUX DMUX)1518、被解复用并且然后被编解码引擎1516解码。通过编解码引擎1516的解码获得的图像数据经受例如由图像处理引擎1514进行的某图像处理、经受由显示引擎1513进行的某转换并且被通过显示接口1512提供给例如连接1321等，并且因此图像被显示在监视器上。此外，例如，通过编解码引擎1516的解码获得的图像数据再次被编解码引擎1516编码、被多路复用/解复用器(MUX DMUX)1518多路复用以转换成文件数据、通过视频接口1520输出至例如连接1321等并且然后被记录在各种记录介质中。
此外，例如，通过对通过连接1321等从记录介质(未示出)读取的图像数据进行编码获得的编码数据的文件数据被通过视频接口1520提供给多路复用/解复用器(MUX DMUX)1518并被解复用，并且被编解码引擎1516解码。通过编解码引擎1516的解码获得的图像数据经受由图像处理引擎1514进行的某图像处理、经受由显示引擎1513进行的某转换、并且通过显示接口1512提供给例如连接1321等，并且因此图像被显示在监视器上。此外，例如，通过编解码引擎1516的解码获得的图像数据再次被编解码引擎1516编码、被多路复用/解复用器(MUX DMUX)1518多路复用以转换成传输流、通过网络接口1519提供给例如连接1321或宽带调制解调器1333并且被传送至其他装置(未示出)。
注意，例如使用内部存储器1515或外部存储器1312进行图像数据或其他数据在视频处理器1332中的处理单元之间的传输。此外，功率管理模块1313控制例如控制单元1511的供电。
当将本技术应用于具有以上配置的视频处理器1332时，期望将本技术的以上实施方式应用于编解码引擎1516。换言之，例如，优选的是，编解码引擎1516具有实现图像编码装置100和图像解码装置200的功能块。因此，视频处理器1332可以具有与以上参照图1至图62描述的实施方式的效果相同的效果。
注意，在编解码引擎1516中，可以由硬件例如逻辑电路或软件例如嵌入程序中之一或二者来实现本技术(即，图像编码装置100的功能或图像解码装置200的功能)。
以上描述了视频处理器1332的两个示例性配置，但视频处理器1332的配置是任意的并且可以具有与以上两个示例性配置不同的任何配置。此外，视频处理器1332可以被配置有单个半导体芯片或者可以被配置有多个半导体芯片。例如，视频处理器1332可以被配置有其中堆叠有多个半导体的三维堆叠LSI。此外，视频处理器1332可以由多个LSI来实现。
<对装置的应用示例>
视频设备1300可以结合至处理图像数据的各种装置中。例如，视频设备1300可以结合至电视装置900(图73)、移动电话920(图74)、记录/再现装置940(图75)、成像装置960(图76)等中。由于结合了视频设备1300，装置可以具有与以上参照图1至图62描述的实施方式的效果类似的效果。
注意，此外，当部件包括视频处理器1332时，甚至视频设备1300的每个部件可以被实现为应用本技术的部件。例如，仅有视频处理器1332可以被实现为应用本技术的视频处理器。此外，例如，上述由虚线1341指示的处理器、视频模块1311等可以被实现为例如应用本技术的处理器或模块。此外，例如，视频模块1311、外部存储器1312、功率管理模块1313和前端模块1314的组合可以被实现为应用本技术的视频单元1361。这些配置可以具有与以上参照图1至图62描述的实施方式的效果相同的效果。
换言之，与视频设备1300的情况类似，包括视频处理器1332的任何配置可以结合至处理图像数据的各种装置中。例如，视频处理器1332、由虚线1341指示的处理器、视频模块1311或者视频单元1361可以结合至电视装置900(图73)、移动电话920(图74)、记录/再现装置940(图75)、成像装置960(图76)等中。此外，当并入应用本技术的配置时，与视频设备1300的情况类似，装置可以具有与以上参照图1至图62描述的实施方式的效果相同的效果。
此外，在本说明书中，结合其中各种多条信息被多路复用至编码流中并且被从编码侧传送至解码侧的示例进行描述。然而，传送信息的技术不限于本示例。例如，在不被多路复用成编码比特流的情况下，信息可以被传送并记录为与编码比特流关联的单独的数据。此处，术语“关联”意味着在解码时包括在比特流中的图像(或图像的一部分例如片或块)可以与和图像对应的信息链接。换言之，信息可以通过与用于图像(或比特流)的传送路径不同的传送路径传送。此外，信息可以记录在与用于图像(或比特流)的记录介质不同的记录介质(或者相同记录介质的不同的记录区域)中。此外，例如，信息和图像(或比特流)可以以任意单位例如以多个帧为单位、以帧为单位或以帧的一部分为单位彼此关联。
注意，本技术还可以具有以下配置。
(1)一种图像处理装置，包括：
编码单元，所述编码单元对图像数据进行编码；以及
控制信息生成单元，所述控制信息生成单元生成用于控制针对解码图像数据的色度分量的解块滤波处理的控制信息作为编码数据的头信息，其中所述解码图像数据是通过对所述编码数据进行解码而获得的，所述编码数据是通过由所述编码单元对所述图像数据进行编码而获得的。
(2)根据(1)所述的图像处理装置，
其中，所述控制信息生成单元生成用于控制是否进行针对所述解码图像数据的所述色度分量的所述解块滤波处理的控制信息作为所述控制信息。
(3)根据(1)或(2)所述的图像处理装置，
其中，所述控制信息生成单元生成用于控制针对所述解码图像数据的所述色度分量的所述解块滤波处理的滤波强度的控制信息作为所述控制信息。
(4)根据(3)所述的图像处理装置，
其中，所述控制信息生成单元生成用于控制针对所述解块滤波的参数β的偏移的控制信息作为用于控制所述滤波强度的控制信息。
(5)根据(3)或(4)所述的图像处理装置，
其中，所述控制信息生成单元生成用于控制针对所述解块滤波的参数tC的偏移的控制信息作为用于控制所述滤波强度的控制信息。
(6)根据(1)至(5)中任一项所述的图像处理装置，
其中，所述控制信息生成单元生成以下控制信息中的至少之一：
作为所述头信息的序列参数集的语法元素并且用于控制针对与所述解码图像数据的所述序列参数集相对应的序列的色度分量的解块滤波处理的控制信息，
作为所述头信息的图片参数集的语法元素并且用于控制针对与所述解码图像数据的所述图片参数集相对应的图片的色度分量的解块滤波处理的控制信息，以及
作为所述头信息的片头的语法元素并且用于控制针对与所述解码图像数据的所述片头对应的片的色度分量的解块滤波处理的控制信息。
(7)根据(1)至(6)中任一项所述的图像处理装置，还包括：
滤波处理单元，所述滤波处理单元基于通过所述控制信息生成单元生成的所述控制信息来进行针对所述解码图像数据的所述色度分量的所述解块滤波处理。
(8)根据(1)至(7)中任一项所述的图像处理装置，还包括：
控制单元，所述控制单元控制所述控制信息生成单元使得进行根据所述解码图像数据的图像的特征的所述解块滤波处理，
其中，所述控制信息生成单元根据所述控制单元的控制来生成所述控制信息。
(9)根据(1)至(8)中任一项所述的图像处理装置，还包括：
控制单元，所述控制单元控制所述控制信息生成单元使得进行根据所述解码图像数据的颜色格式的所述解块滤波处理，
其中，所述控制信息生成单元根据所述控制单元的控制来生成所述控制信息。
(10)一种图像处理方法，包括：
对图像数据进行编码；以及
生成用于控制针对解码图像数据的色度分量的解块滤波处理的控制信息作为编码数据的头信息，其中所述解码图像数据是通过对所述编码数据进行解码而获得的，所述编码数据是通过对所述图像数据进行编码而获得的。
(11)一种图像处理装置，包括：
解码单元，所述解码单元对图像数据的编码数据进行解码；以及
滤波处理单元，所述滤波处理单元基于所述编码数据的头信息中的用于控制针对解码图像数据的色度分量的解块滤波处理的控制信息来进行针对所述解码图像数据的所述色度分量的所述解块滤波处理，其中所述解码图像数据是通过所述解码单元对所述编码数据进行解码而获得的。
(12)根据(11)所述的图像处理装置，
其中，所述控制信息是用于控制是否进行针对所述解码图像数据的所述色度分量的所述解块滤波处理的控制信息。
(13)根据(11)或(12)所述的图像处理装置，
其中，所述控制信息是用于控制针对所述解码图像数据的所述色度分量的所述解块滤波处理的滤波强度的控制信息。
(14)根据(13)所述的图像处理装置，
其中，用于控制所述滤波强度的所述控制信息是用于控制针对所述解块滤波的参数β的偏移的控制信息。
(15)根据(13)或(14)所述的图像处理装置，
其中，用于控制所述滤波强度的所述控制信息是用于控制针对所述解块滤波的参数tC的偏移的控制信息。
(16)根据(11)至(15)中任一项所述的图像处理装置，
其中，所述控制信息包括以下控制信息中的至少之一：
作为所述头信息的序列参数集的语法元素并且用于控制针对与所述解码图像数据的所述序列参数集相对应的序列的色度分量的解块滤波处理的控制信息，
作为所述头信息的图片参数集的语法元素并且用于控制针对与所述解码图像数据的所述图片参数集相对应的图片的色度分量的解块滤波处理的控制信息，以及
作为所述头信息的片头的语法元素，并且用于控制针对与所述解码图像数据的所述片头相对应的片的色度分量的解块滤波处理的控制信息，并且
所述滤波处理单元基于在所述控制信息中包括的信息中的任何一个来进行针对所述解码图像数据的所述色度分量的所述解块滤波处理。
(17)根据(16)所述的图像处理装置，
其中，所述滤波处理单元优选地以下述顺序使用所述控制信息：所述片头的所述控制信息、所述图片参数集的所述控制信息、以及所述序列参数集的所述控制信息。
(18)根据(16)或(17)所述的图像处理装置，
其中，所述滤波处理单元基于指示是否存在用于控制针对所述解码图像数据的所述解块滤波处理的所述控制信息的信息来参考和使用所述图片参数集的所述控制信息以及所述片头的所述控制信息。
(19)根据(16)至(18)中任一项所述的图像处理装置，
其中，所述滤波处理单元基于指示是否存在用于控制针对所述解码图像数据的所述色度分量的所述解块滤波处理的所述控制信息的信息来参考和使用所述图片参数集的所述控制信息以及所述片头的所述控制信息。
(20)一种图像处理方法，包括：
对图像数据的编码数据进行解码；以及
基于所述编码数据的头信息中的用于控制针对解码图像数据的色度分量的解块滤波处理的控制信息来进行针对所述解码图像数据的所述色度分量的所述解块滤波处理，其中所述解码图像数据是通过对所述编码数据进行解码而获得的。
附图标记列表
100 图像编码设备
115 无损编码单元
120 环路滤波器
131 头信息生成单元
141 头控制单元
151 SPS生成单元
152 PPS生成单元
153 SH生成单元
161 SPS扩展语法生成单元
162 PPS扩展语法生成单元
163 SH扩展语法生成单元
171 sps_chroma_deblocking_filter_disabled_flag生成单元
172 pps_chroma_deblocking_filter_disabled_flag生成单元
173 slice_chroma_deblocking_filter_disabled_flag生成单元
181 解块滤波控制单元
182 解块滤波处理单元
191 亮度解块滤波处理单元
192 色度解块滤波处理单元
200 图像解码设备
212 无损解码单元
216 环路滤波器
251 解块滤波控制单元
252 解块滤波处理单元
261 亮度解块滤波处理单元
262 色度解块滤波处理单元
271 chroma_deblocking_filter_control_present_flag生成单元
272 chroma_deblocking_filter_override_enabled_flag生成单元
273 chroma_deblocking_filter_override_flag生成单元
281 pps_chroma_beta_offset_div2生成单元
282 pps_chroma_tc_offset_div2生成单元
283 slice_chroma_beta_offset_div2生成单元
284 slice_chroma_tc_offset_div2生成单元

Claims (11)

1.一种图像处理装置，包括：
编码单元，所述编码单元对图像数据进行编码；以及
控制信息生成单元，所述控制信息生成单元生成用于控制语法元素是否存在的第一控制信息，其中所述语法元素用于控制针对通过对编码数据进行解码获得的解码图像数据的亮度分量的第一解块滤波处理，所述编码数据是通过由所述编码单元对所述图像数据进行编码而获得的，以及在所述第一控制信息指示存在所述语法元素时，生成用于控制是否进行针对所述解码图像数据的色度分量的第二解块滤波处理的第二控制控制信息，
其中，所述控制信息生成单元生成用于控制针对所述解码图像数据的所述色度分量的所述第二解块滤波处理的滤波强度的第三控制信息，并且
所述第三控制信息是用于控制针对所述第二解块滤波处理的参数β或参数tC的偏移的信息。
2.根据权利要求1所述的图像处理装置，
其中，所述控制信息生成单元生成以下控制信息中的至少之一作为所述第三控制信息：
作为所述编码数据的头信息的序列参数集的语法元素并且用于控制针对与所述解码图像数据的所述序列参数集相对应的序列的色度分量的所述第二解块滤波处理的控制信息，
作为所述编码数据的头信息的图片参数集的语法元素并且用于控制针对与所述解码图像数据的所述图片参数集相对应的图片的色度分量的所述第二解块滤波处理的控制信息，以及
作为所述编码数据的头信息的片头的语法元素并且用于控制针对与所述解码图像数据的所述片头相对应的片的色度分量的所述第二解块滤波处理的控制信息。
3.根据权利要求1所述的图像处理装置，还包括：
滤波处理单元，所述滤波处理单元基于通过所述控制信息生成单元生成的所述第二控制信息和所述第三控制信息来进行针对所述解码图像数据的所述色度分量的所述第二解块滤波处理。
4.根据权利要求1所述的图像处理装置，还包括：
控制单元，所述控制单元控制所述控制信息生成单元使得进行根据所述解码图像数据的图像的特征的所述第一解块滤波处理和所述第二解块滤波处理，
其中，所述控制信息生成单元根据所述控制单元的控制来生成所述第一控制信息、所述第二控制信息和所述第三控制信息。
5.根据权利要求1所述的图像处理装置，还包括：
控制单元，所述控制单元控制所述控制信息生成单元使得进行根据所述解码图像数据的颜色格式的所述第一解块滤波处理和所述第二解块滤波处理，
其中，所述控制信息生成单元根据所述控制单元的控制来生成所述第一控制信息、所述第二控制信息和所述第三控制信息。
6.一种图像处理方法，包括：
对图像数据进行编码；
生成用于控制语法元素是否存在的第一控制信息，其中所述语法元素用于控制针对通过对编码数据进行解码获得的解码图像数据的亮度分量的第一解块滤波处理，所述编码数据是通过对所述图像数据进行编码而获得的；以及
在所述第一控制信息指示存在所述语法元素时，生成用于控制是否进行针对所述解码图像数据的色度分量的第二解块滤波处理的第二控制信息，
其中，生成用于控制针对所述解码图像数据的所述色度分量的所述第二解块滤波处理的滤波强度的第三控制信息，并且
所述第三控制信息是用于控制针对所述第二解块滤波处理的参数β或参数tC的偏移的信息。
7.一种图像处理装置，包括：
解码单元，所述解码单元对图像数据的编码数据进行解码；以及
滤波处理单元，所述滤波处理单元在用于控制语法元素是否存在的第一控制信息指示存在所述语法元素时，基于所述语法元素进行针对通过由所述解码单元对所述编码数据进行解码获得的解码图像数据的亮度分量的第一解块滤波处理，以及基于用于控制是否进行针对所述解码图像数据的色度分量的第二解块滤波处理的第二控制信息和用于控制所述第二解块滤波处理的滤波强度的第三控制信息进行所述第二解块滤波处理，
其中，所述第三控制信息是用于控制针对所述第二解块滤波处理的参数β或参数tC的偏移的信息。
8.根据权利要求7所述的图像处理装置，
其中，所述第三控制信息包括以下控制信息中的至少之一：
作为所述编码数据的头信息的序列参数集的语法元素并且用于控制针对与所述解码图像数据的所述序列参数集相对应的序列的色度分量的所述第二解块滤波处理的控制信息，
作为所述编码数据的头信息的图片参数集的语法元素并且用于控制针对与所述解码图像数据的所述图片参数集相对应的图片的色度分量的所述第二解块滤波处理的控制信息，以及
作为所述编码数据的头信息的片头的语法元素并且用于控制针对与所述解码图像数据的所述片头相对应的片的色度分量的所述第二解块滤波处理的控制信息，并且
所述滤波处理单元基于在所述控制信息中包括的信息中的任何一个来进行针对所述解码图像数据的所述色度分量的所述第二解块滤波处理。
9.根据权利要求8所述的图像处理装置，
其中，所述滤波处理单元以下述顺序使用所述第三控制信息：所述片头的所述控制信息、所述图片参数集的所述控制信息、以及所述序列参数集的所述控制信息。
10.根据权利要求8所述的图像处理装置，
其中，所述滤波处理单元基于所述第二控制信息来参考和使用所述图片参数集的所述控制信息以及所述片头的所述控制信息。
11.一种图像处理方法，包括：
对图像数据的编码数据进行解码；以及
在用于控制语法元素是否存在的第一控制信息指示存在所述语法元素时，进行针对通过对所述编码数据进行解码获得的解码图像数据的亮度分量的第一解块滤波处理，以及基于用于控制是否进行针对所述解码图像数据的色度分量的第二解块滤波处理的第二控制信息和用于控制所述第二解块滤波处理的滤波强度的第三控制信息进行所述第二解块滤波处理，
其中，所述第三控制信息是用于控制针对所述第二解块滤波处理的参数β或参数tC的偏移的信息。
CN201580053276.9A 2014-10-06 2015-09-25 图像处理装置和方法 Expired - Fee Related CN107079149B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014205971 2014-10-06
JP2014-205971 2014-10-06
PCT/JP2015/077012 WO2016056398A1 (ja) 2014-10-06 2015-09-25 画像処理装置および方法

Publications (2)

Publication Number Publication Date
CN107079149A CN107079149A (zh) 2017-08-18
CN107079149B true CN107079149B (zh) 2020-03-03

Family

ID=55653016

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580053276.9A Expired - Fee Related CN107079149B (zh) 2014-10-06 2015-09-25 图像处理装置和方法

Country Status (5)

Country Link
US (1) US20170295369A1 (zh)
EP (1) EP3206400A4 (zh)
JP (2) JP6579393B2 (zh)
CN (1) CN107079149B (zh)
WO (1) WO2016056398A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016200242A1 (ko) 2015-06-11 2016-12-15 한양대학교 산학협력단 적응적인 디블록킹 필터링을 이용하는 영상 부호화 방법과 영상 복호화 방법 및 장치
JP7418152B2 (ja) * 2018-12-17 2024-01-19 キヤノン株式会社 画像符号化装置、画像符号化方法、画像復号装置、画像復号方法
US11909991B2 (en) * 2019-08-30 2024-02-20 Tencent America LLC Restrictions on picture width and height
CN114342382A (zh) * 2019-09-06 2022-04-12 索尼集团公司 图像处理装置和图像处理方法
WO2021073631A1 (en) 2019-10-18 2021-04-22 Beijing Bytedance Network Technology Co., Ltd. Interplay between subpictures and in-loop filtering
WO2021118266A1 (ko) * 2019-12-12 2021-06-17 엘지전자 주식회사 디블록킹 필터링을 사용하는 영상 디코딩 방법 및 장치
JP2023512694A (ja) * 2020-02-04 2023-03-28 ホアウェイ・テクノロジーズ・カンパニー・リミテッド 高レベルシンタックスのシグナリングについてのエンコーダ、デコーダ、および対応する方法
CN115349254A (zh) * 2020-03-23 2022-11-15 抖音视界有限公司 控制编解码视频中不同级别的去块滤波
JP2021158633A (ja) * 2020-03-30 2021-10-07 Kddi株式会社 画像復号装置、画像復号方法及びプログラム
JP2023520040A (ja) * 2020-04-02 2023-05-15 エルジー エレクトロニクス インコーポレイティド ビデオまたは映像コーディングシステムにおける白黒映像に関するクロマデブロッキングパラメータ情報に基づく映像コーディング方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101517909A (zh) * 2006-09-15 2009-08-26 飞思卡尔半导体公司 带有选择性色度去块滤波的视频信息处理系统
CN101751868A (zh) * 2008-12-19 2010-06-23 索尼株式会社 显示装置和控制显示装置的方法
CN102511165A (zh) * 2009-07-31 2012-06-20 索尼公司 图像处理装置及方法
CN102821276A (zh) * 2011-06-07 2012-12-12 索尼公司 图像编码设备和方法，图像解码设备和方法
CN104054339A (zh) * 2012-01-19 2014-09-17 高通股份有限公司 用信号通知视频译码中的解块滤波器参数
CN105532007A (zh) * 2013-07-12 2016-04-27 高通股份有限公司 在视频译码中用于非亮度分量的自适应解块滤波

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9363516B2 (en) * 2012-01-19 2016-06-07 Qualcomm Incorporated Deblocking chroma data for video coding
US9451258B2 (en) * 2012-04-03 2016-09-20 Qualcomm Incorporated Chroma slice-level QP offset and deblocking
US9591302B2 (en) * 2012-07-02 2017-03-07 Microsoft Technology Licensing, Llc Use of chroma quantization parameter offsets in deblocking

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101517909A (zh) * 2006-09-15 2009-08-26 飞思卡尔半导体公司 带有选择性色度去块滤波的视频信息处理系统
JP2010504036A (ja) * 2006-09-15 2010-02-04 フリースケール セミコンダクター インコーポレイテッド 選択的色差デブロック・フィルタリングを用いた映像情報処理システム
CN101751868A (zh) * 2008-12-19 2010-06-23 索尼株式会社 显示装置和控制显示装置的方法
CN102511165A (zh) * 2009-07-31 2012-06-20 索尼公司 图像处理装置及方法
CN102821276A (zh) * 2011-06-07 2012-12-12 索尼公司 图像编码设备和方法，图像解码设备和方法
CN104054339A (zh) * 2012-01-19 2014-09-17 高通股份有限公司 用信号通知视频译码中的解块滤波器参数
CN105532007A (zh) * 2013-07-12 2016-04-27 高通股份有限公司 在视频译码中用于非亮度分量的自适应解块滤波

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Deblocking filter using adaptive weighting factors;Matthias Narroschke;《Joint Collaborative Team on Video Coding (JCT-VC)》;20110722(第6期);摘要、第1-3节 *
Signaling of boundary filtering strength of deblocking filter for intra;Kazuo Sugimoto;《Joint Collaborative Team on Video Coding (JCT-VC)》;20110722(第6期);摘要、第1-3节、第7.3.3、7.4.3节 *
Use of Chroma QP offsets in Deblocking;Sandeep Kanumuri;《Joint Collaborative Team on Video Coding (JCT-VC)》;20121019(第11期);第1-4节 *

Also Published As

Publication number Publication date
JPWO2016056398A1 (ja) 2017-07-20
EP3206400A1 (en) 2017-08-16
JP2019198129A (ja) 2019-11-14
WO2016056398A1 (ja) 2016-04-14
EP3206400A4 (en) 2018-05-16
CN107079149A (zh) 2017-08-18
JP6579393B2 (ja) 2019-09-25
US20170295369A1 (en) 2017-10-12

Similar Documents

Publication Publication Date Title
CN107079149B (zh) 图像处理装置和方法
US10142634B2 (en) Image processing apparatus and method
US11627309B2 (en) Image encoding device and method, and image decoding device and method
US11546594B2 (en) Decoding device, decoding method, encoding device, and encoding method
US20230308646A1 (en) Image encoding device and method and image decoding device and method
JP6497562B2 (ja) 画像符号化装置および方法
US20190281291A1 (en) Image processing device and method
US20160286218A1 (en) Image encoding device and method, and image decoding device and method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200303

Termination date: 20200925