CN103891286A - 图像处理装置和方法 - Google Patents

Abstract

本发明涉及能够抑制解码图像的图像质量的降低的图像处理装置和方法。该图像处理装置包括：确定单元，当在产生作为处理对象的对象图像的预测图像时使用的预测器不同于对应于位于与对象图像相邻的相邻图像的预测器时，确定可以在对象图像中容易观测到块失真；控制单元，当确定单元确定可以容易观测到块失真时，增加对该对象图像的去块滤波处理的强度；以及滤波单元，根据控制单元的控制对该对象图像执行去块滤波处理。本公开内容可以应用于图像处理装置。

Description

图像处理装置和方法

技术领域

本公开内容涉及图像处理装置和方法，并且涉及减少解码图像的质量的劣化的图像处理装置和方法。

背景技术

近年来，为了将图像信息作为数字信息进行处理并且在进行这样处理时实现高效的信息传送和累积，与诸如MPEG(移动图片专家组)的标准兼容的设备已经在分发信息的广播站和接收信息的一般家用设备中变得普及，其中，MEPG用于利用图像信息固有的冗余性通过正交变换(例如，离散余弦变换)和运动补偿来压缩图像信息。

具体地讲，MPEG2(ISO(国际标准化组织)/IEC(国际电工委员会)13818-2)被定义为通用图像编码标准，可应用于隔行扫描图像和非各行扫描图像，并且可应用于标准分辨率图像和高清晰度图像。当前，MPEG2在用于专业人士和普通消费者的广泛的应用中被使用。例如，根据MPEG2压缩方法，4至8Mbps的比特率被分配给具有720×480像素的标准分辨率的隔行扫描图像，并且18至22Mbps的比特率被分配给具有1920×1088像素的高分辨率的隔行扫描图像。以此方式，可以实现高压缩率和优异的图像质量。

MPEG2主要被设计用于适合于广播的高质量图像编码，但是与比MPEG1低的比特率或涉及更高压缩率的编码方法不兼容。随着移动终端正变得流行，对于这种编码方法的需求将来有望增加，并且为了满足该需求，MPEG4编码方法被标准化。关于图像编码方法，ISO/IEC14496-2标准在1998年12月被批准为国际标准。

另外，当前正在设置被称为H.26L(ITU-T(国际电信联盟电信标准化部)Q6/16VCEG(视频编码专家组))的标准，该标准最初旨在用于对视频会议的图像进行编码。相比于诸如MPEG2和MPEG4的传统编码技术，H.26L在编码和解码时需要更大的计算量，但是已知的是，实现更高的编码效率。另外，作为MPEG4活动的一部分，“增强压缩视频编码的联合模型”已经被创建为用于通过将H.26L不支持的功能并入基于H.26L的功能来实现更高编码效率的标准。

在标准化时间表上，该标准在2003年3月以H.264和MPEG-4第10部分(高级视频编码，在下文中被称为AVC)的名称被批准为国际标准。

另外，作为H.264/AVC的扩展，FRExt(保真度范围扩展)于2005年2月被设置为标准，FRExt涉及用于专业使用的编码工具，例如RGB、4:2:2和4:4:4，以及在MPEG-2中规定的8×8DCT和量化矩阵。这是用于通过使用AVC使得能够良好地呈现甚至含有影片噪声的电影影片的编码方法，并且该编码方法现在用于广泛的应用，例如蓝光盘。

但是，对于以更高的压缩率进行编码的需求正在增加，以便压缩UHD(超高清；4000×2000像素，具有作为高清晰度图像分辨率的四倍的分辨率)图像，或者，在如因特网中的传输容量被限制的当今的情况下分发高清晰度图像。因此，ITU-T下的VCEG(视频编码专家组)仍继续进行对提高编码效率的研究。

为了实现比AVC更高的编码效率，被称为HEVC(高效视频编码)的编码方法正被JCTVC(联合协作团队-视频编码)开发为标准，JCTVC是ITU-T和ISO/IEC的联合标准组织(例如，参见非专利文献1)。

在AVC和HEVC中，存在作为帧间预测模式的被称为MV(运动向量)竞争的模式。在这种模式中，可以通过适应性选择空间预测器(Spatial Predictor)、时间预测器(Temporal Predictor)、或空间和时间预测器(Spatio-Temporal Predictor)来减小运动向量的比特率。

另外，在AVC和HEVC中，通过在图像编码和解码时使用去块滤波器从解码图像中消除块失真。

引用列表

非专利文献

非专利文献1：Benjamin Bross、Woo-Jin Han、Jens-RainerOhm、Gary J.Sullivan、Thomas Wiegand，“Working Draft4ofHigh-Efficiency Video Coding”，JCTVC-F803_d2，JointCollaborative Team on Video Coding(JCTVC)of ITU-T SG16WP3and ISO/IEC JTC1/SC29/WG11，第六次会议：意大利，托里诺，2011年7月14-22日

发明内容

本发明要解决的问题

在上述MV竞争中，容易在静止区域中选择时间预测器，并且容易在移动对象区域中选择空间预测器。因此，容易在为其选择了时间预测器的PU(预测单元)和为其选择了空间预测器的PU之间的边界上观测到块失真。

然而，在传统的去块处理中，没有考虑到这种特征，并且没有彻底消除块失真。结果，存在解码图像的质量将劣化的可能性。

本公开内容是鉴于这些情况做出的，并且旨在通过增加如下区域的去块滤波强度，更准确地减少块失真并且减少解码图像的质量的劣化，在该区域中，容易观测到块失真并且选择与相邻区域的预测器不同的预测器。

问题的解决方案

本公开内容的一个方面是一种图像处理装置，所述图像处理装置包括：确定单元，当在产生正被处理的当前图像的预测图像中使用的预测器不同于对应于位于与所述当前图像相邻的相邻图像的预测器时，确定容易观测到块失真；控制单元，当所述确定单元确定容易观测到块失真时，执行控制以使得在针对所述当前图像的去块滤波处理中设置更高强度；以及滤波单元，在所述控制单元的控制下对所述当前图像执行去块滤波处理。

当对应于所述当前图像的预测器是空间预测器而对应于所述相邻图像的预测器是时间预测器时，或者当对应于所述当前图像的预测器是时间预测器而对应于所述相邻图像的预测器是空间预测器时，所述确定单元可确定容易观测到块失真。

当双向预测应用于所述当前图像时，所述确定单元可通过使用与列表0预测器有关的预测器，确定在所述当前图像中是否容易观测到块失真。

当双向预测应用于所述当前图像时，所述确定单元可根据与参考图像的距离选择列表0预测器或列表1预测器，并且通过使用所选择的预测器确定是否容易观测到块失真。

所述控制单元可控制所述去块滤波处理的Bs值，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

所述控制单元可将Bs值增加“+1”，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

所述控制单元可将Bs值调整为4，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

所述控制单元可以控制所述去块滤波处理的阈值α和β，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

所述控制单元可以校正要在计算阈值α和β中使用的量化参数，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

本公开内容的一个方面还是一种在图像处理装置中实现的图像处理方法。所述图像处理方法包括：当在产生正被处理的当前图像的预测图像中使用的预测器不同于对应于位于与所述当前图像相邻的相邻图像的预测器时，确定容易观测到块失真，所述确定是由确定单元执行的；当所述确定单元确定容易观测到块失真时，执行控制以使得在针对所述当前图像的去块滤波处理中设置更高强度，所述控制是由控制单元执行的；以及在所述控制单元的控制下，对所述当前图像执行去块滤波处理，所述去块滤波处理是由滤波单元执行的。

在本公开内容的一个方面，当在产生正被处理的当前图像的预测图像中使用的预测器不同于对应于位于与所述当前图像相邻的相邻图像的预测器时，确定容易观测到当前图像具有块失真。当确定容易观测到块失真时，执行控制以增大针对当前图像的去块滤波处理的强度，并且在该控制下，对当前图像执行去块滤波处理。

本发明的效果

根据本公开内容，可以处理图像。具体地讲，可以减少解码图像的质量的劣化。

附图说明

图1是示出图像编码装置的典型示例结构的框图。

图2是用于说明去块滤波器的操作原理的图。

图3是用于说明定义Bs的方法的图。

图4是用于说明去块滤波器的操作原理的图。

图5是示出索引A和索引B、以及α和β的值之间的对应关系的示例的图。

图6是示出Bs、索引A和tC0之间的对应关系的示例的图。

图7是用于说明编码单元的示例结构的图。

图8是用于说明中值操作的示例情形的图。

图9是用于说明示例多参考帧的图。

图10是用于说明时间直接模式中的示例情形的图。

图11是用于说明根据运动向量编码方法的示例情形的图。

图12是用于说明运动分区合并(Motion Partition Merging)的示例的图。

图13是示出预测器之间的比较的图。

图14是示出运动向量编码单元、区域确定单元和去块滤波器的典型示例结构的框图。

图15是用于说明预测器选择方法的示例的图。

图16是用于说明编码处理的示例流程的流程图。

图17是用于说明帧间运动预测处理的示例流程的流程图。

图18是用于说明去块滤波处理的示例流程的流程图。

图19是示出图像解码装置的典型示例结构的框图。

图20是示出运动向量解码单元、区域确定单元和去块滤波器的典型示例结构的框图。

图21是用于说明解码处理的示例流程的流程图。

图22是用于说明预测处理的示例流程的流程图。

图23是用于说明帧间预测处理的示例流程的流程图。

图24是示出图像编码装置的典型示例结构的框图。

图25是示出运动向量编码单元、区域确定单元和去块滤波器的典型示例结构的框图。

图26是用于说明去块滤波处理的示例流程的流程图。

图27是示出图像解码装置的典型示例结构的框图。

图28是示出运动向量解码单元、区域确定单元和去块滤波器的典型示例结构的框图。

图29是示出计算机的典型示例结构的框图。

图30是示出电视设备的典型示例结构的框图。

图31是示出移动装置的典型示例结构的框图。

图32是示出记录/再现设备的典型示例结构的框图。

图33是示出成像设备的典型示例结构的框图。

具体实施方式

下面是对用于实施本公开内容的模式(在下文中，被称为实施例)的描述。将按以下顺序进行说明。

1.第一实施例(图像编码装置和图像解码装置)

2.第二实施例(图像编码装置和图像解码装置)

3.第三实施例(计算机)

4.第四实施例(电视接收器)

5.第五实施例(便携式电话装置)

6.第六实施例(记录/再现设备)

7.第七实施例(成像设备)

<1.第一实施例>

[图像编码装置]

图1是示出图像编码装置的典型示例结构的框图，该图像编码装置是应用本技术的图像处理装置。

图1中示出的图像编码装置100例如通过HEVC(高效视频编码)技术或H.264/MPEG(运动图片专家组)4第10部分(AVC(高级视频编码))技术，对移动图像的图像数据进行编码。

如图1中所示，图像编码装置100包括A/D转换器101、画面重排列缓冲器102、算术运算单元103、正交变换单元104、量化单元105、无损编码单元106和累积缓冲器107。图像编码装置100还包括逆量化单元108、逆正交变换单元109、算术运算单元110、去块滤波器111、帧存储器112、选择单元113、帧内预测单元114、运动预测/补偿单元115、预测图像选择单元116和速率控制单元117。图像编码装置100还包括运动向量编码单元121、区域确定单元122和边界控制单元123。

A/D转换器101使输入图像数据经历A/D转换，并且将转换后的图像数据(数字数据)供应并存储到画面重排列缓冲器102中。画面重排列缓冲器102根据GOP(图片组)结构重排列具有以显示顺序存储的帧的图像，使得帧以用于编码的帧次序进行排列。将帧被重排的图像供应到算术运算单元103。画面重排列缓冲器102针对在编码处理中用作处理单元(编码单元)的每个预定部分区域将每个帧图像供应到算术运算单元103。

画面重排列缓冲器102还针对每个部分区域将具有重排列的帧次序的图像供应到帧内预测单元114和运动预测/补偿单元115。

算术运算单元103从自画面重排列缓冲器102读取的图像中提取经由预测图像选择单元116从帧内预测单元114或运动预测/补偿单元115供应的预测图像，并且将差信息输出到正交变换单元104。当对图像执行帧内编码时，例如，算术运算单元103从自画面重排列缓冲器102读取的图像中提取从帧内预测单元114供应的预测图像。当对图像执行帧间编码时，例如，算术运算单元103从自画面重排列缓冲器102读取的图像中提取从运动预测/补偿单元115供应的预测图像。

正交变换单元104对从算术运算单元103供应的差信息执行正交变换(例如，离散余弦变换或Karhunen-Loeve变换)。通过任何合适的方法执行该正交变换。正交变换单元104将通过正交变换获得的变换系数供应到量化单元105。

量化单元105量化从正交变换单元104供应的变换系数。量化单元105将量化后的变换系数供应到无损编码单元106。

无损编码单元106通过合适的编码方法编码由量化单元量化的变换系数，并且产生编码数据(比特流)。由于已经在速率控制单元117的控制下量化了系数数据，因此该编码数据的比特率变成等于由速率控制单元117设置的目标值(或接近目标值)。

无损编码单元106从帧内预测单元114获取指示帧内预测模式的帧内预测信息等，并且从运动预测/补偿单元115获取指示帧间预测模式的帧间预测信息、运动向量信息等。

无损编码单元106通过合适的编码方法编码这些各种类型的信息，并且将信息合并到编码数据(比特流)中(或者将信息与编码数据多路复用)。例如，无损编码单元106对上述与量化有关的参数(例如，不同的第一量化参数和第二量化参数)逐一地进行二进制化并且编码，并且将与量化有关的参数存储在图像数据的编码数据的头信息等中。

无损编码单元106将按以上方式产生的编码数据供应并存储到累积缓冲器107中。由无损编码单元106使用的编码方法可以是例如可变长度编码或算术编码。可变长度编码可以例如是H.264/AVC中指定的CAVLC(上下文自适应可变长度编码)。算术编码可以例如是CABAC(上下文自适应二进制算术编码)。

无损编码单元106还将与语法元素有关的信息(例如，帧内/帧间模式信息和运动向量信息)供应到去块滤波器111。

累积缓冲器107暂时保持从无损编码单元106供应的编码数据。累积缓冲器107例如在预定时间在随后阶段将保持在累积缓冲器107中的编码数据作为比特流输出到记录装置(记录介质)或传送路径等(未示出)。即，各种类型的编码信息被供应到对通过图像编码装置100的数据编码而产生的编码数据进行解码的装置(在下文中，该装置还将被称为解码侧的装置)。

由量化单元105量化的变换系数还被供应到逆量化单元108。逆量化单元108通过与由量化单元105执行的量化对应的方法对量化后的变换系数进行逆量化。逆量化单元108将获得的变换系数供应到逆正交变换单元109。

逆正交变换单元109通过与由正交变换单元104执行的正交变换对应的方法对从逆量化单元108供应的变换系数执行逆正交变换。经过逆正交变换的输出(本地恢复的差信息)被供应到算术运算单元110。

算术运算单元110通过将从逆正交变换单元109供应的逆正交变换结果或本地恢复的差信息与经由预测图像选择单元116从帧内预测单元114或运动预测/补偿单元115供应的预测图像相加，获得本地重构图像(在下文中，被称为重构图像)。重构图像被供应到去块滤波器111或帧存储器112。

去块滤波器111适当地对从算术运算单元110供应的重构图像执行去块滤波处理，以从重构图像中消除块失真。另外，为了提高图像质量，可以对去块滤波处理的结果(已经消除了块失真的重构图像)执行使用维纳滤波器(Wiener filter)的环路滤波处理。去块滤波器111还可以对重构图像执行其它合适的滤波处理。去块滤波器111将滤波处理的结果(在下文中，被称为解码图像)供应到帧存储器112。

帧存储器112存储从算术运算单元110供应的重构图像和从去块滤波器111供应的解码图像二者。在预定时间或者根据来自外部(例如，来自帧内预测单元114)的请求，帧存储器112经由选择单元113将存储的重构图像供应到帧内预测单元114。在预定时间或者根据来自外部(例如，来自运动预测/补偿单元115)的请求，帧存储器112还经由选择单元113将存储的解码图像供应到运动预测/补偿单元115。

选择单元113指示从帧存储器112输出的图像将被供应到的目的地。在帧内预测的情况下，例如，选择单元113从帧存储器112读取没有经过滤波处理的图像(重构图像)，并且将图像作为相邻像素供应到帧内预测单元114。

在帧间预测的情况下，例如，选择单元113从帧存储器112读取经过滤波处理的图像(解码图像)，并且将图像作为参考图像供应到运动预测/补偿单元115。

通过从帧存储器112获取位于与当前区域相邻的相邻区域的图像(相邻图像)，帧内预测单元114在处理单元基本上是预测单元(PU)的情况下通过使用相邻图像的像素值执行帧内预测(画面内预测)，以产生预测图像。帧内预测单元114在预先准备的一种以上的模式(帧内预测模式)中执行帧内预测。

帧内预测单元114在所有候选帧内预测模式中产生预测图像，通过使用从画面重排列缓冲器102供应的输入图像评估各个预测图像的成本函数值，并且选择最佳模式。在选择了最佳帧内预测模式之后，帧内预测单元114将在最佳帧内预测模式中产生的预测图像供应到预测图像选择单元116。

帧内预测单元114还将包括与帧内预测有关的信息(例如，最佳帧内预测模式)的帧内预测信息供应到无损编码单元106，无损编码单元106随后对帧内预测信息进行编码。

通过使用从画面重排列缓冲器102供应的输入图像和从帧存储器112供应的参考图像，运动预测/补偿单元115执行运动预测(帧间预测)，并且根据检测到的运动向量执行运动补偿处理，以产生预测图像(帧间预测图像信息)。在运动预测中，PU(帧间PU)基本上用作处理单元。运动预测/补偿单元115在预先准备的一种以上的模式(帧间预测模式)中执行这种帧间预测。

具体地讲，运动预测/补偿单元115在所有候选帧间预测模式中产生预测图像，评估各个预测图像的成本函数值，并且选择最佳模式。此时，运动预测/补偿单元115使得运动向量编码单元121适当地确定最佳的运动向量预测器。运动预测/补偿单元115将使用最佳预测器的模式视为选项。

在选择了最佳帧间预测模式之后，运动预测/补偿单元115还将在最佳帧间预测模式中产生的预测图像供应到预测图像选择单元116。运动预测/补偿单元115还将包括与帧间预测有关的信息(例如，最佳帧间预测模式)的帧间预测信息供应到无损编码单元106，无损编码单元106随后对帧间预测信息进行编码。

预测图像选择单元116选择要被供应到算术运算单元103和算术运算单元110的预测图像的供应方。在帧内编码的情况下，例如，预测图像选择单元116选择帧内预测单元114作为预测图像的供应方，并且将从帧内预测单元114供应的预测图像供应到算术运算单元103和算术运算单元110。在帧间编码的情况下，例如，预测图像选择单元116选择运动预测/补偿单元115作为预测图像的供应方，并且将从运动预测/补偿单元115供应的预测图像供应到算术运算单元103和算术运算单元110。

基于累积缓冲器107中累积的编码数据的比特率，速率控制单元117控制量化单元105的量化运算速率，以便不造成上溢或下溢。

通过从运动预测/补偿单元115获取运动预测结果(运动向量信息)，运动向量编码单元121通过MV竞争、合并模式(MergeMode)等选择对于产生运动向量的预测值而言最佳的预测器(最佳预测器)。然后，运动向量编码单元121将关于最佳预测器等的信息供应到运动预测/补偿单元115和区域确定单元122。

区域确定单元122确定由运动向量编码单元121选择的当前区域的最佳预测器是否不同于相邻区域的最佳预测器，并且将确定的结果供应到边界控制单元123。

边界控制单元123根据由区域确定单元122执行的确定的结果，控制去块滤波器111的设置。在边界控制单元123的控制下，去块滤波器111调整其滤波长度，并且执行去块滤波处理。

[去块滤波器]

在AVC和HEVC中，将去块滤波器包括在环路中，如在图像编码装置100中一样。利用该布置，可以从解码图像中有效地消除块失真，并且运动补偿可以有效地防止块失真传播到参照解码图像的图像。

以下，描述根据AVC编码方法的每个去块滤波器中的操作原理。

作为AVC的去块滤波器的操作，可以根据压缩图像信息中包含的两个参数(图片参数集合中的deblocking_filter_control_present_flag和片段头部(slice header)中的disable_deblocking_filter_idc)指定下面的三个操作。

(a)将在块边界或宏块边界上执行

(b)将只在宏块边界上执行

(c)不执行

关于量化参数QP，当对亮度信号执行下面的处理时，使用QPY，并且当对色度信号执行下面的处理时，使用QPC。在运动向量编码、帧内预测和熵编码(CAVLC/CABAC)中，属于不同片段的像素值被处理为“不可用”。然而，在去块滤波处理中，属于不同片段但属于同一图片的像素值被处理为“可用”。

以下，用p₀至p₃和q₀至q₃表示要进行去块滤波处理的像素值，并且用p'₀至p'₃和q'₀至q'₃表示处理后的像素值，如图2中所示。

如图3中所示，在去块滤波处理之前，对图2中示出的ps和qs定义Bs(边界强度)。

只有当满足下面两个条件(表达式(1)和(2))时，才对图3中的(p₂、p₁、p₀、q₀、q₁和q₂)执行去块滤波处理。

Bs>0…(1)

|p0-q0|<α；|p1-p0|<β；|q1-q0|<β…(2)

尽管表达式(2)中的α和β的默认值是根据如下所示的QP定义的，但是可以由用户根据压缩图像信息(或编码数据)中的片段头部中包含的两个参数“slice_alpha_c0_offset_div2”和“slice_beta_offset_div2”来调整默认值，如图4中所示。

在图5中，定义“索引A”和“索引B”，如下面的表达式(3)至(5)中示出的。

[数学公式1]

qP_av＝(qP_p+qP_q+1)>>1...(3)

[数学公式2]

IndexA＝Clip3(0,51,qPav+FilterOffsetA)...(4)

[数学公式3]

IndexB＝Clip3(0,51,qPav+FilterOffsetB)...(5)

在以上的表达式(3)至(5)中，“FilterOffsetA”和“FilterOffsetB”等同于要由用户进行调整的部分。

如下所述，在(1)Bs<4和(2)Bs＝4的情况下，定义用于去块滤波处理的不同方法。

在Bs<4的情况下，根据下面的表达式(6)至(8)计算经过去块滤波处理的像素值p'₀和q'₀。

[数学公式4]

Δ＝Clip3(-tc,tc((((q₀–p₀)<<2)+(p₁–q₁)+4)>>3))...(6)

[数学公式5]

P'₀＝Clip1(p₀+Δ)...(7)

[数学公式6]

q'₀＝Clip1(q₀+Δ)...(8)

这里，如下所述地计算t_c。具体地讲，在chromaEdgeFlag(色度边缘标志)的值为0的情况下，根据下面示出的表达式(9)计算t_c。在其它情况下，根据下面示出的表达式(10)计算t_c。

[数学公式7]

t_c＝t_c0+((a_p<β)？1:0)+((a_q<β)？1:0)...(9)

[数学公式8]

t_c＝t_c0+1...(10)

根据Bs和“IndexA”的值定义t_c0的值，如图7中的表中所示。同时，根据下面的表达式(11)和(12)计算a_p和a_q的值。

[数学公式9]

a_p＝|p₂–p₀|...(11)

[数学公式10]

a_q＝|q₂–q₀|...(12)

如下所述地计算经过去块滤波处理的像素值p'₁。即，当chromaEdgeFlag为0并且a_p的值等于或小于β时，根据下面示出的表达式(13)计算p'₁。当不满足这个条件时，根据下面示出的表达式(14)计算p'₁。

[数学公式11]

p'₁＝p₁+Clip3(-t_C0,t_c0,(p₂+((p₀+q₀+1)>>1)–(p₁<<1))>>1)...(13)

[数学公式12]

p'₁＝p₁...(14)

如下所述地计算经过去块滤波处理的像素值q'₁。即，当chromaEdgeFlag为0并且a_p的值等于或小于β时，根据下面示出的表达式(15)计算q'₁。当不满足这个条件时，根据下面示出的表达式(16)计算q'₁。

[数学公式13]

q'₁＝q₁+Clip3(-t_C0,t_c0,(q₂+((p₀+q₀+1)>>1)–(q₁<<1))>>1)...(15)

[数学公式14]

q'₁＝q₁...(16)

p'₂和q'₂的值与尚未滤波的p₂和q₂的值相同。即，根据下面的表达式(17)和(18)计算p'₂和q'₂。

[数学公式15]

p'₂＝p₂...(17)

[数学公式16]

q'₂＝q₂...(18)

在Bs＝4的情况下，如下所述地计算经过去块滤波处理的像素值p'_i(i＝0、…、2)。即，当chromaEdgeFlag的值为0并且满足下面示出的条件(表达式(19))时，根据下面示出的表达式(20)至(22)计算p'₀、p'₁和p'₂。当不满足以上提到的条件时，根据下面示出的表达式(23)至(25)计算p'₀、p'₁和p'₂。

[数学公式17]

a_p<β&&|p0–q0|<((α>>2)+2)...(19)

[数学公式18]

p'₀＝(p₂+2·p₁+2·p₀+2·q₀+q₁+4)>>3...(20)

[数学公式19]

p'₁＝(p₂+p₁+p₀+q₀+2)>>2...(21)

[数学公式20]

p'₂＝(2·p₃+3·p₂+p₁+p₀+q₀+4)>>3...(22)

[数学公式21]

p'₀＝(2·p₁+p₀+q₁+2)>>2...(23)

[数学公式22]

p'₁＝p₁...(24)

[数学公式23]

p'₂＝p₂...(25)

如下所述地计算经过去块滤波处理的像素值q'_i(i＝0、…、2)。即，当chromaEdgeFlag的值为0并且满足下面示出的条件(表达式(26))时，根据下面示出的表达式(27)至(29)计算q'₀、q'₁和q'₂。当不满足以上提到的条件时，根据下面示出的表达式(30)至(32)计算q'₀、q'₁和q'₂。

[数学公式24]

a_q<β&&|p0–q0|<((α>>2)+2)...(26)

[数学公式25]

q'₀＝(p₁+2·p₀+2·q₀+2·q₁+q₂+4)>>3...(27)

[数学公式26]

q'₁＝(p₀+q₀+q₁+q₂+2)>>2...(28)

[数学公式27]

q'₂＝(2·q₃+3·q₂+q₁+q₀+p₄+4)>>3...(29)

[数学公式28]

q'₀＝(2·q₁+q₀+p₁+2)>>2...(30)

[数学公式29]

q'₁＝q₁...(31)

[数学公式30]

q'₂＝q₂...(32)

[编码单元]

现在，描述通过HEVC编码技术指定的编码单元(CU)。

编码单元(CU)也被称为编码树块(CTB)，并且是具有与AVC中的宏块的作用相同的作用的基于图片的图像的多层结构的部分区域。即，CU是用于编码处理的单元(编码单元)。虽然宏块的大小限于16×16像素，但是CU的大小不限于特定大小，并且可以由每个序列中的压缩图像信息来指定。

特别地，具有最大大小的CU被称为最大编码单元(LCU)，并且具有最小大小的CU被称为最小编码单元(SCU)。即，LCU是最大编码单元，并且SCU是最小编码单元。在压缩图像信息中包括的序列参数集合中，例如，指定这些区域的大小，但是这些区域限于用2的幂表示的平方。即，通过将某个分级等级的(平方)CU除以2×2＝4而形成的各个区域是一个分级等级更低的(平方)CU。

图7示出HEVC中定义的编码单元的示例。在图2中示出的示例中，每个LCU的大小是128(2N(N＝64))，并且最大的分级深度是5(深度＝4)。当split_flag的值是“1”时，大小为2N×2N的CU被分割成处于一个更低分级等级的大小为N×N的CU。

各个CU被进一步分割成作为用于帧内或帧间预测的处理单元区域(基于图片的图像的部分区域)的预测单元(PU)，或者被分割成作为用于正交变换的处理单元区域(基于图片的图像的部分区域)的变换单元(TU)。

关于帧间预测单元(PU)，可以在大小为2N×2N的CU中设置四种大小2N×2N、2N×N、N×2N和N×N。具体地讲，在CU中可以定义与CU的大小相同的PU、通过将CU垂直或水平分割成两个而形成的两个PU、或者通过将CU垂直且水平分割成两个而形成的四个PU。

图像编码装置100执行与编码有关的处理，其中，基于图片的图像中的这种部分区域是处理单元。以下，描述了图像编码装置100使用HEVC中定义的CU作为编码单元的情况。即，LCU是最大编码单元，并且SCU是最小编码单元。然而，要由图像编码装置100执行的各个编码处理中的处理单元不限于此，并且可以任意地设置。例如，AVC中定义的宏块和子宏块可以用作处理单元。

在下面的描述中，“(部分)区域”包括上述区域(例如，宏块、子宏块、LCU、CU、SCU、PU和TU)中的全部(或一些)。(部分)区域当然可以包括除了上述单元之外的单元，并且将根据上下文排除不合适的单元。

[运动向量中值预测]

然而，在AVC或HEVC中，可能的是，如果如在MPEG2的情况下一样执行运动预测/补偿处理，则将产生大量的运动向量信息。在不进行任何改变的情况下对产生的运动向量信息进行编码可能导致编码效率的降低。

为了解决这个问题，在AVC图像编码中使用下述方法，并且实现了编码的运动向量信息的量的减少。

图8中示出的每条直线指示运动补偿块之间的边界。在图8中，E代表要编码的当前运动补偿块，并且A至D各自代表已经被编码并且与E相邻的运动补偿块。

在X是A、B、C、D或E的情况下，mv_x代表关于块X的运动向量信息。

通过使用关于运动补偿块A、B和C的运动向量信息，通过如下面等式(33)中所示的中值运算来产生关于运动补偿块E的预测运动向量信息pmv_E。

[数学公式31]

pmv_E＝med(mv_A,mv_B,mv_C)...(33)

如果因为运动补偿块C位于图像帧的拐角等，所以关于运动补偿块C的信息是“可用”的，则替代地使用关于运动补偿块D的信息。

在压缩图像信息中，通过如下面的等式(34)中所示地使用pmv_E，产生要被编码为关于运动补偿块E的运动向量信息的数据mvd_E。

[数学公式32]

mvd_E＝mv_E-pmv_E...(34)

在实际处理中，对运动向量信息的水平分量和垂直分量独立于彼此地执行处理。

[多参考帧]

在AVC中，指定未被传统图像编码技术(例如，MPEG2和H.263)指定的多参考帧方法。

现在，参照图9，描述AVC中指定的多参考帧。

在MPEG-2和H.263中，在P图片的情况下通过参考存储在帧存储器中的仅仅一个参考帧，执行运动预测/补偿处理。然而，在AVC中，一个以上的参考帧被存储在存储器中，并且可以针对每个宏块参考不同的存储器，如图9中所示。

[直接模式]

尽管B图片中的运动向量信息的量非常大，但是在AVC中存在被称为直接模式的预定模式。

在直接模式中，运动向量信息没有被存储在压缩图像信息中。在图像解码装置中，根据关于相邻块的运动向量信息或关于共同定位块(co-located block)的运动向量信息来计算关于当前块的运动向量信息，其中，共同定位块是参考帧中位于与当前块相同位置的块。

直接模式包括两种模式：空间直接模式和时间直接模式。可以针对各个片段选择两种模式之一。

在空间直接模式中，如下面等式(35)中所示地计算关于当前运动补偿块E的运动向量信息mv_E。

mv_E＝pmv_E...(35)

即，对当前块应用通过中值预测产生的运动向量信息。

现在，参照图10，描述时间直接模式。

在图10中，在L0参考图片中位于与当前块相同的空间中的地址的块被称为共同定位块，并且用mv_col表示关于共同定位块的运动向量信息。另外，TD_B表示当前图片和L0参考图片之间的时间轴上的距离，并且TD_D表示L0参考图片和L1参考图片之间的时间轴上的距离。

此时，如下面的等式(36)和(37)中所示地计算当前图片中的关于L0的运动向量信息mv_L0和关于L1的运动向量信息mv_L1。

[数学公式33]

${\mathrm{mv}}_{L0}=\frac{{\mathrm{TD}}_B}{{\mathrm{TD}}_D}{\mathrm{mv}}_{\mathrm{col}}...\left(36\right)$

[数学公式34]

${\mathrm{mv}}_{L1}=\frac{{\mathrm{TD}}_D-{\mathrm{TD}}_B}{{\mathrm{TD}}_D}{\mathrm{mv}}_{\mathrm{col}}...\left(37\right)$

在AVC压缩图像信息中，不存在指示时间轴上的距离的信息TD，因此，通过使用POC(图片顺序计数)执行根据以上提到的等式(36)和(37)的计算。

在AVC压缩图像信息中，可以基于16×16像素宏块或者基于8×8像素块定义直接模式。

[运动向量之间的竞争]

提出了一种使用以上参照图8描述的中值预测来改善运动向量编码的方法(例如，Joel Jung和Guillaume Laroche，“Competition-Based Scheme for Motion Vector Selection and Coding”，VCEG-AC06，ITU-Telecommunications Standardization Sector STUDYGROUP16Question6Video Coding Experts Group(VCEG)，第29次会议：奥地利，卡拉根福，2006年7月17-18日)。

即，除了通过中值预测确定的“空间预测器”之外，下述的“时间预测器”和“空间时间预测器”之一也可以适应性地用作预测运动向量信息。

具体地讲，在图11中，“mv_col”表示关于当前块的共同定位块(参考图像中的与当前块具有相同x-y坐标的块)的运动向量信息，并且“mv_tk”(k是0至8之一)表示关于相邻块的运动向量信息。如下面的等式(38)至(40)中所示地定义关于每个块的预测运动向量信息(预测器)。

时间预测器：

[数学公式35]

mv_tm5＝median{mv_col,mo_t0,...,mv_t3}...(38)

[数学公式36]

mv_tm9＝median{mv_col,mo_t0,...,mv_t8}...(39)

空间时间预测器：

[数学公式37]

mv_spt＝median{mv_col,mv_col,mv_a,mv_b,mv_c}...(40)

在图像编码装置100中，通过使用关于各个块的预测运动向量信息计算各个块的成本函数值，并且选择最佳的预测运动向量信息。通过压缩图像信息，针对每个块发送指示关于已经使用了哪个预测运动向量信息的信息的标志。

[运动分区合并]

同时，作为运动信息编码方法，提出了如图12中所示的被称为运动分区合并(合并模式)的方法。根据该方法，两个标志(合并标志和合并左标志)被作为合并信息发送，合并信息是与合并模式有关的信息。当合并标志是1时，关于当前区域X的运动信息与关于位于与当前区域的顶部边缘相邻的相邻区域T的运动信息、或与关于位于与当前区域的左侧边缘相邻的相邻区域L的运动信息相同。此时，合并左标志被包括在合并信息中，并且被发送。当合并标志是0时，关于当前区域X的运动信息既不同于关于相邻区域T的运动信息也不同于关于相邻区域L的运动信息。在这种情况下，发送关于当前区域X的运动信息。

当关于当前区域X的运动信息与关于相邻区域L的运动信息相同时，合并标志是1，并且合并左标志是1。当关于当前区域X的运动信息与关于相邻区域T的运动信息相同时，合并标志是1，并且合并左标志是0。

[块失真]

在上述MV竞争和合并模式中，容易在静止区域中选择时间预测器，并且容易在移动对象区域中选择空间预测器，如图13中所示。因此，容易在为其选择了时间预测器的PU(预测单元)和为其选择了空间预测器的PU之间的边界上观测到块失真。

然而，在AVC或HEVC的去块处理中，没有考虑到这种特征，并且可能的是，通过去块处理没有从解码图像中彻底消除块失真。结果，解码图像的质量可能变得更低。

另一方面，图1中示出的图像编码装置100将正被处理的当前区域的预测器与相邻区域的预测器进行比较，以检测块失真容易出现的区域。对于这种区域，增大去块滤波强度。更具体地讲，图像编码装置100对当前区域以更高强度执行去块滤波，当前区域具有与相邻区域的最佳预测器不同的不同最佳预测器。通过这样，图像编码装置100可以更准确地减少块失真，并减少解码图像的质量的劣化。

以下，将更详细地描述这个方面。

[运动向量编码单元、区域确定单元、边界控制单元和去块滤波器]

图14是示出运动向量编码单元121、区域确定单元122和去块滤波器111的典型示例结构的框图。

如图14中所示，运动向量编码单元121包括空间相邻运动向量缓冲器151、时间相邻运动向量缓冲器152、候选预测运动向量产生单元153、成本函数计算单元154和最佳预测器确定单元155。

区域确定单元122包括相邻预测器缓冲器161和区域区分单元162。

另外，去块滤波器111包括Bs确定单元171、α/β确定单元172、滤波器确定单元173和滤波单元174。

运动向量编码单元121的空间相邻运动向量缓冲器151获取并且存储从运动预测/补偿单元115供应的运动向量信息。响应于来自候选预测运动向量产生单元153的请求，空间相邻运动向量缓冲器151将存储的运动向量信息作为空间相邻运动向量信息供应到候选预测运动向量产生单元153。即，在与对应于运动向量信息的PU相同的帧(当前帧)中的另一个PU的处理中，空间相邻运动向量缓冲器151将存储的运动向量信息供应到候选预测运动向量产生单元153。

时间相邻运动向量缓冲器152获取并且存储从运动预测/补偿单元115供应的运动向量信息。响应于来自候选预测运动向量产生单元153的请求，时间相邻运动向量缓冲器152将存储的运动向量信息作为时间相邻运动向量信息供应到候选预测运动向量产生单元153。即，在对应于运动向量信息的PU的帧之后处理的参考帧中的PU的处理中，时间相邻运动向量缓冲器152将存储的运动向量信息供应到候选预测运动向量产生单元153。

使用关于在空间或时间上与正被处理的当前PU相邻的PU(相邻PU)的运动向量信息，候选预测运动向量产生单元153产生预测运动向量的候选(候选预测运动向量信息)，并且将候选预测运动向量信息供应到成本函数计算单元154。

具体地讲，候选预测运动向量产生单元153产生关于空间预测器的候选预测运动向量信息和关于时间预测器(包括空间时间预测器)的候选预测运动向量信息。例如，候选预测运动向量产生单元153从空间相邻运动向量缓冲器151获取当前帧的相邻PU的运动向量(空间相邻运动向量信息)，并且通过中值预测或合并处理产生候选预测运动向量信息。另外，例如，候选预测运动向量产生单元153从时间相邻运动向量缓冲器152获取关于参考帧的相邻PU的运动向量信息(时间相邻运动向量信息)，并且通过中值预测或合并处理产生候选预测运动向量信息。

成本函数计算单元154从运动预测/补偿单元115获取关于当前PU的运动向量信息，确定关于当前PU的运动向量信息和每条候选预测运动向量信息之间的差值(差运动向量信息)，并且计算差运动向量信息的成本函数值。成本函数计算单元154将计算出的成本函数值和差运动向量信息供应到最佳预测器确定单元155。

最佳预测器确定单元155确定在候选之中具有最小成本函数值的预测器作为最佳预测器。最佳预测器确定单元155将指示确定的最佳预测器(在下文中，也简称为最佳预测器)的信息和通过使用关于最佳预测器的预测运动向量信息产生的差运动向量信息供应到运动预测/补偿单元115。运动预测/补偿单元115确定包括最佳预测器的模式的候选之中的最佳帧间预测模式。

最佳预测器确定单元155还将最佳预测器供应到区域确定单元122(相邻预测器缓冲器161和区域区分单元162)。

区域确定单元122的相邻预测器缓冲器161获取并且存储从最佳预测器确定单元155供应的最佳预测器。根据来自区域区分单元162的请求，相邻预测器缓冲器161将存储的最佳预测器作为指示相邻PU的预测器(在下文中，也被称为相邻预测器)的信息供应到区域区分单元162。

通过从最佳预测器确定单元155获取正被处理的当前PU的最佳预测器，区域区分单元162从相邻预测器缓冲器161获取对应于当前PU的相邻预测器。即，区域区分单元162获取指示与当前帧PU处于同一帧中的相邻PU的最佳指示器的信息。

区域区分单元162将与块失真有关的特征与要进行去块滤波处理的当前PU的其它特征区分开。更具体地讲，区域区分单元162确定相邻预测器是否与当前PU的最佳预测器相同。如上所述，在运动向量编码单元121中执行合并模式中的处理或MV竞争。因此，空间预测器或时间预测器(或空间时间预测器)应用于每个PU。当空间预测器既应用于当前PU又应用于相邻PU时，或者当时间预测器(或空间时间预测器)既应用于当前PU又应用于相邻PU时，区域区分单元162确定相邻预测器与当前PU的最佳预测器相同。

当将双向预测应用于当前PU时，区域区分单元162使用与列表0预测器有关的预测器执行确定。尽管当然可以使用与列表1预测器有关的预测器，但是列表0通常首先出现在比特流中，并且在一些情况下不存在列表1。因此，优选地使用列表0预测器的预测器。

区域区分单元162可以根据GOP(图片组)结构适应性地选择列表0预测器或列表1预测器。例如，区域区分单元162可以使用与正被处理的当前帧最接近的参考帧来选择预测器。在图15中示出的每个示例GOP结构中，选择使用P图片作为参考帧的预测器，所述P图片最接近于作为当前图片的B图片。

区域区分单元162将确定结果作为区域信息供应到边界控制单元123。

通过从区域区分单元162获取包括指示与当前PU中的块失真有关的特征的信息的区域信息，边界控制单元123根据所述特征控制去块滤波器111的滤波强度。更具体地讲，边界控制单元123执行控制，以对于容易观测到块失真的区域、或者PU设置更高去块滤波强度，其中，该PU已经被区域区分单元162确定为具有与施加到相邻PU的预测器不同的预测器。

边界控制单元123通过校正去块滤波器的Bs值来调整去块滤波强度。虽然可以通过任何合适方法调整Bs值，但是可以将Bs值调整成为“Bs+1”，例如，与传统方法形成对照。另外，可以使得Bs值为“Bs+4”，而不管根据传统方法的值如何。

关于被确定为与相邻PU具有相同预测器的PU，边界控制单元123没有校正Bs值(或保持通过传统方法确定的值)。

边界控制单元123通过将指示用于校正Bs值的指令的控制信息供应到去块滤波器111的Bs确定单元171，实现去块滤波强度的调整。

去块滤波器111的Bs确定单元171基于从无损编码单元106供应的各种类型的语法元素(例如，帧内/帧间模式信息和运动向量信息)来确定Bs值。

Bs确定单元171还根据从边界控制单元123供应的控制信息，适当地校正Bs值。具体地讲，Bs确定单元171对于已经被区域区分单元162确定为具有与施加到相邻PU的预测器不同的预测器的PU设置更高去块滤波强度。尽管可以使用任何合适的具体方法，但是例如Bs值可以被调整为“Bs+1”，或者可以被设置为“Bs＝4”。

Bs确定单元171将以此方式校正的Bs值作为滤波器参数供应到滤波器确定单元173。

α/β确定单元172通过使用从量化单元105供应的当前PU的量化参数(当前区域量化参数)确定α和β的值。α/β确定单元172将确定的α和β作为滤波器参数供应到滤波器确定单元173。

通过使用从Bs确定单元171和α/β确定单元172供应的滤波器参数，滤波器确定单元173确定要对从算术运算单元110供应的重构图像(未经滤波的像素值)执行哪种滤波处理。滤波器确定单元173将控制信息(滤波器控制信息)以及未经滤波的像素值供应到滤波单元174。

滤波单元174根据滤波器控制信息对从滤波器确定单元173供应的未经滤波的像素值执行去块滤波处理。滤波单元174将作为结果的滤波后的像素值供应并且存储到帧存储器112中。

如上所述，区域确定单元122将当前PU的预测器与相邻PU的预测器进行比较，以检测容易观测到块失真的PU。然后，边界控制单元123执行控制，以便为容易观测到块失真的PU设置更高去块滤波强度。在边界控制单元123的控制下，Bs确定单元171校正Bs值。结果，滤波单元174可以针对容易观测到块失真的PU以增大的强度执行去块滤波处理。即，去块滤波器111可以更准确地减少块失真。因此，图像编码装置100可以减少解码图像的质量的劣化。

[编码处理的流程]

接下来，描述要由上述图像编码装置100执行的每个处理的流程。首先参照图16中示出的流程图，描述编码处理的示例流程。

在步骤S101中，A/D转换器101对输入图像执行A/D转换。在步骤S102中，画面重排列缓冲器102存储经过A/D转换的图像，并且以编码次序(替代显示次序)重排列各个图片。

在步骤S103中，帧内预测单元114在帧内预测模式中执行帧内预测处理。在步骤S104中，运动预测/补偿单元115和运动向量编码单元121执行帧间运动预测处理，以在帧间预测模式中执行运动预测和运动补偿。

在步骤S105中，预测图像选择单元116基于从帧内预测单元114和运动预测/补偿单元115输出的各个成本函数值，确定最佳预测模式。即，预测图像选择单元116选择由帧内预测单元114产生的预测图像或由运动预测/补偿单元115产生的预测图像。

在步骤S106中，算术运算单元103计算通过步骤S102中的处理而重排列的图像和通过步骤S105中的处理而选择的预测图像之间的差。差数据的数据量小于原始图像数据的数据量。因此，与图像被直接编码的情况相比，可以使数据量更小。

在步骤S107中，正交变换单元104对通过步骤S106中的处理产生的差信息执行正交变换。具体地讲，执行正交变换(例如，离散余弦变换或Karhunen-Loeve变换)，并且输出变换系数。在步骤S108中，量化单元105量化通过步骤S107中的处理获得的正交变换系数。

按以下方式对通过步骤S108中的处理而量化的差信息进行本地解码。在步骤S109中，逆量化单元108用与步骤S108中执行的量化对应的方法逆量化通过步骤S108中的处理而量化的正交变换系数。在步骤S110中，逆正交变换单元109用与步骤S107中的处理对应的方法对通过步骤S109中的处理获得的正交变换系数执行逆正交变换。

在步骤S111中，算术运算单元110将本地解码的差信息与预测图像相加，并且产生本地解码的图像(与算术运算单元103的输入对应的图像)。在步骤S112中，区域确定单元122、边界控制单元123和去块滤波器111对通过步骤S111中的处理产生的图像执行去块滤波处理。结果，消除了块失真等。

在步骤S113中，帧存储器112存储通过步骤S112中的处理而经过块失真消除等的图像。应该注意，还没有经过去块滤波器111的滤波处理的图像也从算术运算单元110供应，并且被存储到帧存储器112中。存储在帧存储器112中的图像用于步骤S103中的处理和步骤S104中的处理。

在步骤S114中，无损编码单元106编码通过步骤S108中的处理而量化的变换系数，并且产生编码数据。即，对差图像(在帧间预测的情况下为第二级差图像)执行无损编码(例如，可变长度编码或算术编码)。

无损编码单元106还编码关于通过步骤S105中的处理而选择的预测图像的预测模式的信息，并且将通过对差图像进行编码而获得的编码数据与编码信息相加。当选择帧内预测模式时，例如，无损编码单元106对帧内预测模式信息进行编码。当选择帧间预测模式时，例如，无损编码单元106对帧间预测模式信息进行编码。将该信息作为头信息等与编码数据相加(或者与编码数据多路复用)。

在步骤S115中，累积缓冲器107累积通过步骤S114中的处理而产生的编码数据。在累积缓冲器107中累积的编码数据在需要时被读取，并且经由期望的传送路径(不仅包括通信信道而且包括存储介质等)被发送到解码侧的装置。

在步骤S116中，基于通过步骤S115中的处理而累积在累积缓冲器107中的压缩图像，速率控制单元117控制量化单元105的量化运算速率，以便不造成上溢或下溢。

当完成步骤S116中的处理时，编码处理结束。

[帧间运动预测处理的流程]

现在，参照图17中的流程图，描述要在图16中的步骤S104中执行的帧间运动预测处理的示例流程。

当开始帧间运动预测处理时，在步骤S131中，运动预测/补偿单元115在每个帧间预测模式中进行运动搜索，并且产生运动向量信息。

在步骤S132中，候选预测运动向量产生单元153产生关于每个预测器的候选预测运动向量信息。

在步骤S133中，成本函数计算单元154确定通过步骤S131中的处理获得的关于当前PU的运动向量信息和通过步骤S132中的处理获得的每个候选预测运动向量信息之间的差运动向量信息，并且计算其成本函数值。

在步骤S134中，最佳预测器确定单元155将最佳预测器确定为具有步骤S133中计算出的最小成本函数的预测器。

在步骤S135中，运动预测/补偿单元115将在步骤S134中确定的最佳预测器的模式添加到候选，并且确定最佳帧间预测模式。在步骤S136中，运动预测/补偿单元115在通过步骤S135中的处理确定的最佳帧间预测模式中执行运动补偿，并且产生预测图像。在步骤S137中，运动预测/补偿单元115适当地将最佳帧间预测模式信息、最佳预测器和差运动向量信息供应到无损编码单元106，无损编码单元106然后发送这些信息。

在步骤S138中，空间相邻运动向量缓冲器151和时间相邻运动向量缓冲器152存储通过步骤S131中的处理获得的关于当前PU的运动向量信息。该运动向量信息用于处理其它PU。

在完成步骤S138中的处理之后，空间相邻运动向量缓冲器151和时间相邻运动向量缓冲器152结束帧间运动预测处理，并且处理返回到图16。

[去块滤波处理的流程]

现在参照图18中示出的流程图，描述要在图16中的步骤S112中执行的去块滤波处理的示例流程。

当开始去块滤波处理时，在步骤S151中，相邻预测器缓冲器161存储在图17中的步骤S134中确定的当前PU的最佳预测器。

在步骤S152中，区域区分单元162从存储在相邻预测器缓冲器161中的预测器中选择并且获取对应于当前PU的相邻预测器。

在步骤S153中，区域区分单元162确定当前PU的最佳预测器是否不同于相邻预测器。

当确定这两个预测器彼此不同时，区域区分单元162使处理前进至步骤S154。例如，在区域区分单元162确定当前PU的最佳预测器是空间预测器并且相邻预测器是时间预测器(或空间时间预测器)的情况下，或者在区域区分单元162确定当前PU的最佳预测器是时间预测器(或空间时间预测器)并且相邻预测器是空间预测器的情况下，区域区分单元162使处理前进至步骤S154。

在步骤S154中，边界控制单元123执行控制，以设置更大的Bs值。在边界控制单元123的控制下，Bs确定单元171设置比基于语法元素确定的Bs值大的Bs值。例如，Bs确定单元171将基于语法元素确定的Bs值加上“+1”。可替选地，例如，Bs确定单元171将Bs值设置成“Bs＝4”，而不管基于语法元素确定的值如何。在设置Bs值之后，Bs确定单元171使处理前进至步骤S156。

在步骤S153中确定当前PU的最佳预测器和相邻预测器相同的情况下，区域区分单元163使处理前进至步骤S155。例如，在区域区分单元162确定当前PU的最佳预测器和相邻预测器是空间预测器的情况下，或者在区域区分单元162确定当前PU的最佳预测器和相邻预测器是时间预测器(或空间时间预测器)的情况下，区域区分单元162使处理前进至步骤S155。

在步骤S155中，边界控制单元123执行控制，以保持通过传统方法确定的Bs值。在边界控制单元123的控制下，Bs确定单元171基于语法元素设置Bs值。在设置Bs值之后，Bs确定单元171使处理前进至步骤S156。

在步骤S156中，α/β确定单元172基于量化参数等确定α和β。

在步骤S157中，基于在步骤S154至S156中确定的各个参数，滤波器确定单元173确定要对块边界上的当前PU执行哪种滤波处理。

在步骤S158中，滤波单元174根据确定的结果对当前PU执行去块滤波处理。

当完成步骤S158中的处理时，滤波单元174结束去块滤波处理。

通过执行如上所述的各个处理，图像编码装置100可以更准确地减少块失真，并且减少解码图像的质量的劣化。

[图像解码装置]

图19是示出图像解码装置的典型示例结构的框图，该图像解码装置是应用本技术的图像处理装置。图19中示出的图像解码装置200与上述图像编码装置100对应，并且通过正确解码通过图像编码装置100对图像数据进行编码而产生的比特流(编码数据)来产生解码图像。

如图19中所示，图像解码装置200包括累积缓冲器201、无损解码单元202、逆量化单元203、逆正交变换单元204、算术运算单元205、去块滤波器206、画面重排列缓冲器207和D/A转换器208。图像解码装置200还包括帧存储器209、选择单元210、帧内预测单元211、运动预测/补偿单元212和选择单元213。

图像解码装置200还包括运动向量解码单元221、区域确定单元222和边界控制单元223。

累积缓冲器201累积被发送到累积缓冲器201的编码数据，并且在预定时间将编码数据供应到无损解码单元202。无损解码单元202通过与由无损编码单元106使用的编码方法对应的方法，解码已经被图1中示出的无损编码单元106编码并且已经从累积缓冲器201供应的信息。无损解码单元202将作为解码结果获得的差图像的量化系数数据供应到逆量化单元203。

无损解码单元202还参照通过对编码数据进行解码而获得的关于最佳预测模式的信息，并且确定帧内预测模式是否已经被选择为最佳预测模式并且帧间预测模式是否已经被选择为最佳预测模式。即，无损解码单元202确定用于发送的编码数据的预测模式是否是帧内预测模式，以及预测模式是否是帧间预测模式。

基于确定的结果，无损解码单元202将关于预测模式的信息供应到帧内预测单元211或运动预测/补偿单元212。例如，在图像编码装置100中已经选择帧内预测模式作为最佳预测模式的情况下，无损解码单元202将从编码侧供应的并且与所选择的帧内预测模式有关的帧内预测信息供应到帧内预测单元211。例如，在图像编码装置100中已经选择帧间预测模式作为最佳预测模式的情况下，无损解码单元202将从编码侧供应的并且与所选择的帧间预测模式有关的帧间预测信息供应到运动预测/补偿单元212。

无损解码单元202还将与MV竞争或合并模式(例如，与编码数据相加(与编码数据多路复用)的差运动向量信息和最佳预测器)有关的信息供应到运动向量解码单元221。

无损解码单元202还将与语法元素有关的信息(例如，帧内/帧间模式信息和运动向量信息)供应到去块滤波器206。

逆量化单元203用与由图1中示出的量化单元105使用的量化方法对应的方法(与由逆量化单元108使用的方法相同的方法)逆量化通过无损解码单元202的解码而获得的量化系数数据。逆量化单元203将逆量化的系数数据供应到逆正交变换单元204。

逆量化单元203还将与逆量化中使用的量化参数有关的信息供应到去块滤波器206。

逆正交变换单元204用与由图1中示出的正交变换单元104使用的正交变换方法对应的方法，对从逆量化单元203供应的系数数据执行逆正交变换。通过这种逆正交变换处理，逆正交变换单元204获得与尚未在图像编码装置100中经过正交变换的差图像对应的差图像。

通过逆正交变换获得的差图像被供应到算术运算单元205。预测图像还经由选择单元213从帧内预测单元211或运动预测/补偿单元212供应到算术运算单元205。

算术运算单元205将差图像与预测图像相加，并且获得与图像编码装置100的算术运算单元103尚未从中提取预测图像的图像对应的重构图像。算术运算单元205将重构图像供应到去块滤波器206。

去块滤波器206通过对供应的重构图像执行去块滤波处理来消除块失真，并且产生解码图像。基于从无损解码单元202、逆量化单元203和边界控制单元223供应的各种类型的信息，去块滤波器206执行与由图1中的去块滤波器111执行的处理基本相同的处理，以确定将如何执行去块滤波处理，然后执行滤波处理。还可以对去块滤波处理的结果执行使用维纳滤波器的环路滤波处理，并且还可以执行其它滤波处理。

去块滤波器206将解码图像作为滤波处理的结果供应到画面重排列缓冲器207和帧存储器209。可以跳过去块滤波器206的滤波处理。

画面重排列缓冲器207对供应的解码图像执行重排列。具体地讲，以原始的显示次序重排列通过图1中示出的画面重排列缓冲器102以编码次序重排列的帧序列。D/A转换器208对从画面重排列缓冲器207供应的解码图像执行D/A转换，并且向显示器(未示出)输出解码图像以显示图像。

帧存储器209存储供应的重构图像和供应的解码图像。在预定时间或者根据来自外部(例如，来自帧内预测单元211或运动预测/补偿单元212)的请求，帧存储器209将存储的重构图像或存储的解码图像经由选择单元210供应到帧内预测单元211或运动预测/补偿单元212。

帧内预测单元211基于从无损解码单元202供应的帧内预测信息执行帧内预测，并且产生预测图像。基于从无损解码单元202供应的帧内预测信息，帧内预测单元211在与由图1中的帧内预测单元114执行的处理中使用的模式相同的模式中，仅仅对在编码时已经通过帧内预测产生预测图像的区域执行帧内预测。

运动预测/补偿单元212基于从无损解码单元202供应的帧间预测信息执行帧间预测，并且产生预测图像。基于从无损解码单元202供应的帧间预测信息，运动预测/补偿单元212在与由图1中的运动预测/补偿单元115执行的处理中使用的模式相同的模式中，仅仅对在编码时已经执行帧间预测的区域执行帧间预测。运动预测/补偿单元212还使得运动向量解码单元221执行与MV竞争或合并模式有关的处理。

对于每个预测处理单元区域，帧内预测单元211或运动预测/补偿单元212将产生的预测图像经由选择单元213供应到算术运算单元205。选择单元213将从帧内预测单元211供应的预测图像或从运动预测/补偿单元212供应的预测图像供应到算术运算单元205。

基于从无损解码单元202供应的信息，运动向量解码单元221执行涉及MV竞争或合并模式的处理以重构运动向量，并且将运动向量供应到运动预测/补偿单元212。运动向量解码单元221还将与当前PU中使用的最佳预测器(最佳预测器)有关的信息供应到区域确定单元222。

使用从运动向量解码单元221供应的最佳预测器，区域确定单元222执行与由图1中的区域确定单元122执行的处理基本相同的处理，并且确定当前PU是否是容易观测到块失真的PU。区域确定单元222将确定的结果供应到边界控制单元223。

边界控制单元223执行与由图1中的边界控制单元123执行的处理基本相同的处理，并且根据由区域确定单元222执行的确定的结果，控制去块滤波器206的设置。在边界控制单元223的控制下，去块滤波器206调整其滤波长度，并且执行去块滤波处理。

[运动向量解码单元、区域确定单元、边界控制单元和去块滤波器]

图20是示出运动向量解码单元221、区域确定单元222和去块滤波器206的典型示例结构的框图。

如图20中所示，运动向量解码单元221包括最佳预测器缓冲器251、差运动向量信息缓冲器252、预测运动向量重构单元253、运动向量重构单元254、空间相邻运动向量缓冲器255和时间相邻运动向量缓冲器256。

区域确定单元222包括相邻预测器缓冲器261和区域区分单元262。

另外，去块滤波器206包括Bs确定单元271、α/β确定单元272、滤波器确定单元273和滤波单元274。

运动向量解码单元221的最佳预测器缓冲器251获取并且存储从无损解码单元202供应的最佳预测器。根据来自预测运动向量重构单元253的请求，最佳预测器缓冲器251将存储的最佳预测器供应到预测运动向量重构单元253。

差运动向量信息缓冲器252获取并且存储从无损解码单元202供应的差运动向量信息。根据来自运动向量重构单元254的请求，差运动向量信息缓冲器252将存储的差运动向量信息供应到预测运动向量重构单元254。

预测运动向量重构单元253从最佳预测器缓冲器251获取作为当前区域的当前PU的最佳预测器。预测运动向量重构单元253从空间相邻运动向量缓冲器255或时间相邻运动向量缓冲器256获取关于对应于最佳预测器的相邻PU的运动向量信息。

例如，如果最佳预测器是空间预测器，则预测运动向量重构单元253从空间相邻运动向量缓冲器255获取空间相邻运动向量信息。例如，如果最佳预测器是时间预测器(或空间时间预测器)，则预测运动向量重构单元253从时间相邻运动向量缓冲器256获取时间相邻运动向量信息。

通过使用获取的相邻运动向量信息(空间相邻运动向量信息或时间相邻运动向量信息)，预测运动向量重构单元253重构当前PU的运动向量的预测值(预测运动向量信息)。该预测运动向量信息对应于关于由图14中的候选预测运动向量产生单元153产生的最佳预测器的预测运动向量信息。

预测运动向量重构单元253将重构的预测运动向量信息供应到运动向量重构单元254。预测运动向量重构单元253将最佳预测器供应到区域确定单元222的相邻预测器缓冲器261和区域区分单元262。

运动向量重构单元254从差运动向量信息缓冲器252获取关于当前PU的差运动向量信息，并且从预测运动向量重构单元253获取关于当前PU的预测运动向量信息。运动向量重构单元254通过将预测运动向量信息与差运动向量信息相加来重构关于当前PU的运动向量信息。该运动向量信息对应于从运动预测/补偿单元115供应到图14中的运动向量编码单元121的运动向量信息。

运动向量重构单元254将关于当前PU的重构运动向量信息供应到运动预测/补偿单元212。使用该运动向量信息，运动预测/补偿单元212执行帧间预测。因此，运动预测/补偿单元212还可以用与由图1中示出的运动预测/补偿单元115执行的处理对应的方法，执行涉及MV竞争或合并模式的帧间预测。

运动向量重构单元254还将关于当前PU的重构运动向量信息供应到空间相邻运动向量缓冲器255和时间相邻运动向量缓冲器256。

空间相邻运动向量缓冲器255获取并且存储从运动向量重构单元254供应的运动向量信息。根据来自预测运动向量重构单元253的请求，空间相邻运动向量缓冲器255将存储的运动向量信息作为空间相邻运动向量信息供应到预测运动向量重构单元253。即，在针对与对应于运动向量信息的PU在同一帧中的另一个PU的处理中，空间相邻运动向量缓冲器255将存储的运动向量信息供应到预测运动向量重构单元253。

时间相邻运动向量缓冲器256获取并且存储从运动向量重构单元254供应的运动向量信息。根据来自预测运动向量重构单元253的请求，时间相邻运动向量缓冲器256将存储的运动向量信息作为时间相邻运动向量信息供应到预测运动向量重构单元253。即，在针对与对应于运动向量信息的PU在不同帧中的PU的处理中，时间相邻运动向量缓冲器256将存储的运动向量信息供应到预测运动向量重构单元253。

如同图14中示出的相邻预测器缓冲器161一样，区域确定单元222的相邻预测器缓冲器261获取并且存储从预测运动向量重构单元253供应的最佳预测器。如同图14中示出的相邻预测器缓冲器161一样，相邻预测器缓冲器261根据来自区域区分单元262的请求，将存储的最佳预测器作为相邻预测器供应到区域区分单元262。

如同图14中示出的区域区分单元162一样，区域区分单元262从预测运动向量重构单元253获取关于当前PU的最佳预测器，然后从相邻预测器缓冲器261获取对应于当前PU的相邻预测器。

如同图14中示出的区域区分单元162一样，区域区分单元262将与块失真有关的特征与要进行去块滤波处理的当前PU的其它特征区分开。更具体地讲，区域区分单元262确定相邻预测器是否与当前PU的最佳预测器相同。当空间预测器既应用于当前PU又应用于相邻PU时，或者当时间预测器(或空间时间预测器)既应用于当前PU又应用于相邻PU时，区域区分单元262确定相邻预测器与当前PU的最佳预测器相同。

当双向预测应用于当前PU时，区域区分单元262选择预测器之一，如同区域区分单元162一样。例如，如果区域区分单元162在这种情况下使用与列表0预测器有关的预测器执行确定，则区域区分单元262使用与列表0预测器有关的预测器执行确定，如同区域区分单元162一样。

例如，如果区域区分单元162根据GOP结构适应性地选择列表0预测器或列表1预测器，则区域区分单元262也根据GOP结构执行适应性选择。

区域区分单元262将确定结果作为区域信息供应到边界控制单元223。

边界控制单元223执行与由图14中示出的边界控制单元123执行的处理基本相同的处理。具体地讲，边界控制单元223基于从区域区分单元262获取的区域信息控制去块滤波器111的滤波强度。更具体地讲，边界控制单元223执行控制，以对于容易观测到块失真的区域、或者PU设置更高去块滤波强度，该PU已经被区域区分单元262确定为具有与施加到相邻PU的预测器不同的预测器。

如同边界控制单元123一样，边界控制单元223通过校正去块滤波器的Bs值来调整去块滤波强度。虽然可以通过任何合适方法(与由边界控制单元123使用的方法相同的方法)调整Bs值，但是可以将Bs值调整为“Bs+1”，例如，与传统方法形成对照。另外，可以使得Bs值为“Bs+4”，而不管根据传统方法的值如何。

关于被确定为与相邻PU具有相同预测器的PU，边界控制单元223没有校正Bs值(或保持通过传统方法确定的值)。

边界控制单元223通过将指示用于校正Bs值的指令的控制信息供应到去块滤波器206的Bs确定单元271，实现去块滤波强度的调整。

去块滤波器206的各个组件执行与由图14中示出的去块滤波器111执行的处理基本相同的处理。例如，如同Bs确定单元171一样，Bs确定单元271基于各种类型的语法元素(例如，帧内/帧间模式信息和运动向量信息)确定Bs值。然而，语法元素是从无损解码单元202供应的。

如同Bs确定单元171一样，Bs确定单元271还根据从边界控制单元223供应的控制信息，对于已经被区域区分单元262确定为具有与施加到相邻PU的预测器不同的预测器的PU设置更高去块滤波强度。尽管可以使用任何合适的具体方法(与由Bs确定单元171使用的方法相同的方法)，但是例如，Bs值可以被调整为“Bs+1”，或者可以被设置为“Bs＝4”。

Bs确定单元271将以此方式校正的Bs值作为滤波器参数供应到滤波器确定单元273。

如同图14中示出的α/β确定单元172一样，α/β确定单元272通过使用当前PU的量化参数(当前区域量化参数)确定α和β的值。然而，这个当前区域量化参数是从逆量化单元203供应的。

α/β确定单元272将确定的α和β作为滤波器参数供应到滤波器确定单元273。

通过使用从Bs确定单元271和α/β确定单元272供应的滤波器参数，滤波器确定单元273确定要对重构图像(未经滤波的像素值)执行哪种滤波处理，如同图14中示出的滤波器确定单元173一样。然而，这个未经滤波的像素值是从算术运算单元205供应的。

滤波器确定单元273将控制信息(滤波器控制信息)以及未经滤波的像素值供应到滤波单元274。

如同图14中示出的滤波单元174一样，滤波单元274根据滤波器控制信息对从滤波器确定单元273供应的未经滤波的像素值执行去块滤波处理。滤波单元274将作为结果的滤波后的像素值供应到帧存储器209和画面重排列缓冲器207。

如上所述，区域确定单元222将当前PU的预测器与相邻PU的预测器进行比较，以检测容易观测到块失真的PU。然后，边界控制单元223执行控制，以便为容易观测到块失真的PU设置更高去块滤波强度。在边界控制单元223的控制下，Bs确定单元271校正Bs值。结果，滤波单元274可以针对容易观测到块失真的PU以增大的强度执行去块滤波处理。即，去块滤波器206可以更准确地减少块失真。因此，图像解码装置200可以减少解码图像的质量的劣化。

[解码处理的流程]

接下来，描述要由上述图像解码装置200执行的每个处理的流程。首先参照图21中示出的流程图，描述解码处理的示例流程。

在步骤S201中，当开始解码处理时，累积缓冲器201累积发送的编码数据。在步骤S202中，无损解码单元202解码从累积缓冲器201供应的编码数据。具体地讲，解码通过图1中示出的无损编码单元106编码的I图片、P图片和B图片。

此时，还解码诸如参考帧信息、预测模式信息(帧内预测模式或帧间预测模式)、最佳预测器和差运动向量信息的信息。

在步骤S203中，逆量化单元203对通过步骤S202中的处理获得的量化的正交变换系数进行逆量化。

在步骤S204中，逆正交变换单元204用与由图1中示出的正交变换单元104使用的方法对应的方法，对通过步骤S203中的逆量化获得的正交变换系数执行逆正交变换。结果，解码与图1中示出的正交变换单元104的输入(或算术运算单元103的输出)对应的差信息。

在步骤S205中，帧内预测单元211或运动预测/补偿单元212和运动向量解码单元221根据从无损解码单元202供应的预测模式信息执行图像预测处理。具体地讲，在从无损解码单元202供应帧内预测模式信息的情况下，帧内预测单元211在帧内预测模式中执行帧内预测处理。在从无损解码单元202供应帧间预测模式信息的情况下，运动预测/补偿单元212通过使用通过步骤S203中的处理获得的关于单元大小的各种类型的信息，执行帧间预测处理(包括运动预测和运动补偿)。

在步骤S206中，算术运算单元205将通过步骤S205中的处理获得的预测图像与通过步骤S204中的处理获得的差信息相加。结果，解码原始图像数据(或获得重构图像)。

在步骤S207中，去块滤波器206、区域确定单元222和边界控制单元223执行去块滤波处理。在这个步骤中，适当地对通过步骤S206中的处理获得的重构图像执行去块滤波处理。这个去块滤波处理与以上参照图18中示出的流程图描述的去块滤波处理基本相同，因此在本文中不重复对其的说明。

在步骤S208中，画面重排列缓冲器207重排列通过步骤S207中的处理而经过去块滤波处理的解码图像中的帧。具体地讲，在解码图像数据中，以原始显示次序重排列由图像编码装置100(图1)的画面重排列缓冲器102为进行编码而重排列的帧的次序。

在步骤S209中，D/A转换器208对具有通过步骤S208中的处理而重排列的帧的解码图像数据执行D/A转换。解码图像数据被输出到显示器(未示出)，并且显示图像。

在步骤S210中，帧存储器290存储通过步骤S207中的处理而经过去块滤波处理的解码图像数据。

[预测处理的流程]

现在，参照图22中的流程图，描述要在图21中的步骤S205中执行的预测处理的示例流程。

当开始预测处理时，在步骤S231中，无损解码单元202确定是否基于通过在步骤S202中对比特流进行无损解码而提取的预测模式信息在帧间预测模式中编码(帧间编码或帧内编码)作为当前区域的当前CU(编码单元)。如果确定当前CU被帧间编码，则无损解码单元202使处理前进至步骤S232。

在步骤S232中，运动预测/补偿单元212和运动向量解码单元221执行帧间预测处理，以在帧间预测模式中产生预测图像。在产生预测图像之后，运动预测/补偿单元212结束预测处理，并且处理返回到图21。

如果在图22中的步骤S231中确定当前CU被帧内编码，则无损解码单元202使处理前进至步骤S233。在步骤S233中，帧内预测单元211在帧内预测模式中产生预测图像。在产生预测图像之后，帧内预测单元211结束预测处理，并且处理返回到图21。

[帧间预测处理的流程]

现在，参照图23中的流程图，描述要在图22中的步骤S232中执行的帧间预测处理的示例流程。

当开始帧间预测处理时，在步骤S251中，最佳预测器缓冲器251获取并且存储从无损解码单元202供应的最佳预测器。在步骤S252中，差运动向量信息缓冲器252获取并且存储从无损解码单元202供应的差运动向量信息。

在步骤S253中，预测运动向量重构单元253基于在步骤S251中获取的最佳预测器选择空间相邻运动向量信息或时间相邻运动向量信息，并且通过使用所选择的相邻运动向量信息重构预测运动向量信息。

在步骤S254中，运动向量重构单元254通过使用在步骤S252中获取的差运动向量信息和在步骤S253中重构的预测运动向量信息，重构关于当前PU的运动向量信息。

在步骤S255中，运动预测/补偿单元212通过使用通过步骤S254中的处理而重构的关于当前PU的运动向量信息，执行运动补偿，并且产生预测图像。

在步骤S256中，空间相邻运动向量缓冲器255和时间相邻运动向量缓冲器256存储在步骤S254中重构的运动向量信息。将存储的运动向量信息作为步骤S253中的处理中的相邻运动向量信息以用于要在当前PU之后处理的另一个PU。

在完成步骤S256中的处理之后，空间相邻运动向量缓冲器255和时间相邻运动向量缓冲器256结束帧间预测处理，并且处理返回图22。

通过执行如上所述的各个处理，图像解码装置200可以更准确地减少块失真，并且减少解码图像的质量的劣化。

<2.第二实施例>

[图像编码装置]

在以上描述中，边界控制单元123(边界控制单元223)通过调整Bs值来控制去块滤波强度。然而，可以通过任何合适的方法来控制去块滤波强度。例如，可以调整阈值α和β。

图24是示出在这种情况下的图像编码装置的典型示例结构的框图。图24中示出的图像编码装置300与图像编码装置100基本相同，与图像编码装置100具有基本相同的结构，并且执行与图像编码装置100基本相同的处理。然而，图像编码装置300包括取代图像编码装置100的去块滤波器111的去块滤波器311、和取代图像编码装置100的边界控制单元123的边界控制单元323。

如同边界控制单元123一样，边界控制单元323根据由区域确定单元122执行的确定的结果，控制要由去块滤波器111执行的去块滤波处理的强度设置。然而，虽然边界控制单元123通过调整Bs值来控制去块滤波处理的强度，但是边界控制单元323通过调整阈值α和β来控制去块滤波处理的强度。

如同去块滤波器111一样，去块滤波器311适当地对从算术运算单元110供应的重构图像执行去块处理。然而，虽然去块滤波器111在边界控制单元123的控制下通过调整Bs值来控制去块滤波处理的强度，但是去块滤波器311通过调整阈值α和β来控制去块滤波处理的强度。

[运动向量编码单元、区域确定单元、边界控制单元和去块滤波器]

图25是示出运动向量编码单元121、区域确定单元122和去块滤波器311的典型示例结构的框图。

如图25中所示，去块滤波器311具有与去块滤波器111基本相同的结构，但是包括取代去块滤波器111的Bs确定单元171的Bs确定单元371、和取代去块滤波器111的α/β确定单元172的α/β确定单元372。

如同图14中示出的情况一样，区域确定单元122的区域区分单元162从相邻预测器缓冲器161获取相邻预测器，并且确定相邻预测器是否与当前PU的最佳预测器相同。区域区分单元162将确定结果作为区域信息供应到边界控制单元323。

通过从区域区分单元162获取包括指示与当前PU中的块失真有关的特征的信息的区域信息，边界控制单元323根据该特征控制去块滤波器311的滤波强度，如同边界控制单元123一样。更具体地讲，边界控制单元323执行控制，以对于容易观测到块失真的区域、或者PU设置更高去块滤波强度，其中，该PU已经被区域区分单元162确定为具有与施加到相邻PU的预测器不同的预测器。

然而，边界控制单元323与边界控制单元123的不同之处在于，通过校正阈值α和β来控制去块滤波强度。为了这样做，可以使用任何合适的调整方法。基于量化参数QP确定阈值α和β。因此，例如，边界控制单元323通过将量化参数QP加上预定的校正量化参数ΔQP来校正量化参数QP。

当加上校正量化参数ΔQP时，量化参数QP的值被校正，使得阈值α和β被校正，并且去块滤波强度增大。即，校正量化参数ΔQP被设置成使得当将量化参数QP加上ΔQP时去块滤波强度增大的值。

关于被确定为与相邻PU具有相同预测器的PU，边界控制单元323没有校正量化参数QP的值(或者保持从量化单元105供应的值)。

边界控制单元323通过将指示用于校正阈值α和β的指令的控制信息供应到去块滤波器311的α/β确定单元372，实现去块滤波强度的调整。

因此，去块滤波器311的Bs确定单元371不在边界控制单元323的控制下，并且基于从无损编码单元106供应的语法元素确定Bs值。Bs确定单元371将确定的Bs值作为滤波器参数供应到滤波器确定单元173。

同时，根据从边界控制单元323供应的控制信息，α/β确定单元372通过将从量化单元105供应的当前PU的量化参数(当前区域量化参数)的值加上预定的校正量化参数ΔQP来校正该当前PU的量化参数的值，并且通过使用校正值来确定α和β的值。如上所述，通过校正量化参数，调整α和β的值以便增大去块滤波强度。

α/β确定单元372将确定的α和β作为滤波器参数供应到滤波器确定单元173。

通过使用从Bs确定单元471和α/β确定单元372供应的滤波器参数，滤波器确定单元173以与图14中示出的情况相同的方式执行处理。滤波单元174还以与图14中示出的情况相同的方式执行处理。

如上所述，区域确定单元122将当前PU的预测器与相邻PU的预测器进行比较，以检测容易观测到块失真的PU。然后，边界控制单元323执行控制，以便为容易观测到块失真的PU设置更高去块滤波强度。在边界控制单元323的控制下，α/β确定单元372校正α和β的值。结果，滤波单元174可以针对容易观测到块失真的PU以增大的强度执行去块滤波处理。即，去块滤波器311可以更准确地减少块失真。因此，图像编码装置300可以减少解码图像的质量的劣化。

在执行控制以增大去块滤波强度时，边界控制单元323可以不校正量化参数QP，但是可以校正基于从量化单元105供应的量化参数QP计算的α和β的值。

[去块滤波处理的流程]

以与以上参照图16中的流程图描述的由图像编码装置100执行的编码处理基本相同的方式执行这种情况下的编码处理，因此在本文中不重复对其的说明。

以与以上参照图17中的流程图描述的由图像编码装置100执行的帧间运动预测处理基本相同的方式执行这种情况下的帧间运动预测处理，因此在本文中不重复对其的说明。

现在，参照图26中示出的流程图，描述要在这种情况下执行的去块滤波处理的示例流程。这个处理等同于以上参照图18中的流程图描述的去块滤波处理。

以与图18中的步骤S151和S152中的处理相同的方式执行步骤S301和S302中的处理。

在步骤S303中，Bs确定单元371基于语法元素确定Bs值。

在步骤S304中，区域区分单元162确定当前PU的最佳预测器是否与相邻预测器不同。

当确定这两个预测器彼此不同时，区域区分单元162使处理前进到步骤S305。例如，在区域区分单元162确定当前PU的最佳预测器是空间预测器并且相邻预测器是时间预测器(或空间时间预测器)的情况下，或者在区域区分单元162确定当前PU的最佳预测器是时间预测器(或空间时间预测器)并且相邻预测器是空间预测器的情况下，区域区分单元162使处理前进至步骤S305。

在步骤S305中，边界控制单元123校正量化参数QP的值，以便增大滤波强度。在边界控制单元123的控制下，α/β确定单元372校正量化参数QP。在校正了量化参数之后，α/β确定单元372使处理前进到步骤S306。

在步骤S304中确定当前PU的最佳预测器和相邻预测器相同的情况下，区域区分单元162跳过步骤S305中的处理，并且使处理前进到步骤S306。

例如，在区域区分单元162确定当前PU的最佳预测器和相邻预测器是空间预测器的情况下，或者在区域区分单元162确定当前PU的最佳预测器和相邻预测器是时间预测器(或空间时间预测器)的情况下，区域区分单元162使处理前进至步骤S306。

在步骤步骤S306中，α/β确定单元372基于(经校正或未经校正的)量化参数等确定α和β。

以与图18中的步骤S157和S158中的处理相同的方式执行步骤S307和S308中的处理。

当完成步骤S308中的处理时，滤波单元174结束去块滤波处理。

通过执行如上所述的各个处理，图像编码装置300可以更准确地减少块失真，并且减少解码图像的质量的劣化。

[图像解码装置]

图27是示出图像解码装置的典型示例结构的框图，该图像解码装置是应用本技术的图像处理装置。图27中示出的图像解码装置400与上述图像编码装置300对应，并且通过正确解码通过图像编码装置300对图像数据进行编码而产生的比特流(编码数据)来产生解码图像。

具体地讲，图27中示出的图像解码装置400与图像解码装置200基本相同，具有与图像解码装置200基本相同的结构，并且执行与图像解码装置200基本相同的处理。然而，图像解码装置400包括取代图像解码装置200的去块滤波器206的去块滤波器406、和取代图像解码装置200的边界控制单元223的边界控制单元423。

如同边界控制单元223一样，边界控制单元423根据由区域区分单元262执行的确定的结果，控制要由去块滤波器206执行的去块滤波处理的强度设置。然而，虽然边界控制单元223通过调整Bs值来控制去块滤波处理的强度，但是边界控制单元423通过调整阈值α和β来控制去块滤波处理的强度。

如同去块滤波器206一样，去块滤波器406适当地对从算术运算单元205供应的重构图像执行去块处理。然而，虽然去块滤波器206在边界控制单元223的控制下通过调整Bs值来控制去块滤波处理的强度，但是去块滤波器406通过调整阈值α和β来控制去块滤波处理的强度。

[运动向量解码单元、区域确定单元、边界控制单元和去块滤波器]

图28是示出运动向量解码单元221、区域确定单元222和去块滤波器406的典型示例结构的框图。

如图28中所示，去块滤波器406具有与去块滤波器206基本相同的结构，但是包括取代去块滤波器206的Bs确定单元271的Bs确定单元471、和取代去块滤波器206的α/β确定单元272的α/β确定单元472。

如同图20中示出的情况一样，区域确定单元222的区域区分单元262从相邻预测器缓冲器261获取相邻预测器，并且确定相邻预测器是否与当前PU的最佳预测器相同。区域区分单元262将确定结果作为区域信息供应到边界控制单元423。

通过从区域区分单元262获取包括指示与当前PU中的块失真有关的特征的信息的区域信息，边界控制单元423根据该特征控制去块滤波器206的滤波强度，如同边界控制单元223一样。更具体地讲，边界控制单元423执行控制，以对于容易观测到块失真的区域、或者PU设置更高去块滤波强度，其中，该PU已经被区域区分单元262确定为具有与施加到相邻PU的预测器不同的预测器。

然而，边界控制单元423与边界控制单元223的不同之处在于，通过校正阈值α和β来控制去块滤波强度。为了这样做，可以使用任何合适的调整方法。例如，边界控制单元423通过例如将量化参数QP加上预定的校正量化参数ΔQP来校正量化参数QP。

当加上校正量化参数ΔQP时，量化参数QP的值被校正，使得阈值α和β被校正，并且去块滤波强度增大。即，校正量化参数ΔQP被设置成使得当将量化参数QP加上ΔQP时去块滤波强度增大的值。

关于被确定为与相邻PU具有相同预测器的PU，边界控制单元423没有校正量化参数QP的值(或者保持从量化单元203供应的值)。

边界控制单元423通过将指示用于校正阈值α和β的指令的控制信息供应到去块滤波器406的α/β确定单元472，实现去块滤波强度的调整。

因此，去块滤波器406的Bs确定单元471不在边界控制单元423的控制下，并且基于从无损编码单元202供应的语法元素确定Bs值。Bs确定单元471将确定的Bs值作为滤波器参数供应到滤波器确定单元273。

同时，根据从边界控制单元423供应的控制信息，α/β确定单元472通过将从逆量化单元203供应的当前PU的量化参数(当前区域量化参数)的值加上预定的校正量化参数ΔQP来校正该当前PU的量化参数的值，并且通过使用校正值来确定α和β的值。如上所述，通过校正量化参数，调整α和β的值以便增大去块滤波强度。

α/β确定单元472将确定的α和β作为滤波器参数供应到滤波器确定单元273。

通过使用从Bs确定单元471和α/β确定单元472供应的滤波器参数，滤波器确定单元273以与图20中示出的情况相同的方式执行处理。滤波单元274还以与图20中示出的情况相同的方式执行处理。

如上所述，区域确定单元222将当前PU的预测器与相邻PU的预测器进行比较，以检测容易观测到块失真的PU。然后，边界控制单元423执行控制，以便为容易观测到块失真的PU设置更高去块滤波强度。在边界控制单元423的控制下，α/β确定单元472校正α和β的值。结果，滤波单元274可以针对容易观测到块失真的PU以增大的强度执行去块滤波处理。即，去块滤波器406可以更准确地减少块失真。因此，图像编码装置400可以减少解码图像的质量的劣化。

在执行控制以增大去块滤波强度时，边界控制单元423可以不校正量化参数QP，但是可以校正基于从逆量化单元203供应的量化参数QP计算的α和β的值。

可以通过除了上述示例方法之外的方法增大去块滤波强度。例如，边界控制单元可以执行控制，以调整Bs值和阈值α和β(或量化参数)，或者调整一个以上的参数。

在以上描述中，使用预测器进行检查，以确定在当前PU中是否容易观测到块失真。然而，可以通过任何其它方法进行检查，只要可以增大用于容易观测到块失真的区域的去块滤波处理的强度即可。即，可以进行任何种类的检查，以确定是否容易观测到块失真。

<3.第三实施例>

[计算机]

上述一系列处理可以用硬件执行或者可以用软件执行。在这种情况下，例如，可以通过如图29中所示的计算机实现这些处理。

在图29中，计算机500的CPU(中央处理单元)501根据ROM(只读存储器)502中存储的程序或者从存储单元513加载到RAM(随机存取存储器)503中的程序，执行各种类型的处理。RAM503还存储CPU501根据需要执行各种处理等所需的数据。

CPU501、ROM502和RAM503经由总线504相互连接。输入/输出接口510也连接到总线504。

下面的组件也连接到输入/输出接口510：输入单元511，其由键盘、鼠标、触摸面板、输入端子等形成；输出单元512，其由输出装置或输出端子形成，包括诸如CRT(阴极射线管)、LCD(液晶显示器)或OLED(有机电致发光显示器)的显示器和扬声器；存储单元513，其由存储介质(例如，硬件或闪存)和控制存储介质的输入和输出的控制单元等形成；和通信单元514，其由有线或无线通信装置(例如，调制解调器、LAN接口、USB(通用串行总线)或蓝牙(注册商品名))形成。通信单元514经由例如包括因特网的网络与其它通信装置执行通信。

如有需要，驱动器515也连接到输入/输出接口510。可移动介质521(例如，磁盘、光盘、磁光盘或半导体存储器)被适当地安装在驱动器515上。在CPU501的控制下，例如，驱动器515从安装在上面的可移动介质521读取计算机程序、数据等。例如，读取的数据和读取的计算机程序被供应到RAM503。已经从可移动介质521读取的计算机程序根据需要被安装在存储单元513中。

当用软件执行上述一系列处理时，从网络或记录介质安装构成软件的程序。

如图29中所示，记录介质的示例包括上面已经记录了程序的为了将程序分别从装置传递给用户而进行分发的可移动介质521，例如，磁盘(包括软盘)、光盘(包括CD-ROM(压缩盘-只读存储器)或DVD(数字通用盘))、磁光盘(包括MD(微型盘))和半导体存储器，并且可替选地，包括在传递到用户之前预先被装入装置中的、里面记录了程序的ROM和包括在存储单元513中的硬盘。

要由计算机执行的程序可以是用于根据本说明书中描述的顺序按时间次序执行处理的程序，或者可以是用于并行执行处理或者当需要时(例如，当存在调用时)执行处理的程序。

在本说明书中，描述要被记录在记录介质中的程序的步骤包括要并行地或者相互独立地执行的处理(如果不需要按时间次序)以及要根据本文中描述的顺序按时间次序执行的处理。

在本说明书中，“系统”意指由两个或更多个装置(设备)形成的整个设备。

另外，在上述示例中，被描述为一个装置(或一个处理单元)的任何结构可以被分割成两个或更多个装置(或处理单元)。相反地，被描述为两个或更多个装置(或处理单元)的任何结构可以被组合，以形成一个装置(或一个处理单元)。另外，当然可以在任何装置(或任何处理单元)的结构中添加除上述结构之外的结构。另外，只要整个系统的结构和功能保持相同，装置(或处理单元)的结构的一部分可以被并入另一个装置(或另一个处理单元)中。即，本技术的实施例不限于上述实施例，并且在不脱离本技术的范围的情况下，可以对实施例进行各种修改。

根据上述实施例的图像编码装置100(图1)、图像解码装置200(图19)、图像编码装置300(图24)和图像解码装置400(图27)可以应用于各种电子设备，包括：用于卫星广播的发送器和接收器、诸如有线电视的有线广播、经由因特网的传递器、通过蜂窝通信通向终端的传递器等；将图像记录在介质(例如，光盘、磁盘或闪存)上的记录设备；或再现来自这些存储介质的图像的再现设备。以下，将描述四个应用示例。

<4.第四实施例>

[电视设备]

图30示意性示出应用上述实施例的电视设备的示例结构。电视设备900包括天线901、调谐器902、多路解复用器903、解码器904、视频信号处理单元905、显示单元906、音频信号处理单元907、扬声器908、外部接口909、控制单元910、用户接口911和总线912。

调谐器902从经由天线901接收到的广播信号中提取期望频道的信号，并且解调所提取的信号。调谐器902将通过解调获得的解码比特流输出到多路解复用器903。即，调谐器902用作接收编码图像的编码流的电视设备900中的发送单元。

多路解复用器903从编码比特流中分离出要被观看的表演的视频流和音频流，并且将分离的各个流输出到解码器904。多路解复用器903还从编码比特流中提取诸如EPG(电子节目指南)的辅助数据，并且将提取的数据供应到控制单元910。在编码比特流已经被加扰的情况下，多路解复用903可以执行解扰。

解码器904解码从多路解复用器903输入的视频流和音频流。然后，解码器904将通过解码产生的视频数据输出到视频信号处理单元905。解码器904还将通过解码产生的音频数据输出到音频信号处理单元907。

视频信号处理单元905再现从解码器904输入的视频数据，并且使得显示单元906显示视频图像。另外，视频信号处理单元905可以使得显示单元906显示经由网络供应的应用画面。另外，视频信号处理单元905可以根据设置对视频数据执行额外的处理(例如，去噪)。另外，视频信号处理单元905可以产生GUI(图形用户界面)的图像(例如，菜单和按钮或光标)，并且将产生的图像叠加在输出图像上。

显示单元906由从视频信号处理单元905供应的驱动信号驱动，并且在显示装置(例如，液晶显示器、等离子显示器、或OELD(有机电致发光显示器))的视频屏幕上显示视频图像或图像。

音频信号处理单元907对从解码器904输入的音频数据执行再现处理(例如，D/A转换和放大)，并且从扬声器908输出声音。另外，音频信号处理单元907可以对音频数据执行额外的处理(例如，去噪)。

外部接口909是用于将电视设备900连接到外部装置或网络的接口。例如，经由外部接口909接收的视频流或音频流可以被解码器904解码。即，外部接口909还用作接收编码图像的编码流的电视设备900中的发送单元。

控制单元910包括处理器(例如，CPU)和存储器(例如，RAM和ROM)。存储器存储CPU要执行的程序、程序数据、EPG数据、经由网络获取的数据等。例如，存储器中存储的程序在电视设备900启动时被CPU读取，然后被执行。通过执行程序，例如，CPU根据从用户接口911输入的操作信号控制电视设备900的操作。

用户接口911连接到控制单元910。例如，用户接口911包括供用户操作电视设备900的按钮和开关、以及用于遥控信号的接收单元。用户接口911通过检测用户借助这些组件进行的操作，产生操作信号，并且将产生的操作信号输出到控制单元910。

总线912将调谐器902、多路解复用器903、解码器904、视频信号处理单元905、音频信号处理单元907、外部接口909和控制单元910相互连接。

在具有上述结构的电视设备900中，解码器904具有根据上述实施例的图像解码装置200(图19)的功能。因此，解码器904可以检测容易观测到块失真并且选择与相邻区域的预测器不同的预测器的区域，并且增大该区域的去块滤波强度。通过这样做，解码器904可以更准确地减少块失真。因此，电视设备900可以减少解码图像的质量的劣化。

<5.第五实施例>

[便携式电话装置]

图31示意性示出应用上述实施例的便携式电话装置的示例结构。便携式电话装置920包括天线921、通信单元922、音频编解码器923、扬声器924、麦克风925、照相机单元926、图像处理单元927、多路复用/分离单元928、记录/再现单元929、显示单元930、控制单元931、操作单元932和总线933。

天线921连接到通信单元922。扬声器924和麦克风925连接到音频编解码器923。操作单元932连接到控制单元931。总线933将通信单元922、音频编解码器923、照相机单元926、图像处理单元927、多路复用/分离单元928、记录/再现单元929、显示单元930和控制单元931相互连接。

便携式电话装置920在包括音频通信模式、数据通信模式、成像模式和视频电话模式的各种操作模式中执行发送和接收音频信号、发送和接收电子邮件或图像数据、成像操作和数据记录的操作。

在音频通信模式下，由麦克风925产生的模拟音频信号被供应到音频编解码器923。音频编解码器923将模拟音频信号转换成音频信号，并且对转换后的音频数据执行压缩和A/D转换。音频编解码器923将压缩后的音频数据输出到通信单元922。通信单元922编码并调制音频数据，以产生发送信号。通信单元922经由天线921将产生的发送信号发送到基站(未示出)。通信单元922还对经由天线921接收的无线电信号执行放大和频率转换，并且获得接收信号。通信单元922通过解调并解码接收信号产生音频数据，并且将产生的音频数据输出到音频编解码器923。音频编解码器923对音频数据执行解压缩和D/A转换，以产生模拟音频信号。然后，音频编解码器923将产生的音频信号输出到扬声器924，以输出声音。

在数据通信模式下，控制单元931根据由用户经由操作单元932进行的操作，产生构成电子邮件的文本数据。控制单元931使得显示单元930显示文本。控制单元931还根据经由操作单元932的来自用户的发送指令，产生电子邮件数据，并且将产生的电子邮件数据输出到通信单元922。通信单元922编码并且调制电子邮件数据，以产生发送信号。通信单元922经由天线921将产生的发送信号发送到基站(未示出)。通信单元922还对经由天线921接收到的无线电信号执行放大和频率转换，并且获得接收信号。然后，通信单元922通过解调并且解码接收信号恢复电子邮件数据，并且将恢复的电子邮件数据输出到控制单元931。控制单元931使得显示单元930显示电子邮件的内容，并且将电子邮件数据存储在记录/再现单元929中的存储介质中。

记录/再现单元929包括可读/可重写存储介质。例如，存储介质可以是内部存储介质(例如，RAM或闪存)，或者可以是外部安装类型的存储介质(例如，硬盘、磁盘、磁光盘、光盘、USB存储器、或存储卡)。

在成像模式下，相机单元926通过拍摄被摄体的图像产生图像数据，并且将产生的图像数据输出到图像处理单元927。图像处理单元927编码从照相机单元926输入的图像数据，并且将编码流存储在记录/再现单元929中的存储介质中。

在视频电话模式下，多路复用/分离单元928多路复用由图像处理单元927编码的视频流和从音频编解码器923输入的音频流，并且将多路复用的流输出到通信单元922。通信单元922编码并且调制流，以产生发送信号。通信单元922经由天线921将产生的发送信号发送到基站(未示出)。通信单元922还对经由天线921接收到的无线电信号执行放大和频率转换，并且获得接收信号。发送信号和接收信号可以包括编码比特流。通信单元922通过解调并解码接收信号来恢复流，并且将恢复的流输出到多路复用/分离单元928。多路复用/分离单元928从输入流中分离出视频流和音频流，并且将视频流输出到图像处理单元927并且将音频流输出到音频编解码器923。图像处理单元927解码视频流，以产生视频信号。视频数据被供应到显示单元930，并且通过显示单元930显示一系列图像。音频编解码器923对音频流执行解压缩和D/A转换，以产生模拟音频信号。然后，音频编解码器923将产生的音频信号输出到扬声器924，以输出声音。

在具有上述结构的便携式电话装置920中，图像处理单元927具有根据上述实施例的图像编码装置100(图1)的功能、图像解码装置200(图19)的功能、图像编码装置300(图24)的功能和图像解码装置400(图27)的功能。因此，在要在便携式电话装置920中被编码并解码的图像中，图像处理单元927可以检测容易观测到块失真并且选择与相邻区域的预测器不同的预测器的区域，并且增大该区域的去块滤波强度。通过这样做，便携式电话装置920可以更准确地减少块失真。因此，电视设备900可以减少解码图像的质量的劣化。

尽管以上已经描述了便携式电话装置920，但是应用本技术的图像编码装置和图像解码装置也可以按照与便携式电话装置920的情况相同的方式用在任何装置中，只要装置与便携式电话装置920具有相同的图像拍摄功能和相同的通信功能即可。例如，这种装置可以是PDA(个人数字助理)、智能电话、UMPC(超移动个人计算机)、上网本、或笔记本个人电脑。

<6.第六实施例>

[记录/再现设备]

图32示意性示出应用上述实施例的记录/再现设备的示例结构。记录/再现设备940编码例如接收到的广播表演的音频数据或视频数据，并且将音频数据和视频数据记录到记录介质上。记录/再现设备940可以编码例如从另一个设备获取的音频数据和视频数据，并且将音频数据和视频数据记录在记录介质上。记录/再现设备940还例如根据来自用户的指令通过监视器和扬声器再现被记录在记录介质上的数据。在这样做的过程中，记录/再现设备940解码音频数据和视频数据。

记录/再现设备940包括调谐器941、外部接口942、编码器943、HDD(硬盘驱动器)944、盘驱动器945、选择器946、解码器947、OSD(屏幕上显示)948、控制单元949和用户接口950。

调谐器941从经由天线(未示出)接收到的广播信号中提取期望频道的信号，并且解调所提取的信号。调谐器941将通过解调获得的编码比特流输出到选择器946。即，调谐器941用作记录/再现设备940中的发送单元。

外部接口942是用于将记录/再现设备940连接到外部装置或网络的接口。例如，外部接口942可以是IEEE1394接口、网络接口、USB接口或闪存接口。例如，经由外部接口942接收的视频数据和音频数据被输入到编码器943。即，外部接口942用作记录/再现设备940中的发送单元。

在从外部接口942输入的视频数据和音频数据还没有被编码的情况下，编码器943编码视频数据和音频数据。然后，编码器943将编码比特流输出到选择器946。

HDD944将由压缩内容数据(例如，视频图像和声音、各种程序和其它数据)形成的编码比特流记录到内部硬盘上。在再现视频图像和声音时，HDD944从硬盘读取这些数据。

盘驱动器945将数据记录在安装在其上的记录介质上并且从记录介质读取数据。例如，安装在盘驱动器945上的记录介质可以是DVD盘(例如，DVD视频、DVD-RAM、DVD-R、DVD-RW、DVD+R或DVD+RW)或Blue-ray(注册商品名)盘。

在记录视频图像和声音时，选择器946选择从调谐器941或编码器943输入的编码比特流，并且将所选择的编码比特流输出到HDD944或盘驱动器945。在再现视频图像和声音时，选择器946也将从HDD944或盘驱动器945输入的编码比特流输出到解码器947。

解码器947对编码比特流进行解码，并且产生视频数据和音频数据。解码器947将产生的视频数据输出到OSD948。解码器947还将产生的音频数据输出到外部扬声器。

OSD948再现从解码器947输入的视频数据，并且显示视频图像。OSD948可以将GUI(例如，菜单和按钮或光标)的图像叠加在要显示的视频图像上。

控制单元949包括处理器(例如，CPU)和存储器(例如，RAM或ROM)。存储器存储要由CPU执行的程序、程序数据等。例如，存储器中存储的程序在记录/再现设备940启动时被CPU读取，然后被执行。通过执行程序，例如，CPU根据从用户接口950输入的操作信号控制记录/再现设备940的操作。

用户接口950连接到控制单元949。例如，用户接口950包括供用户操作记录/再现设备940的按钮和开关、以及用于遥控信号的接收单元。用户接口950通过检测由用户经由这些组件进行的操作，产生操作信号，并且将产生的操作信号输出到控制单元949。

在具有上述结构的记录/再现设备940中，编码器943具有根据上述实施例的图像编码装置100(图1)的功能和图像编码装置300(图24)的功能。另外，解码器947具有根据上述实施例的图像解码装置200(图19)的功能和图像解码装置400(图27)的功能。因此，在要在记录/再现设备940中被编码并解码的图像中，编码器943和解码器947可以检测容易观测到块失真并且选择与相邻区域的预测器不同的预测器的区域，并且增大该区域的去块滤波强度。通过这样做，编码器943和解码器947可以更准确地减少块失真。因此，记录/再现设备940可以减少解码图像的质量的劣化。

<7.第七实施例>

[成像设备]

图33示意性示出应用上述实施例的成像设备的示例结构。成像设备960通过对被摄体成像来产生图像，编码图像数据并且将图像数据记录到记录介质上。

成像设备960包括光学块961、成像单元962、信号处理单元963、图像处理单元964、显示单元965、外部接口966、存储器967、介质驱动器968、OSD969、控制单元970、用户接口971和总线972。

光学块961连接到成像单元962。成像单元962连接到信号处理单元963。显示单元965连接到图像处理单元964。用户接口971连接到控制单元970。总线972将图像处理单元964、外部接口966、存储器967、介质驱动器968、OSD969和控制单元970相互连接。

光学块961包括聚焦透镜和光圈。光学块961在成像单元962的成像表面上形成被摄体的光学图像。成像单元962包括图像传感器(例如，CCD或CMOS)，并且通过光电转换将成像表面上形成的光学图像转换成作为电信号的图像信号。成像单元962将图像信号输出到信号处理单元963。

信号处理单元963对从成像单元962输入的图像信号执行各种类型的照相机信号处理(例如，拐点校正、伽玛校正、颜色校正)。信号处理单元963将经过照相机信号处理的图像数据输出到图像处理单元964。

图像处理单元964编码从信号处理单元963输入的图像数据，并且产生编码数据。图像处理单元964将产生的编码数据输出到外部接口966或介质驱动器968。图像处理单元964还解码从外部接口966或介质驱动器968输入的编码数据，并且产生图像数据。图像处理单元964将产生的图像数据输出到显示单元965。可替选地，图像处理单元964可以将从信号处理单元963输入的图像数据输出到显示单元963以显示图像。图像处理单元964还可以将从OSD969获取的显示数据叠加在要输出到显示单元965的图像上。

OSD969例如产生GUI(例如，菜单和按钮或光标)的图像，并且将产生的图像输出到图像处理单元964。

例如，外部接口966被形成为USB输入/输出端子。例如，外部接口966在打印图像时将成像设备960连接到打印机。如果需要，驱动器也连接到外部接口966。可移动介质(例如，磁盘或光盘)被安装在驱动器上，使得从可移动介质读取的程序可以被安装在成像设备960中。另外，外部接口966可以被设计为要连接到网络(例如，LAN或因特网)的网络接口。即，外部接口966用作成像设备960中的发送单元。

要被安装在介质驱动器968上的记录介质可以是可读/可重写可移动介质(例如，磁盘、磁光盘、光盘或半导体存储器)。另外，记录介质可以被固定到介质驱动器968，以形成非便携式存储单元(例如，内部硬盘驱动器或SSD(固态驱动器))。

控制单元970包括处理器(例如，CPU)和存储器(例如，RAM或ROM)。存储器存储要由CPU执行的程序、程序数据等。例如，存储器中存储的程序在成像设备960启动时被CPU读取，然后被执行。通过执行程序，例如，CPU根据从用户接口971输入的操作信号控制成像设备960的操作。

用户接口971连接到控制单元970。例如，用户接口971包括供用户操作成像设备960的按钮和开关。用户接口971通过检测用户经由这些组件进行的操作，产生操作信号，并且将产生的操作信号输出到控制单元970。

在具有上述结构的成像设备960中，图像处理单元964具有根据上述实施例的图像编码装置100(图1)的功能、图像解码装置200(图19)的功能、图像编码装置300(图24)的功能和图像解码装置400(图27)的功能。因此，在要在成像设备960中被编码并解码的图像中，图像处理单元964可以检测容易观测到块失真并且选择与相邻区域的预测器不同的预测器的区域，并且增大该区域的去块滤波强度。通过这样做，图像处理单元964可以更准确地减少块失真。因此，成像设备960可以减少解码图像的质量的劣化。

当然可以在除了上述设备之外的任何设备和系统中使用根据本技术的图像编码装置和图像解码装置。

在本说明书中描述的示例中，量化参数从编码侧发送到解码侧。在发送量化矩阵参数时，量化矩阵参数可以不与编码比特流多路复用，但是可以被发送或记录为与编码比特流关联的独立数据。这里，术语“关联”的意思是在解码时将比特流中包括的图像(或图像的一部分，例如，片段或块)与对应于图像的信息联系起来。换句话讲，可以通过与图像不同的传送路径发送信息。另外，信息可以被记录到与图像(比特流)不同的记录介质(或同一记录介质中的不同记录区域)上。另外，每个信息可以与图像(或比特流)的多个帧、一帧或帧的一部分关联。

尽管以上已经参照附图描述了本公开的优选实施例，但本公开的技术范围不限于这些示例。清楚的是，本领域的普通技术人员可以在本文要求保护的技术精神的范围内进行各种变化或修改，并且应该理解，这些变化或修改在本公开内容的技术范围内。

本技术还可以是下面的形式。

(1)一种图像处理装置，包括：

确定单元，被配置为当在产生正被处理的当前图像的预测图像中使用的预测器不同于对应于位于与所述当前图像相邻的相邻图像的预测器时，确定容易观测到块失真；

控制单元，被配置为当所述确定单元确定容易观测到块失真时，执行控制以使得在针对所述当前图像的去块滤波处理中设置更高强度；以及

滤波单元，被配置为在所述控制单元的控制下对所述当前图像执行去块滤波处理。

(2)根据(1)所述的图像处理装置，其中，当对应于所述当前图像的预测器是空间预测器而对应于所述相邻图像的预测器是时间预测器时，或者当对应于所述当前图像的预测器是时间预测器而对应于所述相邻图像的预测器是空间预测器时，所述确定单元确定容易观测到块失真。

(3)根据(1)或(2)所述的图像处理装置，其中，当双向预测应用于所述当前图像时，所述确定单元通过使用与列表0预测器有关的预测器，确定在所述当前图像中是否容易观测到块失真。

(4)根据(1)或(2)所述的图像处理装置，其中，当双向预测应用于所述当前图像时，所述确定单元根据与参考图像的距离选择列表0预测器和列表1预测器之一，并且通过使用所选择的预测器确定是否容易观测到块失真。

(5)根据(1)至(4)中的任一项所述的图像处理装置，其中，所述控制单元控制所述去块滤波处理的Bs值，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

(6)根据(5)所述的图像处理装置，其中，所述控制单元将Bs值增加“+1”，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

(7)根据(5)所述的图像处理装置，其中，所述控制单元将Bs值调整为4，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

(8)根据(1)至(7)中的任一项所述的图像处理装置，其中，所述控制单元控制所述去块滤波处理的阈值α和β，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

(9)根据(8)所述的图像处理装置，其中，所述控制单元校正要在计算阈值α和β中使用的量化参数，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

(10)一种在图像处理装置中实现的图像处理方法，

所述图像处理方法包括：

当在产生正被处理的当前图像的预测图像中使用的预测器不同于对应于位于与所述当前图像相邻的相邻图像的预测器时，确定容易观测到块失真，所述确定是由确定单元执行的；

当所述确定单元确定容易观测到块失真时，执行控制以使得在针对所述当前图像的去块滤波处理中设置更高强度，所述控制是由控制单元执行的；以及

在所述控制单元的控制下，对所述当前图像执行去块滤波处理，所述去块滤波处理是由滤波单元执行的。

附图标记列表

100图像编码装置、111去块滤波器、121运动向量编码单元、122区域确定单元、123边界控制单元、151空间相邻运动向量缓冲器、152时间相邻运动向量缓冲器、153候选预测运动向量产生单元、154成本函数计算单元、155最佳预测器确定单元、161相邻预测器缓冲器、162区域确定单元、171Bs确定单元、172α/β确定单元、173滤波器确定单元、174滤波单元、200图像解码装置、206去块滤波器、221运动向量解码单元、222区域确定单元、223边界控制单元、251最佳预测器缓冲器、252差运动向量信息缓冲器、253预测运动向量重构单元、254运动向量重构单元、255空间相邻运动向量缓冲器、256时间相邻运动向量缓冲器、261相邻预测器缓冲器、262区域区分单元、271Bs确定单元、272α/β确定单元、273滤波器确定单元、274滤波单元、300图像编码装置、311去块滤波器、323边界控制单元、371Bs确定单元、372α/β确定单元、400图像解码装置、406去块滤波器、423边界控制单元、471Bs确定单元、472α/β确定单元

Claims (10)

1.一种图像处理装置，包括：

确定单元，被配置为当在产生正被处理的当前图像的预测图像中使用的预测器不同于对应于位于与所述当前图像相邻的相邻图像的预测器时，确定容易观测到块失真；

控制单元，被配置为当所述确定单元确定容易观测到块失真时，执行控制以使得在针对所述当前图像的去块滤波处理中设置更高强度；以及

滤波单元，被配置为在所述控制单元的控制下对所述当前图像执行去块滤波处理。

2.根据权利要求1所述的图像处理装置，其中，当对应于所述当前图像的预测器是空间预测器而对应于所述相邻图像的预测器是时间预测器时，或者当对应于所述当前图像的预测器是时间预测器而对应于所述相邻图像的预测器是空间预测器时，所述确定单元确定容易观测到块失真。

3.根据权利要求1所述的图像处理装置，其中，当双向预测应用于所述当前图像时，所述确定单元通过使用与列表0预测器有关的预测器，确定在所述当前图像中是否容易观测到块失真。

4.根据权利要求1所述的图像处理装置，其中，当双向预测应用于所述当前图像时，所述确定单元根据与参考图像的距离选择列表0预测器和列表1预测器之一，并且通过使用所选择的预测器确定是否容易观测到块失真。

5.根据权利要求1所述的图像处理装置，其中，所述控制单元控制所述去块滤波处理的Bs值，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

6.根据权利要求5所述的图像处理装置，其中，所述控制单元将Bs值增加“+1”，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

7.根据权利要求5所述的图像处理装置，其中，所述控制单元将Bs值调整为4，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

8.根据权利要求1所述的图像处理装置，其中，所述控制单元控制所述去块滤波处理的阈值α和β，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

9.根据权利要求8所述的图像处理装置，其中，所述控制单元校正要在计算阈值α和β中使用的量化参数，以使得在针对被确定为容易观测到块失真的当前图像的去块滤波处理中设置更高强度。

10.一种在图像处理装置中实现的图像处理方法，

所述图像处理方法包括：

当在产生正被处理的当前图像的预测图像中使用的预测器不同于对应于位于与所述当前图像相邻的相邻图像的预测器时，确定容易观测到块失真，所述确定是由确定单元执行的；

当所述确定单元确定容易观测到块失真时，执行控制以使得在针对所述当前图像的去块滤波处理中设置更高强度，所述控制是由控制单元执行的；以及

在所述控制单元的控制下，对所述当前图像执行去块滤波处理，所述去块滤波处理是由滤波单元执行的。

Images