CN102907097B - 滤波方法、动态图像编码装置、动态图像解码装置和动态图像编码解码装置 - Google Patents

滤波方法、动态图像编码装置、动态图像解码装置和动态图像编码解码装置 Download PDF

Info

Publication number
CN102907097B
CN102907097B CN201280000774.3A CN201280000774A CN102907097B CN 102907097 B CN102907097 B CN 102907097B CN 201280000774 A CN201280000774 A CN 201280000774A CN 102907097 B CN102907097 B CN 102907097B
Authority
CN
China
Prior art keywords
filtering
block
ipcm block
image
ipcm
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201280000774.3A
Other languages
English (en)
Other versions
CN102907097A (zh
Inventor
林宗顺
V·瓦哈达尼亚
乃苏孟德
西孝启
柴原阳司
笹井寿郎
杉尾敏康
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tagivan II LLC
Original Assignee
Tagivan II LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=46652730&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=CN102907097(B) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Tagivan II LLC filed Critical Tagivan II LLC
Priority to CN201510828833.1A priority Critical patent/CN105245904B/zh
Priority to CN201510828803.0A priority patent/CN105245903B/zh
Publication of CN102907097A publication Critical patent/CN102907097A/zh
Application granted granted Critical
Publication of CN102907097B publication Critical patent/CN102907097B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明的滤波方法对图像中包含的多个块进行滤波处理,该滤波方法包括以下步骤:判定步骤(S201和S202),判定所述多个块的每个块是否是IPCM块;滤波步骤(S204),通过对所述多个块中的不是IPCM块的非IPCM块进行滤波处理,生成已滤波数据;以及输出步骤(S204和S205),输出所述已滤波数据作为所述非IPCM块的像素值,输出未进行滤波处理的该IPCM块的像素值作为所述IPCM块的像素值。

Description

滤波方法、动态图像编码装置、动态图像解码装置和动态图像编码解码装置
技术领域
本发明涉及滤波方法、动态图像编码装置、动态图像解码装置和动态图像编码解码装置。
背景技术
IPCM(IntraPulseCodeModulation/帧内脉冲编码调制)块是具有利用原来图像的亮度和色度的样本示出编码流中包含的信号的、未压缩的动态图像或图像样本的块。在熵编码部对图像样本的块进行编码时,在生成比减少的比特数多的比特数的情况下使用这些块。即,在IPCM块中,像素值未被压缩,直接使用原来图像的像素值。该IPCM块被导入H.264/AVC的动态图像压缩标准中。
在H.264动态图像标准中,在IPCM块被编码为编码流的情况下,该IPCM块被编码为未压缩数据。而且,省略这些块的解码处理。但是,依然对容易成为使这些块的画质降低的要因的块边界进行后处理(包括解块/滤波处理等滤波处理)(例如参照非专利文献1)。
现有技术文献
非专利文献
非专利文献1:ISO/IEC14496-10“MPEG-4Part10AdvancedVideoCoding”
发明内容
发明要解决的课题
但是,在上述现有技术中,在IPCM块与非IPCM块的边界,对两个块进行滤波处理。这里,IPCM块是直接使用原来像素值的块。由此,存在由于进行滤波处理而使IPCM块的画质降低的课题。
因此,本发明的目的在于,提供能够抑制IPCM块的画质降低的滤波方法。
用于解决课题的手段
为了实现上述目的,本发明的一个方式的滤波方法对图像中包含的多个块进行滤波处理,其中,该滤波方法包括以下步骤:判定步骤,判定所述多个块的每个块是否是IPCM(IntraPulseCodeModulation)块;滤波步骤,通过对所述多个块中的不是IPCM块的非IPCM块进行滤波处理,生成已滤波数据;以及输出步骤,输出所述已滤波数据作为所述非IPCM块的像素值,输出未进行滤波处理的该IPCM块的像素值作为所述IPCM块的像素值。
由此,本发明的一个方式的滤波方法不对IPCM块进行滤波处理,所以,能够抑制IPCM块的画质降低。
并且,也可以是,在所述滤波步骤中,通过共同使用所述IPCM块的像素值和所述非IPCM块的像素值进行滤波处理,生成所述非IPCM块的已滤波数据。
并且,也可以是,所述滤波处理是解块/滤波处理,在所述滤波步骤中,通过对相互相邻的第一IPCM块和第一非IPCM块中的所述第一非IPCM块进行滤波处理,生成第一已滤波数据,在所述输出步骤中,输出所述第一已滤波数据作为所述第一非IPCM块的像素值,输出未进行滤波处理的该第一IPCM块的像素值作为所述第一IPCM块的像素值。
并且,也可以是,在所述滤波步骤中,仅对所述多个块中的所述非IPCM块进行滤波处理,不对所述IPCM块进行滤波处理。
并且,也可以是,在所述滤波步骤中,通过对全部所述多个块进行滤波处理,生成所述已滤波数据,在所述输出步骤中,将所述已滤波数据中的所述IPCM块的像素值置换为进行滤波处理之前的该IPCM块的像素值。
并且,本发明的一个方式的滤波方法对图像中包含的相互相邻的IPCM(IntraPulseCodeModulation)块与不是IPCM块的非IPCM块的边界进行滤波处理,其中,该滤波方法包括以下步骤:滤波强度设定步骤,对所述非IPCM块设定第一滤波强度,对所述IPCM块设定比所述第一滤波强度弱的第二滤波强度;以及滤波步骤,以所述第一滤波强度对所述非IPCM块进行滤波处理,以所述第二滤波强度对所述IPCM块进行滤波处理。
由此,本发明的一个方式的滤波方法能够针对IPCM块减弱滤波处理,所以,能够抑制IPCM块的画质降低。
并且,也可以是,所述第二滤波强度是表示不进行滤波处理的滤波强度。
由此,本发明的一个方式的滤波方法对IPCM块不进行滤波处理,所以,能够抑制IPCM块的画质降低。
并且,也可以是,所述第一滤波强度比所述非IPCM块是帧内编码的块的情况下所决定的滤波强度小。
另外,本发明不仅能够作为这种滤波方法而实现,还能够作为将滤波方法中包含的特征性步骤作为单元的滤波装置而实现,或者,还能够作为使计算机执行这种特征性步骤的程序而实现。而且,这种程序当然能够经由CD-ROM等非临时的计算机可读取的记录介质和因特网等传送介质进行流通。
进而,本发明能够作为包含这种滤波方法的动态图像编码方法或动态图像解码方法而实现。并且,本发明能够作为具有这种滤波装置的动态图像编码装置或动态图像解码装置而实现,或者能够作为包含动态图像编码装置和动态图像解码装置的动态图像编码解码装置而实现。并且,本发明能够作为实现这种滤波装置、动态图像编码装置或动态图像解码装置的功能的一部分或全部的半导体集成电路(LSI)而实现。
发明效果
如上所述,本发明能够提供能够抑制IPCM块的画质降低的滤波方法。
附图说明
图1是示出H.264方式的IPCM块与非IPCM块的块边界中的滤波强度的决定方法的图。
图2是H.264方式的块边界滤波处理的流程图。
图3是H.264方式的滤波强度的决定处理的流程图。
图4是示出本发明的实施方式1的滤波方法中的滤波强度的图。
图5是本发明的实施方式1的滤波方法的流程图。
图6是本发明的实施方式1的动态图像编码装置的框图。
图7A是示出本发明的实施方式1的块边界的一例的图。
图7B是示出本发明的实施方式1的块边界的一例的图。
图8A是示出本发明的实施方式1的滤波处理部的动作的图。
图8B是示出本发明的实施方式1的滤波处理部的动作的图。
图9是本发明的实施方式1的动态图像解码装置的框图。
图10A是示出本发明的实施方式1的滤波处理部的结构例的图。
图10B是示出本发明的实施方式1的滤波处理部的结构例的图。
图10C是示出本发明的实施方式1的滤波处理部的结构例的图。
图10D是示出本发明的实施方式1的滤波处理部的结构例的图。
图10E是示出本发明的实施方式1的滤波处理部的结构例的图。
图10F是示出本发明的实施方式1的滤波处理部的结构例的图。
图10G是示出本发明的实施方式1的滤波处理部的结构例的图。
图10H是示出本发明的实施方式1的滤波处理部的结构例的图。
图11是本发明的实施方式1的滤波方法的变形例的流程图。
图12是本发明的实施方式1的滤波强度的决定处理的流程图。
图13是示出本发明的实施方式1的滤波强度和块单位的图。
图14A是示出本发明的比较例的滤波接通标志的应用范围的图。
图14B是示出本发明的实施方式1的滤波接通标志的应用范围的图。
图15是实现内容分发服务的内容供给系统的整体结构图。
图16是数字广播用系统的整体结构图。
图17是表示电视机的结构例的模块图。
图18是表示对作为光盘的记录介质进行信息的读写的信息再现/记录部的结构例的模块图。
图19是表示作为光盘的记录介质的构造例的图。
图20A是表示便携电话的一例的图。
图20B是表示便携电话的结构例的模块图。
图21是表示复用数据的结构的图。
图22是示意地表示各流在复用数据中怎样被复用的图。
图23是更详细地表示在PES包序列中视频流怎样被保存的图。
图24是表示复用数据的TS包和源包的构造的图。
图25是表示PMT的数据结构的图。
图26是表示复用数据信息的内部结构的图。
图27是表示流属性信息的内部结构的图。
图28是表示识别影像数据的步骤的图。
图29是表示实现各实施方式的动态图像编码方法及动态图像解码方法的集成电路的结构例的模块图。
图30是表示切换驱动频率的结构的图。
图31是表示识别影像数据、切换驱动频率的步骤的图。
图32是表示将影像数据的标准与驱动频率建立了对应的查找表的一例的图。
图33A是表示将信号处理部的模块共用的结构的一例的图。
图33B是表示将信号处理部的模块共用的结构的另一例的图。
具体实施方式
下面,利用附图对本发明的实施方式进行详细说明。另外,以下说明的实施方式均示出本发明的优选的一个具体例。以下实施方式所示的数值、形状、材料、结构要素、结构要素的配置位置和连接方式、步骤、步骤的顺序等是一例,并不是限定本发明的意思。本发明由权利要求范围确定。由此,关于以下实施方式的结构要素中的、在示出本发明的最上位概念的独立权利要求中没有记载的结构要素,不是实现本发明的课题所必须的,但是,作为构成更加优选的方式的结构要素进行说明。
首先,在说明本发明的实施方式之前,对H.264的编码和解码方式的IPCM块与非IPCM块的边界中的像素间滤波(解块/滤波)处理进行说明。
图1是说明H.264的编码和解码方式的IPCM块(宏块)与非IPCM块(宏块)的边界中的像素间滤波的滤波强度的决定方法的概念的图。
图1示意地示出一个是非IPCM宏块(图左侧)、另一个是IPCM宏块(图右侧)的2个宏块间的边界。位于图1左侧的3个圆表示3个像素(典型情况下,从边界起依次被称为p0、p1、p2)。该左侧3个像素属于第一单位(编码单位块、以下为CU块)中的第一块(p块)。同时,这3个像素在比第一单位大的单位即宏块单位的块(以下为MB块)中属于非IPCM类型的第一宏块。
同样,位于图1右侧的3个圆表示3个像素(典型情况下,从边界起依次被称为q0、q1、q2)。该左侧3个像素属于第一单位中的第二块(q块)。同时,这3个像素在MB块中属于IPCM类型的第二宏块。
另外,以下将属于IPCM类型的宏块的CU块称为IPCM块,将属于非IPCM类型的宏块的CU块称为非IPCM块。即,非IPCM块是指不是IPCM块的块。
下面,对应用于该块边界(或比编码单位大的块单位的边界)中的像素q0、q1、p0和p1的滤波强度的决定方法进行说明。
在H.264的滤波方法(标准书(非专利文献)8.7节所记载的滤波方法)中,通常规定为,根据从第一宏块的量化参数QPp导出的值qPp与第二宏块的量化参数QPq的平均值,针对2个块的边界决定滤波强度。具体而言,使用标准书8-461式所示的以下的(式1)。
QPav=(QPp+QPq+1)>>1=>(QPp+1)>>1(式1)
该(式1)表示以下的运算。滤波强度被设计成,以吸收量化误差等为目的,量化参数的值越大,施加越强(平滑度越强)的滤波。
另外,图中,左侧的量化参数QPp是第一宏块(p侧的块)用的被编码的量化参数。另外,为了便于说明,这里,QP为与以滤波为目的而利用的值qP相同的意思。并且,右侧的量化参数QPq是本来应该应用于第二宏块(q侧的块)的量化参数。
这里,如H.264的标准书8.7.2节所记载的那样,IPCM块的量化参数qPq(图中QPq)的值被设为0。即,成为“Bothsidesfilteredwithweakstrength”。这意味着,关于作为2个块的边界的1个边界,对两个块应用相同滤波强度的滤波。这也意味着不能使2个块的滤波强度不同。即,在IPCM块与非IPCM块的边界,对两个块执行相同的滤波强度的滤波处理。
图2是说明H.264的标准书的8.7节“Deblockingfilterprocess”所记载的块边界滤波处理的概念的流程图。
关于H.264的滤波,该流程图大致说明以下3种。
(1)8.7.2.1节的滤波强度(bS)决定顺序
步骤S101是与8.7.2.1节所记载的“Deviationprocessforthelumacontentdependentboundaryfilteringstrength”进程对应的步骤。该进程根据块类型等决定针对1个块边界的滤波处理的滤波强度。这里,滤波强度被分类为从滤波强度强(bS=4)到不进行滤波(bS=0)。这点在图3中说明。
(2)与IPCM块有关的量化参数qPz=0的设定进程
步骤S102~S107是图1中说明的滤波强度决定用的量化参数qP的值的设定处理。针对通常的非IPCM块(步骤S102或S105:“否”),将该块所属的宏块的量化参数QP[i](i为0或1中的任意一方)设定为滤波强度决定用的量化参数qP[i](步骤S103和S106)。另一方面,在对象块为IPCM块的情况下(S102或S105:“是”),将IPCM块的量化参数qP设为0(步骤S104和S107)。
接着,在步骤S108中,根据上述(式1)计算qPav。
(3)在两个块中共用1个bS(或filterSampleFlag)
下面,说明在隔着边界的2个块中共同应用所决定的滤波强度(或不进行滤波的判定标志)(同一值)的情况。
首先,在上述步骤S108后,使用上述标准书中的式8-462~式8-467进行运算。具体而言,(1)导出用于对步骤S101中设定的滤波强度进行微调整的索引,(2)导出边缘判定用的阈值。
然后,对两个块设定通过这些处理而确定的滤波强度(S109)。具体而言,在滤波强度bS为1~4的任意一方的情况下,对2个块应用通过相同bS的导出方法导出的值。例如,在滤波强度bS=4的情况下,第一块的像素p的值由上述标准书的式(8-486~487)导出。并且,使用与在像素p的值的导出中使用的滤波强度相同的滤波强度导出第二块中包含的像素q的值。进而,最终,为了应对块边界实际为边缘的情况等,进行是否进行滤波的判定(fileterSamplesFlag(也称为滤波执行标志)的值的导出)。具体而言,通过步骤S109中导出的2个阈值(two_threths(α、β))与p和q的实际像素值的比较,进行该判定(参照上述标准书的式(8-468))。但是,如上所述,不论是滤波强度bS,还是滤波执行标志,均无法在2个块之间变更它们的值(或有无执行)。
即,在H.264中,在滤波进程中试着结束的情况下,无法实现适于IPCM的处理。
图3是示出上述标准书的8.7.2.1节所记载的、对位于2个宏块的边界的像素应用的滤波强度(bS)的决定顺序(判定顺序)的流程图。该流程图说明图2所示的步骤S101的判定顺序,基于标准书8.7.2.1节的判定流程。
首先,判定第一块的像素p0和第二块的像素q0所形成的边界是否也相当于宏块的边界(S121)。换言之,判定p0和q0是否位于宏块边界。
在处理对象的块边界不是宏块边界的情况下(S121:“否”),滤波强度(bS)被决定为比N(=4)小的值即3、2、1、0中的任意一方(S124)。
另一方面,在处理对象的块边界是宏块边界的情况下(S121:“是”),判定p0和q0中的一方(或双方)是否属于帧内预测模式的宏块(S122)。
在两个块不属于帧内预测模式的宏块的情况下(S122:“否”),执行其他判定条件的判定(S125)。
另一方面,在至少一个块属于帧内预测模式的宏块的情况下(S122:“是”),(一定)没有其他判定条件,滤波强度被设定为表示最强强度的bS=4(S123)。
这样,在现有的滤波方法中,在滤波进程的内部处理中,无法对隔着1个边界的2个块执行不同的处理(滤波强度和有无应用滤波)。并且,虽然在标准中已经考虑到着眼于IPCM的滤波强度的决定为止,但是,在一个块是IPCM块、另一个块是非IPCM块的情况下,无法进行以原来的值输出IPCM块的像素值的控制。
IPCM块是包含忠实表示没有编码损失的“原图像”的像素值的块。因此,在滤波进程内,优选能够控制将IPCM块作为一方的边界中的滤波处理或针对IPCM块的滤波的应用。
(实施方式1)
下面,对本发明的实施方式1的滤波方法进行说明。
图4是示出应用本实施方式的滤波方法的条件和像素间滤波的滤波强度的决定方法的概念的图。与图1同样,图中的左方3个圆表示第一块中包含的像素。另外,关于其他部分,也省略与图1相同的要素的说明。
本实施方式的滤波方法对图像中包含的多个块进行滤波处理。典型情况下,该滤波方法应用于对相邻的块的边界进行的解块/滤波处理。另外,下面叙述了在解块/滤波处理中应用本发明的例子,但是,本发明也能够应用于解块/滤波处理以外的环路内滤波处理(AdaptiveLoopFilter)。
本实施方式的滤波方法与图1中说明的滤波方法的不同之处在于以下方面。
首先,作为图中右侧的IPCM块侧的3个像素的像素值,输出未滤波处理的像素值。
并且,在第一块和第二块中以使滤波的相关处理不同的方式进行控制。例如,隔着图中的1个边界对一个(左侧)块应用滤波,对另一个(右侧)块不应用滤波。这样,进行在块间对滤波处理设置差异的控制。
接着,仅使用该左侧的块的量化参数QPp导出应用滤波的左侧的块的滤波强度。即,不使用右侧的宏块的量化参数QPq、或其他作为替代品的固定值(现有例中的0)而导出左侧的非IPCM块的滤波强度。
另外,关于图2所示的H.264中的IPCM的判定,判定是否是IPCM宏块,但是,利用大小可变的预测单位(PredictionUnit单位:PU单位)进行该判定。即,下面,IPCM块是指属于IPCM类型的PU块的块,非IPCM块是指属于不是IPCM类型的PU块的块。
下面,利用附图对这些动作进行说明。
图5是示出本实施方式的滤波方法的处理顺序的流程图。
本实施方式的滤波方法作为编码进程或解码进程的一环来执行。因此,通过后述图6所示的动态图像编码装置或图9所示的动态图像解码装置内的编码环路或解码环路内的滤波处理部、以及对该滤波进行控制的控制部(ControlUnit),执行该滤波方法。
首先,控制部判定构成边界的2个块中的任意一方的PU块的类型是否是IPCM(S201)。例如,在图4所示的例子的情况下,右侧的PU块是IPCM块,所以,判定为一方是IPCM类型。具体而言,控制部使用宏块类型或运动保障块大小等的图像数据的属性参数来执行该判定。
在2个块中的至少一方是IPCM块的情况下(S201:“是”),控制部判定2个块中的另一个块是否是IPCM块(S202)。例如,在图4所示的图的情况下,右侧的块是IPCM块。因此,控制部判定另一个块即左侧的块是否是IPCM块。
即,在步骤S201和S202中,控制部判定多个块中的每一个块是IPCM块还是非IPCM块。具体而言,控制部判定(1)2个块均为非IPCM块(S201:“否”)、还是(2)2个块均为IPCM块(S202:“是”)、还是(3)一方是IPCM块、另一方是非IPCM块(S202:“否”)。
在另一个块是IPCM块的情况下(S202:“是”)、即两个块是IPCM块的情况下,不对两个块(第一块和第二块的双方)的像素p和q进行滤波处理(S203)。
另一方面,在另一个块不是IPCM块的情况下(S202:“否”)、即仅一个块是IPCM块、另一个块是非IPCM块的情况下,控制部通过控制滤波处理部,执行步骤S204和S205的滤波处理。
首先,滤波处理部以规定强度对非IPCM块中包含的像素(例如图4的左侧的3个像素)执行滤波处理,输出滤波处理后的像素值作为非IPCM块的像素值(S204)。并且,在该滤波处理中,不仅使用非IPCM块的像素值,还使用IPCM块的像素值。具体而言,滤波处理部通过对非IPCM块的像素值和IPCM块的像素值进行平滑化,计算滤波后的非IPCM块的像素值。
并且,滤波处理部对IPCM块中包含的像素(q侧的像素q0、q1…)输出未滤波处理的像素值(S205)。这里,输出未滤波处理的像素值的情况假设以下2种情况。
第一方法是如下方法:对非IPCM块进行滤波处理,不对IPCM块进行滤波处理而输出原来的像素值。
第二方法是如下方法:对非IPCM块和IPCM块的双方进行滤波处理,将滤波处理后的像素值中的IPCM块的像素值置换为滤波处理前的原来的像素值,输出置换后的像素值。在任意情况下,所输出的IPCM块的像素值是进行滤波处理之前的原来的像素值。
另外,上述滤波方法也可以对一个块和另一个块的滤波手法(滤波强度、有无滤波或应用像素数)设置差异来进行控制。
另外,关于该步骤S204和S205的滤波处理(特别是控制部和滤波处理部的动作),使用图6~图8B在后面进行说明。
并且,在步骤S201中两个块为非IPCM块的情况下(S201:“否”),控制部进行通常的滤波动作(S206)。即,控制部以规定滤波强度对两个块执行滤波处理。
下面,对使用上述滤波方法的动态图像编码装置进行说明。
图6是本实施方式的动态图像编码装置100的功能框图。图6所示的动态图像编码装置100通过对输入图像信号120进行编码,生成编码比特流132。该动态图像编码装置100具有减法器101、正交变换部102、量化部103、逆量化部104、逆正交变换部105、加法器106、滤波处理部115、存储器109、预测部110、可变长度编码部111、选择部112、控制部113。
减法器101通过计算输入图像信号120与预测图像信号130的差分,生成残差信号121。正交变换部102通过对残差信号121进行正交变换,生成变换系数122。量化部103通过对变换系数122进行量化,生成量化系数123。
逆量化部104通过对量化系数123进行逆量化,生成变换系数124。逆正交变换部105通过对变换系数124进行逆正交变换,生成解码残差信号125。加法器106通过对解码残差信号125和预测图像信号130进行相加,生成解码图像信号126。
滤波处理部115通过对解码图像信号126实施滤波处理,生成图像信号128,将所生成的图像信号128存储在存储器109中。
预测部110使用存储在存储器109中的图像信号128,选择性地进行帧内预测处理和帧间预测处理,从而生成预测图像信号130。
可变长度编码部111通过对量化系数123进行可变长度编码(熵编码),生成编码信号131。
在对象块是IPCM块的情况下,选择部112选择输入图像信号120,在对象块是非IPCM块的情况下,选择部112选择编码信号131,输出所选择出的信号作为编码比特流132。
控制部113对滤波处理部115和选择部112进行控制。
另外,正交变换部102和量化部103是通过对残差信号实施变换处理和量化处理而生成量化系数的变换和量化部的一例。并且,可变长度编码部111是通过对量化系数进行编码而生成编码信号的编码部的一例。并且,逆量化部104和逆正交变换部105是通过对量化系数实施逆量化处理和逆变换处理而生成解码残差信号的逆量化和逆变换部的一例。
这里,在本实施方式的动态图像编码装置100中,特别主要的结构是控制部113和滤波处理部115。
如上所述,本实施方式的滤波方法作为编码和解码进程的一部分来执行。因此,滤波处理部115配置在保持参照图像等的存储器109的前级。而且,滤波处理部115将执行滤波处理后的结果(或不执行滤波的结果)存储在环路内的存储器109中。关于这点,该滤波处理部115与被称为Loop滤波的H.264中的滤波相同。
并且,滤波处理部115具有2个输入系统。第一个输入信号是表示非IPCM块的像素值的解码图像信号126,第二个输入信号是表示IPCM块的像素值的输入图像信号120。这里,解码图像信号126是实施变换处理、量化处理、逆量化处理和逆变换处理后的被复原的编码图像信号。并且,输入图像信号120是不经由编码处理和解码处理的原来的图像信号。
根据控制部113的控制,滤波处理部115针对IPCM块的像素输出不进行滤波处理的原来的像素值,针对非IPCM块的像素进行滤波处理,输出滤波处理后的值。
该滤波处理部115具有滤波部107和选择部108。滤波部107通过对解码图像信号126实施滤波处理,生成图像信号127。在对象块是IPCM块的情况下,选择部108选择图像信号127,在对象块是非IPCM块的情况下,选择部108选择输入图像信号120,输出所选择出的信号作为图像信号128。
图7A和图7B是例示2个块的边界的像素的图。在图7A所示的例子中,2个块在水平方向上相邻。这里,将包含左侧的p0~pn的像素的块称为第一块。该第一块是非IPCM块。并且,将另一个块称为第二块。该第二块是IPCM块。另外,如图7B所示,在IPCM块和非IPCM块在垂直方向上相邻的情况下,当然也能够应用本实施方式的滤波处理。
下面,对滤波处理部115的动作的具体例进行说明。
图8A和图8B是示出对图7A中例示的2个块中包含的像素p[i]和q[j]实施滤波处理时的滤波处理部115的动作的图。即,第一块属于非IPCM块,第二块属于IPCM块。
滤波处理部115根据来自控制部113的控制信号进行图8A和图8B所示的动作。
图8A是示出针对非IPCM块的滤波处理部115的动作的图。另外,该动作相当于图5所示的步骤S204。即,滤波处理部115使用第一块的像素值(p0、p1…)和第二块的像素值(q0、q1…)的两方的像素值,计算与第一块对应的像素的输出结果pf0、pf1…。
图8B是示出针对IPCM块的滤波处理部115的动作的图。另外,该动作相当于图5所示的步骤S205。即,滤波处理部115针对第二块的像素,输出与所输入的q0、q1、q2的值相同的值(未滤波处理的像素值)。
下面,对使用上述滤波方法的动态图像解码装置进行说明。
图9是本实施方式的动态图像解码装置的功能框图。
图9所示的动态图像解码装置200通过对编码比特流232进行解码,生成输出图像信号220。这里,编码比特流232例如是由上述动态图像编码装置100生成的编码比特流132。
该动态图像解码装置200具有逆量化部204、逆正交变换部205、加法器206、滤波处理部215、存储器209、预测部210、可变长度解码部211、分配部212、控制部213。
在对象块是IPCM块的情况下,分配部212将编码比特流232供给到滤波处理部215,在对象块是非IPCM块的情况下,分配部212将编码比特流232供给到可变长度解码部211。
可变长度解码部211通过对编码比特流232进行可变长度解码(熵解码),生成量化系数223。
逆量化部204通过对量化系数223进行逆量化,生成变换系数224。逆正交变换部205通过对变换系数224进行逆正交变换,生成解码残差信号225。加法器206通过对解码残差信号225和预测图像信号230进行相加,生成解码图像信号226。
滤波处理部215通过对解码图像信号226实施滤波处理,生成图像信号228,将所生成的图像信号228存储在存储器209中。
该滤波处理部215具有滤波部207和选择部208。滤波部207通过对解码图像信号226实施滤波处理,生成图像信号227。在对象块是IPCM块的情况下,选择部208选择图像信号227,在对象块是非IPCM块的情况下,选择部208选择编码比特流232,输出所选择出的信号作为图像信号228。
并且,输出存储在存储器209中的图像信号228作为输出图像信号220。
预测部210使用存储在存储器209中的图像信号228,选择性地进行帧内预测处理和帧间预测处理,从而生成预测图像信号230。
控制部213对滤波处理部215和分配部212进行控制。
另外,可变长度解码部211是通过对编码比特流进行解码而生成量化系数的解码部的一例。逆量化部204和逆正交变换部205是通过对量化系数实施逆量化处理和逆变换处理而生成解码残差信号的逆量化和逆变换部的一例。
这里,滤波处理部215的动作与动态图像编码装置100的滤波处理部115的动作相同。另外,控制部213与动态图像编码装置100所具有的控制部113的不同之处在于,根据所输入的码元串即编码比特流232判定第一块或第二块的PU单位的类型是否是IPCM,其他功能相同。
下面,对上述滤波处理部115和215的变形例的结构进行说明。
图10A~图10H是示出本实施方式的滤波处理部115和215的滤波的输入输出关系可取的方式的图。
如图10A所示,滤波部107和207可以包含串联连续的多个滤波部301和302。例如第一个滤波部301和第二个滤波部302可以进行相互不同的处理。该情况下,例如,针对IPCM块,全部滤波处理被旁通。
如图10B所示,滤波部311可以使用两个输入信号进行滤波处理。该情况下,选择部312针对IPCM块输出未滤波处理的值,针对非IPCM块输出由滤波部311进行滤波处理后的值。
如图10C所示,可以对IPCM块和非IPCM块进行不同的滤波处理。例如,不同的滤波处理是指滤波强度不同的滤波处理。并且,例如,可以使针对IPCM块的滤波强度比针对非IPCM块的滤波强度弱。
具体而言,在对象块是非IPCM块的情况下,分配部321将输入信号输出到滤波部322,在对象块是IPCM块的情况下,分配部321将输入信号输出到滤波部323。这里,输入信号均包含上述解码图像信号126和输入图像信号120。滤波部322通过使用输入信号进行第一滤波强度的滤波处理,生成对象块的像素值。滤波部323通过进行比第一滤波强度弱的第二滤波强度的滤波处理,生成对象块的像素值。在对象块是非IPCM块的情况下,选择部324输出由滤波部322进行滤波处理后的对象块的像素值,在对象块是IPCM块的情况下,选择部324输出由滤波部323进行滤波处理后的对象块的像素值。
如图10D所示,最初也可以不进行针对IPCM块的处理。具体而言,在对象块是非IPCM块的情况下,分配部331将输入信号输出到滤波部332,在对象块是IPCM块的情况下,分配部331将输入信号输出到选择部333。在对象块是非IPCM块的情况下,选择部333输出由滤波部332进行滤波处理后的对象块的像素值,在对象块是IPCM块的情况下,选择部333输出来自分配部331的信号中的对象块的像素值。
如图10E所示,也可以不切换滤波部的输出侧,而切换输入侧。进而,针对IPCM块和非IPCM块的滤波部的级数可以不同。具体而言,在对象块是非IPCM块的情况下,分配部341将输入信号输出到滤波部342,在对象块是IPCM块的情况下,分配部341将输入信号输出到滤波部344。滤波部342使用输入信号进行滤波处理。滤波部343使用由滤波部342进行滤波处理后的信号进行滤波处理,输出滤波处理后的对象块的像素值。滤波部344使用输入信号进行滤波处理,输出滤波处理后的对象块的像素值。另外,滤波部344进行的滤波处理与滤波部342进行的滤波处理或滤波部343进行的滤波处理可以相同,也可以不同。
如图10F所示,也可以切换滤波部的输出侧。具体而言,滤波部351使用第一输入信号进行滤波处理。滤波部352使用由滤波部351进行滤波处理后的信号进行滤波处理,输出滤波处理后的对象块的像素值。滤波部353使用第二输入信号进行滤波处理,输出滤波处理后的对象块的像素值。在对象块是非IPCM块的情况下,选择部354输出由滤波部352进行滤波处理后的对象块的像素值,在对象块是IPCM块的情况下,选择部354输出由滤波部353进行滤波处理后的对象块的像素值。
另外,输出未滤波的值的情况,包括将进行了滤波的结果的像素值pf置换为原来的输入值p并输出的情况。
如图10G所示,使用由2个系统中的一方进行滤波处理后的信号,进行另一方的滤波处理。具体而言,滤波部361使用第二输入信号进行滤波处理。滤波部362使用第一输入信号和由滤波部361进行滤波处理后的信号进行滤波处理。在对象块是非IPCM块的情况下,选择部363输出由滤波部362进行滤波处理后的对象块的像素值,在对象块是IPCM块的情况下,选择部363输出由滤波部361进行滤波处理后的对象块的像素值。另外,也可以在对象块是IPCM块的情况下,选择部363输出由滤波部362进行滤波处理后的对象块的像素值,在对象块是非IPCM块的情况下,选择部363输出由滤波部361进行滤波处理后的对象块的像素值。
如图10H所示,也可以将一次性存储在存储器373中的值用作输入。具体而言,选择部371选择输入信号和保持在存储器373中的信号中的一方。滤波部372使用由选择部371选择出的信号进行滤波处理。
另外,这些是例示,作为结果,本实施方式的滤波处理部115只要能够实现“针对IPCM块的像素输出不进行滤波处理的值”功能即可。
下面,对本实施方式的滤波方法的变形例进行说明。图11是示出本实施方式的滤波方法的变形例的动作的流程图。
在上述说明中,在图5所示的步骤S204和S205中,对非IPCM块应用滤波,对IPCM块输出未滤波处理的像素值,但是,它们也可以由以下所示的步骤来实现。即,也可以代替图5所示的步骤S204和S205而进行图11所示的处理。
首先,取得相互相邻的第一块(块[0])和第二块(块y[1])的像素值(S221)。这里,例如,第一块是非IPCM块,第二块是IPCM块。
接着,导出应用于第一块的滤波强度bS[0]和应用于第二块的滤波强度bS[1](S222和S223)。这里,滤波强度bS[0]和滤波强度bS[1]表示不同的强度。另外,在现有技术中,仅对1个块边界设定1个滤波强度。例如,在本实施方式中,针对IPCM块的滤波强度被设定为比针对非IPCM块的滤波强度弱。
接着,以滤波强度bS[0]对两个块进行滤波处理,输出滤波处理后的第一块的像素值(S224)。接着,以滤波强度bS[1]对两个块进行滤波处理,输出滤波处理后的第二块的像素值(S225)。
这里,通过设滤波强度的值为0,能够控制是否进行滤波处理。换言之,可以针对各个块导出用于控制是否进行滤波处理的标志(filterSamplesFlag)。
如上所述,本实施方式的滤波方法能够以第一滤波强度对一个块执行滤波处理,并以与第一滤波强度不同的第二滤波强度对另一个块执行滤波处理。并且,该滤波方法能够在滤波进程内实现这种处理。
图12是本实施方式的滤波方法的其他变形例的流程图。图12所示的处理对图3所示的处理追加步骤S401。
为了对判定为帧内预测的块的IPCM块赋予适当的滤波强度,追加该步骤S401。在步骤S401中,判定第一块和第二块中的至少一方是否是IPCM块。在第一块和第二块中的至少一方是IPCM块的情况下(S401:“是”),滤波强度(bS)被决定为比N(=4)小的值即3、2、1、0中的任意一方(S124)。并且,在第一块和第二块的双方是非IPCM块的情况下(S401:“否”),滤波强度被设定为表示最强强度的bS=N(=4)(S123)。
在图3所示的滤波方法的情况下,在一个块或两个块是帧内预测模式的宏块的情况下(S122:“是”),没有其他判定条件,滤波强度本身一定被设定为表示最强强度的bS=4。
另一方面,在图12所示的本实施方式的变形例中,即使在一个块或两个块是帧内预测模式的宏块的情况下(S122:“是”),在一个块是IPCM块的情况下(S401:“是”),也设定比步骤S123中设定的滤波强度(bS=4)弱的滤波强度(bS=0~3)。
图13是示出由本实施方式的滤波方法决定的滤波强度和决定边界的块单位的图。
如图13所示,在宏块MB[0]是帧间预测模式的宏块、宏块MB[1]是帧内预测模式的宏块的情况下(S122:“是”),在第一和第二块均为非IPCM块的情况下(S401:“否”),对两个块设定bS=4(S123)。
另一方面,在PU块[0]为非IPCM模式、PU块[1]为IPCM模式的情况下,即CU块[0]是非IPCM块、CU块[1]是IPCM块(S401:“是”),所以,对CU块[0]和CU块[1]设定bS=0~3中的任意一方。在该例中,对IPCM块即CU块[1]设定bS=0,对非IPCM块即CU块[0]设定bS=1~3中的任意一方。
图14A和图14B是用于说明通过本实施方式的IPCM块的处理而使滤波接通标志的应用范围扩张的状况的图。作为比较例,图14A示出未应用本实施方式的手法的情况。图14B示出应用本实施方式的手法的情况。
如图14B所示,通过使用本实施方式的滤波方法,能够对滤波接通标志的应用范围进行扩张。
如上所述,在本实施方式的滤波方法中,滤波处理部或控制部在环路内滤波的处理中将“IPCM块不进行滤波”作为判定的暗示性码元解释的规则。由此,如图14A和图14B所示,能够针对码元串,在更大的范围内指定滤波是使能(enable)还是禁止(disable)。由此,本实施方式的滤波方法能够削减比特量。
以上对本发明的实施方式的滤波方法、动态图像编码装置和动态图像解码装置进行了说明,但是,本发明不限于该实施方式。
例如,可以对上述实施方式的滤波方法、动态图像编码装置和动态图像解码装置、以及它们的变形例的功能中的至少一部分进行组合。
并且,框图中的功能块的分割是一例,可以将多个功能块作为一个功能块来实现,或者将一个功能块分割成多个功能块,或者将一部分功能转移到其他功能块。并且,也可以由单一的硬件或软件以并行或时间分割的方式对具有类似功能的多个功能块的功能进行处理。
并且,执行上述滤波方法中包含的多个步骤的顺序是为了具体说明本发明而例示的,也可以是上述以外的顺序。并且,也可以与其他步骤同时(并行)执行上述步骤的一部分。
例如,图5所示的步骤S201和S202的顺序不限于该顺序。即,作为结果,在“隔着边界的2个块中的一个块包含在IPCM块中、另一个块不包含在IPCM块中”的情况下,执行步骤S204和S205的处理即可。并且,步骤SS204和S205的顺序也可以是任意的。
同样,图11所示的步骤S222~S225的顺序也不限于该顺序。具体而言,只要步骤S224在步骤S222之后、步骤S225在步骤S223之后即可,步骤S222~S225的顺序可以是任意的。
(实施方式2)
通过将用来实现上述各实施方式所示的动态图像编码方法或动态图像解码方法的结构的程序记录到存储介质中,能够将上述各实施方式所示的处理在独立的计算机系统中简单地实施。存储介质是磁盘、光盘、光磁盘、IC卡、半导体存储器等,只要是能够记录程序的介质就可以。
进而,这里说明在上述各实施方式中示出的动态图像编码方法(图像编码方法)及动态图像解码方法(图像解码方法)的应用例和使用它的系统。该系统的特征在于,具有由使用图像编码方法的图像编码装置及使用图像解码方法的图像解码装置构成的图像编码解码装置。关于系统的其他结构,可以根据情况而适当变更。
图15是表示实现内容分发服务的内容供给系统ex100的整体结构的图。将通信服务的提供区划分为希望的大小,在各小区内分别设置有作为固定无线站的基站ex106、ex107、ex108、ex109、ex110。
该内容供给系统ex100在因特网ex101上经由因特网服务提供商ex102及电话网ex104、及基站ex107~ex110连接着计算机ex111、PDA(PersonalDigitalAssistant)ex112、照相机ex113、便携电话ex114、游戏机ex115等的各设备。
但是,内容供给系统ex100并不限定于图15那样的结构,也可以将某些要素组合连接。此外,也可以不经由作为固定无线站的基站ex107~ex110将各设备直接连接在电话网ex104上。此外,也可以将各设备经由近距离无线等直接相互连接。
照相机ex113是能够进行数字摄像机等的动态图像摄影的设备,照相机ex116是能够进行数字照相机等的静止图像摄影、动态图像摄影的设备。此外,便携电话ex114是GSM(GlobalSystemforMobileCommunications)方式、CDMA(CodeDivisionMultipleAccess)方式、W-CDMA(Wideband-CodeDivisionMultipleAccess)方式、或LTE(LongTermEvolution)方式、HSPA(HighSpeedPacketAccess)的便携电话机、或PHS(PersonalHandyphoneSystem)等,是哪种都可以。
在内容供给系统ex100中,通过将照相机ex113等经由基站ex109、电话网ex104连接在流媒体服务器ex103上,能够进行现场分发等。在现场分发中,对用户使用照相机ex113摄影的内容(例如音乐会现场的影像等)如在上述各实施方式中说明那样进行编码处理(即,作为本发明的一个方式的图像编码装置发挥作用),向流媒体服务器ex103发送。另一方面,流媒体服务器ex103将发送来的内容数据对有请求的客户端进行流分发。作为客户端,有能够将上述编码处理后的数据解码的计算机ex111、PDAex112、照相机ex113、便携电话ex114、游戏机ex115等。在接收到分发的数据的各设备中,将接收到的数据解码处理而再现(即,作为本发明的一个方式的图像解码装置发挥作用)。
另外,摄影的数据的编码处理既可以由照相机ex113进行,也可以由进行数据的发送处理的流媒体服务器ex103进行,也可以相互分担进行。同样,分发的数据的解码处理既可以由客户端进行,也可以由流媒体服务器ex103进行,也可以相互分担进行。此外,并不限于照相机ex113,也可以将由照相机ex116摄影的静止图像及/或动态图像数据经由计算机ex111向流媒体服务器ex103发送。此情况下的编码处理由照相机ex116、计算机ex111、流媒体服务器ex103的哪个进行都可以,也可以相互分担进行。
此外,这些编码解码处理一般在计算机ex111或各设备具有的LSIex500中处理。LSIex500既可以是单芯片,也可以是由多个芯片构成的结构。另外,也可以将动态图像编码解码用的软件装入到能够由计算机ex111等读取的某些记录介质(CD-ROM、软盘、硬盘等)中、使用该软件进行编码解码处理。进而,在便携电话ex114是带有照相机的情况下,也可以将由该照相机取得的动态图像数据发送。此时的动态图像数据是由便携电话ex114具有的LSIex500编码处理的数据。
此外,也可以是,流媒体服务器ex103是多个服务器或多个计算机,是将数据分散处理、记录、及分发的。
如以上这样,在内容供给系统ex100中,客户端能够接收编码的数据而再现。这样,在内容供给系统ex100中,客户端能够将用户发送的信息实时地接收、解码、再现,即使是没有特别的权利或设备的用户也能够实现个人广播。
另外,并不限定于内容供给系统ex100的例子,如图16所示,在数字广播用系统ex200中也能够装入上述实施方式的至少动态图像编码装置(图像编码装置)或动态图像解码装置(图像解码装置)的某个。具体而言,在广播站ex201中,将对影像数据复用了音乐数据等而得到的复用数据经由电波向通信或广播卫星ex202传送。该影像数据是通过上述各实施方式中说明的动态图像编码方法编码后的数据(即,通过本发明的一个方式的图像编码装置编码后的数据)。接受到该数据的广播卫星ex202发出广播用的电波,能够对该电波进行卫星广播接收的家庭的天线ex204接收该电波,通过电视机(接收机)ex300或机顶盒(STB)ex217等的装置将接收到的复用数据解码并将其再现(即,作为本发明的一个方式的图像解码装置发挥作用)。
此外,可以在将记录在DVD、BD等的记录介质ex215中的复用数据读取并解码、或将影像数据编码再根据情况与音乐信号复用而写入记录介质ex215中的读取器/记录器ex218中也能够安装上述各实施方式所示的动态图像解码装置或动态图像编码装置。在此情况下,可以将再现的影像信号显示在监视器ex219上,通过记录有复用数据的记录介质ex215在其他装置或系统中能够再现影像信号。此外,也可以在连接在有线电视用的线缆ex203或卫星/地面波广播的天线ex204上的机顶盒ex217内安装动态图像解码装置,将其用电视机的监视器ex219显示。此时,也可以不是在机顶盒、而在电视机内装入动态图像解码装置。
图17是表示使用在上述各实施方式中说明的动态图像解码方法及动态图像编码方法的电视机(接收机)ex300的图。电视机ex300具备经由接收上述广播的天线ex204或线缆ex203等取得或者输出对影像数据复用了声音数据的复用数据的调谐器ex301、将接收到的复用数据解调或调制为向外部发送的编码数据的调制/解调部ex302、和将解调后的复用数据分离为影像数据、声音数据或将在信号处理不ex306中编码的影像数据、声音数据复用的复用/分离部ex303。
此外,电视机ex300具备:具有将声音数据、影像数据分别解码、或将各自的信息编码的声音信号处理部ex304和影像信号处理部ex305(即,作为本发明的一个方式的图像编码装置或图像解码装置发挥作用)的信号处理部ex306;具有将解码后的声音信号输出的扬声器ex307及显示解码后的影像信号的显示器等的显示部ex308的输出部ex309。进而,电视机ex300具备具有受理用户操作的输入的操作输入部ex312等的接口部ex317。进而,电视机ex300具有合并控制各部的控制部ex310、对各部供给电力的电源电路部ex311。接口部ex317也可以除了操作输入部ex312以外,还具有与读取器/记录器ex218等的外部设备连接的桥接部ex313、用来能够安装SD卡等的记录介质ex216的插槽部ex314、用来与硬盘等的外部记录介质连接的驱动器ex315、与电话网连接的调制解调器ex316等。另外,记录介质ex216是能够通过收存的非易失性/易失性的半导体存储元件电气地进行信息的记录的结构。电视机ex300的各部经由同步总线相互连接。
首先,对电视机ex300将通过天线ex204等从外部取得的复用数据解码、再现的结构进行说明。电视机ex300接受来自遥控器ex220等的用户操作,基于具有CPU等的控制部ex310的控制,将由调制/解调部ex302解调的复用数据用复用/分离部ex303分离。进而,电视机ex300将分离的声音数据用声音信号处理部ex304解码,将分离的影像数据用影像信号处理部ex305使用在上述各实施方式中说明的解码方法解码。将解码后的声音信号、影像信号分别从输出部ex309朝向外部输出。在输出时,可以暂时将这些信号储存到缓冲器ex318、ex319等中,以使声音信号和影像信号同步再现。此外,电视机ex300也可以不是从广播等、而从磁/光盘、SD卡等的记录介质ex215、ex216读出编码的复用数据。接着,对电视机ex300将声音信号或影像信号编码、向外部发送或写入到记录介质等中的结构进行说明。电视机ex300接受来自遥控器ex220等的用户操作,基于控制部ex310的控制,由声音信号处理部ex304将声音信号编码,由影像信号处理部ex305将影像信号使用在上述各实施方式中说明的编码方法编码。将编码后的声音信号、影像信号用复用/分离部ex303复用,向外部输出。在复用时,可以暂时将这些信号储存到缓冲器ex320、ex321等中,以使声音信号和影像信号同步再现。另外,缓冲器ex318、ex319、ex320、ex321既可以如图示那样具备多个,也可以是共用一个以上的缓冲器的结构。进而,在图示以外,也可以在例如调制/解调部ex302或复用/分离部ex303之间等也作为避免系统的上溢、下溢的缓冲部而在缓冲器中储存数据。
此外,电视机ex300除了从广播等或记录介质等取得声音数据、影像数据以外,也可以具备受理麦克风或照相机的AV输入的结构,对从它们中取得的数据进行编码处理。另外,这里,将电视机ex300作为能够进行上述编码处理、复用、及外部输出的结构进行了说明,但也可以不能进行这些处理,而是仅能够进行上述接收、解码处理、外部输出的结构。
此外,在由读取器/记录器ex218从记录介质将复用数据读出、或写入的情况下,上述解码处理或编码处理由电视机ex300、读取器/记录器ex218的哪个进行都可以,也可以是电视机ex300和读取器/记录器ex218相互分担进行。
作为一例,将从光盘进行数据的读入或写入的情况下的信息再现/记录部ex400的结构表示在图18中。信息再现/记录部ex400具备以下说明的单元ex401、ex402、ex403、ex404、ex405、ex406、ex407。光头ex401对作为光盘的记录介质ex215的记录面照射激光斑而写入信息,检测来自记录介质ex215的记录面的反射光而读入信息。调制记录部ex402电气地驱动内置在光头ex401中的半导体激光器,根据记录数据进行激光的调制。再现解调部ex403将由内置在光头ex401中的光检测器电气地检测到来自记录面的反射光而得到的再现信号放大,将记录在记录介质ex215中的信号成分分离并解调,再现所需要的信息。缓冲器ex404将用来记录到记录介质ex215中的信息及从记录介质ex215再现的信息暂时保持。盘马达ex405使记录介质ex215旋转。伺服控制部ex406一边控制盘马达ex405的旋转驱动一边使光头ex401移动到规定的信息轨道,进行激光斑的追踪处理。系统控制部ex407进行信息再现/记录部ex400整体的控制。上述的读出及写入的处理由系统控制部ex407利用保持在缓冲器ex404中的各种信息、此外根据需要而进行新的信息的生成、追加、并且一边使调制记录部ex402、再现解调部ex403、伺服控制部ex406协调动作、一边通过光头ex401进行信息的记录再现来实现。系统控制部ex407例如由微处理器构成,通过执行读出写入的程序来执行它们的处理。
以上,假设光头ex401照射激光斑而进行了说明,但也可以是使用接近场光进行高密度的记录的结构。
在图19中表示作为光盘的记录介质ex215的示意图。在记录介质ex215的记录面上,以螺旋状形成有导引槽(沟),在信息轨道ex230中,预先通过沟的形状的变化而记录有表示盘上的绝对位置的地址信息。该地址信息包括用来确定作为记录数据的单位的记录块ex231的位置的信息,通过在进行记录及再现的装置中将信息轨道ex230再现而读取地址信息,能够确定记录块。此外,记录介质ex215包括数据记录区域ex233、内周区域ex232、外周区域ex234。为了记录用户数据而使用的区域是数据记录区域ex233,配置在比数据记录区域ex233靠内周或外周的内周区域ex232和外周区域ex234用于用户数据的记录以外的特定用途。信息再现/记录部ex400对这样的记录介质ex215的数据记录区域ex233进行编码的声音数据、影像数据或复用了这些数据的编码数据的读写。
以上,举1层的DVD、BD等的光盘为例进行了说明,但并不限定于这些,也可以是多层构造、在表面以外也能够记录的光盘。此外,也可以是在盘的相同的地方使用不同波长的颜色的光记录信息、或从各种角度记录不同的信息的层等、进行多维的记录/再现的构造的光盘。
此外,在数字广播用系统ex200中,也可以由具有天线ex205的车ex210从卫星ex202等接收数据、在车ex210具有的车载导航仪ex211等的显示装置上再现动态图像。另外,车载导航仪ex211的结构可以考虑例如在图17所示的结构中添加GPS接收部的结构,在计算机ex111及便携电话ex114等中也可以考虑同样的结构。
图20A是表示使用在上述实施方式中说明的动态图像解码方法和动态图像编码方法的便携电话ex114的图。便携电话ex114具有由用来在与基站ex110之间收发电波的天线ex350、能够拍摄影像、静止图像的照相机部ex365、显示将由照相机部ex365摄影的影像、由天线ex350接收到的影像等解码后的数据的液晶显示器等的显示部ex358。便携电话ex114还具有包含操作键部ex366的主体部、用来进行声音输出的扬声器等的声音输出部ex357、用来进行声音输入的麦克风等的声音输入部ex356、保存拍摄到的影像、静止图像、录音的声音、或者接收到的影像、静止图像、邮件等的编码后的数据或者解码后的数据的存储器部ex367、或者作为与同样保存数据的记录介质之间的接口部的插槽部ex364。
进而,使用图20B对便携电话ex114的结构例进行说明。便携电话ex114对于合并控制具备显示部ex358及操作键部ex366的主体部的各部的主控制部ex360,将电源电路部ex361、操作输入控制部ex362、影像信号处理部ex355、照相机接口部ex363、LCD(LiquidCrystalDisplay:液晶显示器)控制部ex359、调制/解调部ex352、复用/分离部ex353、声音信号处理部ex354、插槽部ex364、存储器部ex367经由总线ex370相互连接。
电源电路部ex361如果通过用户的操作使通话结束及电源键成为开启状态,则通过从电池组对各部供给电力,便携电话ex114起动为能够动作的状态。
便携电话ex114基于具有CPU、ROM及RAM等的主控制部ex360的控制,在语音通话模式时,将由声音输入部ex356集音的声音信号通过声音信号处理部ex354变换为数字声音信号,将其用调制/解调部ex352进行波谱扩散处理,由发送/接收部ex351实施数字模拟变换处理及频率变换处理后经由天线ex350发送。此外,便携电话ex114在语音通话模式时,将由天线ex350接收到的接收数据放大并实施频率变换处理及模拟数字变换处理,用调制/解调部ex352进行波谱逆扩散处理,通过声音信号处理部ex354变换为模拟声音数据后,将其经由声音输出部ex357输出。
进而,在数据通信模式时发送电子邮件的情况下,将通过主体部的操作键部ex366等的操作输入的电子邮件的文本数据经由操作输入控制部ex362向主控制部ex360送出。主控制部ex360将文本数据用调制/解调部ex352进行波谱扩散处理,由发送/接收部ex351实施数字模拟变换处理及频率变换处理后,经由天线ex350向基站ex110发送。在接收电子邮件的情况下,对接收到的数据执行上述处理的大致逆处理,并输出到显示部ex350。
在数据通信模式时,在发送影像、静止图像、或者影像和声音的情况下,影像信号处理部ex355将从照相机部ex365供给的影像信号通过上述各实施方式所示的动态图像编码方法进行压缩编码(即,作为本发明的一个方式的图像编码装置发挥作用),将编码后的影像数据送出至复用/分离部ex353。另外,声音信号处理部ex354对通过照相机部ex365拍摄影像、静止图像等的过程中用声音输入部ex356集音的声音信号进行编码,将编码后的声音数据送出至复用/分离部ex353。
复用/分离部ex353通过规定的方式,对从影像信号处理部ex355供给的编码后的影像数据和从声音信号处理部ex354供给的编码后的声音数据进行复用,将其结果得到的复用数据用调制/解调部(调制/解调电路部)ex352进行波谱扩散处理,由发送/接收部ex351实施数字模拟变换处理及频率变换处理后,经由天线ex350发送。
在数据通信模式时接收到链接到主页等的动态图像文件的数据的情况下,或者接收到附加了影像或者声音的电子邮件的情况下,为了对经由天线ex350接收到的复用数据进行解码,复用/分离部ex353通过将复用数据分离,分为影像数据的比特流和声音数据的比特流,经由同步总线ex370将编码后的影像数据向影像信号处理部ex355供给,并将编码后的声音数据向声音信号处理部ex354供给。影像信号处理部ex355通过与上述各实施方式所示的动态图像编码方法相对应的动态图像解码方法进行解码,由此对影像信号进行解码(即,作为本发明的一个方式的图像解码装置发挥作用),经由LCD控制部ex359从显示部ex358显示例如链接到主页的动态图像文件中包含的影像、静止图像。另外,声音信号处理部ex354对声音信号进行解码,从声音输出部ex357输出声音。
此外,上述便携电话ex114等的终端与电视机ex300同样,除了具有编码器、解码器两者的收发型终端以外,还可以考虑只有编码器的发送终端、只有解码器的接收终端的3种安装形式。另外,在数字广播用系统ex200中,设为发送、接收在影像数据中复用了音乐数据等得到的复用数据而进行了说明,但除声音数据之外复用了与影像关联的字符数据等的数据也可以,不是复用数据而是影像数据本身也可以。
这样,将在上述各实施方式中表示的动态图像编码方法或动态图像解码方法用在上述哪种设备、系统中都可以,通过这样,能够得到在上述各实施方式中说明的效果。
此外,本发明并不限定于这样的上述实施方式,能够不脱离本发明的范围而进行各种变形或修正。
(实施方式3)
也可以通过将在上述各实施方式中示出的动态图像编码方法或装置、与依据MPEG-2、MPEG4-AVC、VC-1等不同的标准的动态图像编码方法或装置根据需要而适当切换,来生成影像数据。
这里,在生成分别依据不同的标准的多个影像数据的情况下,在解码时,需要选择对应于各个标准的解码方法。但是,由于不能识别要解码的影像数据依据哪个标准,所以产生不能选择适当的解码方法的问题。
为了解决该问题,在影像数据中复用了声音数据等的复用数据采用包含表示影像数据依据哪个标准的识别信息的结构。以下,说明包括通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据在内的复用数据的具体的结构。复用数据是MPEG-2传输流形式的数字流。
图21是表示复用数据的结构的图。如图21所示,复用数据通过将视频流、音频流、演示图形流(PG)、交互图形流中的1个以上进行复用而得到。视频流表示电影的主影像及副影像,音频流(IG)表示电影的主声音部分和与该主声音混合的副声音,演示图形流表示电影的字幕。这里,所谓主影像,表示显示在画面上的通常的影像,所谓副影像,是在主影像中用较小的画面显示的影像。此外,交互图形流表示通过在画面上配置GUI部件而制作的对话画面。视频流通过在上述各实施方式中示出的动态图像编码方法或装置、依据以往的MPEG-2、MPEG4-AVC、VC-1等标准的动态图像编码方法或装置编码。音频流由杜比AC-3、DolbyDigitalPlus、MLP、DTS、DTS-HD、或线性PCM等的方式编码。
包含在复用数据中的各流通过PID被识别。例如,对在电影的影像中使用的视频流分配0x1011,对音频流分配0x1100到0x111F,对演示图形分配0x1200到0x121F,对交互图形流分配0x1400到0x141F,对在电影的副影像中使用的视频流分配0x1B00到0x1B1F,对与主声音混合的副声音中使用的音频流分配0x1A00到0x1A1F。
图22是示意地表示复用数据怎样被复用的图。首先,将由多个视频帧构成的视频流ex235、由多个音频帧构成的音频流ex238分别变换为PES包序列ex236及ex239,并变换为TS包ex237及ex240。同样,将演示图形流ex241及交互图形ex244的数据分别变换为PES包序列ex242及ex245,再变换为TS包ex243及ex246。复用数据ex247通过将这些TS包复用到1条流中而构成。
图23更详细地表示在PES包序列中怎样保存视频流。图23的第1段表示视频流的视频帧序列。第2段表示PES包序列。如图23的箭头yy1、yy2、yy3、yy4所示,视频流中的多个作为VideoPresentationUnit的I图片、B图片、P图片按每个图片被分割并保存到PES包的有效载荷中。各PES包具有PES头,在PES头中,保存有作为图片的显示时刻的PTS(PresentationTime-Stamp)及作为图片的解码时刻的DTS(DecodingTime-Stamp)。
图24表示最终写入在复用数据中的TS包的形式。TS包是由具有识别流的PID等信息的4字节的TS头和保存数据的184字节的TS有效载荷构成的188字节固定长度的包,上述PES包被分割并保存到TS有效载荷中。在BD-ROM的情况下,对于TS包赋予4字节的TP_Extra_Header,构成192字节的源包,写入到复用数据中。在TP_Extra_Header中记载有ATS(Arrival_Time_Stamp)等信息。ATS表示该TS包向解码器的PID滤波器的转送开始时刻。在复用数据中,源包如图24下段所示排列,从复用数据的开头起递增的号码被称作SPN(源包号)。
此外,在复用数据所包含的TS包中,除了影像、声音、字幕等的各流以外,还有PAT(ProgramAssociationTable)、PMT(ProgramMapTable)、PCR(ProgramClockReference)等。PAT表示在复用数据中使用的PMT的PID是什么,PAT自身的PID被登记为0。PMT具有复用数据所包含的影像、声音、字幕等的各流的PID、以及与各PID对应的流的属性信息,还具有关于复用数据的各种描述符。在描述符中,有指示许可/不许可复用数据的拷贝的拷贝控制信息等。PCR为了取得作为ATS的时间轴的ATC(ArrivalTimeClock)与作为PTS及DTS的时间轴的STC(SystemTimeClock)的同步,拥有与该PCR包被转送至解码器的ATS对应的STC时间的信息。
图25是详细地说明PMT的数据构造的图。在PMT的开头,配置有记述了包含在该PMT中的数据的长度等的PMT头。在其后面,配置有多个关于复用数据的描述符。上述拷贝控制信息等被记载为描述符。在描述符之后,配置有多个关于包含在复用数据中的各流的流信息。流信息由记载有用来识别流的压缩编解码器的流类型、流的PID、流的属性信息(帧速率、纵横比等)的流描述符构成。流描述符存在复用数据中存在的流的数量。
在记录到记录介质等中的情况下,将上述复用数据与复用数据信息文件一起记录。
复用数据信息文件如图26所示,是复用数据的管理信息,与复用数据一对一地对应,由复用数据信息、流属性信息以及入口映射构成。
复用数据信息如图26所示,由系统速率、再现开始时刻、再现结束时刻构成。系统速率表示复用数据的向后述的系统目标解码器的PID滤波器的最大转送速率。包含在复用数据中的ATS的间隔设定为成为系统速率以下。再现开始时刻是复用数据的开头的视频帧的PTS,再现结束时刻设定为对复用数据的末端的视频帧的PTS加上1帧量的再现间隔的值。
流属性信息如图27所示,按每个PID登记有关于包含在复用数据中的各流的属性信息。属性信息具有按视频流、音频流、演示图形流、交互图形流而不同的信息。视频流属性信息具有该视频流由怎样的压缩编解码器压缩、构成视频流的各个图片数据的分辨率是多少、纵横比是多少、帧速率是多少等的信息。音频流属性信息具有该音频流由怎样的压缩编解码器压缩、包含在该音频流中的声道数是多少、对应于哪种语言、采样频率是多少等的信息。这些信息用于在播放器再现之前的解码器的初始化等中。
在本实施方式中,使用上述复用数据中的、包含在PMT中的流类型。此外,在记录介质中记录有复用数据的情况下,使用包含在复用数据信息中的视频流属性信息。具体而言,在上述各实施方式示出的动态图像编码方法或装置中,设置如下步骤或单元,该步骤或单元对包含在PMT中的流类型、或视频流属性信息,设定表示是通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据的固有信息。通过该结构,能够识别通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据、和依据其他标准的影像数据。
此外,在图28中表示本实施方式的动态图像解码方法的步骤。在步骤exS100中,从复用数据中取得包含在PMT中的流类型、或包含在复用数据信息中的视频流属性信息。接着,在步骤exS101中,判断流类型、或视频流属性信息是否表示是通过在上述各实施方式中示出的动态图像编码方法或装置生成的复用数据。并且,在判断为流类型、或视频流属性信息是通过在上述各实施方式中示出的动态图像编码方法或装置生成的复用数据情况下,在步骤exS102中,通过在上述各实施方式中示出的动态图像解码方法进行解码。此外,在流类型、或视频流属性信息表示是依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的复用数据的情况下,在步骤exS103中,通过依据以往的标准的动态图像解码方法进行解码。
这样,通过在流类型、或视频流属性信息中设定新的固有值,在解码时能够判断是否能够通过在上述各实施方式中示出的动态图像解码方法或装置解码。因而,在被输入了依据不同的标准的复用数据的情况下,也能够选择适当的解码方法或装置,所以能够不发生错误地进行解码。此外,将在本实施方式中示出的动态图像编码方法或装置、或者动态图像解码方法或装置用在上述任何设备、系统中。
(实施方式4)
在上述各实施方式中示出的动态图像编码方法及装置、动态图像解码方法及装置典型地可以由作为集成电路的LSI实现。作为一例,在图29中表示1芯片化的LSIex500的结构。LSIex500具备以下说明的单元ex501、ex502、ex503、ex504、ex505、ex506、ex507、ex508、ex509,各单元经由总线ex510连接。电源电路部ex505通过在电源是开启状态的情况下对各部供给电力,起动为能够动作的状态。
例如在进行编码处理的情况下,LSIex500基于具有CPUex502、存储器控制器ex503、流控制器ex504、驱动频率控制部ex512等的控制部ex501的控制,通过AVI/Oex509从麦克风ex117及照相机ex113等输入AV信号。被输入的AV信号暂时储存在SDRAM等的外部的存储器ex511中。基于控制部ex501的控制,将储存的数据根据处理量及处理速度适当地分为多次等,向信号处理部ex507发送,在信号处理部ex507中进行声音信号的编码及/或影像信号的编码。这里,影像信号的编码处理是在上述各实施方式中说明的编码处理。在信号处理部ex507中,还根据情况而进行将编码的声音数据和编码的影像数据复用等的处理,从流I/Oex506向外部输出。将该输出的比特流向基站ex107发送、或写入到记录介质ex215中。另外,在复用时,可以暂时将数据储存到缓冲器ex508中以使其同步。
另外,在上述中,设存储器ex511为LSIex500的外部的结构进行了说明,但也可以是包含在LSIex500的内部中的结构。缓冲器ex508也并不限定于一个,也可以具备多个缓冲器。此外,LSIex500既可以形成1个芯片,也可以形成多个芯片。
此外,在上述中,假设控制部ex510具有CPUex502、存储器控制器ex503、流控制器ex504、驱动频率控制部ex512等,但控制部ex510的结构并不限定于该结构。例如,也可以是信号处理部ex507还具备CPU的结构。通过在信号处理部ex507的内部中也设置CPU,能够进一步提高处理速度。此外,作为其他例,也可以是CPUex502具备信号处理部ex507、或作为信号处理部ex507的一部分的例如声音信号处理部的结构。在这样的情况下,控制部ex501为具备具有信号处理部ex507或其一部分的CPUex502的结构。
另外,这里设为LSI,但根据集成度的差异,也有称作IC、系统LSI、超级(super)LSI、特级(ultra)LSI的情况。
此外,集成电路化的方法并不限定于LSI,也可以由专用电路或通用处理器实现。也可以利用在LSI制造后能够编程的FPGA(FieldProgrammableGateArray)、或能够重构LSI内部的电路单元的连接及设定的可重构处理器。
进而,如果因半导体技术的进步或派生的其他技术而出现代替LSI的集成电路化的技术,则当然也可以使用该技术进行功能模块的集成化。有可能是生物技术的应用等。
(实施方式5)
在将通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据解码的情况下,考虑到与将依据以往的MPEG-2、MPEG4-AVC、VC-1等标准的影像数据的情况相比处理量会增加。因此,在LSIex500中,需要设定为比将依据以往的标准的影像数据解码时的CPUex502的驱动频率更高的驱动频率。但是,如果将驱动频率设得高,则发生消耗电力变高的问题。
为了解决该问题,电视机ex300、LSIex500等的动态图像解码装置采用识别影像数据依据哪个标准、并根据标准切换驱动频率的结构。图30表示本实施方式的结构ex800。驱动频率切换部ex803在影像数据是通过在上述各实施方式中示出的动态图像编码方法或装置生成的情况下,将驱动频率设定得高。并且,对执行在上述各实施方式中示出的动态图像解码方法的解码处理部ex801指示将影像数据解码。另一方面,在影像数据是依据以往的标准的影像数据的情况下,与影像数据是通过在上述各实施方式中示出的动态图像编码方法或装置生成的数据的情况相比,将驱动频率设定得低。并且,对依据以往的标准的解码处理部ex802指示将影像数据解码。
更具体地讲,驱动频率切换部ex803由图29的CPUex502和驱动频率控制部ex512构成。此外,执行在上述各实施方式中示出的动态图像解码方法的解码处理部ex801、以及依据以往的标准的解码处理部ex802对应于图29的信号处理部ex507。CPUex502识别影像数据依据哪个标准。并且,基于来自CPUex502的信号,驱动频率控制部ex512设定驱动频率。此外,基于来自CPUex502的信号,信号处理部ex507进行影像数据的解码。这里,可以考虑在影像数据的识别中使用例如在实施方式3中记载的识别信息。关于识别信息,并不限定于在实施方式3中记载的信息,只要是能够识别影像数据依据哪个标准的信息就可以。例如,在基于识别影像数据利用于电视机还是利用于盘等的外部信号,来能够识别影像数据依据哪个标准的情况下,也可以基于这样的外部信号进行识别。此外,CPUex502的驱动频率的选择例如可以考虑如图32所示的将影像数据的标准与驱动频率建立对应的查找表进行。将查找表预先保存到缓冲器ex508、或LSI的内部存储器中,CPUex502通过参照该查找表,能够选择驱动频率。
图31表示实施本实施方式的方法的步骤。首先,在步骤exS200中,在信号处理部ex507中,从复用数据中取得识别信息。接着,在步骤exS201中,在CPUex502中,基于识别信息识别影像数据是否是通过在上述各实施方式中示出的编码方法或装置生成的数据。在影像数据是通过在上述各实施方式中示出的编码方法或装置生成的数据的情况下,在步骤exS202中,CPUex502向驱动频率控制部ex512发送将驱动频率设定得高的信号。并且,在驱动频率控制部ex512中设定为高的驱动频率。另一方面,在表示是依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的影像数据的情况下,在步骤exS203中,CPUex502向驱动频率控制部ex512发送将驱动频率设定得低的信号。并且,在驱动频率控制部ex512中,设定为与影像数据是通过在上述各实施方式中示出的编码方法或装置生成的数据的情况相比更低的驱动频率。
进而,通过与驱动频率的切换连动而变更对LSIex500或包括LSIex500的装置施加的电压,由此能够进一步提高节电效果。例如,在将驱动频率设定得低的情况下,随之,可以考虑与将驱动频率设定得高的情况相比,将对LSIex500或包括LSIex500的装置施加的电压设定得低。
此外,驱动频率的设定方法只要是在解码时的处理量大的情况下将驱动频率设定得高、在解码时的处理量小的情况下将驱动频率设定得低就可以,并不限定于上述的设定方法。例如,可以考虑在将依据MPEG4-AVC标准的影像数据解码的处理量大于将通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据解码的处理量的情况下,与上述的情况相反地进行驱动频率的设定。
进而,驱动频率的设定方法并不限定于使驱动频率低的结构。例如,也可以考虑在识别信息是通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据的情况下,将对LSIex500或包括LSIex500的装置施加的电压设定得高,在表示是依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的影像数据的情况下,将对LSIex500或包括LSIex500的装置施加的电压设定得低。此外,作为另一例,也可以考虑在识别信息表示是通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据的情况下,不使CPUex502的驱动停止,在表示是依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的影像数据的情况下,由于在处理中有富余,所以使CPUex502的驱动暂停。也可以考虑在识别信息表示是通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据的情况下,也只要在处理中有富余则使CPUex502的驱动暂停。在此情况下,可以考虑与表示是依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的影像数据的情况相比,将停止时间设定得短。
这样,根据影像数据所依据的标准来切换驱动频率,由此能够实现节电化。此外,在使用电池来驱动LSIex500或包括LSIex500的装置的情况下,能够随着节电而延长电池的寿命。
(实施方式6)
在电视机、便携电话等上述的设备、系统中,有时被输入依据不同的标准的多个影像数据。这样,为了使得在被输入了依据不同的标准的多个影像数据的情况下也能够解码,LSIex500的信号处理部ex507需要对应于多个标准。但是,如果单独使用对应于各个标准的信号处理部ex507,则发生LSIex500的电路规模变大、此外成本增加的问题。
为了解决该问题,采用将用来执行在上述各实施方式中示出的动态图像解码方法的解码处理部、和依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的解码处理部一部分共用的结构。图33A的ex900表示该结构例。例如,在上述各实施方式中示出的动态图像解码方法和依据MPEG4-AVC标准的动态图像解码方法在熵编码、逆量化、解块滤波器、运动补偿等的处理中有一部分处理内容共通。可以考虑如下结构:关于共通的处理内容,共用对应于MPEG4-AVC标准的解码处理部ex902,关于不对应于MPEG4-AVC标准的本发明的一个方式所特有的其他的处理内容,使用专用的解码处理部ex901。特别是,本发明在滤波处理(解块/滤波)方面具有特征,因此可以考虑例如对于滤波处理(解块/滤波)使用专用的解码处理部ex901,对于除此之外的熵解码、逆量化、运动补偿中的某一个或者全部的处理,共用解码处理部。关于解码处理部的共用,也可以是如下结构:关于共通的处理内容,共用用来执行在上述各实施方式中示出的动态图像解码方法的解码处理部,关于MPEG4-AVC标准所特有的处理内容,使用专用的解码处理部。
此外,用图33B的ex1000表示将处理一部分共用的另一例。在该例中,采用使用与本发明的一个方式所特有的处理内容对应的专用的解码处理部ex1001、和与其他的以往标准所特有的处理内容对应的专用的解码处理部ex1002、和与在本发明的一个方式的动态图像解码方法和其他的以往标准的动态图像解码方法中共通的处理内容对应的共用的解码处理部ex1003的结构。这里,专用的解码处理部ex1001、ex1002并不一定是为本发明的一个方式、或者其他的以往标准所特有的处理内容而特殊化的,可以是能够执行其他的通用处理的结构。此外,也能够由LSIex500安装本实施方式的结构。
这样,对于在本发明的一个方式的动态图像解码方法和以往的标准的动态图像解码方法中共通的处理内容,共用解码处理部,由此能够减小LSI的电路规模并且降低成本。
产业上的可利用性
本发明能够应用于滤波方法、动态图像编码装置和动态图像解码装置。例如,本发明能够利用于电视机、数字录像机、车载导航仪、便携电话、数字照相机和数字摄像机等的高分辨率的信息显示设备或摄像设备。
标号说明
100:动态图像编码装置;101:减法器;102:正交变换部;103:量化部;104、204:逆量化部;105、205:逆正交变换部;106、206:加法器;107、207、301、302、311、322、323、332、342、343、344、351、352、353、361、362、372:滤波部;108、112、208、312、324、333、354、363、371:选择部;109、209、373:存储器;110、210:预测部;111:可变长度编码部;113、213:控制部;115、215:滤波处理部;120:输入图像信号;121:残差信号;122、124、224:变换系数;123、223:量化系数;125、225:解码残差信号;126、226:解码图像信号;127、128、227、228:图像信号;130、230:预测图像信号;131:编码信号;132、232:编码比特流;200:动态图像解码装置;211:可变长度解码部;212、321、331、341:分配部;220:输出图像信号。

Claims (11)

1.一种滤波方法,对图像中包含的多个块进行滤波处理,其中,该滤波方法包括以下步骤:
滤波步骤,对所述多个块中彼此相邻的两个以上的相邻块,使用分别包含在该两个以上的相邻块中的像素值进行滤波处理,从而生成已滤波数据;
判定步骤,判定所述两个以上的相邻块的每一个是IPCM块还是非IPCM块;以及
输出步骤,输出所述已滤波数据的一部分作为所述非IPCM块的像素值,输出未进行滤波处理的该IPCM块的像素值作为所述IPCM块的像素值,
所述滤波处理是不使用作为所述IPCM块的量化参数而预先决定的固定值来确定的。
2.如权利要求1所述的滤波方法,其中,
所述两个以上的相邻块是所述IPCM块和所述非IPCM块这两个块。
3.如权利要求2所述的滤波方法,其中,
在所述滤波步骤中,通过共同使用所述IPCM块的像素值和所述非IPCM块的像素值进行滤波处理,生成所述已滤波数据。
4.如权利要求1~3中任意一项所述的滤波方法,其中,
所述滤波处理是对所述两个以上的相邻块的边界进行的解块滤波处理。
5.如权利要求2所述的滤波方法,其中,
所述滤波方法还包括滤波强度设定步骤,对所述非IPCM块设定第一滤波强度,对所述IPCM块设定比所述第一滤波强度弱的第二滤波强度,
在所述滤波步骤,以所述第一滤波强度对所述非IPCM块进行滤波处理,以所述第二滤波强度对所述IPCM块进行滤波处理。
6.如权利要求5所述的滤波方法,其中,
所述第二滤波强度是表示不进行滤波处理的滤波强度。
7.如权利要求5或6所述的滤波方法,其中,
所述滤波方法还包括:判断所述非IPCM块是否被帧内编码的步骤,
在滤波强度设定步骤,对于未被帧内编码的所述非IPCM块的所述第一滤波强度,被设定为比对于被帧内编码的所述非IPCM块的所述第一滤波强度小。
8.一种图像编码方法,对图像进行编码,该图像编码方法包括:
滤波步骤,对所述图像中彼此相邻的多个块,使用分别包含在该多个块中的像素值进行滤波处理,从而生成已滤波数据;
判定步骤,判定所述多个块的每一个是IPCM块还是非IPCM块;
重构步骤,生成重构图像,该重构图像具有所述已滤波数据的一部分作为所述非IPCM块的像素值,具有未进行滤波处理的所述IPCM块的像素值作为所述IPCM块的像素值;以及
编码步骤,使用所述重构图像生成编码比特流,
所述滤波处理是不使用作为所述IPCM块的量化参数而预先决定的固定值来确定的。
9.一种图像处理系统,对于图像中彼此相邻的多个块进行滤波处理,该图像处理系统包括:
控制电路;以及
存储装置,能够从所述控制电路进行访问;
所述控制电路使用所述存储装置执行权利要求1所述的滤波方法。
10.一种图像编码装置,对图像进行编码,该图像编码装置包括:
滤波部,对所述图像中彼此相邻的多个块,使用分别包含在该多个块中的像素值进行滤波处理,从而生成已滤波数据;
判定部,判定所述多个块的每一个是IPCM块还是非IPCM块;
重构部,生成重构图像,该重构图像具有所述已滤波数据的一部分作为所述非IPCM块的像素值,具有未进行滤波处理的所述IPCM块的像素值作为所述IPCM块的像素值;以及
编码部,使用所述重构图像生成编码比特流,
所述滤波处理是不使用作为所述IPCM块的量化参数而预先决定的固定值来确定的。
11.一种图像编码装置,对图像进行编码,该图像编码装置包括:
控制电路;以及
存储装置,能够从所述控制电路进行访问;
所述控制电路使用所述存储装置执行权利要求8所述的图像编码方法。
CN201280000774.3A 2011-02-22 2012-02-21 滤波方法、动态图像编码装置、动态图像解码装置和动态图像编码解码装置 Active CN102907097B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201510828833.1A CN105245904B (zh) 2011-02-22 2012-02-21 图像编码解码装置
CN201510828803.0A CN105245903B (zh) 2011-02-22 2012-02-21 图像解码方法和图像解码装置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201161445115P 2011-02-22 2011-02-22
US61/445,115 2011-02-22
PCT/JP2012/001167 WO2012114724A1 (ja) 2011-02-22 2012-02-21 フィルタ方法、動画像符号化装置、動画像復号装置及び動画像符号化復号装置

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CN201510828833.1A Division CN105245904B (zh) 2011-02-22 2012-02-21 图像编码解码装置
CN201510828803.0A Division CN105245903B (zh) 2011-02-22 2012-02-21 图像解码方法和图像解码装置

Publications (2)

Publication Number Publication Date
CN102907097A CN102907097A (zh) 2013-01-30
CN102907097B true CN102907097B (zh) 2016-01-20

Family

ID=46652730

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201280000774.3A Active CN102907097B (zh) 2011-02-22 2012-02-21 滤波方法、动态图像编码装置、动态图像解码装置和动态图像编码解码装置
CN201510828833.1A Active CN105245904B (zh) 2011-02-22 2012-02-21 图像编码解码装置
CN201510828803.0A Active CN105245903B (zh) 2011-02-22 2012-02-21 图像解码方法和图像解码装置

Family Applications After (2)

Application Number Title Priority Date Filing Date
CN201510828833.1A Active CN105245904B (zh) 2011-02-22 2012-02-21 图像编码解码装置
CN201510828803.0A Active CN105245903B (zh) 2011-02-22 2012-02-21 图像解码方法和图像解码装置

Country Status (15)

Country Link
US (5) US9826230B2 (zh)
EP (1) EP2680583B1 (zh)
JP (4) JP5342069B2 (zh)
KR (5) KR102215469B1 (zh)
CN (3) CN102907097B (zh)
AU (2) AU2012221587B9 (zh)
BR (1) BR112012021600B1 (zh)
CA (2) CA2801215C (zh)
ES (1) ES2669978T3 (zh)
HU (1) HUE038308T2 (zh)
LT (1) LT2680583T (zh)
MX (1) MX2013000093A (zh)
PL (1) PL2680583T3 (zh)
TW (3) TWI547152B (zh)
WO (1) WO2012114724A1 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110123651A (ko) * 2010-05-07 2011-11-15 한국전자통신연구원 생략 부호화를 이용한 영상 부호화 및 복호화 장치 및 그 방법
AU2012221588B2 (en) 2011-02-22 2015-12-17 Sun Patent Trust Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
TWI547152B (zh) * 2011-02-22 2016-08-21 太格文 Ii有限責任公司 影像解碼方法及影像解碼裝置
US20120230423A1 (en) * 2011-03-10 2012-09-13 Esenlik Semih Line memory reduction for video coding and decoding
CN107396129B (zh) * 2011-03-30 2020-05-05 Lg 电子株式会社 环路滤波方法及其设备
LT3661201T (lt) * 2011-07-19 2021-04-12 Tagivan Ii Llc Filtravimo būdas, vaizdo dekodavimo būdas, vaizdo kodavimo būdas, vaizdo dekodavimo aparatas, vaizdo kodavimo aparatas ir vaizdo kodavimo/dekodavimo aparatas
US20130182765A1 (en) * 2012-01-17 2013-07-18 Futurewei Technologies, Inc. In-loop Filtering for Lossless Coding Mode in High Efficiency Video Coding
GB2503658B (en) * 2012-06-29 2015-07-01 Canon Kk Method and device for encoding and decoding data in a video encoder and a video decoder
AU2014202921B2 (en) * 2014-05-29 2017-02-02 Canon Kabushiki Kaisha Method, apparatus and system for de-blocking a block of video samples
JP6413381B2 (ja) * 2014-06-19 2018-10-31 日油株式会社 ゲル状栄養組成物
TW201842768A (zh) * 2017-04-06 2018-12-01 美商松下電器(美國)知識產權公司 編碼裝置、解碼裝置、編碼方法及解碼方法
TWI774750B (zh) * 2017-04-06 2022-08-21 美商松下電器(美國)知識產權公司 編碼裝置、解碼裝置、編碼方法及解碼方法
KR20210133299A (ko) * 2019-04-20 2021-11-05 엘지전자 주식회사 Bdpcm에 기반한 영상 코딩 방법 및 그 장치

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100358366C (zh) * 2002-07-11 2007-12-26 松下电器产业株式会社 滤波强度的决定方法、动态图像编码方法及解码方法
CN100493205C (zh) * 2003-08-19 2009-05-27 松下电器产业株式会社 动态图像编码方法及动态图像解码方法

Family Cites Families (89)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2119961A (en) 1981-07-30 1983-11-23 Gao Ges Automation Org Method for rastering half-tone images
US5178418A (en) 1991-06-25 1993-01-12 Canadian Bank Note Co., Ltd. Latent images comprising phase shifted micro printing
AU699124B2 (en) 1994-11-01 1998-11-26 De La Rue Giori S.A. Method of generating a security design with the aid of electronic means
US6104812A (en) 1998-01-12 2000-08-15 Juratrade, Limited Anti-counterfeiting method and apparatus using digital screening
US6377706B1 (en) 1998-05-12 2002-04-23 Xerox Corporation Compression framework incorporating decoding commands
US6473516B1 (en) 1998-05-22 2002-10-29 Asa Systems, Inc. Large capacity steganography
WO2001048944A1 (en) 1999-12-23 2001-07-05 Institut National De La Recherche Scientifique Interference suppression in cdma systems
US6615890B1 (en) * 2000-06-09 2003-09-09 Venture Tape Corp. Tape applicator for glazing applications
US6692030B1 (en) 2000-07-21 2004-02-17 Verify First Technologies, Inc. Security document with nano-pattern
DE10044403A1 (de) 2000-09-08 2002-03-21 Giesecke & Devrient Gmbh Datenträger mit Stichtiefdruckbild und Verfahren zur Umsetzung von Bildmotiven in Linienstrukturen sowie in eine Stichtiefdruckplatte
US6931062B2 (en) * 2001-04-11 2005-08-16 Koninklijke Philips Electronics N.V. Decoding system and method for proper interpolation for motion compensation
CA2435757C (en) 2001-11-29 2013-03-19 Matsushita Electric Industrial Co., Ltd. Video coding distortion removal method and apparatus using a filter
EP3282699B1 (en) 2001-11-29 2019-10-23 Godo Kaisha IP Bridge 1 Coding distortion removal method
JP4130783B2 (ja) 2002-04-23 2008-08-06 松下電器産業株式会社 動きベクトル符号化方法および動きベクトル復号化方法
TWI232682B (en) 2002-04-26 2005-05-11 Ntt Docomo Inc Signal encoding method, signal decoding method, signal encoding device, signal decoding device, signal encoding program, and signal decoding program
JP4144258B2 (ja) 2002-05-29 2008-09-03 ソニー株式会社 画像出力装置及び画像出力方法
CA2492004C (en) 2002-07-09 2009-02-03 Bnc Ip Switzerland Gmbh System and method for providing secure identification solutions
AU2003285891A1 (en) 2002-10-15 2004-05-04 Digimarc Corporation Identification document and related methods
US6922492B2 (en) 2002-12-27 2005-07-26 Motorola, Inc. Video deblocking method and apparatus
US8223393B2 (en) 2003-03-31 2012-07-17 Eastman Kodak Company Post rip image rendering for microprinting
WO2004104779A2 (en) 2003-05-16 2004-12-02 Digimarc Corporation Identification document usable with d2t2 printing
CA2524031C (en) * 2003-05-20 2015-07-07 Interlego Ag Method and system for manipulating a digital representation of a three-dimensional object
US20050063027A1 (en) 2003-07-17 2005-03-24 Durst Robert T. Uniquely linking security elements in identification documents
US7457362B2 (en) 2003-10-24 2008-11-25 Texas Instruments Incorporated Loop deblock filtering of block coded video in a very long instruction word processor
KR101000926B1 (ko) 2004-03-11 2010-12-13 삼성전자주식회사 영상의 불연속성을 제거하기 위한 필터 및 필터링 방법
CA2542266C (en) 2004-04-28 2012-07-17 Matsushita Electric Industrial Co. Ltd. Moving picture stream generation apparatus, moving picture coding apparatus, moving picture multiplexing apparatus and moving picture decoding apparatus
US20050243914A1 (en) 2004-04-29 2005-11-03 Do-Kyoung Kwon Adaptive de-blocking filtering apparatus and method for mpeg video decoder
US8085846B2 (en) 2004-08-24 2011-12-27 Thomson Licensing Method and apparatus for decoding hybrid intra-inter coded blocks
US7630902B2 (en) * 2004-09-17 2009-12-08 Digital Rise Technology Co., Ltd. Apparatus and methods for digital audio coding using codebook application ranges
US7450121B2 (en) 2004-10-19 2008-11-11 Canon Kabushiki Kaisha Dynamic bit depth rendering
US20060126744A1 (en) * 2004-12-10 2006-06-15 Liang Peng Two pass architecture for H.264 CABAC decoding process
KR100679035B1 (ko) * 2005-01-04 2007-02-06 삼성전자주식회사 인트라 bl 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더
JP4148228B2 (ja) 2005-02-10 2008-09-10 ソニー株式会社 画像記録装置、画像再生制御装置、画像記録再生制御装置、これらの装置の処理方法およびその方法をコンピュータに実行させるプログラム
US8625914B2 (en) 2013-02-04 2014-01-07 Sony Corporation Image processing system, image processing method and program
JP4784188B2 (ja) 2005-07-25 2011-10-05 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
WO2007116551A1 (ja) 2006-03-30 2007-10-18 Kabushiki Kaisha Toshiba 画像符号化装置及び画像符号化方法並びに画像復号化装置及び画像復号化方法
JP5017555B2 (ja) 2006-04-10 2012-09-05 株式会社メガチップス 画像符号化装置及び画像復号化装置
EP1844929A1 (fr) 2006-04-13 2007-10-17 Kba-Giori S.A. Procédé de génération de motifs représentant une image en demi-teintes
US7965422B2 (en) 2006-04-28 2011-06-21 Xerox Corporation Super resolution encoded microprinting through postscript
JP4584871B2 (ja) 2006-06-09 2010-11-24 パナソニック株式会社 画像符号化記録装置および画像符号化記録方法
US8036270B2 (en) * 2006-07-27 2011-10-11 Sharp Laboratories Of America, Inc. Intra-frame flicker reduction in video coding
JP2008042497A (ja) 2006-08-04 2008-02-21 Seiko Epson Corp デコード装置、情報再生装置及び電子機器
JP5093877B2 (ja) 2006-09-29 2012-12-12 株式会社ユニバーサルエンターテインメント 紙葉識別装置
KR100827106B1 (ko) * 2006-10-20 2008-05-02 삼성전자주식회사 디블록킹 필터에서의 필터 조건 영역 판별을 위한 장치 및방법
US8774269B2 (en) 2006-10-25 2014-07-08 Franuhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Quality scalable coding with mapping different ranges of bit depths
CN101193305B (zh) 2006-11-21 2010-05-12 安凯(广州)微电子技术有限公司 用于视频编解码芯片中帧内预测的数据存储和交换方法
KR100837410B1 (ko) 2006-11-30 2008-06-12 삼성전자주식회사 주관적인 무손실 이미지 데이터 압축 방법 및 장치
CN101290774B (zh) * 2007-01-31 2011-09-07 广州广晟数码技术有限公司 音频编码和解码系统
US8767834B2 (en) * 2007-03-09 2014-07-01 Sharp Laboratories Of America, Inc. Methods and systems for scalable-to-non-scalable bit-stream rewriting
TW200845723A (en) 2007-04-23 2008-11-16 Thomson Licensing Method and apparatus for encoding video data, method and apparatus for decoding encoded video data and encoded video signal
US8644632B2 (en) 2007-06-27 2014-02-04 Thomson Licensing Enhancing image quality
JP5264901B2 (ja) 2007-07-06 2013-08-14 フランス・テレコム デジタルオーディオ信号の階層符号化
JP2009017505A (ja) 2007-07-09 2009-01-22 Toshiba Corp 画像圧縮装置、画像伸張装置及び画像処理装置
US20090020999A1 (en) 2007-07-17 2009-01-22 Jimmy Kendrick Security documents and methods of deterring counterfeiting
US20090021000A1 (en) 2007-07-17 2009-01-22 Mccartney Larry G Security documents and methods of deterring counterfeiting
US20090315319A1 (en) 2007-07-17 2009-12-24 Jimmy Kendrick Security documents and methods of deterring counterfeiting
JP5278827B2 (ja) 2007-09-06 2013-09-04 日本電気株式会社 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法、映像符号化あるいは復号プログラム
CN101389016B (zh) 2007-09-13 2010-10-20 华为技术有限公司 获得块边界强度和去除块效应的方法和装置
BRPI0818444A2 (pt) * 2007-10-12 2016-10-11 Qualcomm Inc codificação adaptativa de informação de cabeçalho de bloco de vídeo
WO2009051719A2 (en) * 2007-10-16 2009-04-23 Thomson Licensing Methods and apparatus for video encoding and decoding geometically partitioned super blocks
US8477847B2 (en) 2007-12-17 2013-07-02 Vixs Systems, Inc. Motion compensation module with fast intra pulse code modulation mode decisions and methods for use therewith
US9225996B2 (en) 2007-12-19 2015-12-29 Vixs Systems, Inc. Motion refinement engine with flexible direction processing and methods for use therewith
US8743972B2 (en) 2007-12-20 2014-06-03 Vixs Systems, Inc. Coding adaptive deblocking filter and method for use therewith
BRPI0821500A2 (pt) 2008-01-11 2015-06-16 Thomson Licensing Codificação de vídeo e profundidade
JP5593596B2 (ja) 2008-02-04 2014-09-24 ソニー株式会社 映像信号送信装置および映像信号送信方法
US8542730B2 (en) * 2008-02-22 2013-09-24 Qualcomm, Incorporated Fast macroblock delta QP decision
US9788018B2 (en) * 2008-06-30 2017-10-10 Microsoft Technology Licensing, Llc Error concealment techniques in video decoding
TWI386068B (zh) 2008-10-22 2013-02-11 Nippon Telegraph & Telephone 解塊處理方法、解塊處理裝置、解塊處理程式及記錄該程式之可由電腦讀取之記錄媒體
TW201028018A (en) * 2009-01-07 2010-07-16 Ind Tech Res Inst Encoder, decoder, encoding method and decoding method
JP5126096B2 (ja) 2009-02-05 2013-01-23 日本電気株式会社 画像符号化処理方法、画像符号化処理装置、画像符号化プログラム
WO2010125606A1 (en) 2009-04-29 2010-11-04 Aspa-Japan Co., Ltd. Method for image data compression and compression system of image data
TWI400955B (zh) 2009-07-20 2013-07-01 Mstar Semiconductor Inc 一種去區塊裝置及方法
CN101621692B (zh) 2009-07-27 2011-04-20 宁波大学 一种基于预测模式的h.264/avc视频信息隐藏方法
CN102224731A (zh) 2009-09-22 2011-10-19 松下电器产业株式会社 图像编码装置、图像解码装置、图像编码方法及图像解码方法
CN105847813B (zh) * 2010-07-13 2018-11-06 日本电气株式会社 视频解码装置和视频解码方法
BR112013012814B1 (pt) 2010-10-26 2019-10-08 Nec Corporation Dispositivo de decodificação de vídeo e método de decodificação de vídeo
EP2571699B1 (de) 2010-11-08 2013-10-30 U-NICA Technology AG Verfahren und vorrichtung zur erzeugung von farbbildern mit einem uv-laser auf pigmentierten substraten und dadurch hergestellte produkte
KR102696949B1 (ko) 2010-12-08 2024-08-20 엘지전자 주식회사 인트라 예측 방법과 이를 이용한 부호화 장치 및 복호화 장치
WO2012086203A1 (ja) 2010-12-22 2012-06-28 パナソニック株式会社 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法
CN102025997A (zh) 2010-12-22 2011-04-20 中兴通讯股份有限公司 隐藏信息的方法和装置、提取隐藏信息的方法和装置
JP5850214B2 (ja) 2011-01-11 2016-02-03 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
TWI547152B (zh) 2011-02-22 2016-08-21 太格文 Ii有限責任公司 影像解碼方法及影像解碼裝置
AU2012221588B2 (en) 2011-02-22 2015-12-17 Sun Patent Trust Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
WO2012131474A1 (en) 2011-03-29 2012-10-04 Jura Trade, Limited Method and apparatus for generating and authenticating security documents
CN107396129B (zh) 2011-03-30 2020-05-05 Lg 电子株式会社 环路滤波方法及其设备
CN103563374B (zh) 2011-05-27 2017-02-08 索尼公司 图像处理设备及方法
JP5745175B2 (ja) 2011-06-28 2015-07-08 サムスン エレクトロニクス カンパニー リミテッド 適応的な量子化パラメータ差分値を用いた映像の符号化及び復号化方法と装置
US9510020B2 (en) 2011-10-20 2016-11-29 Qualcomm Incorporated Intra pulse code modulation (IPCM) and lossless coding mode deblocking for video coding
US9161046B2 (en) 2011-10-25 2015-10-13 Qualcomm Incorporated Determining quantization parameters for deblocking filtering for video coding

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100358366C (zh) * 2002-07-11 2007-12-26 松下电器产业株式会社 滤波强度的决定方法、动态图像编码方法及解码方法
CN100493205C (zh) * 2003-08-19 2009-05-27 松下电器产业株式会社 动态图像编码方法及动态图像解码方法

Also Published As

Publication number Publication date
KR102215469B1 (ko) 2021-02-16
CA3027092A1 (en) 2012-08-30
US10015498B2 (en) 2018-07-03
US20120213274A1 (en) 2012-08-23
JP5342069B2 (ja) 2013-11-13
CN105245904B (zh) 2018-09-18
AU2012221587A1 (en) 2013-01-10
TWI574555B (zh) 2017-03-11
US20140105294A1 (en) 2014-04-17
AU2017203193B2 (en) 2018-04-26
US9729874B2 (en) 2017-08-08
MX2013000093A (es) 2013-02-27
CN105245904A (zh) 2016-01-13
BR112012021600A2 (pt) 2020-06-16
TWI562643B (en) 2016-12-11
ES2669978T3 (es) 2018-05-29
KR102194079B1 (ko) 2020-12-23
TW201611588A (zh) 2016-03-16
JP5559918B2 (ja) 2014-07-23
CN102907097A (zh) 2013-01-30
KR102030977B1 (ko) 2019-10-10
TW201242370A (en) 2012-10-16
CA2801215C (en) 2020-06-30
KR101954461B1 (ko) 2019-03-05
JP2014003660A (ja) 2014-01-09
CA2801215A1 (en) 2012-08-30
TW201611589A (zh) 2016-03-16
AU2012221587B9 (en) 2017-10-12
KR20190112836A (ko) 2019-10-07
CA3027092C (en) 2019-12-31
EP2680583A4 (en) 2016-01-20
EP2680583B1 (en) 2018-04-11
JPWO2012114724A1 (ja) 2014-07-07
US10798391B2 (en) 2020-10-06
WO2012114724A1 (ja) 2012-08-30
HUE038308T2 (hu) 2018-10-29
KR20190021478A (ko) 2019-03-05
PL2680583T3 (pl) 2018-08-31
KR20130139220A (ko) 2013-12-20
TWI547152B (zh) 2016-08-21
US10511844B2 (en) 2019-12-17
BR112012021600B1 (pt) 2021-02-09
US20170280146A1 (en) 2017-09-28
KR102112241B1 (ko) 2020-05-19
JP5843818B2 (ja) 2016-01-13
LT2680583T (lt) 2018-07-10
AU2012221587B2 (en) 2017-06-01
EP2680583A1 (en) 2014-01-01
AU2017203193A1 (en) 2017-06-08
JP2014003659A (ja) 2014-01-09
US9826230B2 (en) 2017-11-21
JP2014017847A (ja) 2014-01-30
KR20200143512A (ko) 2020-12-23
US20200077101A1 (en) 2020-03-05
CN105245903B (zh) 2018-09-07
US20180249165A1 (en) 2018-08-30
KR20200055153A (ko) 2020-05-20
JP5422773B2 (ja) 2014-02-19
AU2012221587A2 (en) 2013-01-24
CN105245903A (zh) 2016-01-13

Similar Documents

Publication Publication Date Title
CN102907097B (zh) 滤波方法、动态图像编码装置、动态图像解码装置和动态图像编码解码装置
CN103703774B (zh) 滤波方法、解码方法、以及编码方法
CN103621097B (zh) 图像处理方法及图像处理装置
CN107277552B (zh) 图像编码方法及装置、图像解码方法及装置
CN104604225A (zh) 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置
CN103069805A (zh) 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置
CN103119943B (zh) 图像编码方法及图像解码方法
CN105325010A (zh) 图像编码方法、图像解码方法、图像编码装置及图像解码装置
CN103621088A (zh) 图像编码方法、图像解码方法、图像编码装置、图像解码装置和图像编码解码装置
CN104429075A (zh) 图像编码方法、图像解码方法、图像编码装置及图像解码装置
CN103039076B (zh) 图像编码方法、图像解码方法、图像编码装置及图像解码装置
CN103650500A (zh) 图像编码方法、图像编码装置、图像解码方法、图像解码装置及图像编码解码装置
CN102860009A (zh) 编码失真除去方法、编码方法、解码方法、编码失真除去装置、编码装置、及解码装置
CN104509116A (zh) 图像解码方法、图像编码方法、图像解码装置、图像编码装置及图像编码解码装置
CN105308972A (zh) 图像编码方法以及图像编码装置
CN105284110A (zh) 图像编码方法及图像编码装置
CN104769946A (zh) 图像编码方法、图像解码方法、图像编码装置以及图像解码装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: TIGEWIN -II CO., LTD.

Free format text: FORMER OWNER: MATSUSHITA ELECTRIC INDUSTRIAL CO, LTD.

Effective date: 20150116

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20150116

Address after: Maryland USA

Applicant after: TAGIVAN II LLC

Address before: Osaka Japan

Applicant before: Matsushita Electric Industrial Co., Ltd.

C14 Grant of patent or utility model
GR01 Patent grant