CN101523923B - 影像编码方法和解码方法及其装置 - Google Patents
影像编码方法和解码方法及其装置 Download PDFInfo
- Publication number
- CN101523923B CN101523923B CN2007800367235A CN200780036723A CN101523923B CN 101523923 B CN101523923 B CN 101523923B CN 2007800367235 A CN2007800367235 A CN 2007800367235A CN 200780036723 A CN200780036723 A CN 200780036723A CN 101523923 B CN101523923 B CN 101523923B
- Authority
- CN
- China
- Prior art keywords
- sampling
- signal
- frame
- colourity
- chromatic component
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N11/00—Colour television systems
- H04N11/04—Colour television systems using pulse code modulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Color Television Systems (AREA)
Abstract
一种影像编码方法,将由两个信号成分以上构成的影像信号作为编码对象,该影像编码方法具备:对应于帧内的性质,设定对于帧的特定信号成分的下采样比的步骤;以及通过对应于所述设定了的下采样比,对帧的特定的信号成分进行下采样,从而生成编码对象影像信号的步骤。也可以对应于帧内的局部的性质,将帧分割为部分区域,对应于各部分区域内的性质,设定对于该部分区域的特定的信号成分的下采样比。
Description
技术领域
本发明涉及将由两个信号成分以上构成的影像信号作为编码对象的影像编码方法及其装置、对通过该影像编码方法生成的编码数据进行解码的影像解码方法及其装置。
本申请基于2006年10月10日申请的日本专利申请2006-276074号主张优先权,并在这里引用其内容。
背景技术
在以H.264/AVC起始的活动图像的标准编码方式中,使用输入图像的色度成分(chrominance elements)与亮度成分相比被下采样(downsampling)(即,以比亮度成分的采样频率低的频率被重新采样)了的信号。这相当于被称为4:2:2、4:2:0、4:1:1格式的影像格式。
像这样重新采样了色度成分的影像格式是基于与亮度成分相比对色度成分的视觉敏感度低的生理学的知见的影像格式、以削减影像的信息量、摄像设备的低成本化等目的而被导入(例如,参照非专利文献1、2)。
另一方面,受到对影像的高图像质量化的期待的高涨,不对色度信号进行重新采样的4:4:4格式影像受到瞩目。例如,在JVT(Joint Video Team,联合视频编码组)中,正在进行对H.264的新框架(advanced 4:4:4profile)的制定。
非专利文献1:“YUV4:2:0 フオ一マツトカラ一画像の色度成分補間法”,杉田博司,田口亮,信学論,Vol.J88-A,No.6,pp.751-760,2005
非专利文献2:“適応的直交変換によるカラ一画像圧縮-ソ一トされた辞書による高速化-”,三浦高志,板垣史彦,横山昭彦,山口百惠,信学論,Vol.J85-D2,No.11,pp.1672-1682,November 2002
本发明要解决的课题
色度成分的下采样是一边抑制主观图像质量的下降一边使码量减少的有效的方法。可是,根据图像的内容,有时能够进一步进行下采样而不导致主观图像质量的劣化。另一方面,根据图像的内容,对帧内的色度成分同样地进下采样,也有损害4:4:4格式影像的高图像质量的情况。
图像信号的性质按照帧的每一个而变化、进而,即使在帧内也有局部地变化。对应于这样的变化,对色度成分的视觉敏感度也变化。例如,在像素值小(暗)的帧(或区域)中,与像素值大(亮)的帧(或区域)相比,对色度成分的视觉敏感度下降。
因此,通过对应于每一个帧的性质、或帧内的局部的性质使色度成分的下采样比率变化,有能够在保持主观图像质量的同时,有效率地削减码量的可能性。
可是,现有技术的对色度成分的下采样是对全部帧以同样的比率进行,关于编码效率还留存有改善的余地。
发明内容
本发明正是基于上述情况而完成的,其目的在于确立一种新的影像编码/解码技术,通过导入针对每个帧的适应的下采样处理、和针对各帧内的每个区域的适应的下采样处理,能够有效率地削减码量。
用于解决课题的方法
使下采样比(downsampling ratio)适应地变化的本发明的影像编码装置
[1-1]使帧为单位而适应地变化的结构
为了实现上述目的,本发明的影像编码装置在将由两个信号成分以上构成的影像信号作为编码对象的情况下,构成为具备:(1)设定单元,对应于帧内的性质,对帧的特定的信号成分设定下采样比;(2)生成单元,对应于设定单元设定了的下采样比,通过对帧的特定的信号成分进行下采样,生成成为向编码器的输入对象的影像信号。
这里,通过以上的各处理单元工作而实现的本发明的影像编码方法以计算机程序也能够实现,该计算机程序记录在适当的计算机能够读取的记录介质中而被提供,或经由网络而被提供,在实施本发明时被安装 并通过在CPU等的控制单元上工作,从而实现本发明。
在这样构成的本发明的影像编码装置中,例如在比较过渡量(amount of transition)大的帧和过渡量小的帧的情况下,在前者中视觉敏感度相对地变低,因此,在过渡量大的帧中,与过渡量小的帧相比,即使进行大的下采样主观图像质量也不下降,着眼于这一点,例如对应于帧内的过渡量的大小,在每一个帧中对色度信号等的特定的信号成分设定下采样比,对应于该设定了的下采样比,以帧为单位对特定的信号成分进行下采样,由此生成成为向编码器的输入对象的影像信号。
按照该结构,根据本发明的影像编码装置,能够在保持主观图像质量的同时有效率地削减码量。
[1-2]使帧内的部分区域为单位而适应地变化的结构
在上述影像编码装置中,上述设定下采样比的单元也可以具有:
对应于帧内的局部的性质,将帧分割为部分区域的单元;
对应于各部分区域内的性质,对该部分区域的特定的信号成分设定下采样比的单元,
对应于上述设定了的下采样比,通过对上述部分区域的特定的信号成分进行下采样,从而生成上述编码对象影像信号。
在这样构成的影像编码装置中,例如在比较过渡量大的部分区域和过渡量小的部分区域的情况下,在前者中视觉敏感度相对地变低,因此,在过渡量大的部分区域中,与过渡量小的部分区域相比,即使进行大的下采样主观图像质量也不下降,着眼于这一点,例如对应于帧的部分区域内的过渡量的大小,在每一个帧内的部分区域中对色度信号等的特定的信号成分设定下采样比,对应于该设定了的下采样比,以帧内的部分区域为单位对特定的信号成分进行下采样,由此生成成为向编码器的输入对象的影像信号。
在该结构的情况下,同样地能够在保持主观图像质量的同时有效率地削减码量。
用于处理通过使下采样比适应地变化而发生的编码块模式的变化的本发明的影像编码装置和影像解码装置
本发明的影像编码装置的基本结构是,将由两个信号成分以上构成的影像信号作为编码对象,对应于每个帧或帧内的每个部分区域而设定的下采样比,对通过下采样特定的信号成分而生成的影像信号进行编 码。
另一方面,在标准化了的影像编码装置中,有时采用如下结构,针对通过编码而得到的量化后的各信号成分,将表示某种大小的块的每一个中是否包含作为非零的系数的有意系数(significant coefficient)的信息赋予该块。当采用这样的结构时,针对没有包含有意系数的块,能够省略变换系数的赋予,由此能够谋求削减码量。
可是,在本发明的影像编码装置中,因为使特定的信号成分的下采样比适应地变化,所以各信号成分的块的组合模式并不是固定的。
因此,在本发明中,还可以具备:在针对通过所述编码对象影像信号的编码而得到的量化后的各信号成分,将表示某种程度大小的块的每一个中是否包含作为非零的系数的有意系数的信息赋予该块的情况下,将表示在哪个位置的块的集合共有了所述特定的信号成分的信息,对该块的集合进行赋予的单元。
而且,本发明提供一种影像解码装置,对通过该影像编码装置生成的影像信号的编码数据进行解码,其中,该影像解码装置具备:
通过对表示所述哪个位置的块的集合共有了所述特定的信号成分的信息的编码数据进行解码,判定解码对象的块集合是否是共有了所述特定的信号成分的块集合的判定单元;
针对所述判定单元判定为是共有了所述特定信号成分的块集合的块集合,通过对其共有的所述特定的信号成分的编码数据进行解码,从而对与在编码侧设定的下采样比对应地被下采样的信号成分进行解码的单元。
这里,通过以上的各处理单元工作而实现的本发明的影像编码方法和本发明的影像解码方法也能够以计算机程序实现,该计算机程序记录在适当的计算机能够读取的记录介质中而被提供,或经由网络而被提供,在实施本发明时通过被安装并在CPU等的控制单元上工作,从而实现本发明。
在这样构成的本发明的影像编码装置中,将表示在哪个位置的块集合共有了特定的信号成分的信息对该块集合进行赋予。
而且,本发明提供一种影像解码装置,对通过该影像编码装置生成的影像信号的编码数据进行解码,该影像解码装置具备:
通过对表示所述哪个位置的块集合共有了所述特定的信号成分的信息的编码数据进行解码,判定解码对象的块集合是否是共有了所述特定的信号成分的块集合的判定单元;
针对所述判定单元判定为是共有了所述特定信号成分的块集合的块集合,通过对其共有的所述特定的信号成分的编码数据进行解码,从而对与在编码侧设定的下采样比对应地被下采样的信号成分进行解码的单元。
按照该结构,根据本发明,在采用以帧或帧内的片(slice)为单位而使下采样比适应地变化的结构时,即使有按照该结构而各信号成分的块的组合模式变化的情况,也能够不改变在标准化了的影像编码装置中使用的结构而使用该结构,其中该标准化了的影像编码装置对某种程度大小的块赋予表示量化信号是否包含有意系数的信息。
用于处理通过使下采样比适应地变化而发生的参照帧的内插精度的变化的本发明的影像编码装置和影像解码装置
[3-1]下采样比以帧为单位而适应地变化的情况
本发明的影像编码装置的基本结构是,将由两个信号成分以上构成的影像信号作为编码对象,对与按照每个帧而设定的下采样比对应地下采样特定的信号成分而生成的影像信号进行编码。
另一方面,在影像编码装置中,有时在帧间预测中使用小数像素精度的运动补偿。当采用这样的结构时,能够实现高精度的运动补偿。
可是,在本发明的影像编码装置中,因为以帧为单位而使特定的信号成分的下采样比适应地变化,所以在帧间预测中使用小数像素精度的运动补偿的情况下所需要的参照帧的内插精度(interpolation accuracy)不能是固定的。
因此,本发明的所述影像编码装置可以还具备:
在所述编码对象影像信号的编码中,在帧间预测中使用小数像素精度的运动补偿的情况下,对应于编码对象帧的下采样比、和参照帧的下采样比的比率值,使所述参照帧中的被下采样了的信号成分的内插精度变化的单元;
基于所述变化的内插精度,生成所述参照帧的内插图像的单元。
与此对应,本发明提供一种影像解码装置,对通过上述影像编码装置生成的影像信号的编码数据进行解码,该影像解码装置具备:
在帧间预测中使用小数像素精度的运动补偿的情况下,对应于解码 对象帧的下采样比、和参照帧的下采样比的比率值,使所述参照帧中的被下采样了的信号成分的内插精度变化的单元;
基于所述变化的内插精度,生成所述参照帧的内插图像的单元。
这里,通过以上的各处理单元工作而实现的本发明的影像编码方法和本发明的影像解码方法也能够以计算机程序实现,该计算机程序记录在适当的计算机能够读取的记录介质中而被提供,或经由网络而被提供,在实施本发明时通过被安装并在CPU等的控制单元上工作,从而实现本发明。
在这样构成的本发明的影像编码装置中,对应于编码对象帧的下采样比、和参照帧的下采样比的比率值,使参照帧中的被下采样了的信号成分的内插精度变化,基于该变化了的内插精度,生成所述参照帧的内插图像。
此外,在具有与此对应的结构的本发明的影像解码装置中,对应于解码对象帧的下采样比、和参照帧的下采样比的比率值,使参照帧中的被下采样了的信号成分的内插精度变化,基于该变化了的内插精度,生成所述参照帧的内插图像。
按照该结构,根据本发明,在采用以帧为单位使下采样比适应地变化的结构时,即使有按照该结构而参照帧的内插精度变化的情况,也能够生成实现所要求的运动补偿的参照帧的内插图像。
[3-2]下采样比以帧内的部分区域为单位而适应地变化的情况
本发明的影像编码装置能够更细致地,对与在帧内的部分区域的每一个设定的下采样比对应地下采样特定的信号成分而生成的影像信号进行编码。
如上述那样,在影像编码装置中,有时在帧间预测中使用小数像素精度的运动补偿。这是因为当采用这样的结构时,能够实现高精度的运动补偿。
可是,在上述的影像编码装置中,因为以帧内的部分区域为单位而使特定的信号成分的下采样比适应地变化,所以在帧间预测中使用小数像素精度的运动补偿的情况下所需要的参照帧的内插精度不能是固定的。
因此,所述影像编码装置还可以具备:
在所述编码对象影像信号的编码中,在帧间预测中使用小数像素精 度的运动补偿的情况下,对应于编码对象帧内的各部分区域的下采样比、和该部分区域在运动补偿时参照的参照帧内的部分区域的下采样比的比率值,使所述参照帧内的部分区域中的被下采样了的信号成分的内插精度变化的单元;
基于所述变化的内插精度,生成所述参照帧内的部分区域的内插图像的单元。
与此对应,本发明提供一种影像解码装置,对通过上述影像编码装置生成的影像信号的编码数据进行解码,该影像解码装置具备:
在帧间预测中使用小数像素精度的运动补偿的情况下,对应于解码对象帧内的各部分区域的下采样比、和该部分区域在运动补偿时参照的参照帧内的部分区域的下采样比的比率值,使所述参照帧内的部分区域中的被下采样了的信号成分的内插精度变化的单元;
基于所述变化的内插精度,生成所述参照帧内的部分区域的内插图像的单元。
这里,通过以上的各处理单元工作而实现的本发明的影像编码方法和本发明的影像解码方法也能够以计算机程序实现,该计算机程序记录在适当的计算机能够读取的记录介质中而被提供,或经由网络而被提供,在实施本发明时通过被安装并在CPU等的控制单元上工作,从而实现本发明。
在这样构成的本发明的影像编码装置中,对应于编码对象帧内的部分区域的下采样比、和该部分区域在运动补偿时参照的参照帧内的部分区域的下采样比的比率值,使参照帧内的部分区域中的被下采样了的信号成分的内插精度变化,基于该变化的内插精度,生成所述参照帧内的部分区域的内插图像。
此外,在具有与此对应的结构的本发明的影像解码装置中,对应于解码对象帧内的部分区域的下采样比、和该部分区域在运动补偿时参照的参照帧内的部分区域的下采样比的比率值,使参照帧内的部分区域中的被下采样了的信号成分的内插精度变化,基于该变化了的内插精度,生成所述参照帧内的部分区域的内插图像。
按照该结构,根据本发明,在采用以帧内的片为单位使下采样比适应地变化的结构时,即使有按照该结构而参照帧的内插精度变化的情况,也能够生成实现所要求的运动补偿的参照帧的内插图像。
本发明的影像编码方法,将由两个信号成分以上构成的影像信号作为编码对象,具备:对应于帧内的过渡量的大小,设定对于帧的特定的信号成分的下采样比的步骤;通过对应于所述设定了的下采样比,对帧的特定的信号成分进行下采样,从而生成编码对象影像信号的步骤;以及对于通过所述编码对象影像信号的编码而得到的量化后的各信号成分,在将表示某种大小的块的每一个中是否包含作为非零的系数的有意系数的信息赋予该块的情况下,将表示哪个位置的块的集合共有所述特定的信号成分的信息对该块的集合进行赋予的步骤。
本发明的影像解码方法,对通过上述的影像编码方法生成的影像信号的编码数据进行解码,具备:通过对表示所述哪个位置的块的集合共有了所述特定的信号成分的信息的编码数据进行解码,判定解码对象的块集合是否是共有了所述特定的信号成分的块集合的步骤;以及对于在所述判定步骤中判定为是共有了所述特定的信号成分的块集合的块集合,通过对其共有的所述特定的信号成分的编码数据进行解码,对应于在编码侧设定的下采样比对被下采样了的信号成分进行解码的步骤。
本发明的影像编码装置,将由两个信号成分以上构成的影像信号作为编码对象,具备:对应于帧内的过渡量的大小,设定对于帧的特定的信号成分的下采样比的单元;通过对应于所述设定了的下采样比,对帧的特定的信号成分进行下采样,从而生成编码对象影像信号的单元;以及对于通过所述编码对象影像信号的编码而得到的量化后的各信号成分,在将表示某种大小的块的每一个中是否包含作为非零的系数的有意系数的信息赋予该块的情况下,将表示哪个位置的块的集合共有所述特定的信号成分的信息对该块的集合进行赋予的单元。
本发明的影像解码装置,对通过上述的影像编码装置生成的影像信号的编码数据进行解码,具备:通过对表示所述哪个位置的块的集合共有了所述特定的信号成分的信息的编码数据进行解码,判定解码对象的块集合是否是共有了所述特定的信号成分的块集合的单元;以及对于所述判定单元判定为是共有了所述特定的信号成分的块集合的块集合,通过对其共有的所述特定的信号成分的编码数据进行解码,对应于在编码侧设定的下采样比对被下采样了的信号成分进行解码的单元。
发明的效果
根据本发明,在对影像进行编码时,对应于每个帧的性质、或帧内 的局部的性质,能够使特定的信号成分的下采样比适应地变化,由此能够实现对应于视觉灵敏度等的有效率的码量减少。
此外,根据本发明,即使有通过使下采样比适应地变化,各信号成分的块的组合模式变化的情况,也能够不改变在标准化了的影像编码装置中使用的结构,而使用该结构,其中该标准化了的影像编码装置对某种程度大小的块赋予表示量化信号是否包含有意系数的信息。
而且,根据本发明,在帧间预测中使用小数像素精度的运动补偿的情况下,即使有通过使下采样比适应地变化而参照帧的内插精度变化的情况,也能够生成实现所要求的运动补偿的参照帧的内插图像。
附图说明
图1是本发明的下采样处理的说明图。
图2是本发明的下采样处理的说明图。
图3是本发明的下采样处理的说明图。
图4是本发明的下采样处理的说明图。
图5是CBP的说明图。
图6是表示亮度成分和被下采样了的色度成分的一个例子的说明图。
图7A是色度共有块集的说明图。
图7B同样地是色度共有块集的说明图。
图7C同样地是色度共有块集的说明图。
图7D同样地是色度共有块集的说明图。
图8是参照帧的内插精度的说明图。
图9是本发明的编码处理的流程图的一个实施例。
图10是图9的流程图的后续部分。
图11是本发明的解码处理的流程图的一个实施例。
图12是图11的流程图的后续部分。
图13是本发明的影像编码装置的一个实施例。
图14是本发明的影像解码装置的一个实施例。
图15是本发明的参照帧内插图像生成装置的一个实施例。
图16是表示影像编码装置的装置结构例的图。
图17是表示影像解码装置的装置结构例的图。
图18是本发明的参照帧内插图像生成处理的流程图的一个实施例。
附图标志说明
100适应处理标志设定部
101适应处理标志存储部
102亮度信号读入部
103亮度信号存储部
104色度信号读入部
105色度信号存储部
106下采样比设定部
107下采样比存储部
108色度信号下采样处理部
109色度信号存储部
110有色度宏块位置信息设定部
110-1序列适应处理部
110-2片适应处理部
110-3色度适应处理部
111编码流生成部
111-1头部信息编码部
111-2头部信息编码流存储部
111-3亮度信号/色度信号编码处理部
111-4亮度信号/色度信号编码流存储部
111-5编码流复用部
112编码流存储部
113最终片判定部
具体实施方式
下面,按照实施方式对本发明进行详细地说明。
在本发明中,实现了一种新的影像编码/解码技术,该技术通过导入针对每个帧的适应的下采样处理、和针对各帧内的每个区域的适应的下采样处理,能够有效率地削减码量。
在下面表示该适应的下采样处理导入所需要的编码器/解码器中的功能。
再有,在以下的例子中,将由亮度信号(Y)和两个色度成分(Cb,Cr)构成的色空间中的色度成分作为下采样的对象,但本发明的对象并不限于该色空间的信号。
例如,本发明对通过对4:4:4格式的影像信号实施任意的颜色变换而得到的三个成分也能够同样地进行。进而,实施适应的下采样处理的成分的数量也不被限定于特定的数。例如,在作为色变化使用KL变换而得到第一主成分、第二主成分、第三主成分的情况下,能够以任意一个成分作为对象。此外,也有将三个成分中的两个成分(例如第二主成分、第三主成分)作为对象的例子。进而,当然也能够将三个成分全部作为对象。
进而,在将色空间信号以外的信号作为下采样的对象的情况下,本发明也能够同样地应用。
帧单位的适应处理
在本发明的第一方式中,对应于帧内的性质,使对于色度成分的帧下采样比适应地变化。
帧下采样比指的是在将4:4:4格式的影像的第t帧的大小作为W[t]×H[t][像素],将下采样后的色度成分的帧大小作为W’[t]×H’[t][像素]的情况下,以
rf[t]=W’[t]/W[t]=H’[t]/H[t]
的数式定义的rf[t](<1)。
图1所示的例子,是从起始帧起依次将帧下采样比设定为1/2、1/4、1/4的例子。
这里,将两个色度成分(Cb,Cr成分)的帧下采样比作为相同的值。
这里,能够对两个色度成分(Cb,Cr成分)独立地设定帧下采样比。
图2表示该例子。在这里,表示从起始帧起依次将Cb成分的帧下采样比设定为1/2、1/4、1/2,将Cr成分的帧下采样比设定为1/2、1/21/4的例子。
关于对各帧的下采样比的设定方法是从与进行下采样的机构不同的另外设置的外部的机构提供的。
例如,对应于帧内的过渡(变化)量的大小,能够设置对于各帧的 下采样比。
在比较过渡量大的帧和过渡量小的帧的情况下,在前者中视觉灵敏度相对地变低。因此,在过渡量大的帧中,与过渡量小的帧相比较,能够以进行大的下采样的方式较小地设定下采样比。
由此,在该情况下,设定下采样比的机构针对帧检测出过渡量的大小,决定与其对应的下采样比,对进行下采样的机构指示按照该决定了的下采样比对该帧进行下采样。
片单位的适应处理
在本发明的第二方式中,对应于帧内的性质,使对于色度成分的片下采样比适应地变化。
片下采样比指的是在将4:4:4格式影像的色度成分的第t帧分割为数个部分区域(将此称为“片”),将第i片的大小作为w[t,i]×h[t,i][像素],将下采样后的第i片的大小作为w’[t,i]×h’[t,i][像素]的情况下,以
rs[t,i]=w’[t,i]/w[t,i]=h’[t,i]/h[t,i]
的数式定义的rs[t,i](<1)。
这里,i=0,1,...,I-1,I是帧内的片的总数。
图3的上行表示将色度成分的帧分割为两个片的情况的例子。下面,为了方便将两个片中位于上方的片称为第一片,将位于下方的片称为第二片。
在本例中,如图3的下行所示,将第一片的片下采样比设定为1/2,将第二片的片下采样比设定为1/4,这里,将两个色度成分(Cb,Cr成分)的片下采样比作为相同值。
这里,能够对两个色度成分(Cb,Cr成分)独立地设定片下采样比。
图4表示该例子。如上行所示,在与图3相同的片分割设定中,将Cb成分的第一片和第二片的片下采样比分别设定为1/2,1/4,将Cr成分的第一片和第二片的片下采样比分别设定为1/4,1/2。
所述帧下采样比使对于每个帧的下采样比是可变的,相对于此,该片下采样比进而在帧内中局部地使下采样比是可变的。
关于将帧的分割成片的方法,和对各片的片下采样比的设定方法是从与进行片下采样的机构不同的另外设置的外部的机构提供的。
例如,对应于过渡(变化)量的大小,能够区域分割为片。在比较 过渡量大的片和过渡量小的片的情况下,在前者中视觉灵敏度相对地变低。因此,在过渡量大的片中,与过渡量小的片相比较,能够以进行大的片下采样的方式较小地设定片下采样比。
由此,在该情况下,设定片下采样比的机构针对帧内的各小区域检测出过渡量的大小,基于此将帧区域分割为片,并且对各片决定对应于该片内的过渡量的片下采样比,对进行片下采样的机构指示按照该决定了的片下采样比对对应的片进行片下采样。
编码块模式
接着,对进行本发明的适应的帧下采样和片下采样时的与CBP(后述)相关的位分配进行说明。
在H.264中,将16×16[像素]的亮度成分、和两个8×8[像素]的色度成分称为宏块,以该宏块为单位将变换系数变换为编码流。
这时,如图5所示那样,对包括亮度成分的四个8×8[像素]的子块、和同一大小的两个色度成分的子块的六个子块,赋予表示各子块内的变换系数是否包含有意系数(非零的系数)的六位的信息。将该信息称为“Coded Block Pattern(CBP),块编码模式”。
再有,图5中的子块内的数字表示对于各子块的CBP内的位的位置。
对CBP内的对应的位为0的子块,不附加CBP以外的变换系数的编码信息。这是为了削减码量的处理。另一方面,对于同位成为1的子块,附加变换系数的信息。
在H.264中,使用这样的CBP谋求码量的削减,在进行本发明的适应的帧下采样和片下采样时,需要构筑为了能够使用该CBP的结构。
由此,在本发明中,在色度成分的下采样比为可变的情况下,变更与该CBP相关的位分配。
接着,对本发明的与CBP相关的位分配进行说明。
作为例子,考虑将宏块中的亮度成分的大小作为16×16,将帧下采样比(或片下采样比)作为r(<1/2)的情况。
在该情况下,发生构成要素不同的两种宏块。
即,包括以亮度成分的四个8×8[像素]的子块和相同大小的两个色度成分的子块构成的六个子块的宏块,和仅包括亮度成分的四个8×8[像素]的子块的宏块。
在前者的情况下,CBP与现有技术同样地以6位表示。另一方面,在后者的情况下,CBP以4位表示。
图6表示r=1/4的例子。在该情况下,关于色度成分和亮度成分的组合,可以考虑图7A~7D所示的四种。因此,需要表示在哪个位置的宏块保有色度成分的信息。
将色度成分和共有该色度成分的亮度成分构成的像素集合称为色度共有块集。即,在图7A~7D的任意一个中,某个宏块所保有的色度成分(图中施加了阴影的部分)被其它的三个宏块(仅具有亮度成分)所共有。
此外,将在色度共有块集中保有色度成分的宏块的位置称为有色度宏块位置。
关于该有色度宏块位置的表现方法,对本发明使用的表现方法在以下进行说明。
[3-1]本发明的第三方式
这是预先决定有色度宏块位置的方法。
例如,一个例子是以仅在与扫描顺序的起始最近的宏块保有色度成分的方式来决定。如果预先将该位置在编码器/解码器共有的话,在解码器中没有附加信息就能够解码。
[3-2]本发明的第四方式
这是对序列(被压缩的影像整体)的每一个,在编码器侧设定有色度宏块位置的方法。
在该情况下,有色度宏块位置在序列内采取固定的值。伴随于此,需要将以下的信息作为编码信息对编码流赋予。
首先将表示本适应处理的应用的有无的标志(chroma-position-sequence-adaptive)作为头部信息对编码流赋予。在进行本适应处理的情况下,同标志被设定为1,在不是的情况下,将同标志设定为0。
进而,由于有色度宏块位置按照序列的每一个而变化,所以将对于各序列的有色度宏块位置作为序列的头部信息对编码流赋予。将本处理称为序列适应有色度宏块位置可变处理。
[3-3]本发明的第五方式
这是对片的每一个,在编码器侧设定有色度宏块位置的方法。
在这里,如上所述,片指的是将各帧内分割了的部分区域。关于具体的分割的方法,是从设置于外部的决定片分割的机构提供的。
在该情况下,有色度宏块位置在片内采取固定的值。伴随于此,需要将以下的信息作为编码信息对编码流赋予。
首先将表示本适应处理的应用的有无的标志(chroma-position-slice-adaptive)作为头部信息对编码流赋予。在进行本适应处理的情况下,同标志被设定为1,在不是的情况下,将同标志设定为0。
进而,由于有色度宏块位置按照片的每一个而变化,所以需要将对于各片的有色度宏块位置作为片的头部信息对编码流赋予。将本处理称为片适应有色度宏块位置可变处理。
[3-4]本发明的第六方式
这是对色度共有块集的每一个,在编码器侧设定有色度宏块位置的方法。在该情况下,能够对色度共有块集的每一个使有色度宏块位置变化。伴随于此,需要将以下的信息作为编码信息对编码流赋予。
首先将表示本适应处理的应用的有无的标志(chroma-position-MBs-adaptive)作为头部信息对编码流赋予。在进行本适应处理的情况下,同标志被设定为1,在不是的情况下,将同标志设定为0。
进而,由于有色度宏块位置按照色度共有块集的每一个而变化,所以需要对于各色度共有块集将有色度宏块位置作为色度共有块集的头部信息对编码流赋予。将本处理称为色度共有块集适应有色度宏块位置可变处理。
运动矢量的编码形式
接着,对进行本发明的适应的帧下采样和片下采样时的运动矢量的编码形式进行说明。
在色度共有块集内,设亮度成分和色度成分共有相同的运动矢量信息。其中,关于色度,需要对应于下采样比对运动矢量进行缩放(scaling)。
例如,在赋予编码流的运动矢量是v=(4,8),下采样比是1/4的情况下,亮度成分的运动矢量是v=(4,8),色度成分的运动矢量是(1/4)×v=(1,2)。
[4-1]本发明的第七方式
对应于编码对象帧(第t帧)和参照帧(第t-1帧)的帧下采样比,基于以下所示的数式(1),使参照帧的色度成分的内插精度变化,基于此生成参照帧的色度成分的内插图像。
再有,在以下将编码对象帧的帧下采样比作为rf[t],将参照帧的帧下采样比作为rf[t-1]。
在第t帧的亮度成分的运动估计精度(运动补偿精度)为1/M的情况下,参照帧的色度成分的内插精度A以
A=(rf[t-1]/rf[t])×(1/M) 数式(1)
来求取。
例如,在编码对象帧的亮度成分的运动估计为1/4像素精度、编码对象帧的色度成分的下采样比为1/4、参照帧的色度成分的下采样比为1/2的情况下,参照帧的色度成分的运动内插精度A按照该数式(1),成为
A=(1/2)÷(1/4)×(1/4)=1/2
的1/2像素精度。
这是基于如下理由。在编码对象帧的色度成分的下采样比为1/4的情况下,色度成分的运动矢量使用将亮度成分的运动矢量缩放为1/4的矢量。通过该缩放,运动矢量的不足1像素的信息被丢弃,编码对象帧的色度成分的运动估计精度为1像素精度。
另一方面,参照帧的下采样比为1/2,成为亮度信号的一半的分辨率。因此,编码对象帧的色度成分为了得到要求的整数像素位置的信息,需要通过对参照帧中相当于1/2像素的位置的信息进行内插而获得。
图8综合表示在将亮度成分的运动估计精度作为1/4像素精度、使编码对象帧/参照帧的下采样比以1、1/2、1/4变化的情况下的参照帧的内插精度(通过数式(1)求取的内插精度A)的结果。
这里,图8中表示的编码对象帧(的色度成分)所需要的运动估计精度通过
(1/rf[t])×(1/M)
的数式来求取。
[4-2]本发明的第八方式
对应于编码对象帧(第t帧)和参照帧(第t-1帧)的片下采样比,基于以下所示的数式(2),使参照帧的色度成分的片中的内插精度变 化,基于此生成参照帧的色度成分的片中的内插图像。
再有,以下考虑编码对象帧的第i片内的块将参照帧的第j片内的区域作为运动补偿时的参照信号的情况。
这时,将编码对象帧的第i片的片下采样比作为rs[t,i],将参照帧的第j片的片下采样比作为rs[t-1,j]。
在第t帧的亮度成分的运动估计精度为1/M的情况下,参照帧的色度成分的第j片中的内插精度A[j]成为以下数式
A[j]=(rs[t-1,j]/rs[t,i])×(1/M) 数式(2)。
实施例
接着,按照实施例对本发明进行详细地说明。
在图9和图10中,图示了本发明执行的编码处理的流程图的一个实施例。按照该流程图,对本发明执行的编码处理进行详细地说明。
步骤S100:读入与有色度宏块位置信息的设定相关的标志(chroma-position-sequence-adaptive,chroma-position-slice-adaptive,chroma-position-MBs-adaptive),写出至寄存器。设定是使用所述的序列适应有色度宏块位置可变处理、还是使用所述的片适应有色度宏块位置可变处理、还是使用所述的色度共有块集适应有色度宏块位置可变处理。
步骤S101:进行与有色度宏块位置信息的设定有关的标志chroma-position-sequence-adaptive是否为1的判定,在判定结果为真值(即为“是”)的情况下,进入到步骤S102,在不是真值(即为“否”)的情况下,进入步骤S103。
步骤S102:进行设定有色度宏块位置信息的处理,将有色度宏块位置信息写出至寄存器。
这里,被设定的有色度宏块位置信息在序列整体的编码中使用。这相当于所述的第四方式。
关于具体的设定值,从设置于外部的进行有色度宏块位置信息的设定的机构提供。例如,有将编码失真和码量的加权和作为代价函数,以使同代价函数最小化的方式设定有色度宏块位置信息的方法等。
步骤S103:进行与有色度宏块位置信息的设定相关的标志chroma-position-sequence-adaptive是否为1的判定,在判定结果为真值 的情况下,进入步骤S106。在不是真值的情况下,进入步骤S104。
步骤S104:进行与有色度宏块位置信息的设定相关的标志chroma-position-slice-adaptive是否为1的判定,在判定结果为真值的情况下,进入步骤S105。在不是真值的情况下,进入步骤S106。
步骤S105:进行设定有色度宏块位置信息的处理,将有色度宏块位置信息写出至寄存器。
这里,被设定的有色度宏块位置信息在片内的编码中使用。这相当于所述的第五方式。
关于具体的设定值,从设置于外部的进行有色度宏块位置信息的设定的机构提供。例如,有将编码失真和码量的加权和作为代价函数,以使同代价函数最小化的方式设定有色度宏块位置信息的方法等。
步骤S106:读入现在观察的片的亮度信号、色度信号,写出至寄存器。
步骤S107:设定对于色度信号的下采样比。这里,被设定的下采样比是片下采样比。
关于具体的设定值,从设置于外部的进行片下采样比的设定的机构提供。例如,有在亮度值低的片中,以对色度成分进行大的下采样的方式设定小的下采样比的方法等。
步骤S108:将写出至寄存器的色度信号和设定了的下采样比作为输入,进行与输入的下采样比对应的色度成分的下采样处理,将下采样后的色度成分写出至寄存器。
关于下采样中使用的滤波器的系数,对应于下采样比,从设置于外部的进行滤波器系数的决定的机构提供。
步骤S109:进行与有色度宏块位置信息的设定相关的标志chroma-position-sequence-adaptive或chroma-position-slice-adaptive的至少一方是否为1的判定,在判定结果是真值的情况下,进入步骤S112。在不是真值的情况下,进入步骤S110。
步骤S110:进行与有色度宏块位置信息的设定相关的标志chroma-position-MBs-adaptive是否为1的判定,在判定结果是真值的情况下,进入步骤S111。在不是真值的情况下,进入步骤S112。
步骤S111:进行设定有色度宏块位置信息的处理,将有色度宏块位置信息写出至寄存器。这里,被设定的有色度宏块位置信息在色度共有 块集的编码中使用。这相当于所述第六方式。
关于具体的设定值,从设置于外部的进行有色度宏块位置信息的设定的机构提供。例如,有将编码失真和码量的加权和作为代价函数,以使同代价函数最小化的方式设定有色度宏块位置信息的方法等。
步骤S112:读入设定了的有色度宏块位置信息、和下采样比,写出至寄存器。
步骤S113:将在步骤S112写出至寄存器的有色度宏块位置信息作为输入,判定编码对象的宏块是否在有色度宏块位置,输出作为判定结果的真假值。
在输出是真值的情况下,进入步骤S114。在输出是假值的情况下,转移到步骤S115的处理。
步骤S114:将色度信号作为输入,进行编码处理,将编码结果写出至寄存器。
具体的编码方法根据使用的编码算法而不同。例如,在H.264、MPEG-2中,包括运动补偿、离散余弦变换等处理。
步骤S115:将在编码中发生的头部信息写出至寄存器。
具体的编码对象记号(symbol)等根据使用的编码算法而不同。例如在H.264的情况下,同步码是编码对象记号(这里,记号指的是信息的结构单位)。
步骤S116:将亮度信号作为输入进行编码处理,将编码结果写出至寄存器。
具体的编码方法根据使用的编码算法而不同。例如,在H.264、MPEG-2中,包括运动补偿、离散余弦变换等处理。
步骤S117、步骤S118:对色度共有块集内的全部宏块反复进行步骤S113~步骤S116的处理。
步骤S119:对片内的全部色度共有块集反复进行步骤S109~步骤S118的处理。
步骤S120:对序列内的全部片反复进行步骤S103~步骤S119的处理。
这样,在本实施例中,以下述方式进行处理,对应于适应地设定的片下采样比,一边对色度成分进行片下采样,一边对亮度成分和色度成分进行编码,同时对表示哪个宏块保有色度成分的有色度宏块位置信息 进行设定并作为头部信息进行编码。
在图11和图12中,图示了将通过图9和图10的流程图的编码处理生成的编码数据作为解码对象的、根据本发明的解码处理的流程图的一个实施例。按照该流程图,对本发明执行的解码处理进行详细地说明。
步骤S200:将编码流作为输入,对与有色度宏块位置信息的设定相关的标志(chroma-position-sequence-adaptive,chroma-position-slice-adaptive,chroma-position-MBs-adaptive)进行解码处理,将得到的标志的值写出至寄存器。
步骤S201:进行与有色度宏块位置信息的设定相关的标志chroma-position-sequence-adaptive是否为1的判定,在判定结果为真值的情况下,进入到步骤S202。在不是真值的情况下,进入到步骤S203。
步骤S202:将编码流作为输入,进行解码有色度宏块位置信息的处理,将得到的有色度宏块位置信息的值写出至寄存器。这成为使用所述的第四方式的情况下的处理。
步骤S203:将编码流作为输入,进行解码下采样比的处理,将下采样比的值写出至寄存器。
步骤S204:进行与有色度宏块位置信息的设定相关的标志chroma-position-slice-adaptive是否为1的判定,在判定结果是真值的情况下,进入步骤S205。在不是真值的情况下,进入步骤S206。
步骤S205:将编码流作为输入,进行解码有色度宏块位置信息的处理,将得到的有色度宏块位置信息的值写出至寄存器。这成为使用所述的第五方式的情况下的处理。
步骤S206:进行与有色度宏块位置信息的设定相关的标志chroma-position-MBs-adaptive是否为1的判定,在判定结果是真值的情况下,进入步骤S207。在不是真值的情况下,进入步骤S208。
步骤S207:将编码流作为输入,进行解码有色度宏块位置信息的处理,将得到的有色度宏块位置信息的值写出至寄存器。这成为使用所述的第六方式的情况下的处理。
步骤S208:将有色度宏块位置信息作为输入,判定作为编码对象的宏块是否在有色度宏块位置,将作为判定结果的真假值输出。在输出是真值的情况下,进入步骤S209。在输出是假值的情况下,转移至步骤S210的处理。
步骤S209:将编码流作为输入,进行解码色度成分的处理,将解码结果写出至寄存器。
步骤S210:将编码流作为输入,进行解码亮度成分的处理,将解码结果写出至寄存器。
步骤S211、步骤S212:对色度共有块集内的全部的宏块反复进行步骤S208~S210的处理。
步骤S213:将在步骤S203解码的下采样比作为输入,进行将下采样比换算为上采样比的处理,将计算出的值写出至寄存器。
该上采样比是下采样比的倒数。
步骤S214:将在步骤S213得到的上采样比、和在步骤S209被解码的色度成分作为输入,对同色度成分进行上采样处理,将处理后的色度成分写出至寄存器。
步骤S215:对片内的全部的色度共有块集反复进行步骤S206~步骤S214的处理。
步骤S216:对序列内的全部的片反复进行步骤S203~步骤S215的处理。
这样,在本发明中,将通过图9和图10的流程图的编码处理生成的编码数据作为解码对象,以解码影像信号的方式进行处理。
图13中表示执行图9和图10的流程图的编码处理的本发明的影像编码装置的一个实施例。按照该图13,对本影像编码装置的装置结构进行说明。
这里,在图13中,100是适应处理标志设定部、101是适应处理标志存储部、102是亮度信号读入部、103是亮度信号存储部、104是色度信号读入部、105是色度信号存储部、106是下采样比设定部、107是下采样比存储部、108是色度信号下采样处理部、109是色度信号存储部、110是有色度宏块位置信息设定部、111是编码流生成部、112是编码流存储部、113是最终片判定部。
该有色度宏块位置信息设定部110具备:序列适应处理部110-1、片适应处理部110-2、色度适应处理部110-3。
此外,编码流生成部111具备:头部信息编码部111-1、头部信息编码流存储部111-2、亮度信号/色度信号编码处理部111-3、亮度信号/色度信号编码流存储部111-4、编码流复用(multiplexing)部111-5。
接着,对该各处理部执行的处理进行说明。
适应处理标志设定部110:读入与有色度宏块位置信息的设定相关的标志(chroma-position-sequence-adaptive,chroma-position-slice-adaptive,chroma-position-MBs-adaptive),写出至适应处理标志存储部101。
亮度信号读入部102:读入亮度信号,写出至亮度信号存储部103。读入亮度信号的单位在本实施例中是片,但也能够以比片大的单位、或小的单位进行读入。
色度信号读入部104:读入色度信号,写出至色度信号存储部105。色度信号的读入单位在本实施例中是片,但也能够以比片大的单位、或小的单位进行读入。
下采样比设定部106:进行设定下采样比的处理,将设定的值写出至下采样比存储部107。这里,设定的下采样比是片下采样比。
关于具体的设定值,从设置于外部的进行片下采样比的设定的机构提供。例如,在亮度值低的片中,使用对色度成分以进行大的下采样的方式设定小的下采样比的方法等。
色度信号下采样处理部108:将从色度信号存储部105读出的色度信号、和从下采样比存储部107读出的下采样比作为输入,进行对应于输入的下采样比的色度成分的下采样处理,将下采样后的色度成分写出至色度信号存储部109。
关于下采样中使用的滤波器的系数,对应于下采样比,从设置于外部的进行滤波器系数的决定的机构提供。
有色度宏块位置信息设定部110:将从亮度信号存储部103读出的亮度信号、从色度信号存储部105读出的下采样前的色度信号、从色度信号存储部109读出的下采样后的色度信号、从下采样比存储部107读出的下采样比作为输入,进行设定有色度宏块位置信息的处理,将得到的有色度宏块位置信息向编码流生成部111提供。
此外,基于得到的有色度宏块位置信息,将从色度信号存储部109输出的下采样后的色度信号向编码流生成部111提供。
再有,关于有色度宏块位置信息的设定的详细如以图9和图10的流程图说明了的那样。
编码流生成部111:包括以下记述的头部信息编码部111-1~编码流复用部111-5的处理。
头部信息编码部111-1:将有色度宏块位置信息、下采样比和其它的头部信息一起作为输入而读入,进行编码处理,将得到的编码流写出至头部信息编码流存储部111-2。
亮度信号/色度信号编码处理部111-3:将从亮度信号存储部103读出的亮度信号、从色度信号存储部109读出的下采样后的色度信号作为输入,进行编码处理,将得到的编码流写出至亮度信号/色度信号编码流存储部111-4。
编码流复用部111-5:将从头部信息编码流存储部111-2读出的头部信息的编码流、相对于从亮度信号/色度信号编码流存储部111-4读出的亮度成分和色度成分的编码流作为输入,对两流进行复用,写出至编码流存储部112。
最终片判定部113:由于对序列内的全部的片进行上述处理,所以对现在实施处理的片是否是最终的片进行判定,并且对编码流存储部112中存储的编码流进行输出。
这样,图13表示的影像编码装置按照该图13所示的装置结构,执行图9和图10的流程图的编码处理。
在图14中,图示了执行图11和图12的流程图的解码处理的本发明的影像解码装置的一个实施例。按照该图14,对本影像解码装置的装置结构进行说明。
这里,在图14中,200是头部信息解码部、201是亮度信号解码处理部、202是亮度信号存储部、203是下采样比存储部、204是有色度宏块位置信息存储部、205是有色度宏块位置信息判定部、206是色度信号解码处理部、207是色度信号存储部、208是色度信号上采样处理部、209是色度信号存储部。
该头部信息解码部200具备:下采样比解码处理部200-1、有色度宏块位置信息解码处理部200-2。
而且,该有色度宏块位置信息解码处理部200-2具备:序列适应处理标志检测部200-3、序列适应处理标志存储部200-4、序列适应处理判定部200-5、片适应处理标志检测部200-6、片适应处理标志存储部200-7、片适应处理判定部200-8、色度共有块集适应处理标志检测部200-9、色度共有块集适应处理标志存储部200-10、色度共有块集适应处理判定部200-11、流存储部200-12、有色度宏块位置信息解码部200-13。
接着,对该各处理部执行的处理进行说明。
头部信息解码部200:将编码流作为输入,进行解码头部信息的处理。成为解码对象的是下采样比、有色度宏块位置信息、和其它的头部信息(在亮度信号解码处理部201、色度信号解码处理部206不成为解码处理的对象的信号)。
下采样比解码处理部200-1:将编码流作为输入,进行解码下采样比的处理,写出至下采样比存储部203。
有色度宏块位置信息解码处理部200-2:将编码流作为输入,进行解码有色度宏块位置信息的处理,写出至有色度宏块位置信息存储部204。
该有色度宏块位置信息解码处理部200-2的处理包含以下记述的序列适应处理标志检测部200-3~有色度宏块位置信息解码部200-13的处理。
序列适应处理标志检测部200-3:将编码流作为输入,检测与有色度宏块位置信息的设定相关的标志chroma-position-sequence-adaptive,将得到的标志的值写出至序列适应处理标志存储部200-4。
序列适应处理判定部200-5:将从序列适应处理标志存储部200-4读出的chroma-position-sequence-adaptive的值作为输入,进行该值是否是1的判定处理,输出真假值,在输出是真值的情况下,在编码流中在标志chroma-position-sequence-adaptive之后,接着将有色度宏块位置信息的编码流写出至流存储部200-12。
在不是真值的情况下,向片适应处理标志检测部200-6输入编码流。
片适应处理标志检测部200-6:将编码流作为输入,检测与有色度宏块位置信息的设定相关的标志chroma-position-slice-adaptive,将得到的标志的值写出至片适应处理标志存储部200-7。
片适应处理判定部200-8:将从片适应处理标志存储部200-7读出的chroma-position--slice-adaptive的值作为输入,进行该值是否是1的判定处理,输出真假值,在输出是真值的情况下,在编码流中在标志chroma-position-slice-adaptive之后,接着将有色度宏块位置信息的编码流写出至流存储部200-12。
在不是真值的情况下,将编码流输入到色度共有块集适应处理标志检测部200-9。
色度共有块集适应处理标志检测部200-9:将编码流作为输入,检测与有色度宏块位置信息的设定相关的标志chroma-position-MBs-adaptive,将得到的标志的值写出至色度共有块集适应处理标志存储部200-10。
色度共有块集适应处理判定部200-11:将从色度共有块集适应处理标志存储部200-10读出的chroma-position-MBs-adaptive的值作为输入,进行该值是否是1的判定处理,输出真假值,在输出是真值的情况下,在编码流中在标志chroma-position-MBs-adaptive之后,接着将有色度宏块位置信息的编码流写出至流存储部200-12。
有色度宏块位置信息解码部200-13:将从流存储部200-12读出的编码流作为输入,进行解码有色度宏块位置信息的处理,将解码结果写出至有色度宏块位置信息存储部204。
亮度信号解码处理部201:将编码流作为输入,进行解码亮度信号的处理,写出至亮度信号存储部202。
有色度宏块位置信息判定部205:将从有色度宏块位置信息存储部204读出的有色度宏块位置信息作为输入,判定编码对象的宏块是否在有色度宏块位置上,在判定为在同位置上的情况下,发送控制信号,进行色度信号解码处理部206的处理。
色度信号解码处理部206:将编码流作为输入,进行解码色度信号的处理,写出至色度信号存储部207。
色度信号上采样处理部208:将从下采样比存储部203读出的下采样比、和从色度信号存储部207读出的色度信号作为输入,基于下采样比计算出上采样比,对同色度信号进行上采样处理,将处理后的色度信号写出至色度信号存储部209。
这样,图14所示的影像解码装置按照该图14所示的装置结构,执行图11和图12的流程图的解码处理。
接着,如在所述第七方式中说明了的那样,在本发明中,在以帧为单位适应地使下采样比变化时,能够生成实现所要求的运动补偿的参照帧的内插图像。
在图15中图示了实现该第七方式的本发明的参照帧内插图像生成装置的一个实施例。
以该方式构成的本发明的参照帧内插图像生成装置,在生成用于色 度信号的运动估计的参照信号时使用。能够应用到具备采用了图16所示那样的结构的影像编码装置的参照信号生成处理部1000,或应用到具备采用了图17所示那样的结构的影像解码装置的参照信号生成处理部2000。
这里,在图15中,300、301是内插滤波器系数存储部,302是参照帧信号存储部,303、304是下采样比存储部,305是参照帧内插精度计算部,306是参照帧内插精度存储部,307是参照帧内插处理判定部,308是参照帧内插像素值生成部,309是参照帧内插像素值存储部,310是输出控制部,311是参照帧内插处理状态存储部。
内插滤波器系数存储部300:容纳对运动补偿中的参照帧的内插滤波器系数。
内插滤波器系数存储部301:同样地,容纳对运动补偿中的参照帧的内插滤波器系数。在本实施例中,为了表示有选择地使用两种滤波器系数的例子,将两种滤波器系数分别容纳在个别的存储部中。
例如,该滤波器系数对应于运动补偿中的内插位置(1/2像素位置、1/4像素位置)进行切换。再有,本发明在使用两种以上的滤波器系数的情况下也能够应用。
参照帧信号存储部302:容纳运动补偿中的参照帧信号。
下采样比存储部303:容纳对运动补偿中的参照帧的下采样比。
下采样比存储部304:容纳对运动补偿中的对象帧(编码对象帧和解码对象帧)的下采样比。
参照帧内插精度计算部305:将从下采样比存储部303读出的对参照帧的下采样比、和从下采样比存储部304读出的对对象帧的下采样比作为输入,进行计算参照帧所需要的内插精度的处理,写出至参照帧内插精度存储部306。具体的计算方法按照数式(1)。
参照帧内插处理判定部307:将从参照帧内插精度存储部306读出的参照帧的内插精度、和从参照帧内插处理状态存储部311读出的、表示已经完成了内插处理的像素位置的信息(例如关于1/2像素位置已经完成了内插处理等信息)作为输入,进行是否全部生成了参照帧中的内插像素值的判定,在该判定结果是真的情况下,驱动输出驱动部310,输出参照帧内插像素值存储部309的值(即,最终的参照帧的内插图像的输出)。
另一方面,在该判定结果是假的情况下,转移至参照帧内插像素值生成部308的处理。这时,将表示成为内插对象的像素位置的信息向参照帧内插像素值生成部308提供。
参照帧内插像素值生成部308:将表示成为内插对象的像素位置的信息作为输入,对应于同信息,从内插滤波器系数存储部300或内插滤波器系数存储部301读入滤波器系数作为输入。
接着,将从参照帧信号存储部302读出的参照帧的像素值、或从参照帧内插像素值存储部309读出的也包含内插位置的参照帧的像素值作为输入,进行内插处理,将其结果写出至参照帧内插像素值存储部309。
再有,参照帧内插像素值存储部309在最初以零值被初始化。此外,每当各参照帧的处理结束时,同样地以零值被初始化。这样,在容纳有初始值的情况下,在本处理中,不进行从参照帧内插像素值存储部309读入。
进而,将表示已经完成内插处理的像素位置的信息(例如关于1/2像素位置已经执行了内插等的信息)写出至参照帧内插处理状态存储部311。
这样,图15所示的本发明的参照帧内插图像生成装置在采用:以采用图16所示的结构的影像编码装置、或采用图17所示的结构的影像解码装置以帧为单位使下采样比适应地变化的结构时,按照该结构配合参照帧的内插精度变化的情况,以生成实现所要求的运动补偿的参照帧的内插图像的方式进行处理。
图18中图示了采用图15的装置结构的参照帧内插图像生成装置执行的流程图的一个实施例。按照该流程图,对本参照帧内插图像生成装置执行的处理进行说明。
步骤S300:BR>F读入运动补偿中的对参照帧的内插滤波器系数作为输入,写出至寄存器。再有,本发明能够使用多种滤波器系数。
步骤S301:读入运动补偿中的对参照帧的下采样比作为输入,写出至寄存器。
步骤S302:读入运动补偿中的对对象帧的下采样比作为输入,写出至寄存器。
步骤S303:读入运动补偿中的参照帧信号作为输入,写出至寄存器。
步骤S304:将对参照帧的下采样比、和对对象帧的下采样比作为输 入,进行计算参照帧所需要的内插精度的处理,写出至寄存器。具体的计算方法按照数式(1)。
步骤S305:将在步骤S304计算出的参照帧的内插精度作为输入,进行该值是否不足1像素的判定,输出真假值,在输出是真值的情况下,转移至步骤S306的处理,在输出是假值的情况下,因为不需要进行内插,所以结束处理。
步骤S306:将参照帧的现在的内插精度、和在步骤S304计算出的参照帧的内插精度作为输入,进行参照帧的现在的内插精度是否比在步骤S304计算出的参照帧的内插精度粗的判定处理,输出真假值,在输出是真值的情况下,转移至步骤S307的处理,在输出是假值的情况下,结束处理。
步骤S307:将参照帧的现在的内插精度作为输入,选择同精度的内插滤波器系数,将同滤波器系数写出至寄存器。
关于具体的滤波器系数(存储在内插滤波器系数存储部300、301中),从设置于外部的进行滤波器系数的决定的机构提供。
步骤S308:将参照帧信号、参照帧的现在的内插精度、在步骤S307中选择的同精度的内插滤波器系数作为输入,进行内插处理,生成参照帧的内插图像。
步骤S309:将步骤S308中的参照帧的内插精度作为输入,使同内插精度细致一个级别(level)。
关于内插精度的级别,例如在要得到对1/8像素精度的内插图像的情况下,通过使内插精度的滤波器系数依次变细致,生成在对应于1/2、1/4、1/8像素精度的顺序的位置的内插图像。
像这样,图15所示的参照帧内插图像生成装置,通过执行图18所示的流程图的参照帧内插图像生成处理,在采用以帧为单位使下采样比适应地变化的结构时,即使有按照该结构而参照帧的内插精度变化的情况,也能够以生成实现所要求的运动补偿的参照帧的内插图像的方式进行处理。
产业上的利用可能性
本发明能够应用于将由两个信号成分以上构成的影像信号作为编码对象的情况,在对影像进行编码时,能够使特定的信号成分的下采样 比适应地变化,由此能够实现对应于视觉敏感度等的有效率的码量降低。
Claims (4)
1.一种影像编码方法,将由两个信号成分以上构成的影像信号作为编码对象,具备:
对应于帧内的过渡量的大小,设定对于帧的色度成分的下采样比的步骤;
通过对应于所述设定了的下采样比,对帧的色度成分进行下采样,在编码对象的块的集合在作为由所述色度成分和共有所述色度成分的亮度成分构成的像素集合的色度共有块集中位于保有所述色度成分的块的集合的位置的情况下,对所述色度成分进行编码,从而生成编码对象影像信号的步骤;
对于通过所述编码对象影像信号的编码而得到的量化后的各信号成分,在将表示某种大小的块的每一个中是否包含作为非零的系数的有意系数的信息赋予该块的情况下,预先决定所述位置,预先将所述位置在影像编码装置和影像解码装置中共有,或者,对于各被压缩的影像整体、表示将各帧内分割后的部分区域的各片或各色度共有块集,分别将所述位置作为所述被压缩的影像整体的头部信息、所述片的头部信息或所述色度共有块集的头部信息对编码流赋予的步骤;以及
将与所述位置的信息的设定相关的标志作为头部信息对所述编码流赋予的步骤。
2.一种影像解码方法,对通过权利要求1所述的影像编码方法生成的影像信号的编码数据进行解码,具备:
对与所述位置的信息的设定相关的所述标志进行解码的步骤;
基于所述预先决定的所述位置,判定解码对象的块集合是否是保有所述色度成分的块集合,或者,通过将作为所述被压缩的影像整体的所述头部信息、所述片的所述头部信息或所述色度共有块集的所述头部信息而对所述编码流赋予的所述位置的编码数据进行解码,从而判定所述解码对象的块集合是否是保有所述色度成分的块集合的步骤;以及
在所述判定步骤中判定为所述解码对象的块集合位于所述位置并且是保有所述色度成分的块集合的情况下,通过对其保有的所述色度成分的编码数据进行解码,从而将对应于在编码侧设定的下采样比而被下采样了的信号成分进行解码的步骤。
3.一种影像编码装置,将由两个信号成分以上构成的影像信号作为编码对象,具备:
对应于帧内的过渡量的大小,设定对于帧的色度成分的下采样比的单元;
通过对应于所述设定了的下采样比,对帧的色度成分进行下采样,在编码对象的块的集合在作为由所述色度成分和共有所述色度成分的亮度成分构成的像素集合的色度共有块集中位于保有所述色度成分的块的集合的位置的情况下,对所述色度成分进行编码,从而生成编码对象影像信号的单元;
对于通过所述编码对象影像信号的编码而得到的量化后的各信号成分,在将表示某种大小的块的每一个中是否包含作为非零的系数的有意系数的信息赋予该块的情况下,预先决定所述位置,预先将所述位置在所述影像编码装置和影像解码装置中共有,或者,对于各被压缩的影像整体、表示将各帧内分割后的部分区域的各片或各色度共有块集,分别将所述位置作为所述被压缩的影像整体的头部信息、所述片的头部信息或所述色度共有块集的头部信息对编码流赋予的单元;以及
将与所述位置的信息的设定相关的标志作为头部信息对所述编码流赋予的单元。
4.一种影像解码装置,对通过权利要求3所述的影像编码装置生成的影像信号的编码数据进行解码,具备:
对与所述位置的信息的设定相关的所述标志进行解码的单元;
基于所述预先决定的所述位置,判定解码对象的块集合是否是保有所述色度成分的块集合,或者,通过将作为所述被压缩的影像整体的所述头部信息、所述片的所述头部信息或所述色度共有块集的所述头部信息而对所述编码流赋予的所述位置的编码数据进行解码,从而判定所述解码对象的块集合是否是保有所述色度成分的块集合的单元;以及
在所述判定单元判定为所述解码对象的块集合位于所述位置并且是保有所述色度成分的块集合的情况下,通过对其保有的所述色度成分的编码数据进行解码,从而将对应于在编码侧设定的下采样比而被下采样了的信号成分进行解码的单元。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006276074 | 2006-10-10 | ||
JP276074/2006 | 2006-10-10 | ||
PCT/JP2007/069570 WO2008044637A1 (fr) | 2006-10-10 | 2007-10-05 | Procédés de codage et de décodage vidéo, leur dispositif, leur programme, et le support de stockage contenant le programme |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210561178.4A Division CN103188492B (zh) | 2006-10-10 | 2007-10-05 | 影像编码方法和解码方法及其装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101523923A CN101523923A (zh) | 2009-09-02 |
CN101523923B true CN101523923B (zh) | 2013-10-30 |
Family
ID=39282833
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210561178.4A Active CN103188492B (zh) | 2006-10-10 | 2007-10-05 | 影像编码方法和解码方法及其装置 |
CN2007800367235A Active CN101523923B (zh) | 2006-10-10 | 2007-10-05 | 影像编码方法和解码方法及其装置 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210561178.4A Active CN103188492B (zh) | 2006-10-10 | 2007-10-05 | 影像编码方法和解码方法及其装置 |
Country Status (10)
Country | Link |
---|---|
US (1) | US9055303B2 (zh) |
EP (3) | EP2066134A4 (zh) |
JP (1) | JP5106408B2 (zh) |
KR (1) | KR101078038B1 (zh) |
CN (2) | CN103188492B (zh) |
BR (1) | BRPI0719239A2 (zh) |
CA (1) | CA2665182A1 (zh) |
RU (1) | RU2430485C2 (zh) |
TW (1) | TWI372565B (zh) |
WO (1) | WO2008044637A1 (zh) |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104125464A (zh) | 2005-12-08 | 2014-10-29 | 维德约股份有限公司 | 用于视频通信系统中的差错弹性和随机接入的系统和方法 |
US8693538B2 (en) | 2006-03-03 | 2014-04-08 | Vidyo, Inc. | System and method for providing error resilience, random access and rate control in scalable video communications |
WO2008086423A2 (en) * | 2007-01-09 | 2008-07-17 | Vidyo, Inc. | Improved systems and methods for error resilience in video communication systems |
KR101359490B1 (ko) | 2008-12-23 | 2014-02-10 | 에스케이 텔레콤주식회사 | 컬러 영상 부호화/복호화 방법 및 장치 |
KR100998220B1 (ko) | 2009-02-12 | 2010-12-03 | 고려대학교 산학협력단 | 적응적 영상 크기 조정 방법 |
HUE063195T2 (hu) | 2010-10-18 | 2024-01-28 | Dolby Laboratories Licensing Corp | Képfeldolgozási eljárások és berendezések lokalizált színskála meghatározás segítségével |
US8934530B2 (en) | 2011-02-01 | 2015-01-13 | Vidyo, Inc. | Spatial scalability using redundant pictures and slice groups |
WO2012105959A1 (en) * | 2011-02-01 | 2012-08-09 | Vidyo, Inc. | Spatial scalability using redundant pictures and slice groups |
US20120294353A1 (en) * | 2011-05-16 | 2012-11-22 | Mediatek Inc. | Apparatus and Method of Sample Adaptive Offset for Luma and Chroma Components |
EP2732624A4 (en) * | 2011-07-12 | 2015-07-15 | Intel Corp | LUMBASED CHROMAINTRAPREDICTION |
GB2501535A (en) | 2012-04-26 | 2013-10-30 | Sony Corp | Chrominance Processing in High Efficiency Video Codecs |
CN104718761A (zh) * | 2012-07-09 | 2015-06-17 | 日本电信电话株式会社 | 视频编码/解码方法、装置、程序、记录介质 |
US9978156B2 (en) * | 2012-10-03 | 2018-05-22 | Avago Technologies General Ip (Singapore) Pte. Ltd. | High-throughput image and video compression |
US9363517B2 (en) | 2013-02-28 | 2016-06-07 | Broadcom Corporation | Indexed color history in image coding |
GB2512829B (en) | 2013-04-05 | 2015-05-27 | Canon Kk | Method and apparatus for encoding or decoding an image with inter layer motion information prediction according to motion information compression scheme |
EP3026908A1 (en) * | 2014-11-26 | 2016-06-01 | Thomson Licensing | Method and device for quantizing and de-quantizing a picture using scaling factors for chrominance based on luminance |
JPWO2017026446A1 (ja) | 2015-08-10 | 2018-07-05 | 日本電気株式会社 | 装着体、認証装置、認証方法およびプログラム |
CN108848381B (zh) | 2018-06-20 | 2021-09-24 | 腾讯科技(深圳)有限公司 | 视频编码方法、解码方法、装置、计算机设备及存储介质 |
CN108833918B (zh) * | 2018-06-20 | 2021-09-17 | 腾讯科技(深圳)有限公司 | 视频编码方法、解码方法、装置、计算机设备及存储介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1551184A2 (en) * | 2003-12-27 | 2005-07-06 | Samsung Electronics Co., Ltd. | Residue image downsampling and encoding method |
JP2006197144A (ja) * | 2005-01-12 | 2006-07-27 | Canon Inc | 画像処理装置 |
Family Cites Families (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2189106B (en) | 1986-04-14 | 1990-02-14 | Philips Electronic Associated | Image display |
EP0582122B1 (en) | 1992-07-21 | 1999-03-24 | Matsushita Electric Industrial Co., Ltd. | Scramble apparatus and descramble apparatus |
JPH06303608A (ja) * | 1993-04-13 | 1994-10-28 | Matsushita Electric Ind Co Ltd | スクランブル装置 |
JP3381855B2 (ja) * | 1992-12-28 | 2003-03-04 | ソニー株式会社 | 画像信号符号化方法および画像信号符号化装置、並びに画像信号復号化方法および画像信号復号化装置 |
GB9321372D0 (en) * | 1993-10-15 | 1993-12-08 | Avt Communications Ltd | Video signal processing |
US5489947A (en) | 1994-06-17 | 1996-02-06 | Thomson Consumer Electronics, Inc. | On screen display arrangement for a digital video signal processing system |
US5748242A (en) * | 1995-08-25 | 1998-05-05 | Lucent Technologies Inc. | Color video vector quantization with chrominance codebook bypass |
US5832120A (en) | 1995-12-22 | 1998-11-03 | Cirrus Logic, Inc. | Universal MPEG decoder with scalable picture size |
US5768537A (en) * | 1996-02-22 | 1998-06-16 | International Business Machines Corporation | Scalable MPEG2 compliant video encoder |
US6175592B1 (en) * | 1997-03-12 | 2001-01-16 | Matsushita Electric Industrial Co., Ltd. | Frequency domain filtering for down conversion of a DCT encoded picture |
US6188730B1 (en) * | 1998-03-23 | 2001-02-13 | Internatonal Business Machines Corporation | Highly programmable chrominance filter for 4:2:2 to 4:2:0 conversion during MPEG2 video encoding |
JP2002512470A (ja) * | 1998-04-20 | 2002-04-23 | サン・マイクロシステムズ・インコーポレーテッド | ネットワーク環境においてビデオ・プロトコルをサポートする方法及び装置 |
JP2000134090A (ja) * | 1998-10-26 | 2000-05-12 | Mitsubishi Electric Corp | 位相比較器およびそれを用いた同期型半導体記憶装置 |
US6563953B2 (en) | 1998-11-30 | 2003-05-13 | Microsoft Corporation | Predictive image compression using a single variable length code for both the luminance and chrominance blocks for each macroblock |
JP3267256B2 (ja) * | 1998-12-11 | 2002-03-18 | 日本電気株式会社 | 画像表示処理装置 |
JP3940672B2 (ja) * | 2000-06-02 | 2007-07-04 | 松下電器産業株式会社 | 画像処理装置及び画像処理方法 |
US7266148B2 (en) * | 2001-01-05 | 2007-09-04 | Lg Electronics Inc. | Video transcoding apparatus |
US8776153B2 (en) * | 2001-04-25 | 2014-07-08 | At&T Intellectual Property I, Lp | Method and system for transferring content to a networked unit |
JP2004537932A (ja) * | 2001-08-02 | 2004-12-16 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 映像コード化方法 |
HU228615B1 (en) * | 2002-01-14 | 2013-04-29 | Nokia Corp | Method of coding of digital video pictures |
JP2003274190A (ja) * | 2002-03-12 | 2003-09-26 | Canon Inc | 静止画像符号化方式 |
JP2003274193A (ja) * | 2002-03-13 | 2003-09-26 | Canon Inc | 静止画像符号化方式 |
MXPA05000335A (es) * | 2002-07-09 | 2005-03-31 | Nokia Corp | Metodo y sistema para seleccionar tipo de filtro de interpolacion en codificacion de video. |
US20040076333A1 (en) * | 2002-10-22 | 2004-04-22 | Huipin Zhang | Adaptive interpolation filter system for motion compensated predictive video coding |
US20050013498A1 (en) * | 2003-07-18 | 2005-01-20 | Microsoft Corporation | Coding of motion vector information |
JP4617644B2 (ja) | 2003-07-18 | 2011-01-26 | ソニー株式会社 | 符号化装置及び方法 |
TWI237494B (en) | 2003-09-03 | 2005-08-01 | Mediatek Inc | Method and related apparatus for jpeg image decoding |
US7724827B2 (en) * | 2003-09-07 | 2010-05-25 | Microsoft Corporation | Multi-layer run level encoding and decoding |
KR100754388B1 (ko) * | 2003-12-27 | 2007-08-31 | 삼성전자주식회사 | 레지듀 영상 다운/업 샘플링 방법 및 장치와 그를 이용한영상 부호화/복호화 방법 및 장치 |
ZA200607434B (en) | 2004-03-09 | 2008-08-27 | Thomson Res Funding Corp | Reduced resolution update mode for advanced video coding |
US7463775B1 (en) * | 2004-05-18 | 2008-12-09 | Adobe Systems Incorporated | Estimating compressed storage size of digital data |
JP2006276074A (ja) | 2005-03-25 | 2006-10-12 | Fuji Xerox Co Ltd | 静電荷像現像用トナー、静電荷像現像剤及び画像形成方法 |
US7684491B2 (en) * | 2005-03-31 | 2010-03-23 | Intel Corporation | Reference data buffer for intra-prediction of digital video |
JP2006295796A (ja) * | 2005-04-14 | 2006-10-26 | Nec Electronics Corp | 画像データ復号装置及び画像データ復号方法 |
-
2007
- 2007-10-05 BR BRPI0719239 patent/BRPI0719239A2/pt not_active IP Right Cessation
- 2007-10-05 US US12/444,135 patent/US9055303B2/en active Active
- 2007-10-05 CN CN201210561178.4A patent/CN103188492B/zh active Active
- 2007-10-05 KR KR1020097006463A patent/KR101078038B1/ko active IP Right Grant
- 2007-10-05 CN CN2007800367235A patent/CN101523923B/zh active Active
- 2007-10-05 RU RU2009111880A patent/RU2430485C2/ru active
- 2007-10-05 TW TW096137415A patent/TWI372565B/zh active
- 2007-10-05 EP EP20070829308 patent/EP2066134A4/en not_active Ceased
- 2007-10-05 WO PCT/JP2007/069570 patent/WO2008044637A1/ja active Application Filing
- 2007-10-05 JP JP2008538702A patent/JP5106408B2/ja active Active
- 2007-10-05 CA CA 2665182 patent/CA2665182A1/en not_active Abandoned
- 2007-10-05 EP EP20120152586 patent/EP2448270A1/en not_active Ceased
- 2007-10-05 EP EP20120152580 patent/EP2448269A1/en not_active Ceased
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1551184A2 (en) * | 2003-12-27 | 2005-07-06 | Samsung Electronics Co., Ltd. | Residue image downsampling and encoding method |
JP2006197144A (ja) * | 2005-01-12 | 2006-07-27 | Canon Inc | 画像処理装置 |
Also Published As
Publication number | Publication date |
---|---|
US9055303B2 (en) | 2015-06-09 |
TWI372565B (en) | 2012-09-11 |
CN103188492A (zh) | 2013-07-03 |
US20100067579A1 (en) | 2010-03-18 |
EP2066134A1 (en) | 2009-06-03 |
EP2448270A1 (en) | 2012-05-02 |
EP2066134A4 (en) | 2011-01-12 |
KR101078038B1 (ko) | 2011-10-28 |
KR20090057297A (ko) | 2009-06-04 |
JP5106408B2 (ja) | 2012-12-26 |
CA2665182A1 (en) | 2008-04-17 |
CN101523923A (zh) | 2009-09-02 |
WO2008044637A1 (fr) | 2008-04-17 |
RU2430485C2 (ru) | 2011-09-27 |
JPWO2008044637A1 (ja) | 2010-02-12 |
EP2448269A1 (en) | 2012-05-02 |
CN103188492B (zh) | 2016-07-20 |
RU2009111880A (ru) | 2010-10-27 |
TW200824467A (en) | 2008-06-01 |
BRPI0719239A2 (pt) | 2014-10-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101523923B (zh) | 影像编码方法和解码方法及其装置 | |
CN101223783B (zh) | 对视频信号进行编码和解码的方法 | |
JP5982612B2 (ja) | イントラ予測モード復号化方法 | |
JP5890520B2 (ja) | 画像の輝度成分を用いて画像の色差成分を予測する方法及び予測装置 | |
EP2241112B1 (en) | Encoding filter coefficients | |
CN101356820B (zh) | 层间运动预测方法 | |
CN108781283A (zh) | 使用混合帧内预测的视频编码 | |
CN106878734B (zh) | 视频编码/解码方法及视频编码器/解码器 | |
RU2543953C2 (ru) | Смешанные фильтры с отводами | |
KR20070096737A (ko) | 영상의 부호화 방법 및 장치, 복호화 방법 및 장치 | |
CN109845263A (zh) | 用于视频编码的设备和方法 | |
CN103168470A (zh) | 影像编码方法、影像解码方法、影像编码装置、影像解码装置及它们的程序 | |
CN109845252A (zh) | 用于视频编码的设备和方法 | |
KR20010072338A (ko) | 픽셀들을 가지는 디지털화 된 화상에서 동작을추정하기위한 방법 및 장치 | |
CN111683247A (zh) | 多权重可减少分量数的分量间自预测数据压缩方法和装置 | |
US7957607B2 (en) | Decoding apparatus, dequantization method, and computer readable medium storing program thereof | |
JP2019140477A (ja) | 画像符号化装置、画像符号化方法、画像符号化システム、記録媒体 | |
Peng et al. | Directional filtering transform | |
JPH0937240A (ja) | 動画像符号化装置及び動画像復号装置 | |
CN102263939A (zh) | 一种多参考帧的快速运动估计方法 | |
KR20190129641A (ko) | 참조 샘플의 평균값 구하는 방법을 이용한 비디오 신호 처리 방법 및 장치 | |
Hung et al. | Direction alignment algorithm for direction-adaptive discrete wavelet transform | |
Ou | All zero macroblock decision method for H. 26L | |
Hasegawa et al. | Color image transmission system for prepress with ADCT compression algorithm | |
JP2010288181A (ja) | 動画像符号化方法、動画像符号化装置及び動画像符号化プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |