CN102422642B - 动态图像编码装置、方法和程序以及动态图像解码装置、方法和程序 - Google Patents

动态图像编码装置、方法和程序以及动态图像解码装置、方法和程序 Download PDF

Info

Publication number
CN102422642B
CN102422642B CN201080020401.3A CN201080020401A CN102422642B CN 102422642 B CN102422642 B CN 102422642B CN 201080020401 A CN201080020401 A CN 201080020401A CN 102422642 B CN102422642 B CN 102422642B
Authority
CN
China
Prior art keywords
image
prediction signal
information
processing block
processing method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201080020401.3A
Other languages
English (en)
Other versions
CN102422642A (zh
Inventor
加藤祯笃
文仲丞
铃木芳典
S·卡努木里
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Korea Co Ltd
Original Assignee
NTT Korea Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Korea Co Ltd filed Critical NTT Korea Co Ltd
Publication of CN102422642A publication Critical patent/CN102422642A/zh
Application granted granted Critical
Publication of CN102422642B publication Critical patent/CN102422642B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/573Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/523Motion estimation or motion compensation with sub-pixel accuracy
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Processing Or Creating Images (AREA)

Abstract

动态图像编码装置(100)具有:预测信号生成方法控制部(102),其通过组合预先确定的多个处理,针对多个参照图像分别决定为了生成预测信号而应该对参照图像进行的处理方法,并且,通过按照每个处理块进行运动预测,针对各处理块决定运动矢量和参照图像;预测信号生成部(104),其根据关于处理块的应该对参照图像进行的处理方法,对参照图像进行处理,从而生成关于该处理块的预测信号;以及编码部(107),其将关于各参照图像的处理方法的信息与确定每个处理块的参照图像的参照列表编号和运动矢量信息一起进行编码。

Description

动态图像编码装置、方法和程序以及动态图像解码装置、方法和程序
技术领域
本发明涉及动态图像编码装置、方法和程序以及动态图像解码装置、方法和程序。
背景技术
为了高效地进行动态图像数据的传送和蓄积,使用压缩编码技术。在动态图像的情况下,广泛使用MPEG-1~4或ITU(International Telecommunication Union:国际电信联盟)H.261~H.264方式。在动态图像的编码中,使用时间上相邻的其他图像,针对作为编码对象的对象图像生成预测信号,对对象图像与预测信号的差分进行编码,从而实现数据量的削减。该方法被称为帧间预测编码。
例如,在H.264中,将一帧的图像分割成由16×16像素构成的块的多个区域,以块为单位对上述图像进行编码处理。在帧间预测编码中,针对对象图像的某个处理块,进行将已编码并复原的多个其他帧图像(以下称为“已再现图像”)作为参照图像的运动预测,从而生成预测信号。此时,针对对多个参照图像施加同一固定的像素插值滤波器而生成的1/4像素精度的预测信号候选进行块匹配,选择对与处理块之间的误差进行编码时的编码量与对参照图像的识别符和从处理块起的位移(运动矢量)进行编码时的编码量之和最小的预测信号候选,由此生成预测信号。接着,针对上述处理块与所生成的预测信号之间的差分值进行离散余弦转换和量化处理,生成编码数据。
现有技术文献
非专利文献
非专利文献1:大久保、角野、菊池、铃木、“H.264/AVC教科書”、株式会社インプレス、2004年、第113~第119页
发明内容
发明要解决的课题
在非专利文献1所示的帧间预测编码中,在已再现图像的参照图像存在多个的情况下,针对所有参照图像进行同一处理,生成预测信号候选。具体而言,针对多个已再现图像的参照图像,施加同一固定的像素插值滤波器来生成预测信号候选。因此,难以按照每个参照图像进行最佳的处理,难以生成与编码对象的图像对应的帧间预测编码用的预测信号。
本发明是为了解决上述课题而完成的,其目的在于,通过提供适合于作为对象的帧图像的处理块的优选预测信号,高效地进行编码或解码。
用于解决课题的手段
为了实现上述目的,本发明的一个侧面的动态图像编码装置将编码对象的图像分割成多个处理块,按照每个所述处理块,参照多个参照图像中的一个参照图像生成预测信号并进行预测编码,其特征在于,该动态图像编码装置具有:预测信号生成方法控制部,其通过组合预先确定的多个处理,针对所述多个参照图像分别决定为了生成所述预测信号而应该对所述参照图像进行的处理方法,并且,通过按照每个所述处理块进行运动预测,针对各处理块决定运动矢量和参照图像;预测信号生成部,其根据由所述预测信号生成方法控制部决定的关于所述处理块的应该对参照图像进行的处理方法,对所述参照图像进行处理,从而生成关于该处理块的所述预测信号;以及编码部,其将由所述预测信号生成方法控制部决定的关于各参照图像的所述处理方法的信息与确定每个所述处理块的参照图像的参照列表编号和运动矢量信息一起进行编码。
在上述动态图像编码装置中,通过组合预先确定的多个处理,针对多个参照图像分别决定为了生成预测信号而应该对参照图像进行的处理方法,根据所决定的关于处理块的应该对参照图像进行的处理方法,对参照图像进行处理,从而生成关于该处理块的预测信号,所以通过提供适合于处理块的优选参照图像,能够高效地进行编码。
此时,也可以构成为,预测信号生成方法控制部决定使得根据处理方法对所述参照图像进行处理时得到的预测信号与处理块之间的误差最小的该处理方法,作为应该对该参照图像进行的处理方法。由此,能够提供适合于处理块的优选预测信号,能够高效地进行编码。
另外,也可以构成为,预测信号生成方法控制部按照每个所述处理块进行运动预测,决定预测误差最小的运动矢量和参照图像,作为关于该处理块的运动矢量和参照图像。
并且,也可以构成为,编码部将由所述预测信号生成方法控制部决定的关于各参照图像的所述处理方法的信息与所述参照列表编号关联起来进行存储。
上述动态图像编码装置的发明能够作为动态图像编码方法的发明和动态图像编码程序的发明来记载,能够如下记述。它们发挥与动态图像编码装置的发明相同的作用和效果。
本发明的一个侧面的动态图像编码方法由动态图像编码装置执行,用于将编码对象的图像分割成多个处理块,按照每个所述处理块,参照多个参照图像中的一个参照图像生成预测信号并进行预测编码,其特征在于,该动态图像编码方法具有以下步骤:预测信号生成方法控制步骤,通过组合预先确定的多个处理,针对所述多个参照图像分别决定为了生成所述预测信号而应该对所述参照图像进行的处理方法,并且,通过按照每个所述处理块进行运动预测,针对各处理块决定运动矢量和参照图像;预测信号生成步骤,根据由所述预测信号生成方法控制步骤决定的关于所述处理块的应该对参照图像进行的处理方法,对所述参照图像进行处理,从而生成关于该处理块的所述预测信号;以及编码步骤,将由所述预测信号生成方法控制步骤决定的关于各参照图像的所述处理方法的信息与确定每个所述处理块的参照图像的参照列表编号和运动矢量信息一起进行编码。
本发明的一个侧面的动态图像编码程序用于将编码对象的图像分割成多个处理块,按照每个所述处理块,参照多个参照图像中的一个参照图像生成预测信号并进行预测编码,其特征在于,该动态图像编码程序使计算机作为以下部分进行动作:预测信号生成方法控制部,其通过组合预先确定的多个处理,针对所述多个参照图像分别决定为了生成所述预测信号而应该对所述参照图像进行的处理方法,并且,通过按照每个所述处理块进行运动预测,针对各处理块决定运动矢量和参照图像;预测信号生成部,其根据由所述预测信号生成方法控制部决定的关于所述处理块的应该对参照图像进行的处理方法,对所述参照图像进行处理,从而生成关于该处理块的所述预测信号;以及编码部,其将由所述预测信号生成方法控制部决定的关于各参照图像的所述处理方法的信息与确定每个所述处理块的参照图像的参照列表编号和运动矢量信息一起进行编码。
为了实现上述目的,本发明的一个侧面的动态图像解码装置针对对解码对象的图像进行分割而得到的多个处理块,分别参照多个参照图像中的一个参照图像生成预测信号并进行预测解码,其特征在于,该动态图像解码装置具有:解码部,其根据所输入的编码数据,对为了生成所述预测信号而应该对各参照图像进行的处理方法的信息、以及确定每个所述处理块的参照图像的参照列表编号和运动矢量信息进行解码;预测信号生成方法控制部,其根据由所述解码部得到的解码对象的处理块的参照列表编号,取得应该对与该参照列表编号对应的参照图像进行的处理方法的信息;以及预测信号生成部,其根据由所述预测信号生成方法控制部取得的关于所述解码对象的处理块的应该对参照图像进行的处理方法,对该参照图像进行处理,从而生成关于该处理块的所述预测信号。
在上述动态图像解码装置中,根据所输入的编码数据,对为了生成预测信号而应该对各参照图像进行的处理方法的信息、以及确定每个处理块的参照图像的参照列表编号和运动矢量信息进行解码,根据解码对象的处理块的参照列表编号,取得应该对与该参照列表编号对应的参照图像进行的处理方法的信息,根据关于解码对象的处理块的应该对参照图像进行的处理方法,对该参照图像进行处理,从而生成关于该处理块的预测信号,所以通过提供适合于处理块的优选参照图像,能够高效地进行解码。
此时,也可以构成为,预测信号生成方法控制部取得使根据处理方法对所述参照图像进行处理时得到的预测信号与所述处理块之间的误差最小的该处理方法的信息,作为应该对该参照图像进行的处理方法的信息。由此,通过提供适合于处理块的优选参照图像,能够高效地进行解码。
另外,也可以构成为,解码部将通过解码而取得的关于各参照图像的所述处理方法的信息与所述参照列表编号关联起来进行存储。
上述动态图像解码装置的发明能够作为动态图像解码方法的发明和动态图像解码程序的发明来记载,能够如下记述。它们发挥与动态图像解码装置的发明相同的作用和效果。
本发明的一个侧面的动态图像解码方法由动态图像解码装置执行,用于针对对解码对象的图像进行分割而得到的多个处理块,分别参照多个参照图像中的一个参照图像生成预测信号并进行预测解码,其特征在于,该动态图像解码方法具有以下步骤:解码步骤,根据所输入的编码数据,对为了生成所述预测信号而应该对各参照图像进行的处理方法的信息、以及确定每个所述处理块的参照图像的参照列表编号和运动矢量信息进行解码;预测信号生成方法控制步骤,根据由所述解码步骤得到的解码对象的处理块的参照列表编号,取得应该对与该参照列表编号对应的参照图像进行的处理方法的信息;以及预测信号生成步骤,根据由所述预测信号生成方法控制步骤取得的关于所述解码对象的处理块的应该对参照图像进行的处理方法,对该参照图像进行处理,从而生成关于该处理块的所述预测信号。
本发明的一个侧面的动态图像解码程序用于针对对解码对象的图像进行分割而得到的多个处理块,分别参照多个参照图像中的一个参照图像生成预测信号并进行预测解码,其特征在于,该动态图像解码程序使计算机作为以下部分进行动作:解码部,其根据所输入的编码数据,对为了生成所述预测信号而应该对各参照图像进行的处理方法的信息、以及确定每个所述处理块的参照图像的参照列表编号和运动矢量信息进行解码;预测信号生成方法控制部,其根据由所述解码部得到的解码对象的处理块的参照列表编号,取得应该对与该参照列表编号对应的参照图像进行的处理方法的信息;以及预测信号生成部,其根据由所述预测信号生成方法控制部取得的关于所述解码对象的处理块的应该对参照图像进行的处理方法,对该参照图像进行处理,从而生成关于该处理块的所述预测信号。
但是,不仅是单一的参照图像,本发明还能够应用于参照多个参照图像组生成预测信号并进行预测编码的动态图像编码装置、动态图像编码方法和动态图像编码程序,能够如下记述。
本发明的一个侧面的动态图像编码装置将编码对象的图像分割成多个处理块,按照每个所述处理块,参照多组参照图像组中的一组参照图像组生成预测信号并进行预测编码,其特征在于,该动态图像编码装置具有:预测信号生成方法控制部,其通过组合预先确定的多个处理,针对所述多组参照图像组的各参照图像决定为了生成所述预测信号而应该对所述参照图像组的各参照图像进行的处理方法,并且,通过按照每个所述处理块进行运动预测,针对各处理块决定运动矢量和参照图像组;预测信号生成部,其根据由所述预测信号生成方法控制部决定的关于所述处理块的应该对参照图像组的各参照图像进行的处理方法,对所述参照图像组的各参照图像进行处理,从而生成关于该处理块的所述预测信号;以及编码部,其将由所述预测信号生成方法控制部决定的关于各组参照图像组的所述处理方法的信息组与确定每个所述处理块的参照图像组的参照列表编号组和运动矢量信息一起进行编码。
本发明的一个侧面的动态图像编码方法由动态图像编码装置执行,用于将编码对象的图像分割成多个处理块,按照每个所述处理块,参照多组参照图像组中的一组参照图像组生成预测信号并进行预测编码,其特征在于,该动态图像编码方法具有以下步骤:预测信号生成方法控制步骤,通过组合预先确定的多个处理,针对所述多组参照图像组的各参照图像决定为了生成所述预测信号而应该对所述参照图像组的各参照图像进行的处理方法,并且,通过按照每个所述处理块进行运动预测,针对各处理块决定运动矢量和参照图像组;预测信号生成步骤,根据由所述预测信号生成方法控制步骤决定的关于所述处理块的应该对参照图像组的各参照图像进行的处理方法,对所述参照图像组的各参照图像进行处理,从而生成关于该处理块的所述预测信号;以及编码步骤,将由所述预测信号生成方法控制步骤决定的关于各组参照图像组的所述处理方法的信息组与确定每个所述处理块的参照图像组的参照列表编号组和运动矢量信息一起进行编码。
本发明的一个侧面的动态图像编码程序用于将编码对象的图像分割成多个处理块,按照每个所述处理块,参照多组参照图像组中的一组参照图像组生成预测信号并进行预测编码,其特征在于,该动态图像编码程序使计算机作为以下部分进行动作:预测信号生成方法控制部,其通过组合预先确定的多个处理,针对所述多组参照图像组的各参照图像决定为了生成所述预测信号而应该对所述参照图像组的各参照图像进行的处理方法,并且,通过按照每个所述处理块进行运动预测,针对各处理块决定运动矢量和参照图像组;预测信号生成部,其根据由所述预测信号生成方法控制部决定的关于所述处理块的应该对参照图像组的各参照图像进行的处理方法,对所述参照图像组的各参照图像进行处理,从而生成关于该处理块的所述预测信号;以及编码部,其将由所述预测信号生成方法控制部决定的关于各组参照图像组的所述处理方法的信息组与确定每个所述处理块的参照图像组的参照列表编号组和运动矢量信息一起进行编码。
但是,不仅是单一的参照图像,本发明还能够应用于参照多个参照图像组生成预测信号并进行预测解码的动态图像解码装置、动态图像解码方法和动态图像解码程序,能够如下记述。
本发明的一个侧面的动态图像解码装置针对对解码对象的图像进行分割而得到的多个处理块,分别参照多组参照图像组中的一组参照图像组生成预测信号并进行预测解码,其特征在于,该动态图像解码装置具有:解码部,其根据所输入的编码数据,对为了生成所述预测信号而应该对各组参照图像组的各参照图像进行的处理方法的信息组、以及确定每个所述处理块的参照图像组的参照列表编号组和运动矢量信息进行解码;预测信号生成方法控制部,其根据由所述解码部得到的解码对象的处理块的参照列表编号组,取得应该对与该参照列表编号组对应的参照图像组的各参照图像进行的处理方法的信息组;以及预测信号生成部,其根据由所述预测信号生成方法控制部取得的关于所述解码对象的处理块的应该对参照图像组的各参照图像进行的处理方法,对该参照图像组的各参照图像进行处理,从而生成关于该处理块的所述预测信号。
本发明的一个侧面的动态图像解码方法由动态图像解码装置执行,用于针对对解码对象的图像进行分割而得到的多个处理块,分别参照多组参照图像组中的一组参照图像组生成预测信号并进行预测解码,其特征在于,该动态图像解码方法具有以下步骤:解码步骤,根据所输入的编码数据,对为了生成所述预测信号而应该对各组参照图像组的各参照图像进行的处理方法的信息组、以及确定每个所述处理块的参照图像组的参照列表编号组和运动矢量信息进行解码;预测信号生成方法控制步骤,根据由所述解码步骤得到的解码对象的处理块的参照列表编号组,取得应该对与该参照列表编号组对应的参照图像组的各参照图像进行的处理方法的信息组;以及预测信号生成步骤,根据由所述预测信号生成方法控制步骤取得的关于所述解码对象的处理块的应该对参照图像组的各参照图像进行的处理方法,对该参照图像组的各参照图像进行处理,从而生成关于该处理块的所述预测信号。
本发明的一个侧面的动态图像解码程序用于针对对解码对象的图像进行分割而得到的多个处理块,分别参照多组参照图像组中的一组参照图像组生成预测信号并进行预测解码,其特征在于,该动态图像解码程序使计算机作为以下部分进行动作:解码部,其根据所输入的编码数据,对为了生成所述预测信号而应该对各组参照图像组的各参照图像进行的处理方法的信息组、以及确定每个所述处理块的参照图像组的参照列表编号组和运动矢量信息进行解码;预测信号生成方法控制部,其根据由所述解码部得到的解码对象的处理块的参照列表编号组,取得应该对与该参照列表编号组对应的参照图像组的各参照图像进行的处理方法的信息组;以及预测信号生成部,其根据由所述预测信号生成方法控制部取得的关于所述解码对象的处理块的应该对参照图像组的各参照图像进行的处理方法,对该参照图像组的各参照图像进行处理,从而生成关于该处理块的所述预测信号。
发明效果
根据本发明,通过组合预先确定的多个处理,针对多个参照图像分别决定为了生成预测信号而应该对参照图像进行的处理方法,根据所决定的关于处理块的应该对参照图像进行的处理方法,对参照图像进行处理,从而生成关于该处理块的预测信号,所以通过提供适合于处理块的优选参照图像,能够高效地进行编码。
并且,根据本发明,根据所输入的编码数据,对为了生成预测信号而应该对各参照图像进行的处理方法的信息、以及确定每个处理块的参照图像的参照列表编号和运动矢量信息进行解码,根据解码对象的处理块的参照列表编号,取得应该对与该参照列表编号对应的参照图像进行的处理方法的信息,根据关于解码对象的处理块的应该对参照图像进行的处理方法,对该参照图像进行处理,从而生成关于该处理块的预测信号,所以通过提供适合于处理块的优选参照图像,能够高效地进行解码。
附图说明
图1是本发明的一个侧面的实施方式的动态图像编码装置的框图。
图2是示出参照列表的图。
图3是示出用于生成预测信号的处理方法的列表的图。
图4是示出参照列表编号及其码的表的图。
图5是示出用于生成预测信号的处理方法及其码的表的图。
图6是像素插值滤波器的种类的列表编号为2或3以外时的某个参照图像中的已编码的预测信号生成方法编码数据的示意图。
图7是像素插值滤波器的种类的列表编号为2或3时的某个参照图像中的已编码的预测信号生成方法编码数据的示意图。
图8是编码数据的示意图。
图9是本发明的一个侧面的实施方式的动态图像编码方法的流程图。
图10是本发明的一个侧面的实施方式的动态图像解码装置的框图。
图11是示出参照列表编号的码和该参照列表编号的表的图。
图12是示出用于生成预测信号的处理方法的码和该处理方法的列表编号的表的图。
图13是示出参照列表的图。
图14是示出用于生成预测信号的处理方法的列表的图。
图15是示出本发明的一个侧面的实施方式的动态图像解码方法的处理的流程图。
图16是示出本发明的一个侧面的实施方式的动态图像编码程序的结构的图。
图17是示出本发明的一个侧面的实施方式的动态图像解码程序的结构的图。
图18是示出亮度补偿预测处理的有无的列表的表的图。
图19是示出亮度补偿预测处理的有无及其码的表的图。
图20是预测信号生成方法编码数据的示意图。
图21是示出亮度补偿预测处理的有无及其码的表的图。
图22是示出亮度补偿预测处理的有无的列表的表的图。
图23是示出表示与用于生成预测信号的处理有关的信息及其识别编号的表的图。
图24是预测信号生成方法编码数据的示意图。
图25是预测信号生成方法编码数据的示意图。
图26是编码数据的示意图。
图27是预测信号生成方法编码数据的示意图。
图28是预测信号生成方法编码数据的示意图。
图29是预测信号生成方法编码数据的示意图。
图30是示出表示与用于生成预测信号的处理有关的信息组及其识别编号的表的图。
图31是预测信号生成方法编码数据的示意图。
图32是预测信号生成方法编码数据的示意图。
图33是编码数据的示意图。
图34是编码数据的示意图。
图35是预测信号生成方法编码数据的示意图。
图36是预测信号生成方法编码数据的示意图。
图37是编码数据的示意图。
图38是示出变形例1的预测信号生成方法信息的编码的处理的流程图。
图39是示出变形例1的预测信号生成方法信息的解码的处理的流程图。
图40是示出变形例2的预测信号生成方法信息组的编码的处理的流程图。
图41是示出变形例2的预测信号生成方法信息组的解码的处理的流程图。
图42是用于执行在记录介质中记录的程序的计算机的硬件结构图。
图43是图42的计算机的立体图。
图44是示出图14(b)的另一例的表。
图45是示出图23的另一例的表。
具体实施方式
下面,使用附图对本发明的一个侧面的实施方式进行说明。另外,在各图中,对相同或相当的部分标注相同标号。
(关于动态图像编码装置)
图1示出本发明的一个侧面的实施方式的动态图像编码装置100的框图。动态图像编码装置100具有输入部101、预测信号生成方法控制部102、帧存储器103、预测信号生成部104、减法器105、转换/量化部106、编码部107、逆量化/逆转换部108、加法器109、输出部110。下面,叙述像上述那样构成的动态图像编码装置100的各部的功能。
输入部101输入构成动态图像的多个图像。接着,输入部101将作为编码对象的图像分割成由8×8像素构成的多个处理块。接着,输入部101经由线L111将作为处理对象的处理块输出到预测信号生成方法控制部102和减法器105。另外,处理块的大小不限于8×8像素。
预测信号生成方法控制部102通过组合预先存储的多个处理,按照每个参照图像决定用于生成预测信号的处理方法。此时,预测信号生成方法控制部102使用经由线L117输入的帧存储器103内的参照图像,组合预先存储的多个处理并按照每个参照图像决定用于生成预测信号的处理方法,使得在对经由线L111从输入部101输入的编码对象的处理块进行运动预测时,误差信号最小。另外,预测信号生成方法控制部102组合多个处理来决定用于生成预测信号的处理方法的方法不限于上述方法。预测信号生成方法控制部102按照要编码的每个帧图像,经由线L112向预测信号生成部104输出对各参照图像进行的处理方法的信息。并且,预测信号生成方法控制部102按照要编码的每个帧图像,经由线L113向编码部107输出对各参照图像进行的处理的信息。接着,预测信号生成方法控制部102按照编码对象的每个处理块进行运动预测,经由线L116向帧存储器103和编码部107输出预测误差最小的运动矢量和参照图像的信息。另外,预测信号生成方法控制部102进行运动预测来决定运动矢量和参照图像的信息的方法不限于上述方法。
帧存储器103存储过去已编码并在此后进行了复原的多个参照图像。帧存储器103经由线L117向预测信号生成方法控制部102输出参照图像,以便在预测信号生成方法控制部102中决定对各参照图像进行的用于生成预测信号的处理方法。并且,帧存储器103经由线L117向预测信号生成方法控制部102输出参照图像,以便进行编码对象的处理块的运动预测。并且,帧存储器103使用与从预测信号生成方法控制部102输入的运动矢量和参照图像有关的信息,从存储在帧存储器103中的参照图像中读出用于生成预测信号的像素信号,经由线L114输出到预测信号生成部104。
预测信号生成部104针对从帧存储器103输入的参照图像的像素信号,根据从预测信号生成方法控制部102输入的用于生成预测信号的处理方法的信息,生成针对处理块的预测信号。预测信号生成部104经由线L115向减法器105和加法器109输出所生成的预测信号。
减法器105求出从输入部101输入的处理块与从预测信号生成部104输入的预测信号的差分,经由线L118输出到转换/量化部106。
转换/量化部106在对从减法器105输入的差分信号实施转换后对其进行量化,经由线L119输出到编码部107和逆量化/逆转换部108。
编码部107在编码对象的帧图像的最初的处理块的编码之前,针对对从预测信号生成方法控制部102输入的各参照图像进行的处理的信息进行编码(即,生成预测信号生成方法编码数据)。并且,编码部107按照编码对象的帧图像的各处理块,对从预测信号生成方法控制部102输入的参照列表编号和运动矢量的信息、以及从转换/量化部106输入的转换量化差分信号进行编码。接着,编码部107经由线L122向输出部110输出编码后的数据。
逆量化/逆转换部108对从转换/量化部106输入的转换量化差分信号实施逆量化和逆转换,生成差分信号,经由线L120输出到加法器109。
加法器109对从预测信号生成部104输入的预测信号和从逆量化/逆转换部108输入的差分信号进行相加,复原处理块,将复原后的处理块作为参照图像,经由线L121输出到帧存储器103。
输出部110向外部输出从编码部107输入的编码数据。
接着,详细说明帧存储器103。帧存储器103由多个帧缓存构成,在各帧缓存中分别保存过去复原的参照图像。并且,各帧缓存根据参照列表来进行管理。图2是示出参照列表的图。具体而言,参照列表表示对各帧缓存分配的帧缓存编号与参照列表编号之间的对应。使该帧缓存编号与参照列表编号进行对应的方法既可以是预先确定的自动的方法,也可以是手动决定的方法。帧存储器103使用参照列表编号和运动矢量,针对在与参照列表中的该参照列表编号对应的帧缓存编号的帧缓存中保存的参照图像,读出运动矢量所指的地址的像素信号,并输出到预测信号生成部104。
接着,详细说明预测信号生成方法控制部102。预测信号生成方法控制部102存储与针对用于生成预测信号的参照图像的处理方法有关的信息。具体而言,作为该处理方法的种类,预测信号生成方法控制部102存储(a)像素插值的精度、(b)像素插值滤波器的种类、(c)像素插值时的运算取整方法的列表。这里,(a)像素插值的精度表示根据整数像素精度的已复原的参照图像进行像素插值而生成分数像素精度的预测信号时的像素插值的精度。并且,(b)像素插值滤波器的种类表示根据整数像素精度的已复原的参照图像生成分数像素精度的预测信号时对已复原的参照图像施加的滤波器的种类。(c)像素插值时的运算取整方法表示在根据已复原的参照图像进行像素插值而生成分数像素精度的预测信号时对已复原的参照图像施加滤波器进行运算时,在哪个时刻对运算中途的小数值取整为整数值。图3是示出保存在预测信号生成方法控制部102中的用于生成预测信号的处理方法的列表。图3(a)是示出像素插值的精度的列表,图3(b)是示出像素插值滤波器的种类的列表,图3(c)是示出像素插值时的取整方法的列表,分别示出各处理的种类中的处理方法。在图3(a)的像素插值的精度的列表中具有整数像素精度、1/2像素精度、1/4像素精度、1/8像素精度,分别分配0、1、2、3作为列表编号。并且,在图3(b)的像素插值滤波器的种类中具有滤波器系数固定的2种固定滤波器1和固定滤波器2、滤波器系数可变的2种可变滤波器1和可变滤波器2、以及与最近使用可变滤波器1或可变滤波器2进行处理时相同的可变滤波器即最近可变滤波器,分别分配0、1、2、3、4作为列表编号。在图3(c)的像素插值时的取整方法中具有仅在运算最后取整和在每个运算中途取整,分别分配0、1作为列表编号。预测信号生成方法控制部102在进行编码对象的帧图像的各处理块的处理之前,通过组合预先存储的多个处理,按照每个参照图像决定用于生成预测信号的处理方法。这里的决定方法按照如下的方式决定:针对从帧存储器输入的各参照图像,在对参照图像的像素信号进行处理而进行运动预测时,使其与输入图像之间的误差最小。并且,预测信号生成方法控制部102使用参照列表编号作为参照图像的识别编号,按照每个参照列表编号,通过组合上述(a)像素插值的精度、(b)像素插值滤波器的种类、(c)像素插值时的运算取整方法,决定预测信号生成方法,向编码部107输出所决定的预测信号生成方法的信息。然后,预测信号生成方法控制部102按照编码对象的每个处理块进行运动预测,将预测误差最小的运动矢量和参照图像的信息经由线L116输出到帧存储器103。
接着,详细说明预测信号生成部104。预测信号生成部104从帧存储器103输入用于生成预测信号的参照图像的像素信号,根据从预测信号生成方法控制部102输入的与上述参照图像的参照列表编号对应的处理方法,对参照图像进行处理,从而生成预测信号。接着,预测信号生成部104向减法器105和加法器109输出所生成的预测信号。
接着,详细说明编码部107。编码部107按照编码对象的每个帧图像,首先,对从预测信号生成方法控制部102输入的参照列表编号和用于生成其预测信号的处理方法的信息进行编码,存储在编码部107内。图4示出参照列表编号及其码的表。并且,图5示出生成预测信号的处理方法及其码的表。图5(a)、(b)、(c)分别是像素插值的精度、像素插值滤波器的种类、像素插值时的运算取整方法的列表编号及其码的表。并且,在像素插值滤波器的种类的列表编号为2或3、即像素插值滤波器的种类为可变长度滤波器1或可变长度滤波器2的情况下,编码部107对最后的可变滤波器的滤波器系数进行编码。图6是像素插值滤波器的种类的列表编号为2或3以外时的针对某个参照图像的已编码的参照列表编号和生成预测信号的处理方法的信息的数据的示意图,图7是像素插值滤波器的种类的列表编号为2或3时的针对某个参照图像的已编码的参照列表编号和生成预测信号的处理方法(预测信号生成方法编码数据)的示意图。编码部107对预先确定的参照图像数量的已编码的参照列表编号和生成预测信号的处理方法进行统合。然后,编码部107按照编码对象的帧图像的每个处理块,对用于生成预测信号的参照列表编号、运动矢量以及转换量化差分信号进行编码,与上述预测信号生成方法编码数据一起输出到输出部110。图8是已编码的数据的示意图。
(关于动态图像编码方法)
接着,使用图9说明由动态图像编码装置100执行的动态图像编码方法的处理。图9是示出本实施方式的动态图像编码方法的处理的流程图。
首先,预测信号生成方法控制部102按照编码对象的每个帧图像,使用从输入部101输入的编码对象的帧图像和从帧存储器103输入的参照图像,决定应该对各参照图像进行的处理方法,编码部107对上述决定的处理方法的信息进行编码,生成预测信号生成方法编码数据(步骤S101)。另外,上述所决定的用于生成预测信号的处理方法的信息还输出到预测信号生成部104。
接着,输入部101输入由多张图像构成的动态图像的信号后,将作为编码对象的帧图像分割成由8×8像素构成的处理块(步骤S102)。
接着,预测信号生成方法控制部102按照编码对象的每个处理块进行运动预测(进行块匹配),决定与处理块之间的预测误差最小的运动矢量和参照图像,编码部107对参照图像的参照列表编号和运动矢量的信息进行编码(步骤S103)。
接着,预测信号生成部104根据用于生成预测信号的处理方法的信息,针对从帧存储器103读出的参照图像的像素信号,进行与该参照图像对应的处理,从而生成预测信号(步骤S104)。
接着,减法器105求出从输入部101输入的处理块与由预测信号生成部104生成的预测信号的差分,转换/量化部106在对由减法器105求出的差分信号实施转换后对其进行量化,将所得到的转换量化差分信号输出到编码部107和逆量化/逆转换部108。然后,编码部107对转换量化差分信号进行编码(步骤S105)。
接着,逆量化/逆转换部108对从转换/量化部106输出的转换量化差分信号实施逆量化和逆转换,加法器109对逆量化和逆转换后的信号(复原后的差分信号)与预测信号进行相加,然后,将相加后的复原信号作为参照图像存储在帧存储器103中(步骤S106)。
接着,判断是否针对编码对象的帧图像的所有处理块结束了上述步骤S103~S106的处理(步骤S107),在还存在未结束处理的处理块的情况下(步骤S107:“否”的情况),针对未处理的处理块反复进行步骤S103~S106的处理。另一方面,在针对所有处理块结束了处理的情况下(步骤S107:“是”的情况),结束图9的处理。
(关于图像解码装置)
接着,说明本实施方式的动态图像解码装置。图10是本实施方式的动态图像解码装置1000的框图。动态图像解码装置1000具有:输入部1001、解码部1002、预测信号生成方法控制部1003、帧存储器1004、预测信号生成部1005、逆量化/逆转换部1006、加法器1007、输出部1008。
下面,叙述像上述那样构成的动态图像解码装置1000的各部的功能。
输入部1001输入由上述动态图像编码装置编码后的编码数据,并将其输出到解码部1002。
解码部1002根据从输入部1001输入的编码数据,按照解码对象的每个帧图像,首先对应该对各参照图像进行的处理的信息(预测信号生成方法编码数据)进行解码,经由线L1010输出到预测信号生成方法控制部1003。接着,解码部1002按照解码对象的帧图像的每个处理块,对用于生成预测信号的参照图像的参照列表编号进行解码,经由线L1011输出到预测信号生成方法控制部1003和帧存储器1004。接着,解码部1002按照解码对象的帧图像的每个处理块,对运动矢量的数据进行解码,经由线L1012输出到预测信号生成方法控制部1003。接着,解码部1002对转换量化差分信号进行解码,将其输出到逆量化/逆转换部1006。
预测信号生成方法控制部1003存储从解码部1002输入的每个参照图像的用于生成预测信号的处理方法的信息。预测信号生成方法控制部1003参照所存储的针对各参照图像的处理的信息,参照从解码部1002输入的解码对象的处理块的参照列表编号,经由线L1014将与该参照列表编号对应的用于生成预测信号的处理方法的信息输出到预测信号生成部1005。
帧存储器1004存储过去已解码并复原后的多个参照图像。帧存储器1004针对要解码的处理块,从解码部1002输入用于生成预测信号的参照图像的参照列表编号和运动矢量的信息,经由线L1015将该参照图像的运动矢量所指的位置的地址的像素信号输出到预测信号生成部1005。
预测信号生成部1005针对从帧存储器1004输入的用于生成预测信号的像素信号,使用从预测信号生成方法控制部1003输入的针对该参照图像的参照列表编号的处理的信息进行处理,生成要解码的对象块的预测信号。
逆量化/逆转换部1006对从解码部1002输入的转换量化差分信号实施逆量化和逆转换,生成差分信号,经由线L1017输出到加法器1007。
加法器1007对从预测信号生成部1005输入的预测信号和从逆量化/逆转换部1006输入的差分信号进行相加,复原处理块,将其作为参照图像经由线L1018输出到帧存储器1004和输出部1008。
输出部1008向外部输出从加法器1007输入的复原后的处理块。
接着,详细说明解码部1002。从输入部1001输入到解码部1002的编码数据与所述图8所示的编码数据相同。解码部1002根据从输入部1001输入的编码数据,按照解码对象的每个帧图像,依次对与各参照图像有关的用于生成预测信号的处理方法的信息(这里为处理方法的种类即像素插值的精度的列表编号、像素插值滤波器的种类的列表编号、像素插值时的运算取整方法的列表编号)进行解码。图11示出参照列表编号的码和该参照列表编号的表。并且,图12示出处理方法的码和该处理方法的列表编号的表。具体而言,图12(a)示出像素插值的精度及其列表编号的表,图12(b)示出像素插值滤波器的种类及其列表编号的表,图12(c)示出像素插值时的运算取整方法的码及其列表编号的表。并且,在解码后的像素插值滤波器的种类的列表编号为2或3的情况下,解码部1002在像素插值时的运算取整方法的解码后对可变滤波器的滤波器系数进行解码。另外,像素插值滤波器的种类的列表编号为2或3以外时的、针对解码前的某个参照图像的已编码的参照列表编号和用于生成预测信号的处理方法的信息与所述图6所示的信息相同。并且,像素插值滤波器的种类的列表编号为2或3时的、针对解码前的某个参照图像的已编码的参照列表编号和用于生成预测信号的处理方法的信息与所述图7所示的信息相同。接着,解码部1002对预先确定的参照图像数量的参照列表编号和用于生成预测信号的处理方法的信息进行解码,将其输出到预测信号生成方法控制部1003。接着,解码部1002按照解码对象的每个处理块,对参照列表编号、运动矢量以及转换量化差分信号进行解码。
接着,详细说明帧存储器1004。帧存储器1004由多个帧缓存构成,在各帧缓存中分别保存过去复原的参照图像。并且,各帧缓存根据参照列表进行管理。图13是示出参照列表的图。具体而言,参照列表表示对各帧缓存分配的帧缓存编号与参照列表编号之间的对应。使该帧缓存编号与参照列表编号进行对应的方法既可以是预先确定的自动的方法,也可以是手动决定的方法。帧存储器1004针对在与从解码部1002输入的解码对象的处理块的参照列表编号对应的帧缓存编号的帧缓存中保存的参照图像,将从解码部1002输入的运动矢量所指的地址的图像信号输出到预测信号生成部1005。
接着,详细说明预测信号生成方法控制部1003。预测信号生成方法控制部1003存储用于生成预测信号的参照图像列表和与针对该参照图像列表编号的参照图像的处理方法有关的信息。具体而言,接着,作为该处理方法的种类,预测信号生成方法控制部1003存储(a)像素插值的精度、(b)像素插值滤波器的种类、(c)像素插值时的运算取整方法的列表。这里,(a)像素插值的精度表示根据整数像素精度的已复原的参照图像进行像素插值而生成分数像素精度的预测信号时的像素插值的精度。并且,(b)像素插值滤波器的种类表示根据整数像素精度的已复原的参照图像生成分数像素精度的预测信号时对已复原的参照图像施加的滤波器的种类。(c)像素插值时的运算取整方法表示在根据已复原的参照图像进行像素插值而生成分数像素精度的预测信号时对已复原的参照图像施加滤波器进行运算时,在哪个时刻对运算中途的小数值取整为整数值。图14是示出保存在预测信号生成方法控制部1003中的处理方法的列表。图14(a)是示出像素插值的精度的列表,图14(b)是示出像素插值滤波器的种类的列表,图14(c)是示出像素插值时的取整方法的列表,分别示出各处理的种类中的处理方法。在图14(a)的像素插值的精度的列表中具有0、1、2、3作为列表编号,分别分配整数像素精度、1/2像素精度、1/4像素精度、1/8像素精度。并且,在图14(b)的像素插值滤波器的种类的列表中具有0、1、2、3、4作为列表编号,分别分配滤波器系数固定的2种固定滤波器1和固定滤波器2、滤波器系数可变的2种可变滤波器1和可变滤波器2、以及与最近使用可变滤波器1或可变滤波器2进行处理时相同的可变滤波器即最近可变滤波器。在图14(c)的像素插值时的取整方法的列表中具有0、1作为列表编号,分别分配仅在运算最后取整和在每个运算中途取整。
接着,详细说明预测信号生成部1005。预测信号生成部1005从帧存储器1004输入用于生成解码对象的处理块的预测信号的图像信号。接着,预测信号生成部1005对所述图像信号进行基于从预测信号生成方法控制部1003输入的与该解码对象的处理块的参照列表编号对应的处理方法的处理,从而生成解码对象的处理块的预测信号。
(关于动态图像解码方法)
接着,使用图15说明由动态图像解码装置1000执行的动态图像解码方法的处理。图15是示出本实施方式的动态图像解码方法的处理的流程图。
首先,输入部1001输入编码数据后,解码部1002按照解码对象的每个帧图像,对为了生成预测信号而对各参照图像进行的处理方法的信息进行解码(步骤S1001)。
接着,解码部1002对解码对象的处理块的参照图像的参照列表编号进行解码(步骤S1002)。
接着,解码部1002对解码对象的处理块的运动矢量进行解码(步骤S1003)。
接着,解码部1002对解码对象的处理块的转换量化差分信号进行解码(步骤S1004)。
接着,预测信号生成部1005使用解码后的参照列表编号和运动矢量,从帧存储器1004中读出用于生成预测信号的参照图像,根据存储在预测信号生成方法控制部1003中的处理方法的信息对参照图像实施处理,从而生成解码对象的处理块的预测信号(步骤S1005)。
接着,逆量化/逆转换部1006对从解码部1002输出的转换量化差分信号实施逆量化和逆转换,加法器1007对逆量化和逆转换后的信号(复原后的差分信号)与上述生成的预测信号进行相加(步骤S1006)。由此,复原了处理块的图像信号。复原后的处理块的图像信号由输出部1008输出,并且,作为参照图像存储在帧存储器1004中(步骤S1007)。
接着,判断是否针对解码对象的帧图像的所有处理块结束了上述步骤S1002~S1007的处理(步骤S1008),在还存在未结束处理的处理块的情况下(步骤S1008:“否”的情况),针对未处理的处理块反复进行步骤S1002~S1007的处理。另一方面,在针对所有处理块结束了处理的情况下(步骤S1008:“是”的情况),结束图15的处理。
(关于动态图像编码程序、动态图像解码程序)
动态图像编码装置的发明能够记载为用于使计算机作为动态图像编码装置发挥功能的动态图像编码程序的发明。或者,能够将本实施方式的动态图像编码方法作为程序存储在记录介质中来提供。并且,动态图像解码装置的发明能够记载为用于使计算机作为动态图像解码装置发挥功能的动态图像解码程序的发明。或者,能够将本实施方式的动态图像解码方法作为程序存储在记录介质中来提供。
动态图像编码程序和动态图像解码程序例如存储在记录介质中来提供。作为记录介质,例示有软盘、CD-ROM、DVD等记录介质、或者ROM等记录介质、或者半导体存储器等。
使用图16对用于使计算机作为动态图像编码装置100进行动作的动态图像编码程序190进行说明。如图16所示,动态图像编码程序190具有:统一进行处理的主模块1900、输入模块1901、预测信号生成方法控制模块1902、存储模块1903、预测信号生成模块1904、减法模块1905、转换/量化模块1906、编码模块1907、逆量化/逆转换模块1908、加法模块1909、输出模块1910。上述输入模块1901、预测信号生成方法控制模块1902、存储模块1903、预测信号生成模块1904、减法模块1905、转换/量化模块1906、编码模块1907、逆量化/逆转换模块1908、加法模块1909、输出模块1910各自使计算机进行的功能与上述输入部101、预测信号生成方法控制部102、帧存储器103、预测信号生成部104、减法器105、转换/量化部106、编码部107、逆量化/逆转换部108、加法器109、输出部110各自的功能相同。
接着,使用图17对用于使计算机作为动态图像解码装置1000进行动作的动态图像解码程序200进行说明。如图17所示,动态图像解码程序200具有:统一进行处理的主模块2000、输入模块2001、解码模块2002、预测信号生成方法控制模块2003、存储模块2004、预测信号生成模块2005、逆量化/逆转换模块2006、加法模块2007、输出模块2008。上述输入模块2001、解码模块2002、预测信号生成方法控制模块2003、存储模块2004、预测信号生成模块2005、逆量化/逆转换模块2006、加法模块2007、输出模块2008各自使计算机进行的功能与上述输入部1001、解码部1002、预测信号生成方法控制部1003、帧存储器1004、预测信号生成部1005、逆量化/逆转换部1006、加法器1007、输出部1008各自的功能相同。
像上述那样构成的动态图像编码程序190和动态图像解码程序200存储在图42所示的记录介质10中,由后述的计算机30来执行。
图42是示出用于执行记录在记录介质中的程序的计算机的硬件结构的图,图43是用于执行存储在记录介质中的程序的计算机的立体图。作为计算机,包含具有CPU并进行基于软件的处理和控制的DVD播放器、机顶盒、移动电话等。
如图42所示,计算机30具有:软盘驱动装置、CD-ROM驱动装置、DVD驱动装置等读取装置12;使操作系统常驻的作业用存储器(RAM)14;存储记录介质10所存储的程序的存储器16;显示器18;作为输入装置的鼠标20和键盘22;用于进行数据等的收发的通信装置24;以及对程序的执行进行控制的CPU 26。在将记录介质10插入到读取装置12中时,计算机30能够从读取装置12访问存储在记录介质10中的动态图像编码程序190,通过该动态图像编码程序190,能够作为本发明的一个侧面的动态图像编码装置进行动作。并且,在将记录介质10插入到读取装置12中时,计算机30能够从读取装置12访问存储在记录介质10中的动态图像解码程序200,通过该动态图像解码程序200,能够作为本发明的一个侧面的动态图像解码装置进行动作。
如图43所示,动态图像编码程序或动态图像解码程序也可以作为叠加在载波上的计算机数据信号40而经由网络提供。在该情况下,计算机30将通过通信装置24接收到的动态图像编码程序或动态图像解码程序存储在存储器16中,能够执行该动态图像编码程序或动态图像解码程序。
(关于本实施方式的作用和效果)
这里,说明本实施方式的动态图像编码装置100的作用和效果。在动态图像编码装置100中,在对编码对象的帧图像的处理块进行预测编码时,预测信号生成方法控制部102通过组合预先确定的多个处理,按照每个参照图像决定残差信号最小的处理方法,预测信号生成部104对参照图像实施基于所述决定的处理方法的处理,生成预测信号,所以能够提供适合于编码对象的帧图像的处理块的优选预测信号,能够高效地进行编码。
接着,说明本实施方式的动态图像解码装置1000的作用和效果。在动态图像解码装置1000中,在对解码对象的帧图像的处理块进行预测解码时,预测信号生成方法控制部1003通过组合预先确定的多个处理,按照每个参照图像对残差信号最小的处理方法进行解码,预测信号生成部1005对参照图像实施基于所述解码后的处理方法的处理,生成预测信号,所以能够提供适合于解码对象的帧图像的处理块的优选参照图像,能够高效地进行解码。
另外,在本实施方式的动态图像编码装置和动态图像解码装置中,对多个复原后的参照图像进行识别的方法不限于上述参照列表,只要是唯一识别参照图像的方法即可,可以是任意方法。并且,在使用参照列表识别多个参照图像的情况下,保存参照列表编号和参照图像的帧缓存的帧缓存编号与参照列表之间的对应不限于上述方法。并且,参照列表编号与参照列表编号的码的对应不限于上述方法。并且,在本实施方式的动态图像编码装置通过双方向预测进行预测编码的情况下、以及本实施方式的动态图像解码装置通过双方向预测进行预测解码的情况下,也可以按照前方向预测和后方向预测来生成参照列表,合并各预测方向的参照列表编号和与对参照图像进行的处理方法有关的信息进行编码(或解码)。
并且,关于本实施方式的动态图像编码装置和动态图像解码装置对参照图像进行的像素插值的精度、像素插值滤波器的种类、像素插值时的运算取整方法,其处理方法不限于上述方法。并且,在本实施方式的动态图像编码装置和动态图像解码装置对参照图像进行的处理的各种类中,其处理方法和码的关系不限于上述关系。并且,本实施方式的动态图像编码装置和动态图像解码装置对参照图像进行的处理的种类至少为一种以上即可,在各处理的种类中具有至少2个以上的处理方法即可。
并且,本实施方式的动态图像编码装置和动态图像解码装置也可以对在与同一参照列表编号对应的帧缓存编号的帧缓存中保存的同一参照图像进行不同的处理,生成不同的预测信号。
并且,本实施方式的动态图像编码装置和动态图像解码装置为了生成预测信号而对参照图像进行的处理的种类不限于上述的像素插值的精度、像素插值滤波器的种类、像素插值时的运算取整方法,也可以是在整数像素位置施加的滤波器的种类,还可以是与全局运动补偿的有无及其方法有关的种类,还可以是与仿射变换的有无及其方法有关的种类。
并且,在本实施方式的动态图像编码装置和动态图像解码装置为了生成预测信号而对参照图像进行的处理方法的信息中,还可以包含按照每个参照图像指示是否使用改变像素值的明亮度的亮度补偿来进行预测的信息。图18是示出亮度补偿预测的有无的列表的表。并且,图19是对亮度补偿的有无的列表编号进行编码时使用的亮度补偿的有无的列表编号及其码的表。并且,图20是像素插值滤波器的种类的列表编号为2或3以外时的、包含亮度补偿的有无的信息在内的某个参照图像中的已编码的预测信号生成方法编码数据的示意图。
并且,本实施方式的动态图像解码装置解码的预测信号生成方法编码数据也可以包含是否使用改变像素值的明亮度的亮度补偿来进行预测。像素插值滤波器的种类的列表编号为2或3以外时的、包含亮度补偿的有无的信息在内的某个参照图像中的已编码的预测信号生成方法编码数据与所述图20所示的预测信号生成方法编码数据相同。并且,图21是对亮度补偿的有无的列表编号进行解码时使用的码和该亮度补偿的有无的列表编号的表。并且,图22是示出亮度补偿预测的有无的列表的表。
(上述实施方式的变形例1)
接着,使用图23~图29、图38、图39说明上述实施方式的变形例1。另外,在各图中,对相同或相当的部分标注相同标号。
(关于动态图像编码装置、动态图像编码方法)
除了编码部107的功能以外,上述实施方式的变形例1的动态图像编码装置与上述实施方式的动态图像编码装置100相同。因此,仅说明编码部107。
编码部107与识别编号一起存储过去编码的与用于生成预测信号的处理方法有关的信息。图23是示出在编码部107中存储的识别编号和与该识别编号对应的与用于生成预测信号的处理方法有关的信息的图。编码部107对从预测信号生成方法控制部102输入的参照列表编号和用于生成其预测信号的处理方法的信息进行编码。图4示出参照列表编号及其码的表。并且,关于用于生成预测信号的处理方法的信息,和与用于生成过去使用的参照图像的处理方法有关的信息相比,决定生成方法的识别编号。具体而言,在用于生成预测信号的对某个参照列表编号的参照图像实施的处理方法的信息与过去为了对帧图像进行编码而使用的处理方法的信息相同的情况下,编码部107将该过去的处理方法的识别编号作为生成方法的识别编号。并且,在用于生成预测信号的对某个参照列表编号的参照图像实施的处理方法的信息与过去使用的处理方法的信息不同的情况下,编码部107按照从小到大的顺序决定新的编号,作为生成方法的识别编号。然后,编码部107按照参照图像的每个参照列表编号,作为用于生成预测信号的处理方法的信息,在使用与过去相同的处理方法的情况下,仅对识别编号进行编码,并经由线L113输出到预测信号生成方法控制部102,另一方面,在不使用与过去相同的处理方法的情况下,对识别编号及其处理方法(处理的组合)的内容进行编码,并经由线L113输出到预测信号生成方法控制部102。并且,图5示出针对处理方法的内容的码的表。图24示出在使用与过去相同的处理方法作为用于生成预测信号的处理方法的信息的情况下的预测信号生成方法编码数据的示意图,图25示出在不使用与过去相同的处理方法作为用于生成预测信号的处理方法的信息的情况下的预测信号生成方法编码数据的示意图。接着,在不使用与过去相同的处理方法作为用于生成预测信号的处理方法的信息的情况下,编码部107与识别编号一起存储该新的用于生成预测信号的处理方法的信息。接着,编码部107按照编码对象的帧图像的每个处理块,对用于生成预测信号的参照列表编号、运动矢量以及转换量化差分信号进行编码,与上述预测信号生成方法编码数据一起输出到输出部110。图26是已编码的数据的示意图。这里,示出如下情况的例子:用于生成第1参照图像的预测信号的处理方法的信息与过去编码的用于生成预测信号的处理方法的信息不同,用于生成第2和第3参照图像的预测信号的处理方法的信息与过去编码的用于生成预测信号的处理方法的信息相同。
变形例1的动态图像编码方法在由编码部107执行的预测信号生成方法信息的编码的处理中具有特征。因此,使用图38说明预测信号生成方法信息的编码的处理。
如图38所示,编码部107针对某个参照列表编号的参照图像,判断对用于生成预测信号的参照图像实施的处理方法的信息(预测信号生成方法信息)是否与过去使用的处理方法的信息相同(步骤S121)。这里,在预测信号生成方法信息与过去使用的处理方法的信息不同的情况下(步骤S121:“否”的情况),编码部107按照从小到大的顺序决定新的编号,作为生成方法的识别编号(步骤S124),对参照列表编号、上述决定的新的识别编号以及预测信号生成方法信息进行编码,经由线L113输出到预测信号生成方法控制部102(步骤S125),然后,与新的识别编号一起存储上述预测信号生成方法信息(步骤S126)。
另一方面,在预测信号生成方法信息与过去使用的处理方法的信息相同的情况下(步骤S121:“是”的情况),编码部107设定该过去使用的处理方法的识别编号作为预测信号生成方法的识别编号(步骤S122),仅对参照列表编号和上述设定的识别编号进行编码,经由线L113输出到预测信号生成方法控制部102(步骤S123)。
接着,判断是否针对所有参照图像结束了上述步骤S121~S126的处理(步骤S127),在还存在未结束处理的参照图像的情况下(步骤S127:“否”的情况),针对未处理的参照图像反复进行步骤S121~S126的处理。另一方面,在针对所有参照图像结束了处理的情况下(步骤S127:“是”的情况),结束图38的处理。
变形例1的动态图像编码程序的结构与上述实施方式的动态图像编码程序的结构(图16)相同,所以省略说明。但是,通过编码模块1907使计算机作为编码部107进行动作的动作内容为上述变形例1的编码部107的动作内容。
(关于动态图像解码装置、动态图像解码方法)
接着,对上述实施方式的变形例1的动态图像解码装置进行说明。除了解码部1002以外,上述实施方式的变形例1的动态图像解码装置与上述实施方式的动态图像解码装置1000相同。因此,仅说明解码部1002。
解码部1002与识别编号一起存储过去解码的与用于生成预测信号的处理方法有关的信息。由解码部1002存储的识别编号和与该识别编号对应的与用于生成预测信号的处理方法有关的信息与所述图23所示的信息相同。解码部1002在根据从输入部101输入的编码数据对解码对象的帧图像的最初的处理块进行解码之前,对与各参照图像有关的用于生成预测信号的处理方法的相关信息进行解码。作为解码对象的编码数据与所述图26所示的编码数据相同。解码部1002按照每个参照图像对其参照列表编号和生成方法的识别编号进行解码。接着,解码部1002判断解码后的识别编号是否是过去解码的用于生成预测信号的处理方法的信息的识别编号。在解码后的识别编号是过去解码的用于生成预测信号的处理方法的信息的识别编号的情况下,解码部1002经由线L1010向预测信号生成方法控制部1003输出所存储的同一识别编号的用于生成预测信号的处理方法的信息。并且,在解码后的识别编号与过去解码的用于生成预测信号的处理方法的信息的识别编号不同的情况下,解码部1002对接着的码进行解码,从而取得用于生成预测信号的处理方法的信息,经由线L1010输出到预测信号生成方法控制部1003。此时,解码部1002与解码后的识别编号一起存储新解码的用于生成预测信号的处理方法的信息。解码部1002进行参照图像数量的上述处理。接着,解码部1002按照解码对象的帧图像的每个处理块,对用于生成预测信号的参照图像的参照列表编号进行解码,经由线L1011输出到预测信号生成方法控制部1003和帧存储器1004。接着,解码部1002对用于生成预测信号的运动矢量进行解码,经由线L1012输出到帧存储器1004。接着,解码部1002对转换量化差分信号进行解码,输出到逆量化/逆转换部1006。
变形例1的动态图像解码方法在由解码部1002执行的预测信号生成方法信息的解码的处理中具有特征。因此,使用图39说明预测信号生成方法信息的解码的处理。
如图39所示,解码部1002针对某个参照列表编号的参照图像,对参照列表编号和预测信号生成方法的识别编号进行解码(步骤S1021),判断解码后的识别编号是否与过去使用的处理方法的识别编号相同(步骤S1022)。这里,在解码后的识别编号与过去使用的处理方法的识别编号不同的情况下(步骤S1022:“否”的情况),解码部1002对接着识别编号的码进行解码,从而取得预测信号生成方法信息,经由线L1010输出到预测信号生成方法控制部1003(步骤S1024),与识别编号一起存储上述预测信号生成方法信息(步骤S1025)。
另一方面,在解码后的识别编号与过去使用的处理方法的识别编号相同的情况下(步骤S1022:“是”的情况),解码部1002读出所存储的同一识别编号的预测信号生成方法信息,经由线L1010输出到预测信号生成方法控制部1003(步骤S1023)。
接着,判断是否针对所有参照图像结束了上述步骤S1021~S1025的处理(步骤S1026),在还存在未结束处理的参照图像的情况下(步骤S1026:“否”的情况),针对未处理的参照图像反复进行步骤S1021~S1025的处理。另一方面,在针对所有参照图像结束了处理的情况下(步骤S1026:“是”的情况),结束图39的处理。
变形例1的动态图像解码程序的结构与上述实施方式的动态图像解码程序的结构(图17)相同,所以省略说明。但是,通过解码模块2002使计算机作为解码部1002进行动作的动作内容为上述变形例1的解码部1002的动作内容。
(关于变形例1的作用和效果)
这里,说明变形例1的动态图像编码装置100的作用和效果。在动态图像编码装置100中,在对编码对象的帧图像的处理块进行预测编码时,预测信号生成方法控制部102通过组合预先确定的多个处理,按照每个参照图像决定残差信号最小的处理方法(处理的组合),预测信号生成部104对参照图像实施基于所述决定的处理方法的处理,生成预测信号,所以能够提供适合于编码对象的帧图像的处理块的优选预测信号,能够高效地进行编码。并且,按照每个参照图像,与识别编号一起对用于生成预测信号的处理方法的信息进行编码,在所述用于生成预测信号的处理方法的信息与过去编码的用于生成预测信号的处理方法的信息相同的情况下,仅对识别编号进行编码,所以能够通过较少的编码数据对用于生成参照图像的处理方法的信息进行编码。
并且,说明变形例1的动态图像解码装置1000的作用和效果。在动态图像解码装置1000中,在对解码对象的帧图像的处理块进行预测解码时,预测信号生成方法控制部1003按照每个参照图像对残差信号最小的处理方法(处理的组合)进行解码,预测信号生成部1005对参照图像实施基于所述解码后的处理方法的处理,生成预测信号,所以能够提供适合于解码对象的帧图像的处理块的优选参照图像,能够高效地进行解码。并且,按照每个参照图像,与识别编号一起对用于生成预测信号的处理方法的信息进行解码,在所述用于生成预测信号的处理方法的信息与过去解码的用于生成预测信号的处理方法的信息相同的情况下,仅对识别编号进行解码,所以能够通过较少的编码数据对与用于生成参照图像的处理方法有关的信息进行解码。
另外,在本实施方式的变更例1的动态图像编码装置和动态图像解码装置中,若干个识别编号和与该识别编号对应的用于生成预测信号的处理方法的信息也可以预先共同存储在编码部107和解码部1002中。由此,作为参照图像生成方法编码数据,仅对参照列表编号和识别编号进行编码和解码即可的情况增加,能够通过更少的编码数据对用于生成参照图像的处理方法的信息进行编码和解码。并且,识别编号和与该识别编号对应的用于生成预测信号的处理方法的信息也可以不包含在编码数据中进行编码和解码,而是通过其他方法共同存储在编码部107和解码部1002中。
并且,在本实施方式的变更例1的动态图像编码装置和动态图像解码装置中,在编码和解码后的识别编号和与该识别编号对应的用于生成预测信号的处理方法的信息与过去编码和解码后的识别编号和与该识别编号对应的用于生成预测信号的处理方法的信息不同的情况下,也可以不在编码部107和解码部1002中追加新的信息,而是对过去编码和解码后的识别编号和与该识别编号对应的用于生成预测信号的处理方法的信息进行改写。该情况下,预测信号生成方法编码数据在识别编号的码之前具有是否对现有的识别编号和与该识别编号对应的用于生成预测信号的处理方法的信息进行改写的信息,动态图像编码装置利用编码部107对该信息进行编码并追加,动态图像解码装置利用解码部1002对该信息进行解码。图27是包含是否对现有的识别编号和与该识别编号对应的用于生成预测信号的处理方法的信息进行改写的信息在内的预测信号生成方法编码数据的示意图。由此,在与用于生成参照图像的处理方法有关的信息的种类增加时,能够对识别编号进行改写并再次利用,所以不需要增加新的识别编号,能够以较少的码长对识别编号进行编码和解码。
并且,在本实施方式的变更例1的动态图像编码装置和动态图像解码装置中,也可以在预测信号生成方法编码数据中包含将存储在编码部107和解码部1002中的过去编码和解码后的识别编号和与该识别编号对应的用于生成预测信号的处理方法的信息全部复位成初始状态的信息,对该预测信号生成方法编码数据进行编码和解码。图28是包含将过去编码和解码后的识别编号和与该识别编号对应的用于生成预测信号的处理方法的信息全部复位成初始状态的信息在内的预测信号生成方法编码数据的示意图。由此,不是依次改写与用于生成参照图像的处理方法有关的信息,而能够一次性地进行初始化并用于编码和解码。
并且,在本实施方式的变更例1的动态图像编码装置中,编码部107也可以不按照编码对象的每个帧图像一次性地对预测信号生成方法编码数据进行编码并输出,而按照多个帧图像一次性地对预测信号生成方法编码数据进行编码并输出,或者按照一个帧图像多次对预测信号生成方法编码数据进行编码并输出。并且,在本实施方式的变更例1的动态图像解码装置中,解码部1002也可以不按照解码对象的每个帧图像一次性地对预测信号生成方法编码数据进行解码,而按照多个帧图像一次性地对预测信号生成方法编码数据进行解码,或者按照一个帧图像多次对预测信号生成方法编码数据进行解码。该情况下,编码部107在预测信号生成方法编码数据和最初的处理块的参照列表编号的码之前插入编码数据的种类的识别符。即,在此后接着的码为预测信号生成方法编码数据的情况下,插入码“0”,在此后接着的码为处理块的编码数据的最初的参照列表编号的情况下,插入码“1”。并且,解码部1002按照每个帧图像,在预测信号生成方法编码数据和最初的处理块的参照列表编号的解码之前,对编码数据的种类的识别符进行解码,在码为“0”的情况下识别为此后接着的码为预测信号生成方法编码数据,在码为“1”的情况下识别为此后接着的码为处理块的编码数据即参照列表编号,进行解码。图29是按照每个帧图像多次对预测信号生成方法编码数据进行编码和解码时的编码数据的示意图。由此,在按照多个帧图像一次性地对与用于生成参照图像的处理方法有关的信息进行编码和解码的情况下,能够减少进行编码和解码的码量。并且,在一次性地集中多次对用于生成参照图像的处理方法的信息进行编码和解码的情况下,在若干个帧图像的编码和解码之前集中对用于生成参照图像的处理方法的信息进行编码和解码,所以能够以不混杂不同处理的方式进行处理。
(上述实施方式的变形例2)
接着,使用图30~图37、图40、图41说明上述实施方式的变形例2。另外,在各图中,对相同或相当的部分标注相同标号。
(关于动态图像编码装置、动态图像编码方法)
除了编码部107的动作以外,上述实施方式的变形例2的动态图像编码装置与上述实施方式的动态图像编码装置100相同。因此,仅说明编码部107。
编码部107与识别编号一起存储过去编码的用于生成预测信号的处理方法(处理的组合)的信息组。图30是示出在编码部107中存储的识别编号和对应的所有参照列表编号中的用于生成预测信号的处理方法的信息组的图。编码部107对从预测信号生成方法控制部102输入的所有参照列表编号中的用于生成预测信号的处理方法的信息组与过去使用的用于生成参照图像组的处理方法的信息组进行比较,决定其识别编号。具体而言,在用于生成预测信号的对所有参照列表编号的参照图像组实施的处理方法的信息组与过去为了对帧图像进行编码而使用的处理方法的信息组相同的情况下,编码部107将该过去的处理方法的识别编号作为生成方法的识别编号。并且,在用于生成预测信号的对所有参照列表编号的参照图像组实施的处理方法的信息组中即使一个与过去使用的处理方法的信息不同的情况下,编码部107也决定新的编号作为生成方法的识别编号。然后,编码部107针对所有参照列表编号的组合,作为用于生成预测信号的处理方法的信息组,在使用与过去相同的处理的情况下,仅对识别编号进行编码,在不使用与过去相同的处理的情况下,对识别编号及其处理内容进行编码,经由线L113输出到预测信号生成方法控制部102。并且,图5示出针对处理内容的码的表。图31示出在使用与过去相同的处理方法作为用于生成预测信号的处理方法的信息组的情况下针对所有参照列表编号的预测信号生成方法编码数据的示意图,图32示出在不使用与过去相同的处理方法作为用于生成预测信号的处理方法的信息组的情况下针对所有参照列表编号的预测信号生成方法编码数据的示意图。接着,在不使用与过去相同的处理作为用于生成预测信号的处理方法的信息组的情况下,编码部107与识别编号一起存储该新的用于生成预测信号的处理方法的信息组。接着,编码部107按照编码对象的帧图像的每个处理块,对用于生成预测信号的参照列表编号、运动矢量以及转换量化差分信号进行编码,与上述预测信号生成方法编码数据一起输出到输出部110。图33示出所有参照列表编号的参照图像组的用于生成预测信号的处理方法的信息与过去编码的用于生成预测信号的处理方法的信息组相同时的已编码的编码数据的示意图。并且,图34示出所有参照列表编号的参照图像组的用于生成预测信号的处理方法的信息中即使一个与过去编码的用于生成预测信号的处理方法的信息组不同时的已编码的编码数据的示意图。
变形例2的动态图像编码方法在由编码部107执行的预测信号生成方法信息的编码的处理中具有特征。因此,使用图40说明预测信号生成方法信息的编码的处理。
如图40所示,编码部107针对某个参照图像组,判断为了生成预测信号而对参照图像组的各参照图像实施的处理方法的信息组(预测信号生成方法信息组)是否与过去使用的处理方法的信息组相同(步骤S141)。这里,在预测信号生成方法信息组与过去使用的处理方法的信息组不同的情况下(步骤S141:“否”的情况),编码部107按照从小到大的顺序决定新的编号,作为生成方法信息组的识别编号(步骤S144),对上述决定的新的识别编号以及预测信号生成方法信息组进行编码,经由线L113输出到预测信号生成方法控制部102(步骤S145),然后,与新的识别编号一起存储上述预测信号生成方法信息组(步骤S146)。
另一方面,在预测信号生成方法信息组与过去使用的处理方法的信息组相同的情况下(步骤S141:“是”的情况),编码部107设定该过去使用的处理方法信息组的识别编号作为预测信号生成方法信息组的识别编号(步骤S142),仅对上述设定的识别编号进行编码,经由线L113输出到预测信号生成方法控制部102(步骤S143)。
接着,判断是否针对所有参照图像组结束了上述步骤S141~S146的处理(步骤S147),在还存在未结束处理的参照图像组的情况下(步骤S147:“否”的情况),针对未处理的参照图像组反复进行步骤S141~S146的处理。另一方面,在针对所有参照图像组结束了处理的情况下(步骤S147:“是”的情况),结束图40的处理。
变形例2的动态图像编码程序的结构与上述实施方式的动态图像编码程序的结构(图16)相同,所以省略说明。但是,通过编码模块1907使计算机作为编码部107进行动作的动作内容为上述变形例2的编码部107的动作内容。
(关于动态图像解码装置、动态图像解码方法)
接着,对上述实施方式的变形例2的动态图像解码装置进行说明。除了解码部1002以外,上述实施方式的变形例2的动态图像解码装置与上述实施方式的动态图像解码装置1000相同。因此,仅说明解码部1002。
解码部1002与识别编号一起存储过去解码的用于生成预测信号的处理方法的信息组。由解码部1002存储的识别编号和对应的所有参照列表编号中的用于生成预测信号的处理方法的信息组与所述图30所示的信息组相同。解码部1002在根据从输入部101输入的编码数据对解码对象的帧图像的最初的处理块进行解码之前,对针对用于生成预测信号的所有参照图像组的各参照图像进行的处理方法的信息进行解码。所有参照列表编号的参照图像组的用于生成预测信号的处理方法的信息与过去编码的用于生成预测信号的处理方法的信息组相同时的已编码的编码数据与所述图33所示的编码数据相同。并且,所有参照列表编号的参照图像组的用于生成预测信号的处理方法的信息组中即使一个与过去编码的用于生成预测信号的处理方法的信息组不同时的已编码的编码数据与所述图34所示的编码数据相同。解码部1002按照解码对象的每个帧图像对与所有参照列表编号的参照图像组的预测信号生成方法有关的信息的识别编号进行解码。接着,解码部1002判断解码后的识别编号是否是过去解码的用于生成预测信号的处理方法的信息组的识别编号。在解码后的识别编号是过去解码的用于生成预测信号的处理方法的信息组的识别编号的情况下,解码部1002经由线L1010向预测信号生成方法控制部输出所存储的同一识别编号的用于生成预测信号的处理方法的信息组。并且,在解码后的识别编号与过去解码的用于生成预测信号的处理方法的信息的识别编号不同的情况下,解码部1002对接着的码进行解码,取得针对所有参照列表编号的参照图像组的用于生成预测信号的处理方法的信息,经由线L1010输出到预测信号生成方法控制部。此时,解码部1002与解码后的识别编号一起存储新解码的用于生成预测信号的处理方法的信息组。接着,解码部1002按照解码对象的帧图像的每个处理块,对用于生成预测信号的参照图像组的参照列表编号进行解码,经由线L1011输出到预测信号生成方法控制部1003和帧存储器1004。接着,解码部1002对用于生成预测信号的运动矢量进行解码,经由线L1012输出到帧存储器1004。接着,解码部1002对转换量化差分信号进行解码,输出到逆量化/逆转换部1006。
变形例2的动态图像解码方法在由解码部1002执行的预测信号生成方法信息的解码的处理中具有特征。因此,使用图41说明预测信号生成方法信息的解码的处理。
如图41所示,解码部1002针对某个参照图像组,对预测信号生成方法信息组的识别编号进行解码(步骤S1041),判断解码后的识别编号是否与过去使用的处理方法信息组的识别编号相同(步骤S1042)。这里,在解码后的识别编号与过去使用的处理方法信息组的识别编号不同的情况下(步骤S1042:“否”的情况),解码部1002对接着识别编号的码进行解码,取得预测信号生成方法信息组,经由线L1010输出到预测信号生成方法控制部1003(步骤S1044),与识别编号一起存储上述预测信号生成方法信息组(步骤S1045)。
另一方面,在解码后的识别编号与过去使用的处理方法信息组的识别编号相同的情况下(步骤S1042:“是”的情况),解码部1002读出所存储的同一识别编号的预测信号生成方法信息组,经由线L1010输出到预测信号生成方法控制部1003(步骤S1043)。
接着,判断是否针对所有参照图像组结束了上述步骤S1041~S1045的处理(步骤S1046),在还存在未结束处理的参照图像组的情况下(步骤S1046:“否”的情况),针对未处理的参照图像组反复进行步骤S1041~S1045的处理。另一方面,在针对所有参照图像组结束了处理的情况下(步骤S1046:“是”的情况),结束图41的处理。
变形例2的动态图像解码程序的结构与上述实施方式的动态图像解码程序的结构(图17)相同,所以省略说明。但是,通过解码模块2002使计算机作为解码部1002进行动作的动作内容为上述变形例2的解码部1002的动作内容。
(关于变形例2的作用和效果)
这里,说明动态图像编码装置100的作用和效果。在动态图像编码装置100中,在对编码对象的帧图像的处理块进行预测编码时,预测信号生成方法控制部102通过组合预先确定的多个处理,针对参照图像组的各参照图像决定残差信号最小的处理方法,预测信号生成部104对参照图像组的各参照图像实施基于所述决定的处理方法的处理,生成预测信号,所以能够提供适合于编码对象的帧图像的处理块的优选预测信号,能够高效地进行编码。并且,按照每个帧图像,与识别编号一起对针对所有参照图像组的用于生成预测信号的处理方法的信息组进行编码,在与过去编码的用于生成预测信号的处理方法的信息组相同的情况下,仅对识别编号进行编码,所以能够通过较少的编码数据对与用于生成参照图像组的处理有关的信息进行编码。
并且,说明动态图像解码装置1000的作用和效果。在动态图像解码装置1000中,在对解码对象的帧图像的处理块进行预测解码时,预测信号生成方法控制部1003按照每个参照图像组对残差信号最小的处理方法的信息组进行解码,预测信号生成部1005对参照图像组的各参照图像实施基于所述解码后的处理方法的处理,生成预测信号,所以能够提供适合于解码对象的帧图像的处理块的优选参照图像组,能够高效地进行解码。并且,按照每个帧图像,与识别编号一起对针对所有参照图像组的用于生成预测信号的处理方法的信息组进行解码,在与过去解码的用于生成预测信号的处理方法的信息组相同的情况下,仅对识别编号进行解码,所以能够通过较少的解码数据对与用于生成参照图像组的处理有关的信息进行解码。
另外,在本实施方式的变更例2的动态图像编码装置和动态图像解码装置中,若干个识别编号及其用于生成预测信号的处理方法的信息组也可以从一开始就共同存储在编码部107和解码部1002中。由此,作为参照图像生成方法编码数据,仅对识别编号进行编码和解码即可的情况增加,能够通过更少的编码数据对与用于生成参照图像组的处理方法有关的信息组进行编码和解码。并且,识别编号及其用于生成预测信号的处理方法的信息组也可以不包含在编码数据中进行编码和解码,而是通过其他方法共同存储在编码部107和解码部1002中。
并且,在本实施方式的变更例2的动态图像编码装置和动态图像解码装置中,在编码和解码后的识别编号及其用于生成预测信号的处理方法的信息组与过去编码和解码后的识别编号及其用于生成预测信号的处理方法的信息组不同的情况下,也可以不在编码部107和解码部1002中追加新的信息,而对过去编码和解码后的识别编号及其用于生成预测信号的处理方法的信息组进行改写。该情况下,预测信号生成方法编码数据在识别符的码之前具有是否对现有的识别符编号及其用于生成预测信号的处理方法的信息组进行改写的信息,动态图像编码装置利用编码部107对该信息进行编码并追加,动态图像解码装置利用解码部1002对该信息进行解码。图35是包含是否对现有的识别符编号及其用于生成预测信号的处理方法的信息组进行改写的信息在内的预测信号生成方法编码数据的示意图。由此,在与用于生成参照图像组的处理方法有关的信息的种类增加时,能够对识别编号进行改写并再次利用,所以不需要增加新的识别编号,能够以较少的码长对识别编号进行编码和解码。
并且,在本实施方式的变更例2的动态图像编码装置和动态图像解码装置中,也可以在预测信号生成方法编码数据中包含将存储在编码部107和解码部1002中的过去编码和解码后的识别编号和与用于生成预测信号的处理方法有关的信息组全部复位成初始状态的信息,进行编码和解码。图36是包含将过去编码和解码后的识别编号及其用于生成预测信号的处理方法的信息组全部复位成初始状态的信息在内的预测信号生成方法编码数据的示意图。由此,不依次改写与用于生成参照图像组的处理有关的信息组,而能够一次性地进行初始化并用于编码和解码。
并且,在本实施方式的变更例1的动态图像编码装置和动态图像解码装置中,编码部107也可以不按照编码对象的每个帧图像一次性地对预测信号生成方法编码数据进行编码并输出,而按照多个帧图像一次性地对预测信号生成方法编码数据进行编码并输出,或者按照一个帧图像多次对预测信号生成方法编码数据进行编码并输出。并且,解码部1002也可以不按照解码对象的每个帧图像一次性地对预测信号生成方法编码数据进行解码,而按照多个帧图像一次性地对预测信号生成方法编码数据进行解码,或者按照一个帧图像多次对预测信号生成方法编码数据进行解码。该情况下,编码部107在预测信号生成方法编码数据和最初的处理块的参照列表编号的码之前插入编码数据的种类的识别符。即,在此后接着的码为预测信号生成方法编码数据的情况下,插入码“0”,在此后接着的码为处理块的编码数据的最初的参照列表编号的情况下,插入码“1”。并且,解码部1002按照每个帧图像,在预测信号生成方法编码数据和最初的处理块的参照列表编号的解码之前,对编码数据的种类的识别符进行解码,在码为“0”的情况下识别为此后接着的码为预测信号生成方法编码数据,在码为“1”的情况下识别为此后接着的码为处理块的编码数据即参照列表编号,进行解码。图37是按照每个帧图像多次对预测信号生成方法编码数据进行编码和解码时的编码数据的示意图。由此,在按照多个帧图像一次性地对与用于生成参照图像组的处理有关的信息组进行编码和解码的情况下,能够减少进行编码和解码的码量。并且,在一次性地集中多次对与用于生成参照图像组的处理有关的信息组进行编码和解码的情况下,在若干个帧图像的编码和解码之前集中对用于生成参照图像组的处理方法的信息组进行编码和解码,所以能够以不混杂不同处理的方式进行处理。
但是,作为与所述图14(b)的像素插值滤波器有关的表的另一例,举出图44所示的表。在该图44所示的表中,在像素插值滤波器的种类的列表中具有0、1、2、3作为列表编号,对列表编号0分配H.264插值滤波器(S_FIF),对列表编号1分配SAIF_HALF插值滤波器。另外,列表编号2、3视为Reserved(未使用)。
并且,作为所述图23(示出与用于生成预测信号的处理的组合有关的信息的表)的另一例,举出图45所示的表。在该图45所示的表中,作为与对应于各识别编号的处理方法的组合有关的信息,存储有像素插值精度的列表编号、像素插值滤波器的种类的列表编号、亮度补偿的有无的列表编号、以及像素插值时的运算取整方法的列表编号。这种图45所记载的信息还被称为RPPS(Reference Picture Processing Set),包含有生成用于生成预测信号的参照图像所需要的信息。关于该RPPS,例如在解码处理中如下进行处理。首先,对表示RPPS的类型的RPPS类型rpps_type进行解码,在RPPS类型rpps_type不是0的情况下,对识别编号(rpps_id)和与该识别编号对应的处理方法的组合的相关信息进行解码并保存。另一方面,在RPPS类型rpps_type是0的情况下,对用于解码当前帧的识别编号(rpps_id)进行解码,读出与该识别编号对应的已保存的图45的信息(与处理的组合有关的信息),根据该与处理的组合有关的信息,生成用于生成预测信号的参照图像。另外,图45所记载的信息是默认值,通过在RPPS类型rpps_type不是0的情况下进行解码而得到的新的与处理方法的组合有关的信息进行改写并保存。
标号说明
10:记录介质;12:读取装置;14:作业用存储器;16:存储器;18:显示器;20:鼠标;22:键盘;24:通信装置;26:CPU;30:计算机;40:计算机数据信号;100:动态图像编码装置;101:输入部;102:预测信号生成方法控制部;103:帧存储器;104:预测信号生成部;105:减法器;106:转换/量化部;107:编码部;108:逆量化/逆转换部;109:加法器;110:输出部;1000:动态图像解码装置;1001:输入部;1002:解码部;1003:预测信号生成方法控制部;1004:帧存储器;1005:预测信号生成部;1006:逆量化/逆转换部;1007:加法器;1008:输出部;190:动态图像编码程序;1900:主模块;1901:输入模块;1902:预测信号生成方法控制模块;1903:存储模块;1904:预测信号生成模块;1905:减法模块;1906:转换/量化模块;1907:编码模块;1908:逆量化/逆转换模块;1909:加法模块;1910:输出模块;200:动态图像解码程序;2000:主模块;2001:输入模块;2002:解码模块;2003:预测信号生成方法控制模块;2004:存储模块;2005:预测信号生成模块;2006:逆量化/逆转换模块;2007:加法模块;2008:输出模块。

Claims (13)

1.一种动态图像编码装置,该动态图像编码装置将编码对象的图像分割成多个处理块,按照每个所述处理块,参照多个参照图像中的一个参照图像生成预测信号并进行预测编码,其特征在于,该动态图像编码装置具有:
预测信号生成方法控制部,其通过组合多个与预先确定的处理方法有关的信息,针对所述多个参照图像分别决定为了生成所述预测信号而应该对所述参照图像进行的处理方法,并且,通过按照每个所述处理块进行运动预测,针对各处理块决定运动矢量和参照图像;
预测信号生成部,其根据由所述预测信号生成方法控制部决定的关于所述处理块的应该对参照图像进行的处理方法,对所述参照图像进行处理,从而生成关于该处理块的所述预测信号;以及
编码部,其对由所述预测信号生成方法控制部决定的关于各参照图像的所述处理方法的信息与确定每个所述处理块的参照图像的参照列表编号和运动矢量信息一起进行编码,
所述与处理方法有关的信息包括像素插值的精度信息、像素插值滤波器的种类信息。
2.根据权利要求1所述的动态图像编码装置,其特征在于,
所述预测信号生成方法控制部决定使得根据处理方法对所述参照图像进行处理时得到的预测信号与所述处理块之间的误差最小的该处理方法,作为应该对该参照图像进行的处理方法。
3.根据权利要求1或2所述的动态图像编码装置,其特征在于,
所述预测信号生成方法控制部按照每个所述处理块进行运动预测,决定预测误差最小的运动矢量和参照图像,作为关于该处理块的运动矢量和参照图像。
4.根据权利要求1~3中的任意一项所述的动态图像编码装置,其特征在于,
所述编码部将由所述预测信号生成方法控制部决定的关于各参照图像的所述处理方法的信息与所述参照列表编号关联起来进行存储。
5.一种动态图像解码装置,该动态图像解码装置针对对解码对象的图像进行分割而得到的多个处理块,分别参照多个参照图像中的一个参照图像生成预测信号并进行预测解码,其特征在于,该动态图像解码装置具有:
解码部,其根据所输入的编码数据,对与为了生成所述预测信号而应该对各参照图像进行的两个以上的处理方法有关的信息的组合、以及确定每个所述处理块的参照图像的参照列表编号和运动矢量信息进行解码;
预测信号生成方法控制部,其根据由所述解码部得到的解码对象的处理块的参照列表编号,取得应该对与该参照列表编号对应的参照图像进行的处理方法的信息;以及
预测信号生成部,其根据由所述预测信号生成方法控制部取得的关于所述解码对象的处理块的应该对参照图像进行的处理方法,对该参照图像进行处理,从而生成关于该处理块的所述预测信号,
所述与处理方法有关的信息包括像素插值的精度信息、像素插值滤波器的种类信息。
6.根据权利要求5所述的动态图像解码装置,其特征在于,
所述预测信号生成方法控制部取得使根据处理方法对所述参照图像进行处理时得到的预测信号与所述处理块之间的误差最小的该处理方法的信息,作为应该对该参照图像进行的处理方法的信息。
7.根据权利要求5或6所述的动态图像解码装置,其特征在于,
所述解码部将通过解码而取得的关于各参照图像的所述处理方法的信息与所述参照列表编号关联起来进行存储。
8.一种动态图像编码方法,该动态图像编码方法由动态图像编码装置执行,用于将编码对象的图像分割成多个处理块,按照每个所述处理块,参照多个参照图像中的一个参照图像生成预测信号并进行预测编码,其特征在于,该动态图像编码方法具有以下步骤:
预测信号生成方法控制步骤,通过组合多个与预先确定的处理方法有关的信息,针对所述多个参照图像分别决定为了生成所述预测信号而应该对所述参照图像进行的处理方法,并且,通过按照每个所述处理块进行运动预测,针对各处理块决定运动矢量和参照图像;
预测信号生成步骤,根据由所述预测信号生成方法控制步骤决定的关于所述处理块的应该对参照图像进行的处理方法,对所述参照图像进行处理,从而生成关于该处理块的所述预测信号;以及
编码步骤,将由所述预测信号生成方法控制步骤决定的关于各参照图像的所述处理方法的信息与确定每个所述处理块的参照图像的参照列表编号和运动矢量信息一起进行编码,
所述与处理方法有关的信息包括像素插值的精度信息、像素插值滤波器的种类信息。
9.一种动态图像解码方法,该动态图像解码方法由动态图像解码装置执行,用于针对对解码对象的图像进行分割而得到的多个处理块,分别参照多个参照图像中的一个参照图像生成预测信号并进行预测解码,其特征在于,该动态图像解码方法具有以下步骤:
解码步骤,根据所输入的编码数据,对与为了生成所述预测信号而应该对各参照图像进行的两个以上的处理方法有关的信息的组合、以及确定每个所述处理块的参照图像的参照列表编号和运动矢量信息进行解码;
预测信号生成方法控制步骤,根据由所述解码步骤得到的解码对象的处理块的参照列表编号,取得应该对与该参照列表编号对应的参照图像进行的处理方法的信息;以及
预测信号生成步骤,根据由所述预测信号生成方法控制步骤取得的关于所述解码对象的处理块的应该对参照图像进行的处理方法,对该参照图像进行处理,从而生成关于该处理块的所述预测信号,
所述与处理方法有关的信息包括像素插值的精度信息、像素插值滤波器的种类信息。
10.一种动态图像编码装置,该动态图像编码装置将编码对象的图像分割成多个处理块,按照每个所述处理块,参照多组参照图像组中的一组参照图像组生成预测信号并进行预测编码,其特征在于,该动态图像编码装置具有:
预测信号生成方法控制部,其通过组合多个与预先确定的处理方法有关的信息,针对所述多组参照图像组的各参照图像决定为了生成所述预测信号而应该对所述参照图像组的各参照图像进行的处理方法,并且,通过按照每个所述处理块进行运动预测,针对各处理块决定运动矢量和参照图像组;
预测信号生成部,其根据由所述预测信号生成方法控制部决定的关于所述处理块的应该对参照图像组的各参照图像进行的处理方法,对所述参照图像组的各参照图像进行处理,从而生成关于该处理块的所述预测信号;以及
编码部,其将由所述预测信号生成方法控制部决定的关于各组参照图像组的所述处理方法的信息组与确定每个所述处理块的参照图像组的参照列表编号组和运动矢量信息一起进行编码,
所述与处理方法有关的信息包括像素插值的精度信息、像素插值滤波器的种类信息。
11.一种动态图像解码装置,该动态图像解码装置针对对解码对象的图像进行分割而得到的多个处理块,分别参照多组参照图像组中的一组参照图像组生成预测信号并进行预测解码,其特征在于,该动态图像解码装置具有:
解码部,其根据所输入的编码数据,对与为了生成所述预测信号而应该对各组参照图像组的各参照图像进行的两个以上的处理方法有关的信息的组合的处理方法的信息组、以及确定每个所述处理块的参照图像组的参照列表编号组和运动矢量信息进行解码;
预测信号生成方法控制部,其根据由所述解码部得到的解码对象的处理块的参照列表编号组,取得应该对与该参照列表编号组对应的参照图像组的各参照图像进行的处理方法的信息组;以及
预测信号生成部,其根据由所述预测信号生成方法控制部取得的关于所述解码对象的处理块的应该对参照图像组的各参照图像进行的处理方法,对该参照图像组的各参照图像进行处理,从而生成关于该处理块的所述预测信号,
所述与处理方法有关的信息包括像素插值的精度信息、像素插值滤波器的种类信息。
12.一种动态图像编码方法,该动态图像编码方法由动态图像编码装置执行,用于将编码对象的图像分割成多个处理块,按照每个所述处理块,参照多组参照图像组中的一组参照图像组生成预测信号并进行预测编码,其特征在于,该动态图像编码方法具有以下步骤:
预测信号生成方法控制步骤,通过组合多个与预先确定的处理方法有关的信息,针对所述多组参照图像组的各参照图像决定为了生成所述预测信号而应该对所述参照图像组的各参照图像进行的处理方法,并且,通过按照每个所述处理块进行运动预测,针对各处理块决定运动矢量和参照图像组;
预测信号生成步骤,根据由所述预测信号生成方法控制步骤决定的关于所述处理块的应该对参照图像组的各参照图像进行的处理方法,对所述参照图像组的各参照图像进行处理,从而生成关于该处理块的所述预测信号;以及
编码步骤,将由所述预测信号生成方法控制步骤决定的关于各组参照图像组的所述处理方法的信息组与确定每个所述处理块的参照图像组的参照列表编号组和运动矢量信息一起进行编码,
所述与处理方法有关的信息包括像素插值的精度信息、像素插值滤波器的种类信息。
13.一种动态图像解码方法,该动态图像解码方法由动态图像解码装置执行,用于针对对解码对象的图像进行分割而得到的多个处理块,分别参照多组参照图像组中的一组参照图像组生成预测信号并进行预测解码,其特征在于,该动态图像解码方法具有以下步骤:
解码步骤,根据所输入的编码数据,对与为了生成所述预测信号而应该对各组参照图像组的各参照图像进行的两个以上的处理方法有关的信息的组合、以及确定每个所述处理块的参照图像组的参照列表编号组和运动矢量信息进行解码;
预测信号生成方法控制步骤,根据由所述解码步骤得到的解码对象的处理块的参照列表编号组,取得应该对与该参照列表编号组对应的参照图像组的各参照图像进行的处理方法的信息组;以及
预测信号生成步骤,根据由所述预测信号生成方法控制步骤取得的关于所述解码对象的处理块的应该对参照图像组的各参照图像进行的处理方法,对该参照图像组的各参照图像进行处理,从而生成关于该处理块的所述预测信号,
所述与处理方法有关的信息包括像素插值的精度信息、像素插值滤波器的种类信息。
CN201080020401.3A 2009-05-11 2010-04-08 动态图像编码装置、方法和程序以及动态图像解码装置、方法和程序 Expired - Fee Related CN102422642B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2009114646 2009-05-11
JP2009-114646 2009-05-11
PCT/JP2010/056378 WO2010131537A1 (ja) 2009-05-11 2010-04-08 動画像符号化装置、方法およびプログラム、並びに、動画像復号化装置、方法およびプログラム

Publications (2)

Publication Number Publication Date
CN102422642A CN102422642A (zh) 2012-04-18
CN102422642B true CN102422642B (zh) 2015-03-25

Family

ID=43084915

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080020401.3A Expired - Fee Related CN102422642B (zh) 2009-05-11 2010-04-08 动态图像编码装置、方法和程序以及动态图像解码装置、方法和程序

Country Status (7)

Country Link
US (1) US9241172B2 (zh)
EP (1) EP2432226B1 (zh)
JP (1) JPWO2010131537A1 (zh)
CN (1) CN102422642B (zh)
ES (1) ES2739475T3 (zh)
TW (1) TWI542202B (zh)
WO (1) WO2010131537A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102422642B (zh) 2009-05-11 2015-03-25 株式会社Ntt都科摩 动态图像编码装置、方法和程序以及动态图像解码装置、方法和程序
JP5768491B2 (ja) * 2011-05-17 2015-08-26 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
WO2013099244A1 (ja) * 2011-12-28 2013-07-04 株式会社Jvcケンウッド 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム、並びに動画像復号装置、動画像復号方法及び動画像復号プログラム
KR102460288B1 (ko) * 2012-01-19 2022-10-27 브이아이디 스케일, 인크. 비디오 코딩 기준 화상 목록들을 시그널링하고 구성하는 방법 및 장치
US9948915B2 (en) 2013-07-24 2018-04-17 Qualcomm Incorporated Sub-PU motion prediction for texture and depth coding
SG11201510554RA (en) 2013-07-24 2016-02-26 Qualcomm Inc Simplified advanced motion prediction for 3d-hevc
US9693077B2 (en) 2013-12-13 2017-06-27 Qualcomm Incorporated Controlling sub prediction unit (sub-PU) motion parameter inheritance (MPI) in three dimensional (3D) HEVC or other 3D coding
CN106105212A (zh) 2014-03-07 2016-11-09 高通股份有限公司 简化的子预测单元(sub‑pu)运动参数继承(mpi)
CN113475066B (zh) * 2019-03-11 2024-05-31 松下电器(美国)知识产权公司 编码装置、解码装置、编码方法和解码方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1473439A (zh) * 2001-09-18 2004-02-04 ���µ�����ҵ��ʽ���� 图像的编码方法和图像的译码方法
CN1537390A (zh) * 2002-04-18 2004-10-13 ��ʽ���綫֥ 运动图像编码/解码方法和装置
CN1625902A (zh) * 2002-04-24 2005-06-08 日本电气株式会社 运动图片编码和解码方法以及使用该方法的设备和程序
CN1846444A (zh) * 2003-09-17 2006-10-11 汤姆森许可贸易公司 自适应参考画面产生
CN101208957A (zh) * 2005-06-24 2008-06-25 株式会社Ntt都科摩 使用自适应插值进行视频编解码的方法和设备

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4129374B2 (ja) * 2001-09-18 2008-08-06 松下電器産業株式会社 画像符号化方法および画像復号化方法
JP3936335B2 (ja) 2001-11-30 2007-06-27 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化装置、動画像復号化装置、動画像符号化方法、動画像復号化方法、プログラム及びプログラムを記憶したコンピュータ読み取り可能な記録媒体
JP2004120138A (ja) * 2002-09-24 2004-04-15 Matsushita Electric Ind Co Ltd 動画像符号化方法および動画像復号化方法
WO2005022923A2 (en) * 2003-08-26 2005-03-10 Thomson Licensing S.A. Method and apparatus for minimizing number of reference pictures used for inter-coding
JP2005151391A (ja) * 2003-11-19 2005-06-09 Toshiba Corp 動画像符号化方法、動画像符号化装置およびプログラム
US8036271B2 (en) * 2004-02-24 2011-10-11 Lsi Corporation Method and apparatus for determining a second picture for temporal direct-mode block prediction
WO2006112272A1 (ja) * 2005-04-13 2006-10-26 Ntt Docomo, Inc. 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、動画像符号化プログラム、および動画像復号プログラム
US8447121B2 (en) * 2005-09-14 2013-05-21 Microsoft Corporation Efficient integrated digital video transcoding
US7903737B2 (en) * 2005-11-30 2011-03-08 Mitsubishi Electric Research Laboratories, Inc. Method and system for randomly accessing multiview videos with known prediction dependency
JP4445463B2 (ja) * 2005-12-16 2010-04-07 株式会社東芝 動画像再符号化方法及び装置
WO2007125856A1 (ja) * 2006-04-28 2007-11-08 Ntt Docomo, Inc. 画像予測符号化装置、画像予測符号化方法、画像予測符号化プログラム、画像予測復号装置、画像予測復号方法及び画像予測復号プログラム
US8509316B2 (en) * 2007-01-09 2013-08-13 Core Wireless Licensing, S.a.r.l. Adaptive interpolation filters for video coding
EP2135456B1 (en) * 2007-04-04 2017-05-03 Thomson Licensing Reference picture list management
JP2007267414A (ja) * 2007-05-24 2007-10-11 Toshiba Corp フレーム内画像符号化方法及びその装置
JP2008311781A (ja) * 2007-06-12 2008-12-25 Ntt Docomo Inc 動画像符号化装置、動画像復号化装置、動画像符号化方法、動画像復号化方法、動画像符号化プログラム及び動画像復号化プログラム
US20100195723A1 (en) * 2007-09-25 2010-08-05 Tomohiro Ikai Moving image encoder and moving image decoder
CN102422642B (zh) 2009-05-11 2015-03-25 株式会社Ntt都科摩 动态图像编码装置、方法和程序以及动态图像解码装置、方法和程序

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1473439A (zh) * 2001-09-18 2004-02-04 ���µ�����ҵ��ʽ���� 图像的编码方法和图像的译码方法
CN1537390A (zh) * 2002-04-18 2004-10-13 ��ʽ���綫֥ 运动图像编码/解码方法和装置
CN1625902A (zh) * 2002-04-24 2005-06-08 日本电气株式会社 运动图片编码和解码方法以及使用该方法的设备和程序
CN1846444A (zh) * 2003-09-17 2006-10-11 汤姆森许可贸易公司 自适应参考画面产生
CN101208957A (zh) * 2005-06-24 2008-06-25 株式会社Ntt都科摩 使用自适应插值进行视频编解码的方法和设备

Also Published As

Publication number Publication date
WO2010131537A1 (ja) 2010-11-18
ES2739475T3 (es) 2020-01-31
EP2432226A4 (en) 2015-01-07
EP2432226B1 (en) 2019-06-26
JPWO2010131537A1 (ja) 2012-11-01
EP2432226A1 (en) 2012-03-21
US9241172B2 (en) 2016-01-19
CN102422642A (zh) 2012-04-18
TWI542202B (zh) 2016-07-11
US20120069905A1 (en) 2012-03-22
TW201127065A (en) 2011-08-01

Similar Documents

Publication Publication Date Title
CN102422642B (zh) 动态图像编码装置、方法和程序以及动态图像解码装置、方法和程序
JP5341024B2 (ja) ビデオ圧縮方法
US10225569B2 (en) Data storage control apparatus and data storage control method
US7702017B2 (en) Moving picture encoding apparatus, moving picture encoding method, moving picture encoding program, moving picture decoding apparatus, moving picture decoding method, and moving picture decoding program
CN103190148A (zh) 图像处理装置和图像处理方法
US10257533B2 (en) Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion predict decoding device, and motion video predict decoding program
JP5715291B2 (ja) 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム
JP2013009195A (ja) 動画像符号化装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150325

CF01 Termination of patent right due to non-payment of annual fee