JP5698644B2 - 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム - Google Patents

動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム Download PDF

Info

Publication number
JP5698644B2
JP5698644B2 JP2011240334A JP2011240334A JP5698644B2 JP 5698644 B2 JP5698644 B2 JP 5698644B2 JP 2011240334 A JP2011240334 A JP 2011240334A JP 2011240334 A JP2011240334 A JP 2011240334A JP 5698644 B2 JP5698644 B2 JP 5698644B2
Authority
JP
Japan
Prior art keywords
image
images
decoding
description information
reproduced
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011240334A
Other languages
English (en)
Other versions
JP2013102258A5 (ja
JP2013102258A (ja
Inventor
ブン チュンセン
チュンセン ブン
鈴木 芳典
芳典 鈴木
タン ティオ ケン
ティオ ケン タン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Docomo Inc
Original Assignee
NTT Docomo Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Docomo Inc filed Critical NTT Docomo Inc
Priority to JP2011240334A priority Critical patent/JP5698644B2/ja
Priority to ES15169334.8T priority patent/ES2614357T3/es
Priority to PL15169351T priority patent/PL2938079T3/pl
Priority to PT151693413T priority patent/PT2938078T/pt
Priority to KR1020167021266A priority patent/KR101664202B1/ko
Priority to CA3039173A priority patent/CA3039173C/en
Priority to CA2852888A priority patent/CA2852888C/en
Priority to CN201610907369.XA priority patent/CN106412599B/zh
Priority to CA3039171A priority patent/CA3039171C/en
Priority to DK20169278.7T priority patent/DK3700214T3/da
Priority to CN201610908724.5A priority patent/CN107105264B/zh
Priority to AU2012324191A priority patent/AU2012324191B2/en
Priority to EP15169351.2A priority patent/EP2938079B1/en
Priority to HUE20169278A priority patent/HUE063249T2/hu
Priority to RU2014119878/08A priority patent/RU2586592C2/ru
Priority to CA3039168A priority patent/CA3039168C/en
Priority to CN201610908737.2A priority patent/CN107105265B/zh
Priority to PL15169334T priority patent/PL2938077T3/pl
Priority to KR1020147013163A priority patent/KR101581399B1/ko
Priority to FIEP20169278.7T priority patent/FI3700214T3/fi
Priority to MX2014004501A priority patent/MX336539B/es
Priority to CA3039172A priority patent/CA3039172C/en
Priority to BR112014009023-8A priority patent/BR112014009023B1/pt
Priority to MX2016000852A priority patent/MX350923B/es
Priority to ES15169351.2T priority patent/ES2622777T3/es
Priority to SG11201401568WA priority patent/SG11201401568WA/en
Priority to PT151693249T priority patent/PT2938076T/pt
Priority to ES18204031T priority patent/ES2806049T3/es
Priority to ES15169324.9T priority patent/ES2614512T3/es
Priority to CN201280050657.8A priority patent/CN103858429B/zh
Priority to KR1020167021264A priority patent/KR101686519B1/ko
Priority to CA3039176A priority patent/CA3039176C/en
Priority to RU2016116283A priority patent/RU2630180C1/ru
Priority to EP15169324.9A priority patent/EP2938076B1/en
Priority to PT182040311T priority patent/PT3457693T/pt
Priority to EP17152143.8A priority patent/EP3177019B1/en
Priority to PT151693348T priority patent/PT2938077T/pt
Priority to PL17152143T priority patent/PL3177019T3/pl
Priority to PT17152143T priority patent/PT3177019T/pt
Priority to CN201610907384.4A priority patent/CN106454369B/zh
Priority to EP15169341.3A priority patent/EP2938078B8/en
Priority to EP15169334.8A priority patent/EP2938077B1/en
Priority to ES20169278T priority patent/ES2957483T3/es
Priority to PL12841320T priority patent/PL2770737T4/pl
Priority to PL15169324T priority patent/PL2938076T3/pl
Priority to EP20169278.7A priority patent/EP3700214B1/en
Priority to PL18204031T priority patent/PL3457693T3/pl
Priority to PL20169278.7T priority patent/PL3700214T3/pl
Priority to PT151693512T priority patent/PT2938079T/pt
Priority to PT128413200T priority patent/PT2770737T/pt
Priority to CA3039174A priority patent/CA3039174C/en
Priority to KR1020157036207A priority patent/KR101648443B1/ko
Priority to CA2972448A priority patent/CA2972448C/en
Priority to CN201610908246.8A priority patent/CN107105276B/zh
Priority to PCT/JP2012/073090 priority patent/WO2013058034A1/ja
Priority to CN201610908346.0A priority patent/CN106851301B/zh
Priority to KR1020167021265A priority patent/KR101686520B1/ko
Priority to PL15169341T priority patent/PL2938078T3/pl
Priority to ES12841320.0T priority patent/ES2618287T3/es
Priority to EP12841320.0A priority patent/EP2770737B1/en
Priority to EP18204031.1A priority patent/EP3457693B1/en
Priority to ES17152143T priority patent/ES2707780T3/es
Priority to ES15169341.3T priority patent/ES2613525T3/es
Priority to PT201692787T priority patent/PT3700214T/pt
Priority to TW105130460A priority patent/TWI611688B/zh
Priority to TW107102752A priority patent/TWI661712B/zh
Priority to TW104111246A priority patent/TWI540883B/zh
Priority to TW104111245A priority patent/TW201528787A/zh
Priority to TW108114160A priority patent/TWI704798B/zh
Priority to TW104111247A priority patent/TWI520587B/zh
Priority to TW106137198A priority patent/TWI619377B/zh
Priority to TW101137724A priority patent/TWI510060B/zh
Publication of JP2013102258A publication Critical patent/JP2013102258A/ja
Publication of JP2013102258A5 publication Critical patent/JP2013102258A5/ja
Priority to US14/255,728 priority patent/US9621923B2/en
Application granted granted Critical
Publication of JP5698644B2 publication Critical patent/JP5698644B2/ja
Priority to US15/251,876 priority patent/US9743113B2/en
Priority to US15/251,842 priority patent/US9681153B2/en
Priority to US15/251,808 priority patent/US9667998B2/en
Priority to US15/473,849 priority patent/US10015509B2/en
Priority to RU2017129261A priority patent/RU2660619C1/ru
Priority to US16/007,178 priority patent/US10257533B2/en
Priority to US16/007,199 priority patent/US10257534B2/en
Priority to RU2018122101A priority patent/RU2689424C1/ru
Priority to RU2018122103A priority patent/RU2684573C1/ru
Priority to RU2019108802A priority patent/RU2699412C1/ru
Priority to RU2019112246A priority patent/RU2707145C1/ru
Priority to RU2019136041A priority patent/RU2719334C1/ru
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/15Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/56Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/152Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/43Hardware specially adapted for motion estimation or compensation
    • H04N19/433Hardware specially adapted for motion estimation or compensation characterised by techniques for memory access
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]

Description

本発明は、動画像予測符号化方法、装置及びプログラム、並びに、動画像予測復号方法、装置及びプログラムに関するもので、とりわけ、画面間の予測符号化に用いられる参照画像のバッファ内の記述に関するものである。
動画像データの伝送や蓄積を効率よく行うために、圧縮符号化技術が用いられる。動画像の場合ではMPEG1〜4やH.261〜H.264の方式が広く用いられている。
これらの符号化方式では、符号化の対象となる画像を複数のブロックに分割した上で符号化・復号処理を行う。符号化効率を高めるため下記のような予測符号化方法が用いられる。画面内の予測符号化では、対象ブロックと同じ画面内にある隣接する既再生の画像信号(過去に圧縮された画像データを復元したもの)を用いて予測信号を生成した上で、それを対象ブロックの信号から引き算した差分信号を符号化する。画面間の予測符号化では、対象ブロックと異なる画面内にある既再生の画像信号を参照し、信号の変位を検索し、その動いた分を補償して予測信号を生成し、それを対象ブロックの信号から引き算した差分信号を符号化する。動きの検索・補償を行うために参照される既再生の画像を、参照画像という。
H.264の画面間予測符号化では、対象ブロックに対する予測信号は、過去に符号化した上で再生された複数の参照画像を参照し、動き検索しながら誤差の最も少ない画像信号を最適な予測信号として選択する。対象ブロックの画素信号とこの最適な予測信号との差分を求め、離散コサイン変換を施し、量子化した上でエントロピー符号化する。同時に、対象ブロックに対する最適な予測信号をどの参照画像から取得するかに関する情報(「参照インデックス」という)、および当該最適な予測信号を参照画像のどの領域から取得するかに関する情報(「動きベクトル」という)も合わせて符号化する。H.264では、再生された画像を4ないし5枚参照画像としてフレームメモリまたは再生画像バッファ(decoded picture buffer、以下「DPB」ともいう)に格納されている。
複数枚の参照画像の管理方法として、再生された複数の画像の中で最も古い参照画像(即ち、時間的に一番長い間バッファ内にあるもの)が占領する領域をバッファから開放し、最近に復号された再生画像を参照画像として格納する手法が一般的である。一方、画面間予測の効率を高める目的として、対象画像に最適な参照画像を柔軟に用意する参照画像の管理方法は、後述する非特許文献1に開示されている。
非特許文献1によれば、各対象画像の符号化データに対し、バッファに格納する複数の参照画像を記述するバッファ記述情報(buffer description information)を付加し符号化する。このバッファ記述情報には、対象画像並びにそれ以降の画像の処理(符号化または復号)に必要とする複数の参照画像の識別子が記載されている。符号化装置もしくは復号装置では、バッファ記述情報に従い、指定された再生画像をバッファ(フレームメモリ)に格納するようにバッファが管理されている。一方、指定されていない再生画像はバッファから消される。
各対象画像に関するバッファ記述情報は、それぞれの対象画像の圧縮データのヘッダに付加して送ってもよいし、複数の対象画像に関するバッファ記述情報をまとめて、共通に適用する復号処理のパラメータを運ぶPPS(picture parameter set)情報の一部として送ってもよい。図15は、PPSの中に記載されているバッファ記述情報を示す模式図である。PPSにはバッファ記述情報以外の情報もあるが、ここでは省略する。PPS情報1510の中には、バッファ記述(buffer description、以下「BD」ともいう)の個数1511と、その個数分のBDに関する情報(1520,1522,1524)が記載されている。各BDに関する情報(以降k番目のBDをBD[k]という)には、バッファの中に格納される参照画像の枚数1530と、どの参照画像を格納するかを識別するための情報(1531,1532)が記載されている。参照画像を識別するには、当該画像を外部に出力する順序を示す情報POC(picture output count)を用いる。ここでは、POC番号をそのまま用いるのではなくて、参照画像のPOC番号と処理対象画像のPOC番号との差分であるΔPOCk,j(k番目のBDにあるj番目の成分)を記述する。同時に、当該参照画像が他の画像に対する依存度を示すD_IDk,jも合わせて送る。D_IDk,jの値が小さいほど、当該参照画像はより多く画像の再生に必要とし、逆にこの値が大きければ、他の画像に対する影響が小さい。最大の値をもつ場合は他の画像の再生に必要としないため、参照画像として格納する必要がないことを意味する。まとめると、従来技術では、バッファ記述BD[k]を送るには、参照画像の枚数を示す値(#ΔPOCk)とその数分の{ΔPOCk,j,D_IDk,j}の情報を送信側から受信側に送るようになっている。
図16は、対象画像と各対象画像を処理する際にバッファDPB内にある複数参照画像の状態を示す。各升目には、画像を識別するPOC番号が書かれている。例えば、行1610では、POC=32の対象画像を処理(符号化または復号)する際に、DPBにはPOC=18,20,22,24の参照画像が格納されていることを意味する。また、図16に対し、従来技術を適用し求められたバッファ記述情報は図17に示されている。1704の下にある各升目はΔPOCk,jの値を示す。
Rickard Sjoberg, Jonatan Samuelsson, "Absolute signaling of reference pictures", Joint Collaborative Team on Video Coding, JCTVC-F493, Torino, 2011.
一方、動画像符号化・復号において、同じ画像が複数の対象画像によって参照されることが一般的である。言い換えると、同じ参照画像は複数回(繰り返し)用いられることになる。図16では、破線1603で囲まれたPOC=32の参照画像は、POC=28,26,30,25,27,29,31の対象画像に参照されることがわかる。そのほかに、POC=22,24,28,26,30の参照画像も複数回利用されることが、図16の1602の下にある各升目の値からわかる。
ところが、従来技術に基づいたバッファ記述情報では、各BD[k]において独立にΔPOCk,jを求めるため、同じ参照画像に対しても、BD[k]ごとにそのΔPOCk,jを記述することで、同じ情報にも関わらず繰り返し同じ情報を送受信しなければならない。図16と図17を例に説明する。破線1705に囲まれた各升目の値は、図16の破線1603に囲まれた各升目のPOC番号に対応する。破線1603内は全てPOC=32の参照画像になっているが、破線1705内にあるΔPOCk,jの値は全て異なる。また、これらのΔPOCk,jの値は大きく異なるため、多くのビットを用いて符号化する必要がある。したがって、従来技術によるバッファ記述情報を伝送するには、多くのビットを用いて同じ情報を繰り返し送受信しなければならない課題がある。
上記課題を解決するために、本発明に係る動画像予測符号化装置は、動画像を構成する複数の画像を入力する入力手段と、対象画像を、過去に符号化した後に復号・再生された複数の画像を参照画像として予測符号化し、圧縮画像データを生成する符号化手段と、その圧縮画像データを復号し、再生画像に復元する復元手段と、その再生画像を後続の画像を符号化するために用いられる参照画像として1つ以上格納する画像格納手段と、画像格納手段を制御するバッファ管理手段と、を具備し、バッファ管理手段は、(対象画像を処理する前に)、対象画像を予測符号化する際に用いられる複数の参照画像に関するバッファ記述情報BD[k]をもとに画像格納手段を制御すると同時に、当該バッファ記述情報BD[k]を、対象画像と異なる別の画像のバッファ記述情報BD[m]を参照して、符号化した後にその符号化データを圧縮画像データに付加する。
また、本発明に係る動画像予測復号装置は、動画像を構成する複数の画像のそれぞれに対し、過去に復号・再生された複数の画像を参照画像として予測符号化されたデータと、複数の参照画像に関するバッファ記述情報BD[k]の符号化データとを含む圧縮画像データを入力する入力手段と、圧縮画像データを復号し、再生画像に復元する復元手段と、その再生画像を後続の画像を復号するために用いられる参照画像として1つ以上格納する画像格納手段と、画像格納手段を制御するバッファ管理手段とを具備し、バッファ管理手段は、(再生画像を復元する前に)、その再生画像と異なる別の画像のバッファ記述情報BD[m]を参照して、再生画像のバッファ記述情報BD[k]の符号化データを復号した後に、その復号されたバッファ記述情報BD[k]をもとに画像格納手段を制御する。
本発明によるバッファ記述情報の符号化・復号方法によれば、同じ参照画像が複数の画像の予測符号化・復号処理に繰り返して利用される性質を利用して、異なる画像に用いられるバッファ記述情報BD[k]の間の相関を利用して、冗長となる情報を削減することにより、効率よくバッファ記述情報を符号化できる効果がある。加えて、各参照画像固有の情報(依存度情報)は、参照先の画像と同じであるため、その情報をそのまま継承することができ、改めて符号化・復号する必要がないというメリットもある。
本発明の実施形態による動画像予測符号化装置を示すブロック図である。 本発明の実施形態による動画像予測復号装置を示すブロック図である。 本発明の実施形態による動画像予測符号化装置におけるバッファ管理方法を示す流れ図である。 本発明の実施形態による動画像予測復号装置におけるバッファ管理方法を示す流れ図である。 本発明の実施形態に用いられるバッファ管理方法によって生成されるバッファ記述情報を示す表である。 本発明の実施形態による動画像予測符号化装置におけるバッファ記述情報の符号化処理を示す流れ図である。 本発明の実施形態による動画像予測復号装置におけるバッファ記述情報の復号処理を示す流れ図である。 本発明の実施形態によって生成されるPPSの中に記載のバッファ記述情報を示す模式図である。 対象画像と各対象画像を処理する際にバッファDPB内にある複数参照画像の状態を示す別の例である。 図9の例に関する本発明の実施形態による動画像予測符号化装置におけるバッファ記述情報の符号化処理を示す流れ図である。 図9の例に関する本発明の実施形態による動画像予測復号装置におけるバッファ記述情報の復号処理を示す流れ図である。 図9の例に関する本発明の実施形態によって生成されるPPSの中に記載するバッファ記述情報を示す模式図である。 記録媒体に記録されたプログラムを実行するためのコンピュータのハードウェア構成を示す図である。 記録媒体に記憶されたプログラムを実行するためのコンピュータの斜視図である。 従来技術によるPPSの中に記載されているバッファ記述情報を示す模式図である。 対象画像と各対象画像を処理する際にバッファDPB内にある複数参照画像の状態を示す一例である。 従来技術に基づいて、図16の例から求められたバッファ記述情報を示す表である。 本発明の実施形態による動画像予測符号化装置におけるバッファ記述情報のPOC番号を直接に符号化する処理を示す流れ図である。 本発明の実施形態による動画像予測復号装置におけるバッファ記述情報のPOC番号を直接に復号する処理を示す流れ図である。 従来技術に基づいて、図9の例から求められたバッファ記述情報を示す表である。 本発明の実施形態に用いられるバッファ管理方法に基づいて、図20の例から求められたバッファ記述情報を示す表である。 本発明の実施形態による動画像予測符号化装置におけるバッファ記述情報の符号化処理に関する図6の処理とは別の実施方法を示す流れ図である。 本発明の実施形態による動画像予測復号装置におけるバッファ記述情報の復号処理に関する図7の処理とは別の実施方法を示す流れ図である。 図22に基づく本発明の実施形態によるバッファ記述情報の符号化処理によって生成されるPPSの中に記載するバッファ記述情報を示す模式図である。
以下、本発明の実施の形態について、図1から図24を用いて説明する。
図1は本発明の実施形態による動画像予測符号化装置100を示すブロック図である。図1に示すように、動画像予測符号化装置100は、入力端子101、ブロック分割器102、予測信号生成器103、フレームメモリ(またはバッファ、DPBともいう)104、減算器105、変換器106、量子化器107、逆量子化器108、逆変換器109、加算器110、エントロピー符号化器111、出力端子112、およびバッファ管理器114を備える。減算器105、変換器106と量子化器107は、特許請求の範囲に記載された「符号化手段」に対応する。また、逆量子化器108、逆変換器109と加算器110は、特許請求の範囲に記載された「復元手段」に対応する。
以上のように構成された動画像予測符号化装置100について、以下その動作を述べる。複数枚の画像からなる動画像の信号は入力端子101に入力される。符号化の対象となる画像はブロック分割器102にて、複数の領域に分割される。本発明による実施形態では、8x8の画素からなるブロックに分割されるが、それ以外のブロックの大きさまたは形に分割してもよい。次に符号化処理の対象となる領域(以下対象ブロックとよぶ)に対して、予測信号を生成する。本発明による実施形態では、画面間予測と画面内予測の2種類の予測方法を用いる。
画面間予測では、過去に符号化されたのちに復元された再生画像を参照画像として、この参照画像から対象ブロックに対する誤差の最も小さい予測信号を与える動き情報を求める。また場合に応じて、対象ブロックを再分割し、再分割された小領域に対し画面間予測方法を決定してもよい。この場合、各種の分割方法の中から、対象ブロック全体に対し最も効率のよい分割方法及びそれぞれの動き情報を決定する。本発明による実施形態では、予測信号生成器103にて行われ、対象ブロックはラインL102、参照画像はL104経由で入力される。参照画像としては、過去に符号化され復元された複数枚の画像を参照画像として用いる。詳細は従来の技術であるH.264の方法と同じである。このように決定された動き情報及び小領域の分割方法はラインL112経由でエントロピー符号化器111に送られ符号化した上で出力端子112から送出される。また複数の参照画像の中で、予測信号がどの参照画像から取得するかに関する情報(リファレンスインデックス)もラインL112経由でエントロピー符号化器111に送られる。なお、本発明による実施形態では、3枚ないし6枚の再生画像をフレームメモリ104に格納し、参照画像として用いる。予測信号生成器103では、小領域の分割方法及びそれぞれの小領域に対応する、参照画像と動き情報をもとにフレームメモリ104から参照画像信号を取得し、予測信号を生成する。このように生成された画面間予測信号はラインL103経由で減算器105に送られる。
画面内予測では、対象ブロックに空間的に隣接する既再生の画素値を用いて画面内予測信号を生成する。具体的には予測信号生成器103では、フレームメモリ104から同じ画面内にある既再生の画素信号を取得し、これらの信号を外挿することによって画面内予測信号を生成する。外挿の方法に関する情報はラインL112経由でエントロピー符号化器111に送られ符号化した上で出力端子112から送出される。このように生成された画面内予測信号は減算器105に送られる。予測信号生成器103における画面内の予測信号生成方法は、従来の技術であるH.264の方法と同じである。上述のように求められた画面間予測信号と画面内予測信号に対し、誤差の最も小さいものが選択され、減算器105に送られる。
減算器105にて対象ブロックの信号(ラインL102経由)から予測信号(ラインL103経由)を引き算し、残差信号を生成する。この残差信号は変換器106にて離散コサイン変換され、各変換係数は量子化器107にて量子化される。最後にエントロピー符号化器111にて量子化された変換係数を符号化して、予測方法に関する情報とともに出力端子112より送出される。
後続の対象ブロックに対する画面内予測もしくは画面間予測を行うために、圧縮された対象ブロックの信号は逆処理し復元される。すなわち、量子化された変換係数は逆量子化器108にて逆量子化されたのちに逆変換器109にて逆離散コサイン変換され、残差信号を復元する。加算器110にて復元された残差信号とラインL103から送られた予測信号とを加算し、対象ブロックの信号を再生し、フレームメモリ104に格納する。本実施の形態では変換器106と逆変換器109を用いているが、これらの変換器に代わるほかの変換処理を用いてもよい。場合によって、変換器106と逆変換器109がなくてもよい。
フレームメモリ104は有限なものであり、すべての再生画像を格納することは不可能である。後続の画像の符号化に用いられる再生画像のみフレームメモリ104に格納される。このフレームメモリ104を制御するのがバッファ管理器114である。入力端子113より各画像の出力順序を示す情報(POC、picture output count)や他の画像を予測符号化する際に当該画像に対する依存度を示すD_IDk,jに関する依存度情報(dependency ID)、当該画像を符号化するタイプ(画面内予測符号化、画面間予測符号化)が入力され、この情報に基づいてバッファ管理器114が動作する。バッファ管理器114によって生成されたバッファ記述情報や各画像のPOC情報はラインL114経由でエントロピー符号化器111に送られ、符号化した上で圧縮された画像データとともに出力される。本発明によるバッファ管理器114の処理方法については後述する。
次に、本発明による動画像予測復号方法について説明する。図2は本発明の実施形態による動画像予測復号装置200のブロック図を示す。図2に示すように、動画像予測復号装置200は、入力端子201、データ解析器202、逆量子化器203、逆変換器204、加算器205、予測信号生成器208、フレームメモリ207、出力端子206、およびバッファ管理器209を備える。逆量子化器203と逆変換器204は、特許請求の範囲に記載された「復元手段」に対応する。復元手段としては上記以外のものを用いてもよい。また逆変換器204がなくてもよい。
以上のように構成された動画像予測復号装置200について、以下その動作を述べる。上述した方法で圧縮符号化された圧縮データは入力端子201から入力される。この圧縮データには、画像を複数のブロックに分割された対象ブロックを予測し符号化された残差信号及び予測信号の生成に関連する情報が含まれている。予測信号の生成に関連する情報として、画面間予測の場合はブロック分割に関する情報(ブロックのサイズ)や、動き情報と上述のPOC情報が含まれ、画面内予測の場合は周辺の既再生の画素から外挿方法に関する情報が含まれている。また、圧縮データにはフレームメモリ207を制御するためのバッファ記述情報も含まれている。
データ解析器202は、圧縮データから対象ブロックの残差信号、予測信号の生成に関連する情報、量子化パラメータ、画像のPOC情報を抽出する。対象ブロックの残差信号は逆量子化器203にて量子化パラメータ(ラインL202経由)をもとに逆量子化される。その結果は逆変換器204にて逆離散コサイン変換される。
次に、ラインL206b経由で予測信号の生成に関連する情報が予測信号生成器208に送られる。予測信号生成器208では、予測信号の生成に関連する情報に基づいて、フレームメモリ207にアクセスし、複数の参照画像の中から参照信号を取得し予測信号を生成する。この予測信号はラインL208経由で加算器205に送られ、復元された残差信号に加算され、対象ブロック信号を再生し、ラインL205経由で出力すると同時にフレームメモリ207に格納される。
フレームメモリ207には、後続の画像の復号・再生に用いられる再生画像が格納されている。バッファ管理器209はフレームメモリ207を制御する。バッファ管理器209は、ラインL206a経由で送られるバッファ記述情報と画像の符号化タイプに関する情報に基づいて動作する。本発明によるバッファ管理器209の制御方法については後述する。
次に、図3と図4を用いて、バッファ管理器(図1の114と図2の209)の動作を説明する。本発明の実施形態によるバッファ管理器は、フレームメモリ(104、207)に格納される参照画像を次のように管理する。すなわち、符号化側では、複数枚の対象画像のそれぞれに対するバッファ記述情報をまとめて生成し、共通に適用する復号処理のパラメータを運ぶPPS(picture parameter set)情報の一部として送る。復号側ではPPS情報からまとめて送られてくるバッファ記述情報を抽出し、各対象画像の圧縮データに指定された一つのバッファ記述情報に基づいて、フレームメモリ内にある参照画像を用意した上で復号・再生処理を行う。バッファ記述情報に記載されていない参照画像はフレームメモリから消され、それ以降参照画像として用いることができない。
図3には、本発明の実施形態による動画像予測符号化装置100のバッファ管理器114におけるバッファ記述情報の符号化方法を示し、複数枚の対象画像のそれぞれに対するバッファ記述情報をまとめて符号化する方法を示す。ここでは、バッファ記述をBD(buffer description)で表し、BD[k]は、k番目のBDに関する情報を示す。本発明の実施形態によって生成されるPPSの中に記載のバッファ記述情報の模式図は図8に示される。
図3のステップ310にてカウンタkをゼロにセットする。ステップ320ではPPS情報に記載する全てのBDの総数を符号化する。これは図8の811に該当する。ステップ330では最初のBDであるBD[0]に関する情報を符号化する。図8の820はBD[0]の情報を示す。#ΔPOC0(830)はBD[0]の成分の個数、すなわち必要とする参照画像の枚数を示す。ここでは、対象画像の符号化・復号に必要とする参照画像だけではなくて、対象画像に参照されないが、それより先の画像の符号化・復号処理に参照される参照画像もBD[0]の情報に入れておくため、このような参照画像の枚数も#ΔPOC0にカウントされる。
続いて、使われる参照画像に関する情報(831、832、…)が記載される。本実施の形態では参照画像に関する情報として{ΔPOC0,i,D_ID0,i}を記載する。iはBD[0]のi番目の成分を示す。ΔPOC0,iはi番目の参照画像のPOC番号とBD[0]を使用する対象画像のPOC番号の差分値であり、D_ID0,iはi番目の参照画像の依存度情報である。
BD[0]以外のBD[k]に関する情報は、それより前に出現したバッファ情報BD[m]を参照して予測符号化する(ステップ360)。本実施の形態では、m=k−1を用いるが、m<kであれば、どのBD[m]を参照してもよい。k>0のBD[k]に含まれる情報は図8の822、824に例示されている。その中身として、BD[k]の成分の個数(すなわち対象画像及びそれ以降の画像に必要とする参照画像の枚数に相当)#ΔPOCk(833、839)、ΔBDk(834、840)、Δidxk,i(835、836、837、841、842、843、844)、もしくは{Δidxk,i,D_IDk,i}(838)が記載される。これらの送信データ(シンタックス)の詳細については後述する。全てのBD[k]が符号化された後に、それをPPS情報の一部として他の圧縮データと合わせて送出する。各画像を符号化する際に、図1の入力端子113より指定された一つのバッファ記述情報BD[k]に基づいて、バッファ管理器114がフレームメモリ104内にある参照画像を用意した上で符号化処理を行う。受信側で、各画像の圧縮データのヘッダに付加されるバッファ記述の識別子kに基づいてバッファ管理器209がフレームメモリ207内にある参照画像を用意した上で復号処理を行う。
図4は本発明の実施形態による動画像予測復号装置200のバッファ管理器209におけるバッファ記述情報の復号方法を示す流れ図である。データ解析器202は、PPS情報の中からバッファ記述情報に関するデータを抽出し、バッファ管理器209に入力する。ステップ420ではまずBDの個数を復号する。ステップ430では最初のBDであるBD[0]に関する情報を復号する。k>0のBD[k]に関する情報は、それより前に出現したバッファ記述BD[m]を参照に予測復号する(ステップ460)。上述したように、ここではm=k−1として用いる。全てのBD[k]が復号されたバッファ記述情報はバッファ管理器209に格納される。各画像を復号する際に、その圧縮データに指定された一つのバッファ記述情報BD[k]に基づいて、バッファ管理器209がフレームメモリ207内にある参照画像を用意した上で復号・再生処理を行う。
図8に示されているバッファ記述(BD[k]、k>0)の送り方は最も効率的である。本実施形態によれば、対象となるBD[k]とその予測に用いられるBD[m]は次のような関係にある。
(a)BD[k]に記載されている参照画像は、少なくとも一部が既にBD[m]に記載されているものである。
(b)上記(a)に加えて新たに符号化・復号されたN枚の画像が「追加参照画像」としてBD[k]に記載されている。ここにNは0以上の整数である。
さらに、もっと好ましい形態として、
(c)m=(k-1)、すなわちバッファ記述情報の中に1つ前のBDを予測に用いる。
(d)上記(b)に記載の追加参照画像は1枚のみ(N=1)である。また、この1枚の追加参照画像はBD[m]を用いた場合に生成された画像であることが望ましい。
図16を用いて上述した関係を説明する。図16の欄1601は符号化・復号処理の対象となる対象画像のPOC番号を示す。上から順番に、符号化・復号処理の順に並べられている。すなわちPOC=32の画像を符号化・復号した後に、POC=28の画像が符号化・復号される。また各対象画像の符号化・復号処理を行うときに用いられる参照画像(複数)のPOC番号は欄1602の下にある各升目に書かれている。
POC=32の対象画像(1610)を符号化・復号/再生するために用いられる参照画像に関する情報は、BD[0]として図8の820のシンタックスを用いて符号化される。この場合、#ΔPOC0=4で、POC番号18,20,22,24の参照画像はΔPOC0,iとして符号化する。ΔPOC0,iの値は図17の行1710にあるi=0〜3の値であり、参照画像のPOC番号と対象画像のPOC番号との差から求められる。
図16の行1611〜1617に記載されている参照画像に関する情報は、BD[k]、k>0として、図8の822、824のシンタックスを用いて符号化される。行1611はk=1に対応し、POC=28の対象画像に用いられる参照画像のPOC番号に関する情報を示す。これからのPOC番号(22,24,32)は、一旦ΔPOC1,iに換算される。その値は図17の行1711にあるi=0〜2の値に与えられる。本発明による実施形態では、これらのΔPOC1,iの値はΔPOC0,i(行1710にあるi=0〜3の値)を参照して予測符号化する。
本発明によるバッファ記述情報の予測符号化方法を説明する。対象となるバッファ記述情報をBD[k]として、BD[k]を予測するためのバッファ記述情報をBD[m]とする。BD[k]の情報を利用する対象画像のPOC番号をPOCcurrentとし、BD[m]の情報を利用する対象画像のPOC番号をPOCpreviousとする。またBD[k]のi番目の参照画像のPOC番号をPOCk,i、BD[m]のj番目の参照画像のPOC番号をPOCm,jとする。この場合ΔPOCk,i、ΔPOCm,jは次のように与えられる。
ΔPOCk,i=POCk,i−POCcurrent (1)
ΔPOCm,j=POCm,j−POCprevious (2)
ΔPOCk,iはΔPOCm,jを予測値として符号化される。すなわち、
ΔPOCk,i−ΔPOCm,j=(POCk,i−POCcurrent)−(POCm,j−POCprevious)
=(POCk,i−POCm,j)+(POCprevious−POCcurrent)
=(POCk,i−POCm,j)+ΔBDk (3)
ここで、前述した(a)の条件が満たされている場合はPOCm,jはBD[m]にあるため、(POCk,i−POCm,j)がゼロとなるΔPOCm,jへの識別子(またはインデックス)を符号化する。本実施の形態では、次に定義される識別子Δidxk,iを用いる。
Δidxk,i=offsetk,i−offsetk,i-1 (4)
ここではoffsetk,i=j−i、offsetk,-1=0である。また、上記式(3)に定義されているΔBDkは、(i,j)の値に関わらず、一定であるため、
ΔBDk=POCprevious−POCcurrent (5)
はBD[k]に一回のみ記載すればよい。
一方、(POCk,i−POCm,j)がゼロとなるΔPOCm,jがBD[m]に存在しない場合がある。例として、図16の成分POC1,2=32(升目1620)は行1610の参照画像として現れていない。この場合、ΔPOCk,iの値をそのまま符号化してもよいが、前述した(d)の条件を利用するとΔPOCk,i=ΔBDkとなり、この値はすでにBD[k]に記載されるため改めて符号化する必要がない。BD[m]に同じPOC番号がないことを示すためには、jの値としてBD[m]の成分の個数の値(すなわち、#ΔPOCm)またはそれ以上の値を設定する。後復号する際にjの値を用いてΔPOCk,iの復号方法については後述する。
各参照画像がもつ依存度情報D_IDk,iについては、当該参照画像が予測に用いられるBD[m]に存在する場合、依存度情報D_IDk,iはD_IDm,jに等しいので符号化する必要がない。一方、当該参照画像が予測に用いられるBD[m]に存在しない場合は、依存度情報D_IDk,iを符号化する。
以上の考え方に基づいて、図8の822、824の中身(シンタックス)が構成される、次に、この考え方に基づいて図3のブロック360と図4のブロック460の処理を説明する。
図6は、本発明の実施形態による動画像予測符号化装置100におけるバッファ記述情報の符号化処理(図3のブロック360の処理)を示す流れ図である。これは、図8におけるk>0の場合のBD[k]の符号化処理に当たる。ステップ610では、BD[k]の成分の個数、すなわち記述される参照画像の枚数#ΔPOCkを符号化する。次にΔBDkを算出(ステップ620)した上で、それを符号化(ステップ630)する。次にBD[k]の各成分について下記の処理を行う。ステップ640では、BD[m](m=k-1)の中からΔPOCk,iと同じ参照画像を共有するΔPOCm,j(すなわちPOCm,j=POCk,i)が存在するかどうかを検出する。ステップ645で存在すると判定した場合は、ステップ650に進み、上記式(4)に従いΔidxk,iの値を求めた上でそれを符号化する。ステップ645で存在しないと判定した場合は、ステップ655に進む。ステップ655では値jにBD[m]の成分の個数(#ΔPOCm)の値を設定する。それより大きい値でもよい。ステップ660では上記式(4)に従いΔidxk,iの値を求めた上でそれを符号化する。ステップ670では当該参照画像の依存度情報D_IDk,iを符号化する。上述した各値は、2値符号に変換した上で算術符号化を施して符号化するが、そのほかのエントロピー符号化方法を用いてもよい。上記の処理はBD[k]の最後の成分まで繰り返す。
図17に示す従来技術によるバッファ記述情報を、上述した本発明による方法で処理した結果は図5に示す。欄501は各BD[k]の識別子を示し、本実施の形態では、明示的に符号化しない。欄502は各BD[k]の成分の個数、504はBD[k]の参照画像を記述するためのデータを示す。行510はBD[0]に相当し、ΔPOCk,iの値で符号化する。行511以降は、Δidxk,iの値を示している。欄505は予測に用いるBD[m]の識別子を示すが、本実施の形態では、m=k-1にしているため、符号化する必要がない。欄506はΔBDkを示す。また、升目520〜523の各成分については、予測に用いるBD[m]に同じ参照画像がない場合に該当し、Δidxk,iに加えて、D_IDk,iを符号化する必要があるが、図5には省略されている。図5の504の下にある各升目の示す値はほとんど”0”で、図17の従来技術の情報と比べて値が小さく、ダイナミックレンジが小さいため、効率的に符号化できる効果がある。また、従来技術では全て成分のD_IDk,iを符号化するが、本発明による方法では、限られた成分のみに対してD_IDk,iを符号化するので、さらに符号量を削減することができる。
図7は、本発明の実施形態による動画像予測復号装置200におけるバッファ記述情報の復号処理(図4のブロック460の処理)示す流れ図である。これは、図8におけるk>0の場合のBD[k]の復号処理に当たる。ステップ710ではBD[k]の成分の個数、すなわち記述する参照画像の枚数#ΔPOCkを復号する。ステップ730ではΔBDkを復号する。次にBD[k]の各成分について下記の復号処理を行う。ステップ740ではΔidxk,i を復号した上で、次の式を用いてインデックスjの値を求める(ステップ745)。
j=i+Δidxk,i+offsetk,i-1 但しoffsetk,-1=0 (6)
このインデックスjを用いて、ステップ750にて復号の対象となるΔPOCk,iの参照値となるΔPOCm,jがBD[m]に存在するかどうかを判定する。ここでは、j<BD[m]の成分の個数(#ΔPOCm)であればΔPOCm,jが存在し、j≧(#ΔPOCm)であれば、ΔPOCm,jは存在しない。ステップ750にて存在すると判定した場合はステップ760に進み、ΔPOCk,iの値を求める。依存度情報D_IDk,iはΔPOCm,jがもつものをそのままコピーするだけである。依存度情報D_IDk,iを符号化する必要がないことに注意されたい。ステップ750にて存在しないと判定した場合はステップ765に進む。ここでは、依存度情報D_IDk,iを復号し、ステップ770にてΔPOCk,iの値としてΔBDkを代入する。上記の処理はBD[k]の最後の成分まで繰り返す。
このようにして、本発明によるバッファ記述情報の符号化・復号方法では、参照画像が繰り返して利用される性質を利用して、異なる画像に用いられるバッファ記述情報BD[k]の間の相関を利用して、冗長となる情報をコンパクトにすることにより、効率よくバッファ記述情報を符号化することができる。
図16に示されているように、バッファに関する情報は対象画像の符号化・復号の順番に整理されている。そのために、前述した(a)〜(d)の関係が成立し、上述した実施形態によって最も効率のよい方法でバッファ記述情報を符号化することができる。一方、バッファ記述の順番は任意に並べてもよく、図16に示した順番と異なる順序で各BD[k]を記載してもかまわない。この場合に対応した本発明によるもっと汎用性のある実施形態を説明する。
図9は図16と若干異なる順序でバッファの情報が記載されている。図16と異なる点は、POC=25(913)に関するバッファ情報はPOC=30(914)より先に記述されている。但し、利用されている参照画像は図16の場合と同じである。ここでは、POC=25(913)の対象画像は、POC=22、24、32、28、26、30の参照画像を利用するが、その1つ上にあるPOC=26(912)の対象画像はPOC=22、24、32、28を利用する。行913のバッファ記述情報BD[k]を予測するために、行912のバッファ記述情報BD[m]を用いると、BD[k]に属するPOC=30の成分(963)はBD[m]に現れていないし、BD[m]の利用により生成されるものではない。すなわち、前述した(c)の条件(m=k-1)を用いると、前述した(d)が満たされていないことになる。
この課題を解決するために、前述した(c)の条件を緩和させて、BD[m]を自由に選択できるようにし、その代わりに予測に用いるBD[m]を識別するためのインデックスmを符号化する。そうすると、行913のバッファ記述情報BD[k]を予測するために、行914のバッファ記述情報をBD[m]として用いると、(インデックスmの符号化と復号を追加することを前提に)図6と図7をそのまま適用することができる。
また別の方法として、予測に用いられるBD[m]にない追加参照画像については、前述した式(1)におけるPOC番号ΔPOCk,iをそのまま符号化してもよいし、または、ΔPOCk,iからΔBDkを差し引いた値をIBDRk,iとして符号化してもよい。
IBDRk,i=ΔPOCk,i−ΔBDk (7)
上記式(7)を展開すれば(POCk,i−POCprevious)に等しい。上述した本発明によるもっと汎用性のある実施形態によって生成されるPPSの中に記載のバッファ記述情報の模式図は図12に示されている。図12の1211は図8の811、1220は820と同じである。k>0のBD[k]は、1222や1224に示されているシンタックスで伝送される。この場合のシンタックスは、BD[k]の成分の個数(すなわち対象画像及びそれ以降の画像に必要とする参照画像の枚数に相当)#ΔPOCk(1233、1240)、予測に用いるバッファ記述情報の識別子mk(1234、1241)、ΔBDk(1235、1242)、Δidxk,i(1236、1237、1243、1244)、もしくは{Δidxk,i,D_IDk,i,IBDRk,i}(1238、1239、1245、1246)から構成されている。
図12に示すバッファ記述情報は次のように符号化・復号される。図10は、本発明の実施形態による動画像予測符号化装置100における、より汎用性のあるバッファ記述情報の符号化処理(図3のブロック360の処理)を示す流れ図である。これは、図12におけるk>0の場合のBD[k]の符号化処理に当たる。ステップ1010では、BD[k]の成分の個数、すなわち記述する参照画像の枚数#ΔPOCkを符号化する。次に予測に用いる参照用のバッファ記述情報BD[m]を決定し、その識別子mkを特定すると同時にΔBDkを算出(ステップ1020)する。ステップ1030では、mkとΔBDkを符号化する。次にBD[k]の各成分について下記の処理を行う。ステップ1040では、BD[mk]の中からΔPOCk,iと同じ参照画像を共有するΔPOCm,j(すなわちPOCm,j=POCk,i)が存在するかどうかを検出する。ステップ1045にて存在すると判定した場合は、ステップ1050に進み、前述した式(4)に従いΔidxk,iの値を求めた上でそれを符号化する。ステップ1045で存在しないと判定した場合は、ステップ1055に進む。ステップ1055では、インデックスjにBD[m]の成分の個数(#ΔPOCm)の値以上の値を設定する。この場合(BD[m]にない)追加参照画像は1枚以上ある可能性に対応するため、まだ設定に使用されていない値をインデックスjの値として設定する。ステップ1060では、前述した式(4)に従いΔidxk,iの値を求めた上でそれを符号化する。ステップ1070では、上記式(7)に従いIBDRk,iの値を求めた上で当該参照画像の依存度情報D_IDk,iとともに符号化する。上述した各値は、2値符号に変換した上で算出符号化を施して符号化するが、そのほかのエントロピー符号化方法を用いてもよい。上記の処理はBD[k]の最後の成分まで繰り返す。
図9のバッファ記述情報を、図20に示すΔPOCk,iに一旦換算した上で、上述した汎用性のある方法で処理した結果は図21に示す。欄941は各BD[k]の識別子を示す。欄942は各BD[k]の成分の個数、欄944はBD[k]の参照画像を記述するためのデータを示す。行950はBD[0]に相当し、ΔPOCk,iの値で符号化する。行951以降は、Δidxk,iもしくは{Δidxk,i,D_IDk,i,IBDRk,i}で符号化する(図21ではD_IDk,iを省略)。欄945は予測に用いるBD[m]の識別子mkを示す。欄946はΔBDkを示す。また、升目980〜983の各成分については、予測に用いるBD[m]に同じ参照画像がない場合に該当し、{Δidxk,i,D_IDk,i,IBDRk,i}を符号化する場合に相当する。図21の944の下にある各升目の示す値はほとんど”0”で、図20の従来技術の情報と比べて値が小さく、ダイナミックレンジが小さいため、効率的に符号化できる効果がある。
図11は、本発明の実施形態による動画像予測復号装置200における、より汎用性のあるバッファ記述情報の復号処理(図4のブロック460の処理)示す流れ図である。これは、図12におけるk>0の場合のBD[k]の復号処理に当たる。ステップ1110ではBD[k]の成分の個数、すなわち記述する参照画像の枚数#ΔPOCkを復号する。ステップ1130ではmkとΔBDkを復号する。次にBD[k]の各成分について下記の復号処理を行う。ステップ1140ではΔidxk,iを復号した上で、上記式(6)を用いてインデックスjの値を求める(ステップ1145)。
このインデックスjを用いて、ステップ1150にて復号の対象となるΔPOCk,iの参照値となるΔPOCm,jがBD[m]に存在するかどうかを判定する。ここでは、j<BD[m]の成分の個数(#ΔPOCm)であればΔPOCm,jが存在し、j≧(#ΔPOCm)であれば、ΔPOCm,jは存在しない。ステップ1150にて存在すると判定した場合はステップ1160に進み、ΔPOCk,iの値を求める。依存度情報D_IDk,iはΔPOCm,jがもつものをそのままコピーするだけでよい。ステップ1150にて存在しないと判定した場合はステップ1165に進む。ここでは、IBDRk,iと依存度情報D_IDk,iを復号し、ステップ1170にてΔPOCk,iの値を算出する。上記の処理はBD[k]の最後の成分まで繰り返す。
このようにして、本発明によるバッファ記述情報の符号化・復号方法では、参照画像が繰り返して利用される性質を利用して、異なる画像に用いられるバッファ記述情報BD[k]の間の相関を利用して、冗長となる情報をコンパクトにすることにより、効率よくバッファ記述情報を符号化することができる。加えて、バッファ記述情報の相互参照が自由に行われる場合にも効率的に符号化できる効果がある。
図6と図10の符号化処理や、図7と図11の復号処理は、別々に説明したが、この二つの実施形態を組み合わせて用いてもよい。復号処理では、図7のステップ765、770と図11のステップ1165、1170とが異なるが、組み合わせて用いる場合は、これらの処理を識別するための情報(1ビット)を追加して符号化すればよい。
また、図5の行512,513,514,517に見られるように、Δidxk,iの値は全てゼロの値であることから、それらの値を個別に符号化する代わりに、ひとつの信号(フラグ)で表すこともできる。
また、上記の実施形態では、バッファ記述情報に記載されている参照画像のPOC番号は、一旦ΔPOCk,iに換算した上で、本発明によるバッファ記述情報を符号化・復号されるが、本発明による方法はPOC番号自体に施してもよい。すなわち、対象となるバッファ記述情報BD[k]にあるPOC番号が、予測に用いるBD[m]にある場合は、そのPOC番号を指すΔidxk,iを符号化する。所望のPOC番号がBD[m]にない場合は、前述した式(1)で求められるΔPOCk,iをIBDRk,iとして符号化する。前述した式(1)の代わりに式(7)を用いてもよい。この場合図3のブロック360の処理は、図18に示されており、図4のブロック460の処理は、図19に示されている。図18は図10と、図19は図11と、それぞれほぼ同じ処理が行われており、図18、図19では、対応する図10、図11の処理ステップのステップ番号に「S」を付したステップ番号を用いている。但し、ΔPOCの代わりにPOCに対し処理が施されている。また、この場合ΔBDkはゼロとなるのでそれを符号化・復号する必要がない。そして、m=(k-1)と固定した場合(すなわち直前のBD[m]から予測する場合)は、mkも符号化・復号する必要がない。
なお、上記の実施形態において、対象となるバッファ記述BD[k]のi成分をbdk,iとし、予測に用いるBD[m]の成分をbdm,jとすると、Δidxk,iは、bdk,iから見たbdm,jの相対的な位置(インデックス、アドレス)と考えられる。すなわち、bdk,iおよびbdm,jを情報格納庫と考えると、当該情報格納庫中にPOC番号を入れてもよいし、ΔPOCの値を入れてもよい。この場合、Δidxk,iは情報格納庫間(それらの中身には共通に使われているPOC番号があることが条件)の相対的な位置との扱いになる。言い換えると、本発明によるバッファ記述は、対象画像のバッファ情報を格納する情報格納庫と対象画像の参照となるバッファ情報を格納する情報格納庫との位置関係を記述するものであり、指されている情報格納庫の位置(j)と中身が存在している情報格納庫の個数(#ΔPOCmまたは#POCm)とを比較することで、bdk,iの中身の再生方法を切り替える方法を提供する。
本発明によるバッファ記述情報の符号化・復号方法については、次のような実施形態もある。本実施形態は、図6と図7に示す実施形態と同じく、前述した条件(c)と(d)を前提としている。すなわち、対象となるバッファ記述情報BD[k]を予測するために用いられるバッファ記述情報をBD[m]として、その1つ前にあるBDを用いる。すなわちm=(k-1)である。また、BD[k]にある追加参照画像は1枚のみで、この1枚の追加参照画像はBD[m]を用いた場合に生成されたものである。
これらの条件のもとで、本実施形態は、対象となるバッファ記述BD[k]の情報を符号化する際に、予測に用いられるBD[m]の中に、BD[k]の成分であるΔPOCk,iと同じ参照画像を共有するΔPOCm,j(すなわちPOCm,j=POCk,i)が「存在するかどうか」を識別するものである。しかるに、前述した実施形態では「相対的な位置Δidxk,i」を用いていたが、本実施形態では、単に「あるかどうか」を示すフラグを用いる。このフラグとして、ここではibd_flagk,jと記載する。フラグibd_flagk,jが「ある」を示す場合は、既にバッファに格納されているj番目の画像は引き続き参照画像として用いられる。一方、フラグibd_flagk,jが「ない」を示す場合は、指定された別の画像が新たな参照画像(追加参照画像)としてバッファに格納される。
また、条件(c)と(d)のもとでは、BD[k]の個数は、多くてもBD[m]の個数より1つ多いので、すなわち常に#ΔPOCk=#ΔPOCm+1となるため、#ΔPOCkを送る必要がない。そのため、本実施形態では、さらに符号量の削減ができる。
上記の考え方に基づいた本実施形態によるバッファ記述情報の符号化処理は図22に示されている。これは、図3のステップ360の処理になる。ステップ2210では、ΔPOCkの個数とΔPOCmの個数に関する情報を取得し、後続の判定のために用いる。ステップ2220では、式(5)で与えられたΔBDkを求め、ΔBDkを符号化する。すなわち、ΔBDkは、BD[k]の情報を利用する対象画像のPOC番号POCcurrentと、BD[k]の予測に用いられるBD[m]の情報を利用する画像のPOC番号POCpreviousとの差として求められる。ステップ2230では、BD[k]のカウンタiと、BD[m]のカウンタjをゼロに初期化する。
次にステップ2240から2265にかけて、ΔPOCmの個数分のBD[m]の成分を調べる。具体的には、ステップ2245の条件が満たされた場合はステップ2250に、そうでない場合はステップ2260に進む。しかるにステップ2245の条件は式(3)によって与えられ、(POCk,i=POCm,j)の場合に当たる。ステップ2250では、当該条件が満たされることを示すためibd_flag k,j を1として符号化する。同時にBD[k]のカウンタiを増分する。一方、ステップ2260では、当該条件が満たされていないことを示すためibd_flagk,jを0として符号化する。ステップ2265では、次のBD[m]を調べるためカウントjを増分する。
ステップ2240の条件が満たされない場合、すなわちBD[m]の全成分を調べ終えた場合は、ステップ2270に進む。ここでは、対象となるバッファ記述情報BD[k]のカウンタiとΔPOCkの個数とを比較する。BD[k]のカウンタiは0から勘定するので、その最大値は(ΔPOCkの個数−1)となる。ステップ2270で(i=ΔPOCkの個数)との条件を満たせば、カウンタiはBD[k]の成分の個数を超えることになり、ibd_flagk,jを0として符号化し、処理を終了する。一方、ステップ2270で(i=ΔPOCkの個数)との条件が満たされていない場合は、BD[m]にない追加参照画像をバッファに格納することを意味する。それに関する情報を符号化するため、ステップ2290ではibd_flagk,jを1として符号化し、ステップ2295では、当該追加参照画像の依存度情報D_IDk,iを符号化する。なお、図6で説明したように当該追加参照画像のΔPOCk,iの値はΔBDkであるため、符号化する必要がない。
このように生成されたPPSの中に記載するバッファ記述情報のデータ配列は図24に示されている。図24は図8とほとんど同じである。2411で示されている「BDの個数」は図8の811と同じで、最初のBDであるBD[0]に関する情報2420は図8の820と同じであり、それぞれ図3のステップ320と330にて生成される。
k>0のBD[k]に含まれる情報は図24の2422、2424に例示されている。その中身として、ΔBDk(2434、2440)、ibd_flagk,j(2435、2436、2437、2441、2442、2443、2444)、もしくは{ibd_flagk,j,D_IDk,i}(2438)が記載されている。このデータ構造(シンタックス)は図8に似ており、k>0のBD[k]の個数である#ΔPOCk(833、839)は不必要であることに注意されたい。ibd_flagk,jは1もしくは0の値をとることになる。BD[k]の個数に関する情報を符号化する必要がないため、より少ないビット数でバッファ記述情報を表すことができる効果がある。
図23には本実施形態によるバッファ記述情報の復号処理の別の実施方法を示す。ステップ2310では、予測に用いられるBD[m]の成分であるΔPOCmの個数(#ΔPOCm)を取得する。BD[m]を復元しながら、その成分の個数をカウントすることにより、ΔPOCmの個数(#ΔPOCm)が得られる。ステップ2320では、BD[k]のカウンタであるiと、BD[m]のカウンタであるjをゼロに初期化する。ステップ2330にてバッファ情報に記載されているΔBDkの値を復号する。続いて、(#ΔPOCm+1)個分のibd_flagk,jを復号する(ステップ2345によって制御)。復号されたibd_flagk,jの値に基づいてステップ2345以降の処理を行う。
ステップ2345では、BD[m]のカウンタjを判定する。カウンタjがΔPOCmの個数に達するまでは、ibd_flagk,jの値(1または0)をもとに、ΔPOCm,jを用いてΔPOCk,iを復元するか否かを判定する(ステップ2350)。ibd_flagk,jの値が1の場合はステップ2355にてΔBDkとΔPOCm,jとを加算してΔPOCk,iを生成する。この場合、ΔPOCk,iとΔPOCm,jとは同じ参照画像を共有する(POCm,j=POCk,iである)ため、依存度情報D_IDk,iはΔPOCm,jに関連付けられる依存度情報D_IDm,jをそのままコピーすればよい。次にBD[k]のカウンタiを増分した上で、BD[m]の次の成分に対する判断を行う。
BD[m]の成分を最後までチェックしたのち(ステップ2345にてNOとなった場合に相当)、最後のibd_flagk,jの値を判定する(ステップ2370)。ibd_flagk,j=0の場合は、追加参照画像がないことを意味し、何も処理を行わず、後述のステップ2390へ進む。一方、ibd_flagk,j=1の場合は、(BD[m]にない)追加参照画像があることを意味し、ステップ2375にて依存度情報D_IDk,iを復元する。ステップ2380では、当該追加参照画像のPOC番号としてΔBDkを用いる(条件(d)を利用しているため)。また、BD[k]のカウンタiを増分する。そして最後に、カウンタiで勘定した値をBD[k]の個数として格納する(ステップ2390)。このBD[k]の個数は、BD[k+1]の各成分を生成するために用いられる(ステップ2310にて)。
図22と図23の処理方法では、BD[k]にある追加参照画像が1枚のみの場合の実施方法であるが、追加参照画像がN枚の場合は、このNの値をBD[k]の情報の一部として送受信すればよい。この場合、追加参照画像に関するPOC番号はIBDRk,iを用いて符号化・復号される。具体的には、図22のステップ2295は図10のステップ1070と同じ処理を、図23のステップ2375は図11のステップ1165と同じ処理を、図23のステップ2380は図11のステップ1170と同じ処理を、それぞれ実行すればよい。
また、上記ではibd_flagk,jの値を1ビット(1または0)で表しているが、1ビット以上で表してもよい。この場合、追加したビットを用いて、他の情報(D_IDk,i、IBDRk,iまたはそれ以外の情報)が明示的に符号化されているかどうかを識別してもよい。
さらに、当該追加したビットを用いて、ΔPOCk,iに関わる参照画像(すなわち、POC番号が式(1)に与えられたPOCk,iをもつ参照画像)の適用範囲を示してもよい。具体的には、ibd_flagk,jが「1」の場合は、ΔPOCm,jを用いてΔPOCk,iを復元すると同時に、ΔPOCk,iに関わる参照画像は、現在処理の対象となる画像(カレント画像)及びそれに続く将来の画像(フューチャー画像、複数でもよい)に適用する。また、ibd_flagk,jが「01」の場合は、ΔPOCm,jを用いてΔPOCk,iを復元すると同時に、ΔPOCk,iに関わる参照画像は、現在処理の対象となる画像(カレント画像)に適用せず、それに続く将来の画像(フューチャー画像、複数でもよい)のみに適用する。さらに、ibd_flagk,jが「00」の場合は、ΔPOCm,jをΔPOCk,iの復元に用いない。
上記の実施形態では、バッファ記述情報に記載されたΔPOCk,iに対し処理を施しているが、各参照画像が所有するPOC番号自体に対し処理を施してもよい。
なお、上記の全ての実施形態において、バッファ記述情報について述べた。バッファ記述情報は、対象画像を符号化・復号するために用いられる複数参照画像に関する記述でもあるため、上記の実施形態は、参照画像リストの管理方法としても用いられる。
また、上記の実施形態ではバッファ記述情報をまとめてPPS情報の一部として符号化する場合を説明したが、バッファ記述情報を個々の対象画像のヘッダに記載される場合でも適用できる。すなわち、図5の行510の情報をPOC=32の画像の圧縮データの先頭(ヘッダ)に、また行511の情報をPOC=28の画像の圧縮データの先頭(ヘッダ)に記載された場合にも適用できる。この場合、対象画像kに属するバッファ記述情報BD[k]は、先行して処理された画像mに属するバッファ記述情報BD[m]を参照にして、図6,7,10,11,18,19の処理で符号化・復号することができる。但し、予測の構造によって対象画像mは参照画像として全く用いられない場合があり(依存度情報D_IDの値が大きい)、その場合画像mに属するBD[m]を予測に用いない。なぜなら、参照画像として全く用いられない画像mは、データ量を制御したり復号処理を軽減したりするために捨てられることがあるからである。
コンピュータを上記の動画像予測符号化装置100として機能させるための動画像予測符号化プログラムは、記録媒体に格納されて提供可能とされている。同様に、コンピュータを上記の動画像予測復号装置200として機能させるための動画像予測復号プログラムは、記録媒体に格納されて提供可能とされている。記録媒体としては、フレキシブルディスク、CD−ROM、DVD、あるいはROM等の記録媒体、又は半導体メモリ等が例示される。
図13は、記録媒体に記録されたプログラムを実行するためのコンピュータ30のハードウェア構成を示す図であり、図14は、記録媒体に記憶されたプログラムを実行するためのコンピュータ30の斜視図である。ここでのコンピュータ30は、CPUを具備しソフトウエアによる情報処理や制御を行うDVDプレーヤ、セットトップボックス、携帯電話などを広く含む。
図13に示すように、コンピュータ30は、フレキシブルディスクドライブ装置、CD−ROMドライブ装置、DVDドライブ装置等の読み取り装置12と、オペレーティングシステムを常駐させた作業用メモリ(RAM)14と、記録媒体10に記憶されたプログラムを記憶するメモリ16と、ディスプレイといった表示装置18と、入力装置であるマウス20及びキーボード22と、データ等の送受を行うための通信装置24と、プログラムの実行を制御するCPU26とを備えている。記録媒体10が読み取り装置12に挿入されると、コンピュータ30は、読み取り装置12から記録媒体10に格納された動画像予測符号化プログラムにアクセス可能になり、当該動画像予測符号化プログラムによって上記の動画像予測符号化装置100として動作することが可能になる。同様に、記録媒体10が読み取り装置12に挿入されると、コンピュータ30は、読み取り装置12から記録媒体10に格納された動画像予測復号プログラムにアクセス可能になり、当該動画像予測復号プログラムによって上記の動画像予測復号装置200として動作することが可能になる。
100…動画像予測符号化装置、101…入力端子、102…ブロック分割器、103…予測信号生成器、104…フレームメモリ(またはバッファ、DPB)、105…減算器、106…変換器、107…量子化器、108…逆量子化器、109…逆変換器、110…加算器、111…エントロピー符号化器、112…出力端子、114…バッファ管理器、200…動画像予測復号装置、201…入力端子、202…データ解析器、203…逆量子化器、204…逆変換器、205…加算器、206…出力端子、207…フレームメモリ、208…予測信号生成器、209…バッファ管理器。

Claims (6)

  1. 動画像を構成する複数の画像を入力する入力手段と、
    前記画像を、過去に符号化した後に復号・再生された複数の画像を参照画像として予測符号化し、圧縮画像データを生成する符号化手段と、
    前記圧縮画像データを復号し、再生画像に復元する復元手段と、
    前記再生画像を、後続の画像を符号化するために用いられる参照画像として1つ以上格納する画像格納手段と、
    前記画像格納手段を制御するバッファ管理手段と、を具備する動画像予測符号化装置であって、
    前記バッファ管理手段は前記画像を処理する前に前記画像を予測符号化する際に用いられる複数の参照画像に関するバッファ記述情報BD[k]をもとに前記画像格納手段を制御すると同時に、前記画像と異なる別の画像のバッファ記述情報BD[m]を参照して、前記バッファ記述情報BD[k]を符号化した後にその符号化データを前記圧縮画像データに付加することを特徴とする動画像予測符号化装置。
  2. 動画像予測符号化装置により実行される動画像予測符号化方法であって、
    動画像を構成する複数の画像を入力する入力ステップと、
    前記画像を、過去に符号化した後に復号・再生された複数の画像を参照画像として予測符号化し、圧縮画像データを生成する符号化ステップと、
    前記圧縮画像データを復号し、再生画像に復元する復元ステップと、
    前記再生画像を、後続の画像を符号化するために用いられる参照画像として1つ以上格納する画像格納ステップと、
    前記画像格納ステップを制御するバッファ管理ステップと、を具備する動画像予測符号化方法であって、
    前記バッファ管理ステップでは前記画像を処理する前に前記画像を予測符号化する際に用いられる複数の参照画像に関するバッファ記述情報BD[k]をもとに、前記画像格納ステップを制御すると同時に、前記画像と異なる別の画像のバッファ記述情報BD[m]を参照して、前記バッファ記述情報BD[k]を符号化した後にその符号化データを前記圧縮画像データに付加することを特徴とする動画像予測符号化方法。
  3. コンピュータを、
    動画像を構成する複数の画像を入力する入力手段と、
    前記画像を、過去に符号化した後に復号・再生された複数の画像を参照画像として予測符号化し、圧縮画像データを生成する符号化手段と、
    前記圧縮画像データを復号し、再生画像に復元する復元手段と、
    前記再生画像を、後続の画像を符号化するために用いられる参照画像として1つ以上格納する画像格納手段と、
    前記画像格納手段を制御するバッファ管理手段、
    として機能させるための動画像予測符号化プログラムであって、
    前記バッファ管理手段は、前記画像を処理する前に、前記画像を予測符号化する際に用いられる複数の参照画像に関するバッファ記述情報BD[k]をもとに前記画像格納手段を制御すると同時に、前記画像と異なる別の画像のバッファ記述情報BD[m]を参照して、前記バッファ記述情報BD[k]を符号化した後にその符号化データを前記圧縮画像データに付加する、
    ことを特徴とする動画像予測符号化プログラム。
  4. 動画像を構成する複数の画像のそれぞれに対し、過去に復号・再生された複数の画像を参照画像として予測符号化されたデータと、複数の前記参照画像に関するバッファ記述情報BD[k]の符号化データとを含む圧縮画像データを入力する入力手段と、
    前記圧縮画像データを復号し、再生画像に復元する復元手段と、
    前記再生画像を、後続の画像を復号するために用いられる参照画像として1つ以上格納する画像格納手段と、
    前記画像格納手段を制御するバッファ管理手段と、を具備する動画像予測復号装置であって、
    前記バッファ管理手段は前記再生画像を復元する前に前記再生画像と異なる別の画像のバッファ記述情報BD[m]を参照して、前記再生画像のバッファ記述情報BD[k]の符号化データを復号した後に、前記復号されたバッファ記述情報BD[k]をもとに前記画像格納手段を制御することを特徴とする動画像予測復号装置。
  5. 動画像予測復号装置により実行される動画像予測復号方法であって、
    動画像を構成する複数の画像のそれぞれに対し、過去に復号・再生された複数の画像を参照画像として予測符号化されたデータと、複数の前記参照画像に関するバッファ記述情報BD[k]の符号化データとを含む圧縮画像データを入力する入力ステップと、
    前記圧縮画像データを復号し、再生画像に復元する復元ステップと、
    前記再生画像を、後続の画像を復号するために用いられる参照画像として1つ以上格納する画像格納ステップと、
    前記画像格納ステップを制御するバッファ管理ステップと、を具備する動画像予測復号方法であって、
    前記バッファ管理ステップでは前記再生画像を復元する前に前記再生画像と異なる別の画像のバッファ記述情報BD[m]を参照して、前記再生画像のバッファ記述情報BD[k]の符号化データを復号した後に、前記復号されたバッファ記述情報BD[k]をもとに前記画像格納ステップを制御することを特徴とする動画像予測復号方法。
  6. コンピュータを、
    動画像を構成する複数の画像のそれぞれに対し、過去に復号・再生された複数の画像を参照画像として予測符号化されたデータと、複数の前記参照画像に関するバッファ記述情報BD[k]の符号化データとを含む圧縮画像データを入力する入力手段と、
    前記圧縮画像データを復号し、再生画像に復元する復元手段と、
    前記再生画像を、後続の画像を復号するために用いられる参照画像として1つ以上格納する画像格納手段と、
    前記画像格納手段を制御するバッファ管理手段、
    として機能させるための動画像予測復号プログラムであって、
    前記バッファ管理手段は、前記再生画像を復元する前に、前記再生画像と異なる別の画像のバッファ記述情報BD[m]を参照して、前記再生画像のバッファ記述情報BD[k]の符号化データを復号し、その後、前記復号されたバッファ記述情報BD[k]をもとに前記画像格納手段を制御する、
    ことを特徴とする動画像予測復号プログラム。
JP2011240334A 2011-10-18 2011-11-01 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム Active JP5698644B2 (ja)

Priority Applications (85)

Application Number Priority Date Filing Date Title
JP2011240334A JP5698644B2 (ja) 2011-10-18 2011-11-01 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム
CA3039173A CA3039173C (en) 2011-10-18 2012-09-10 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion video predict decoding device, and motion video predict decoding program
PL18204031T PL3457693T3 (pl) 2011-10-18 2012-09-10 Sposób dekodowania predykcyjnego wideo, urządzenie do dekodowania predykcyjnego wideo
PT151693413T PT2938078T (pt) 2011-10-18 2012-09-10 Método de codificação preditiva de vídeo animado, dispositivo de codificação preditiva de vídeo animado, programa de codificação preditiva de vídeo animado, método de descodificação preditiva de vídeo animado, dispositivo de descodificação preditiva de vídeo animado e programa de descodificação preditiva de vídeo animado
KR1020167021266A KR101664202B1 (ko) 2011-10-18 2012-09-10 동화상 예측 부호화 방법, 동화상 예측 부호화 장치, 동화상 예측 부호화 프로그램, 동화상 예측 복호 방법, 동화상 예측 복호 장치 및 동화상 예측 복호 프로그램
EP20169278.7A EP3700214B1 (en) 2011-10-18 2012-09-10 Motion video predictive decoding method
CA2852888A CA2852888C (en) 2011-10-18 2012-09-10 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion video predict decoding device, and motion video predict decoding program
CN201610907369.XA CN106412599B (zh) 2011-10-18 2012-09-10 动态图像预测解码方法、动态图像预测解码装置
CA3039171A CA3039171C (en) 2011-10-18 2012-09-10 Video predictive decoding technique using two sets of reference pictures and two sets of reference picture descriptions with indexed identification numbers
DK20169278.7T DK3700214T3 (da) 2011-10-18 2012-09-10 Bevægelsesvideoforudsigelsesafkodningsfremgangsmåde
CN201610908724.5A CN107105264B (zh) 2011-10-18 2012-09-10 动态图像预测解码方法、动态图像预测解码装置
AU2012324191A AU2012324191B2 (en) 2011-10-18 2012-09-10 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion video predict decoding device, and motion video predict decoding program
PL20169278.7T PL3700214T3 (pl) 2011-10-18 2012-09-10 Sposób dekodowania predykcyjnego wideo ruchu
HUE20169278A HUE063249T2 (hu) 2011-10-18 2012-09-10 Mozgó video prediktív dekódolási eljárás
RU2014119878/08A RU2586592C2 (ru) 2011-10-18 2012-09-10 Способ кодирования видео с предсказанием движения, устройство кодирования видео с предсказанием движения, программа кодирования видео с предсказанием движения, способ декодирования видео с предсказанием движения, устройство декодирования видео с предсказанием движения и программа декодирования видео с предсказанием движения
CA3039168A CA3039168C (en) 2011-10-18 2012-09-10 A video predictive decoding technique using multiple sets of reference pictures and multiple sets of reference picture descriptions with indexed identification numbers
CN201610908737.2A CN107105265B (zh) 2011-10-18 2012-09-10 动态图像预测解码方法、动态图像预测解码装置
PL15169334T PL2938077T3 (pl) 2011-10-18 2012-09-10 Sposób kodowania predykcyjnego wideo, urządzenie do kodowania predykcyjnego wideo, program do kodowania predykcyjnego wideo, sposób dekodowania predykcyjnego wideo, urządzenie do dekodowania predykcyjnego wideo i program do dekodowania predykcyjnego wideo
KR1020147013163A KR101581399B1 (ko) 2011-10-18 2012-09-10 동화상 예측 부호화 방법, 동화상 예측 부호화 장치, 동화상 예측 부호화 프로그램, 동화상 예측 복호 방법, 동화상 예측 복호 장치 및 동화상 예측 복호 프로그램
FIEP20169278.7T FI3700214T3 (fi) 2011-10-18 2012-09-10 Videon ennakoiva dekoodausmenetelmä
MX2014004501A MX336539B (es) 2011-10-18 2012-09-10 Metodo de codificacion con prediccion de video de movimiento, dispositivo de codificacion con prediccion de video de movimiento, programa de codificacion con prediccion de video de movimiento, metodo para descifrar con prediccion de video de movimiento, dispositivo para descifrar con prediccion de video de movimiento, y programa para descifrar con prediccion de video de movimiento.
CA3039172A CA3039172C (en) 2011-10-18 2012-09-10 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion video predict decoding device, and motion video predict decoding program
BR112014009023-8A BR112014009023B1 (pt) 2011-10-18 2012-09-10 Dispositivo e método de codificação preditiva de vídeo e dispositivo e método de decodificação preditiva de vídeo
MX2016000852A MX350923B (es) 2011-10-18 2012-09-10 Método de codificación con predicción de vídeo de movimiento, dispositivo de codificación con predicción de vídeo de movimiento, programa de codificación con predicción de vídeo de movimiento, método para descifrar con predicción de vídeo de movimiento, dispositivo para descifrar con predicción de vídeo de movimiento, y programa para descifrar con predicción de vídeo de movimiento.
PL15169351T PL2938079T3 (pl) 2011-10-18 2012-09-10 Sposób kodowania predykcyjnego ruchomego wideo, urządzenie do kodowania predykcyjnego ruchomego wideo i program do kodowania predykcyjnego ruchomego wideo, i sposób dekodowania predykcyjnego ruchomego wideo, urządzenie do dekodowania predykcyjnego ruchomego wideo i program do dekodowania predykcyjnego ruchomego wideo
SG11201401568WA SG11201401568WA (en) 2011-10-18 2012-09-10 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion video predict decoding device, and motion video predict decoding program
PT151693249T PT2938076T (pt) 2011-10-18 2012-09-10 Método de codificação preditiva de vídeo animado, dispositivo de codificação preditiva de vídeo animado, programa de codificação preditiva de vídeo animado, método de descodificação preditiva de vídeo animado, dispositivo de descodificação preditiva de vídeo animado e programa de descodificação preditiva de vídeo animado
ES18204031T ES2806049T3 (es) 2011-10-18 2012-09-10 Procedimiento de descodificación predictiva de vídeo en movimiento, dispositivo de descodificación predictiva de vídeo en movimiento
ES15169324.9T ES2614512T3 (es) 2011-10-18 2012-09-10 Método de codificación por predicción de vídeo en movimiento, dispositivo de codificación por predicción de vídeo en movimiento, programa de codificación por predicción de vídeo en movimiento, método de descodificación por predicción de vídeo en movimiento, dispositivo de descodificación por predicción de vídeo en movimiento y programa de descodificación por predicción de vídeo en movimiento
CN201280050657.8A CN103858429B (zh) 2011-10-18 2012-09-10 动态图像预测编解码方法及装置
KR1020167021264A KR101686519B1 (ko) 2011-10-18 2012-09-10 동화상 예측 부호화 방법, 동화상 예측 부호화 장치, 동화상 예측 부호화 프로그램, 동화상 예측 복호 방법, 동화상 예측 복호 장치 및 동화상 예측 복호 프로그램
CA3039176A CA3039176C (en) 2011-10-18 2012-09-10 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion video predict decoding device, and motion video predict decoding program
RU2016116283A RU2630180C1 (ru) 2011-10-18 2012-09-10 Способ кодирования видео с предсказанием движения, устройство кодирования видео с предсказанием движения, программа кодирования видео с предсказанием движения, способ декодирования видео с предсказанием движения, устройство декодирования видео с предсказанием движения и программа декодирования видео с предсказанием движения
EP15169324.9A EP2938076B1 (en) 2011-10-18 2012-09-10 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion video predict decoding device and motion video predict decoding program
PT182040311T PT3457693T (pt) 2011-10-18 2012-09-10 Método de descodificação preditiva de vídeo animado, dispositivo de descodificação preditiva de vídeo animado
EP17152143.8A EP3177019B1 (en) 2011-10-18 2012-09-10 Motion video prediction decoding method, and motion video prediction decoding device
PT151693348T PT2938077T (pt) 2011-10-18 2012-09-10 Método de codificação preditiva de vídeo animado, dispositivo de codificação preditiva de vídeo animado, programa de codificação preditiva de vídeo animado, método de descodificação preditiva de vídeo animado, dispositivo de descodificação preditiva de vídeo animado e programa de descodificação preditiva de vídeo animado
PL17152143T PL3177019T3 (pl) 2011-10-18 2012-09-10 Sposób dekodowania predykcyjnego wideo oraz urządzenie do dekodowania predykcyjnego wideo
PT17152143T PT3177019T (pt) 2011-10-18 2012-09-10 Método de descodificação preditiva de vídeo animado, e dispositivo de descodificação preditiva de vídeo animado
CN201610907384.4A CN106454369B (zh) 2011-10-18 2012-09-10 动态图像预测解码方法、动态图像预测解码装置
EP15169341.3A EP2938078B8 (en) 2011-10-18 2012-09-10 Method, apparatus and program for motion video prediction coding, and method, apparatus and program for motion video prediction decoding
EP15169334.8A EP2938077B1 (en) 2011-10-18 2012-09-10 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion video predict decoding device and motion video predict decoding program
ES20169278T ES2957483T3 (es) 2011-10-18 2012-09-10 Procedimiento de descodificación predictiva de vídeo en movimiento
PL12841320T PL2770737T4 (pl) 2011-10-18 2012-09-10 Sposób kodowania predykcyjnego ruchomego wideo, urządzenie do kodowania predykcyjnego ruchomego wideo i program do kodowania predykcyjnego ruchomego wideo, i sposób dekodowania predykcyjnego ruchomego wideo, urządzenie do dekodowania predykcyjnego ruchomego wideo i program do dekodowania predykcyjnego ruchomego wideo
PL15169324T PL2938076T3 (pl) 2011-10-18 2012-09-10 Sposób kodowania predykcyjnego wideo, urządzenie do kodowania predykcyjnego wideo, program do kodowania predykcyjnego wideo, sposób dekodowania predykcyjnego wideo, urządzenie do dekodowania predykcyjnego wideo i program do dekodowania predykcyjnego wideo
ES15169334.8T ES2614357T3 (es) 2011-10-18 2012-09-10 Procedimiento de codificación predictiva de vídeo, dispositivo de codificación predictiva de vídeo, programa de codificación predictiva de vídeo, procedimiento de descodificación predictiva de vídeo, dispositivo de descodificación predictiva de vídeo y programa de descodificación predictiva de vídeo
ES15169351.2T ES2622777T3 (es) 2011-10-18 2012-09-10 Procedimiento, dispositivo y programa para la codificación por predicción de vídeo en movimiento, y procedimiento, dispositivo y programa para la descodificación por predicción de vídeo en movimiento
EP15169351.2A EP2938079B1 (en) 2011-10-18 2012-09-10 Method, apparatus and program for motion video prediction coding, and method, apparatus and program for motion video prediction decoding
PT151693512T PT2938079T (pt) 2011-10-18 2012-09-10 Método, dispositivo e programa para codificação preditiva de vídeo animado e método, dispositivo e programa para descodificação preditiva de vídeo animado
PT128413200T PT2770737T (pt) 2011-10-18 2012-09-10 Método, disposito e programa para codificação preditiva de vídeo animado e método, dispositivo e programa para descodificação preditiva de vídeo animado
CA3039174A CA3039174C (en) 2011-10-18 2012-09-10 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion video predict decoding device, and motion video predict decoding program
KR1020157036207A KR101648443B1 (ko) 2011-10-18 2012-09-10 동화상 예측 부호화 방법, 동화상 예측 부호화 장치, 동화상 예측 부호화 프로그램, 동화상 예측 복호 방법, 동화상 예측 복호 장치 및 동화상 예측 복호 프로그램
CA2972448A CA2972448C (en) 2011-10-18 2012-09-10 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion video predict decoding device, and motion video predict decoding program
CN201610908246.8A CN107105276B (zh) 2011-10-18 2012-09-10 动态图像预测解码方法、动态图像预测解码装置
PCT/JP2012/073090 WO2013058034A1 (ja) 2011-10-18 2012-09-10 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム
CN201610908346.0A CN106851301B (zh) 2011-10-18 2012-09-10 动态图像预测解码方法、动态图像预测解码装置
KR1020167021265A KR101686520B1 (ko) 2011-10-18 2012-09-10 동화상 예측 부호화 방법, 동화상 예측 부호화 장치, 동화상 예측 부호화 프로그램, 동화상 예측 복호 방법, 동화상 예측 복호 장치 및 동화상 예측 복호 프로그램
PL15169341T PL2938078T3 (pl) 2011-10-18 2012-09-10 Sposób kodowania predykcyjnego ruchomego wideo, urządzenie do kodowania predykcyjnego ruchomego wideo i program do kodowania predykcyjnego ruchomego wideo, i sposób dekodowania predykcyjnego ruchomego wideo, urządzenie do dekodowania predykcyjnego ruchomego wideo i program do dekodowania predykcyjnego ruchomego wideo
ES12841320.0T ES2618287T3 (es) 2011-10-18 2012-09-10 Procedimiento de codificación predictiva de vídeo, dispositivo de codificación predictiva de vídeo, programa de codificación predictiva de vídeo, procedimiento de descodificación predictiva de vídeo, dispositivo de descodificación predictiva de vídeo y programa de descodificación predictiva de vídeo
EP12841320.0A EP2770737B1 (en) 2011-10-18 2012-09-10 Method, apparatus and program for for motion video prediction coding, and method, apparatus and program for for motion video prediction decoding
EP18204031.1A EP3457693B1 (en) 2011-10-18 2012-09-10 Motion video predictive decoding method, motion video predictive decoding device
ES17152143T ES2707780T3 (es) 2011-10-18 2012-09-10 Procedimiento de descodificación por predicción de vídeo en movimiento y dispositivo de descodificación por predicción de vídeo en movimiento
ES15169341.3T ES2613525T3 (es) 2011-10-18 2012-09-10 Procedimiento, aparato y programa para la codificación por predicción de vídeo en movimiento, y procedimiento, aparato y programa para la descodificación por predicción de vídeo en movimiento
PT201692787T PT3700214T (pt) 2011-10-18 2012-09-10 Método de descodificação preditiva de vídeo animado
TW105130460A TWI611688B (zh) 2011-10-18 2012-10-12 動態影像預測解碼方法、動態影像預測解碼裝置
TW107102752A TWI661712B (zh) 2011-10-18 2012-10-12 動態影像預測解碼方法及動態影像預測解碼裝置
TW104111246A TWI540883B (zh) 2011-10-18 2012-10-12 Dynamic image predictive decoding method, dynamic image predictive decoding device, dynamic image predictive decoding program, dynamic image predictive coding method, dynamic image predictive coding device and dynamic image predictive coding program
TW104111245A TW201528787A (zh) 2011-10-18 2012-10-12 動態影像預測解碼方法、動態影像預測解碼裝置、動態影像預測解碼程式、動態影像預測編碼方法、動態影像預測編碼裝置及動態影像預測編碼程式
TW108114160A TWI704798B (zh) 2011-10-18 2012-10-12 動態影像預測解碼方法
TW104111247A TWI520587B (zh) 2011-10-18 2012-10-12 Dynamic image predictive decoding method, dynamic image predictive decoding device, dynamic image predictive decoding program, dynamic image predictive coding method, dynamic image predictive coding device and dynamic image predictive coding program
TW106137198A TWI619377B (zh) 2011-10-18 2012-10-12 動態影像預測解碼方法及動態影像預測解碼裝置
TW101137724A TWI510060B (zh) 2011-10-18 2012-10-12 Dynamic image predictive coding method, dynamic image predictive coding device, dynamic image predictive coding program, dynamic image prediction decoding method, dynamic image prediction decoding device and dynamic image prediction decoding program
US14/255,728 US9621923B2 (en) 2011-10-18 2014-04-17 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion predict decoding device, and motion video predict decoding program
US15/251,808 US9667998B2 (en) 2011-10-18 2016-08-30 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion predict decoding device, and motion video predict decoding program
US15/251,876 US9743113B2 (en) 2011-10-18 2016-08-30 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion predict decoding device, and motion video predict decoding program
US15/251,842 US9681153B2 (en) 2011-10-18 2016-08-30 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion predict decoding device, and motion video predict decoding program
US15/473,849 US10015509B2 (en) 2011-10-18 2017-03-30 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion predict decoding device, and motion video predict decoding program
RU2017129261A RU2660619C1 (ru) 2011-10-18 2017-08-17 Способ кодирования видео с предсказанием движения, устройство кодирования видео с предсказанием движения, программа кодирования видео с предсказанием движения, способ декодирования видео с предсказанием движения, устройство декодирования видео с предсказанием движения и программа декодирования видео с предсказанием движения
US16/007,178 US10257533B2 (en) 2011-10-18 2018-06-13 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion predict decoding device, and motion video predict decoding program
US16/007,199 US10257534B2 (en) 2011-10-18 2018-06-13 Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion predict decoding device, and motion video predict decoding program
RU2018122101A RU2689424C1 (ru) 2011-10-18 2018-06-18 Способ кодирования видео с предсказанием движения, устройство кодирования видео с предсказанием движения, программа кодирования видео с предсказанием движения, способ декодирования видео с предсказанием движения, устройство декодирования видео с предсказанием движения и программа декодирования видео с предсказанием движения
RU2018122103A RU2684573C1 (ru) 2011-10-18 2018-06-18 Способ кодирования видео с предсказанием движения, устройство кодирования видео с предсказанием движения, программа кодирования видео с предсказанием движения, способ декодирования видео с предсказанием движения, устройство декодирования видео с предсказанием движения и программа декодирования видео с предсказанием движения
RU2019108802A RU2699412C1 (ru) 2011-10-18 2019-03-27 Способ кодирования видео с предсказанием движения, устройство кодирования видео с предсказанием движения, программа кодирования видео с предсказанием движения, способ декодирования видео с предсказанием движения, устройство декодирования видео с предсказанием движения и программа декодирования видео с предсказанием движения
RU2019112246A RU2707145C1 (ru) 2011-10-18 2019-04-23 Способ кодирования видео с предсказанием движения, устройство кодирования видео с предсказанием движения, программа кодирования видео с предсказанием движения, способ декодирования видео с предсказанием движения, устройство декодирования видео с предсказанием движения и программа декодирования видео с предсказанием движения
RU2019136041A RU2719334C1 (ru) 2011-10-18 2019-11-11 Способ кодирования видео с предсказанием движения, устройство кодирования видео с предсказанием движения, программа кодирования видео с предсказанием движения, способ декодирования видео с предсказанием движения, устройство декодирования видео с предсказанием движения и программа декодирования видео с предсказанием движения

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011228758 2011-10-18
JP2011228758 2011-10-18
JP2011240334A JP5698644B2 (ja) 2011-10-18 2011-11-01 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム

Related Child Applications (3)

Application Number Title Priority Date Filing Date
JP2014196989A Division JP5711416B2 (ja) 2011-10-18 2014-09-26 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム
JP2014196990A Division JP5711417B2 (ja) 2011-10-18 2014-09-26 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム
JP2014197246A Division JP5715291B2 (ja) 2011-10-18 2014-09-26 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム

Publications (3)

Publication Number Publication Date
JP2013102258A JP2013102258A (ja) 2013-05-23
JP2013102258A5 JP2013102258A5 (ja) 2013-10-03
JP5698644B2 true JP5698644B2 (ja) 2015-04-08

Family

ID=48140690

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011240334A Active JP5698644B2 (ja) 2011-10-18 2011-11-01 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム

Country Status (19)

Country Link
US (7) US9621923B2 (ja)
EP (8) EP3457693B1 (ja)
JP (1) JP5698644B2 (ja)
KR (5) KR101686519B1 (ja)
CN (7) CN106851301B (ja)
AU (1) AU2012324191B2 (ja)
BR (1) BR112014009023B1 (ja)
CA (8) CA3039168C (ja)
DK (1) DK3700214T3 (ja)
ES (8) ES2957483T3 (ja)
FI (1) FI3700214T3 (ja)
HU (1) HUE063249T2 (ja)
MX (2) MX350923B (ja)
PL (8) PL2938076T3 (ja)
PT (8) PT2770737T (ja)
RU (8) RU2586592C2 (ja)
SG (1) SG11201401568WA (ja)
TW (8) TWI540883B (ja)
WO (1) WO2013058034A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016126037A (ja) 2014-12-26 2016-07-11 ソニー株式会社 信号処理装置、および信号処理方法、並びにプログラム
CN107247676A (zh) * 2017-05-18 2017-10-13 深圳市小牛在线互联网信息咨询有限公司 动态图播放方法、装置、存储介质和计算机设备
CN112714322B (zh) * 2020-12-28 2023-08-01 福州大学 一种面向游戏视频的帧间参考优化方法

Family Cites Families (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7095783B1 (en) * 1992-06-30 2006-08-22 Discovision Associates Multistandard video decoder and decompression system for processing encoded bit streams including start codes and methods relating thereto
JP3109349B2 (ja) * 1993-11-16 2000-11-13 松下電器産業株式会社 映像信号再生装置
US6101276A (en) * 1996-06-21 2000-08-08 Compaq Computer Corporation Method and apparatus for performing two pass quality video compression through pipelining and buffer management
AU4601697A (en) * 1996-12-18 1998-07-15 Thomson Consumer Electronics, Inc Efficient fixed-length block compression and decompression
GB2362532B (en) * 2000-05-15 2004-05-05 Nokia Mobile Phones Ltd Video coding
JP2003299103A (ja) * 2002-03-29 2003-10-17 Toshiba Corp 動画像符号化方法と装置及び動画像復号化方法と装置
JP2004007563A (ja) * 2002-04-19 2004-01-08 Matsushita Electric Ind Co Ltd 動画像符号化方法および動画像復号化方法
EP3054680B1 (en) * 2002-04-19 2019-06-05 Panasonic Intellectual Property Corporation of America Motion vector calculating method
AU2003281129B2 (en) * 2002-07-11 2007-12-06 Panasonic Intellectual Property Corporation Of America Picture encoding method and picture decoding method
EP2903272B1 (en) * 2002-08-08 2018-03-28 Godo Kaisha IP Bridge 1 Moving picture encoding method and decoding method
BR0314824A (pt) * 2002-10-01 2005-08-02 Thomson Licensing Sa Ponderação implìcita de imagens de referência em decodificador de vìdeo
JP3513148B1 (ja) * 2002-10-11 2004-03-31 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化方法、動画像復号方法、動画像符号化装置、動画像復号装置、動画像符号化プログラム、及び動画像復号プログラム
MY134659A (en) * 2002-11-06 2007-12-31 Nokia Corp Picture buffering for prediction references and display
US20100166056A1 (en) * 2002-12-10 2010-07-01 Steve Perlman System and method for encoding video using a selected tile and tile rotation pattern
KR101094323B1 (ko) * 2003-09-17 2011-12-19 톰슨 라이센싱 적응 기준 화상 생성
JP4591657B2 (ja) * 2003-12-22 2010-12-01 キヤノン株式会社 動画像符号化装置及びその制御方法、プログラム
US20050207490A1 (en) * 2004-03-18 2005-09-22 Wang Jason N Stored picture index for AVC coding
US20050229231A1 (en) * 2004-03-31 2005-10-13 Lippincott Louis A Converter-assisted video encoder
JP4020883B2 (ja) * 2004-04-20 2007-12-12 株式会社東芝 動画像復号装置
CN101065780A (zh) * 2004-10-14 2007-10-31 诺基亚公司 视频编码中的参考图像管理
US20060083298A1 (en) * 2004-10-14 2006-04-20 Nokia Corporation Reference picture management in video coding
US7983341B2 (en) * 2005-02-24 2011-07-19 Ericsson Television Inc. Statistical content block matching scheme for pre-processing in encoding and transcoding
US7995656B2 (en) * 2005-03-10 2011-08-09 Qualcomm Incorporated Scalable video coding with two layer encoding and single layer decoding
KR100703770B1 (ko) * 2005-03-25 2007-04-06 삼성전자주식회사 가중 예측을 이용한 비디오 코딩 및 디코딩 방법, 이를위한 장치
JP5017825B2 (ja) * 2005-09-15 2012-09-05 ソニー株式会社 復号装置および復号方法
KR20080066784A (ko) * 2005-10-11 2008-07-16 노키아 코포레이션 규모가변적 비디오 코딩을 위한 효율적 디코딩 화상 버퍼관리
WO2007063808A1 (ja) * 2005-11-30 2007-06-07 Kabushiki Kaisha Toshiba 画像符号化/画像復号化方法及び画像符号化/画像復号化装置
BRPI0621340A2 (pt) * 2006-02-13 2011-12-06 Toshiba Kk Toshiba Corp método e aparelho e programa de codificação/decodificação de vìdeo
AU2007269575B2 (en) * 2006-07-06 2012-08-16 Interdigital Vc Holdings, Inc. Method and apparatus for decoupling frame number and/or picture order count (POC) for multi-view video encoding and decoding
AR064274A1 (es) * 2006-12-14 2009-03-25 Panasonic Corp Metodo de codificacion de imagenes en movimiento, dispositivo de codificacion de imagenes en movimiento, metodo de grabacion de imagenes en movimiento, medio de grabacion, metodo de reproduccion de imagenes en movimiento, dispositivo de reproduccion de imagenes en movimiento, y sistema de reproducci
CN101513074B (zh) * 2006-12-27 2011-07-06 松下电器产业株式会社 运动图像解码装置
RU2335869C1 (ru) * 2007-03-27 2008-10-20 Виктор Николаевич Ожерельев Приспособление к дисковому почвообрабатывающему орудию
KR101182634B1 (ko) * 2007-04-12 2012-09-14 노키아 코포레이션 공간적으로 향상된 변환 부호화
EP2034742A3 (en) * 2007-07-25 2009-10-14 Hitachi Ltd. Video coding method and device
JP2009267689A (ja) 2008-04-24 2009-11-12 Panasonic Corp 動画像符号化装置、及び動画像符号化方法
JP5369893B2 (ja) * 2008-05-30 2013-12-18 株式会社Jvcケンウッド 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法、動画像復号プログラム、動画像再符号化装置、動画像再符号化方法、動画像再符号化プログラム
US8446949B2 (en) * 2008-06-23 2013-05-21 Sungkyunkwan University Foundation For Corporate Collaboration Distributed coded video decoding apparatus and method capable of successively improving side information on the basis of reliability of reconstructed data
JP5680283B2 (ja) * 2008-09-19 2015-03-04 株式会社Nttドコモ 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、動画像符号化プログラム、及び動画像復号プログラム
JP5697301B2 (ja) * 2008-10-01 2015-04-08 株式会社Nttドコモ 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、動画像符号化プログラム、動画像復号プログラム、及び動画像符号化・復号システム
TW201032597A (en) * 2009-01-28 2010-09-01 Nokia Corp Method and apparatus for video coding and decoding
US20110026593A1 (en) * 2009-02-10 2011-02-03 New Wei Lee Image processing apparatus, image processing method, program and integrated circuit
JP2011082683A (ja) * 2009-10-05 2011-04-21 Sony Corp 画像処理装置、画像処理方法、及び、プログラム
CN102197652B (zh) * 2009-10-19 2013-09-11 松下电器产业株式会社 解码装置、解码方法、程序以及集成电路
TW201125370A (en) * 2009-10-30 2011-07-16 Panasonic Corp Decoding method, decoder apparatus, encoding method, and encoder apparatus
JP2011199396A (ja) * 2010-03-17 2011-10-06 Ntt Docomo Inc 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法、及び動画像予測復号プログラム
CN102823247B (zh) * 2010-03-30 2015-04-08 富士通株式会社 图像处理装置和图像处理方法

Also Published As

Publication number Publication date
CA2852888A1 (en) 2013-04-25
KR20160096231A (ko) 2016-08-12
PL3457693T3 (pl) 2020-10-19
CA2972448C (en) 2019-05-28
US20160373786A1 (en) 2016-12-22
CA3039172C (en) 2021-01-19
FI3700214T3 (fi) 2023-09-13
EP3177019A1 (en) 2017-06-07
TWI540883B (zh) 2016-07-01
US9681153B2 (en) 2017-06-13
MX2014004501A (es) 2014-09-08
TWI611688B (zh) 2018-01-11
RU2707145C1 (ru) 2019-11-22
TWI704798B (zh) 2020-09-11
CN106412599B (zh) 2018-06-05
US20180295377A1 (en) 2018-10-11
CA3039171A1 (en) 2013-04-25
AU2012324191A1 (en) 2014-06-12
PL2938077T3 (pl) 2017-04-28
PL2938078T3 (pl) 2017-04-28
KR101686519B1 (ko) 2016-12-14
RU2684573C1 (ru) 2019-04-09
US20160373781A1 (en) 2016-12-22
EP3177019B1 (en) 2018-12-26
KR20140085513A (ko) 2014-07-07
ES2614357T3 (es) 2017-05-30
RU2689424C1 (ru) 2019-05-28
RU2014119878A (ru) 2015-11-27
ES2613525T3 (es) 2017-05-24
MX336539B (es) 2016-01-22
ES2622777T3 (es) 2017-07-07
ES2618287T3 (es) 2017-06-21
TWI520587B (zh) 2016-02-01
EP3700214B1 (en) 2023-08-23
ES2614512T3 (es) 2017-05-31
PT2938078T (pt) 2016-12-27
KR101664202B1 (ko) 2016-10-10
HUE063249T2 (hu) 2024-01-28
TW201531093A (zh) 2015-08-01
TW201808009A (zh) 2018-03-01
KR20160005375A (ko) 2016-01-14
RU2719334C1 (ru) 2020-04-17
US20140226716A1 (en) 2014-08-14
MX350923B (es) 2017-09-26
PT2938079T (pt) 2017-04-24
US10015509B2 (en) 2018-07-03
AU2012324191B2 (en) 2015-06-25
CA3039173A1 (en) 2013-04-25
CN106851301A (zh) 2017-06-13
CN106454369A (zh) 2017-02-22
EP2938076B1 (en) 2016-11-30
US20180295378A1 (en) 2018-10-11
PT3457693T (pt) 2020-07-16
TW201929544A (zh) 2019-07-16
WO2013058034A1 (ja) 2013-04-25
EP2938078B8 (en) 2017-04-12
EP2938077B1 (en) 2016-11-23
EP2770737A1 (en) 2014-08-27
TW201528787A (zh) 2015-07-16
US10257534B2 (en) 2019-04-09
CN106412599A (zh) 2017-02-15
US9621923B2 (en) 2017-04-11
KR101686520B1 (ko) 2016-12-14
CN106454369B (zh) 2019-07-23
EP3457693B1 (en) 2020-06-17
TWI661712B (zh) 2019-06-01
ES2707780T3 (es) 2019-04-05
TW201531092A (zh) 2015-08-01
PT2938076T (pt) 2017-01-04
CN107105265B (zh) 2018-06-26
KR101648443B1 (ko) 2016-08-16
TW201818721A (zh) 2018-05-16
PT2938077T (pt) 2017-01-09
TWI619377B (zh) 2018-03-21
EP2938079B1 (en) 2017-03-29
US20170208337A1 (en) 2017-07-20
CA2852888C (en) 2017-09-26
JP2013102258A (ja) 2013-05-23
RU2586592C2 (ru) 2016-06-10
PT3700214T (pt) 2023-09-21
EP2770737A4 (en) 2015-06-03
CN106851301B (zh) 2018-08-07
EP2770737B1 (en) 2016-12-07
TWI562607B (ja) 2016-12-11
EP3700214A1 (en) 2020-08-26
TWI510060B (zh) 2015-11-21
EP2938076A1 (en) 2015-10-28
RU2699412C1 (ru) 2019-09-05
CN107105276A (zh) 2017-08-29
PT2770737T (pt) 2017-02-01
US9667998B2 (en) 2017-05-30
CA3039176A1 (en) 2013-04-25
PL2938076T3 (pl) 2017-06-30
CN103858429B (zh) 2018-11-27
EP2938079A1 (en) 2015-10-28
RU2630180C1 (ru) 2017-09-05
CA3039173C (en) 2021-01-19
BR112014009023A2 (pt) 2017-05-02
PL3700214T3 (pl) 2023-12-11
CN107105265A (zh) 2017-08-29
PL2938079T3 (pl) 2017-07-31
KR101581399B1 (ko) 2015-12-30
SG11201401568WA (en) 2014-09-26
TW201320772A (zh) 2013-05-16
CA3039168C (en) 2021-01-19
PL2770737T4 (pl) 2019-04-30
CA3039174C (en) 2021-06-29
CN107105264A (zh) 2017-08-29
KR20160099109A (ko) 2016-08-19
PL3177019T3 (pl) 2019-03-29
TW201707453A (zh) 2017-02-16
PT3177019T (pt) 2019-02-04
ES2806049T3 (es) 2021-02-16
CA3039168A1 (en) 2013-04-25
CN103858429A (zh) 2014-06-11
CA3039171C (en) 2021-01-19
CA3039174A1 (en) 2013-04-25
ES2957483T3 (es) 2024-01-19
CA3039176C (en) 2020-10-27
CA2972448A1 (en) 2013-04-25
EP2938078A1 (en) 2015-10-28
KR20160099110A (ko) 2016-08-19
EP2938077A1 (en) 2015-10-28
CN107105276B (zh) 2018-09-14
US9743113B2 (en) 2017-08-22
DK3700214T3 (da) 2023-09-25
EP2938078B1 (en) 2016-11-09
EP3457693A1 (en) 2019-03-20
RU2660619C1 (ru) 2018-07-06
US10257533B2 (en) 2019-04-09
PL2770737T3 (pl) 2017-06-30
CN107105264B (zh) 2019-11-08
US20160373758A1 (en) 2016-12-22
BR112014009023B1 (pt) 2019-07-02
CA3039172A1 (en) 2013-04-25

Similar Documents

Publication Publication Date Title
JP5698644B2 (ja) 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム
JP5957558B2 (ja) 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム
AU2015202847B2 (en) Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion video predict decoding device, and motion video predict decoding program
JP5898924B2 (ja) 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置および動画像予測復号プログラム
AU2015202850B8 (en) Motion video predict coding method, motion video predict coding device, motion video predict coding program, motion video predict decoding method, motion video predict decoding device, and motion video predict decoding program

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130815

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130815

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140729

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140926

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150203

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150213

R150 Certificate of patent or registration of utility model

Ref document number: 5698644

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250