JP2024508193A - 復号方法、符号化方法、装置、デバイスおよび記憶媒体 - Google Patents

復号方法、符号化方法、装置、デバイスおよび記憶媒体 Download PDF

Info

Publication number
JP2024508193A
JP2024508193A JP2023557413A JP2023557413A JP2024508193A JP 2024508193 A JP2024508193 A JP 2024508193A JP 2023557413 A JP2023557413 A JP 2023557413A JP 2023557413 A JP2023557413 A JP 2023557413A JP 2024508193 A JP2024508193 A JP 2024508193A
Authority
JP
Japan
Prior art keywords
motion information
block
current
encoding unit
coding unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2023557413A
Other languages
English (en)
Other versions
JP7494403B2 (ja
Inventor
小▲強▼ 曹
▲ユ▼程 ▲孫▼
方▲棟▼ ▲陳▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Publication of JP2024508193A publication Critical patent/JP2024508193A/ja
Application granted granted Critical
Publication of JP7494403B2 publication Critical patent/JP7494403B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/57—Motion estimation characterised by a search window with variable size or shape
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Steroid Compounds (AREA)
  • Medicines Containing Antibodies Or Antigens For Use As Internal Diagnostic Agents (AREA)
  • Peptides Or Proteins (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Reduction Or Emphasis Of Bandwidth Of Signals (AREA)

Abstract

本発明は復号方法、符号化方法、装置、デバイスおよび記憶媒体を提供する。当該復号方法は、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得するステップと、前記強化時間動きベクトル予測モードフラグの値が第１の数値の場合、前記現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップと、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップと、前記強化時間動きベクトル予測モードインデックス値に基づいて、ターゲットマッチング符号化ユニットの座標情報を決定するステップと、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップと、を含む。当該方法は符号化・復号性能を向上できる。

Description

本発明は映像符号化・復号技術に関し、特に復号方法、符号化方法、装置、デバイスおよび機械可読記憶媒体に関する。
完全な映像符号化は一般的に予測、変換、量子化、エントロピー符号化、フィルタリングなどの操作を含む。予測はイントラ予測とインター予測に分けることができ、イントラ予測は、周辺の符号化済みユニットを参照として現在の未符号化ユニットに対して予測を行い、空間的冗長性を効果的に除去する。インター予測は、隣接する符号化済み画像を用いて現在の画像を予測し、時間的冗長性を効果的に除去する。
汎用映像符号化（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、ＶＶＣと略称）規格に採用される代替時間動きベクトル予測（Ａｌｔｅｒｎａｔｉｖｅ Ｔｅｍｐｏｒａｌ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ、ＡＴＭＶＰと略称）技術は時間サブブロックの動き情報を利用して、現在の符号化ユニット中の各サブブロックに異なる動き情報を提供する。
これに鑑みて、本発明は復号方法、符号化方法、装置、デバイスおよび機械可読記憶媒体を提供する。
本発明の実施例の第１の態様によれば、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得するステップと、前記強化時間動きベクトル予測モードフラグの値が第１の数値の場合、前記現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップと、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップと、前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップと、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップと、を含む復号方法が提供される。
本発明の実施例の第２の態様によれば、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップと、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップと、強化時間候補リストにおける各強化時間動きベクトル予測モード番号を順にトラバースし、各強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップと、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップと、前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップと、強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送するステップと、を含む符号化方法が提供される。
本発明の実施例の第３の態様によれば、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得するための取得ユニットと、前記強化時間動きベクトル予測モードフラグの値が第１の数値の場合、前記現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するための第１の決定ユニットと、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するための構築ユニットと、前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するための第２の決定ユニットと、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するための第３の決定ユニットと、を含む復号装置が提供される。
本発明の実施例の第４の態様によれば、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するための第１の決定ユニットと、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するための構築ユニットと、強化時間候補リストにおける各強化時間候補モードを順にトラバースし、各モードに対応するターゲットマッチング符号化ユニットの座標情報を決定するための第２の決定ユニットと、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するための第３の決定ユニットと、前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うための動き補償ユニットと、強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送するための符号化ユニットと、を含む符号化装置が提供される。
本発明の実施例の第５の態様によれば、プロセッサと機械可読記憶媒体とを含み、前記機械可読記憶媒体には、前記プロセッサによって実行可能な機械実行可能命令が記憶され、前記プロセッサは第１の態様の復号方法を実施するように機械実行可能命令を実行するために用いられる、復号デバイスが提供される。
本発明の実施例の第６の態様によれば、プロセッサと機械可読記憶媒体とを含み、前記機械可読記憶媒体には、前記プロセッサによって実行可能な機械実行可能命令が記憶され、前記プロセッサは第２の態様の符号化方法を実施するように機械実行可能命令を実行するために用いられる、符号化デバイスが提供される。
本発明の実施例の第７の態様によれば、プロセッサにより実行されると第１の態様または第２の態様に記載の方法が実施される機械実行可能命令を記憶する機械可読記憶媒体が提供される。
本発明の実施例の復号方法は、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値および強化時間動きベクトル予測モードインデックス値を取得し、強化時間動きベクトル予測モードフラグの値が第１の数値の場合、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定し、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築し、強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定し、ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することにより、符号化・復号性能を向上させた。
本発明の例示的な一実施例に示す符号化・復号方法の概略図である。 本発明の例示的な一実施例に示すＣｌｉｐ操作の概略図である。 本発明の例示的な一実施例に示す復号方法のフローチャートである。 本発明の例示的な一実施例に示すマッチング符号化ユニットをオフセットするときの参照ブロックの概略図である。 本発明の例示的な一実施例に示す現在の符号化ユニットの第１の周辺ブロックの概略図である。 本発明の例示的な一実施例に示す別の復号方法のフローチャートである。 本発明の例示的な一実施例に示す復号装置の構造の概略図である。 本発明の例示的な一実施例に示す別の復号装置の構造の概略図である。 本発明の例示的な一実施例に示す復号デバイスのハードウェア構造の概略図である。 本発明の例示的な一実施例に示す符号化装置の構造の概略図である。 本発明の例示的な一実施例に示す符号化デバイスのハードウェア構造の概略図である。
ここでは、例示的な実施例について詳細に説明し、その例を図面において表示する。以下の説明が図面にかかわる場合、特に断りのない限り、異なる図面中の同一の数字は同一または類似の要素を表す。以下の例示的な実施例において説明される実施形態は、本発明に一致するすべての実施形態を代表するものではない。逆に、それらは、添付の特許請求の範囲に詳しく記載されるような、本発明のいくつかの態様に一致する装置および方法の例に過ぎない。
本発明において使用される用語は、特定の実施例を説明するためのものに過ぎず、本発明を限定するものではない。本発明および添付の特許請求の範囲において使用される単数形の「一種」、「前記」および「当該」は、文脈において他の意味が明確に示されない限り、複数形を含むことも意図している。
以下、当業者が本発明の実施例にて提供される技術的解決手段をよりよく理解できるように、本発明の実施例にかかわる技術用語の一部、および従来の映像符号化・復号の主なフローについて簡単に説明する。
以下、当業者が本発明の実施例にて提供される技術的解決手段をよりよく理解できるように、まず本発明の実施例にかかわる技術用語の一部について簡単に説明する。
技術用語：
１、予測画素（Ｐｒｅｄｉｃｔｉｏｎ Ｓｉｇｎａｌ）：符号化・復号済みの画素から導出された画素値を指し、元の画素と予測画素との差により残差を得、さらに残差変換量子化および係数符号化を行う。
例示的に、インター予測画素とは現在の画像ブロックの参照フレーム（再構成画素フレーム）から導出された画素値であり、画素位置が離散的であるため、内挿演算によって最終的な予測画素を取得する必要がある。予測画素と元の画素が近いほど、両者を減算して得られた残差エネルギーが小さくなり、符号化圧縮性能が高くなる。
２、動きベクトル（Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ、ＭＶと略称）：インター符号化において、ＭＶで現在の符号化ユニットとその参照画像中の最適なマッチング符号化ユニットとの間の相対的な変位を表す。分割された各ブロック（サブブロックと呼ばれてもよい）はいずれも復号側に伝送する必要のある対応する動きベクトルを有する。各サブブロックのＭＶを独立して符号化と送信を行うと、特に小さなサイズに分割されたサブブロックについて、かなりのビットを消費する必要がある。ＭＶの符号化のためのビット数を低減するために、映像符号化において隣接する画像ブロック間の空間的相関性を利用し、隣接する符号化済みブロックのＭＶに基づいて現在の符号化対象のブロックのＭＶを予測し、予測差を符号化する。こうするとＭＶを表すビット数を効果的に低減することができる。これを基に、現在の画像ブロックのＭＶを符号化する過程において、一般的には、まず隣接する符号化済みブロックのＭＶを用いて現在の画像ブロックのＭＶを予測し、ＭＶの予測値（Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ、ＭＶＰと略称）と動きベクトルの実際の推定値との差、すなわち差分動きベクトル（ＭｏｔｉｏｎＶｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ、ＭＶＤと略称）を符号化し、それによりＭＶの符号化のビット数を効果的に低減する。
３、動き情報（Ｍｏｔｉｏｎ Ｉｎｆｏｒｍａｔｉｏｎ）：ＭＶは現在の符号化ユニットとある参照画像中の最適なマッチング符号化ユニットとの相対的な変位を表すので、画像ブロック向けの情報を正確に取得するために、ＭＶ情報の他に、参照画像インデックス情報でどの参照画像を用いたかを表す必要がある。映像符号化技術において、現在の画像に対して、一般的には一定の原則に基づいて、参照画像リストを作成し、参照画像インデックス情報は現在の画像ブロックが参照画像リストにおける何番目の参照画像を用いたかを表す。また、多くの符号化技術は複数の参照画像リストをサポートするので、さらにどの参照画像リストを用いたかを示す１つのインデックス値が必要とされ、当該インデックス値は参照方向と呼ばれてもよい。映像符号化において、ＭＶ、参照フレームインデックス、参照方向など、動きに関する符号化情報を動き情報と総称し、例えば、動き情報は、予測参照モードと、Ｌ０動きベクトルと、Ｌ１動きベクトルと、Ｌ０参照インデックスと、Ｌ１参照インデックスとからなるインター予測のための５タプルである。
４、レート歪み最適化（Ｒａｔｅ－Ｄｉｓｔｏｒｔｉｏｎ Ｏｐｔｉｍｉｚｅｄ、ＲＤＯと略称）原則：符号化効率を評価する指標はビットレートとピーク信号対雑音比（Ｐｅａｋ Ｓｉｇｎａｌ ｔｏ Ｎｏｉｓｅ Ｒａｔｉｏ、ＰＳＮＲと略称）とを含む。ビットレートが小さければ小さいほど、圧縮率が大きく、ＰＳＮＲが大きければ大きいほど、再構成画像品質が良好である。モードを選択する際に、判別式は実質的に両者に対する総合的な評価となる。モードに対応するコスト：
Ｊ（ｍｏｄｅ）＝Ｄ＋λ＊Ｒ。
ここで、Ｄは歪み（Ｄｉｓｔｏｒｔｉｏｎ）を表し、一般的にはＳＳＥ（Ｓｕｍ ｏｆ ｔｈｅ Ｓｑｕａｒｅｄ Ｅｒｒｏｒｓ、残差平方和）指標を用いて評価され、ＳＳＥとは、再構成ブロックとソース画像ブロックとの残差平方和であり、λはラグランジュ乗数であり、Ｒは当該モードにおいて画像ブロックの符号化に必要な実際のビット数であり、符号化モード情報、動き情報、残差などに必要なビット数の総和を含む。
モードを選択する際に、ＲＤＯ原則を用いて符号化モードを比較決定すれば、通常、最適な符号化性能が保証できる。
５、双方向オプティカルフロー（ＢＩ－ｄｉｒｅｃｔｉｏｎａｌ Ｏｐｔｉｃａｌ ｆｌｏｗ、ＢＩＯと略称）：ＢＩＯ技術は、前方向および後方向参照フレームにおける画素値の勾配情報を利用して現在の符号化ユニットにオプティカルフロー補償値を追加する。例示的に、ＢＩＯの技術的詳細は以下のとおりであってもよい。
５．１、勾配の和Ｓ１、Ｓ２、Ｓ３、Ｓ５、Ｓ６を計算する。
ここで、
、
およびθ（ｉ，ｊ）の計算は以下のとおりである。
ここで、Ｉ（０）（ｘ，ｙ）およびＩ（１）（ｘ，ｙ）は前方向動き補償値、後方向動き補償値およびその拡張値である。その拡張方式はブロック境界の動き補償値からコピーしてもよいし、参照画素位置から取得してもよい。
および
は画素点の前方向参照フレームおよび後方向参照フレームにおける水平成分および垂直成分の変化率である。θ（ｉ，ｊ）は前方向動き補償値およびその拡張値と、後方向動き補償値およびその拡張値との画素差分値を表す。
５．２、続いて、改善動きベクトルｖｘおよびｖｙを計算する。
ここで、＜＜は左シフト演算子であり、「ｘ＞ｙ？ｚ：ａ」は「ｘ＞ｙ」が成立する場合、値がｚであり、「ｘ＞ｙ」が成立しない場合、値がａであることを表し、ｍとｔｈＢＩＯはいずれも閾値であり、ｒは正則化項であり、ゼロ除算操作を避ける。Ｓ１、Ｓ２、Ｓ３、Ｓ５およびＳ６は画素の勾配の和であり、ｃｌｉｐ３は中の値が－ｔｈＢＩＯとｔｈＢＩＯとの間にあることを保証することを表す。
５．３、改善動きベクトルに基づいてオプティカルフローオフセット値ｂを取得する。
ここで、（ｘ，ｙ）は現在の符号化ユニット内部の各画素の座標であり、Ｉ（０）（ｘ，ｙ）およびＩ（１）（ｘ，ｙ）は前方向動き補償値、後方向動き補償値およびその拡張値である。
５．４、最後にオプティカルフローオフセット値に基づいて現在の符号化ユニットの各画素の予測値ｐｒｅｄＢＩＯ（ｘ，ｙ）を計算する。
ここで、Ｉ（０）（ｘ，ｙ）およびＩ（１）（ｘ，ｙ）は前方向動き補償値および後方向動き補償値である。
６、復号側動きベクトル調整（Ｄｅｃｏｄｅｒ－ｓｉｄｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｆｉｎｅｍｅｎｔ、ＤＭＶＲと略称）：復号側動きベクトル調整技術ＤＭＶＲはダイレクトモードまたはスキップモードに適用される。
例示的に、ＤＭＶＲの技術的詳細は以下のとおりである。
６．１、初期ＭＶを利用して予測ブロックと検索領域内に必要な参照画素を取得する。
６．２、最適な整数画素位置を取得する。
例示的に、現在の符号化ユニットの輝度画像ブロックを、重ならず、且つ位置が隣接するサブブロックに分割し、すべてのサブブロックの初期ＭＶはＭＶ０とＭＶ１である。各サブブロックについて、初期ＭＶ０およびＭＶ１に対応する位置を中心として、近傍の一定範囲内でテンプレートマッチング歪みが最も小さい位置を探し始め、テンプレートマッチング歪みの計算方式は前方向検索領域における中心位置からのサブブロック幅にサブブロック高さをかけたブロックと、後方向検索領域における中心位置からのサブブロック幅にサブブロック高さをかけたブロックとの間のＳＡＤ（Ｓｕｍ ｏｆ Ａｂｓｏｌｕｔｅ Ｄｉｆｆｅｒｅｎｃｅｓ、差分絶対値和）値を計算することである。
６．３、最適な副画素位置を取得する。
例示的に、副画素位置の確認は整数位置の最適位置、その左側、その右側、その上方、およびその下方の合計で５箇所のテンプレートマッチング歪み値を用い、整数位置の最適位置近傍の二次歪み平面を推定し、歪み平面における歪みが最も小さい位置を算出して副画素位置とする。その計算式は以下のとおりである。
水平副画素位置＝（ｓａｄ＿ｌｅｆｔ－ｓａｄ＿ｒｉｇｈｔ）＊Ｎ／（（ｓａｄ＿ｒｉｇｈｔ＋ｓａｄ＿ｌｅｆｔ－２＊ｓａｄ＿ｍｉｄ）＊２）
垂直副画素位置＝（ｓａｄ＿ｂｔｍ－ｓａｄ＿ｔｏｐ）＊Ｎ／（（ｓａｄ＿ｔｏｐ＋ｓａｄ＿ｂｔｍ－２＊ｓａｄ＿ｍｉｄ）＊２）
ここで、ｓａｄ＿ｍｉｄ、ｓａｄ＿ｌｅｆｔ、ｓａｄ＿ｒｉｇｈｔ、ｓａｄ＿ｔｏｐおよびｓａｄ＿ｂｔｍは、それぞれ整数位置の最適位置、その左側、その右側、その上方、およびその下方の合計で５箇所のテンプレートマッチング歪み値であり、Ｎは精度である。
６．４、最適ＭＶに基づいて、最終予測ブロックを算出する。
以下、従来の映像符号化・復号の主なフローについて簡単に説明する。
図１中の（ａ）に示すように、映像符号化を例とし、映像符号化は一般的に予測、変換、量子化、エントロピー符号化などのプロセスを含み、さらに、符号化プロセスは図１中の（ｂ）のフレームワークに従って実現することができる。
ここで、予測はイントラ予測とインター予測に分けることができ、イントラ予測は、周辺の符号化済みブロックを参照として現在の未符号化ブロックに対して予測を行い、空間的冗長性を効果的に除去する。インター予測は、隣接する符号化済み画像を用いて現在の画像を予測し、時間的冗長性を効果的に除去する。
変換とは、画像を空間領域から変換領域に変換することであり、変換係数を用いて画像を表す。ほとんどの画像は多くの平坦な領域およびゆっくりと変化する領域を含み、適切な変換により画像を空間領域における分散した分布から変換領域における相対的集中した分布に変換することができ、信号間の周波数領域の相関性を除去し、量子化プロセスと合わせて、ビットストリームを効果的に圧縮することができる。
エントロピー符号化は可逆符号化方式であり、一連の要素記号を伝送または記憶のためのバイナリストリームに変換することができ、入力された記号は量子化された変換係数、動きベクトル情報、予測モード情報、変換量子化に関連するシンタックスなどを含み得る。エントロピー符号化は映像要素記号の冗長性を効果的に除去することができる。
以上は符号化を例として紹介し、映像復号は映像符号化のプロセスに対応しており、すなわち映像復号は一般的にエントロピー復号、予測、逆量子化、逆変換、フィルタリングなどのプロセスを含み、各プロセスの実現原理は映像符号化と同一または類似である。
以下、ＡＴＭＶＰ技術の実現について簡単に説明する。
従来のＡＴＭＶＰ技術の実現は主に以下のフローを含む。
１）、時間動きベクトル予測（Ｔｅｍｐｏｒａｌ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ、ＴＭＶＰと略称）の決定：現在の符号化ユニットのＡ０位置の動き情報が以下の条件を満たすか否かを判断する。
ａ）Ａ０位置が存在し、且つ現在の符号化ユニットと同一のスライス（Ｓｌｉｃｅ）およびユニット（Ｕｎｉｔ）にあり、
ｂ）Ａ０位置の予測モードがインターモードであり、
ｃ）Ａ０位置の参照フレームインデックスが現在のフレームのｃｏ－ｌｏｃａｔｅｄフレームの参照フレームインデックスに一致する（まずＬ０方向を判断し、続いてＬ１方向を判断する）。
ここで、Ａ０位置は（ｘＣｂ－１，ｙＣｂ＋ＣｂＨｅｉｇｈｔ－１）の位置であり、（ｘＣｂ，ｙＣｂ）は現在のユニットの左上隅の座標であり、ＣｂＨｅｉｇｈｔは現在の符号化ユニットの高さである。
２）、中心参照ブロックの位置の計算：ステップ１）で取得したＴＭＶＰの精度は１／１６であり、４ビット右シフトして整数画素に変換する必要がある。また、参照ブロックの位置を現在のＬＣＵ（Ｌａｒｇｅｓｔ Ｃｏｄｉｎｇ Ｕｎｉｔ、最大符号化ユニット）の参照フレームにおけるコロケーテッドＬＣＵの範囲内にクリップ（Ｃｌｉｐ）し、すなわち参照ブロックの位置が現在のＬＣＵの参照フレームにおけるコロケーテッドＬＣＵの範囲内にない場合、参照ブロックを現在のＬＣＵの参照フレームにおけるコロケーテッドＬＣＵの範囲内にちょうどあるように水平または／および垂直方向にシフトする必要があり、その概略図を図２に示す。
中心参照ブロックの位置の計算方式は以下に示すとおりである。
ｘＣｏｌＣｂ＝Ｃｌｉｐ３（ｘＣｔｂ，Ｍｉｎ（ＰｉｃＷｉｄｔｈ－１，ｘＣｔｂ＋（１＜＜ＣｔｂＬｏｇ２Ｓｉｚｅ）＋３），ｘＣｏｌＣｔｒＣｂ＋（ｔｅｍｐＭｖ［０］＞＞４））
ｙＣｏｌＣｂ＝Ｃｌｉｐ３（ｙＣｔｂ，Ｍｉｎ（ＰｉｃＨｅｉｇｈｔ－１，ｙＣｔｂ＋（１＜＜ＣｔｂＬｏｇ２Ｓｉｚｅ）－１），ｙＣｏｌＣｔｒＣｂ＋（ｔｅｍｐＭｖ［１］＞＞４））
ここで、（ｘＣｏｌＣｂ，ｙＣｏｌＣｂ）は中心参照ブロックの左上隅の座標であり、（ｘＣｔｂ，ｙＣｔｂ）は現在のＬＣＵの参照フレームにおけるコロケーテッドＬＣＵの左上隅の座標であり、ＰｉｃＷｉｄｔｈおよびＰｉｃＨｅｉｇｈｔはそれぞれ現在のフレームの幅および高さであり、ＣｔｂＬｏｇ２Ｓｉｚｅは２を底とした現在のＬＣＵのサイズの対数であり、（ｘＣｏｌＣｔｒＣｂ，ｙＣｏｌＣｔｒＣｂ）は現在の符号化ユニットの中心位置の座標であり、ｔｅｍｐＭｖ［０］およびｔｅｍｐＭｖ［１］はそれぞれＡ０位置の水平動きベクトルおよび垂直動きベクトルである。
３）、中心参照ブロックの予測モードを判断し、予測モードが非インター予測モードであれば、ｃｔｒＰｒｅｄＦｌａｇＬ０およびｃｔｒＰｒｅｄＦｌａｇＬ１はいずれも０であり、それ以外の場合、すなわち予測モードがインター予測モードであれば、ステップ４）に移行する。
４）、参照位置の調整：サブブロックのサイズが８＊８であるため、動き情報は８＊８を単位とする。したがって、中心参照ブロックの左上隅の座標を８倍の座標位置に調整する必要がある。調整式は以下のとおりである。
ｘＣｏｌＣｂ＝（（ｘＣｏｌＣｂ＞＞３）＜＜３）
ｙＣｏｌＣｂ＝（（ｙＣｏｌＣｂ＞＞３）＜＜３）
５）、調整された中心参照ブロックの動き情報の取得：調整された中心参照ブロックの予測モードがイントラ予測またはイントラブロックコピー（Ｉｎｔｒａ Ｂｌｏｃｋ Ｃｏｐｙ、ＩＢＣと略称）モードであれば、ＦｌａｇＬＸＣｏｌ＝０であり、それ以外の場合、調整された中心参照ブロックのＬ０とＬ１方向の動き情報が存在するか否かをそれぞれ判断し、存在すれば、ＦｌａｇＬＸＣｏｌ＝１であり、調整された中心参照ブロックのＬ０とＬ１方向の動き情報を取得する。
例示的に、ＬＸ＝Ｌ０またはＬＸ＝Ｌ１であり、調整された中心参照ブロックの予測モードがイントラ予測モードまたはイントラブロックコピーモードである場合、ＦｌａｇＬ０Ｃｏｌ＝０、且つＦｌａｇＬ１Ｃｏｌ＝０である。
調整された中心参照ブロックの予測モードがイントラ予測でも、イントラブロックコピーモードでもない場合、調整された中心参照ブロックのＬ０方向の動き情報が存在するとき、ＦｌａｇＬ０Ｃｏｌ＝１であり、調整された中心参照ブロックのＬ０方向の動き情報が存在しないとき、ＦｌａｇＬ０Ｃｏｌ＝０であり、調整された中心参照ブロックのＬ１方向の動き情報が存在するとき、ＦｌａｇＬ１Ｃｏｌ＝１であり、調整された中心参照ブロックのＬ１方向の動き情報が存在しないとき、ＦｌａｇＬ１Ｃｏｌ＝０である。
ＦｌａｇＬＸＣｏｌ＝１の場合、現在のフレームの長期参照フレームとｃｏ－ｌｏｃａｔｅｄフレームの長期参照フレームが等しくなければ、調整された中心参照ブロックの動き情報が利用不可であると決定し、ｃｔｒＰｒｅｄＦｌａｇＬＸ＝０であり、それ以外の場合、調整された中心参照ブロックの動き情報をＬｉｓｔＸ（Ｘ＝０または１）の最初のフレームを指すようにスケール（ｓｃａｌｅ）し、現在の中心参照ブロック位置の動き情報とし、ｃｔｒＰｒｅｄＦｌａｇＬＸ＝１である。
６）、ｃｔｒＰｒｅｄＦｌａｇＬＸ＝１の場合、各サブブロックの動き情報の計算：マッチング符号化ユニット中の各サブブロックをトラバースし、いずれかのサブブロックについて、当該サブブロックをマッチング符号化ユニットが位置するＬＣＵの範囲内にｃｌｉｐし、ｃｌｉｐ後のサブブロックの動き情報が利用可能であれば、当該ｃｌｉｐ後のサブブロックの動き情報をＬｉｓｔＸの最初のフレームを指すようにスケールし、スケール後の動き情報を現在の符号化ユニットに対応する位置のサブブロックに与え、ｃｌｉｐ後のサブブロックの動き情報が利用不可であれば、調整された中心参照ブロックの中心位置の動き情報をＬｉｓｔＸの最初のフレームを指すようにスケールし、スケール後の動き情報を現在の符号化ユニットに対応する位置のサブブロックに与える。
例示的に、現在の符号化ユニットの隣接ブロックの動き情報により、ｃｏ－ｌｏｃａｔｅｄ（共同位置）フレームにおいて現在の符号化ユニットの隣接符号化ユニットに対応する符号化ユニットを検索し、ｃｏ－ｌｏｃａｔｅｄフレームにおける現在の符号化ユニットに対応する位置の符号化ユニットの内部の各サブブロックの動き情報を現在の符号化ユニット中の各サブブロックに提供して使用させてもよい。
ｃｏ－ｌｏｃａｔｅｄフレームにおいて現在の符号化ユニットに対応する位置の符号化ユニットを検索することは現在の符号化ユニットの周辺の符号化ユニットの動き情報に依存する必要があり、周辺の符号化ユニットの動き情報が正確でなければ、検索で得られた対応する位置の符号化ユニットの動き情報も信頼できず、それにより符号化・復号性能に影響を与える。
マッチング符号化ユニットの動作情報の信頼性を向上させ、符号化・復号性能を最適化するために、本発明の実施例は、現在の符号化ユニットのｃｏ－ｌｏｃａｔｅｄフレームにおけるコロケーテッド符号化ユニットの動き情報を利用してマッチング符号化ユニットを決定し、検索で得られたマッチング符号化ユニットに対して上下左右など、一連のオフセットを行い、複数の時間候補モードを生成し、周辺の符号化ユニットの動き情報の不正確によるマッチング符号化ユニットが正確に見つからないという問題をある程度で回避する。
本発明の実施例の主な実現フローは以下の６つの部分を含み得る。
第１の部分（Ａと記されてもよい）において、現在の符号化ユニットの符号化／復号条件に基づいて、強化時間動きベクトル予測（Ｅｎｈａｎｃｅｄ Ｔｅｍｐｏｒａｌ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ、ＥＴＭＶＰと略称）モードフラグと強化時間動きベクトル予測モードインデックス値とを符号化／解析する。
第２の部分（Ｂと記されてもよい）において、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定する。
第３の部分（Ｃと記されてもよい）において、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築する。
第４の部分（Ｄと記されてもよい）において、強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補モードリストにおいて対応する強化時間動きベクトル予測モードを取得し、当該強化時間動きベクトル予測モードに対応するターゲットマッチング符号化ユニットの座標情報を決定する。
第５の部分（Ｅと記されてもよい）において、ターゲットマッチング符号化ユニットの座標情報に基づいて、現在の符号化ユニット中の各サブブロックの動き情報を取得する。
第６の部分（Ｆと記されてもよい）において、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行う。
例示的に、上記の６つの部分の順序を調整してもよい。
以下、本発明の実施例の上記目的、特徴および利点をより明らかにするために、図面を参照しながら本発明の実施例における技術的解決手段について一層詳細に説明する。
図３に示すように、本発明の実施例にて提供される復号方法のフローチャートであり、ここで、当該復号方法は復号デバイスに適用することができ、図３に示すように、当該復号方法は以下のステップを含み得る。
ステップＳ３００において、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得する。
本発明の実施例において、現在の符号化ユニットは処理対象の画像中のいずれかの符号化ユニットであってもよい。実施する際に、処理対象の画像を異なる符号化ユニットに分割し、各符号化ユニットを一定の順序に従って順次処理してもよい。ここで、各符号化ユニットのサイズおよび形状は予め設定された分割ルールに基づいて設定してもよい。
例示的に、現在の符号化ユニットを復号する場合、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得してもよい。
例示的に、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値をビットストリームから解析してもよく、または、現在の符号化ユニットが一定の条件を満たす場合に導出してもよい。
例示的に、現在の符号化ユニットの強化時間動きベクトル予測モードインデックス値をビットストリームから解析してもよく、または、現在の符号化ユニットが一定の条件を満たす場合に導出してもよい。
取得した現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値が第１の数値の場合、ステップＳ３１０～ステップＳ３４０を実行する。
例示的に、強化時間動きベクトル予測モードフラグの値は、強化時間動きベクトル予測モードをイネーブルすることを示す値（本明細書では第１の数値と呼ばれ、例えば１である）を含み得る。
ステップＳ３１０において、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定する。
本発明の実施例において、取得した現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値が第１の数値の場合、現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすると決定してもよく、この場合、初期マッチング符号化ユニットの座標情報の決定を行ってもよい。
例示的に、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定してもよい。
例示的に、当該初期マッチング符号化ユニットの座標情報は当該初期マッチング符号化ユニットの対応する参照画像における座標情報、例えば左上隅座標であってもよい。
ステップＳ３２０において、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築する。
本発明の実施例において、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定した場合、当該初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築してもよい。
例示的に、当該強化時間候補リストは少なくとも１つの強化時間動きベクトル予測モード番号を含む。
例示的に、異なる強化時間動きベクトル予測モード番号に対応するマッチング符号化ユニットの座標情報が異なってもよい。
ステップＳ３３０において、強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、当該強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定する。
本発明の実施例において、ステップＳ３００で取得した現在の符号化ユニットの強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、当該強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定してもよい。
例示的に、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット、または、初期マッチング符号化ユニットに対して上／下／左／右オフセットを行うことにより得られたマッチング符号化ユニットを含み得る。
例示的に、ターゲットマッチング符号化ユニットの座標情報は初期マッチング符号化ユニットの座標情報に一致し、または、初期マッチング符号化ユニットの座標情報を基に、予め設定されたオフセット量に従って調整して得られてもよい。
ステップＳ３４０において、ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定する。
本発明の実施例において、ターゲットマッチング符号化ユニットの座標情報を決定した場合、当該ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニットの動き情報を決定してもよい。例示的に、ターゲットマッチング符号化ユニットの動き情報はターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含む。
例示的に、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定してもよい。例えば、ターゲットマッチング符号化ユニット中のｈ行目、ｌ列目のサブブロックの動き情報に基づいて、現在の符号化ユニット中のｈ行目、ｌ列目のサブブロックの動き情報を決定する。
いくつかの実施例において、ステップＳ３００において、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を取得するステップは、現在の符号化ユニットが第１の解析条件を満たす場合、ビットストリームから強化時間動きベクトル予測モードのフラグの値を解析するステップと、それ以外の場合、強化時間動きベクトル予測モードフラグの値が第２の数値であると決定するステップであって、当該強化時間動きベクトル予測モードフラグの値が第２の数値であることは現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示すステップと、を含み得る。
例示的に、強化時間動きベクトル予測モードの使用には一般的に一定の条件を満たすことが必要であることが考慮され、当該条件を満たさない場合に、強化時間動きベクトル予測モードは適用できない可能性があり、この場合に、強化時間動きベクトル予測モードフラグの値はビットストリームから解析する必要がなく、導出してもよい。
例示的に、現在の符号化ユニットが指定条件（本明細書では第１の解析条件と呼ばれる）を満たすか否かに基づいて、ビットストリームから現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を解析し、または、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を導出すると決定してもよい。
例示的に、現在の符号化ユニットが第１の解析条件を満たす場合、ビットストリームから現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を解析し、現在の符号化ユニットが第１の解析条件を満たさない場合、ビットストリームから現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を解析する必要がなく、現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないと決定してもよく、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値は、現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示すための値（本明細書では第２の数値と呼ばれる）である。
一例において、上記の現在の符号化ユニットが第１の解析条件を満たすことは、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たすことと、シーケンスレベルのハイレベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることと、現在の符号化ユニットが角度重み付け予測の利用条件を満たし、または究極の動きベクトル表現（Ｕｌｔｉｍａｔｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｅｘｐｒｅｓｓｉｏｎ、ＵＭＶＥ）の利用条件を満たすこととのうちの１つまたは複数を含み得る。
例示的に、時間動きベクトル予測モードの利用には符号化ユニットの予測モードおよびサイズなどに対して一定の要件が求められることを考慮すると、符号化ユニットの予測モードおよび／またはサイズなどが要件を満たすか否かに基づいて、符号化ユニットが適用するか否かを決定してもよい。
また、高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されないことを考慮すると、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルしないと決定してもよい。
例示的に、現在の符号化ユニットの予測モードがスキップ（ｓｋｉｐ）モードまたはダイレクト（ｄｉｒｅｃｔ）モードであり、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たし、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可され、現在の符号化ユニットが角度重み付け予測（Ａｎｇｌｅ Ｗｅｉｇｈｔ Ｐｒｅｄｉｃｔｉｏｎ、ＡＷＰと略称）の利用条件を満たし、または究極の動きベクトル表現（Ｕｌｔｉｍａｔｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｅｘｐｒｅｓｓｉｏｎ、ＵＭＶＥと略称）の利用条件を満たすなどの条件のうちの１つまたは複数が満たされる場合、現在の符号化ユニットが第１の解析条件を満たすと決定する。
例えば、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードの場合、または、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たす場合、または、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可される場合、または、現在の符号化ユニットが角度重み付け予測の利用条件を満たし、若しくは究極の動きベクトル表現の利用条件を満たす場合、現在の符号化ユニットが第１の解析条件を満たすと決定する。
例えば、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードの場合、現在の符号化ユニットが第１の解析条件を満たすと決定する。
例えば、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たす場合、現在の符号化ユニットが第１の解析条件を満たすと決定する。
例えば、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可される場合、現在の符号化ユニットは第１の解析条件を満たすと決定する。
例えば、現在の符号化ユニットが角度重み付け予測の利用条件を満たし、または究極の動きベクトル表現の利用条件を満たす場合、現在の符号化ユニットが第１の解析条件を満たすと決定する。
また、例えば、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであり、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たし、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可される場合、すなわち上記条件はいずれも満たされる場合、現在の符号化ユニットが第１の解析条件を満たすと決定してもよい。
また、例えば、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであり、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たし、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可され、且つ、現在の符号化ユニットが角度重み付け予測の利用条件を満たし、若しくは究極の動きベクトル表現の利用条件を満たす場合、すなわち上記条件はいずれも満たされる場合、現在の符号化ユニットが第１の解析条件を満たすと決定してもよい。
例示的に、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たすことは現在の符号化ユニットの幅および高さがいずれもＮ０以上であることを含み得る。例示的に、Ｎ０＝８である。
なお、上記の現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たすという記載は本発明の実施例における関連実現の具体的な例に過ぎず、本発明の保護範囲を限定するものではなく、本発明の実施例において、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たすことは、例えば、現在の符号化ユニットの幅がＮ０以上であり、現在の符号化ユニットの高さがＮ０以上であり、または、現在の符号化ユニットの高さおよび幅がいずれもＮ０以上であり、且つ幅および高さがＮ０に同時に等しくないなど、他の状況を含み得る。
例示的に、現在の符号化ユニットが角度重み付け予測の利用条件を満たすことは、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが角度重み付け予測技術をイネーブルすることが許可されることと、現在の符号化ユニットの幅および高さがいずれもＮ１以上であり、現在の符号化ユニットの幅および高さがいずれもＮ２以下であることと、現在の画像フレームタイプがＢピクチャであることと、を含み得る。
例示的に、現在の符号化ユニットが究極の動きベクトル表現の利用条件を満たすことは、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが究極の動きベクトル表現技術をイネーブルすることが許可されることを含み得る。
一例において、現在の符号化ユニットが第１の解析条件を満たすことは、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、現在の符号化ユニットのサイズが、現在の符号化ユニットの幅および高さがいずれもＮ０以上であるというサイズ制限を満たすことと、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることと、前記現在の符号化ユニットが角度重み付け予測の利用条件を満たし、または究極の動きベクトル表現の利用条件を満たすことと、を含む。
一例において、強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディング（Ｃｏｎｔｅｘｔ－ｂａｓｅｄ Ａｄａｐｔｉｖｅ Ｂｉｎａｒｙ Ａｒｉｔｈｍｅｔｉｃ Ｃｏｄｉｎｇ，ＣＡＢＡＣ）を用いるとともに、１つのコンテキストモデルを用いてもよい。
別の例において、強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いるとともに、複数のコンテキストモデルを用いてもよい。例示的に、当該複数のコンテキストモデルは、現在の符号化ユニットのサイズに基づいて決定されてもよい。例示的に、現在の符号化ユニットのサイズは、現在の符号化ユニットの幅および／または高さ、現在の符号化ユニットの幅と高さとのうちの最大値若しくは最小値、または現在の符号化ユニットの幅と高さとの積などを含み得るが、これらに限定されない。
いくつかの実施例において、ステップＳ３００において、現在の符号化ユニットの強化時間動きベクトル予測モードインデックス値を取得するステップは、現在の符号化ユニットが第２の解析条件を満たす場合、ビットストリームから強化時間動きベクトル予測モードインデックス値を解析するステップと、それ以外の場合、強化時間動きベクトル予測モードインデックス値が第３の数値であると決定するステップと、を含み得る。
例示的に、強化時間動きベクトル予測モードインデックス値が第３の数値であることは、現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示す。
例示的に、強化時間動きベクトル予測モードの使用には一定の条件を満たすことが必要であることが考慮され、当該条件が満たされない場合に、強化時間動きベクトル予測モードが適用せず、この場合に、強化時間動きベクトル予測モードインデックス値はビットストリームから解析する必要がなく、導出してもよい。
例示的に、現在の符号化ユニットが指定条件（本明細書では第２の解析条件と呼ばれる）を満たす場合、ビットストリームから強化時間動きベクトル予測モードインデックス値を解析してもよく、それ以外の場合、強化時間動きベクトル予測モードインデックス値が第３の数値であると決定してもよく、当該強化時間動きベクトル予測モードインデックス値が第３の数値であることは、現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示す。
例示的に、第３の数値は上記の第１の数値または第２の数値と同じであってもよく、または、第３の数値は上記の第１の数値および第２の数値のいずれとも異なってもよい。
一例において、現在の符号化ユニットが第２の解析条件を満たすことは、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることとのうちの１つまたは複数を含み得る。
一例において、強化時間動きベクトル予測モードインデックス値の逆二値化は最大値が４のトランケーテッド・ユーナリに基づいて実現され、前記トランケーテッド・ユーナリは最大４つのバイナリ文字列を用い、各バイナリ文字は単独のコンテキストモデルを用い、合計で４つのコンテキストモデルを用いる。
例示的に、符号化ビットのオーバーヘッドを節約し、符号化・復号性能を向上させるために、強化時間動きベクトル予測モードインデックス値の逆二値化は最大値が４のトランケーテッド・ユーナリに基づいて実現され、前記トランケーテッド・ユーナリは最大４つのバイナリ文字列を用い、各バイナリ文字は単独のコンテキストモデルを用い、合計で４つのコンテキストモデルを用いる。
例えば、強化時間動きベクトル予測モードインデックス値の逆二値化の実現は表１を参照してもよい。
ここで、ｃｕ＿ｅｔｍｖｐ＿ｃａｎｄ＿ｉｎｄｅｘは強化時間動きベクトル予測モードインデックス値である。
いくつかの実施例において、ステップＳ３１０において、現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップは、現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定するステップと、前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの時間参照画像における座標情報を決定するステップと、を含む。
例示的に、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するためには、現在の符号化ユニットが位置する画像（本明細書では現在の画像と呼ばれる）のフレームタイプ（すなわち現在の画像フレームタイプ）を決定し、現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定してもよい。
例示的に、現在の画像フレームタイプがＰピクチャであれば、時間参照画像は参照画像リスト０（すなわちＬｉｓｔ０）における参照フレームインデックス値が０の参照画像であり、現在の画像フレームタイプがＢピクチャであれば、時間参照画像は参照画像リスト１（すなわちＬｉｓｔ１）における参照フレームインデックス値が０の参照画像である。
例示的に、マッチング符号化ユニットが位置する時間参照画像を決定した場合、現在の符号化ユニットの座標情報に基づいて、初期マッチング符号化ユニットの当該時間参照画像における座標情報を決定してもよい。
一例において、現在の符号化ユニットの座標情報は現在の符号化ユニットの現在の画像における左上隅座標であり、マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標である。
例示的に、マッチング符号化ユニットは初期マッチング符号化ユニットまたはターゲットマッチング符号化ユニットを含み得、すなわち、以下、特に説明しない限り、言及される初期マッチング符号化ユニットの座標情報は初期マッチング符号化ユニットの左上隅座標を指し、ターゲットマッチング符号化ユニットの座標情報はターゲットマッチング符号化ユニットの左上隅座標を指してもよい。
一例において、現在の符号化ユニットの座標情報に基づいて、初期マッチング符号化ユニットの時間参照画像における座標情報を決定するステップは、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップを含み得る。
例示的に、１つの最大符号化ユニットは１つまたは複数の符号化ユニットを含み得る。
例示的に、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、現在の符号化ユニットのマッチング符号化ユニットの座標情報を決定してもよい。
一例において、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップは、現在の最大符号化ユニットの画像における左上隅横座標、最大符号化ユニットのサイズ、現在の符号化ユニットの幅、現在の画像の幅、現在の符号化ユニットの画像における左上隅横座標に基づいて、初期マッチング符号化ユニットの横座標を決定するステップと、現在の最大符号化ユニットの画像における左上隅縦座標、最大符号化ユニットのサイズ、現在の符号化ユニットの高さ、現在の画像の高さ、現在の符号化ユニットの画像における左上隅縦座標に基づいて、初期マッチング符号化ユニットの縦座標を決定するステップと、を含み得る。
例示的に、現在の符号化ユニットの座標情報を現在の符号化ユニットの現在の画像における左上隅座標とし、マッチング符号化ユニットの座標情報をマッチング符号化ユニットの時間参照画像における左上隅座標とする。
例示的に、画像平面内の右向きを座標系の横軸正方向とし、下向きを座標系の縦軸正方向とする（以下同様）ことを例とする。
例えば、（Ｘｐｏｓ，Ｙｐｏｓ）は現在の符号化ユニットの画像における左上隅座標であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであるとすると、以下の方法によりマッチング符号化ユニットの座標（Ｍｘ，Ｍｙ）を導出する。
Ｍｘ＝Ｃｌｉｐ３（ｘ＿ｃｔｂ＿ｐｏｓ，ｍｉｎ（ｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ，ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ），（（Ｘｐｏｓ＋４）＞＞３）＜＜３）
Ｍｙ＝Ｃｌｉｐ３（ｙ＿ｃｔｂ＿ｐｏｓ，ｍｉｎ（ｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ，ｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ），（（Ｙｐｏｓ＋４）＞＞３）＜＜３）
また、例えば、（Ｘｐｏｓ，Ｙｐｏｓ）は現在の符号化ユニットの画像における左上隅座標であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであるとすると、以下の方法によりマッチング符号化ユニットの座標（Ｍｘ，Ｍｙ）を導出する。
Ｍｘ＝ｍｉｎ（（（Ｘｐｏｓ＋４）＞＞３）＜＜３，ｍｉｎ（ｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ，ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ））
Ｍｙ＝ｍｉｎ（（（Ｙｐｏｓ＋４）＞＞３）＜＜３，ｍｉｎ（ｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ，ｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ））
いくつかの実施例において、ステップＳ３２０において、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、初期マッチング符号化ユニットの座標情報に基づいて、少なくとも１つの強化時間動きベクトル予測モード番号を決定するステップと、少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築するステップと、を含み得る。
例示的に、当該少なくとも１つの強化時間動きベクトル予測モード番号は、初期マッチング符号化ユニットの座標情報に対応する強化時間動きベクトル予測モード番号と、初期マッチング符号化ユニットをオフセットすることにより得られた複数の新たなマッチング符号化ユニット（利用可能の場合）に対応する１つまたは複数の強化時間動きベクトル予測モード番号と、を含み得る。
例示的に、初期マッチング符号化ユニットの座標情報に基づいて、少なくとも１つの強化時間動きベクトル予測モード番号を決定した場合、当該少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築してもよい。
例示的に、強化時間候補リストを構築するとき、当該強化時間候補リストの長さを０に初期化してもよく、すなわち当該強化時間候補リストの初期長さは０である。
例示的に、当該強化時間候補リストの長さは、追加される強化時間動きベクトル予測モード番号の数に応じて長くなってもよい。
一例において、マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標であり、少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築するステップは、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、且つＡ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、且つＡ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、を含み得る。
例示的に、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの座標情報であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さである。
例示的に、Ａ１は初期マッチング符号化ユニットの左上隅の４＊４ブロックであり、Ｂ１はＡ１の真左側の４＊４ブロックであり、Ｃ１はＡ１の真上の４＊４ブロックであり、Ａ２は初期マッチング符号化ユニットの右上隅の４＊４ブロックであり、Ｂ２はＡ２の真右側の４＊４ブロックであり、Ｃ２はＡ２の真上の４＊４ブロックであり、Ａ３は初期マッチング符号化ユニットの左下隅の４＊４ブロックであり、Ｂ３はＡ３の真左側の４＊４ブロックであり、Ｃ３はＡ３の真下の４＊４ブロックであり、Ａ４は初期マッチング符号化ユニットの右下隅の４＊４ブロックであり、Ｂ４はＡ４の真右側の４＊４ブロックであり、Ｃ４はＡ４の真下の４＊４ブロックであり、その概略図は図４に示すとおりであってもよい。
例示的に、マッチング符号化ユニットをオフセットするとき、オフセットの単位は８画素であることを例とする。例えば、マッチング符号化ユニットを下にオフセットするとき、マッチング符号化ユニットを下に８画素オフセットする。
本発明の実施例においてマッチング符号化ユニットを上／下／左／右にオフセットすることにより新たなマッチング符号化ユニットが得られることを考慮すると、候補マッチング符号化ユニットを追加して、新たな候補動き情報を追加する。
マッチング符号化ユニットを下にオフセットすることを例とし、Ａ１とＣ３位置の動き情報が同じであり、且つＡ２とＣ４位置の動き情報が同じである場合、マッチング符号化ユニットを下にオフセットして得られた新たなマッチング符号化ユニットの動き情報が元のマッチング符号化ユニットの動き情報と同じである確率が大きいことを考慮すると、今回のオフセットは新たな動き情報を得ることができない可能性がある。
したがって、Ａ１位置の動き情報とＣ３位置の動き情報、およびＡ２位置の動き情報とＣ４位置の動き情報をそれぞれ比較し、２つの比較結果のうちの少なくとも１つの比較結果が不一致である場合、下にオフセットすることによって新たな動き情報を得ることができ、すなわち下にオフセットするによって得られたマッチング符号化ユニットを候補マッチング符号化ユニットとすることができると決定してもよい。
例示的に、マッチング符号化ユニットをオフセットする場合、さらにオフセットした後に得られた新たなマッチング符号化ユニットのオフセット方向における境界が当該マッチング符号化ユニット（オフセット前のマッチング符号化ユニット）の位置する最大符号化ユニットに対応する座標範囲を超えず、すなわち当該最大符号化ユニットのオフセット方向における境界を超えず、且つ当該マッチング符号化ユニットの位置する画像に対応する座標範囲を超えず、すなわち当該画像のオフセット方向における境界を超えないことを保証する必要がある。
例示的に、上向きのオフセットには、オフセット方向における境界は上境界であり、下向きのオフセットには、オフセット方向における境界は下境界であり、左向きのオフセットには、オフセット方向における境界は左境界であり、右向きのオフセットには、オフセット方向における境界は右境界である。
例示的に、依然として下にオフセットすることを例とし、マッチング符号化ユニットを下にオフセットするとき、オフセット後の縦座標（すなわちＭｙ＋８）はｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ以下である（すなわちオフセット後に得られた新たなマッチング符号化ユニットの下境界はオフセット前のマッチング符号化ユニットが位置する最大符号化ユニットの下境界を超えない）ことが必要である一方で、オフセット後の縦座標はｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ以下である（オフセット後に得られた新たなマッチング符号化ユニットの下境界はオフセット前のマッチング符号化ユニットが位置する画像の下境界を超えない）ことが必要であり、すなわちＭｙ＋８はｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であることが必要である。
一例において、ステップＳ３２０において、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、強化時間候補リストの長さが５未満の場合、強化時間候補リストの長さが５に等しくなるまで、現在の強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号と同じの強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える操作を繰り返すステップをさらに含む。
例示的に、マッチング符号化ユニットを上にオフセットすること、下にオフセットすること、左にオフセットすること、および右にオフセットすることはいずれも利用可能な候補マッチング符号化ユニットを得る場合、候補マッチング符号化ユニットはオフセット前のマッチング符号化ユニットと、マッチングにより得られた４つのマッチング符号化ユニットとを含み得、すなわち強化時間候補リストの長さは５であると考慮する。
復号のロバスト性を向上させ、復号エラーを回避するために、上記方式により構築された強化時間候補リストの長さが５未満の場合、ポリシーによって強化時間候補リストの長さを５に拡張してもよい。
例示的に、強化時間候補リストの長さが５未満の場合、現在の強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号と同じの強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える操作を、強化時間候補リストの長さが５になるまで繰り返してもよい。
いくつかの実施例において、強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップは、
強化時間動きベクトル予測モード番号が０であれば、ＰｘはＭｘに等しく、ＰｙはＭｙに等しいと決定するステップと、
強化時間動きベクトル予測モード番号が１であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ＋ｎに等しいと決定するステップと、
強化時間動きベクトル予測モード番号が２であれば、ＰｘはＭｘ＋ｎに等しく、ＰｙはＭｙに等しいと決定するステップと、
強化時間動きベクトル予測モード番号が３であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ－ｎに等しいと決定するステップと、
強化時間動きベクトル予測モード番号が４であれば、ＰｘはＭｘ－ｎに等しく、ＰｙはＭｙに等しいと決定するステップと、を含み得、
例示的に、（Ｍｘ，Ｍｙ）は初期マッチング符号化ユニットの左上隅座標であり、（Ｐｘ，Ｐｙ）はターゲットマッチング符号化ユニットの左上隅座標である。
例示的に、マッチング符号化ユニットを上／下／左／右にｎ個の画素オフセットすることによって新たなマッチング符号化ユニットを得ることを例とする。例示的に、ｎ＝８である。
例示的に、初期マッチング符号化ユニットに対応する強化時間動きベクトル予測モード番号が０であり、下にオフセットして得られたマッチング符号化ユニットに対応する強化時間動きベクトル予測モード番号が１であり、右にオフセットして得られたマッチング符号化ユニットに対応する強化時間動きベクトル予測モード番号が２であり、上にオフセットして得られたマッチング符号化ユニットに対応する強化時間動きベクトル予測モード番号が３であり、左にオフセットして得られたマッチング符号化ユニットに対応する強化時間動きベクトル予測モード番号が４であるとする。
上記方式により構築して強化時間候補リストを得た場合、ステップＳ３００で取得された強化時間動きベクトル予測モードインデックス値に基づいて、当該強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得してもよい。
例示的に、強化時間動きベクトル予測モード番号が１であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を下にｎ個の画素オフセットして得られた時間参照符号化ユニットであり、すなわちＰｘはＭｘに等しく、ＰｙはＭｙ＋ｎに等しい。
強化時間動きベクトル予測モード番号が２であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を右にｎ個の画素オフセットして得られた時間参照符号化ユニットであり、すなわちＰｘはＭｘ＋ｎに等しく、ＰｙはＭｙに等しい。
強化時間動きベクトル予測モード番号が３であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を上にｎ個の画素オフセットして得られた時間参照符号化ユニットであり、すなわちＰｘはＭｘに等しく、ＰｙはＭｙ－ｎに等しい。
強化時間動きベクトル予測モード番号が４であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を左にｎ個の画素オフセットして得られた時間参照符号化ユニットであり、すなわちＰｘはＭｘ－ｎに等しく、ＰｙはＭｙに等しい。
いくつかの実施例において、ステップＳ３４０において、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を前記現在の符号化ユニットの対応する位置のサブブロックに与えるステップを含み得る。
いくつかの実施例において、ステップＳ３４０において、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＢピクチャの場合、当該サブブロックの前方向動き情報および後方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、を含み得る。
例示的に、現在の符号化ユニットの各サブブロックの動き情報を決定する効率を向上させるために、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、当該サブブロックの動き情報が利用可能であるか否かを判断してもよい。
例示的に、現在の画像フレームタイプがＰピクチャの場合、当該サブブロックの前方向動き情報が利用可能であるか否かを判断してもよく、現在の画像フレームタイプがＢピクチャの場合、当該サブブロックの前方向動き情報および後方向動き情報が利用可能であるか否かをそれぞれ判断してもよい。
例示的に、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、判断結果として前方向動き情報が利用可能な場合、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えてもよい。
例示的に、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、判断結果として後方向動き情報が利用可能な場合（現在の画像フレームタイプがＢピクチャの場合）、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えてもよい。
例示的に、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、判断結果として前方向動き情報および後方向動き情報がいずれも利用可能な場合（現在の画像フレームタイプがＢピクチャの場合）、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ前記現在の符号化ユニットの対応する位置のサブブロックに与えてもよい。
いくつかの実施例において、ステップＳ３４０において、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、サブブロックの前方向動き情報が利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報が利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、現在の画像フレームタイプがＢピクチャの場合、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能なとき、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可なとき、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、を含み得る。
例示的に、現在の符号化ユニットの周辺ブロック（本明細書では第１の周辺ブロックと呼ばれる）の動き情報に基づいて現在の符号化ユニット中のサブブロックの動き情報を決定してもよい。
例示的に、現在の符号化ユニットの第１の周辺ブロックは現在の符号化ユニットのいずれかの復号済み隣接ブロックまたは非隣接ブロックを含み得るがこれらに限定されない。
例えば、現在の符号化ユニットの第１の周辺ブロックは図５に示すとおりであってもよい。図５に示すように、Ｅは現在の符号化ユニットであり、現在の符号化ユニットの第１の周辺ブロックはＡ、Ｂ、Ｃ、Ｄ、ＦおよびＧのうちのいずれかのブロックを含み得る。
例示的に、１つの符号化ユニットは少なくとも１つのサブブロックを含み、各サブブロックの幅は現在の符号化ユニットの幅を超えず、各サブブロックの高さは現在の符号化ユニットの高さを超えず、例えば各サブブロックは８＊８のブロックである。
一例において、現在の符号化ユニットの第１の周辺ブロックは図５中のＦである。例示的に、Ｆのサイズは８＊８であってもよく、すなわち第１の周辺ブロックは現在の符号化ユニットの左下隅に隣接する８＊８ブロックである。例示的に、Ｆのサイズは４＊４であってもよく、すなわち第１の周辺ブロックは現在の符号化ユニットの左下隅に隣接する４＊４ブロックである。
例示的に、現在の画像フレームタイプがＰピクチャの場合は、ターゲットマッチング符号化ユニットのサブブロックの前方向動き情報が利用不可なとき、さらに現在の符号化ユニットの第１の周辺ブロックの動き情報に基づいて、現在の符号化ユニットのサブブロックの動き情報を決定してもよい。
例示的に、現在の画像フレームタイプがＢピクチャの場合は、ターゲットマッチング符号化ユニットのサブブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、さらに現在の符号化ユニットの第１の周辺ブロックの動き情報に基づいて、現在の符号化ユニットのサブブロックの動き情報を決定してもよい。
例示的に、現在の画像フレームタイプがＰピクチャの場合は、ターゲットマッチング符号化ユニットのサブブロックの前方向動き情報および現在の画像符号化ユニットの第１の周辺ブロックの前方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えてもよい。
例示的に、現在の画像フレームタイプがＢピクチャの場合は、ターゲットマッチング符号化ユニットのサブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であり、且つ第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えてもよい。
いくつかの実施例において、図６に示すように、ステップＳ３４０において、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定した後、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップＳ３５０をさらに含み得る。
例示的に、上記方式により現在の符号化ユニット中の各サブブロックの動き情報を決定した場合、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行ってもよい。例えば、現在の符号化ユニット中のｈ行目、ｌ列目のサブブロックの動き情報に基づいて、現在の符号化ユニット中のｈ行目、ｌ列目のサブブロックに対して動き補償を行ってもよい。
一例において、ステップＳ３５０において、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップは、現在の符号化ユニットのいずれかのサブブロックについて、当該サブブロックの動き情報に対して復号側動きベクトル調整技術を行わないステップと、当該サブブロックが双方向オプティカルフロー条件を満たす場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得るステップと、それ以外の場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、当該サブブロックの予測サンプル行列を得るステップと、を含み得る。
例示的に、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
一例において、サブブロックが双方向オプティカルフロー条件を満たすことは、シーケンスレベルの高レベルシンタックスには、双方向オプティカルフロー技術をイネーブルすることが許可されることと、現在の符号化ユニットの動きベクトル精度が０に等しいことと、当該サブブロックが双方向予測（ｂｉ－ｐｒｅｄｉｃｔｉｏｎ）を用いることと、当該サブブロックの参照画像リスト０における参照フレームインデックス値がｒｅｆＩｄｘＬ０の参照フレームおよび参照画像リスト１における参照フレームインデックス値がｒｅｆＩｄｘＬ１の参照フレームの表示順序がそれぞれ現在のフレームの両側に位置することと、を含む。
一例として、本発明の実施例はさらに符号化方法を提供し、当該符号化方法は符号化デバイスに適用することができ、当該方法以下のステップを含み得る。
Ｔ１００において、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定する。その具体的な実現は図３に示す実施例におけるステップＳ３１０を参照してもよく、本発明の実施例はここで説明を省略する。
Ｔ１１０において、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築する。その具体的な実現は図３に示す実施例におけるステップＳ３２０を参照してもよく、本発明の実施例はここで説明を省略する。
Ｔ１２０において、強化時間候補リストにおける各強化時間動きベクトル予測モード番号を順にトラバースし、各強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定する。
例示的に、ステップＴ１２０で説明された方式により強化時間候補リストを構築した場合、符号化デバイスは強化時間候補リストにおける各候補強化時間動きベクトル予測モード番号をトラバースしてもよい。
いずれかの候補強化時間動きベクトル予測モード番号について、符号化デバイスは当該候補強化時間動きベクトル予測モード番号に基づいて、対応するターゲットマッチング符号化ユニットの座標情報を決定してもよく、その具体的な実現は図３に示す実施例におけるステップＳ３３０を参照してもよく、本発明の実施例はここで説明を省略する。
ステップＴ１３０において、ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定する。その具体的な実現は図３に示す実施例におけるステップＳ３４０を参照してもよく、本発明の実施例はここで説明を省略する。
Ｔ１４０において、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行う。その具体的な実現は図６に示す実施例におけるステップＳ３５０を参照してもよく、本発明の実施例はここで説明を省略する。
Ｔ１５０において、強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送する。
例示的に、符号化デバイスはＲＤＯ意思決定に基づいてレート歪みコスト値が最小の予測モードを決定し、最小のレート歪みコスト値に対応する予測モードに基づいて、強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを決定し、ビットストリームに書き込み、復号デバイスに伝送してもよい。
例示的に、上記各実施例の符号化および復号の実現フローは相互に参照してもよい。
以下、当業者が本発明の実施例にて提供される技術的解決手段をよりよく理解できるように、具体的な例に合わせて本発明の実施例にて提供される技術的解決手段について説明する。
実施例１
本発明の実施例は、強化時間動き情報予測方法を提供し、現在の符号化ユニットのｃｏ－ｌｏｃａｔｅｄフレームにおけるコロケーテッド符号化ユニットの動き情報を利用してマッチング符号化ユニットを決定し、検索で得られたマッチング符号化ユニットに対して上下左右など、一連のオフセットを行い、複数の時間候補モードを生成し、周辺の符号化ユニットの動き情報の不正確によるマッチング符号化ユニットの検索が不正確であるという問題をある程度で回避する。
本発明の実施例の主な実現フローは以下の６つの部分を含み得る。
第１の部分において、現在の符号化ユニットの符号化／復号条件に基づいて、強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とを符号化／解析し、
第２の部分において、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定する。
第３の部分において、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築し、
第４の部分において、強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補モードリストにおいて対応する強化時間動きベクトル予測モードを取得し、当該強化時間動きベクトル予測モードに対応するターゲットマッチング符号化ユニットの座標情報を決定し、
第５の部分において、ターゲットマッチング符号化ユニットの座標情報に基づいて、現在の符号化ユニット中の各サブブロックの動き情報を取得し、
第６の部分において、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行う。
例示的に、上記の６つの部分の順序を調整してもよい。
実施例２
本発明の実施例にて提供される符号化方法は以下のステップを含み得る。
１、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定し、
２、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築し、
３、強化時間候補リストにおける各強化時間候補モードを順にトラバースし、各モードに対応するターゲットマッチング符号化ユニットの座標情報を決定し、
４、ターゲットマッチング符号化ユニットの座標情報に対応する動き情報に基づいて、現在の符号化ユニット中の各サブブロックの動き情報を決定し、
５、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行い、
６、強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送する。
実施例３
本発明の実施例にて提供される復号方法は以下のステップを含み得る。
１、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得し、取得した現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値が第１の数値の場合、ステップ２～６を実行し、
２、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定し、
３、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築し、
４、取得した強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、当該強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定し、
５、ターゲットマッチング符号化ユニットの座標情報に対応する動き情報に基づいて、現在の符号化ユニット中の各サブブロックの動き情報を決定し、
６、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行う。
以下、実施例に合わせて、本発明の実施例の主なフローの各部分（すなわち第１の部分～第６の部分のうちの各部分）についてそれぞれ説明する。
第１の部分、強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とを符号化／解析する。
例示的に、強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とを解析するステップは、１）、強化時間動きベクトル予測モードフラグ（ｅｔｍｖｐ＿ｆｌａｇと記されてもよい）を解析するステップと、２）、強化時間動きベクトル予測モードインデックス値（ｃｕ＿ｅｔｍｖｐ＿ｃａｎｄ＿ｉｎｄｅｘと記されてもよい）を解析するステップと、を含み得る。
実施例４
現在の符号化ユニットが解析条件１（すなわち上記第１の解析条件）を満たす場合、ビットストリームから強化時間動きベクトル予測モードフラグを解析し、それ以外の場合、強化時間動きベクトル予測モードフラグの値は０である（すなわち上記第２の数値は０である）。
例示的に、現在の符号化ユニットが解析条件１を満たす場合はそれぞれ実施例５～実施例１０を参照してもよい。
実施例５
現在の符号化ユニットが解析条件１を満たすことは、現在の符号化ユニットがスキップモードまたはダイレクトモードであることを含む。
実施例６
現在の符号化ユニットが解析条件１を満たすことは、現在の符号化ユニットのサイズが、現在の符号化ユニットの幅および高さがいずれもＮ０以上であるという制限（すなわち上記予め設定されたサイズ制限）を満たすことを含む。例示的に、Ｎ０＝８である。
実施例７
現在の符号化ユニットが解析条件１を満たすことは、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることを含む。
実施例８
現在の符号化ユニットが解析条件１を満たすことは、現在の符号化ユニットが角度重み付け予測の利用条件を満たし、または究極の動きベクトル表現の利用条件を満たすことを含む。
例示的に、角度重み付け予測の利用条件は、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが角度重み付け予測技術をイネーブルすることが許可されることと、現在の符号化ユニットの幅および高さがいずれもＮ１以上であり、現在の符号化ユニットの幅および高さがいずれもＮ２以下であることと、現在の画像フレームタイプがＢピクチャであることと、を含み得る。
例示的に、Ｎ１＝８である。例示的に、Ｎ２＝６４である。
例示的に、現在の符号化ユニットが究極の動きベクトル表現の利用条件を満たすことは、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが究極の動きベクトル表現技術をイネーブルすることが許可されることを含む。
実施例９
現在の符号化ユニットが解析条件１を満たすことは以下を含む。
１）、現在の符号化ユニットがスキップモードまたはダイレクトモードであり、
２）、現在の符号化ユニットのサイズが以下の制限を満たし、
２．１）、現在の符号化ユニットの幅および高さがいずれもＮ０以上であり、例示的に、Ｎ０＝８であり、
３）、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可される。
実施例１０
現在の符号化ユニットが解析条件１を満たすことは以下を含む。
１）、現在の符号化ユニットがスキップモードまたはダイレクトモードであり、
２）、現在の符号化ユニットのサイズが以下の制限を満たし、
２．１）、現在の符号化ユニットの幅および高さがいずれもＮ０以上であり、例示的に、Ｎ０＝８であり、
３）、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可され、
４）、現在の符号化ユニットが角度重み付け予測の利用条件を満たし、または究極の動きベクトル表現の利用条件を満たす。
例示的に、角度重み付け予測の利用条件は以下を含み得る。
４．１）、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが角度重み付け予測技術をイネーブルすることが許可され、
４．２）、現在の符号化ユニットの幅および高さがいずれもＮ１以上であり、現在の符号化ユニットの幅および高さがいずれもＮ２以下であり、
４．３）、現在の画像フレームタイプがＢピクチャである。
例示的に、Ｎ１＝８である。例示的に、Ｎ２＝６４である。
例示的に、現在の符号化ユニットが究極の動きベクトル表現の利用条件を満たすことは、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが究極の動きベクトル表現技術をイネーブルすることが許可されることを含む。
なお、本発明の実施例において、現在の符号化ユニットが解析条件１を満たすことは上記実施例５～実施例１０に記載の場合に限定されず、実施例５～実施例８のうち各実施例のいずれか２つを組み合わせて得られた場合、およびいずれか３つを組み合わせて得られた場合（実施例５～実施例７を組み合わせて得られたのは実施例９である）を含み得る。
実施例１１
現在の符号化ユニットが解析条件１を満たす場合、ビットストリームから強化時間動きベクトル予測モードフラグを解析し、それ以外の場合、強化時間動きベクトル予測モードフラグの値は０である。
例示的に、強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いる。
実施例１２
現在の符号化ユニットが解析条件１を満たす場合、ビットストリームから強化時間動きベクトル予測モードフラグを解析し、それ以外の場合、強化時間動きベクトル予測モードフラグの値は０である。
例示的に、現在の符号化ユニットが解析条件１を満たす具体的な場合は上記実施例における関連説明、例えば実施例５～実施例１０のいずれかの実施例の説明を参照してもよい。
例示的に、強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いるとともに、１つのコンテキストモデルを用いる。
実施例１３
現在の符号化ユニットが解析条件１を満たす場合、ビットストリームから強化時間動きベクトル予測モードフラグを解析し、それ以外の場合、強化時間動きベクトル予測モードフラグの値は０である。
例示的に、現在の符号化ユニットが解析条件１を満たす具体的な場合は上記実施例における関連説明、例えば実施例５～実施例１０のいずれかの実施例の説明を参照してもよい。
例示的に、強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いるとともに、複数のコンテキストモデルを用いる。
例示的に、当該複数のコンテキストモデルは、現在の符号化ユニットのサイズに基づいて決定されてもよい。
例示的に、現在の符号化ユニットのサイズは、現在の符号化ユニットの幅および／または高さ、現在の符号化ユニットの幅と高さとのうちの最大値若しくは最小値、または現在の符号化ユニットの幅と高さとの積などを含み得るが、これらに限定されない。
実施例１４
現在の符号化ユニットが解析条件２（すなわち上記第２の解析条件）を満たす場合、ビットストリームから強化時間動きベクトル予測モードインデックス値を解析し、それ以外の場合、強化時間動きベクトル予測モードインデックス値は０である（すなわち上記第３の数値は０である）。
例示的に、現在の符号化ユニットが解析条件２を満たす場合はそれぞれ実施例１５～実施例１７を参照してもよい。
実施例１５
現在の符号化ユニットが解析条件２を満たすことは、現在の符号化ユニットがスキップモードまたはダイレクトモードであることを含む。
実施例１６
現在の符号化ユニットが解析条件２を満たすことは、現在の符号化ユニットが強化時間動きベクトル予測モードであることを含む。
実施例１７
現在の符号化ユニットが解析条件２を満たすことは以下を含む。
１）、現在の符号化ユニットがスキップモードまたはダイレクトモードであり、
２）、現在の符号化ユニットが強化時間動きベクトル予測モードである。
例えば、強化時間動きベクトル予測モードインデックス値のシンタックス記述は以下のとおりであってもよい。
実施例１８
現在の符号化ユニットが解析条件２（すなわち上記第２の解析条件）を満たす場合、ビットストリームから強化時間動きベクトル予測モードインデックス値を解析し、それ以外の場合、強化時間動きベクトル予測モードインデックス値は０である（すなわち上記第３の数値は０である）。
例示的に、現在の符号化ユニットが解析条件２を満たす場合は実施例１５～実施例１７のいずれか１つの実施例における説明を参照してもよい。
例示的に、強化時間動きベクトル予測モードインデックス値の逆二値化は最大値が４のトランケーテッド・ユーナリに基づいて実現され、前記トランケーテッド・ユーナリは最大４つのバイナリ文字列（ｂｉｎｓ）を用い、各バイナリ文字（ｂｉｎ）は単独のコンテキストモデルを用い、合計で４つのコンテキストモデルを用いる。例えば、強化時間動きベクトル予測モードインデックス値の逆二値化の実現は表１を参照してもよい。
第２の部分、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定する。
例示的に、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップは、現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定するステップと、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップと、を含み得る。
例示的に、時間参照画像における幅および高さが現在の符号化ユニットの幅および高さに一致する時間参照ブロックは現在の符号化ユニットのマッチング符号化ユニットである。
例示的に、現在の画像フレームタイプがＰピクチャであれば、時間参照画像は参照画像リスト０における参照フレームインデックス値が０の参照画像であり、現在の画像フレームタイプがＢピクチャであれば、時間参照画像は参照画像リスト１における参照フレームインデックス値が０の参照画像である。
例示的に、現在の符号化ユニットの座標情報は現在の符号化ユニットの画像（現在の画像）における左上隅座標であってもよく、マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標であってもよい。
例示的に、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップは、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップを含み得る。
例示的に、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップは、現在の最大符号化ユニットの画像における左上隅横座標、最大符号化ユニットのサイズ、現在の符号化ユニットの幅、現在の画像の幅、現在の符号化ユニットの画像における左上隅横座標に基づいて、初期マッチング符号化ユニットの横座標を決定するステップと、現在の最大符号化ユニットの画像における左上隅縦座標、現在の最大符号化ユニットのサイズ、現在の符号化ユニットの高さ、現在の画像の高さ、現在の符号化ユニットの画像における左上隅縦座標に基づいて、初期マッチング符号化ユニットの縦座標を決定するステップと、を含む。
例示的に、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定する具体的な実現は、実施例１９～実施例２１のいずれか１つの実施例の説明を参照してもよい。
実施例１９
（Ｘｐｏｓ，Ｙｐｏｓ）は現在の符号化ユニットの画像における左上隅座標であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであるとすると、以下の方法によりマッチング符号化ユニットの座標（Ｍｘ，Ｍｙ）を導出する。
Ｍｘ＝Ｃｌｉｐ３（ｘ＿ｃｔｂ＿ｐｏｓ，ｍｉｎ（ｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ，ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ），（（Ｘｐｏｓ＋４）＞＞３）＜＜３）
Ｍｙ＝Ｃｌｉｐ３（ｙ＿ｃｔｂ＿ｐｏｓ，ｍｉｎ（ｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ，ｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ），（（Ｙｐｏｓ＋４）＞＞３）＜＜３）
実施例２０
（Ｘｐｏｓ，Ｙｐｏｓ）は現在の符号化ユニットの画像における左上隅座標であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであるとすると、以下の方法によりマッチング符号化ユニットの座標（Ｍｘ，Ｍｙ）を導出する。
Ｍｘ＝ｍｉｎ（（（Ｘｐｏｓ＋４）＞＞３）＜＜３，ｍｉｎ（ｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ，ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ））
Ｍｙ＝ｍｉｎ（（（Ｙｐｏｓ＋４）＞＞３）＜＜３，ｍｉｎ（ｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ，ｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ））
実施例２１
（Ｘｐｏｓ，Ｙｐｏｓ）は現在の符号化ユニットの画像における左上隅座標であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであるとすると、以下の方法によりマッチング符号化ユニットの座標（Ｍｘ，Ｍｙ）を導出する。
Ｍｘ＝Ｃｌｉｐ３（ｘ＿ｃｔｂ＿ｐｏｓ，ｍｉｎ（ｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ，ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ），（Ｘｐｏｓ＞＞３）＜＜３）
Ｍｙ＝Ｃｌｉｐ３（ｙ＿ｃｔｂ＿ｐｏｓ，ｍｉｎ（ｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ，ｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ），（Ｙｐｏｓ＞＞３）＜＜３）
実施例２２
（Ｘｐｏｓ，Ｙｐｏｓ）は現在の符号化ユニットの画像における左上隅座標であるとすると、以下の方法によりマッチング符号化ユニットの座標（Ｍｘ，Ｍｙ）を導出してもよい。
Ｍｘ＝（Ｘｐｏｓ＞＞ｓｈｉｆｔ）＜＜ｓｈｉｆｔ
Ｍｙ＝（Ｙｐｏｓ＞＞ｓｈｉｆｔ）＜＜ｓｈｉｆｔ）
例示的に、Ｓｈｉｆｔはサブブロックのサイズに関連し、Ｎ＊Ｎサブブロックについて、Ｎ＝１＜＜ｓｈｉｆｔである。例えば、サブブロックの大きさが８＊８であれば、ｓｈｉｆｔ＝３である。
第３の部分、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築する。
例示的に、（Ｍｘ，Ｍｙ）は初期マッチング符号化ユニットの時間参照画像における左上隅座標であり、Ａ１～Ａ４、Ｂ１～Ｂ４、Ｃ１～Ｃ４は時間参照画像における初期マッチング符号化ユニットの周辺に位置する隣接４＊４ブロックであるとし、その概略図は図４に示すとおりであってもよい。
実施例３３
２３．０、強化時間候補リストの長さを０に初期化する。例示的に、強化時間候補リストの初期長さは０である。
２３．１、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２３．２、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の下境界を超えず、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２３．３、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の右境界を超えず、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２３．４、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の上境界を超えず、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２３．５、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の左境界を超えず、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２３．６、強化時間候補リストの長さが５未満であれば、以下の操作を繰り返し実行する。
２３．６．１、強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加え、
２３．６．２、強化時間候補リストの長さが５に等しければ、リスト構築プロセスを終了する。
例示的に、その実現ロジックは以下であってもよい。
１）、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｉ］を０に初期化し、ｉ＝０～４であり、ｌｅｎｇｔｈを０に初期化する。
２）まず、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［０］＝０とし、ｌｅｎｇｔｈに１を加える。
３）、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の下境界を超えず、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｌｅｎｇｔｈ］＝１とし、ｌｅｎｇｔｈに１を加える。
４）、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の右境界を超えず、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｌｅｎｇｔｈ］＝２とし、ｌｅｎｇｔｈに１を加える。
５）、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の上境界を超えず、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｌｅｎｇｔｈ］＝３とし、ｌｅｎｇｔｈに１を加える。
６）、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の左境界を超えず、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｌｅｎｇｔｈ］＝４とし、ｌｅｎｇｔｈに１を加える。
７）、ｌｅｎｇｔｈが５未満であれば、以下の操作を繰り返し実行する。
７．１）、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｌｅｎｇｔｈ］＝ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｌｅｎｇｔｈ－１］とし、ｌｅｎｇｔｈに１を加え、
７．２）、ｌｅｎｇｔｈが５に等しければ、リスト構築プロセスを終了する。
実施例２４
２４．０、強化時間候補リストの長さを０に初期化する。例示的に、強化時間候補リストの初期長さは０である。
２４．１、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２４．２、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の下境界を超えず、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２４．３、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の右境界を超えず、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２４．４、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の上境界を超えず、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２４．５、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の左境界を超えず、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
実施例２５
２５．０、強化時間候補リストの長さを０に初期化する。例示的に、強化時間候補リストの初期長さは０である。
２５．１、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加え、例示的に、強化時間候補リストの初期長さは０である。
２５．２、（Ｍｘ，Ｍｙ＋８）の位置するマッチング符号化ユニットの下境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の下境界を超えず、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２５．３、（Ｍｘ＋８，Ｍｙ）の位置するマッチング符号化ユニットの右境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の右境界を超えず、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２５．４、Ｍｘ，Ｍｙ－８）の位置するマッチング符号化ユニットの上境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の上境界を超えず、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２５．５、（Ｍｘ－８，Ｍｙ）の位置するマッチング符号化ユニットの左境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の左境界を超えず、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２５．６、強化時間候補リストの長さが５未満であれば、以下の操作を繰り返し実行する。
２５．６．１、強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加え、
２５．６．２、強化時間候補リストの長さが５に等しければ、リスト構築プロセスを終了する。
実施例２６
２６．０、強化時間候補リストの長さを０に初期化する。
２６．１、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加え、例示的に、強化時間候補リストの初期長さは０である。
２６．２、（Ｍｘ，Ｍｙ＋８）の位置するマッチング符号化ユニットの下境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の下境界を超えず、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２６．３、（Ｍｘ＋８，Ｍｙ）の位置するマッチング符号化ユニットの右境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の右境界を超えず、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２６．４、（Ｍｘ，Ｍｙ－８）の位置するマッチング符号化ユニットの上境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の上境界を超えず、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２６．５、（Ｍｘ－８，Ｍｙ）の位置するマッチング符号化ユニットの左境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の左境界を超えず、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
実施例２７
２７．０、強化時間候補リストの長さを０に初期化する。例示的に、強化時間候補リストの初期長さは０である。
２７．１、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２７．２、Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２７．３、Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２７．４、Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２７．５、Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに添加し、強化時間候補リストの長さに１を加える。
２７．６、強化時間候補リストの長さが５未満であれば、以下の操作を繰り返し実行する。
２７．６．１、強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加え、
２７．６．２、強化時間候補リストの長さが５に等しければ、リスト構築プロセスを終了する。
実施例２８
２８．０、強化時間候補リストの長さを０に初期化する。例示的に、強化時間候補リストの初期長さは０である。
２８．１、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２８．２、Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２８．３、Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２８．４、Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２８．５、Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに添加し、強化時間候補リストの長さに１を加える。
第４の部分、強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補モードリストにおいて対応する強化時間動きベクトル予測モードを取得し、当該強化時間動きベクトル予測モードに対応するターゲットマッチング符号化ユニットの座標情報を決定する。
例示的に、強化時間動きベクトル予測モードインデックス（ＥｔｍｖｐＣａｎｄＩｎｄｅｘと記されてもよい）に基づいて、強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号（ｅｔｍｖｐ＿ｍｏｄｅと記されてもよい）を取得し、強化時間動きベクトル予測モード番号ｅｔｍｖｐ＿ｍｏｄｅに基づいて、ターゲットマッチング符号化ユニットの位置座標（Ｐｘ，Ｐｙ）を決定して得る。例示的に、
ｅｔｍｖｐ＿ｍｏｄｅ＝ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ＥｔｍｖｐＣａｎｄＩｎｄｅｘ］である。
実施例２９
強化時間動きベクトル予測モード番号に基づいて、ターゲットマッチング符号化ユニットの位置座標（Ｐｘ，Ｐｙ）をルックアップテーブルにより決定する。例示的にｅｔｍｖｐ＿ｍｏｄｅとＰｘ、Ｐｙとの対応関係は表２に示すとおりであってもよい。
例示的に、ｎは８であってもよい。
実施例３０
強化時間動きベクトル予測モード番号が０であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニットであり、すなわちＰｘはＭｘに等しく、ＰｙはＭｙに等しく、
強化時間動きベクトル予測モード番号が１であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を下にｎ個の画素オフセットして得られた時間参照ブロックであり、すなわちＰｘはＭｘに等しく、ＰｙはＭｙ＋ｎに等しく、
強化時間動きベクトル予測モード番号が２であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を右にｎ個の画素オフセットして得られた時間参照ブロックであり、すなわちＰｘはＭｘ＋ｎに等しく、ＰｙはＭｙに等しく、
強化時間動きベクトル予測モード番号が３であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を上にｎ個の画素オフセットして得られた時間参照ブロックであり、すなわちＰｘはＭｘに等しく、ＰｙはＭｙ－ｎに等しく、
強化時間動きベクトル予測モード番号が４であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を左にｎ個の画素オフセットして得られた時間参照ブロックであり、すなわちＰｘはＭｘ－ｎに等しく、ＰｙはＭｙに等しい。
例示的に、ｎは８であってもよい。
第５の部分、ターゲットマッチング符号化ユニットの座標情報に基づいて、現在の符号化ユニット中の各サブブロックの動き情報を取得する。
例示的に、ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニットの対応する位置のサブブロックの動き情報を決定してもよい。
例示的に、現在の符号化ユニットの第１の周辺ブロックは図５に示すとおりであってもよい。図５に示すように、Ｅは現在の符号化ユニットであり、現在の符号化ユニットの第１の周辺ブロックはＡ、Ｂ、Ｃ、Ｄ、ＦおよびＧのうちのいずれかのブロックを含み得る。
例示的に、１つの符号化ユニットは少なくとも１つのサブブロックを含み、各サブブロックの幅は現在の符号化ユニットの幅を超えず、各サブブロックの高さは現在の符号化ユニットの高さを超えず、例えば各サブブロックは８＊８のブロックである。
一例において、現在の符号化ユニットの第１の周辺ブロックは図５中のＦである。
例示的に、ターゲットマッチング符号化ユニット中のいずれかのサブブロック（８＊８サブブロックを例とする）について、各８＊８サブブロックの左上隅座標は（Ｐｘ＋（ｉ＜＜３），Ｐｙ＋（ｊ＜＜３））であり、ｉはサブブロックの水平インデックス値であり、ｊはサブブロックの垂直インデックス値であり、ｉ＝０～（ｃｕ＿ｗｉｄｔｈ＞＞３）－１であり、ｊ＝０～（ｃｕ＿ｈｅｉｇｈｔ＞＞３）－１である。
例示的に、現在の符号化ユニット中のいずれかのサブブロック（８＊８サブブロックを例とする）について、各８＊８サブブロックの動き情報はＭｏｔｉｏｎＡｒｒａｙ［ｉ］［ｊ］と記され、ｉはサブブロックの水平インデックス値であり、ｊはサブブロックの垂直インデックス値であり、ｉ＝０～（ｃｕ＿ｗｉｄｔｈ＞＞３）－１であり、ｊ＝０～（ｃｕ＿ｈｅｉｇｈｔ＞＞３）－１である。
実施例３１
ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
３１．１、当該サブブロックの前方向動き情報および後方向動き情報がいずれも利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与え、
３１．２、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３１．３、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３１．４、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、デフォルトの動き情報をパディングする。
例示的に、本発明の実施例はデフォルトの動き情報について制限せず、例えば、デフォルトの動き情報はゼロ動き情報または現在の符号化ユニットの周辺ブロックから導出された動き情報であってもよい。
実施例３２
ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
３２．１、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３２．２、当該サブブロックの前方向動き情報が利用不可であれば、デフォルトの動き情報をパディングする。
例示的に、本発明の実施例はデフォルトの動き情報について制限せず、例えば、デフォルトの動き情報はゼロ動き情報または現在の符号化ユニットの周辺ブロックから導出された動き情報であってもよい。
実施例３３
ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
３３．１、現在の画像フレームタイプがＰピクチャの場合、
３３．１．１、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３３．１．２、当該サブブロックの前方向動き情報が利用不可であれば、デフォルトの動き情報をパディングする。
例示的に、本発明の実施例はデフォルトの動き情報について制限せず、例えば、デフォルトの動き情報はゼロ動き情報または現在の符号化ユニットの周辺ブロックから導出された動き情報であってもよい。
３３．２、現在の画像フレームタイプがＢピクチャの場合、
３３．２．１、当該サブブロックの前方向動き情報および後方向動き情報がいずれも利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与え、
３３．２．２、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３３．２．３、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３３．２．４、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、デフォルトの動き情報をパディングする。
例示的に、本発明の実施例はデフォルトの動き情報について制限せず、例えば、デフォルトの動き情報はゼロ動き情報または現在の符号化ユニットの周辺ブロックから導出された動き情報であってもよい。
実施例３４
ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
３４．１、当該サブブロックの前方向動き情報および後方向動き情報がいずれも利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与え、
３４．２、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３４．３、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３４．４、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、
３４．４．１、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能な場合、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与え、
３４．４．２、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可な場合、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３４．４．３、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可な場合、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３４．４．４、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可な場合、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与える。
実施例３５
ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
３５．１、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３５．２、当該サブブロックの前方向動き情報が利用不可であれば、
３５．２．１、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能な場合、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３５．２．２、第１の周辺ブロックの前方向動き情報が利用不可な場合、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与える。
実施例３６
ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
３６．１、現在の画像フレームタイプがＰピクチャの場合、
３６．１．１、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．１．２、当該サブブロックの前方向動き情報が利用不可であれば、
３６．１．２．１、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．１．２．２、第１の周辺ブロックの前方向動き情報が利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２、現在の画像フレームタイプがＢピクチャの場合、
３６．２．１、当該サブブロックの前方向動き情報および後方向動き情報がいずれも利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２．２、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２．３、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２．４、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、
３６．２．４．１、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能なとき、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２．４．２、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２．４．３、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可なとき、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２．４．４、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与える。
第６の部分、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行う。
例示的に、１つの符号化ユニットは少なくとも１つのサブブロックを含み、各サブブロックの幅は現在の符号化ユニットの幅を超えず、各サブブロックの高さは現在の符号化ユニットの高さを超えない。
例えば、各サブブロックは８＊８サイズのブロックである。
例示的に、現在の符号化ユニット中のいずれかのサブブロック（８＊８サブブロックを例とする）について、各８＊８サブブロックの動き情報はＭｏｔｉｏｎＡｒｒａｙ［ｉ］［ｊ］と記され、ｉはサブブロックの水平インデックス値であり、ｊはサブブロックの垂直インデックス値であり、ｉ＝０～（ｃｕ＿ｗｉｄｔｈ＞＞３）－１であり、ｊ＝０～（ｃｕ＿ｈｅｉｇｈｔ＞＞３）－１である。
実施例３７
現在の符号化ユニットのいずれかのサブブロックについて、現在のサブブロックの動き情報に基づいて、現在のサブブロックに対して動き補償を行い、現在のサブブロックの予測サンプル行列を得る。例示的に、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
実施例３８
現在の符号化ユニットのいずれかのサブブロックについて、現在のサブブロックがＢＩＯ条件を満たす場合、現在のサブブロックの動き情報に基づいて、現在のサブブロックに対して動き補償を行い、ＢＩＯ技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、現在のサブブロックの予測サンプル行列を得、それ以外の場合、現在のサブブロックの動き情報に基づいて現在のサブブロックに対して動き補償を行い、現在のサブブロックの予測サンプル行列を得る。
例示的に、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。例示的に、サブブロックが双方向オプティカルフロー条件を満たすことは以下を含む。
１）、シーケンスレベルの高レベルシンタックスには、双方向オプティカルフロー技術をイネーブルすることが許可され、
２）、現在の符号化ユニットの動きベクトル精度が０に等しく、
３）、当該サブブロックが双方向予測を用い、
４）、当該サブブロックの参照画像リスト０における参照フレームインデックス値がｒｅｆＩｄｘＬ０の参照フレームおよび参照画像リスト１における参照フレームインデックス値がｒｅｆＩｄｘＬ１の参照フレームの表示順序はそれぞれ現在のフレームの両側に位置する。
実施例３９
現在の符号化ユニットのいずれかのサブブロックについて、現在のサブブロックの動き情報に対して復号側動きベクトル調整（ＤＭＶＲ）技術を行わず、現在のサブブロックの動き情報に基づいて、現在のサブブロックに対して動き補償を行い、現在のサブブロックの予測サンプル行列を得る。例示的に、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
実施例４０
現在の符号化ユニットのいずれかのサブブロックについて、現在のサブブロックの動き情報に対して復号側動きベクトル調整（ＤＭＶＲ）技術を行わず、現在のサブブロックがＢＩＯ条件を満たす場合、現在のサブブロックの動き情報に基づいて、現在のサブブロックに対して動き補償を行い、ＢＩＯ技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、現在のサブブロックの予測サンプル行列を得、それ以外の場合、現在のサブブロックの動き情報に基づいて現在のサブブロックに対して動き補償を行い、現在のサブブロックの予測サンプル行列を得る。
例示的に、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
例示的に、サブブロックが双方向オプティカルフロー条件を満たすことは以下を含む。
１）、シーケンスレベルの高レベルシンタックスには、双方向オプティカルフロー技術をイネーブルすることが許可され、
２）、現在の符号化ユニットの動きベクトル精度が０に等しく、
３）、当該サブブロックが双方向予測を用い、
４）、当該サブブロックの参照画像リスト０における参照フレームインデックス値がｒｅｆＩｄｘＬ０の参照フレームおよび参照画像リスト１における参照フレームインデックス値がｒｅｆＩｄｘＬ１の参照フレームの表示順序はそれぞれ現在のフレームの両側に位置する。
なお、上記実施例は本発明の実施例の実現方式の具体的な例に過ぎず、本発明の保護範囲を限定するものではなく、上記実施例に基づいて、実施例間の組み合わせ、すなわち１つまたは複数の実施例間の任意の組み合わせ、または実施例の変形により、新たな実施例を得ることができ、それらはいずれも本発明の保護範囲に属するべきである。
また、上記各実施例間は相互に参照してもよく、符号化と復号の実現フローは相互に参照してもよい。
以上、本発明にて提供される方法について説明した。以下、本発明にて提供される装置について説明する。
図７に示すように、図７は本発明の実施例にて提供される復号装置の構造の概略図であり、当該装置は、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得するための取得ユニット７１０と、前記強化時間動きベクトル予測モードフラグの値が第１の数値の場合、前記現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するための第１の決定ユニット７２０と、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するための構築ユニット７３０と、前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するための第２の決定ユニット７４０と、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するための第３の決定ユニット７５０と、を含み得る。
いくつかの実施例において、前記取得ユニット７１０が現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を取得することは、前記現在の符号化ユニットが第１の解析条件を満たす場合、ビットストリームから前記強化時間動きベクトル予測モードフラグの値を解析することと、それ以外の場合、前記強化時間動きベクトル予測モードフラグの値が第２の数値であると決定することと、を含み、前記強化時間動きベクトル予測モードフラグの値が第１の数値であることは、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることを示し、前記強化時間動きベクトル予測モードフラグの値が第２の数値であることは、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示す。
いくつかの実施例において、前記現在の符号化ユニットが第１の解析条件を満たすことは、前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、前記現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たすことと、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることと、前記現在の符号化ユニットが角度重み付け予測の利用条件または究極の動きベクトル表現の利用条件を満たすこととのうちの１つまたは複数を含む。
いくつかの実施例において、前記現在の符号化ユニットが第１の解析条件を満たすことは、前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、前記現在の符号化ユニットのサイズが、現在の符号化ユニットの幅および高さがいずれもＮ０以上であるというサイズ制限を満たすことと、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることと、前記現在の符号化ユニットが角度重み付け予測の利用条件を満たし、または究極の動きベクトル表現の利用条件を満たすことと、を含む。
いくつかの実施例において、前記強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いるとともに、１つのコンテキストモデルを用いる。
いくつかの実施例において、前記取得ユニット７１０が現在の符号化ユニットの強化時間動きベクトル予測モードインデックス値を取得することは、前記現在の符号化ユニットが第２の解析条件を満たす場合、ビットストリームから前記強化時間動きベクトル予測モードインデックス値を解析することを含む。
いくつかの実施例において、前記現在の符号化ユニットが第２の解析条件を満たすことは、前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることとのうちの１つまたは複数を含む。
いくつかの実施例において、前記強化時間動きベクトル予測モードインデックス値の逆二値化は最大値が４のトランケーテッド・ユーナリに基づいて実現され、前記トランケーテッド・ユーナリは４つのバイナリ文字列を用い、各バイナリ文字は単独のコンテキストモデルを用い、合計で４つのコンテキストモデルを用いる。
いくつかの実施例において、前記第１の決定ユニット７２０が現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定することは、現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定することと、前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定することと、を含み、ここで、前記現在の画像フレームタイプがＰピクチャであれば、前記時間参照画像は参照画像リスト０における参照フレームインデックス値が０の参照画像であり、現在の画像フレームタイプがＢピクチャであれば、前記時間参照画像は参照画像リスト１における参照フレームインデックス値が０の参照画像である。
いくつかの実施例において、前記第１の決定ユニット７２０が前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定することは、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定することを含む。
いくつかの実施例において、前記第１の決定ユニット７２０が現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定することは、現在の最大符号化ユニットの画像における左上隅横座標、最大符号化ユニットのサイズ、現在の符号化ユニットの幅、現在の画像の幅、現在の符号化ユニットの画像における左上隅横座標に基づいて、前記初期マッチング符号化ユニットの横座標を決定することと、現在の最大符号化ユニットの画像における左上隅縦座標、最大符号化ユニットのサイズ、現在の符号化ユニットの高さ、現在の画像の高さ、現在の符号化ユニットの画像における左上隅縦座標に基づいて、前記初期マッチング符号化ユニットの縦座標を決定することと、を含む。
いくつかの実施例において、前記構築ユニット７３０が前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築することは、前記初期マッチング符号化ユニットの座標情報に基づいて、少なくとも１つの強化時間動きベクトル予測モード番号を決定することと、前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築することと、を含む。
いくつかの実施例において、マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標であり、前記構築ユニット７３０が前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築することは、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、且つＡ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、且つＡ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、を含む。
ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの座標情報であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さである。
Ａ１は前記初期マッチング符号化ユニットの左上隅の４＊４ブロックであり、Ｂ１はＡ１の真左側の４＊４ブロックであり、Ｃ１はＡ１の真上の４＊４ブロックであり、Ａ２は前記初期マッチング符号化ユニットの右上隅の４＊４ブロックであり、Ｂ２はＡ２の真右側の４＊４ブロックであり、Ｃ２はＡ２の真上の４＊４ブロックであり、Ａ３は前記初期マッチング符号化ユニットの左下隅の４＊４ブロックであり、Ｂ３はＡ３の真左側の４＊４ブロックであり、Ｃ３はＡ３の真下の４＊４ブロックであり、Ａ４は前記初期マッチング符号化ユニットの右下隅の４＊４ブロックであり、Ｂ４はＡ４の真右側の４＊４ブロックであり、Ｃ４はＡ４の真下の４＊４ブロックである。
いくつかの実施例において、前記構築ユニット７３０が前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築することは、前記強化時間候補リストの長さが５未満の場合、強化時間候補リストの長さが５に等しくなるまで、現在の強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号と同じの強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える操作を繰り返すことをさらに含む。
いくつかの実施例において、前記第２の決定ユニット７４０が前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定することは、
強化時間動きベクトル予測モード番号が０であれば、ＰｘはＭｘに等しく、ＰｙはＭｙに等しいと決定することと、
強化時間動きベクトル予測モード番号が１であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ＋ｎに等しいと決定することと、
強化時間動きベクトル予測モード番号が２であれば、ＰｘはＭｘ＋ｎに等しく、ＰｙはＭｙに等しいと決定することと、
強化時間動きベクトル予測モード番号が３であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ－ｎに等しいと決定することと、
強化時間動きベクトル予測モード番号が４であれば、ＰｘはＭｘ－ｎに等しく、ＰｙはＭｙに等しいと決定することと、を含み、
ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの左上隅座標であり、（Ｐｘ，Ｐｙ）は前記ターゲットマッチング符号化ユニットの左上隅座標である。
いくつかの実施例において、前記第３の決定ユニット７５０が前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を前記現在の符号化ユニットの対応する位置のサブブロックに与えることを含む。
いくつかの実施例において、前記決定ユニット７５０が前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＢピクチャの場合、当該サブブロックの前方向動き情報および後方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ前記現在の符号化ユニットの対応する位置のサブブロックに与えることと、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、を含む。
いくつかの実施例において、前記決定ユニット７５０が前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、サブブロックの前方向動き情報が利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの前方向動き情報が利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、現在の画像フレームタイプがＢピクチャの場合、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能なとき、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可なとき、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、を含む。ここで、前記第１の周辺ブロックは前記現在の符号化ユニットのいずれかの復号済み隣接ブロックを含む。
いくつかの実施例において、図８に示すように、前記復号装置は、前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うための動き補償ユニット７６０をさらに含む。
いくつかの実施例において、前記動き補償ユニット７６０が前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うことは、現在の符号化ユニットのいずれかのサブブロックについて、当該サブブロックの動き情報に対して復号側動きベクトル調整技術を行わないことと、当該サブブロックが双方向オプティカルフロー条件を満たす場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得ることと、それ以外の場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、当該サブブロックの予測サンプル行列を得ることと、を含み、ここで、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
可能な一実施例において、上記復号装置は映像復号器を含み得る。
図９に示すように、本発明の実施例にて提供される復号デバイスのハードウェア構造の概略図である。当該復号デバイスはプロセッサ９０１と、機械実行可能命令が記憶されている機械可読記憶媒体９０２とを含み得る。プロセッサ９０１と機械可読記憶媒体９０２とはシステムバス９０３を介して通信可能である。また、プロセッサ９０１は、機械可読記憶媒体９０２中の復号制御ロジックに対応する機械実行可能命令を読み取り実行することにより、上述した復号方法を実行することができる。
本明細書で言及される機械可読記憶媒体９０２は、任意の電子的、磁気的、光学的、または他の物理的記憶装置であってもよく、実行可能命令、データなどの情報を含むか、または記憶することができる。例えば、機械可読記憶媒体は、ＲＡＭ（Ｒａｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ランダムアクセスメモリ）、揮発性メモリ、不揮発性メモリ、フラッシュメモリ、記憶ドライブ（例えばハードディスクドライブ）、ソリッドステートハードディスク、任意のタイプの記憶ディスク（例えば光ディスク、ｄｖｄなど）、若しくは類似の記憶媒体、またはそれらの組み合わせであってもよい。
いくつかの実施例において、機械実行可能命令が記憶されている機械可読記憶媒体であって、前記機械実行可能命令がプロセッサにより実行されると、上述した復号方法が実施される、機械可読記憶媒体がさらに提供される。例えば、前記機械可読記憶媒体はＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピーディスク、および光データ記憶デバイスなどであってもよい。
図１０に示すように、図１０は本発明の実施例にて提供される符号化装置の構造の概略図であり、当該装置は、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するための第１の決定ユニット１０１０と、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するための構築ユニット１０２０と、強化時間候補リストにおける各強化時間動きベクトル予測モード番号を順にトラバースし、各強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するための第２の決定ユニット１０３０と、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するための第３の決定ユニット１０４０と、前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うための動き補償ユニット１０５０と、強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送するための符号化ユニット１０６０と、を含み得る。
いくつかの実施例において、前記第１の決定ユニット１０１０が現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定することは、現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定することと、前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定することと、を含み、ここで、前記現在の画像フレームタイプがＰピクチャであれば、前記時間参照画像は参照画像リスト０における参照フレームインデックス値が０の参照画像であり、現在の画像フレームタイプがＢピクチャであれば、前記時間参照画像は参照画像リスト１における参照フレームインデックス値が０の参照画像である。
いくつかの実施例において、前記第１の決定ユニット１０１０が前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定することは、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定することを含む。
いくつかの実施例において、前記第１の決定ユニット１０１０が現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定することは、現在の最大符号化ユニットの画像における左上隅横座標、最大符号化ユニットのサイズ、現在の符号化ユニットの幅、現在の画像の幅、現在の符号化ユニットの画像における左上隅横座標に基づいて、前記初期マッチング符号化ユニットの横座標を決定することと、現在の最大符号化ユニットの画像における左上隅縦座標、最大符号化ユニットのサイズ、現在の符号化ユニットの高さ、現在の画像の高さ、現在の符号化ユニットの画像における左上隅縦座標に基づいて、前記初期マッチング符号化ユニットの縦座標を決定することと、を含む。
いくつかの実施例において、前記構築ユニット１０２０が前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築することは、前記初期マッチング符号化ユニットの座標情報に基づいて、少なくとも１つの強化時間動きベクトル予測モード番号を決定することと、前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築することと、を含む。
いくつかの実施例において、マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標であり、前記構築ユニット１０２０が前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築することは、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、且つＡ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、且つＡ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、を含む。
ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの座標情報であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さである。
Ａ１は前記初期マッチング符号化ユニットの左上隅の４＊４ブロックであり、Ｂ１はＡ１の真左側の４＊４ブロックであり、Ｃ１はＡ１の真上の４＊４ブロックであり、Ａ２は前記初期マッチング符号化ユニットの右上隅の４＊４ブロックであり、Ｂ２はＡ２の真右側の４＊４ブロックであり、Ｃ２はＡ２の真上の４＊４ブロックであり、Ａ３は前記初期マッチング符号化ユニットの左下隅の４＊４ブロックであり、Ｂ３はＡ３の真左側の４＊４ブロックであり、Ｃ３はＡ３の真下の４＊４ブロックであり、Ａ４は前記初期マッチング符号化ユニットの右下隅の４＊４ブロックであり、Ｂ４はＡ４の真右側の４＊４ブロックであり、Ｃ４はＡ４の真下の４＊４ブロックである。
いくつかの実施例において、前記構築ユニット１０２０が前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築することは、前記強化時間候補リストの長さが５未満の場合、強化時間候補リストの長さが５に等しくなるまで、現在の強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号と同じの強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える操作を繰り返すことをさらに含む。
いくつかの実施例において、前記第２の決定ユニット１０３０が強化時間候補リストにおける各強化時間動きベクトル予測モード番号を順にトラバースし、各強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定することは、現在トラバースする強化時間動きベクトル予測モード番号について、
当該強化時間動きベクトル予測モード番号が０であれば、ＰｘはＭｘに等しく、ＰｙはＭｙに等しいと決定することと、
当該強化時間動きベクトル予測モード番号が１であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ＋ｎに等しいと決定することと、
当該強化時間動きベクトル予測モード番号が２であれば、ＰｘはＭｘ＋ｎに等しく、ＰｙはＭｙに等しいと決定することと、
当該強化時間動きベクトル予測モード番号が３であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ－ｎに等しいと決定することと、
当該強化時間動きベクトル予測モード番号が４であれば、ＰｘはＭｘ－ｎに等しく、ＰｙはＭｙに等しいと決定することと、を含み、
ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの左上隅座標であり、（Ｐｘ，Ｐｙ）は前記ターゲットマッチング符号化ユニットの左上隅座標である。
いくつかの実施例において、前記第３の決定ユニット１０４０が前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を前記現在の符号化ユニットの対応する位置のサブブロックに与えることを含む。
いくつかの実施例において、前記決定ユニット１０４０が前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＢピクチャの場合、当該サブブロックの前方向動き情報および後方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ前記現在の符号化ユニットの対応する位置のサブブロックに与えることと、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、を含む。
いくつかの実施例において、前記第３の決定ユニット１０４０が前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、サブブロックの前方向動き情報が利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの前方向動き情報が利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、現在の画像フレームタイプがＢピクチャの場合、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能なとき、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可なとき、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、を含み、ここで、前記第１の周辺ブロックは前記現在の符号化ユニットのいずれかの復号済み隣接ブロックを含む。
いくつかの実施例において、前記動き補償ユニット１０５０が前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うことは、現在の符号化ユニットのいずれかのサブブロックについて、当該サブブロックの動き情報に対して復号側動きベクトル調整技術を行わないことと、当該サブブロックが双方向オプティカルフロー条件を満たす場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得ることと、それ以外の場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、当該サブブロックの予測サンプル行列を得ることと、を含み、ここで、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
可能な一実施例において、上記符号化装置は映像符号化器を含み得る。
図１１に示すように、本発明の実施例にて提供される符号化デバイスのハードウェア構造の概略図である。当該符号化デバイスはプロセッサ１１０１と、機械実行可能命令が記憶されている機械可読記憶媒体１１０２とを含み得る。プロセッサ１１０１と機械可読記憶媒体１１０２とはシステムバス１１０３を介して通信可能である。また、プロセッサ１１０１は、機械可読記憶媒体１１０２中の符号化制御ロジックに対応する機械実行可能命令を読み取り実行することにより、上述した符号化方法を実行することができる。
本明細書で言及される機械可読記憶媒体１１０２は、任意の電子的、磁気的、光学的、または他の物理的記憶装置であってもよく、実行可能命令、データなどの情報を含むか、または記憶することができる。例えば、機械可読記憶媒体は、ＲＡＭ（Ｒａｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ランダムアクセスメモリ）、揮発性メモリ、不揮発性メモリ、フラッシュメモリ、記憶ドライブ（例えばハードディスクドライブ）、ソリッドステートハードディスク、任意のタイプの記憶ディスク（例えば光ディスク、ｄｖｄなど）、若しくは類似の記憶媒体、またはそれらの組み合わせであってもよい。
いくつかの実施例において、機械実行可能命令が記憶されている機械可読記憶媒体であって、前記機械実行可能命令がプロセッサにより実行されると、上述した符号化方法が実施される、機械可読記憶媒体がさらに提供される。例えば、前記機械可読記憶媒体はＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピーディスク、および光データ記憶デバイスなどであってもよい。
いくつかの実施例において、上記実施例のいずれかにおける符号化装置と、上記実施例のいずれかにおける復号装置と、を含むカメラデバイスがさらに提供される。
なお、本明細書において、第１および第２などのような関係用語は１つのエンティティまたは操作を別のエンティティまたは操作と区別するためのものに過ぎず、必ずしもこれらのエンティティまたは操作の間に任意のこのような実際の関係または順序が存在することを要求または示唆するものではない。また、用語の「含む」、「包含」またはその他の任意の変形は非排他的な包含をカバーすることを意図し、それにより、一連の要素を含むプロセス、方法、物品またはデバイスはそれらの要素を含むだけでなく、さらに明確に列挙されない他の要素を含み、またはこのようなプロセス、方法、物品またはデバイスに固有の要素を含む。それ以上の制限がない場合、文の「１つの……を含む」によって限定された要素は、前記要素を含むプロセス、方法、物品またはデバイスに別の同じ要素がさらに存在することを排除するものではない。
以上は本発明の好適な実施例に過ぎず、本発明を限定するものではなく、本発明の精神および原則内で行われる任意の修正、同等の置換、および改善などは、いずれも本発明の保護範囲内に含まれるべきである。
７１０ 取得ユニット
７２０ 第１の決定ユニット
７３０ 構築ユニット
７４０ 第２の決定ユニット
７５０ 第３の決定ユニット
７５０ 決定ユニット
７６０ 補償ユニット
本発明は映像符号化・復号技術に関し、特に復号方法、符号化方法、装置、デバイスおよび機械可読記憶媒体に関する。
完全な映像符号化は一般的に予測、変換、量子化、エントロピー符号化、フィルタリングなどの操作を含む。予測はイントラ予測とインター予測に分けることができ、イントラ予測は、周辺の符号化済みユニットを参照として現在の未符号化ユニットに対して予測を行い、空間的冗長性を効果的に除去する。インター予測は、隣接する符号化済み画像を用いて現在の画像を予測し、時間的冗長性を効果的に除去する。
汎用映像符号化（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、ＶＶＣと略称）規格に採用される代替時間動きベクトル予測（Ａｌｔｅｒｎａｔｉｖｅ Ｔｅｍｐｏｒａｌ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ、ＡＴＭＶＰと略称）技術は時間サブブロックの動き情報を利用して、現在の符号化ユニット中の各サブブロックに異なる動き情報を提供する。
これに鑑みて、本発明は復号方法、符号化方法、装置、デバイスおよび機械可読記憶媒体を提供する。
本発明の実施例の第１の態様によれば、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得するステップと、前記強化時間動きベクトル予測モードフラグの値が第１の数値の場合、前記現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップと、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップと、前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップと、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップと、を含む復号方法が提供される。
本発明の実施例の第２の態様によれば、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップと、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップと、強化時間候補リストにおける各強化時間動きベクトル予測モード番号を順にトラバースし、各強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップと、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップと、前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップと、強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送するステップと、を含む符号化方法が提供される。
本発明の実施例の第３の態様によれば、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得するための取得ユニットと、前記強化時間動きベクトル予測モードフラグの値が第１の数値の場合、前記現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するための第１の決定ユニットと、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するための構築ユニットと、前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するための第２の決定ユニットと、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するための第３の決定ユニットと、を含む復号装置が提供される。
本発明の実施例の第４の態様によれば、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するための第１の決定ユニットと、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するための構築ユニットと、強化時間候補リストにおける各強化時間候補モードを順にトラバースし、各モードに対応するターゲットマッチング符号化ユニットの座標情報を決定するための第２の決定ユニットと、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するための第３の決定ユニットと、前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うための動き補償ユニットと、強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送するための符号化ユニットと、を含む符号化装置が提供される。
本発明の実施例の第５の態様によれば、プロセッサと機械可読記憶媒体とを含み、前記機械可読記憶媒体には、前記プロセッサによって実行可能な機械実行可能命令が記憶され、前記プロセッサは第１の態様の復号方法を実施するように機械実行可能命令を実行するために用いられる、復号デバイスが提供される。
本発明の実施例の第６の態様によれば、プロセッサと機械可読記憶媒体とを含み、前記機械可読記憶媒体には、前記プロセッサによって実行可能な機械実行可能命令が記憶され、前記プロセッサは第２の態様の符号化方法を実施するように機械実行可能命令を実行するために用いられる、符号化デバイスが提供される。
本発明の実施例の第７の態様によれば、プロセッサにより実行されると第１の態様または第２の態様に記載の方法が実施される機械実行可能命令を記憶する機械可読記憶媒体が提供される。
本発明の実施例の復号方法は、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値および強化時間動きベクトル予測モードインデックス値を取得し、強化時間動きベクトル予測モードフラグの値が第１の数値の場合、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定し、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築し、強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定し、ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することにより、符号化・復号性能を向上させた。
本発明の例示的な一実施例に示す符号化・復号方法の概略図である。 本発明の例示的な一実施例に示すＣｌｉｐ操作の概略図である。 本発明の例示的な一実施例に示す復号方法のフローチャートである。 本発明の例示的な一実施例に示すマッチング符号化ユニットをオフセットするときの参照ブロックの概略図である。 本発明の例示的な一実施例に示す現在の符号化ユニットの第１の周辺ブロックの概略図である。 本発明の例示的な一実施例に示す別の復号方法のフローチャートである。 本発明の例示的な一実施例に示す復号装置の構造の概略図である。 本発明の例示的な一実施例に示す別の復号装置の構造の概略図である。 本発明の例示的な一実施例に示す復号デバイスのハードウェア構造の概略図である。 本発明の例示的な一実施例に示す符号化装置の構造の概略図である。 本発明の例示的な一実施例に示す符号化デバイスのハードウェア構造の概略図である。
ここでは、例示的な実施例について詳細に説明し、その例を図面において表示する。以下の説明が図面にかかわる場合、特に断りのない限り、異なる図面中の同一の数字は同一または類似の要素を表す。以下の例示的な実施例において説明される実施形態は、本発明に一致するすべての実施形態を代表するものではない。逆に、それらは、添付の特許請求の範囲に詳しく記載されるような、本発明のいくつかの態様に一致する装置および方法の例に過ぎない。
本発明において使用される用語は、特定の実施例を説明するためのものに過ぎず、本発明を限定するものではない。本発明および添付の特許請求の範囲において使用される単数形の「一種」、「前記」および「当該」は、文脈において他の意味が明確に示されない限り、複数形を含むことも意図している。
以下、当業者が本発明の実施例にて提供される技術的解決手段をよりよく理解できるように、本発明の実施例にかかわる技術用語の一部、および従来の映像符号化・復号の主なフローについて簡単に説明する。
以下、当業者が本発明の実施例にて提供される技術的解決手段をよりよく理解できるように、まず本発明の実施例にかかわる技術用語の一部について簡単に説明する。
技術用語：
１、予測画素（Ｐｒｅｄｉｃｔｉｏｎ Ｓｉｇｎａｌ）：符号化・復号済みの画素から導出された画素値を指し、元の画素と予測画素との差により残差を得、さらに残差変換量子化および係数符号化を行う。
例示的に、インター予測画素とは現在の画像ブロックの参照フレーム（再構成画素フレーム）から導出された画素値であり、画素位置が離散的であるため、内挿演算によって最終的な予測画素を取得する必要がある。予測画素と元の画素が近いほど、両者を減算して得られた残差エネルギーが小さくなり、符号化圧縮性能が高くなる。
２、動きベクトル（Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ、ＭＶと略称）：インター符号化において、ＭＶで現在の符号化ユニットとその参照画像中の最適なマッチング符号化ユニットとの間の相対的な変位を表す。分割された各ブロック（サブブロックと呼ばれてもよい）はいずれも復号側に伝送する必要のある対応する動きベクトルを有する。各サブブロックのＭＶを独立して符号化と送信を行うと、特に小さなサイズに分割されたサブブロックについて、かなりのビットを消費する必要がある。ＭＶの符号化のためのビット数を低減するために、映像符号化において隣接する画像ブロック間の空間的相関性を利用し、隣接する符号化済みブロックのＭＶに基づいて現在の符号化対象のブロックのＭＶを予測し、予測差を符号化する。こうするとＭＶを表すビット数を効果的に低減することができる。これを基に、現在の画像ブロックのＭＶを符号化する過程において、一般的には、まず隣接する符号化済みブロックのＭＶを用いて現在の画像ブロックのＭＶを予測し、ＭＶの予測値（Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ、ＭＶＰと略称）と動きベクトルの実際の推定値との差、すなわち差分動きベクトル（ＭｏｔｉｏｎＶｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ、ＭＶＤと略称）を符号化し、それによりＭＶの符号化のビット数を効果的に低減する。
３、動き情報（Ｍｏｔｉｏｎ Ｉｎｆｏｒｍａｔｉｏｎ）：ＭＶは現在の符号化ユニットとある参照画像中の最適なマッチング符号化ユニットとの相対的な変位を表すので、画像ブロック向けの情報を正確に取得するために、ＭＶ情報の他に、参照画像インデックス情報でどの参照画像を用いたかを表す必要がある。映像符号化技術において、現在の画像に対して、一般的には一定の原則に基づいて、参照画像リストを作成し、参照画像インデックス情報は現在の画像ブロックが参照画像リストにおける何番目の参照画像を用いたかを表す。また、多くの符号化技術は複数の参照画像リストをサポートするので、さらにどの参照画像リストを用いたかを示す１つのインデックス値が必要とされ、当該インデックス値は参照方向と呼ばれてもよい。映像符号化において、ＭＶ、参照フレームインデックス、参照方向など、動きに関する符号化情報を動き情報と総称し、例えば、動き情報は、予測参照モードと、Ｌ０動きベクトルと、Ｌ１動きベクトルと、Ｌ０参照インデックスと、Ｌ１参照インデックスとからなるインター予測のための５タプルである。
４、レート歪み最適化（Ｒａｔｅ－Ｄｉｓｔｏｒｔｉｏｎ Ｏｐｔｉｍｉｚｅｄ、ＲＤＯと略称）原則：符号化効率を評価する指標はビットレートとピーク信号対雑音比（Ｐｅａｋ Ｓｉｇｎａｌ ｔｏ Ｎｏｉｓｅ Ｒａｔｉｏ、ＰＳＮＲと略称）とを含む。ビットレートが小さければ小さいほど、圧縮率が大きく、ＰＳＮＲが大きければ大きいほど、再構成画像品質が良好である。モードを選択する際に、判別式は実質的に両者に対する総合的な評価となる。モードに対応するコスト：
Ｊ（ｍｏｄｅ）＝Ｄ＋λ＊Ｒ。
ここで、Ｄは歪み（Ｄｉｓｔｏｒｔｉｏｎ）を表し、一般的にはＳＳＥ（Ｓｕｍ ｏｆ ｔｈｅ Ｓｑｕａｒｅｄ Ｅｒｒｏｒｓ、残差平方和）指標を用いて評価され、ＳＳＥとは、再構成ブロックとソース画像ブロックとの残差平方和であり、λはラグランジュ乗数であり、Ｒは当該モードにおいて画像ブロックの符号化に必要な実際のビット数であり、符号化モード情報、動き情報、残差などに必要なビット数の総和を含む。
モードを選択する際に、ＲＤＯ原則を用いて符号化モードを比較決定すれば、通常、最適な符号化性能が保証できる。
５、双方向オプティカルフロー（ＢＩ－ｄｉｒｅｃｔｉｏｎａｌ Ｏｐｔｉｃａｌ ｆｌｏｗ、ＢＩＯと略称）：ＢＩＯ技術は、前方向および後方向参照フレームにおける画素値の勾配情報を利用して現在の符号化ユニットにオプティカルフロー補償値を追加する。例示的に、ＢＩＯの技術的詳細は以下のとおりであってもよい。
５．１、勾配の和Ｓ１、Ｓ２、Ｓ３、Ｓ５、Ｓ６を計算する。
ここで、
、
およびθ（ｉ，ｊ）の計算は以下のとおりである。
ここで、Ｉ（０）（ｘ，ｙ）およびＩ（１）（ｘ，ｙ）は前方向動き補償値、後方向動き補償値およびその拡張値である。その拡張方式はブロック境界の動き補償値からコピーしてもよいし、参照画素位置から取得してもよい。
および
は画素点の前方向参照フレームおよび後方向参照フレームにおける水平成分および垂直成分の変化率である。θ（ｉ，ｊ）は前方向動き補償値およびその拡張値と、後方向動き補償値およびその拡張値との画素差分値を表す。
５．２、続いて、改善動きベクトルｖｘおよびｖｙを計算する。
ここで、＜＜は左シフト演算子であり、「ｘ＞ｙ？ｚ：ａ」は「ｘ＞ｙ」が成立する場合、値がｚであり、「ｘ＞ｙ」が成立しない場合、値がａであることを表し、ｍとｔｈＢＩＯはいずれも閾値であり、ｒは正則化項であり、ゼロ除算操作を避ける。Ｓ１、Ｓ２、Ｓ３、Ｓ５およびＳ６は画素の勾配の和であり、ｃｌｉｐ３は中の値が－ｔｈＢＩＯとｔｈＢＩＯとの間にあることを保証することを表す。
５．３、改善動きベクトルに基づいてオプティカルフローオフセット値ｂを取得する。
ここで、（ｘ，ｙ）は現在の符号化ユニット内部の各画素の座標であり、Ｉ（０）（ｘ，ｙ）およびＩ（１）（ｘ，ｙ）は前方向動き補償値、後方向動き補償値およびその拡張値である。
５．４、最後にオプティカルフローオフセット値に基づいて現在の符号化ユニットの各画素の予測値ｐｒｅｄＢＩＯ（ｘ，ｙ）を計算する。
ここで、Ｉ（０）（ｘ，ｙ）およびＩ（１）（ｘ，ｙ）は前方向動き補償値および後方向動き補償値である。
６、復号側動きベクトル調整（Ｄｅｃｏｄｅｒ－ｓｉｄｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｆｉｎｅｍｅｎｔ、ＤＭＶＲと略称）：復号側動きベクトル調整技術ＤＭＶＲはダイレクトモードまたはスキップモードに適用される。
例示的に、ＤＭＶＲの技術的詳細は以下のとおりである。
６．１、初期ＭＶを利用して予測ブロックと検索領域内に必要な参照画素を取得する。
６．２、最適な整数画素位置を取得する。
例示的に、現在の符号化ユニットの輝度画像ブロックを、重ならず、且つ位置が隣接するサブブロックに分割し、すべてのサブブロックの初期ＭＶはＭＶ０とＭＶ１である。各サブブロックについて、初期ＭＶ０およびＭＶ１に対応する位置を中心として、近傍の一定範囲内でテンプレートマッチング歪みが最も小さい位置を探し始め、テンプレートマッチング歪みの計算方式は前方向検索領域における中心位置からのサブブロック幅にサブブロック高さをかけたブロックと、後方向検索領域における中心位置からのサブブロック幅にサブブロック高さをかけたブロックとの間のＳＡＤ（Ｓｕｍ ｏｆ Ａｂｓｏｌｕｔｅ Ｄｉｆｆｅｒｅｎｃｅｓ、差分絶対値和）値を計算することである。
６．３、最適な副画素位置を取得する。
例示的に、副画素位置の確認は整数位置の最適位置、その左側、その右側、その上方、およびその下方の合計で５箇所のテンプレートマッチング歪み値を用い、整数位置の最適位置近傍の二次歪み平面を推定し、歪み平面における歪みが最も小さい位置を算出して副画素位置とする。その計算式は以下のとおりである。
水平副画素位置＝（ｓａｄ＿ｌｅｆｔ－ｓａｄ＿ｒｉｇｈｔ）＊Ｎ／（（ｓａｄ＿ｒｉｇｈｔ＋ｓａｄ＿ｌｅｆｔ－２＊ｓａｄ＿ｍｉｄ）＊２）
垂直副画素位置＝（ｓａｄ＿ｂｔｍ－ｓａｄ＿ｔｏｐ）＊Ｎ／（（ｓａｄ＿ｔｏｐ＋ｓａｄ＿ｂｔｍ－２＊ｓａｄ＿ｍｉｄ）＊２）
ここで、ｓａｄ＿ｍｉｄ、ｓａｄ＿ｌｅｆｔ、ｓａｄ＿ｒｉｇｈｔ、ｓａｄ＿ｔｏｐおよびｓａｄ＿ｂｔｍは、それぞれ整数位置の最適位置、その左側、その右側、その上方、およびその下方の合計で５箇所のテンプレートマッチング歪み値であり、Ｎは精度である。
６．４、最適ＭＶに基づいて、最終予測ブロックを算出する。
以下、従来の映像符号化・復号の主なフローについて簡単に説明する。
図１中の（ａ）に示すように、映像符号化を例とし、映像符号化は一般的に予測、変換、量子化、エントロピー符号化などのプロセスを含み、さらに、符号化プロセスは図１中の（ｂ）のフレームワークに従って実現することができる。
ここで、予測はイントラ予測とインター予測に分けることができ、イントラ予測は、周辺の符号化済みブロックを参照として現在の未符号化ブロックに対して予測を行い、空間的冗長性を効果的に除去する。インター予測は、隣接する符号化済み画像を用いて現在の画像を予測し、時間的冗長性を効果的に除去する。
変換とは、画像を空間領域から変換領域に変換することであり、変換係数を用いて画像を表す。ほとんどの画像は多くの平坦な領域およびゆっくりと変化する領域を含み、適切な変換により画像を空間領域における分散した分布から変換領域における相対的集中した分布に変換することができ、信号間の周波数領域の相関性を除去し、量子化プロセスと合わせて、ビットストリームを効果的に圧縮することができる。
エントロピー符号化は可逆符号化方式であり、一連の要素記号を伝送または記憶のためのバイナリストリームに変換することができ、入力された記号は量子化された変換係数、動きベクトル情報、予測モード情報、変換量子化に関連するシンタックスなどを含み得る。エントロピー符号化は映像要素記号の冗長性を効果的に除去することができる。
以上は符号化を例として紹介し、映像復号は映像符号化のプロセスに対応しており、すなわち映像復号は一般的にエントロピー復号、予測、逆量子化、逆変換、フィルタリングなどのプロセスを含み、各プロセスの実現原理は映像符号化と同一または類似である。
以下、ＡＴＭＶＰ技術の実現について簡単に説明する。
従来のＡＴＭＶＰ技術の実現は主に以下のフローを含む。
１）、時間動きベクトル予測（Ｔｅｍｐｏｒａｌ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ、ＴＭＶＰと略称）の決定：現在の符号化ユニットのＡ０位置の動き情報が以下の条件を満たすか否かを判断する。
ａ）Ａ０位置が存在し、且つ現在の符号化ユニットと同一のスライス（Ｓｌｉｃｅ）およびユニット（Ｕｎｉｔ）にあり、
ｂ）Ａ０位置の予測モードがインターモードであり、
ｃ）Ａ０位置の参照フレームインデックスが現在のフレームのｃｏ－ｌｏｃａｔｅｄフレームの参照フレームインデックスに一致する（まずＬ０方向を判断し、続いてＬ１方向を判断する）。
ここで、Ａ０位置は（ｘＣｂ－１，ｙＣｂ＋ＣｂＨｅｉｇｈｔ－１）の位置であり、（ｘＣｂ，ｙＣｂ）は現在のユニットの左上隅の座標であり、ＣｂＨｅｉｇｈｔは現在の符号化ユニットの高さである。
２）、中心参照ブロックの位置の計算：ステップ１）で取得したＴＭＶＰの精度は１／１６であり、４ビット右シフトして整数画素に変換する必要がある。また、参照ブロックの位置を現在のＬＣＵ（Ｌａｒｇｅｓｔ Ｃｏｄｉｎｇ Ｕｎｉｔ、最大符号化ユニット）の参照フレームにおけるコロケーテッドＬＣＵの範囲内にクリップ（Ｃｌｉｐ）し、すなわち参照ブロックの位置が現在のＬＣＵの参照フレームにおけるコロケーテッドＬＣＵの範囲内にない場合、参照ブロックを現在のＬＣＵの参照フレームにおけるコロケーテッドＬＣＵの範囲内にちょうどあるように水平または／および垂直方向にシフトする必要があり、その概略図を図２に示す。
中心参照ブロックの位置の計算方式は以下に示すとおりである。
ｘＣｏｌＣｂ＝Ｃｌｉｐ３（ｘＣｔｂ，Ｍｉｎ（ＰｉｃＷｉｄｔｈ－１，ｘＣｔｂ＋（１＜＜ＣｔｂＬｏｇ２Ｓｉｚｅ）＋３），ｘＣｏｌＣｔｒＣｂ＋（ｔｅｍｐＭｖ［０］＞＞４））
ｙＣｏｌＣｂ＝Ｃｌｉｐ３（ｙＣｔｂ，Ｍｉｎ（ＰｉｃＨｅｉｇｈｔ－１，ｙＣｔｂ＋（１＜＜ＣｔｂＬｏｇ２Ｓｉｚｅ）－１），ｙＣｏｌＣｔｒＣｂ＋（ｔｅｍｐＭｖ［１］＞＞４））
ここで、（ｘＣｏｌＣｂ，ｙＣｏｌＣｂ）は中心参照ブロックの左上隅の座標であり、（ｘＣｔｂ，ｙＣｔｂ）は現在のＬＣＵの参照フレームにおけるコロケーテッドＬＣＵの左上隅の座標であり、ＰｉｃＷｉｄｔｈおよびＰｉｃＨｅｉｇｈｔはそれぞれ現在のフレームの幅および高さであり、ＣｔｂＬｏｇ２Ｓｉｚｅは２を底とした現在のＬＣＵのサイズの対数であり、（ｘＣｏｌＣｔｒＣｂ，ｙＣｏｌＣｔｒＣｂ）は現在の符号化ユニットの中心位置の座標であり、ｔｅｍｐＭｖ［０］およびｔｅｍｐＭｖ［１］はそれぞれＡ０位置の水平動きベクトルおよび垂直動きベクトルである。
３）、中心参照ブロックの予測モードを判断し、予測モードが非インター予測モードであれば、ｃｔｒＰｒｅｄＦｌａｇＬ０およびｃｔｒＰｒｅｄＦｌａｇＬ１はいずれも０であり、それ以外の場合、すなわち予測モードがインター予測モードであれば、ステップ４）に移行する。
４）、参照位置の調整：サブブロックのサイズが８＊８であるため、動き情報は８＊８を単位とする。したがって、中心参照ブロックの左上隅の座標を８倍の座標位置に調整する必要がある。調整式は以下のとおりである。
ｘＣｏｌＣｂ＝（（ｘＣｏｌＣｂ＞＞３）＜＜３）
ｙＣｏｌＣｂ＝（（ｙＣｏｌＣｂ＞＞３）＜＜３）
５）、調整された中心参照ブロックの動き情報の取得：調整された中心参照ブロックの予測モードがイントラ予測またはイントラブロックコピー（Ｉｎｔｒａ Ｂｌｏｃｋ Ｃｏｐｙ、ＩＢＣと略称）モードであれば、ＦｌａｇＬＸＣｏｌ＝０であり、それ以外の場合、調整された中心参照ブロックのＬ０とＬ１方向の動き情報が存在するか否かをそれぞれ判断し、存在すれば、ＦｌａｇＬＸＣｏｌ＝１であり、調整された中心参照ブロックのＬ０とＬ１方向の動き情報を取得する。
例示的に、ＬＸ＝Ｌ０またはＬＸ＝Ｌ１であり、調整された中心参照ブロックの予測モードがイントラ予測モードまたはイントラブロックコピーモードである場合、ＦｌａｇＬ０Ｃｏｌ＝０、且つＦｌａｇＬ１Ｃｏｌ＝０である。
調整された中心参照ブロックの予測モードがイントラ予測でも、イントラブロックコピーモードでもない場合、調整された中心参照ブロックのＬ０方向の動き情報が存在するとき、ＦｌａｇＬ０Ｃｏｌ＝１であり、調整された中心参照ブロックのＬ０方向の動き情報が存在しないとき、ＦｌａｇＬ０Ｃｏｌ＝０であり、調整された中心参照ブロックのＬ１方向の動き情報が存在するとき、ＦｌａｇＬ１Ｃｏｌ＝１であり、調整された中心参照ブロックのＬ１方向の動き情報が存在しないとき、ＦｌａｇＬ１Ｃｏｌ＝０である。
ＦｌａｇＬＸＣｏｌ＝１の場合、現在のフレームの長期参照フレームとｃｏ－ｌｏｃａｔｅｄフレームの長期参照フレームが等しくなければ、調整された中心参照ブロックの動き情報が利用不可であると決定し、ｃｔｒＰｒｅｄＦｌａｇＬＸ＝０であり、それ以外の場合、調整された中心参照ブロックの動き情報をＬｉｓｔＸ（Ｘ＝０または１）の最初のフレームを指すようにスケール（ｓｃａｌｅ）し、現在の中心参照ブロック位置の動き情報とし、ｃｔｒＰｒｅｄＦｌａｇＬＸ＝１である。
６）、ｃｔｒＰｒｅｄＦｌａｇＬＸ＝１の場合、各サブブロックの動き情報の計算：マッチング符号化ユニット中の各サブブロックをトラバースし、いずれかのサブブロックについて、当該サブブロックをマッチング符号化ユニットが位置するＬＣＵの範囲内にｃｌｉｐし、ｃｌｉｐ後のサブブロックの動き情報が利用可能であれば、当該ｃｌｉｐ後のサブブロックの動き情報をＬｉｓｔＸの最初のフレームを指すようにスケールし、スケール後の動き情報を現在の符号化ユニットに対応する位置のサブブロックに与え、ｃｌｉｐ後のサブブロックの動き情報が利用不可であれば、調整された中心参照ブロックの中心位置の動き情報をＬｉｓｔＸの最初のフレームを指すようにスケールし、スケール後の動き情報を現在の符号化ユニットに対応する位置のサブブロックに与える。
例示的に、現在の符号化ユニットの隣接ブロックの動き情報により、ｃｏ－ｌｏｃａｔｅｄ（共同位置）フレームにおいて現在の符号化ユニットの隣接符号化ユニットに対応する符号化ユニットを検索し、ｃｏ－ｌｏｃａｔｅｄフレームにおける現在の符号化ユニットに対応する位置の符号化ユニットの内部の各サブブロックの動き情報を現在の符号化ユニット中の各サブブロックに提供して使用させてもよい。
ｃｏ－ｌｏｃａｔｅｄフレームにおいて現在の符号化ユニットに対応する位置の符号化ユニットを検索することは現在の符号化ユニットの周辺の符号化ユニットの動き情報に依存する必要があり、周辺の符号化ユニットの動き情報が正確でなければ、検索で得られた対応する位置の符号化ユニットの動き情報も信頼できず、それにより符号化・復号性能に影響を与える。
マッチング符号化ユニットの動作情報の信頼性を向上させ、符号化・復号性能を最適化するために、本発明の実施例は、現在の符号化ユニットのｃｏ－ｌｏｃａｔｅｄフレームにおけるコロケーテッド符号化ユニットの動き情報を利用してマッチング符号化ユニットを決定し、検索で得られたマッチング符号化ユニットに対して上下左右など、一連のオフセットを行い、複数の時間候補モードを生成し、周辺の符号化ユニットの動き情報の不正確によるマッチング符号化ユニットが正確に見つからないという問題をある程度で回避する。
本発明の実施例の主な実現フローは以下の６つの部分を含み得る。
第１の部分（Ａと記されてもよい）において、現在の符号化ユニットの符号化／復号条件に基づいて、強化時間動きベクトル予測（Ｅｎｈａｎｃｅｄ Ｔｅｍｐｏｒａｌ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ、ＥＴＭＶＰと略称）モードフラグと強化時間動きベクトル予測モードインデックス値とを符号化／解析する。
第２の部分（Ｂと記されてもよい）において、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定する。
第３の部分（Ｃと記されてもよい）において、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築する。
第４の部分（Ｄと記されてもよい）において、強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補モードリストにおいて対応する強化時間動きベクトル予測モードを取得し、当該強化時間動きベクトル予測モードに対応するターゲットマッチング符号化ユニットの座標情報を決定する。
第５の部分（Ｅと記されてもよい）において、ターゲットマッチング符号化ユニットの座標情報に基づいて、現在の符号化ユニット中の各サブブロックの動き情報を取得する。
第６の部分（Ｆと記されてもよい）において、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行う。
例示的に、上記の６つの部分の順序を調整してもよい。
以下、本発明の実施例の上記目的、特徴および利点をより明らかにするために、図面を参照しながら本発明の実施例における技術的解決手段について一層詳細に説明する。
図３に示すように、本発明の実施例にて提供される復号方法のフローチャートであり、ここで、当該復号方法は復号デバイスに適用することができ、図３に示すように、当該復号方法は以下のステップを含み得る。
ステップＳ３００において、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得する。
本発明の実施例において、現在の符号化ユニットは処理対象の画像中のいずれかの符号化ユニットであってもよい。実施する際に、処理対象の画像を異なる符号化ユニットに分割し、各符号化ユニットを一定の順序に従って順次処理してもよい。ここで、各符号化ユニットのサイズおよび形状は予め設定された分割ルールに基づいて設定してもよい。
例示的に、現在の符号化ユニットを復号する場合、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得してもよい。
例示的に、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値をビットストリームから解析してもよく、または、現在の符号化ユニットが一定の条件を満たす場合に導出してもよい。
例示的に、現在の符号化ユニットの強化時間動きベクトル予測モードインデックス値をビットストリームから解析してもよく、または、現在の符号化ユニットが一定の条件を満たす場合に導出してもよい。
取得した現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値が第１の数値の場合、ステップＳ３１０～ステップＳ３４０を実行する。
例示的に、強化時間動きベクトル予測モードフラグの値は、強化時間動きベクトル予測モードをイネーブルすることを示す値（本明細書では第１の数値と呼ばれ、例えば１である）を含み得る。
ステップＳ３１０において、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定する。
本発明の実施例において、取得した現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値が第１の数値の場合、現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすると決定してもよく、この場合、初期マッチング符号化ユニットの座標情報の決定を行ってもよい。
例示的に、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定してもよい。
例示的に、当該初期マッチング符号化ユニットの座標情報は当該初期マッチング符号化ユニットの対応する参照画像における座標情報、例えば左上隅座標であってもよい。
ステップＳ３２０において、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築する。
本発明の実施例において、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定した場合、当該初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築してもよい。
例示的に、当該強化時間候補リストは少なくとも１つの強化時間動きベクトル予測モード番号を含む。
例示的に、異なる強化時間動きベクトル予測モード番号に対応するマッチング符号化ユニットの座標情報が異なってもよい。
ステップＳ３３０において、強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、当該強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定する。
本発明の実施例において、ステップＳ３００で取得した現在の符号化ユニットの強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、当該強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定してもよい。
例示的に、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット、または、初期マッチング符号化ユニットに対して上／下／左／右オフセットを行うことにより得られたマッチング符号化ユニットを含み得る。
例示的に、ターゲットマッチング符号化ユニットの座標情報は初期マッチング符号化ユニットの座標情報に一致し、または、初期マッチング符号化ユニットの座標情報を基に、予め設定されたオフセット量に従って調整して得られてもよい。
ステップＳ３４０において、ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定する。
本発明の実施例において、ターゲットマッチング符号化ユニットの座標情報を決定した場合、当該ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニットの動き情報を決定してもよい。例示的に、ターゲットマッチング符号化ユニットの動き情報はターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含む。
例示的に、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定してもよい。例えば、ターゲットマッチング符号化ユニット中のｈ行目、ｌ列目のサブブロックの動き情報に基づいて、現在の符号化ユニット中のｈ行目、ｌ列目のサブブロックの動き情報を決定する。
いくつかの実施例において、ステップＳ３００において、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を取得するステップは、現在の符号化ユニットが第１の解析条件を満たす場合、ビットストリームから強化時間動きベクトル予測モードのフラグの値を解析するステップと、それ以外の場合、強化時間動きベクトル予測モードフラグの値が第２の数値であると決定するステップであって、当該強化時間動きベクトル予測モードフラグの値が第２の数値であることは現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示すステップと、を含み得る。
例示的に、強化時間動きベクトル予測モードの使用には一般的に一定の条件を満たすことが必要であることが考慮され、当該条件を満たさない場合に、強化時間動きベクトル予測モードは適用できない可能性があり、この場合に、強化時間動きベクトル予測モードフラグの値はビットストリームから解析する必要がなく、導出してもよい。
例示的に、現在の符号化ユニットが指定条件（本明細書では第１の解析条件と呼ばれる）を満たすか否かに基づいて、ビットストリームから現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を解析し、または、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を導出すると決定してもよい。
例示的に、現在の符号化ユニットが第１の解析条件を満たす場合、ビットストリームから現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を解析し、現在の符号化ユニットが第１の解析条件を満たさない場合、ビットストリームから現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を解析する必要がなく、現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないと決定してもよく、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値は、現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示すための値（本明細書では第２の数値と呼ばれる）である。
一例において、上記の現在の符号化ユニットが第１の解析条件を満たすことは、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たすことと、シーケンスレベルのハイレベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることと、現在の符号化ユニットが角度重み付け予測の利用条件を満たし、または究極の動きベクトル表現（Ｕｌｔｉｍａｔｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｅｘｐｒｅｓｓｉｏｎ、ＵＭＶＥ）の利用条件を満たすこととのうちの１つまたは複数を含み得る。
例示的に、時間動きベクトル予測モードの利用には符号化ユニットの予測モードおよびサイズなどに対して一定の要件が求められることを考慮すると、符号化ユニットの予測モードおよび／またはサイズなどが要件を満たすか否かに基づいて、符号化ユニットが適用するか否かを決定してもよい。
また、高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されないことを考慮すると、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルしないと決定してもよい。
例示的に、現在の符号化ユニットの予測モードがスキップ（ｓｋｉｐ）モードまたはダイレクト（ｄｉｒｅｃｔ）モードであり、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たし、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可され、現在の符号化ユニットが角度重み付け予測（Ａｎｇｌｅ Ｗｅｉｇｈｔ Ｐｒｅｄｉｃｔｉｏｎ、ＡＷＰと略称）の利用条件を満たし、または究極の動きベクトル表現（Ｕｌｔｉｍａｔｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｅｘｐｒｅｓｓｉｏｎ、ＵＭＶＥと略称）の利用条件を満たすなどの条件のうちの１つまたは複数が満たされる場合、現在の符号化ユニットが第１の解析条件を満たすと決定する。
例えば、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードの場合、または、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たす場合、または、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可される場合、または、現在の符号化ユニットが角度重み付け予測の利用条件を満たし、若しくは究極の動きベクトル表現の利用条件を満たす場合、現在の符号化ユニットが第１の解析条件を満たすと決定する。
例えば、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードの場合、現在の符号化ユニットが第１の解析条件を満たすと決定する。
例えば、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たす場合、現在の符号化ユニットが第１の解析条件を満たすと決定する。
例えば、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可される場合、現在の符号化ユニットは第１の解析条件を満たすと決定する。
例えば、現在の符号化ユニットが角度重み付け予測の利用条件を満たし、または究極の動きベクトル表現の利用条件を満たす場合、現在の符号化ユニットが第１の解析条件を満たすと決定する。
また、例えば、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであり、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たし、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可される場合、すなわち上記条件はいずれも満たされる場合、現在の符号化ユニットが第１の解析条件を満たすと決定してもよい。
また、例えば、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであり、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たし、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可され、且つ、現在の符号化ユニットが角度重み付け予測の利用条件を満たし、若しくは究極の動きベクトル表現の利用条件を満たす場合、すなわち上記条件はいずれも満たされる場合、現在の符号化ユニットが第１の解析条件を満たすと決定してもよい。
例示的に、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たすことは現在の符号化ユニットの幅および高さがいずれもＮ０以上であることを含み得る。例示的に、Ｎ０＝８である。
なお、上記の現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たすという記載は本発明の実施例における関連実現の具体的な例に過ぎず、本発明の保護範囲を限定するものではなく、本発明の実施例において、現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たすことは、例えば、現在の符号化ユニットの幅がＮ０以上であり、現在の符号化ユニットの高さがＮ０以上であり、または、現在の符号化ユニットの高さおよび幅がいずれもＮ０以上であり、且つ幅および高さがＮ０に同時に等しくないなど、他の状況を含み得る。
例示的に、現在の符号化ユニットが角度重み付け予測の利用条件を満たすことは、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが角度重み付け予測技術をイネーブルすることが許可されることと、現在の符号化ユニットの幅および高さがいずれもＮ１以上であり、現在の符号化ユニットの幅および高さがいずれもＮ２以下であることと、現在の画像フレームタイプがＢピクチャであることと、を含み得る。
例示的に、現在の符号化ユニットが究極の動きベクトル表現の利用条件を満たすことは、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが究極の動きベクトル表現技術をイネーブルすることが許可されることを含み得る。
一例において、現在の符号化ユニットが第１の解析条件を満たすことは、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、現在の符号化ユニットのサイズが、現在の符号化ユニットの幅および高さがいずれもＮ０以上であるというサイズ制限を満たすことと、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることと、前記現在の符号化ユニットが角度重み付け予測の利用条件を満たし、または究極の動きベクトル表現の利用条件を満たすことと、を含む。
一例において、強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディング（Ｃｏｎｔｅｘｔ－ｂａｓｅｄ Ａｄａｐｔｉｖｅ Ｂｉｎａｒｙ Ａｒｉｔｈｍｅｔｉｃ Ｃｏｄｉｎｇ，ＣＡＢＡＣ）を用いるとともに、１つのコンテキストモデルを用いてもよい。
別の例において、強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いるとともに、複数のコンテキストモデルを用いてもよい。例示的に、当該複数のコンテキストモデルは、現在の符号化ユニットのサイズに基づいて決定されてもよい。例示的に、現在の符号化ユニットのサイズは、現在の符号化ユニットの幅および／または高さ、現在の符号化ユニットの幅と高さとのうちの最大値若しくは最小値、または現在の符号化ユニットの幅と高さとの積などを含み得るが、これらに限定されない。
いくつかの実施例において、ステップＳ３００において、現在の符号化ユニットの強化時間動きベクトル予測モードインデックス値を取得するステップは、現在の符号化ユニットが第２の解析条件を満たす場合、ビットストリームから強化時間動きベクトル予測モードインデックス値を解析するステップと、それ以外の場合、強化時間動きベクトル予測モードインデックス値が第３の数値であると決定するステップと、を含み得る。
例示的に、強化時間動きベクトル予測モードインデックス値が第３の数値であることは、現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示す。
例示的に、強化時間動きベクトル予測モードの使用には一定の条件を満たすことが必要であることが考慮され、当該条件が満たされない場合に、強化時間動きベクトル予測モードが適用せず、この場合に、強化時間動きベクトル予測モードインデックス値はビットストリームから解析する必要がなく、導出してもよい。
例示的に、現在の符号化ユニットが指定条件（本明細書では第２の解析条件と呼ばれる）を満たす場合、ビットストリームから強化時間動きベクトル予測モードインデックス値を解析してもよく、それ以外の場合、強化時間動きベクトル予測モードインデックス値が第３の数値であると決定してもよく、当該強化時間動きベクトル予測モードインデックス値が第３の数値であることは、現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示す。
例示的に、第３の数値は上記の第１の数値または第２の数値と同じであってもよく、または、第３の数値は上記の第１の数値および第２の数値のいずれとも異なってもよい。
一例において、現在の符号化ユニットが第２の解析条件を満たすことは、現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることとのうちの１つまたは複数を含み得る。
一例において、強化時間動きベクトル予測モードインデックス値の逆二値化は最大値が４のトランケーテッド・ユーナリに基づいて実現され、前記トランケーテッド・ユーナリは最大４つのバイナリ文字列を用い、各バイナリ文字は単独のコンテキストモデルを用い、合計で４つのコンテキストモデルを用いる。
例示的に、符号化ビットのオーバーヘッドを節約し、符号化・復号性能を向上させるために、強化時間動きベクトル予測モードインデックス値の逆二値化は最大値が４のトランケーテッド・ユーナリに基づいて実現され、前記トランケーテッド・ユーナリは最大４つのバイナリ文字列を用い、各バイナリ文字は単独のコンテキストモデルを用い、合計で４つのコンテキストモデルを用いる。
例えば、強化時間動きベクトル予測モードインデックス値の逆二値化の実現は表１を参照してもよい。
ここで、ｃｕ＿ｅｔｍｖｐ＿ｃａｎｄ＿ｉｎｄｅｘは強化時間動きベクトル予測モードインデックス値である。
いくつかの実施例において、ステップＳ３１０において、現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップは、現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定するステップと、前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの時間参照画像における座標情報を決定するステップと、を含む。
例示的に、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するためには、現在の符号化ユニットが位置する画像（本明細書では現在の画像と呼ばれる）のフレームタイプ（すなわち現在の画像フレームタイプ）を決定し、現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定してもよい。
例示的に、現在の画像フレームタイプがＰピクチャであれば、時間参照画像は参照画像リスト０（すなわちＬｉｓｔ０）における参照フレームインデックス値が０の参照画像であり、現在の画像フレームタイプがＢピクチャであれば、時間参照画像は参照画像リスト１（すなわちＬｉｓｔ１）における参照フレームインデックス値が０の参照画像である。
例示的に、マッチング符号化ユニットが位置する時間参照画像を決定した場合、現在の符号化ユニットの座標情報に基づいて、初期マッチング符号化ユニットの当該時間参照画像における座標情報を決定してもよい。
一例において、現在の符号化ユニットの座標情報は現在の符号化ユニットの現在の画像における左上隅座標であり、マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標である。
例示的に、マッチング符号化ユニットは初期マッチング符号化ユニットまたはターゲットマッチング符号化ユニットを含み得、すなわち、以下、特に説明しない限り、言及される初期マッチング符号化ユニットの座標情報は初期マッチング符号化ユニットの左上隅座標を指し、ターゲットマッチング符号化ユニットの座標情報はターゲットマッチング符号化ユニットの左上隅座標を指してもよい。
一例において、現在の符号化ユニットの座標情報に基づいて、初期マッチング符号化ユニットの時間参照画像における座標情報を決定するステップは、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップを含み得る。
例示的に、１つの最大符号化ユニットは１つまたは複数の符号化ユニットを含み得る。
例示的に、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、現在の符号化ユニットのマッチング符号化ユニットの座標情報を決定してもよい。
一例において、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップは、現在の最大符号化ユニットの画像における左上隅横座標、最大符号化ユニットのサイズ、現在の符号化ユニットの幅、現在の画像の幅、現在の符号化ユニットの画像における左上隅横座標に基づいて、初期マッチング符号化ユニットの横座標を決定するステップと、現在の最大符号化ユニットの画像における左上隅縦座標、最大符号化ユニットのサイズ、現在の符号化ユニットの高さ、現在の画像の高さ、現在の符号化ユニットの画像における左上隅縦座標に基づいて、初期マッチング符号化ユニットの縦座標を決定するステップと、を含み得る。
例示的に、現在の符号化ユニットの座標情報を現在の符号化ユニットの現在の画像における左上隅座標とし、マッチング符号化ユニットの座標情報をマッチング符号化ユニットの時間参照画像における左上隅座標とする。
例示的に、画像平面内の右向きを座標系の横軸正方向とし、下向きを座標系の縦軸正方向とする（以下同様）ことを例とする。
例えば、（Ｘｐｏｓ，Ｙｐｏｓ）は現在の符号化ユニットの画像における左上隅座標であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであるとすると、以下の方法によりマッチング符号化ユニットの座標（Ｍｘ，Ｍｙ）を導出する。
Ｍｘ＝Ｃｌｉｐ３（ｘ＿ｃｔｂ＿ｐｏｓ，ｍｉｎ（ｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ，ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ），（（Ｘｐｏｓ＋４）＞＞３）＜＜３）
Ｍｙ＝Ｃｌｉｐ３（ｙ＿ｃｔｂ＿ｐｏｓ，ｍｉｎ（ｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ，ｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ），（（Ｙｐｏｓ＋４）＞＞３）＜＜３）
また、例えば、（Ｘｐｏｓ，Ｙｐｏｓ）は現在の符号化ユニットの画像における左上隅座標であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであるとすると、以下の方法によりマッチング符号化ユニットの座標（Ｍｘ，Ｍｙ）を導出する。
Ｍｘ＝ｍｉｎ（（（Ｘｐｏｓ＋４）＞＞３）＜＜３，ｍｉｎ（ｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ，ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ））
Ｍｙ＝ｍｉｎ（（（Ｙｐｏｓ＋４）＞＞３）＜＜３，ｍｉｎ（ｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ，ｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ））
いくつかの実施例において、ステップＳ３２０において、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、初期マッチング符号化ユニットの座標情報に基づいて、少なくとも１つの強化時間動きベクトル予測モード番号を決定するステップと、少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築するステップと、を含み得る。
例示的に、当該少なくとも１つの強化時間動きベクトル予測モード番号は、初期マッチング符号化ユニットの座標情報に対応する強化時間動きベクトル予測モード番号と、初期マッチング符号化ユニットをオフセットすることにより得られた複数の新たなマッチング符号化ユニット（利用可能の場合）に対応する１つまたは複数の強化時間動きベクトル予測モード番号と、を含み得る。
例示的に、初期マッチング符号化ユニットの座標情報に基づいて、少なくとも１つの強化時間動きベクトル予測モード番号を決定した場合、当該少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築してもよい。
例示的に、強化時間候補リストを構築するとき、当該強化時間候補リストの長さを０に初期化してもよく、すなわち当該強化時間候補リストの初期長さは０である。
例示的に、当該強化時間候補リストの長さは、追加される強化時間動きベクトル予測モード番号の数に応じて長くなってもよい。
一例において、マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標であり、少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築するステップは、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、且つＡ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、且つＡ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、を含み得る。
例示的に、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの座標情報であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さである。
例示的に、Ａ１は初期マッチング符号化ユニットの左上隅の４＊４ブロックであり、Ｂ１はＡ１の真左側の４＊４ブロックであり、Ｃ１はＡ１の真上の４＊４ブロックであり、Ａ２は初期マッチング符号化ユニットの右上隅の４＊４ブロックであり、Ｂ２はＡ２の真右側の４＊４ブロックであり、Ｃ２はＡ２の真上の４＊４ブロックであり、Ａ３は初期マッチング符号化ユニットの左下隅の４＊４ブロックであり、Ｂ３はＡ３の真左側の４＊４ブロックであり、Ｃ３はＡ３の真下の４＊４ブロックであり、Ａ４は初期マッチング符号化ユニットの右下隅の４＊４ブロックであり、Ｂ４はＡ４の真右側の４＊４ブロックであり、Ｃ４はＡ４の真下の４＊４ブロックであり、その概略図は図４に示すとおりであってもよい。
例示的に、マッチング符号化ユニットをオフセットするとき、オフセットの単位は８画素であることを例とする。例えば、マッチング符号化ユニットを下にオフセットするとき、マッチング符号化ユニットを下に８画素オフセットする。
本発明の実施例においてマッチング符号化ユニットを上／下／左／右にオフセットすることにより新たなマッチング符号化ユニットが得られることを考慮すると、候補マッチング符号化ユニットを追加して、新たな候補動き情報を追加する。
マッチング符号化ユニットを下にオフセットすることを例とし、Ａ１とＣ３位置の動き情報が同じであり、且つＡ２とＣ４位置の動き情報が同じである場合、マッチング符号化ユニットを下にオフセットして得られた新たなマッチング符号化ユニットの動き情報が元のマッチング符号化ユニットの動き情報と同じである確率が大きいことを考慮すると、今回のオフセットは新たな動き情報を得ることができない可能性がある。
したがって、Ａ１位置の動き情報とＣ３位置の動き情報、およびＡ２位置の動き情報とＣ４位置の動き情報をそれぞれ比較し、２つの比較結果のうちの少なくとも１つの比較結果が不一致である場合、下にオフセットすることによって新たな動き情報を得ることができ、すなわち下にオフセットするによって得られたマッチング符号化ユニットを候補マッチング符号化ユニットとすることができると決定してもよい。
例示的に、マッチング符号化ユニットをオフセットする場合、さらにオフセットした後に得られた新たなマッチング符号化ユニットのオフセット方向における境界が当該マッチング符号化ユニット（オフセット前のマッチング符号化ユニット）の位置する最大符号化ユニットに対応する座標範囲を超えず、すなわち当該最大符号化ユニットのオフセット方向における境界を超えず、且つ当該マッチング符号化ユニットの位置する画像に対応する座標範囲を超えず、すなわち当該画像のオフセット方向における境界を超えないことを保証する必要がある。
例示的に、上向きのオフセットには、オフセット方向における境界は上境界であり、下向きのオフセットには、オフセット方向における境界は下境界であり、左向きのオフセットには、オフセット方向における境界は左境界であり、右向きのオフセットには、オフセット方向における境界は右境界である。
例示的に、依然として下にオフセットすることを例とし、マッチング符号化ユニットを下にオフセットするとき、オフセット後の縦座標（すなわちＭｙ＋８）はｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ以下である（すなわちオフセット後に得られた新たなマッチング符号化ユニットの下境界はオフセット前のマッチング符号化ユニットが位置する最大符号化ユニットの下境界を超えない）ことが必要である一方で、オフセット後の縦座標はｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ以下である（オフセット後に得られた新たなマッチング符号化ユニットの下境界はオフセット前のマッチング符号化ユニットが位置する画像の下境界を超えない）ことが必要であり、すなわちＭｙ＋８はｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であることが必要である。
一例において、ステップＳ３２０において、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、強化時間候補リストの長さが５未満の場合、強化時間候補リストの長さが５に等しくなるまで、現在の強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号と同じの強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える操作を繰り返すステップをさらに含む。
例示的に、マッチング符号化ユニットを上にオフセットすること、下にオフセットすること、左にオフセットすること、および右にオフセットすることはいずれも利用可能な候補マッチング符号化ユニットを得る場合、候補マッチング符号化ユニットはオフセット前のマッチング符号化ユニットと、マッチングにより得られた４つのマッチング符号化ユニットとを含み得、すなわち強化時間候補リストの長さは５であると考慮する。
復号のロバスト性を向上させ、復号エラーを回避するために、上記方式により構築された強化時間候補リストの長さが５未満の場合、ポリシーによって強化時間候補リストの長さを５に拡張してもよい。
例示的に、強化時間候補リストの長さが５未満の場合、現在の強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号と同じの強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える操作を、強化時間候補リストの長さが５になるまで繰り返してもよい。
いくつかの実施例において、強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップは、
強化時間動きベクトル予測モード番号が０であれば、ＰｘはＭｘに等しく、ＰｙはＭｙに等しいと決定するステップと、
強化時間動きベクトル予測モード番号が１であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ＋ｎに等しいと決定するステップと、
強化時間動きベクトル予測モード番号が２であれば、ＰｘはＭｘ＋ｎに等しく、ＰｙはＭｙに等しいと決定するステップと、
強化時間動きベクトル予測モード番号が３であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ－ｎに等しいと決定するステップと、
強化時間動きベクトル予測モード番号が４であれば、ＰｘはＭｘ－ｎに等しく、ＰｙはＭｙに等しいと決定するステップと、を含み得、
例示的に、（Ｍｘ，Ｍｙ）は初期マッチング符号化ユニットの左上隅座標であり、（Ｐｘ，Ｐｙ）はターゲットマッチング符号化ユニットの左上隅座標である。
例示的に、マッチング符号化ユニットを上／下／左／右にｎ個の画素オフセットすることによって新たなマッチング符号化ユニットを得ることを例とする。例示的に、ｎ＝８である。
例示的に、初期マッチング符号化ユニットに対応する強化時間動きベクトル予測モード番号が０であり、下にオフセットして得られたマッチング符号化ユニットに対応する強化時間動きベクトル予測モード番号が１であり、右にオフセットして得られたマッチング符号化ユニットに対応する強化時間動きベクトル予測モード番号が２であり、上にオフセットして得られたマッチング符号化ユニットに対応する強化時間動きベクトル予測モード番号が３であり、左にオフセットして得られたマッチング符号化ユニットに対応する強化時間動きベクトル予測モード番号が４であるとする。
上記方式により構築して強化時間候補リストを得た場合、ステップＳ３００で取得された強化時間動きベクトル予測モードインデックス値に基づいて、当該強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得してもよい。
例示的に、強化時間動きベクトル予測モード番号が１であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を下にｎ個の画素オフセットして得られた時間参照符号化ユニットであり、すなわちＰｘはＭｘに等しく、ＰｙはＭｙ＋ｎに等しい。
強化時間動きベクトル予測モード番号が２であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を右にｎ個の画素オフセットして得られた時間参照符号化ユニットであり、すなわちＰｘはＭｘ＋ｎに等しく、ＰｙはＭｙに等しい。
強化時間動きベクトル予測モード番号が３であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を上にｎ個の画素オフセットして得られた時間参照符号化ユニットであり、すなわちＰｘはＭｘに等しく、ＰｙはＭｙ－ｎに等しい。
強化時間動きベクトル予測モード番号が４であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を左にｎ個の画素オフセットして得られた時間参照符号化ユニットであり、すなわちＰｘはＭｘ－ｎに等しく、ＰｙはＭｙに等しい。
いくつかの実施例において、ステップＳ３４０において、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を前記現在の符号化ユニットの対応する位置のサブブロックに与えるステップを含み得る。
いくつかの実施例において、ステップＳ３４０において、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＢピクチャの場合、当該サブブロックの前方向動き情報および後方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、を含み得る。
例示的に、現在の符号化ユニットの各サブブロックの動き情報を決定する効率を向上させるために、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、当該サブブロックの動き情報が利用可能であるか否かを判断してもよい。
例示的に、現在の画像フレームタイプがＰピクチャの場合、当該サブブロックの前方向動き情報が利用可能であるか否かを判断してもよく、現在の画像フレームタイプがＢピクチャの場合、当該サブブロックの前方向動き情報および後方向動き情報が利用可能であるか否かをそれぞれ判断してもよい。
例示的に、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、判断結果として前方向動き情報が利用可能な場合、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えてもよい。
例示的に、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、判断結果として後方向動き情報が利用可能な場合（現在の画像フレームタイプがＢピクチャの場合）、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えてもよい。
例示的に、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、判断結果として前方向動き情報および後方向動き情報がいずれも利用可能な場合（現在の画像フレームタイプがＢピクチャの場合）、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ前記現在の符号化ユニットの対応する位置のサブブロックに与えてもよい。
いくつかの実施例において、ステップＳ３４０において、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、サブブロックの前方向動き情報が利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報が利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、現在の画像フレームタイプがＢピクチャの場合、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能なとき、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可なとき、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、を含み得る。
例示的に、現在の符号化ユニットの周辺ブロック（本明細書では第１の周辺ブロックと呼ばれる）の動き情報に基づいて現在の符号化ユニット中のサブブロックの動き情報を決定してもよい。
例示的に、現在の符号化ユニットの第１の周辺ブロックは現在の符号化ユニットのいずれかの復号済み隣接ブロックまたは非隣接ブロックを含み得るがこれらに限定されない。
例えば、現在の符号化ユニットの第１の周辺ブロックは図５に示すとおりであってもよい。図５に示すように、Ｅは現在の符号化ユニットであり、現在の符号化ユニットの第１の周辺ブロックはＡ、Ｂ、Ｃ、Ｄ、ＦおよびＧのうちのいずれかのブロックを含み得る。
例示的に、１つの符号化ユニットは少なくとも１つのサブブロックを含み、各サブブロックの幅は現在の符号化ユニットの幅を超えず、各サブブロックの高さは現在の符号化ユニットの高さを超えず、例えば各サブブロックは８＊８のブロックである。
一例において、現在の符号化ユニットの第１の周辺ブロックは図５中のＦである。例示的に、Ｆのサイズは８＊８であってもよく、すなわち第１の周辺ブロックは現在の符号化ユニットの左下隅に隣接する８＊８ブロックである。例示的に、Ｆのサイズは４＊４であってもよく、すなわち第１の周辺ブロックは現在の符号化ユニットの左下隅に隣接する４＊４ブロックである。
例示的に、現在の画像フレームタイプがＰピクチャの場合は、ターゲットマッチング符号化ユニットのサブブロックの前方向動き情報が利用不可なとき、さらに現在の符号化ユニットの第１の周辺ブロックの動き情報に基づいて、現在の符号化ユニットのサブブロックの動き情報を決定してもよい。
例示的に、現在の画像フレームタイプがＢピクチャの場合は、ターゲットマッチング符号化ユニットのサブブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、さらに現在の符号化ユニットの第１の周辺ブロックの動き情報に基づいて、現在の符号化ユニットのサブブロックの動き情報を決定してもよい。
例示的に、現在の画像フレームタイプがＰピクチャの場合は、ターゲットマッチング符号化ユニットのサブブロックの前方向動き情報および現在の画像符号化ユニットの第１の周辺ブロックの前方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えてもよい。
例示的に、現在の画像フレームタイプがＢピクチャの場合は、ターゲットマッチング符号化ユニットのサブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であり、且つ第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えてもよい。
いくつかの実施例において、図６に示すように、ステップＳ３４０において、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定した後、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップＳ３５０をさらに含み得る。
例示的に、上記方式により現在の符号化ユニット中の各サブブロックの動き情報を決定した場合、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行ってもよい。例えば、現在の符号化ユニット中のｈ行目、ｌ列目のサブブロックの動き情報に基づいて、現在の符号化ユニット中のｈ行目、ｌ列目のサブブロックに対して動き補償を行ってもよい。
一例において、ステップＳ３５０において、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップは、現在の符号化ユニットのいずれかのサブブロックについて、当該サブブロックの動き情報に対して復号側動きベクトル調整技術を行わないステップと、当該サブブロックが双方向オプティカルフロー条件を満たす場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得るステップと、それ以外の場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、当該サブブロックの予測サンプル行列を得るステップと、を含み得る。
例示的に、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
一例において、サブブロックが双方向オプティカルフロー条件を満たすことは、シーケンスレベルの高レベルシンタックスには、双方向オプティカルフロー技術をイネーブルすることが許可されることと、現在の符号化ユニットの動きベクトル精度が０に等しいことと、当該サブブロックが双方向予測（ｂｉ－ｐｒｅｄｉｃｔｉｏｎ）を用いることと、当該サブブロックの参照画像リスト０における参照フレームインデックス値がｒｅｆＩｄｘＬ０の参照フレームおよび参照画像リスト１における参照フレームインデックス値がｒｅｆＩｄｘＬ１の参照フレームの表示順序がそれぞれ現在のフレームの両側に位置することと、を含む。
一例として、本発明の実施例はさらに符号化方法を提供し、当該符号化方法は符号化デバイスに適用することができ、当該方法以下のステップを含み得る。
Ｔ１００において、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定する。その具体的な実現は図３に示す実施例におけるステップＳ３１０を参照してもよく、本発明の実施例はここで説明を省略する。
Ｔ１１０において、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築する。その具体的な実現は図３に示す実施例におけるステップＳ３２０を参照してもよく、本発明の実施例はここで説明を省略する。
Ｔ１２０において、強化時間候補リストにおける各強化時間動きベクトル予測モード番号を順にトラバースし、各強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定する。
例示的に、ステップＴ１１０で説明された方式により強化時間候補リストを構築した場合、符号化デバイスは強化時間候補リストにおける各候補強化時間動きベクトル予測モード番号をトラバースしてもよい。
いずれかの候補強化時間動きベクトル予測モード番号について、符号化デバイスは当該候補強化時間動きベクトル予測モード番号に基づいて、対応するターゲットマッチング符号化ユニットの座標情報を決定してもよく、その具体的な実現は図３に示す実施例におけるステップＳ３３０を参照してもよく、本発明の実施例はここで説明を省略する。
ステップＴ１３０において、ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定する。その具体的な実現は図３に示す実施例におけるステップＳ３４０を参照してもよく、本発明の実施例はここで説明を省略する。
Ｔ１４０において、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行う。その具体的な実現は図６に示す実施例におけるステップＳ３５０を参照してもよく、本発明の実施例はここで説明を省略する。
Ｔ１５０において、強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送する。
例示的に、符号化デバイスはＲＤＯ意思決定に基づいてレート歪みコスト値が最小の予測モードを決定し、最小のレート歪みコスト値に対応する予測モードに基づいて、強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを決定し、ビットストリームに書き込み、復号デバイスに伝送してもよい。
例示的に、上記各実施例の符号化および復号の実現フローは相互に参照してもよい。
以下、当業者が本発明の実施例にて提供される技術的解決手段をよりよく理解できるように、具体的な例に合わせて本発明の実施例にて提供される技術的解決手段について説明する。
実施例１
本発明の実施例は、強化時間動き情報予測方法を提供し、現在の符号化ユニットのｃｏ－ｌｏｃａｔｅｄフレームにおけるコロケーテッド符号化ユニットの動き情報を利用してマッチング符号化ユニットを決定し、検索で得られたマッチング符号化ユニットに対して上下左右など、一連のオフセットを行い、複数の時間候補モードを生成し、周辺の符号化ユニットの動き情報の不正確によるマッチング符号化ユニットの検索が不正確であるという問題をある程度で回避する。
本発明の実施例の主な実現フローは以下の６つの部分を含み得る。
第１の部分において、現在の符号化ユニットの符号化／復号条件に基づいて、強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とを符号化／解析し、
第２の部分において、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定する。
第３の部分において、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築し、
第４の部分において、強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補モードリストにおいて対応する強化時間動きベクトル予測モードを取得し、当該強化時間動きベクトル予測モードに対応するターゲットマッチング符号化ユニットの座標情報を決定し、
第５の部分において、ターゲットマッチング符号化ユニットの座標情報に基づいて、現在の符号化ユニット中の各サブブロックの動き情報を取得し、
第６の部分において、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行う。
例示的に、上記の６つの部分の順序を調整してもよい。
実施例２
本発明の実施例にて提供される符号化方法は以下のステップを含み得る。
１、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定し、
２、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築し、
３、強化時間候補リストにおける各強化時間候補モードを順にトラバースし、各モードに対応するターゲットマッチング符号化ユニットの座標情報を決定し、
４、ターゲットマッチング符号化ユニットの座標情報に対応する動き情報に基づいて、現在の符号化ユニット中の各サブブロックの動き情報を決定し、
５、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行い、
６、強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送する。
実施例３
本発明の実施例にて提供される復号方法は以下のステップを含み得る。
１、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得し、取得した現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値が第１の数値の場合、ステップ２～６を実行し、
２、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定し、
３、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築し、
４、取得した強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、当該強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定し、
５、ターゲットマッチング符号化ユニットの座標情報に対応する動き情報に基づいて、現在の符号化ユニット中の各サブブロックの動き情報を決定し、
６、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行う。
以下、実施例に合わせて、本発明の実施例の主なフローの各部分（すなわち第１の部分～第６の部分のうちの各部分）についてそれぞれ説明する。
第１の部分、強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とを符号化／解析する。
例示的に、強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とを解析するステップは、１）、強化時間動きベクトル予測モードフラグ（ｅｔｍｖｐ＿ｆｌａｇと記されてもよい）を解析するステップと、２）、強化時間動きベクトル予測モードインデックス値（ｃｕ＿ｅｔｍｖｐ＿ｃａｎｄ＿ｉｎｄｅｘと記されてもよい）を解析するステップと、を含み得る。
実施例４
現在の符号化ユニットが解析条件１（すなわち上記第１の解析条件）を満たす場合、ビットストリームから強化時間動きベクトル予測モードフラグを解析し、それ以外の場合、強化時間動きベクトル予測モードフラグの値は０である（すなわち上記第２の数値は０である）。
例示的に、現在の符号化ユニットが解析条件１を満たす場合はそれぞれ実施例５～実施例１０を参照してもよい。
実施例５
現在の符号化ユニットが解析条件１を満たすことは、現在の符号化ユニットがスキップモードまたはダイレクトモードであることを含む。
実施例６
現在の符号化ユニットが解析条件１を満たすことは、現在の符号化ユニットのサイズが、現在の符号化ユニットの幅および高さがいずれもＮ０以上であるという制限（すなわち上記予め設定されたサイズ制限）を満たすことを含む。例示的に、Ｎ０＝８である。
実施例７
現在の符号化ユニットが解析条件１を満たすことは、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることを含む。
実施例８
現在の符号化ユニットが解析条件１を満たすことは、現在の符号化ユニットが角度重み付け予測の利用条件を満たし、または究極の動きベクトル表現の利用条件を満たすことを含む。
例示的に、角度重み付け予測の利用条件は、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが角度重み付け予測技術をイネーブルすることが許可されることと、現在の符号化ユニットの幅および高さがいずれもＮ１以上であり、現在の符号化ユニットの幅および高さがいずれもＮ２以下であることと、現在の画像フレームタイプがＢピクチャであることと、を含み得る。
例示的に、Ｎ１＝８である。例示的に、Ｎ２＝６４である。
例示的に、現在の符号化ユニットが究極の動きベクトル表現の利用条件を満たすことは、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが究極の動きベクトル表現技術をイネーブルすることが許可されることを含む。
実施例９
現在の符号化ユニットが解析条件１を満たすことは以下を含む。
１）、現在の符号化ユニットがスキップモードまたはダイレクトモードであり、
２）、現在の符号化ユニットのサイズが以下の制限を満たし、
２．１）、現在の符号化ユニットの幅および高さがいずれもＮ０以上であり、例示的に、Ｎ０＝８であり、
３）、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可される。
実施例１０
現在の符号化ユニットが解析条件１を満たすことは以下を含む。
１）、現在の符号化ユニットがスキップモードまたはダイレクトモードであり、
２）、現在の符号化ユニットのサイズが以下の制限を満たし、
２．１）、現在の符号化ユニットの幅および高さがいずれもＮ０以上であり、例示的に、Ｎ０＝８であり、
３）、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可され、
４）、現在の符号化ユニットが角度重み付け予測の利用条件を満たし、または究極の動きベクトル表現の利用条件を満たす。
例示的に、角度重み付け予測の利用条件は以下を含み得る。
４．１）、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが角度重み付け予測技術をイネーブルすることが許可され、
４．２）、現在の符号化ユニットの幅および高さがいずれもＮ１以上であり、現在の符号化ユニットの幅および高さがいずれもＮ２以下であり、
４．３）、現在の画像フレームタイプがＢピクチャである。
例示的に、Ｎ１＝８である。例示的に、Ｎ２＝６４である。
例示的に、現在の符号化ユニットが究極の動きベクトル表現の利用条件を満たすことは、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが究極の動きベクトル表現技術をイネーブルすることが許可されることを含む。
なお、本発明の実施例において、現在の符号化ユニットが解析条件１を満たすことは上記実施例５～実施例１０に記載の場合に限定されず、実施例５～実施例８のうち各実施例のいずれか２つを組み合わせて得られた場合、およびいずれか３つを組み合わせて得られた場合（実施例５～実施例７を組み合わせて得られたのは実施例９である）を含み得る。
実施例１１
現在の符号化ユニットが解析条件１を満たす場合、ビットストリームから強化時間動きベクトル予測モードフラグを解析し、それ以外の場合、強化時間動きベクトル予測モードフラグの値は０である。
例示的に、強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いる。
実施例１２
現在の符号化ユニットが解析条件１を満たす場合、ビットストリームから強化時間動きベクトル予測モードフラグを解析し、それ以外の場合、強化時間動きベクトル予測モードフラグの値は０である。
例示的に、現在の符号化ユニットが解析条件１を満たす具体的な場合は上記実施例における関連説明、例えば実施例５～実施例１０のいずれかの実施例の説明を参照してもよい。
例示的に、強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いるとともに、１つのコンテキストモデルを用いる。
実施例１３
現在の符号化ユニットが解析条件１を満たす場合、ビットストリームから強化時間動きベクトル予測モードフラグを解析し、それ以外の場合、強化時間動きベクトル予測モードフラグの値は０である。
例示的に、現在の符号化ユニットが解析条件１を満たす具体的な場合は上記実施例における関連説明、例えば実施例５～実施例１０のいずれかの実施例の説明を参照してもよい。
例示的に、強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いるとともに、複数のコンテキストモデルを用いる。
例示的に、当該複数のコンテキストモデルは、現在の符号化ユニットのサイズに基づいて決定されてもよい。
例示的に、現在の符号化ユニットのサイズは、現在の符号化ユニットの幅および／または高さ、現在の符号化ユニットの幅と高さとのうちの最大値若しくは最小値、または現在の符号化ユニットの幅と高さとの積などを含み得るが、これらに限定されない。
実施例１４
現在の符号化ユニットが解析条件２（すなわち上記第２の解析条件）を満たす場合、ビットストリームから強化時間動きベクトル予測モードインデックス値を解析し、それ以外の場合、強化時間動きベクトル予測モードインデックス値は０である（すなわち上記第３の数値は０である）。
例示的に、現在の符号化ユニットが解析条件２を満たす場合はそれぞれ実施例１５～実施例１７を参照してもよい。
実施例１５
現在の符号化ユニットが解析条件２を満たすことは、現在の符号化ユニットがスキップモードまたはダイレクトモードであることを含む。
実施例１６
現在の符号化ユニットが解析条件２を満たすことは、現在の符号化ユニットが強化時間動きベクトル予測モードであることを含む。
実施例１７
現在の符号化ユニットが解析条件２を満たすことは以下を含む。
１）、現在の符号化ユニットがスキップモードまたはダイレクトモードであり、
２）、現在の符号化ユニットが強化時間動きベクトル予測モードである。
例えば、強化時間動きベクトル予測モードインデックス値のシンタックス記述は以下のとおりであってもよい。
実施例１８
現在の符号化ユニットが解析条件２（すなわち上記第２の解析条件）を満たす場合、ビットストリームから強化時間動きベクトル予測モードインデックス値を解析し、それ以外の場合、強化時間動きベクトル予測モードインデックス値は０である（すなわち上記第３の数値は０である）。
例示的に、現在の符号化ユニットが解析条件２を満たす場合は実施例１５～実施例１７のいずれか１つの実施例における説明を参照してもよい。
例示的に、強化時間動きベクトル予測モードインデックス値の逆二値化は最大値が４のトランケーテッド・ユーナリに基づいて実現され、前記トランケーテッド・ユーナリは最大４つのバイナリ文字列（ｂｉｎｓ）を用い、各バイナリ文字（ｂｉｎ）は単独のコンテキストモデルを用い、合計で４つのコンテキストモデルを用いる。例えば、強化時間動きベクトル予測モードインデックス値の逆二値化の実現は表１を参照してもよい。
第２の部分、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定する。
例示的に、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップは、現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定するステップと、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップと、を含み得る。
例示的に、時間参照画像における幅および高さが現在の符号化ユニットの幅および高さに一致する時間参照ブロックは現在の符号化ユニットのマッチング符号化ユニットである。
例示的に、現在の画像フレームタイプがＰピクチャであれば、時間参照画像は参照画像リスト０における参照フレームインデックス値が０の参照画像であり、現在の画像フレームタイプがＢピクチャであれば、時間参照画像は参照画像リスト１における参照フレームインデックス値が０の参照画像である。
例示的に、現在の符号化ユニットの座標情報は現在の符号化ユニットの画像（現在の画像）における左上隅座標であってもよく、マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標であってもよい。
例示的に、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップは、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップを含み得る。
例示的に、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップは、現在の最大符号化ユニットの画像における左上隅横座標、最大符号化ユニットのサイズ、現在の符号化ユニットの幅、現在の画像の幅、現在の符号化ユニットの画像における左上隅横座標に基づいて、初期マッチング符号化ユニットの横座標を決定するステップと、現在の最大符号化ユニットの画像における左上隅縦座標、現在の最大符号化ユニットのサイズ、現在の符号化ユニットの高さ、現在の画像の高さ、現在の符号化ユニットの画像における左上隅縦座標に基づいて、初期マッチング符号化ユニットの縦座標を決定するステップと、を含む。
例示的に、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定する具体的な実現は、実施例１９～実施例２１のいずれか１つの実施例の説明を参照してもよい。
実施例１９
（Ｘｐｏｓ，Ｙｐｏｓ）は現在の符号化ユニットの画像における左上隅座標であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであるとすると、以下の方法によりマッチング符号化ユニットの座標（Ｍｘ，Ｍｙ）を導出する。
Ｍｘ＝Ｃｌｉｐ３（ｘ＿ｃｔｂ＿ｐｏｓ，ｍｉｎ（ｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ，ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ），（（Ｘｐｏｓ＋４）＞＞３）＜＜３）
Ｍｙ＝Ｃｌｉｐ３（ｙ＿ｃｔｂ＿ｐｏｓ，ｍｉｎ（ｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ，ｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ），（（Ｙｐｏｓ＋４）＞＞３）＜＜３）
実施例２０
（Ｘｐｏｓ，Ｙｐｏｓ）は現在の符号化ユニットの画像における左上隅座標であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであるとすると、以下の方法によりマッチング符号化ユニットの座標（Ｍｘ，Ｍｙ）を導出する。
Ｍｘ＝ｍｉｎ（（（Ｘｐｏｓ＋４）＞＞３）＜＜３，ｍｉｎ（ｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ，ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ））
Ｍｙ＝ｍｉｎ（（（Ｙｐｏｓ＋４）＞＞３）＜＜３，ｍｉｎ（ｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ，ｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ））
実施例２１
（Ｘｐｏｓ，Ｙｐｏｓ）は現在の符号化ユニットの画像における左上隅座標であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであるとすると、以下の方法によりマッチング符号化ユニットの座標（Ｍｘ，Ｍｙ）を導出する。
Ｍｘ＝Ｃｌｉｐ３（ｘ＿ｃｔｂ＿ｐｏｓ，ｍｉｎ（ｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ，ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈ），（Ｘｐｏｓ＞＞３）＜＜３）
Ｍｙ＝Ｃｌｉｐ３（ｙ＿ｃｔｂ＿ｐｏｓ，ｍｉｎ（ｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ，ｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔ），（Ｙｐｏｓ＞＞３）＜＜３）
実施例２２
（Ｘｐｏｓ，Ｙｐｏｓ）は現在の符号化ユニットの画像における左上隅座標であるとすると、以下の方法によりマッチング符号化ユニットの座標（Ｍｘ，Ｍｙ）を導出してもよい。
Ｍｘ＝（Ｘｐｏｓ＞＞ｓｈｉｆｔ）＜＜ｓｈｉｆｔ
Ｍｙ＝（Ｙｐｏｓ＞＞ｓｈｉｆｔ）＜＜ｓｈｉｆｔ）
例示的に、Ｓｈｉｆｔはサブブロックのサイズに関連し、Ｎ＊Ｎサブブロックについて、Ｎ＝１＜＜ｓｈｉｆｔである。例えば、サブブロックの大きさが８＊８であれば、ｓｈｉｆｔ＝３である。
第３の部分、初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築する。
例示的に、（Ｍｘ，Ｍｙ）は初期マッチング符号化ユニットの時間参照画像における左上隅座標であり、Ａ１～Ａ４、Ｂ１～Ｂ４、Ｃ１～Ｃ４は時間参照画像における初期マッチング符号化ユニットの周辺に位置する隣接４＊４ブロックであるとし、その概略図は図４に示すとおりであってもよい。
実施例３３
２３．０、強化時間候補リストの長さを０に初期化する。例示的に、強化時間候補リストの初期長さは０である。
２３．１、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２３．２、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の下境界を超えず、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２３．３、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の右境界を超えず、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２３．４、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の上境界を超えず、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２３．５、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の左境界を超えず、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２３．６、強化時間候補リストの長さが５未満であれば、以下の操作を繰り返し実行する。
２３．６．１、強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加え、
２３．６．２、強化時間候補リストの長さが５に等しければ、リスト構築プロセスを終了する。
例示的に、その実現ロジックは以下であってもよい。
１）、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｉ］を０に初期化し、ｉ＝０～４であり、ｌｅｎｇｔｈを０に初期化する。
２）まず、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［０］＝０とし、ｌｅｎｇｔｈに１を加える。
３）、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の下境界を超えず、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｌｅｎｇｔｈ］＝１とし、ｌｅｎｇｔｈに１を加える。
４）、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の右境界を超えず、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｌｅｎｇｔｈ］＝２とし、ｌｅｎｇｔｈに１を加える。
５）、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の上境界を超えず、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｌｅｎｇｔｈ］＝３とし、ｌｅｎｇｔｈに１を加える。
６）、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の左境界を超えず、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｌｅｎｇｔｈ］＝４とし、ｌｅｎｇｔｈに１を加える。
７）、ｌｅｎｇｔｈが５未満であれば、以下の操作を繰り返し実行する。
７．１）、ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｌｅｎｇｔｈ］＝ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ｌｅｎｇｔｈ－１］とし、ｌｅｎｇｔｈに１を加え、
７．２）、ｌｅｎｇｔｈが５に等しければ、リスト構築プロセスを終了する。
実施例２４
２４．０、強化時間候補リストの長さを０に初期化する。例示的に、強化時間候補リストの初期長さは０である。
２４．１、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２４．２、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の下境界を超えず、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２４．３、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の右境界を超えず、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２４．４、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の上境界を超えず、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２４．５、（Ｍｘ，Ｍｙ）の位置するマッチング符号化ユニットが当該マッチング符号化ユニットの位置するＬＣＵまたは画像の左境界を超えず、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
実施例２５
２５．０、強化時間候補リストの長さを０に初期化する。例示的に、強化時間候補リストの初期長さは０である。
２５．１、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加え、例示的に、強化時間候補リストの初期長さは０である。
２５．２、（Ｍｘ，Ｍｙ＋８）の位置するマッチング符号化ユニットの下境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の下境界を超えず、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２５．３、（Ｍｘ＋８，Ｍｙ）の位置するマッチング符号化ユニットの右境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の右境界を超えず、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２５．４、Ｍｘ，Ｍｙ－８）の位置するマッチング符号化ユニットの上境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の上境界を超えず、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２５．５、（Ｍｘ－８，Ｍｙ）の位置するマッチング符号化ユニットの左境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の左境界を超えず、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２５．６、強化時間候補リストの長さが５未満であれば、以下の操作を繰り返し実行する。
２５．６．１、強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加え、
２５．６．２、強化時間候補リストの長さが５に等しければ、リスト構築プロセスを終了する。
実施例２６
２６．０、強化時間候補リストの長さを０に初期化する。
２６．１、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加え、例示的に、強化時間候補リストの初期長さは０である。
２６．２、（Ｍｘ，Ｍｙ＋８）の位置するマッチング符号化ユニットの下境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の下境界を超えず、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２６．３、（Ｍｘ＋８，Ｍｙ）の位置するマッチング符号化ユニットの右境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の右境界を超えず、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２６．４、（Ｍｘ，Ｍｙ－８）の位置するマッチング符号化ユニットの上境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の上境界を超えず、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２６．５、（Ｍｘ－８，Ｍｙ）の位置するマッチング符号化ユニットの左境界が当該マッチング符号化ユニットの位置するＬＣＵまたは画像の左境界を超えず、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
実施例２７
２７．０、強化時間候補リストの長さを０に初期化する。例示的に、強化時間候補リストの初期長さは０である。
２７．１、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２７．２、Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２７．３、Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２７．４、Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２７．５、Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに添加し、強化時間候補リストの長さに１を加える。
２７．６、強化時間候補リストの長さが５未満であれば、以下の操作を繰り返し実行する。
２７．６．１、強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加え、
２７．６．２、強化時間候補リストの長さが５に等しければ、リスト構築プロセスを終了する。
実施例２８
２８．０、強化時間候補リストの長さを０に初期化する。例示的に、強化時間候補リストの初期長さは０である。
２８．１、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２８．２、Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、Ａ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２８．３、Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、Ａ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２８．４、Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、Ａ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える。
２８．５、Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、Ａ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに添加し、強化時間候補リストの長さに１を加える。
第４の部分、強化時間動きベクトル予測モードインデックス値に基づいて、強化時間候補モードリストにおいて対応する強化時間動きベクトル予測モードを取得し、当該強化時間動きベクトル予測モードに対応するターゲットマッチング符号化ユニットの座標情報を決定する。
例示的に、強化時間動きベクトル予測モードインデックス（ＥｔｍｖｐＣａｎｄＩｎｄｅｘと記されてもよい）に基づいて、強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号（ｅｔｍｖｐ＿ｍｏｄｅと記されてもよい）を取得し、強化時間動きベクトル予測モード番号ｅｔｍｖｐ＿ｍｏｄｅに基づいて、ターゲットマッチング符号化ユニットの位置座標（Ｐｘ，Ｐｙ）を決定して得る。例示的に、
ｅｔｍｖｐ＿ｍｏｄｅ＝ＥｔｍｖｐＣａｎｄＡｒｒａｙ［ＥｔｍｖｐＣａｎｄＩｎｄｅｘ］である。
実施例２９
強化時間動きベクトル予測モード番号に基づいて、ターゲットマッチング符号化ユニットの位置座標（Ｐｘ，Ｐｙ）をルックアップテーブルにより決定する。例示的にｅｔｍｖｐ＿ｍｏｄｅとＰｘ、Ｐｙとの対応関係は表２に示すとおりであってもよい。
例示的に、ｎは８であってもよい。
実施例３０
強化時間動きベクトル予測モード番号が０であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニットであり、すなわちＰｘはＭｘに等しく、ＰｙはＭｙに等しく、
強化時間動きベクトル予測モード番号が１であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を下にｎ個の画素オフセットして得られた時間参照ブロックであり、すなわちＰｘはＭｘに等しく、ＰｙはＭｙ＋ｎに等しく、
強化時間動きベクトル予測モード番号が２であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を右にｎ個の画素オフセットして得られた時間参照ブロックであり、すなわちＰｘはＭｘ＋ｎに等しく、ＰｙはＭｙに等しく、
強化時間動きベクトル予測モード番号が３であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を上にｎ個の画素オフセットして得られた時間参照ブロックであり、すなわちＰｘはＭｘに等しく、ＰｙはＭｙ－ｎに等しく、
強化時間動きベクトル予測モード番号が４であれば、ターゲットマッチング符号化ユニットは初期マッチング符号化ユニット全体を左にｎ個の画素オフセットして得られた時間参照ブロックであり、すなわちＰｘはＭｘ－ｎに等しく、ＰｙはＭｙに等しい。
例示的に、ｎは８であってもよい。
第５の部分、ターゲットマッチング符号化ユニットの座標情報に基づいて、現在の符号化ユニット中の各サブブロックの動き情報を取得する。
例示的に、ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニットの対応する位置のサブブロックの動き情報を決定してもよい。
例示的に、現在の符号化ユニットの第１の周辺ブロックは図５に示すとおりであってもよい。図５に示すように、Ｅは現在の符号化ユニットであり、現在の符号化ユニットの第１の周辺ブロックはＡ、Ｂ、Ｃ、Ｄ、ＦおよびＧのうちのいずれかのブロックを含み得る。
例示的に、１つの符号化ユニットは少なくとも１つのサブブロックを含み、各サブブロックの幅は現在の符号化ユニットの幅を超えず、各サブブロックの高さは現在の符号化ユニットの高さを超えず、例えば各サブブロックは８＊８のブロックである。
一例において、現在の符号化ユニットの第１の周辺ブロックは図５中のＦである。
例示的に、ターゲットマッチング符号化ユニット中のいずれかのサブブロック（８＊８サブブロックを例とする）について、各８＊８サブブロックの左上隅座標は（Ｐｘ＋（ｉ＜＜３），Ｐｙ＋（ｊ＜＜３））であり、ｉはサブブロックの水平インデックス値であり、ｊはサブブロックの垂直インデックス値であり、ｉ＝０～（ｃｕ＿ｗｉｄｔｈ＞＞３）－１であり、ｊ＝０～（ｃｕ＿ｈｅｉｇｈｔ＞＞３）－１である。
例示的に、現在の符号化ユニット中のいずれかのサブブロック（８＊８サブブロックを例とする）について、各８＊８サブブロックの動き情報はＭｏｔｉｏｎＡｒｒａｙ［ｉ］［ｊ］と記され、ｉはサブブロックの水平インデックス値であり、ｊはサブブロックの垂直インデックス値であり、ｉ＝０～（ｃｕ＿ｗｉｄｔｈ＞＞３）－１であり、ｊ＝０～（ｃｕ＿ｈｅｉｇｈｔ＞＞３）－１である。
実施例３１
ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
３１．１、当該サブブロックの前方向動き情報および後方向動き情報がいずれも利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与え、
３１．２、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３１．３、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３１．４、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、デフォルトの動き情報をパディングする。
例示的に、本発明の実施例はデフォルトの動き情報について制限せず、例えば、デフォルトの動き情報はゼロ動き情報または現在の符号化ユニットの周辺ブロックから導出された動き情報であってもよい。
実施例３２
ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
３２．１、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３２．２、当該サブブロックの前方向動き情報が利用不可であれば、デフォルトの動き情報をパディングする。
例示的に、本発明の実施例はデフォルトの動き情報について制限せず、例えば、デフォルトの動き情報はゼロ動き情報または現在の符号化ユニットの周辺ブロックから導出された動き情報であってもよい。
実施例３３
ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
３３．１、現在の画像フレームタイプがＰピクチャの場合、
３３．１．１、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３３．１．２、当該サブブロックの前方向動き情報が利用不可であれば、デフォルトの動き情報をパディングする。
例示的に、本発明の実施例はデフォルトの動き情報について制限せず、例えば、デフォルトの動き情報はゼロ動き情報または現在の符号化ユニットの周辺ブロックから導出された動き情報であってもよい。
３３．２、現在の画像フレームタイプがＢピクチャの場合、
３３．２．１、当該サブブロックの前方向動き情報および後方向動き情報がいずれも利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与え、
３３．２．２、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３３．２．３、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３３．２．４、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、デフォルトの動き情報をパディングする。
例示的に、本発明の実施例はデフォルトの動き情報について制限せず、例えば、デフォルトの動き情報はゼロ動き情報または現在の符号化ユニットの周辺ブロックから導出された動き情報であってもよい。
実施例３４
ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
３４．１、当該サブブロックの前方向動き情報および後方向動き情報がいずれも利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与え、
３４．２、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３４．３、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３４．４、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、
３４．４．１、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能な場合、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与え、
３４．４．２、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可な場合、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３４．４．３、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可な場合、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３４．４．４、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可な場合、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与える。
実施例３５
ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
３５．１、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３５．２、当該サブブロックの前方向動き情報が利用不可であれば、
３５．２．１、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能な場合、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３５．２．２、第１の周辺ブロックの前方向動き情報が利用不可な場合、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与える。
実施例３６
ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
３６．１、現在の画像フレームタイプがＰピクチャの場合、
３６．１．１、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．１．２、当該サブブロックの前方向動き情報が利用不可であれば、
３６．１．２．１、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．１．２．２、第１の周辺ブロックの前方向動き情報が利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２、現在の画像フレームタイプがＢピクチャの場合、
３６．２．１、当該サブブロックの前方向動き情報および後方向動き情報がいずれも利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２．２、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２．３、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２．４、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、
３６．２．４．１、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能なとき、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２．４．２、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２．４．３、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可なとき、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与え、
３６．２．４．４、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与える。
第６の部分、現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行う。
例示的に、１つの符号化ユニットは少なくとも１つのサブブロックを含み、各サブブロックの幅は現在の符号化ユニットの幅を超えず、各サブブロックの高さは現在の符号化ユニットの高さを超えない。
例えば、各サブブロックは８＊８サイズのブロックである。
例示的に、現在の符号化ユニット中のいずれかのサブブロック（８＊８サブブロックを例とする）について、各８＊８サブブロックの動き情報はＭｏｔｉｏｎＡｒｒａｙ［ｉ］［ｊ］と記され、ｉはサブブロックの水平インデックス値であり、ｊはサブブロックの垂直インデックス値であり、ｉ＝０～（ｃｕ＿ｗｉｄｔｈ＞＞３）－１であり、ｊ＝０～（ｃｕ＿ｈｅｉｇｈｔ＞＞３）－１である。
実施例３７
現在の符号化ユニットのいずれかのサブブロックについて、現在のサブブロックの動き情報に基づいて、現在のサブブロックに対して動き補償を行い、現在のサブブロックの予測サンプル行列を得る。例示的に、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
実施例３８
現在の符号化ユニットのいずれかのサブブロックについて、現在のサブブロックがＢＩＯ条件を満たす場合、現在のサブブロックの動き情報に基づいて、現在のサブブロックに対して動き補償を行い、ＢＩＯ技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、現在のサブブロックの予測サンプル行列を得、それ以外の場合、現在のサブブロックの動き情報に基づいて現在のサブブロックに対して動き補償を行い、現在のサブブロックの予測サンプル行列を得る。
例示的に、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。例示的に、サブブロックが双方向オプティカルフロー条件を満たすことは以下を含む。
１）、シーケンスレベルの高レベルシンタックスには、双方向オプティカルフロー技術をイネーブルすることが許可され、
２）、現在の符号化ユニットの動きベクトル精度が０に等しく、
３）、当該サブブロックが双方向予測を用い、
４）、当該サブブロックの参照画像リスト０における参照フレームインデックス値がｒｅｆＩｄｘＬ０の参照フレームおよび参照画像リスト１における参照フレームインデックス値がｒｅｆＩｄｘＬ１の参照フレームの表示順序はそれぞれ現在のフレームの両側に位置する。
実施例３９
現在の符号化ユニットのいずれかのサブブロックについて、現在のサブブロックの動き情報に対して復号側動きベクトル調整（ＤＭＶＲ）技術を行わず、現在のサブブロックの動き情報に基づいて、現在のサブブロックに対して動き補償を行い、現在のサブブロックの予測サンプル行列を得る。例示的に、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
実施例４０
現在の符号化ユニットのいずれかのサブブロックについて、現在のサブブロックの動き情報に対して復号側動きベクトル調整（ＤＭＶＲ）技術を行わず、現在のサブブロックがＢＩＯ条件を満たす場合、現在のサブブロックの動き情報に基づいて、現在のサブブロックに対して動き補償を行い、ＢＩＯ技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、現在のサブブロックの予測サンプル行列を得、それ以外の場合、現在のサブブロックの動き情報に基づいて現在のサブブロックに対して動き補償を行い、現在のサブブロックの予測サンプル行列を得る。
例示的に、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
例示的に、サブブロックが双方向オプティカルフロー条件を満たすことは以下を含む。
１）、シーケンスレベルの高レベルシンタックスには、双方向オプティカルフロー技術をイネーブルすることが許可され、
２）、現在の符号化ユニットの動きベクトル精度が０に等しく、
３）、当該サブブロックが双方向予測を用い、
４）、当該サブブロックの参照画像リスト０における参照フレームインデックス値がｒｅｆＩｄｘＬ０の参照フレームおよび参照画像リスト１における参照フレームインデックス値がｒｅｆＩｄｘＬ１の参照フレームの表示順序はそれぞれ現在のフレームの両側に位置する。
なお、上記実施例は本発明の実施例の実現方式の具体的な例に過ぎず、本発明の保護範囲を限定するものではなく、上記実施例に基づいて、実施例間の組み合わせ、すなわち１つまたは複数の実施例間の任意の組み合わせ、または実施例の変形により、新たな実施例を得ることができ、それらはいずれも本発明の保護範囲に属するべきである。
また、上記各実施例間は相互に参照してもよく、符号化と復号の実現フローは相互に参照してもよい。
以上、本発明にて提供される方法について説明した。以下、本発明にて提供される装置について説明する。
図７に示すように、図７は本発明の実施例にて提供される復号装置の構造の概略図であり、当該装置は、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得するための取得ユニット７１０と、前記強化時間動きベクトル予測モードフラグの値が第１の数値の場合、前記現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するための第１の決定ユニット７２０と、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するための構築ユニット７３０と、前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するための第２の決定ユニット７４０と、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するための第３の決定ユニット７５０と、を含み得る。
いくつかの実施例において、前記取得ユニット７１０が現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を取得することは、前記現在の符号化ユニットが第１の解析条件を満たす場合、ビットストリームから前記強化時間動きベクトル予測モードフラグの値を解析することと、それ以外の場合、前記強化時間動きベクトル予測モードフラグの値が第２の数値であると決定することと、を含み、前記強化時間動きベクトル予測モードフラグの値が第１の数値であることは、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることを示し、前記強化時間動きベクトル予測モードフラグの値が第２の数値であることは、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示す。
いくつかの実施例において、前記現在の符号化ユニットが第１の解析条件を満たすことは、前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、前記現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たすことと、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることと、前記現在の符号化ユニットが角度重み付け予測の利用条件または究極の動きベクトル表現の利用条件を満たすこととのうちの１つまたは複数を含む。
いくつかの実施例において、前記現在の符号化ユニットが第１の解析条件を満たすことは、前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、前記現在の符号化ユニットのサイズが、現在の符号化ユニットの幅および高さがいずれもＮ０以上であるというサイズ制限を満たすことと、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることと、前記現在の符号化ユニットが角度重み付け予測の利用条件を満たし、または究極の動きベクトル表現の利用条件を満たすことと、を含む。
いくつかの実施例において、前記強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いるとともに、１つのコンテキストモデルを用いる。
いくつかの実施例において、前記取得ユニット７１０が現在の符号化ユニットの強化時間動きベクトル予測モードインデックス値を取得することは、前記現在の符号化ユニットが第２の解析条件を満たす場合、ビットストリームから前記強化時間動きベクトル予測モードインデックス値を解析することを含む。
いくつかの実施例において、前記現在の符号化ユニットが第２の解析条件を満たすことは、前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることとのうちの１つまたは複数を含む。
いくつかの実施例において、前記強化時間動きベクトル予測モードインデックス値の逆二値化は最大値が４のトランケーテッド・ユーナリに基づいて実現され、前記トランケーテッド・ユーナリは４つのバイナリ文字列を用い、各バイナリ文字は単独のコンテキストモデルを用い、合計で４つのコンテキストモデルを用いる。
いくつかの実施例において、前記第１の決定ユニット７２０が現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定することは、現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定することと、前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定することと、を含み、ここで、前記現在の画像フレームタイプがＰピクチャであれば、前記時間参照画像は参照画像リスト０における参照フレームインデックス値が０の参照画像であり、現在の画像フレームタイプがＢピクチャであれば、前記時間参照画像は参照画像リスト１における参照フレームインデックス値が０の参照画像である。
いくつかの実施例において、前記第１の決定ユニット７２０が前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定することは、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定することを含む。
いくつかの実施例において、前記第１の決定ユニット７２０が現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定することは、現在の最大符号化ユニットの画像における左上隅横座標、最大符号化ユニットのサイズ、現在の符号化ユニットの幅、現在の画像の幅、現在の符号化ユニットの画像における左上隅横座標に基づいて、前記初期マッチング符号化ユニットの横座標を決定することと、現在の最大符号化ユニットの画像における左上隅縦座標、最大符号化ユニットのサイズ、現在の符号化ユニットの高さ、現在の画像の高さ、現在の符号化ユニットの画像における左上隅縦座標に基づいて、前記初期マッチング符号化ユニットの縦座標を決定することと、を含む。
いくつかの実施例において、前記構築ユニット７３０が前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築することは、前記初期マッチング符号化ユニットの座標情報に基づいて、少なくとも１つの強化時間動きベクトル予測モード番号を決定することと、前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築することと、を含む。
いくつかの実施例において、マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標であり、前記構築ユニット７３０が前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築することは、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、且つＡ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、且つＡ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、を含む。
ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの座標情報であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さである。
Ａ１は前記初期マッチング符号化ユニットの左上隅の４＊４ブロックであり、Ｂ１はＡ１の真左側の４＊４ブロックであり、Ｃ１はＡ１の真上の４＊４ブロックであり、Ａ２は前記初期マッチング符号化ユニットの右上隅の４＊４ブロックであり、Ｂ２はＡ２の真右側の４＊４ブロックであり、Ｃ２はＡ２の真上の４＊４ブロックであり、Ａ３は前記初期マッチング符号化ユニットの左下隅の４＊４ブロックであり、Ｂ３はＡ３の真左側の４＊４ブロックであり、Ｃ３はＡ３の真下の４＊４ブロックであり、Ａ４は前記初期マッチング符号化ユニットの右下隅の４＊４ブロックであり、Ｂ４はＡ４の真右側の４＊４ブロックであり、Ｃ４はＡ４の真下の４＊４ブロックである。
いくつかの実施例において、前記構築ユニット７３０が前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築することは、前記強化時間候補リストの長さが５未満の場合、強化時間候補リストの長さが５に等しくなるまで、現在の強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号と同じの強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える操作を繰り返すことをさらに含む。
いくつかの実施例において、前記第２の決定ユニット７４０が前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定することは、
強化時間動きベクトル予測モード番号が０であれば、ＰｘはＭｘに等しく、ＰｙはＭｙに等しいと決定することと、
強化時間動きベクトル予測モード番号が１であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ＋ｎに等しいと決定することと、
強化時間動きベクトル予測モード番号が２であれば、ＰｘはＭｘ＋ｎに等しく、ＰｙはＭｙに等しいと決定することと、
強化時間動きベクトル予測モード番号が３であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ－ｎに等しいと決定することと、
強化時間動きベクトル予測モード番号が４であれば、ＰｘはＭｘ－ｎに等しく、ＰｙはＭｙに等しいと決定することと、を含み、
ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの左上隅座標であり、（Ｐｘ，Ｐｙ）は前記ターゲットマッチング符号化ユニットの左上隅座標である。
いくつかの実施例において、前記第３の決定ユニット７５０が前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を前記現在の符号化ユニットの対応する位置のサブブロックに与えることを含む。
いくつかの実施例において、前記決定ユニット７５０が前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＢピクチャの場合、当該サブブロックの前方向動き情報および後方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ前記現在の符号化ユニットの対応する位置のサブブロックに与えることと、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、を含む。
いくつかの実施例において、前記決定ユニット７５０が前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、サブブロックの前方向動き情報が利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの前方向動き情報が利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、現在の画像フレームタイプがＢピクチャの場合、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能なとき、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可なとき、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、を含む。ここで、前記第１の周辺ブロックは前記現在の符号化ユニットのいずれかの復号済み隣接ブロックを含む。
いくつかの実施例において、図８に示すように、前記復号装置は、前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うための動き補償ユニット７６０をさらに含む。
いくつかの実施例において、前記動き補償ユニット７６０が前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うことは、現在の符号化ユニットのいずれかのサブブロックについて、当該サブブロックの動き情報に対して復号側動きベクトル調整技術を行わないことと、当該サブブロックが双方向オプティカルフロー条件を満たす場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得ることと、それ以外の場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、当該サブブロックの予測サンプル行列を得ることと、を含み、ここで、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
可能な一実施例において、上記復号装置は映像復号器を含み得る。
図９に示すように、本発明の実施例にて提供される復号デバイスのハードウェア構造の概略図である。当該復号デバイスはプロセッサ９０１と、機械実行可能命令が記憶されている機械可読記憶媒体９０２とを含み得る。プロセッサ９０１と機械可読記憶媒体９０２とはシステムバス９０３を介して通信可能である。また、プロセッサ９０１は、機械可読記憶媒体９０２中の復号制御ロジックに対応する機械実行可能命令を読み取り実行することにより、上述した復号方法を実行することができる。
本明細書で言及される機械可読記憶媒体９０２は、任意の電子的、磁気的、光学的、または他の物理的記憶装置であってもよく、実行可能命令、データなどの情報を含むか、または記憶することができる。例えば、機械可読記憶媒体は、ＲＡＭ（Ｒａｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ランダムアクセスメモリ）、揮発性メモリ、不揮発性メモリ、フラッシュメモリ、記憶ドライブ（例えばハードディスクドライブ）、ソリッドステートハードディスク、任意のタイプの記憶ディスク（例えば光ディスク、ｄｖｄなど）、若しくは類似の記憶媒体、またはそれらの組み合わせであってもよい。
いくつかの実施例において、機械実行可能命令が記憶されている機械可読記憶媒体であって、前記機械実行可能命令がプロセッサにより実行されると、上述した復号方法が実施される、機械可読記憶媒体がさらに提供される。例えば、前記機械可読記憶媒体はＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピーディスク、および光データ記憶デバイスなどであってもよい。
図１０に示すように、図１０は本発明の実施例にて提供される符号化装置の構造の概略図であり、当該装置は、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するための第１の決定ユニット１０１０と、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するための構築ユニット１０２０と、強化時間候補リストにおける各強化時間動きベクトル予測モード番号を順にトラバースし、各強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するための第２の決定ユニット１０３０と、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するための第３の決定ユニット１０４０と、前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うための動き補償ユニット１０５０と、強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送するための符号化ユニット１０６０と、を含み得る。
いくつかの実施例において、前記第１の決定ユニット１０１０が現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定することは、現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定することと、前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定することと、を含み、ここで、前記現在の画像フレームタイプがＰピクチャであれば、前記時間参照画像は参照画像リスト０における参照フレームインデックス値が０の参照画像であり、現在の画像フレームタイプがＢピクチャであれば、前記時間参照画像は参照画像リスト１における参照フレームインデックス値が０の参照画像である。
いくつかの実施例において、前記第１の決定ユニット１０１０が前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定することは、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定することを含む。
いくつかの実施例において、前記第１の決定ユニット１０１０が現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定することは、現在の最大符号化ユニットの画像における左上隅横座標、最大符号化ユニットのサイズ、現在の符号化ユニットの幅、現在の画像の幅、現在の符号化ユニットの画像における左上隅横座標に基づいて、前記初期マッチング符号化ユニットの横座標を決定することと、現在の最大符号化ユニットの画像における左上隅縦座標、最大符号化ユニットのサイズ、現在の符号化ユニットの高さ、現在の画像の高さ、現在の符号化ユニットの画像における左上隅縦座標に基づいて、前記初期マッチング符号化ユニットの縦座標を決定することと、を含む。
いくつかの実施例において、前記構築ユニット１０２０が前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築することは、前記初期マッチング符号化ユニットの座標情報に基づいて、少なくとも１つの強化時間動きベクトル予測モード番号を決定することと、前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築することと、を含む。
いくつかの実施例において、マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標であり、前記構築ユニット１０２０が前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築することは、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、且つＡ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、且つＡ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、
Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えることと、を含む。
ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの座標情報であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さである。
Ａ１は前記初期マッチング符号化ユニットの左上隅の４＊４ブロックであり、Ｂ１はＡ１の真左側の４＊４ブロックであり、Ｃ１はＡ１の真上の４＊４ブロックであり、Ａ２は前記初期マッチング符号化ユニットの右上隅の４＊４ブロックであり、Ｂ２はＡ２の真右側の４＊４ブロックであり、Ｃ２はＡ２の真上の４＊４ブロックであり、Ａ３は前記初期マッチング符号化ユニットの左下隅の４＊４ブロックであり、Ｂ３はＡ３の真左側の４＊４ブロックであり、Ｃ３はＡ３の真下の４＊４ブロックであり、Ａ４は前記初期マッチング符号化ユニットの右下隅の４＊４ブロックであり、Ｂ４はＡ４の真右側の４＊４ブロックであり、Ｃ４はＡ４の真下の４＊４ブロックである。
いくつかの実施例において、前記構築ユニット１０２０が前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築することは、前記強化時間候補リストの長さが５未満の場合、強化時間候補リストの長さが５に等しくなるまで、現在の強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号と同じの強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える操作を繰り返すことをさらに含む。
いくつかの実施例において、前記第２の決定ユニット１０３０が強化時間候補リストにおける各強化時間動きベクトル予測モード番号を順にトラバースし、各強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定することは、現在トラバースする強化時間動きベクトル予測モード番号について、
当該強化時間動きベクトル予測モード番号が０であれば、ＰｘはＭｘに等しく、ＰｙはＭｙに等しいと決定することと、
当該強化時間動きベクトル予測モード番号が１であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ＋ｎに等しいと決定することと、
当該強化時間動きベクトル予測モード番号が２であれば、ＰｘはＭｘ＋ｎに等しく、ＰｙはＭｙに等しいと決定することと、
当該強化時間動きベクトル予測モード番号が３であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ－ｎに等しいと決定することと、
当該強化時間動きベクトル予測モード番号が４であれば、ＰｘはＭｘ－ｎに等しく、ＰｙはＭｙに等しいと決定することと、を含み、
ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの左上隅座標であり、（Ｐｘ，Ｐｙ）は前記ターゲットマッチング符号化ユニットの左上隅座標である。
いくつかの実施例において、前記第３の決定ユニット１０４０が前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を前記現在の符号化ユニットの対応する位置のサブブロックに与えることを含む。
いくつかの実施例において、前記決定ユニット１０４０が前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＢピクチャの場合、当該サブブロックの前方向動き情報および後方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ前記現在の符号化ユニットの対応する位置のサブブロックに与えることと、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、を含む。
いくつかの実施例において、前記第３の決定ユニット１０４０が前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定することは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、サブブロックの前方向動き情報が利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの前方向動き情報が利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、現在の画像フレームタイプがＢピクチャの場合、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能なとき、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可なとき、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えることと、を含み、ここで、前記第１の周辺ブロックは前記現在の符号化ユニットのいずれかの復号済み隣接ブロックを含む。
いくつかの実施例において、前記動き補償ユニット１０５０が前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うことは、現在の符号化ユニットのいずれかのサブブロックについて、当該サブブロックの動き情報に対して復号側動きベクトル調整技術を行わないことと、当該サブブロックが双方向オプティカルフロー条件を満たす場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得ることと、それ以外の場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、当該サブブロックの予測サンプル行列を得ることと、を含み、ここで、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
可能な一実施例において、上記符号化装置は映像符号化器を含み得る。
図１１に示すように、本発明の実施例にて提供される符号化デバイスのハードウェア構造の概略図である。当該符号化デバイスはプロセッサ１１０１と、機械実行可能命令が記憶されている機械可読記憶媒体１１０２とを含み得る。プロセッサ１１０１と機械可読記憶媒体１１０２とはシステムバス１１０３を介して通信可能である。また、プロセッサ１１０１は、機械可読記憶媒体１１０２中の符号化制御ロジックに対応する機械実行可能命令を読み取り実行することにより、上述した符号化方法を実行することができる。
本明細書で言及される機械可読記憶媒体１１０２は、任意の電子的、磁気的、光学的、または他の物理的記憶装置であってもよく、実行可能命令、データなどの情報を含むか、または記憶することができる。例えば、機械可読記憶媒体は、ＲＡＭ（Ｒａｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ランダムアクセスメモリ）、揮発性メモリ、不揮発性メモリ、フラッシュメモリ、記憶ドライブ（例えばハードディスクドライブ）、ソリッドステートハードディスク、任意のタイプの記憶ディスク（例えば光ディスク、ｄｖｄなど）、若しくは類似の記憶媒体、またはそれらの組み合わせであってもよい。
いくつかの実施例において、機械実行可能命令が記憶されている機械可読記憶媒体であって、前記機械実行可能命令がプロセッサにより実行されると、上述した符号化方法が実施される、機械可読記憶媒体がさらに提供される。例えば、前記機械可読記憶媒体はＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピーディスク、および光データ記憶デバイスなどであってもよい。
いくつかの実施例において、上記実施例のいずれかにおける符号化装置と、上記実施例のいずれかにおける復号装置と、を含むカメラデバイスがさらに提供される。
本発明の実施例の第１の態様によれば、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得するステップと、前記強化時間動きベクトル予測モードフラグの値が第１の数値の場合、前記現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップと、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップと、前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップと、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップと、を含む復号方法が提供される。
いくつかの実施例において、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を取得するステップは、前記現在の符号化ユニットが第１の解析条件を満たす場合、ビットストリームから前記強化時間動きベクトル予測モードフラグの値を解析するステップと、それ以外の場合、前記強化時間動きベクトル予測モードフラグの値が第２の数値であると決定するステップと、を含み、前記強化時間動きベクトル予測モードフラグの値が第１の数値であることは、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることを示し、前記強化時間動きベクトル予測モードフラグの値が第２の数値であることは、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示す。
いくつかの実施例において、前記現在の符号化ユニットが第１の解析条件を満たすことは、前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、前記現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たすことと、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることと、前記現在の符号化ユニットが角度重み付け予測の利用条件または究極の動きベクトル表現の利用条件を満たすこととのうちの１つまたは複数を含む。
いくつかの実施例において、前記予め設定されたサイズ制限は現在の符号化ユニットの幅および高さがいずれもＮ０以上であることを含む。
いくつかの実施例において、Ｎ０は８である。
前記現在の符号化ユニットが角度重み付け予測の利用条件を満たすことは、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが角度重み付け予測技術をイネーブルすることが許可されることと、現在の符号化ユニットの幅および高さがいずれもＮ１以上であり、現在の符号化ユニットの幅および高さがいずれもＮ２以下であることと、
現在の画像フレームタイプがＢピクチャであることと、を含み、前記現在の符号化ユニットが究極の動きベクトル表現の利用条件を満たすことは、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが究極の動きベクトル表現技術をイネーブルすることが許可されることを含む。
いくつかの実施例において、前記強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いるとともに、１つのコンテキストモデルを用いる。
いくつかの実施例において、現在の符号化ユニットの強化時間動きベクトル予測モードインデックス値を取得するステップは、前記現在の符号化ユニットが第２の解析条件を満たす場合、ビットストリームから前記強化時間動きベクトル予測モードインデックス値を解析するステップを含む。
いくつかの実施例において、前記現在の符号化ユニットが第２の解析条件を満たすことは、前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることとのうちの１つまたは複数を含む。
いくつかの実施例において、前記強化時間動きベクトル予測モードインデックス値の逆二値化は最大値が４のトランケーテッド・ユーナリに基づいて実現され、前記トランケーテッド・ユーナリは最大４つのバイナリ文字列を用い、各バイナリ文字は単独のコンテキストモデルを用い、合計で４つのコンテキストモデルを用いる。
いくつかの実施例において、前記現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップは、現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定するステップと、前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定するステップと、を含み、ここで、前記現在の画像フレームタイプがＰピクチャであれば、前記時間参照画像は参照画像リスト０における参照フレームインデックス値が０の参照画像であり、現在の画像フレームタイプがＢピクチャであれば、前記時間参照画像は参照画像リスト１における参照フレームインデックス値が０の参照画像であり、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報に基づいて、強化時間候補リストを構築するステップを含む。
いくつかの実施例において、前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定するステップは、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップを含む。
いくつかの実施例において、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップは、現在の最大符号化ユニットの画像における左上隅横座標、最大符号化ユニットのサイズ、現在の符号化ユニットの幅、現在の画像の幅、現在の符号化ユニットの画像における左上隅横座標に基づいて、前記初期マッチング符号化ユニットの横座標を決定するステップと、現在の最大符号化ユニットの画像における左上隅縦座標、最大符号化ユニットのサイズ、現在の符号化ユニットの高さ、現在の画像の高さ、現在の符号化ユニットの画像における左上隅縦座標に基づいて、前記初期マッチング符号化ユニットの縦座標を決定するステップと、を含む。
いくつかの実施例において、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、前記初期マッチング符号化ユニットの座標情報に基づいて、少なくとも１つの強化時間動きベクトル予測モード番号を決定するステップと、前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築するステップと、を含む。
いくつかの実施例において、マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標であり、前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築するステップは、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、且つＡ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、且つＡ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、を含み、ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの座標情報であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、Ａ１は前記初期マッチング符号化ユニットの左上隅の４＊４ブロックであり、Ｂ１はＡ１の真左側の４＊４ブロックであり、Ｃ１はＡ１の真上の４＊４ブロックであり、Ａ２は前記初期マッチング符号化ユニットの右上隅の４＊４ブロックであり、Ｂ２はＡ２の真右側の４＊４ブロックであり、Ｃ２はＡ２の真上の４＊４ブロックであり、Ａ３は前記初期マッチング符号化ユニットの左下隅の４＊４ブロックであり、Ｂ３はＡ３の真左側の４＊４ブロックであり、Ｃ３はＡ３の真下の４＊４ブロックであり、Ａ４は前記初期マッチング符号化ユニットの右下隅の４＊４ブロックであり、Ｂ４はＡ４の真右側の４＊４ブロックであり、Ｃ４はＡ４の真下の４＊４ブロックである。
いくつかの実施例において、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、前記強化時間候補リストの長さが５未満の場合、強化時間候補リストの長さが５に等しくなるまで、現在の強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号と同じの強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える操作を繰り返すステップをさらに含む。
いくつかの実施例において、前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップは、強化時間動きベクトル予測モード番号が０であれば、ＰｘはＭｘに等しく、ＰｙはＭｙに等しいと決定するステップと、強化時間動きベクトル予測モード番号が１であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ＋ｎに等しいと決定するステップと、強化時間動きベクトル予測モード番号が２であれば、ＰｘはＭｘ＋ｎに等しく、ＰｙはＭｙに等しいと決定するステップと、強化時間動きベクトル予測モード番号が３であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ－ｎに等しいと決定するステップと、強化時間動きベクトル予測モード番号が４であれば、ＰｘはＭｘ－ｎに等しく、ＰｙはＭｙに等しいと決定するステップと、を含み、ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの左上隅座標であり、（Ｐｘ，Ｐｙ）は前記ターゲットマッチング符号化ユニットの左上隅座標である。
いくつかの実施例において、Ｎは８である。
いくつかの実施例において、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を前記現在の符号化ユニットの対応する位置のサブブロックに与えるステップを含む。
いくつかの実施例において、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＢピクチャの場合、当該サブブロックの前方向動き情報および後方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ前記現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、を含む。
いくつかの実施例において、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、サブブロックの前方向動き情報が利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報が利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、現在の画像フレームタイプがＢピクチャの場合、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能なとき、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可なとき、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、を含み、ここで、前記第１の周辺ブロックは前記現在の符号化ユニットのいずれかの復号済み隣接ブロックを含む。
いくつかの実施例において、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップの後に、前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップをさらに含む。
いくつかの実施例において、前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップは、現在の符号化ユニットのいずれかのサブブロックについて、当該サブブロックの動き情報に対して復号側動きベクトル調整技術を行わないステップと、当該サブブロックが双方向オプティカルフロー条件を満たす場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得るステップと、それ以外の場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、当該サブブロックの予測サンプル行列を得るステップと、を含み、ここで、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
いくつかの実施例において、サブブロックが双方向オプティカルフロー条件を満たすことは、シーケンスレベルの高レベルシンタックスには、双方向オプティカルフロー技術をイネーブルすることが許可されることと、現在の符号化ユニットの動きベクトル精度が０に等しいことと、当該サブブロックが双方向予測を用いることと、当該サブブロックの参照画像リスト０における参照フレームインデックス値がｒｅｆＩｄｘＬ０の参照フレームおよび参照画像リスト１における参照フレームインデックス値がｒｅｆＩｄｘＬ１の参照フレームの表示順序がそれぞれ現在のフレームの両側に位置することと、を含む。
いくつかの実施例において、双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得るステップは、サブブロックの前方向動き補償値、後方向動き補償値およびオプティカルフローオフセット値に基づいて、当該サブブロックの予測サンプル行列を決定するステップを含む。
本発明の実施例の第２の態様によれば、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップと、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップと、強化時間候補リストにおける各強化時間動きベクトル予測モード番号を順にトラバースし、各強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップと、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップと、前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップと、強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送するステップと、を含む符号化方法が提供される。
いくつかの実施例において、前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップは、現在の符号化ユニットのいずれかのサブブロックについて、当該サブブロックの動き情報に対して復号側動きベクトル調整技術を行わないステップと、当該サブブロックが双方向オプティカルフロー条件を満たす場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得るステップと、それ以外の場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、当該サブブロックの予測サンプル行列を得るステップと、を含み、ここで、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなる。
いくつかの実施例において、サブブロックが双方向オプティカルフロー条件を満たすことは、シーケンスレベルの高レベルシンタックスには、双方向オプティカルフロー技術をイネーブルすることが許可されることと、現在の符号化ユニットの動きベクトル精度が０に等しいことと、当該サブブロックが双方向予測を用いることと、当該サブブロックの参照画像リスト０における参照フレームインデックス値がｒｅｆＩｄｘＬ０の参照フレームおよび参照画像リスト１における参照フレームインデックス値がｒｅｆＩｄｘＬ１の参照フレームの表示順序がそれぞれ現在のフレームの両側に位置することと、を含む。
いくつかの実施例において、双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得るステップは、サブブロックの前方向動き補償値、後方向動き補償値およびオプティカルフローオフセット値に基づいて、当該サブブロックの予測サンプル行列を決定するステップを含む。
いくつかの実施例において、対応する強化時間動きベクトル予測モードフラグをビットストリームに書き込むステップは、前記現在の符号化ユニットが第１の解析条件を満たす場合、対応する強化時間動きベクトル予測モードフラグをビットストリームに書き込むステップと、それ以外の場合、対応する強化時間動きベクトル予測モードフラグの値が第２の数値であると決定するステップと、を含み、前記強化時間動きベクトル予測モードフラグの値が第１の数値であることは、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることを示し、前記強化時間動きベクトル予測モードフラグの値が第２の数値であることは、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示す。
いくつかの実施例において、前記現在の符号化ユニットが第１の解析条件を満たすことは、前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、前記現在の符号化ユニットのサイズが、現在の符号化ユニットの幅および高さがいずれも８以上であるというサイズ制限を満たすことと、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることと、前記現在の符号化ユニットが角度重み付け予測の利用条件または究極の動きベクトル表現の利用条件を満たすことと、のうちの１つまたは複数を含む。
いくつかの実施例において、前記現在の符号化ユニットが角度重み付け予測の利用条件を満たすことは、シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが角度重み付け予測技術をイネーブルすることが許可されることと、現在の符号化ユニットの幅および高さがいずれもＮ１以上であり、現在の符号化ユニットの幅および高さがいずれもＮ２以下であることと、現在の画像フレームタイプがＢピクチャであることと、を含み、前記現在の符号化ユニットが究極の動きベクトル表現の利用条件を満たすことは、シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが究極の動きベクトル表現技術をイネーブルすることが許可されることを含む。
いくつかの実施例において、前記強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いるとともに、１つのコンテキストモデルを用いる。
いくつかの実施例において、強化時間動きベクトル予測モードインデックス値をビットストリームに書き込むステップは、前記現在の符号化ユニットが第２の解析条件を満たす場合、強化時間動きベクトル予測モードインデックス値をビットストリームに書き込むステップを含む。
いくつかの実施例において、前記現在の符号化ユニットが第２の解析条件を満たすことは、前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることとのうちの１つまたは複数を含む。
いくつかの実施例において、前記強化時間動きベクトル予測モードインデックス値の逆二値化は最大値が４のトランケーテッド・ユーナリに基づいて実現され、前記トランケーテッド・ユーナリは最大４つのバイナリ文字列を用い、各バイナリ文字は単独のコンテキストモデルを用い、合計で４つのコンテキストモデルを用いる。
いくつかの実施例において、前記現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップは、現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定するステップと、前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定するステップと、を含み、ここで、前記現在の画像フレームタイプがＰピクチャであれば、前記時間参照画像は参照画像リスト０における参照フレームインデックス値が０の参照画像であり、現在の画像フレームタイプがＢピクチャであれば、前記時間参照画像は参照画像リスト１における参照フレームインデックス値が０の参照画像であり、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報に基づいて、強化時間候補リストを構築するステップを含む。
いくつかの実施例において、前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定するステップは、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップを含む。
いくつかの実施例において、現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップは、現在の最大符号化ユニットの画像における左上隅横座標、最大符号化ユニットのサイズ、現在の符号化ユニットの幅、現在の画像の幅、現在の符号化ユニットの画像における左上隅横座標に基づいて、前記初期マッチング符号化ユニットの横座標を決定するステップと、現在の最大符号化ユニットの画像における左上隅縦座標、最大符号化ユニットのサイズ、現在の符号化ユニットの高さ、現在の画像の高さ、現在の符号化ユニットの画像における左上隅縦座標に基づいて、前記初期マッチング符号化ユニットの縦座標を決定するステップと、を含む。
いくつかの実施例において、強化時間候補リストにおける各強化時間動きベクトル予測モード番号を順にトラバースし、各強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップは、強化時間動きベクトル予測モード番号が０であれば、ＰｘはＭｘに等しく、ＰｙはＭｙに等しいと決定するステップと、強化時間動きベクトル予測モード番号が１であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ＋８に等しいと決定するステップと、強化時間動きベクトル予測モード番号が２であれば、ＰｘはＭｘ＋８に等しく、ＰｙはＭｙに等しいと決定するステップと、強化時間動きベクトル予測モード番号が３であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ－８に等しいと決定するステップと、強化時間動きベクトル予測モード番号が４であれば、ＰｘはＭｘ－８に等しく、ＰｙはＭｙに等しいと決定するステップと、を含み、ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの左上隅座標であり、（Ｐｘ，Ｐｙ）は前記ターゲットマッチング符号化ユニットの左上隅座標である。
いくつかの実施例において、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、前記初期マッチング符号化ユニットの座標情報に基づいて、少なくとも１つの強化時間動きベクトル予測モード番号を決定するステップと、前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築するステップと、を含む。
いくつかの実施例において、マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標であり、前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築するステップは、強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、且つＡ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、且つＡ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、を含み、ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの座標情報であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、Ａ１は前記初期マッチング符号化ユニットの左上隅の４＊４ブロックであり、Ｂ１はＡ１の真左側の４＊４ブロックであり、Ｃ１はＡ１の真上の４＊４ブロックであり、Ａ２は前記初期マッチング符号化ユニットの右上隅の４＊４ブロックであり、Ｂ２はＡ２の真右側の４＊４ブロックであり、Ｃ２はＡ２の真上の４＊４ブロックであり、Ａ３は前記初期マッチング符号化ユニットの左下隅の４＊４ブロックであり、Ｂ３はＡ３の真左側の４＊４ブロックであり、Ｃ３はＡ３の真下の４＊４ブロックであり、Ａ４は前記初期マッチング符号化ユニットの右下隅の４＊４ブロックであり、Ｂ４はＡ４の真右側の４＊４ブロックであり、Ｃ４はＡ４の真下の４＊４ブロックである。
いくつかの実施例において、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、前記強化時間候補リストの長さが５未満の場合、強化時間候補リストの長さが５に等しくなるまで、現在の強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号と同じの強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える操作を繰り返すステップをさらに含む。
いくつかの実施例において、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を前記現在の符号化ユニットの対応する位置のサブブロックに与えるステップを含む。
いくつかの実施例において、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＢピクチャの場合、当該サブブロックの前方向動き情報および後方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ前記現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、を含む。
いくつかの実施例において、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、現在の画像フレームタイプがＰピクチャの場合、サブブロックの前方向動き情報が利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報が利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、現在の画像フレームタイプがＢピクチャの場合、サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能なとき、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可なとき、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、を含み、ここで、前記第１の周辺ブロックは前記現在の符号化ユニットのいずれかの復号済み隣接ブロックを含む。
本発明の実施例の第３の態様によれば、現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得するための取得ユニットと、前記強化時間動きベクトル予測モードフラグの値が第１の数値の場合、前記現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するための第１の決定ユニットと、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するための構築ユニットと、前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するための第２の決定ユニットと、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するための第３の決定ユニットと、を含む復号装置が提供される。
本発明の実施例の第４の態様によれば、現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するための第１の決定ユニットと、前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するための構築ユニットと、強化時間候補リストにおける各強化時間候補モードを順にトラバースし、各モードに対応するターゲットマッチング符号化ユニットの座標情報を決定するための第２の決定ユニットと、前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するための第３の決定ユニットと、前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うための動き補償ユニットと、強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送するための符号化ユニットと、を含む符号化装置が提供される。
本発明の実施例の第５の態様によれば、プロセッサと機械可読記憶媒体とを含み、前記機械可読記憶媒体には、前記プロセッサによって実行可能な機械実行可能命令が記憶され、前記プロセッサは第１の態様の復号方法を実施するように機械実行可能命令を実行するために用いられる、復号デバイスが提供される。
本発明の実施例の第６の態様によれば、プロセッサと機械可読記憶媒体とを含み、前記機械可読記憶媒体には、前記プロセッサによって実行可能な機械実行可能命令が記憶され、前記プロセッサは第２の態様の符号化方法を実施するように機械実行可能命令を実行するために用いられる、符号化デバイスが提供される。
本発明の実施例の第７の態様によれば、プロセッサにより実行されると第１の態様または第２の態様の方法が実施される機械実行可能命令を記憶する機械可読記憶媒体が提供される。
なお、本明細書において、第１および第２などのような関係用語は１つのエンティティまたは操作を別のエンティティまたは操作と区別するためのものに過ぎず、必ずしもこれらのエンティティまたは操作の間に任意のこのような実際の関係または順序が存在することを要求または示唆するものではない。また、用語の「含む」、「包含」またはその他の任意の変形は非排他的な包含をカバーすることを意図し、それにより、一連の要素を含むプロセス、方法、物品またはデバイスはそれらの要素を含むだけでなく、さらに明確に列挙されない他の要素を含み、またはこのようなプロセス、方法、物品またはデバイスに固有の要素を含む。それ以上の制限がない場合、文の「１つの……を含む」によって限定された要素は、前記要素を含むプロセス、方法、物品またはデバイスに別の同じ要素がさらに存在することを排除するものではない。
以上は本発明の好適な実施例に過ぎず、本発明を限定するものではなく、本発明の精神および原則内で行われる任意の修正、同等の置換、および改善などは、いずれも本発明の保護範囲内に含まれるべきである。
７１０ 取得ユニット
７２０ 第１の決定ユニット
７３０ 構築ユニット
７４０ 第２の決定ユニット
７５０ 第３の決定ユニット
７５０ 決定ユニット
７６０ 補償ユニット

Claims (51)

  1. 現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得するステップと、
    前記強化時間動きベクトル予測モードフラグの値が第１の数値の場合、
    前記現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップと、
    前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップと、
    前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップと、
    前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップと、を含むことを特徴とする復号方法。
  2. 現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値を取得するステップは、
    前記現在の符号化ユニットが第１の解析条件を満たす場合、ビットストリームから前記強化時間動きベクトル予測モードフラグの値を解析するステップと、
    それ以外の場合、前記強化時間動きベクトル予測モードフラグの値が第２の数値であると決定するステップと、を含み、
    前記強化時間動きベクトル予測モードフラグの値が第１の数値であることは、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることを示し、
    前記強化時間動きベクトル予測モードフラグの値が第２の数値であることは、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示すことを特徴とする請求項１に記載の方法。
  3. 前記現在の符号化ユニットが第１の解析条件を満たすことは、
    前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、
    前記現在の符号化ユニットのサイズが予め設定されたサイズ制限を満たすことと、
    シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることと、
    前記現在の符号化ユニットが角度重み付け予測の利用条件または究極の動きベクトル表現の利用条件を満たすこととのうちの１つまたは複数を含むことを特徴とする請求項２に記載の方法。
  4. 前記予め設定されたサイズ制限は現在の符号化ユニットの幅および高さがいずれもＮ０以上であることを含むことを特徴とする請求項３に記載の方法。
  5. Ｎ０は８であることを特徴とする請求項４に記載の方法。
  6. 前記現在の符号化ユニットが角度重み付け予測の利用条件を満たすことは、
    シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが角度重み付け予測技術をイネーブルすることが許可されることと、
    現在の符号化ユニットの幅および高さがいずれもＮ１以上であり、現在の符号化ユニットの幅および高さがいずれもＮ２以下であることと、
    現在の画像フレームタイプがＢピクチャであることと、を含み、
    前記現在の符号化ユニットが究極の動きベクトル表現の利用条件を満たすことは、
    シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが究極の動きベクトル表現技術をイネーブルすることが許可されることを含むことを特徴とする請求項３に記載の方法。
  7. 前記強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いるとともに、１つのコンテキストモデルを用いることを特徴とする請求項２～６のいずれか一項に記載の方法。
  8. 現在の符号化ユニットの強化時間動きベクトル予測モードインデックス値を取得するステップは、
    前記現在の符号化ユニットが第２の解析条件を満たす場合、ビットストリームから前記強化時間動きベクトル予測モードインデックス値を解析するステップを含むことを特徴とする請求項１に記載の方法。
  9. 前記現在の符号化ユニットが第２の解析条件を満たすことは、
    前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、
    前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることとのうちの１つまたは複数を含むことを特徴とする請求項８に記載の方法。
  10. 前記強化時間動きベクトル予測モードインデックス値の逆二値化は最大値が４のトランケーテッド・ユーナリに基づいて実現され、前記トランケーテッド・ユーナリは最大４つのバイナリ文字列を用い、各バイナリ文字は単独のコンテキストモデルを用い、合計で４つのコンテキストモデルを用いることを特徴とする請求項８または９に記載の方法。
  11. 前記現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップは、
    現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定するステップと、
    前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定するステップと、を含み、
    ここで、前記現在の画像フレームタイプがＰピクチャであれば、前記時間参照画像は参照画像リスト０における参照フレームインデックス値が０の参照画像であり、
    現在の画像フレームタイプがＢピクチャであれば、前記時間参照画像は参照画像リスト１における参照フレームインデックス値が０の参照画像であり、
    前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、
    前記初期マッチング符号化ユニットの前記時間参照画像における座標情報に基づいて、強化時間候補リストを構築するステップを含むことを特徴とする請求項１に記載の方法。
  12. 前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定するステップは、
    現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップを含むことを特徴とする請求項１１に記載の方法。
  13. 現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップは、
    現在の最大符号化ユニットの画像における左上隅横座標、最大符号化ユニットのサイズ、現在の符号化ユニットの幅、現在の画像の幅、現在の符号化ユニットの画像における左上隅横座標に基づいて、前記初期マッチング符号化ユニットの横座標を決定するステップと、
    現在の最大符号化ユニットの画像における左上隅縦座標、最大符号化ユニットのサイズ、現在の符号化ユニットの高さ、現在の画像の高さ、現在の符号化ユニットの画像における左上隅縦座標に基づいて、前記初期マッチング符号化ユニットの縦座標を決定するステップと、を含むことを特徴とする請求項１２に記載の方法。
  14. 前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、
    前記初期マッチング符号化ユニットの座標情報に基づいて、少なくとも１つの強化時間動きベクトル予測モード番号を決定するステップと、
    前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築するステップと、を含むことを特徴とする請求項１に記載の方法。
  15. マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標であり、
    前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築するステップは、
    強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
    Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、且つＡ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
    Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、且つＡ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
    Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
    Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、を含み、
    ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの座標情報であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、
    Ａ１は前記初期マッチング符号化ユニットの左上隅の４＊４ブロックであり、Ｂ１はＡ１の真左側の４＊４ブロックであり、Ｃ１はＡ１の真上の４＊４ブロックであり、Ａ２は前記初期マッチング符号化ユニットの右上隅の４＊４ブロックであり、Ｂ２はＡ２の真右側の４＊４ブロックであり、Ｃ２はＡ２の真上の４＊４ブロックであり、Ａ３は前記初期マッチング符号化ユニットの左下隅の４＊４ブロックであり、Ｂ３はＡ３の真左側の４＊４ブロックであり、Ｃ３はＡ３の真下の４＊４ブロックであり、Ａ４は前記初期マッチング符号化ユニットの右下隅の４＊４ブロックであり、Ｂ４はＡ４の真右側の４＊４ブロックであり、Ｃ４はＡ４の真下の４＊４ブロックであることを特徴とする請求項１４に記載の方法。
  16. 前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、
    前記強化時間候補リストの長さが５未満の場合、強化時間候補リストの長さが５に等しくなるまで、
    現在の強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号と同じの強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える操作を繰り返すステップをさらに含むことを特徴とする請求項１５に記載の方法。
  17. 前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップは、
    強化時間動きベクトル予測モード番号が０であれば、ＰｘはＭｘに等しく、ＰｙはＭｙに等しいと決定するステップと、
    強化時間動きベクトル予測モード番号が１であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ＋ｎに等しいと決定するステップと、
    強化時間動きベクトル予測モード番号が２であれば、ＰｘはＭｘ＋ｎに等しく、ＰｙはＭｙに等しいと決定するステップと、
    強化時間動きベクトル予測モード番号が３であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ－ｎに等しいと決定するステップと、
    強化時間動きベクトル予測モード番号が４であれば、ＰｘはＭｘ－ｎに等しく、ＰｙはＭｙに等しいと決定するステップと、を含み、
    ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの左上隅座標であり、（Ｐｘ，Ｐｙ）は前記ターゲットマッチング符号化ユニットの左上隅座標であることを特徴とする請求項１に記載の方法。
  18. Ｎは８であることを特徴とする請求項１７に記載の方法。
  19. 前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、
    ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
    現在の画像フレームタイプがＰピクチャの場合、
    当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を前記現在の符号化ユニットの対応する位置のサブブロックに与えるステップを含むことを特徴とする請求項１に記載の方法。
  20. 前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、
    ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
    現在の画像フレームタイプがＢピクチャの場合、
    当該サブブロックの前方向動き情報および後方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ前記現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、
    当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、
    当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、を含むことを特徴とする請求項１に記載の方法。
  21. 前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、
    ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
    現在の画像フレームタイプがＰピクチャの場合、
    サブブロックの前方向動き情報が利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報が利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、
    現在の画像フレームタイプがＢピクチャの場合、
    サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能なとき、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可なとき、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、を含み、
    ここで、前記第１の周辺ブロックは前記現在の符号化ユニットのいずれかの復号済み隣接ブロックを含むことを特徴とする請求項１に記載の方法。
  22. 前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップの後に、
    前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップをさらに含むことを特徴とする請求項１～２１のいずれか一項に記載の方法。
  23. 前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップは、
    現在の符号化ユニットのいずれかのサブブロックについて、当該サブブロックの動き情報に対して復号側動きベクトル調整技術を行わないステップと、
    当該サブブロックが双方向オプティカルフロー条件を満たす場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得るステップと、
    それ以外の場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、当該サブブロックの予測サンプル行列を得るステップと、を含み、
    ここで、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなることを特徴とする請求項２２に記載の方法。
  24. サブブロックが双方向オプティカルフロー条件を満たすことは、
    シーケンスレベルの高レベルシンタックスには、双方向オプティカルフロー技術をイネーブルすることが許可されることと、
    現在の符号化ユニットの動きベクトル精度が０に等しいことと、
    当該サブブロックが双方向予測を用いることと、
    当該サブブロックの参照画像リスト０における参照フレームインデックス値がｒｅｆＩｄｘＬ０の参照フレームおよび参照画像リスト１における参照フレームインデックス値がｒｅｆＩｄｘＬ１の参照フレームの表示順序がそれぞれ現在のフレームの両側に位置することと、を含むことを特徴とする請求項２３に記載の方法。
  25. 双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得るステップは、
    サブブロックの前方向動き補償値、後方向動き補償値およびオプティカルフローオフセット値に基づいて、当該サブブロックの予測サンプル行列を決定するステップを含むことを特徴とする請求項２３に記載の方法。
  26. 現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップと、
    前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップと、
    強化時間候補リストにおける各強化時間動きベクトル予測モード番号を順にトラバースし、各強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップと、
    前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップと、
    前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップと、
    強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送するステップと、を含むことを特徴とする符号化方法。
  27. 前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うステップは、
    現在の符号化ユニットのいずれかのサブブロックについて、当該サブブロックの動き情報に対して復号側動きベクトル調整技術を行わないステップと、
    当該サブブロックが双方向オプティカルフロー条件を満たす場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得るステップと、
    それ以外の場合、当該サブブロックの動き情報に基づいて当該サブブロックに対して動き補償を行い、当該サブブロックの予測サンプル行列を得るステップと、を含み、
    ここで、現在の符号化ユニットの予測サンプルは各サブブロックの予測サンプルからなることを特徴とする請求項２６に記載の方法。
  28. サブブロックが双方向オプティカルフロー条件を満たすことは、
    シーケンスレベルの高レベルシンタックスには、双方向オプティカルフロー技術をイネーブルすることが許可されることと、
    現在の符号化ユニットの動きベクトル精度が０に等しいことと、
    当該サブブロックが双方向予測を用いることと、
    当該サブブロックの参照画像リスト０における参照フレームインデックス値がｒｅｆＩｄｘＬ０の参照フレームおよび参照画像リスト１における参照フレームインデックス値がｒｅｆＩｄｘＬ１の参照フレームの表示順序がそれぞれ現在のフレームの両側に位置することと、を含むことを特徴とする請求項２７に記載の方法。
  29. 双方向オプティカルフロー技術を用いて補償後の画素値にオプティカルフローオフセット値を追加し、当該サブブロックの予測サンプル行列を得るステップは、
    サブブロックの前方向動き補償値、後方向動き補償値およびオプティカルフローオフセット値に基づいて、当該サブブロックの予測サンプル行列を決定するステップを含むことを特徴とする請求項２７に記載の方法。
  30. 対応する強化時間動きベクトル予測モードフラグをビットストリームに書き込むステップは、
    前記現在の符号化ユニットが第１の解析条件を満たす場合、対応する強化時間動きベクトル予測モードフラグをビットストリームに書き込むステップと、
    それ以外の場合、対応する強化時間動きベクトル予測モードフラグの値が第２の数値であると決定するステップと、を含み、
    前記強化時間動きベクトル予測モードフラグの値が第１の数値であることは、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることを示し、前記強化時間動きベクトル予測モードフラグの値が第２の数値であることは、前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルしないことを示すことを特徴とする請求項２６に記載の方法。
  31. 前記現在の符号化ユニットが第１の解析条件を満たすことは、
    前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、
    前記現在の符号化ユニットのサイズが、現在の符号化ユニットの幅および高さがいずれも８以上であるというサイズ制限を満たすことと、
    シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが強化時間動きベクトル予測技術をイネーブルすることが許可されることと、
    前記現在の符号化ユニットが角度重み付け予測の利用条件または究極の動きベクトル表現の利用条件を満たすことと、のうちの１つまたは複数を含むことを特徴とする請求項３０に記載の方法。
  32. 前記現在の符号化ユニットが角度重み付け予測の利用条件を満たすことは、
    シーケンスレベルの高レベルシンタックスには、現在の符号化ユニットが角度重み付け予測技術をイネーブルすることが許可されることと、
    現在の符号化ユニットの幅および高さがいずれもＮ１以上であり、現在の符号化ユニットの幅および高さがいずれもＮ２以下であることと、
    現在の画像フレームタイプがＢピクチャであることと、を含み、
    前記現在の符号化ユニットが究極の動きベクトル表現の利用条件を満たすことは、
    シーケンスレベルの高レベルシンタックスには、前記現在の符号化ユニットが究極の動きベクトル表現技術をイネーブルすることが許可されることを含むことを特徴とする請求項３１に記載の方法。
  33. 前記強化時間動きベクトル予測モードフラグはコンテキスト適応型バイナリ算術コーディングを用いるとともに、１つのコンテキストモデルを用いることを特徴とする請求項２６～３２のいずれか一項に記載の方法。
  34. 強化時間動きベクトル予測モードインデックス値をビットストリームに書き込むステップは、
    前記現在の符号化ユニットが第２の解析条件を満たす場合、強化時間動きベクトル予測モードインデックス値をビットストリームに書き込むステップを含むことを特徴とする請求項２６に記載の方法。
  35. 前記現在の符号化ユニットが第２の解析条件を満たすことは、
    前記現在の符号化ユニットの予測モードがスキップモードまたはダイレクトモードであることと、
    前記現在の符号化ユニットが強化時間動きベクトル予測モードをイネーブルすることとのうちの１つまたは複数を含むことを特徴とする請求項３４に記載の方法。
  36. 前記強化時間動きベクトル予測モードインデックス値の逆二値化は最大値が４のトランケーテッド・ユーナリに基づいて実現され、前記トランケーテッド・ユーナリは最大４つのバイナリ文字列を用い、各バイナリ文字は単独のコンテキストモデルを用い、合計で４つのコンテキストモデルを用いることを特徴とする請求項３４または３５に記載の方法。
  37. 前記現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するステップは、
    現在の画像フレームタイプに基づいて、マッチング符号化ユニットが位置する時間参照画像を決定するステップと、
    前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定するステップと、を含み、
    ここで、前記現在の画像フレームタイプがＰピクチャであれば、前記時間参照画像は参照画像リスト０における参照フレームインデックス値が０の参照画像であり、現在の画像フレームタイプがＢピクチャであれば、前記時間参照画像は参照画像リスト１における参照フレームインデックス値が０の参照画像であり、
    前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、
    前記初期マッチング符号化ユニットの前記時間参照画像における座標情報に基づいて、強化時間候補リストを構築するステップを含むことを特徴とする請求項２６に記載の方法。
  38. 前記現在の符号化ユニットの座標情報に基づいて、前記初期マッチング符号化ユニットの前記時間参照画像における座標情報を決定するステップは、
    現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップを含むことを特徴とする請求項３７に記載の方法。
  39. 現在の最大符号化ユニットの画像における左上隅座標、最大符号化ユニットのサイズ、現在の画像のサイズ、現在の符号化ユニットのサイズ、現在の符号化ユニットの画像における左上隅座標に基づいて、初期マッチング符号化ユニットの座標情報を決定するステップは、
    現在の最大符号化ユニットの画像における左上隅横座標、最大符号化ユニットのサイズ、現在の符号化ユニットの幅、現在の画像の幅、現在の符号化ユニットの画像における左上隅横座標に基づいて、前記初期マッチング符号化ユニットの横座標を決定するステップと、
    現在の最大符号化ユニットの画像における左上隅縦座標、最大符号化ユニットのサイズ、現在の符号化ユニットの高さ、現在の画像の高さ、現在の符号化ユニットの画像における左上隅縦座標に基づいて、前記初期マッチング符号化ユニットの縦座標を決定するステップと、を含むことを特徴とする請求項３８に記載の方法。
  40. 強化時間候補リストにおける各強化時間動きベクトル予測モード番号を順にトラバースし、各強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するステップは、
    強化時間動きベクトル予測モード番号が０であれば、ＰｘはＭｘに等しく、ＰｙはＭｙに等しいと決定するステップと、
    強化時間動きベクトル予測モード番号が１であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ＋８に等しいと決定するステップと、
    強化時間動きベクトル予測モード番号が２であれば、ＰｘはＭｘ＋８に等しく、ＰｙはＭｙに等しいと決定するステップと、
    強化時間動きベクトル予測モード番号が３であれば、ＰｘはＭｘに等しく、ＰｙはＭｙ－８に等しいと決定するステップと、
    強化時間動きベクトル予測モード番号が４であれば、ＰｘはＭｘ－８に等しく、ＰｙはＭｙに等しいと決定するステップと、を含み、
    ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの左上隅座標であり、（Ｐｘ，Ｐｙ）は前記ターゲットマッチング符号化ユニットの左上隅座標であることを特徴とする請求項２６に記載の方法。
  41. 前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、
    前記初期マッチング符号化ユニットの座標情報に基づいて、少なくとも１つの強化時間動きベクトル予測モード番号を決定するステップと、
    前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築するステップと、を含むことを特徴とする請求項２６に記載の方法。
  42. マッチング符号化ユニットの座標情報はマッチング符号化ユニットの時間参照画像における左上隅座標であり、
    前記少なくとも１つの強化時間動きベクトル予測モード番号に基づいて、強化時間候補リストを構築するステップは、
    強化時間動きベクトル予測モード番号０を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
    Ｍｙ＋８がｙ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとｖｅｒｔｉｃａｌ＿ｓｉｚｅ－ｃｕ＿ｈｅｉｇｈｔとのうちの小さい値以下であり、且つＡ１位置の動き情報とＣ３位置の動き情報が異なり、またはＡ２位置の動き情報とＣ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号１を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
    Ｍｘ＋８がｘ＿ｃｔｂ＿ｐｏｓ＋ｌｃｕ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅ－ｃｕ＿ｗｉｄｔｈとのうちの小さい値以下であり、且つＡ１位置の動き情報とＢ２位置の動き情報が異なり、またはＡ３位置の動き情報とＢ４位置の動き情報が異なれば、強化時間動きベクトル予測モード番号２を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
    Ｍｙ－８がｙ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ３位置の動き情報とＣ１位置の動き情報が異なり、またはＡ４位置の動き情報とＣ２位置の動き情報が異なれば、強化時間動きベクトル予測モード番号３を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、
    Ｍｘ－８がｘ＿ｃｔｂ＿ｐｏｓ以上であり、且つＡ２位置の動き情報とＢ１位置の動き情報が異なり、またはＡ４位置の動き情報とＢ３位置の動き情報が異なれば、強化時間動きベクトル予測モード番号４を強化時間候補リストに追加し、強化時間候補リストの長さに１を加えるステップと、を含み、
    ここで、（Ｍｘ，Ｍｙ）は前記初期マッチング符号化ユニットの座標情報であり、（ｘ＿ｃｔｂ＿ｐｏｓ，ｙ＿ｃｔｂ＿ｐｏｓ）は現在の最大符号化ユニットの画像における左上隅座標であり、ｌｃｕ＿ｓｉｚｅは最大符号化ユニットのサイズであり、ｃｕ＿ｗｉｄｔｈおよびｃｕ＿ｈｅｉｇｈｔはそれぞれ現在の符号化ユニットの幅および高さであり、ｈｏｒｉｚｏｎｔａｌ＿ｓｉｚｅおよびｖｅｒｔｉｃａｌ＿ｓｉｚｅはそれぞれ現在の画像の幅および高さであり、
    Ａ１は前記初期マッチング符号化ユニットの左上隅の４＊４ブロックであり、Ｂ１はＡ１の真左側の４＊４ブロックであり、Ｃ１はＡ１の真上の４＊４ブロックであり、Ａ２は前記初期マッチング符号化ユニットの右上隅の４＊４ブロックであり、Ｂ２はＡ２の真右側の４＊４ブロックであり、Ｃ２はＡ２の真上の４＊４ブロックであり、Ａ３は前記初期マッチング符号化ユニットの左下隅の４＊４ブロックであり、Ｂ３はＡ３の真左側の４＊４ブロックであり、Ｃ３はＡ３の真下の４＊４ブロックであり、Ａ４は前記初期マッチング符号化ユニットの右下隅の４＊４ブロックであり、Ｂ４はＡ４の真右側の４＊４ブロックであり、Ｃ４はＡ４の真下の４＊４ブロックであることを特徴とする請求項４１に記載の方法。
  43. 前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するステップは、
    前記強化時間候補リストの長さが５未満の場合、強化時間候補リストの長さが５に等しくなるまで、
    現在の強化時間候補リストにおける最後の強化時間動きベクトル予測モード番号と同じの強化時間動きベクトル予測モード番号を強化時間候補リストに追加し、強化時間候補リストの長さに１を加える操作を繰り返すステップをさらに含むことを特徴とする請求項４２に記載の方法。
  44. 前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、
    ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
    現在の画像フレームタイプがＰピクチャの場合、
    当該サブブロックの前方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を前記現在の符号化ユニットの対応する位置のサブブロックに与えるステップを含むことを特徴とする請求項２６に記載の方法。
  45. 前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、
    ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
    現在の画像フレームタイプがＢピクチャの場合、
    当該サブブロックの前方向動き情報および後方向動き情報が利用可能であれば、当該サブブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ前記現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、
    当該サブブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可であれば、当該サブブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、
    当該サブブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可であれば、当該サブブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、を含むことを特徴とする請求項２６に記載の方法。
  46. 前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するステップは、
    ターゲットマッチング符号化ユニット中のいずれかのサブブロックについて、
    現在の画像フレームタイプがＰピクチャの場合、
    サブブロックの前方向動き情報が利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報が利用可能なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報が利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、
    現在の画像フレームタイプがＢピクチャの場合、
    サブブロックの前方向動き情報および後方向動き情報がいずれも利用不可であれば、現在の符号化ユニットの第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用可能なとき、第１の周辺ブロックの前方向動き情報および後方向動き情報をそれぞれＬｉｓｔ０の最初のフレームおよびＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の前方向動き情報および後方向動き情報をそれぞれ現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報が利用可能であるが、後方向動き情報が利用不可なとき、第１の周辺ブロックの前方向動き情報をＬｉｓｔ０の最初のフレームを指すようにスケールし、スケール後の前方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの後方向動き情報が利用可能であるが、前方向動き情報が利用不可なとき、第１の周辺ブロックの後方向動き情報をＬｉｓｔ１の最初のフレームを指すようにスケールし、スケール後の後方向動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、第１の周辺ブロックの前方向動き情報および後方向動き情報がいずれも利用不可なとき、ゼロ動き情報を現在の符号化ユニットの対応する位置のサブブロックに与えるステップと、を含み、
    ここで、前記第１の周辺ブロックは前記現在の符号化ユニットのいずれかの復号済み隣接ブロックを含むことを特徴とする請求項２６に記載の方法。
  47. 現在の符号化ユニットの強化時間動きベクトル予測モードフラグの値と強化時間動きベクトル予測モードインデックス値とを取得するための取得ユニットと、
    前記強化時間動きベクトル予測モードフラグの値が第１の数値の場合、前記現在の符号化ユニットの座標情報に基づいて、前記現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するための第１の決定ユニットと、
    前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するための構築ユニットと、
    前記強化時間動きベクトル予測モードインデックス値に基づいて、前記強化時間候補リストにおいて対応する強化時間動きベクトル予測モード番号を取得し、前記強化時間動きベクトル予測モード番号に対応するターゲットマッチング符号化ユニットの座標情報を決定するための第２の決定ユニットと、
    前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するための第３の決定ユニットと、を含むことを特徴とする復号装置。
  48. 現在の符号化ユニットの座標情報に基づいて、現在の符号化ユニットの初期マッチング符号化ユニットの座標情報を決定するための第１の決定ユニットと、
    前記初期マッチング符号化ユニットの座標情報に基づいて、強化時間候補リストを構築するための構築ユニットと、
    強化時間候補リストにおける各強化時間候補モードを順にトラバースし、各モードに対応するターゲットマッチング符号化ユニットの座標情報を決定するための第２の決定ユニットと、
    前記ターゲットマッチング符号化ユニットの座標情報に基づいて、ターゲットマッチング符号化ユニット中の各サブブロックの動き情報を含むターゲットマッチング符号化ユニットの動き情報を決定し、前記ターゲットマッチング符号化ユニット中の各サブブロックの動き情報に基づいて、前記現在の符号化ユニット中の対応する位置のサブブロックの動き情報を決定するための第３の決定ユニットと、
    前記現在の符号化ユニット中の各サブブロックの動き情報に基づいて、現在の符号化ユニット中の対応するサブブロックに対して動き補償を行うための動き補償ユニットと、
    強化時間動きベクトル予測モードに対応するレート歪みコスト値を計算し、当該レート歪みコスト値を他の予測モードのレート歪みコスト値と比較し、最小のレート歪みコスト値に対応する予測モードを選択し、対応する強化時間動きベクトル予測モードフラグと強化時間動きベクトル予測モードインデックス値とをビットストリームに書き込み、復号デバイスに伝送するための符号化ユニットと、を含むことを特徴とする符号化装置。
  49. プロセッサと機械可読記憶媒体とを含み、前記機械可読記憶媒体には、前記プロセッサによって実行可能な機械実行可能命令が記憶され、前記プロセッサは請求項１～２５のいずれか一項に記載の方法を実施するように機械実行可能命令を実行するために用いられることを特徴とする復号デバイス。
  50. プロセッサと機械可読記憶媒体とを含み、前記機械可読記憶媒体には、前記プロセッサによって実行可能な機械実行可能命令が記憶され、前記プロセッサは請求項２６～４６のいずれか一項に記載の方法を実施するように機械実行可能命令を実行するために用いられることを特徴とする符号化デバイス。
  51. プロセッサにより実行されると請求項１～２５または２６～４６のいずれか一項に記載の方法が実施される機械実行可能命令を記憶することを特徴とする機械可読記憶媒体。
JP2023557413A 2021-03-19 2022-03-14 復号方法、符号化方法、装置、デバイスおよび記憶媒体 Active JP7494403B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN202110297136.3 2021-03-19
CN202110297136.3A CN114640856B (zh) 2021-03-19 2021-03-19 解码方法、编码方法、装置及设备
PCT/CN2022/080697 WO2022194103A1 (zh) 2021-03-19 2022-03-14 解码方法、编码方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
JP2024508193A true JP2024508193A (ja) 2024-02-22
JP7494403B2 JP7494403B2 (ja) 2024-06-03

Family

ID=78668980

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023557413A Active JP7494403B2 (ja) 2021-03-19 2022-03-14 復号方法、符号化方法、装置、デバイスおよび記憶媒体

Country Status (8)

Country Link
US (1) US20240171770A1 (ja)
EP (1) EP4280605A1 (ja)
JP (1) JP7494403B2 (ja)
KR (1) KR20230128569A (ja)
CN (5) CN114640856B (ja)
AU (1) AU2022235881B2 (ja)
TW (1) TWI806495B (ja)
WO (1) WO2022194103A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114640856B (zh) * 2021-03-19 2022-12-23 杭州海康威视数字技术股份有限公司 解码方法、编码方法、装置及设备
CN115396672B (zh) * 2022-08-25 2024-04-26 广东中星电子有限公司 比特流存储方法、装置、电子设备和计算机可读介质

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7924923B2 (en) * 2004-11-30 2011-04-12 Humax Co., Ltd. Motion estimation and compensation method and device adaptive to change in illumination
AU2006201490B2 (en) * 2005-04-19 2008-05-22 Samsung Electronics Co., Ltd. Method and apparatus for adaptively selecting context model for entropy coding
JP2008005112A (ja) * 2006-06-21 2008-01-10 Matsushita Electric Ind Co Ltd ストリームエンコーダ及びストリームデコーダ
EP3490259B1 (en) * 2013-04-02 2021-10-13 InterDigital Madison Patent Holdings, SAS Enhanced temporal motion vector prediction for scalable video coding
CN108293131B (zh) * 2015-11-20 2021-08-31 联发科技股份有限公司 基于优先级运动矢量预测子推导的方法及装置
CN117336504A (zh) * 2017-12-31 2024-01-02 华为技术有限公司 图像预测方法、装置以及编解码器
US11265551B2 (en) * 2018-01-18 2022-03-01 Qualcomm Incorporated Decoder-side motion vector derivation
CN110662075B (zh) * 2018-06-29 2023-04-25 北京字节跳动网络技术有限公司 改进的时域运动矢量预测推导
US10511852B1 (en) * 2018-07-13 2019-12-17 Tencent America LLC Method and apparatus for video coding
US10715812B2 (en) * 2018-07-13 2020-07-14 Tencent America LLC Method and apparatus for video coding
CN110933426B (zh) * 2018-09-20 2022-03-01 杭州海康威视数字技术股份有限公司 一种解码、编码方法及其设备
CN111385575A (zh) * 2018-12-29 2020-07-07 华为技术有限公司 帧间预测方法、装置以及相应的编码器和解码器
CN111264061B (zh) * 2019-03-12 2023-07-25 深圳市大疆创新科技有限公司 视频编码的方法与装置，以及视频解码的方法与装置
CN111953997A (zh) * 2019-05-15 2020-11-17 华为技术有限公司 候选运动矢量列表获取方法、装置及编解码器
CN111953995A (zh) * 2019-05-17 2020-11-17 华为技术有限公司 一种帧间预测的方法和装置
CN114079786A (zh) * 2019-05-17 2022-02-22 华为技术有限公司 一种帧间预测的方法和装置
CN113794884B (zh) * 2019-08-23 2022-12-23 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
CN112204983A (zh) * 2019-09-24 2021-01-08 北京大学 一种视频处理方法、设备及存储介质
CN112004097B (zh) * 2020-07-30 2021-09-14 浙江大华技术股份有限公司 帧间预测方法、图像处理装置以及计算机可读存储介质
CN112291565B (zh) * 2020-09-10 2021-09-14 浙江大华技术股份有限公司 视频编码方法及其相关装置
CN112218076B (zh) * 2020-10-17 2022-09-06 浙江大华技术股份有限公司 一种视频编码方法、装置、系统及计算机可读存储介质
US11924409B2 (en) * 2021-02-21 2024-03-05 Alibaba (China) Co., Ltd. Systems and methods for inter prediction compensation
US11778217B2 (en) * 2021-02-22 2023-10-03 Tencent America LLC High level syntax control for screen content coding
CN114640856B (zh) * 2021-03-19 2022-12-23 杭州海康威视数字技术股份有限公司 解码方法、编码方法、装置及设备

Also Published As

Publication number Publication date
AU2022235881A1 (en) 2023-09-07
EP4280605A1 (en) 2023-11-22
CN113709502B (zh) 2022-12-23
CN113794889A (zh) 2021-12-14
TWI806495B (zh) 2023-06-21
CN113794888B (zh) 2022-12-23
JP7494403B2 (ja) 2024-06-03
CN114640856A (zh) 2022-06-17
CN113727118B (zh) 2022-12-23
CN114640856B (zh) 2022-12-23
CN113794889B (zh) 2022-12-23
CN113709502A (zh) 2021-11-26
US20240171770A1 (en) 2024-05-23
AU2022235881B2 (en) 2024-05-23
KR20230128569A (ko) 2023-09-05
TW202245472A (zh) 2022-11-16
CN113794888A (zh) 2021-12-14
CN113727118A (zh) 2021-11-30
WO2022194103A1 (zh) 2022-09-22

Similar Documents

Publication Publication Date Title
RU2597521C1 (ru) Способ и устройство для кодирования/декодирования вектора движения
US11902563B2 (en) Encoding and decoding method and device, encoder side apparatus and decoder side apparatus
JP5373626B2 (ja) 複数の動きベクトル・プレディクタを使用して動きベクトルを推定する方法、装置、エンコーダ、デコーダ及びデコーディング方法
JP4898467B2 (ja) 可変ブロックサイズ動き予測のための符号化モードの決定方法及び装置
CN112292862A (zh) 用于运动矢量修正和运动补偿的存储器访问窗口和填充
CN110933426B (zh) 一种解码、编码方法及其设备
JP7494403B2 (ja) 復号方法、符号化方法、装置、デバイスおよび記憶媒体
CN113709456B (zh) 解码方法、装置、设备及机器可读存储介质
JP2023179792A (ja) 復号化方法、符号化方法、装置、及びデバイス
CN112449180A (zh) 一种编解码方法、装置及其设备
JP2012120108A (ja) 補間画像生成装置及びプログラム、並びに、動画像復号装置及びプログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230928

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230928

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20230928

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240422

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240522

R150 Certificate of patent or registration of utility model

Ref document number: 7494403

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150