JP2024057014A - 動画像符号化方法、動画像符号化装置、及びビットストリーム生成方法 - Google Patents

動画像符号化方法、動画像符号化装置、及びビットストリーム生成方法 Download PDF

Info

Publication number
JP2024057014A
JP2024057014A JP2024025977A JP2024025977A JP2024057014A JP 2024057014 A JP2024057014 A JP 2024057014A JP 2024025977 A JP2024025977 A JP 2024025977A JP 2024025977 A JP2024025977 A JP 2024025977A JP 2024057014 A JP2024057014 A JP 2024057014A
Authority
JP
Japan
Prior art keywords
motion vector
block
image block
current image
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2024025977A
Other languages
English (en)
Inventor
ゼン、シャオゼン
ワン、スホン
ワン、シャンシェ
マ、シウェイ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Original Assignee
SZ DJI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from PCT/CN2018/112805 external-priority patent/WO2019192170A1/zh
Priority claimed from PCT/CN2019/078051 external-priority patent/WO2019192301A1/zh
Application filed by SZ DJI Technology Co Ltd filed Critical SZ DJI Technology Co Ltd
Publication of JP2024057014A publication Critical patent/JP2024057014A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/58—Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/56—Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129—Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Analysis (AREA)

Abstract

Figure 2024057014000001
【課題】高度／選択可能な時間動きベクトル予測技術（ＡＴＭＶＰ）の複雑さを低減する動画像処理方法及び装置を提供する。
【解決手段】動画像符号化方法は、２つの動きベクトルずれ量の組み合わせを示すために使用される第１インデックスを含むビットストリームを受信し、第１ベース動きベクトルと第２ベース動きベクトルとを含む双予測ベース動きベクトル群を含むベース動きベクトルリストを確定し、ビットストリームに含まれる第１インデックスに従う予め設定されたずれ量セットを使用して、第１ベース動きベクトルと第２ベース動きベクトルとに対応する２つの動きベクトルずれ量を確定し、第１ベース動きベクトル、第２ベース動きベクトル及び２つの動きベクトルずれ量に基づき、現在画像ブロックの複数の動きベクトルを確定し、現在画像ブロックの複数の動きベクトルに基づいて、現在画像ブロックを予測する。
【選択図】図１８

Description

本出願は、出願番号がＰＣＴ／ＣＮ２０１８／０８１６５２、ＰＣＴ／ＣＮ２０１８／０９５７１０、ＰＣＴ／ＣＮ２０１８／１０３６９３、ＰＣＴ／ＣＮ２０１８／１０７４３６とＰＣＴ／ＣＮ２０１８／１１２８０５であるＰＣＴ出願の優先権を主張し、その内容の全ては参照によって本出願に組み込まれている。
著作権表示
本特許文献に開示されている内容には著作権保護の対象となる材料が含まれている。該著作権は著作権所有者が所有する。著作権所有者は、これらの特許書類または特許開示の何人による複製に対しても、特許庁の公式レ符号化またはファイルに表示される通りであれば異議を唱えない。
本出願は、動画像の符号化および復号の分野に関連し、具体的には、動画像処理方法および装置に関する。
現在、主要な動画像符号化に関する標準規格では、フレーム間予測部分においていずれもブロックに基づく動き補償技術を採用し、その主な原理は、現在画像ブロックのためにすでに符号化された画像の中で最も類似したブロックを探索することであり、このプロセスは動き補償と呼ばれる。例えば、１フレームの画像に対し、まず、サイズが同じな符号化領域（Ｃｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ、ＣＴＵ）に分割し、例えば、サイズが６４×６４または１２８×１２８である。各ＣＴＵは、さらに、方形または矩形の符号化ユニット（Ｃｏｄｉｎｇ Ｕｎｉｔ、ＣＵ）に分割することができる。各ＣＵは、参照フレーム（通常は現在のフレームの時間領域の近くにおける再構築されたフレーム）の中で最も類似したブロックを現在のＣＵの予測ブロックとして探索する。現在のブロック（つまり、現在のＣＵ）と類似ブロック（つまり、現在のＣＵの予測ブロック）の間の相対変位は、動きベクトル（Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ、ＭＶ）と呼ばれる。参照フレームの中で現在のブロックの予測ブロックとして最も類似したブロックを探索するプロセスが動き補償である。
従来技術では、通常、２つの方法で現在のＣＵの動きベクトル候補リストを構築し、動きベクトル候補リストはｍｅｒｇｅ候補リストとも呼ばれる。動きベクトル候補リストには空間領域の動きベクトル候補が含まれており、それは、通常、現在のＣＵの符号化された近傍ブロックの動きベクトル（または動き情報）を動きベクトル候補リストに取り込む。動きベクトル候補リストには時間領域の動きベクトル候補がさらに含まれており、時間動きベクトル予測（Ｔｅｍｐｒｏａｌ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ，ＴＭＶＰ）は、現在のＣＵの近傍の符号化された画像における対応位置のＣＵ（つまり、同位ＣＵ）の動きベクトル（または動き情報）を利用する。ｍｅｒｇｅ候補リストから、最適な動きベクトル候補を選択して現在のＣＵの動きベクトルとし、現在のＣＵの動きベクトルに基づき現在のＣＵの予測ブロックを確定する。
高度／選択可能な時間動きベクトル予測技術（Ａｄｖａｎｃｅｄ／Ａｌｔｅｒｎａｔｉｖｅ ｔｅｍｐｏｒａｌ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ、ＡＴＭＶＰ）は動きベクトル予測メカニズムである。ＡＴＭＶＰ技術の基本的な構想は、現在のＣＵ内の複数のサブブロックの動き情報を取得することで動き補償を行うことである。ＡＴＭＶＰ技術は候補リスト（例えばｍｅｒｇｅ候補リストまたはＡＭＶＰ（Ａｄｖａｎｃｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）候補リスト）の構築において、現在のＣＵ内における複数のサブブロックの動き情報を候補として導入する。ＡＴＭＶＰ技術の実現は、ほぼ二つのステップに分けられる。ステップ１は、現在のＣＵの動きベクトル候補リストまたは現在のＣＵの隣接する画像ブロックの動きベクトルを走査することにより、１つの時間ベクトルを確定することである。ステップ２は、現在のＣＵをＮ×Ｎ（Ｎはデフォルトで４）のサブブロック（ｓｕｂ－ＣＵ）に分割し、ステップ１で取得した時間ベクトルに基づき各サブブロックの参照フレーム内での対応するブロックを確定し、各サブブロックの参照フレーム内での対応するブロックの動きベクトルに基づき各サブブロックの動きベクトルを確定することである。
現在のＡＴＭＶＰ技術のステップ１では、現在のＣＵの動きベクトル候補リストまたは現在のＣＵの隣接画像ブロックの動きベクトルを走査することで、時間ベクトルを確定するプロセスには改良の余地がある。現在のＡＴＭＶＰ技術のステップ２では、ｓｕｂ－ＣＵのサイズをフレームレベルで適応的に設定しており、デフォルトのサイズは４×４である。ある事前設定条件を満すと、ｓｕｂ－ＣＵのサイズが８×８に設定される。ｓｕｂ－ＣＵのサイズの設定には現在の動き情報記憶粒度（８×８）に合致しないようないくつかの問題がある。ＡＴＭＶＰ技術とＴＭＶＰ技術には、状況によっては冗長操作があり、動きベクトル候補のリストを構築するプロセスには改良の余地がある。
本出願は、従来のＡＴＭＶＰ技術の性能上の利得を維持したまま、ＡＴＭＶＰ技術の複雑さを低減することができる動画像処理方法および装置を提供する。
第１の態様は、動画像処理方法を提供し、該方法は、
現在画像ブロックの予め設定されたＭ個の近傍ブロックのうち、Ｍよりも小さいＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することと、
前記対象近傍ブロックの動きベクトル、前記現在画像ブロック、および前記現在画像ブロックの参照画像に基づき、前記現在画像ブロックの関連ブロックを確定することと、
前記現在画像ブロックと前記関連ブロックを同じ方法で複数のサブ画像ブロックに分割し、前記現在画像ブロック中の各サブ画像ブロックは、前記関連ブロック中の各サブ画像ブロックと１対１に対応させることと、
前記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、前記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測することとを含む。
本出願により提供される解決策では、現在画像ブロックの参照動きベクトルを取得するプロセスにおいて、すでに取得したＭ個の動きベクトル候補のうちＮ（ＮはＭより小さい）個の動きベクトル候補のみを順次走査し、従来技術に比べて、現在画像ブロックの参照動きベクトルを取得するプロセスにおける動きベクトル候補に対する走査回数を減らすことができる。本出願により提供される解決策を従来のＡＴＭＶＰ技術のステップ１に適用することで、それにおける冗長操作を簡略化することができることを理解されたい。
第２の態様は、動画像処理方法を提供し、該方法は、
現在画像ブロックの動きベクトル第２候補リスト中のＭ個の候補に基づき、前記現在画像ブロックのＭ個の近傍ブロックを確定することと、
前記Ｍ個の近傍ブロックのうち、Ｍより小さいＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することと、
前記対象近傍ブロックの動きベクトル、前記現在画像ブロック、および前記現在画像ブロックの参照画像に基づき、前記現在画像ブロックの関連ブロックを確定することと、
前記現在画像ブロックの関連ブロックに基づき前記現在画像ブロックの動きベクトル第１候補リスト中の特定候補を確定することと、
前記特定候補を用いることを確定した場合、前記現在画像ブロックと前記関連ブロックを同じの方法で複数のサブ画像ブロックに分割し、前記現在画像ブロック中の各サブ画像ブロックは、前記関連ブロックの各サブ画像ブロックに１対１に対応させることと、
前記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、前記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測することとを含む。
第３の態様は、動画像処理装置を提供し、該装置は、
現在画像ブロックの予め設定されたＭ個の近傍ブロックのうちＭよりも小さいＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することと、前記対象近傍ブロックの動きベクトル、前記現在画像ブロック、および前記現在画像ブロックの参照画像に基づき、前記現在画像ブロックの関連ブロックを確定することと、前記現在画像ブロックと前記関連ブロックを同じ方法で複数のサブ画像ブロックに分割し、前記現在画像ブロック中の各サブ画像ブロックは、前記関連ブロック中の各サブ画像ブロックと１対１に対応させることとのために用いられる構築モジュールと、
前記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、前記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測するために用いられる予測モジュールとを含む。
第４の態様は、動画像処理装置を提供し、該装置は、
現在画像ブロックの動きベクトル第２候補リスト中のＭ個の候補に基づき、前記現在画像ブロックのＭ個の近傍ブロックを確定することと、前記Ｍ個の近傍ブロックのうちＭより小さいＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することと、前記対象近傍ブロックの動きベクトル、前記現在画像ブロック、および前記現在画像ブロックの参照画像に基づき、前記現在画像ブロックの関連ブロックを確定することと、前記現在画像ブロックの関連ブロックに基づき前記現在画像ブロックの動きベクトル第１候補リスト中の特定候補を確定することと、前記特定候補を用いることを確定した場合、前記現在画像ブロックと前記関連ブロックを同じの方法で複数のサブ画像ブロックに分割し、前記現在画像ブロック中の各サブ画像ブロックは、前記関連ブロックの各サブ画像ブロックに１対１に対応させることとのために用いられる構築モジュールと、
前記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、前記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測するために用いられる予測モジュールとを含む。
第５態様は、動画像処理装置を提供し、該装置はメモリとプロセッサを含み、前記メモリは命令を記憶するために用いられ、前記プロセッサは前記メモリに記憶された命令を実行するために用いられ、前記メモリに記憶された命令を実行することによって、前記プロセッサは第１態様または第１態様のいずれかの可能な実施形態における方法を実行するために用いられる。
第６態様は、動画像処理装置を提供し、該装置はメモリとプロセッサを含み、前記メモリは命令を記憶するために用いられ、前記プロセッサは前記メモリに記憶された命令を実行するために用いられ、前記メモリに記憶された命令を実行することによって、前記プロセッサは第２態様または第２態様のいずれかの可能な実施形態における方法を実行するために用いられる。
第７態様は、コンピュータ記憶媒体を提供し、それにコンピュータプログラムが記憶されており、前記コンピュータプログラムがコンピュータにより実行されると、前記コンピュータに第１態様または第１態様のいずれかの可能な実施形態における方法を実行させる。
第８態様は、コンピュータ記憶媒体を提供し、それにコンピュータプログラムが記憶され、前記コンピュータプログラムがコンピュータにより実行されると、前記コンピュータに第２態様または第２態様のいずれかの可能な実施形態における方法を実行させる。
第９態様は、命令を含むコンピュータプログラム製品を提供し、前記命令がコンピュータにより実行されると、前記コンピュータに第１態様または第１態様のいずれかの可能な実施形態における方法を実行させる。
第１０態様は、命令を含むコンピュータプログラム製品を提供し、前記命令がコンピュータにより実行されると、前記コンピュータに第２態様または第２態様のいずれかの可能な実施形態における方法を実行させる。
第１１の態様は、動画像処理方法を提供し、該方法は、
第１ベース動きベクトルと第２ベース動きベクトルを含む双予測ベース動きベクトル群を少なくとも１つを含むベース動きベクトルリストを確定することと、
予め設定されたずれ量セットからそれぞれ前記第１ベース動きベクトルと前記第２ベース動きベクトルに対応する二つの動きベクトルずれ量を確定することと、
前記第１ベース動きベクトル、前記第２ベース動きベクトルと前記二つのの動きベクトルずれ量に基づき、現在画像ブロックの動きベクトルを確定することと、
前記現在画像ブロックの動きベクトルに基づき前記現在画像ブロックを予測することとを含む。
第１２の態様は、動画像処理方法を提供し、該方法は、
ベース動きベクトル群を含むベース動きベクトルリストを確定することと、
前記ベース動きベクトル群には少なくとも１つのベース動きベクトルが特定参照画像を指す場合、前記ベース動きベクトル群と動きベクトルずれ量に基づき前記現在画像ブロックの動きベクトルを確定することを放棄することとを含む。
第１３の態様は、動画像処理装置を提供し、該装置は、
第１ベース動きベクトルと第２ベース動きベクトルを含む双予測ベース動きベクトル群を少なくとも１つを含むベース動きベクトルリストを確定することと、予め設定されたずれ量セットから、それぞれ前記第１ベース動きベクトルと前記第２ベース動きベクトルに対応する二つの動きベクトルずれ量を確定することと、前記第１ベース動きベクトル、前記第２ベース動きベクトルと前記二つのの動きベクトルずれ量に基づき、現在画像ブロックの動きベクトルを確定することとのために用いられる構築モジュールと、
前記現在画像ブロックの動きベクトルに基づき前記現在画像ブロックを予測するために用いられる予測モジュールとを含む。
第１４の態様は、動画像処理装置を提供し、該装置は、
ベース動きベクトル群を含むベース動きベクトルリストを確定するために用いられる確定モジュールと、
前記ベース動きベクトル群には少なくとも１つのベース動きベクトルが特定参照画像を指す場合、前記ベース動きベクトル群と動きベクトルずれ量に基づき前記現在画像ブロックの動きベクトルを確定することを放棄するために用いられる処理モジュールとを含む。
第１５態様は、動画像処理装置を提供し、該装置はメモリとプロセッサを含み、前記メモリは命令を記憶するために用いられ、前記プロセッサは前記メモリに記憶された命令を実行するために用いられ、前記メモリに記憶された命令を実行することによって、前記プロセッサは第１１態様または第１１態様のいずれかの可能な実施形態における方法を実行するために用いられる。
第１６態様は、動画像処理装置を提供し、該装置はメモリとプロセッサを含み、前記メモリは命令を記憶するために用いられ、前記プロセッサは前記メモリに記憶された命令を実行するために用いられ、前記メモリに記憶された命令を実行することによって、前記プロセッサは第１２態様または第１２態様のいずれかの可能な実施形態における方法を実行するために用いられる。
第１７態様は、コンピュータ記憶媒体を提供し、それにコンピュータプログラムが記憶され、前記コンピュータプログラムがコンピュータにより実行されると、前記コンピュータに第１１態様または第１１態様のいずれかの可能な実施形態における方法を実行させる。
第１８態様は、コンピュータ記憶媒体を提供し、それにコンピュータプログラムが記憶され、前記コンピュータプログラムがコンピュータにより実行されると、前記コンピュータに第１２態様または第１２態様のいずれかの可能な実施形態における方法を実行させる。
第１９態様は、命令を含むコンピュータプログラム製品を提供し、前記命令がコンピュータにより実行されると、前記コンピュータに第１１態様または第１１態様のいずれかの可能な実施形態における方法を実行させる。
第２０態様は、命令を含むコンピュータプログラム製品を提供し、前記命令がコンピュータにより実行されると、前記コンピュータに第１２態様または第１２態様のいずれかの可能な実施形態における方法を実行させる。
本出願の実施例によって提供される動画像処理方法の概略的な流れ図である。 現在画像ブロックの近傍ブロックによって現在ブロックの動きベクトル候補を取得する概略図である。 動きベクトル候補にスケーリング処理を行う概略図である。 本出願の実施例によって提供される動画像処理方法のもう１つの概略的流れ図である。 本出願の実施例によって提供される動画像処理装置の概略的ブロック図である。 本出願の実施例によって提供される動画像処理装置のもう１つの概略的ブロック図である。 本出願の実施例によって提供される動画像処理方法の概略的な流れ図である。 本出願の実施例によって提供される動画像処理方法のもう１つの概略的流れ図である。 本出願の実施例によって提供される動画像処理装置のさらなる１つの概略的ブロック図である。 本出願の実施例によって提供される動画像処理装置のさらなる１つの概略的ブロック図である。 本出願の実施例によって提供される動画像処理装置のさらなる１つの概略的ブロック図である。 動きベクトル第１候補リストの候補を取得する概略図である。 動きベクトル第１候補リストの候補を構築するさらなる１つの概略図である。 本出願の実施例によって提供される動画像処理方法の概略的流れ図である。 本出願の実施例によって提供される動画像処理方法の概略的流れ図である。 本出願の実施例によって提供される動画像処理装置のさらなる１つの概略的ブロック図である。 本出願の実施例によって提供される動画像処理装置のさらなる１つの概略的ブロック図である。 本出願の実施例によって提供される動画像処理方法のもう１つの概略的流れ図である。 本出願の実施例によって提供される動画像処理装置のさらなる１つの概略的ブロック図である。 本出願の実施例によって提供される動画像処理装置のさらなる１つの概略的ブロック図である。
以下、図面を参照しながら、本出願の実施例における技術的解決手段について説明する。
別途定義されていない限り、ここで使用されているすべての技術用語および科学用語は、本出願の技術分野に属する当業者が一般的に理解しているものと同じ意味を持つ。ここでは、本出願の明細書で使用される用語は、具体的な実施例を説明するためのものにすぎず、本出願を限定するためのものではない。
動画像の符号化および復号において、予測ステップは画像中の冗長情報を減少するために用いられる。予測ブロックとは、１フレームの画像中の予測のための基本ユニットを意味し、いくつかの標準規格において、この予測ブロックは予測ユニット（Ｐｒｅｄｉｃｔｉｏｎ Ｕｎｉｔ、ＰＵ）とも呼ばれる。１フレームの画像を符号化／圧縮する前に、画像は複数の画像ブロックに分割され、さらに、該複数の画像ブロック中の各画像ブロックは、複数の画像ブロックに再度分割でき、これに基づいて類推することができる。異なる符号化方法では、分割された階層の数が異なってもよいし、担当する操作方法も異なる。異なる符号化標準規格において、同一階層上の画像ブロックの名称が異なることがある。例えば、いくつかの動画像標準規格では、１フレームの画像が一回目に分割された複数の画像ブロック中の各画像ブロックは符号化ツリーユニット（Ｃｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ、ＣＴＵ）と呼ばれ、各符号化ツリーユニットは１つの符号化ユニット（Ｃｏｄｉｎｇ Ｕｎｉｔ、ＣＵ）を含んでもよいし、または再び複数の符号化ユニットに分割されてもよい。１つの符号化ユニットは予測方式に応じて１つ、二つ、四つまたは他の数量の予測ユニットに分割することができる。いくつかの動画像標準規格では、当該符号化ツリーユニットは最大符号化ユニット（Ｌａｒｇｅｓｔ Ｃｏｄｉｎｇ Ｕｎｉｔ、ＬＣＵ）とも呼ばれる。
予測とは、該予測ブロックと類似した画像データを探索することであり、この予測ブロックの参照ブロックとも呼ばれる。該予測ブロックと該予測ブロックの参照ブロックとの差分を符号化／圧縮することにより、符号化／圧縮における冗長情報を減少する。ここで、予測ブロックと参照ブロックとの差分は、該予測ブロックから該参照ブロックの対応する画素値を減算して得られる残差であってもよい。予測はフレーム内予測とフレーム間予測を含む。フレーム内予測とは、予測ブロックが位置するフレーム内で該予測ブロックの参照ブロックを探索することを指し、フレーム間予測とは、予測ブロックが位置するフレーム以外のフレーム内で該予測ブロックの参照ブロックを探索することを指す。
従来のいくつかの動画像標準規格では、予測ユニットは画像中の最小のユニットであり、予測ユニットは引き続き複数の画像ブロックに分割されない。後述する「画像ブロック」又は「現在画像ブロック」とは、１つの予測ユニット（又は１つの符号化ユニット）を意味し、また、１つの画像ブロックを複数のサブ画像ブロックに引き続き分割でき、各サブ画像ブロックをさらに予測することができる。
本解決策では、現在画像ブロックを予測する前に、動きベクトル候補リストを構築し、該動きベクトル候補リストの中で選択された動きベクトル候補に基づき現在画像ブロックを予測する。動きベクトル候補リストには複数のモードがある。以下、動きベクトル候補リストの複数のモードについて例をあげて説明する。
第１のモードでは、第１の例として、符号化側では、動きベクトル候補リストを構築した後、以下のステップで現在画像ブロックの符号化を完了ことができる。
１）動きベクトル候補リストから最適な動きベクトル（ＭＶ１と記す）を選択し、選択したＭＶ１を現在画像ブロックの動きベクトルとし、該ＭＶ１の動きベクトル候補リストでのインデックスを取得する。
２）現在画像ブロックの動きベクトルＭＶ１に基づき、参照画像（すなわち参照フレーム）から現在画像ブロックの予測画像ブロックを確定する。つまり、現在画像ブロックの予測画像ブロックの参照フレームでの位置を確定する。
３）現在画像ブロックと予測画像ブロックとの間の残差を取得する。
４）復号側へ現在画像ブロックの動きベクトルＭＶ１が動きベクトル候補リストにおけるインデックスおよびステップ３）で取得した残差を送信する。
例として、復号側において、以下のステップで現在画像ブロックを復号化することができる。
１）符号化側から残差と現在画像ブロックの動きベクトルの動きベクトル候補リストにおけるインデックスを受信する。
２）本出願の実施例による方法によって動きベクトル候補リストを取得する。復号側で取得した動きベクトル候補リストは符号化側で取得した動きベクトル候補リストと一致する。
３）インデックスに基づき、動きベクトル候補リストから現在画像ブロックの動きベクトルＭＶ１を取得する。
４）動きベクトルＭＶ１に基づき、現在画像ブロックの予測画像ブロックを取得し、残差と合わせて、復号によって現在画像ブロックを取得する。
つまり、第１モードでは、現在画像ブロックの動きベクトルは予測ＭＶ（Ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ、ＭＶＰ）に等しい。いくつかの標準規格では、第１モードはＭｅｒｇｅモードとも呼ばれる。
第２モードでは、第１モードと異なって、符号化側は動きベクトル候補リストから最適な動きベクトルＭＶ１を選択した後、さらに該ＭＶ１を探索起点として動き探索を行い、最終的に探索した位置と探索起点の変位を動きベクトル差分値（Ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ、ＭＶＤ）と記す。続いて現在画像ブロックの動きベクトルＭＶ１＋ＭＶＤに基づき、参照画像から現在画像ブロックの予測画像ブロックを確定する。符号化側はさらに、復号側にＭＶＤを送信する。いくつかの標準規格では、第２モードはＡＭＶＰモード（すなわち通常フレーム間予測モード）とも呼ばれる。
異なるモードでの動きベクトル候補リストの構築方式は同じであってもよいし、異なってもよい。同じ方式で構築された動きベクトル候補リストはそのうちの１つのモードのみに適用してもよく、異なる構築モードに適用してもよく、ここでは限定しない。
本解決策において、二つの構築方式の動きベクトル候補リストを提供し、説明の便宜上、以下ではこの２つの構築方式の動きベクトル候補リストを、動きベクトル第１候補リストと動きベクトル第２候補リストと呼ぶ。この２つのリストの１つの違いは、動きベクトル第１候補リスト中の少なくとも１つの候補がサブ画像ブロックの動きベクトルを含み、動きベクトル第２候補リスト中の各候補が画像ブロックの動きベクトルを含むことである。上記で説明したように、ここでの画像ブロックと現在画像ブロックは同じタイプの概念であり、いずれも１つの予測ユニット（または１つの符号化ユニット）を指し、サブ画像ブロックとは、該画像ブロックをもとに分割された複数のサブ画像ブロックを指す。動きベクトル第１候補リスト中の候補を用いて予測する時、該候補に基づき現在画像ブロックの参照ブロックを確定し、続いて該画像ブロックと該参照ブロックとの残差を算出する。動きベクトル第２候補リスト中の候補を用いて予測する時、用いた候補がサブ画像ブロックの動きベクトルであれば、該候補に基づき現在画像ブロック中の各サブ画像ブロックの参照ブロックを確定し、続いて現在画像ブロック中の各サブ画像ブロックとその参照ブロックとの残差を算出し、各サブ画像ブロックの残差を該現在画像ブロックの残差につなぎ合わせる。
ここでは、動きベクトル第１候補リストおよび／または動きベクトル第２候補リスト中の候補を確定する時、ＡＴＭＶＰ技術に基づきそのうち１つの候補を確定することができる。１つの例において、動きベクトル第１候補リストを構築する時、ＡＴＭＶＰ技術に基づいて確定された動きベクトルを第１候補としてリストに入れることができる。１つの例において、動きベクトル第２候補リストを構築する時、現在画像ブロックの予め設定された位置での予め設定された数の空間領域近傍ブロックの動きベクトルに基づき動きベクトル第２候補リスト中に候補を入れた後、ＡＴＭＶＰ技術に基づいて確定された動きベクトルを候補としてリストに入れ、当然ながら、この二つの候補リストの候補の加入順は他の順であってもよいが、ここでは限定しない。
以下、まず動きベクトル第２候補リストの構築方式の使用方式に合わせて如何にＡＴＭＶＰ技術に基づきそのうち１つの候補を確定するかについて例をあげて説明する。
動きベクトル第２候補リストの構築方式についての説明において、理解を容易にするため、ここで、動きベクトルを説明する。１つの画像ブロックの動きベクトルは、１）該動きベクトルが指す画像、２）変位という二つの情報を含むことができる。１つの画像ブロックの動きベクトルとは、該動きベクトルが指す画像において該画像ブロックと該変位を有する画像ブロックを意味する。符号化／復号済みの画像ブロックに対し、その動きベクトルの概念は、該符号化／復号済みの画像ブロックの参照画像、および符号化／復号済みの画像ブロックの参照ブロックの該符号化／復号済みの画像ブロックに対する変位を含む。なお、ここで説明する１つの画像ブロックの参照ブロックとは、該画像ブロックの残差を算出するために使用される画像ブロックを意味する。
図１は本出願の実施例によって提供される動画像処理方法の概略的流れ図である。該方法は以下のステップを含む。
Ｓ１１０、現在画像ブロックの動きベクトル第２候補リストに入れるためのＭ個の動きベクトル候補を確定する。
現在画像ブロックは符号化（または復号）対象の画像ブロックである。現在画像ブロックが位置する画像フレームは現在フレームと呼ばれる。例えば、現在画像ブロックは１つの符号化ユニット（ＣＵ）である。
例えば、現在画像ブロックの動きベクトル第２候補リストはＭｅｒｇｅ候補リストまたはＡＭＶＰ候補リストであってもよい。例えば、該動きベクトル第２候補リストはＭｅｒｇｅ候補リスト中の通常動きベクトル候補リスト（Ｎｏｒｍａｌ Ｍｅｒｇｅ Ｌｉｓｔ）であってもよい。動きベクトル第２候補リストは別の名称を有してもよいと理解されたい。
Ｍ個の動きベクトル候補は現在画像ブロックの現在フレーム内におけるＭ個の近傍ブロックの動きベクトルに基づき確定されてもよい。近傍ブロックは現在フレームにおいて現在画像ブロックの位置に隣接しまたはある位置ピッチを有する画像ブロックであってもよい。なお、このＭ個の近傍ブロックは現在フレーム内における符号化（または復号）済みの画像ブロックである。
一例として、図２に示すように、現在画像ブロックのＭ個の近傍ブロックは図２に示される現在画像ブロックの周囲の４つの位置Ａ１（左）→Ｂ１（上）→Ｂ０（右上）→Ａ０（左下）に位置する画像ブロックである。この４つの位置の画像ブロックの動きベクトルに基づき現在画像ブロックのＭ（すなわちＭが４に等しい）個の動きベクトル候補を確定する。
また、該Ｍ個の近傍ブロック中に取得不可な近傍ブロックが現れた場合、または該Ｍ個の近傍ブロックにフレーム内符号化モードを用いた近傍ブロックが現れた場合、該取得不可な近傍ブロックまたは該フレーム内符号化モードを用いた近傍ブロックの動きベクトルが取得不可である。そこで、該取得不可な近傍ブロックの動きベクトルは動きベクトル候補とせず、該取得不可な動きベクトルを現在画像ブロックの動きベクトル第２候補リストに入れることを放棄する。
１つの可能な実施形態として、ステップＳ１１０を完了した後、Ｍ個の動きベクトル候補はすでに動きベクトル第２候補リストに入れられた。ステップＳ１２０において、動きベクトル第２候補リストを直接走査できる。
Ｓ１２０、Ｍ個の動きベクトル候補のうちのＮ個の動きベクトル候補を順次走査し、走査結果に基づき参照動きベクトルを確定し、ＮがＭより小さい。ここでは、ＭとＮはいずれも自然数である。
該Ｍ個の動きベクトル候補がすべて動きベクトル第２候補リストに入れられるか、それとも該Ｍ個の動きベクトル候補のうちに一部の動きベクトルが取得不可になることによって該Ｍ個の動きベクトル候補のうち一部の動きベクトル候補のみが動きベクトル第２候補リストに入れられるかにもかかわらず、該Ｍ個の動きベクトル候補のうちのＮ個の動きベクトル候補を固定的に順次走査する。該Ｍ個の動きベクトル候補のうちのＮ個の動きベクトル候補を固定的に順次走査することとは、該Ｎ個の動きベクトル候補のうちすでに動きベクトル候補リストに入れられた動きベクトル候補を固定的に走査することを指してもよいし、または、該Ｍ個の動きベクトル候補のうちすでに動きベクトル候補リストに入れられたＮ個の動きベクトル候補を固定的に走査することを指してもよい。
Ｎ個の動きベクトル候補の走査結果に基づき参照動きベクトルを確定するプロセスは、事前設定条件に基づきＮ個の動きベクトル候補を順次判断し、判断結果に基づき参照動きベクトルを確定するプロセスであってもよい。
一例として、事前設定条件は、画像ブロックが取得可能であり、またはフレーム内予測符号化モードを採用せず、かつ前記動きベクトル候補が指す参照フレームが現在画像ブロックの参照画像と同じであることを含む。
ここでは、現在画像ブロックの参照画像は現在画像ブロックが位置する画像と時間距離が最も近い参照画像であり、または、現在画像ブロックの参照画像は符号化および復号側に予め設定された参照画像であり、または、現在画像ブロックの参照画像は動画像パラメータセット、シーケンスヘッダ、シーケンスパラメータセット、画像ヘッダ、画像パラメータセット、スライスヘッダ中に指定される参照画像である。
例えば、該現在画像ブロックの参照画像は現在画像ブロックの同位フレームであり、同位フレームは、スライスレベルの情報ヘッダに設定された動き情報を取得して予測するためのフレームである。いくつかの応用シーンにおいて、該同位フレームは位置関連フレーム（ｃｏｌｌｏｃａｔｅｄ ｐｉｃｔｕｒｅ）とも呼ばれる。
将来の技術の進化に応じて、この事前設定条件は他の異なる定義を与える可能性があり、それに応じた解決策も本出願の保護範囲に入ることを理解されたい。
以下、Ｎ個の動きベクトル候補の走査結果に基づき参照動きベクトルを確定するプロセスを詳細に説明する。
ステップＳ１２０において、ステップＳ１１０で取得されたＭ個の動きベクトル候補のうちのＮ個の動きベクトルのみを走査し、このようにして走査の回数を減少できる。
任意選択的に、ステップＳ１２０において、Ｍ個の動きベクトル候補のうち前のＮ個の動きベクトル候補を順次走査してもよい。
任意選択的に、ステップＳ１２０において、Ｍ個の動きベクトル候補のうちの最後のＮ個の動きベクトル候補を順次走査してもよいし、または、Ｍ個の動きベクトル候補のうちの中間のＮ個の動きベクトル候補を順次走査してもよい。本出願はこれに対して限定しない。
一例として、ステップＳ１２０において、Ｍ個の動きベクトル候補のうちの一部の動きベクトル候補を順次走査する。
もう一例として、ステップＳ１２０において、現在、すでに動きベクトル第２候補リストに入れられた動きベクトル候補のうちの一部の動きベクトル候補を順次走査する。
Ｓ１３０、参照動きベクトル、現在画像ブロックおよび現在画像ブロックの参照画像に基づき、動きベクトル第２候補リストに引き続き入れられる動きベクトル候補を確定する。
現在画像ブロックの動きベクトル第２候補リストには、ステップＳ１１０で確定されたＭ個の動きベクトル候補およびステップＳ１３０で確定された動きベクトル候補が含まれる。一例において、Ｓ１３０で動きベクトル第２候補リストに引き続き入れる第Ｍ＋１個の動きベクトル候補を確定した後、他の方法によって動きベクトル第２候補リストに引き続き入れる他の動きベクトル候補を確定し、ここでは限定しない。
動きベクトル第２候補リストの構築を完了した後、図１に示すように、該方法は、ステップＳ１３０で得られた動きベクトル第２候補リストに基づき、現在画像ブロックの動きベクトルを確定するステップＳ１４０をさらに含む。
本出願で提供される解決策は、ＡＴＭＶＰ技術に適用できることを理解されたい。従来のＡＴＭＶＰ技術のステップ１において、動きベクトル第２候補リストに現在すでに入れられたすべての空間動きベクトル候補を走査することによって、現在画像ブロックの時間ベクトルを取得する。例えば、動きベクトル第２候補リストには一般に、４個の空間動きベクトル候補が取り込まれるので、画像ブロックの時間ベクトルを得るために、４個の動きベクトル候補を走査する必要がある場合がある。
一方、本出願の実施例において、現在画像ブロックの参照動きベクトルを取得するプロセスにおいて、すでに取得されたＭ個の動きベクトル候補のうちのＮ（ＮはＭより小さい）個の動きベクトル候補のみを順次走査し、従来技術に比べて、現在画像ブロックの参照動きベクトルを取得するプロセスにおける動きベクトル候補に対する走査回数を減少することができる。本出願により提供される解決策を従来のＡＴＭＶＰ技術のステップ１に適用することで、それにおける冗長操作を簡略化することができることを理解されたい。
出願人は、次世代動画像符号化（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）の最新の参照ソフトウェアＶＴＭ－２．０上で、テストシーケンスとして公式通用テストシーケンスを選び、ＲＡ構成およびＬＤＢ構成のテスト構成で、本出願に提供される解決策に対してテストを行い、テスト結果によると、走査回数を減らした後、ＡＴＭＶＰ技術の性能上の利得を維持することができる。
従って、本出願で提供される解決策は、従来のＡＴＭＶＰ技術の性能上の利得を維持したまま、ＡＴＭＶＰ技術の複雑さを低減することができる。
本出願で提供される構築に関する解決策で形成される動きベクトル第２候補リストは符号化側と復号側に応用できる。換言すれば、本出願で提供される方法の実行主体は符号化側であってもよく、復号側であってもよい。
一例として、本出願で提供される構築に関する解決策で形成される動きベクトル第２候補リストは上記の第１モード（例えばＭｅｒｇｅモード）に応用できる。
任意選択的に、本実施例において、ステップＳ１１０では、現在画像ブロックの現在フレーム内での４個の近傍ブロックの動きベクトルに基づき、現在画像ブロックの動きベクトル第２候補リストに入れるための４個の動きベクトル候補を確定し、すなわち、Ｍが４に等しい。ステップＳ１２０において、４個の動きベクトル候補のうちのＮ個の動きベクトル候補を走査し、Ｎが４よりも小さい。
例えば、Ｎは１に等しい。例えば、ステップＳ１２０において、動きベクトル第２候補リスト中の１つ目の動きベクトル候補のみを走査する。また、例えば、Ｎは２または３に等しい。
以下、ステップＳ１２０においてＮ個の動きベクトル候補の走査結果に基づき現在画像ブロックの参照動きベクトルを確定する方式について説明する。
ステップＳ１２０において、Ｍ個の動きベクトル候補のうちのＮ個の動きベクトル候補が事前設定条件を満たすかどうかを１つずつ判断し、判断結果に基づき参照動きベクトルを確定する。ここでは、事前設定条件の定義は動きベクトル候補が指す参照フレームと現在画像ブロックの参照画像が同じであることを例として説明する。
任意選択的に、ステップＳ１２０において、Ｎ個の動きベクトル候補を順次走査し、１つ目の事前設定条件に符合する動きベクトル候補まで走査すると、すなわち、１つ目の参照フレームと現在フレームの同位フレームが同じである動きベクトル候補まで走査すると、走査を停止し、走査した１つ目の事前設定条件に符合する動きベクトル候補に基づき参照動きベクトルを確定する。
１つ目の事前設定条件に符合する動きベクトル候補まで走査すると、走査回数はＮに等しいか、Ｎより小さいこともある。例えば、１つ目に走査する動きベクトル候補が事前設定条件を満たすと、走査を停止し、この動きベクトル候補を現在画像ブロックの参照動きベクトルとする。
任意選択的に、ステップＳ１２０において、Ｎ個の動きベクトル候補のうち事前設定条件に符合する動きベクトル候補が走査されていない時、すなわちＮ個の動きベクトル候補が指す参照フレームはすべて現在画像ブロックの同位フレームと異なる時、デフォルト値を参照動きベクトルの値とする。
例えば、デフォルト値は（０，０）であり、すなわち参照動きベクトルは（０，０）である。実況によって、デフォルト値は別の定義がさらにある。
任意選択的に、ステップＳ１２０において、Ｎ個の動きベクトル候補のうち事前設定条件に符合する動きベクトル候補が走査されていない時、すなわち、Ｎ個の動きベクトル候補が指す参照フレームはすべて現在画像ブロックの同位フレームと異なる時、動きベクトル第２候補リスト中の特定動きベクトル候補に対してスケーリング処理を行い、スケーリング処理後の特定動きベクトル候補に基づき参照動きベクトルを確定する。
該特定動きベクトル候補は、Ｎ個の動きベクトル候補のうち、走査順で得られた１つ目の動きベクトルまたは最後の動きベクトルであってもよい。
該特定動きベクトル候補はさらに、Ｎ個の動きベクトル候補のうち、他の走査順で得られた動きベクトルであってもよい。
事前設定条件の定義は動きベクトル候補の指す参照フレームが現在画像ブロックの参照フレームと同じである場合、動きベクトル第２候補リスト中の特定動きベクトル候補にスケーリング処理を行い、スケーリング処理後の特定動きベクトル候補に基づき参照動きベクトルを確定することであり、それは、スケーリング処理された特定動きベクトル候補が指す参照フレームと現在画像ブロックの参照画像が同じとなるように動きベクトル第２候補リスト中の特定動きベクトル候補にスケーリング処理を行うことと、スケーリング処理後の特定動きベクトル候補を参照動きベクトルとすることとを含む。
図３に示すように、ｃｕｒｒ＿ｐｉｃは現在画像ブロックが位置する画像を表し、ｃｏｌ＿ｐｉｃは現在画像ブロックの同位フレーム（ｃｏｌｌｏｃａｔｅｄ ｐｉｃｔｕｒｅ）を表し、ｎｅｉｇｈ＿ｒｅｆ＿ｐｉｃは特定動きベクトル候補が指す参照フレームを表す。一実施形態において、特定動きベクトル候補が指す参照画像ｎｅｉｇｈ＿ｒｅｆ＿ｐｉｃと該特定動きベクトルに対応する画像ブロックが位置する画像ｃｕｒｒ＿ｐｉｃとの間の時間距離、および現在画像ブロックの参照画像ｃｏｌ＿ｐｉｃと現在画像ブロックが位置する画像ｃｕｒｒ＿ｐｉｃとの間の時間距離に基づき、該特定動きベクトルの縮尺を確定する。
画像フレームと画像フレームとの間の動き程度の相違性が悪く、現在フレームとその同位フレームとの間に動きが激しい場合に、動きベクトル（０，０）を現在ブロックの対応ブロックを位置決めする根拠として用いれば、フレーム間の動きを考慮せず、そのまま現在のブロックの同位フレームでの絶対座標が変更されていないと仮定するが、実際には、現在のブロックの同位フレームでの座標と現在のフレームでのその座標とが異なる確率が非常に大きいため、大きなばらつきが生じると理解されたい。
本出願の実施例において、Ｎ個の動きベクトル候補のうち参照フレームと現在フレームの同位フレームが同じである動きベクトル候補が走査されていない場合、Ｎ個の動きベクトル候補のうち１つの動きベクトル候補にスケーリング処理を行い、その参照フレームと現在フレームの同位フレームが同じになるようにし、続いてこのスケーリング処理された動きベクトル候補を現在画像ブロックの動きベクトルとする。このようにして現在画像ブロックの動きベクトルの正確さを向上させることができる。
任意選択的に、ＮがＭより小さくかつ１より大きい整数の場合、本実施例における特定動きベクトル候補はＮ個の動きベクトル候補のうち参照フレームと現在画像ブロックの同位フレームが時間領域において距離が最も近い動きベクトル候補であってもよい。
Ｎ個の動きベクトル候補のうち参照フレームと現在フレームの同位フレームの距離が最も近い動きベクトル候補を選択してそれにスケーリング処理を行い、スケーリング処理にかかる時間を減らし、それにより現在画像ブロックの動きベクトルを取得する効率を向上させることができる。
任意選択的に、ＮがＭより小さくかつ１より大きい整数の場合、本実施例における特定動きベクトル候補はＮ個の動きベクトル候補のうちのいずれかの動きベクトル候補であってもよい。
なお、Ｎが１に等しい場合、本実施例における特定動きベクトル候補はすなわち走査するこの動きベクトル候補である。
任意選択的に、１つの実施例として、Ｎが１に等しく、ステップＳ１２０において、該動きベクトル第２候補リスト中の１つの動きベクトル候補を走査することによって、該現在画像ブロックの参照動きベクトルを取得する。走査するこの動きベクトル候補が指す参照フレームと現在画像ブロックが位置する現在フレームの同位フレームが異なる場合、この動きベクトル候補にスケーリング処理を行って、該スケーリング処理された動きベクトル候補の参照フレームと該現在フレームの同位がフレーム同じになるようにし、該スケーリング処理後の動きベクトル候補を該現在画像ブロックの参照動きベクトルとする。走査するこの動きベクトル候補の参照フレームと現在フレームの同位フレームが同じである場合、この動きベクトル候補を現在画像ブロックの動きベクトルとする。
本実施例において、該動きベクトル候補リスト中の１つの動きベクトル候補を走査することで、該現在画像ブロックの動きベクトルを取得し、現在画像ブロックの動きベクトルを取得するプロセスにおける動きベクトル候補の走査回数を効果的に減少し、走査する動きベクトル候補の参照フレームは現在フレームの同位フレームと異なる場合、この動きベクトル候補にスケーリング処理を行って、その参照フレームと現在フレームの同位フレームが同じになるようにし、続いてこのスケーリング処理後の動きベクトル候補を現在画像ブロックの動きベクトルとし、このようにして現在画像ブロックの動きベクトルの正確さを向上させることができる。従って、従来技術に対し、本出願の実施例によって提供される解決策は、現在画像ブロックの動きベクトルを確定するプロセスを簡略化するだけでなく、現在画像ブロックの動きベクトルの正確さを向上させることもできる。
事前設定条件の定義が変化する場合、動きベクトル第２候補リスト中の特定動きベクトル候補にスケーリング処理を行うプロセスも対応的に変化し、すなわちスケーリング処理後の特定動きベクトル候補が事前設定条件を満たすことを保証する必要があることを理解されたい。
以下、ステップＳ１３０において、参照動きベクトル、現在画像ブロックおよび現在画像ブロックの参照画像に基づき、動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定するプロセスを説明する。
任意選択的に、一実施形態として、参照動きベクトル、現在画像ブロックおよび現在画像ブロックの参照画像に基づき動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定することは、現在画像ブロックを複数のサブ画像ブロックに分割することと、参照動きベクトルに基づき、現在画像ブロックの参照画像中にサブ画像ブロックの関連ブロックを確定することと、関連ブロックの動きベクトルに基づき、動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定することとを含む。
一例において、現在画像ブロック中の各サブ画像ブロックの関連ブロックの動きベクトルを候補として動きベクトル第２候補リストに入れる。該候補を用いて予測する時、現在画像ブロック中の各サブ画像ブロックの関連ブロックの動きベクトルに基づき該サブ画像ブロックを予測する。
一例において、現在画像ブロックの関連ブロックの代表動きベクトルを候補として動きベクトル第２候補リストに入れ、該候補をＡＴＭＶＰ技術に基づいて確定されたものとしてマークする。該候補を用いて予測する時、該マークと候補に基づき現在画像ブロックの関連ブロックを確定し、現在画像ブロックと該関連ブロックを同じ方式で複数のサブ画像ブロックに分割し、現在画像ブロック中の各サブ画像ブロックを前記関連ブロック中の各サブ画像ブロックと１対１に対応させ、該関連ブロック中の各サブ画像ブロックの動きベクトルに基づきそれぞれ現在画像ブロック中の対応するサブ画像ブロックを予測する。任意選択的に、関連ブロックに動きベクトルが取得不可なサブ画像ブロックが出た場合、該関連ブロックの代表動きベクトルで該取得不可な動きベクトルを代替し、現在画像ブロック中の対応するサブ画像ブロックを予測する。任意選択的に、関連ブロックに動きベクトルが取得不可なサブ画像ブロックが出ており、かつ関連ブロックの代表動きベクトルがすべて取得不可な場合、ＡＴＭＶＰ技術に基づいて確定された候補を該動きベクトル第２候補リストに入れることを放棄する。一例において、関連ブロック中のサブ画像ブロックが取得不可であり、または関連ブロック中のサブ画像ブロックがフレーム内符号化モードを用いる場合、該関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出たを確定する。
任意選択的に、現在画像ブロックの関連ブロックの代表動きベクトルとは、該関連ブロックの中央位置の動きベクトルを指してもよく、または他の該関連ブロックを代表する動きベクトルを指してもよく、ここでは限定しない。
いくつかの動画像符号化および復号に関する標準規格において、関連ブロックはｃｏｌｌｏｃａｔｅｄ ｂｌｏｃｋまたはｃｏｒｒｅｓｐｏｎｄｉｎｇ ｂｌｏｃｋと呼ばれてもよい。
例えば、現在画像ブロックは１つのＣＵであり、それを分割した後に得られたサブ画像ブロックはｓｕｂ－ＣＵと呼ばれてもよい。任意選択的に、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズは６４画素以上に固定される。任意選択的に、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはいずれも８×８画素に固定される。
現在のＡＴＭＶＰ技術において、サブ画像ブロックのサイズに対してフレームレベルの適応的設定を行い、サブ画像ブロックのサイズはディフォルトで４×４であり、ある条件を満たす時、サブ画像ブロックのサイズは８×８に設定される。例えば、符号化側では、現在画像ブロックを符号化する時、同一時間レイヤにおける前の符号化画像ブロックのＡＴＭＶＰモードの符号化時にＣＵ中の各サブ画像ブロックの平均ブロックのサイズを算出し、平均ブロックのサイズが閾値より大きい場合、現在画像ブロックのサブ画像ブロックの寸法が８×８に設定され、そうでなければデフォルト値４×４を使用する。現在、次世代の動画像符号化規格（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、ＶＶＣ）において、８×８のサイズで動きベクトルを記憶する。サブ画像ブロックのサイズを４×４に設定すると、該サブ画像ブロックの動きベクトルのサイズ（４×４ともする）は現在規格における動きベクトルの記憶粒度に符合しないことを理解されたい。また、現在ＡＴＭＶＰ技術において、符号化現在画像ブロックを符号化する時、さらに、同一時間レイヤにおける前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がある。
本出願の実施例において、現在画像ブロックのサブ画像ブロックのサイズを８×８に設定し、動画像標準規格ＶＶＣで規定された動きベクトルの記憶粒度に適応させることができる一方、前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がなく、そのため、記憶空間を省くことができる。
現在、ＴＭＶＰ技術は現在ＣＵの右下隅または中央位置の近傍の符号化済み画像における同位ＣＵのＭＶにスケーリングを行って現在ＣＵの時間領域動きベクトル候補を得る。つまり、ＴＭＶＰは参照画像における二つの固定位置の符号化ブロックを全探索してＭＶＰを得て、この順はＴＢ→ＴＣであり、全探索で１つ目に取得したＭＶをそのままＴＭＶＰのＭＶＰとする。本出願の実施例において、ＡＴＭＶＰ技術におけるサブ画像ブロックのサイズが８×８に設定され、それは、本出願の各実施の既存のマージ（ｍｅｒｇｅ）候補リスト（ｍｅｒｇｅ ｌｉｓｔ）中の１つのＭＶを使用して関連ブロックの位置決めを行い、位置決めされた関連ブロックのＭＶをＡＴＭＶＰのＭＶＰとする。
動画像標準規格ＶＶＣのいくつかのバージョンにおいて、ｍｅｒｇｅリストを構築することは、ＡＴＭＶＰのｍｅｒｇｅ候補リストを構築してからＴＭＶＰのｍｅｒｇｅ候補リストを構築することである。動画像標準規格ＶＶＣの他のいくつかのバージョンにおいて、ＴＭＶＰのｍｅｒｇｅ候補リストの構築はｍｅｒｇｅ ｌｉｓｔの構築プロセスにおいて行われ、ＡＴＭＶＰのｍｅｒｇｅ候補リストの構築はａｆｆｉｎｅ ｍｅｒｇｅ ｌｉｓｔの構築プロセスにおいて行われる。ＡＴＭＶＰとＴＭＶＰはそれぞれ二つの異なるリストを構築するが、本来であれば、二つのｍｅｒｇｅ候補リスト中に同一または同一群のＭＶを追加する必要がない。現在ＣＵの幅と高さはいずれも８に等しい場合、ＴＭＶＰとＡＴＭＶＰがそれぞれ構築したｍｅｒｇｅ候補リストにはある冗長が存在する可能性があり、つまり、二つの技術は現在ＣＵに同一群の時間領域候補動き情報を導出する可能性がある。
本出願のいくつかの実施例において、現在ＣＵの幅と高さはいずれも８に等しい場合、ＴＭＶＰ操作をしないように設定する。つまり、サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズが８×８画素の場合、ＴＭＶＰ操作をしないように設定する。これにより、ＡＴＭＶＰとＴＭＶＰがそれぞれ構築したｍｅｒｇｅ候補リストの中に同一または同一群のＭＶを含むことを避けることができ、一部の冗長操作をスキップして、符号化および復号の時間を効果的に省き、符号化効率を向上させる。
本出願のいくつかの実施例において、現在ＣＵの幅および／または高さが８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。つまり、サブ画像ブロックおよび／または前記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。これは、コーダおよび／またはデコーダのハードウェア設計では、できる限り同一サイズの処理領域で符号化または復号を完了する時間の一致性が要求されるためである。
ただし、小さいブロックが多く含まれる領域の場合、符号化または復号に必要なタクトタイムは、他の領域よりもはるかに長い。さらに、サブ画像ブロックおよび／または前記サブ画像ブロックの関連ブロックの幅と高さがいずれも８画素より小さい場合、ＴＭＶＰ操作をしないように設定してもよい。したがって、小さいブロックの符号化または復号のためのタクトタイムを節約することは、ハードウェアの並行処理に大きな意味がある。その他、現在の符号化技術は時間領域相関性に対する利用率がますます高くなり、例えばＡＴＭＶＰ技術などの多くの時間領域予測技術は採用されている。したがって、小さいブロックに対しては、ＴＭＶＰ操作をスキップすることによる性能への影響は無視できるので、符号化および復号の時間を効果的に節約し、符号化効率を向上させることができる。
なお、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズが６４画素に固定されることを保証する前提で、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはさらに、他の寸法であってもよく、例えばサブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはＡ×Ｂ、Ａ≦６４、Ｂ≦６４であり、ＡとＢはともに４の整数である。例えば、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズは４×１６画素、または１６×４画素である。
任意選択的に、もう一つの実施形態として、参照動きベクトル、現在画像ブロックおよび現在画像ブロックの参照画像に基づき、動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定することは、参照動きベクトルに基づき、現在画像ブロックの参照画像中に現在画像ブロックの関連ブロックを確定することと、関連ブロックの動きベクトルに基づき、動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定することとを含む。
符号化／復号技術において、一般的に符号化／復号済みの画像を現在の符号化／復号対象の参照画像として用いる。いくつかの実施例において、さらに、１つの参照画像を構築して、参照画像と現在の符号化／復号対象の画像の類似度を向上させることができる。
例えば、動画像コンテンツには、背景がほとんど変化せず、動画像の前景だけが変化したり、動きしたりする特定の符号化／復号シーンが存在する。例えば、ビデオモニタリングはこのようなシーンに属する。ビデオモニタリングのシーンでは通常、監視カメラが固定されており、または、ゆっくりと動いているだけであり、背景はほとんど変化していないと考えられる。これに対し、ビデオ監視カメラで撮影された人や車などの物体はつねに移動したり変化が発生したりし、前景はつねに変化していると考えられる。このようなシーンでは、高品質の背景情報のみを含む特定参照画像をつくることができる。該特定参照画像には複数の画像ブロックが含まれてもよく、いずれかの画像ブロックも、ある復号済みの画像から取り出され、該特定参照画像中の異なる画像ブロックは、異なる復号済みの画像から取得されることがある。レーム間予測をする時、現在符号化／復号対象の画像の背景部分は該特定参照画像を参照することで、フレーム間予測の残差情報を減少し、それにより符号化／復号効率を向上させることができる。
以上は、特定参照画像の具体例である。いくつかの実施形態において、特定参照画像は、構造フレーム（ｃｏｍｐｏｓｉｔｅ ｒｅｆｅｒｅｎｃｅ）、長期参照画像、非出力画像のうちの少なくとも１つの性質を有する。ここでは、該非出力画像とは、出力されて表示されない画像を指し、一般に、該非出力画像は、他の画像の参照画像として存在する。例えば、該特定参照画像は、構築された長期参照画像であってもよいし、非出力構造フレームであってもよいし、非出力長期参照画像であってもよい。いくつかの実施形態において、構造フレームは合成参照フレームとも呼ばれる。
いくつかの実施形態において、非特定参照画像は、構造フレーム、長期参照画像、非出力画像のうちの以下の少なくとも１つの性質を有していない参照画像であってもよい。例えば、該非特定参照画像は、構造フレーム以外の参照画像を含んでもよいし、または長期参照画像以外の参照画像を含んでもよいし、または非出力画像以外の参照画像を含んでもよいし、または構築された長期参照画像以外の参照画像を含んでもよいし、または非出力構造フレーム以外の参照画像を含んでもよいし、または非出力長期参照画像以外の参照画像などを含んでもよい。
いくつかの実施形態において、動画像中の画像を参照画像とすることができる場合に、長期参照画像と短期参照画像とを区別することができる。ここで、短期参照画像は、長期参照画像に対応する概念である。短期参照画像は、参照画像バッファに一定時間存在し、該短期参照画像の後ろの復号済み参照画像の参照画像バッファにおけるいくつかの出入り動作の後に、短期参照画像はバッファ外から移り出される。参照画像バッファは参照画像リストキャッシュ、参照画像リスト、参照フレームリストキャッシュまたは参照フレームリストなどとも呼ばれてもよく、ここでは参照画像バッファと総称される。
長期参照画像（または長期参照画像中のデータの一部）は、つねに参照画像バッファ内に存在することができ、該長期参照画像（又は長期参照画像中のデータの一部）は、復号化された参照画像の参照画像バッファ内での出入り動作の影響を受けず、復号側で更新命令を送信する操作をした場合にのみ、該長期参照画像（または長期参照画像中のデータの一部）が参照画像バッファから移り出される。
短期参照画像と長期参照画像の異なる標準規格での呼び方は異なることがあり、例えば、Ｈ．２６４／高度動画像符号化（ａｄｖａｎｃｅｄ ｖｉｄｅｏ ｃｏｄｉｎｇ、ＡＶＣ）またはＨ．２６５／ＨＥＶＣなどの規格では、短期参照画像は短期参照フレーム（ｓｈｏｒｔ－ｔｅｒｍ ｒｅｆｅｒｅｎｃｅ）と呼ばれ、長期参照画像は長期参照フレーム（ｌｏｎｇ－ｔｅｒｍ ｒｅｆｅｒｅｎｃｅ）と呼ばれる。また、ソース符号化規格（ａｕｄｉｏ ｖｉｄｅｏ ｃｏｄｉｎｇ ｓｔａｎｄａｒｄ、ＡＶＳ）１－Ｐ２、ＡＶＳ２－Ｐ２、電気電子技術者協会（ｉｎｓｔｉｔｕｔｅ ｏｆ ｅｌｅｃｔｒｉｃａｌ ａｎｄ ｅｌｅｃｔｒｏｎｉｃｓ ｅｎｇｉｎｅｅｒｓ、ＩＥＥＥ）１８５７．９－Ｐ４などの規格において、長期参照画像はバックグラウンドフレーム（ｂａｃｋｇｒｏｕｎｄ ｐｉｃｔｕｒｅ）と呼ばれる。また、ＶＰ８、ＶＰ９などの規格において、長期参照画像はゴールデンフレーム（ｇｏｌｄｅｎ ｆｒａｍｅ）と呼ばれる。
なお、本出願の実施例では特定用語を用いているが、特定のシーンに適用しなければならないことを表すものではない。例えば、長期参照画像を長期参照フレームと呼ぶことは、Ｈ．２６４／ＡＶＣまたはＨ．２６５／ＨＥＶＣなどの規格に対応する技術に適用しなければならないことを表すものではない。
以上のような長期参照画像は、複数の復号済みの画像から取り出された画像ブロック構造から得たものであってもよく、または複数の復号済みの画像を用いて既存の参照フレーム（例えば、予め記憶された参照フレーム）を更新して得たものであってもよい。当然ながら、該構造的な特定参照画像は短期参照画像であってもよい。または、長期参照画像は構造的な参照画像ではない場合もある。
上記の実施形態において、特定参照画像は長期参照画像を含んでもよく、非特定参照画像は短期参照画像を含んでもよい。
任意選択的に、参照フレームのタイプは、特殊なフィールドによって、コードストリーム構造内で識別することができる。
任意選択的に、参照画像が長期参照画像と確定された場合、該参照画像を特定参照画像と確定し、または、参照画像が非出力フレームと確定された場合に、該参照画像を特定参照画像と確定し、または、参照画像が構造フレームと確定された場合、該参照画像を特定参照画像と確定し、または、参照画像が非出力フレームと確定されており、さらに該参照画像が構造フレームと確定された場合、該参照画像を特定参照画像と確定する。
任意選択的に、各種の参照画像は、それぞれの識別子を有していてもよい。この場合、復号化側にとって、参照画像が有する識別子に基づき、該参照画像が特定参照画像であるか否かを確定することができる。
いくつかの実施形態において、参照画像が長期の参照画像の識別子を有すると確定した場合、該参照画像が特定参照画像であると確定する。
いくつかの実施形態において、参照画像が非出力識別子を有すると確定した場合、該参照画像が特定参照画像であると確定する。
いくつかの実施形態において、参照画像が構造フレームの識別子を有すると確定した場合、該参照画像が特定参照画像であると確定する。
いくつかの実施形態において、参照画像は、長期参照画像の識別子、非出力識別子、構造フレームまたは合成参照フレームの識別子という三つの識別子のうちの少なくとも二つの識別子を有すると確定した場合、参照画像が特定参照画像であると確定する。例えば、参照画像が非出力識別子を有すると確定し、かつ参照画像が構造フレームの識別子を有すると確定した場合、参照画像が特定参照画像であると確定する。
具体的に、画像は、出力フレームであるか否かを示す識別子を有していてもよく、ある画像が出力されないと示された場合、該フレームが参照画像であることを示しており、さらに、該フレームが構造フレームの識別子を有しているか否かを判定し、そうであれば、前記参照画像が特定参照画像であると確定する。ある画像が出力されると示された場合に、構造フレームであるか否かの判断は行わず、該フレームが特定参照画像ではないことを直接確定することができる。あるいは、画像が出力されないと示されていても、構造フレームではないとの識別子を有する場合に、該フレームが特定参照画像ではないと確定することができる。
任意選択的に、画像ヘッダ（ｐｉｃｔｕｒｅ ｈｅａｄｅｒ）、画像パラメータセット（ＰＰＳ、ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）、スライスヘッダ（ｓｌｉｃｅ ｈｅａｄｅｒ）からパラメータを解析して前記参照画像が以下の条件のうちの１つを満たしていることを確定した場合、前記参照画像が特定参照画像であることを確定する。つまり、
前記参照画像は長期参照画像であること、
前記参照画像は構造参照画像であること、
前記参照画像は非出力画像であることであり、
前記参照画像は非出力画像の場合、さらに前記参照画像が構造参照画像であると判断する。
本出願の実施例のいくつかの実施形態において、現在画像ブロックの動きベクトルを確定するプロセスにおいて、他の画像上のある画像ブロックの動きベクトルを利用して該画像ブロックの動きベクトルを確定することに関連する。説明の便宜上、該画像ブロックが第１画像ブロックと呼ばれ、利用しようとする他の画像上のある画像ブロックが該第１画像ブロックの時間領域参照ブロックまたは関連ブロックと呼ばれる。理解できるのは、第１画像ブロックと該第１画像ブロックの時間領域参照ブロック（または関連ブロック）が異なる画像上に位置することである。そこで、該時間領域参照ブロック（または関連ブロック）の動きベクトルを利用して第１画像ブロックの動きベクトルを確定するプロセスにおいて、該時間領域参照ブロック（または関連ブロック）の動きベクトルをスケーリングする必要があることがある。説明の便宜上、本明細書では、「関連ブロック」という用語を統一して用いる。
例えば、ＡＴＭＶＰ技術をＡＭＶＰ候補リストの構築に応用する場合、ＡＴＭＶＰ技術に基づき現在画像ブロックの関連ブロックの動きベクトルを確定する時、該関連ブロックの動きベクトルをスケーリングし、続いてスケーリング後の動きベクトルに基づき現在画像ブロックの動きベクトルを確定する必要がある。一般に、関連ブロックの動きベクトルが指す参照画像と該関連ブロックが位置する画像との間の時間距離、および現在画像ブロックの参照画像と現在画像ブロックが位置する画像との間の時間距離に基づき、該関連ブロックの動きベクトルの縮尺を確定する。
一例において、該関連ブロックの動きベクトルはＭＶ ２と呼ばれ、該動きベクトルＭＶ ２が指す参照画像の参照フレームインデックス値はｘと呼ばれる。ここでは、該参照フレームインデックス値ｘはＭＶ ２が指す参照画像の順序番号（例えばＰＯＣ）と該関連ブロックが位置する画像の順序番号との差である。第１画像ブロックの参照画像の参照フレームインデックス値はｙと呼ばれる。ここでは、該参照フレームインデックス値ｙは第１画像ブロックの参照画像の順序番号と該第１画像ブロックが位置する画像の順序番号との差である。そこで、動きベクトルＭＶ ２に対する縮尺はｙ／ｘである。任意選択的に、動きベクトルＭＶ ２とｙ／ｘの積を第１画像ブロックの動きベクトルとすることができる。
しかしながら、関連ブロックの動きベクトルＭＶ ２が特定参照画像を指す場合、または、第１の画像ブロックの参照画像が特定参照画像である時には、特定参照画像と第１の画像ブロックが位置する画像との時間距離の定義が曖昧であるため、関連ブロックの動きベクトルＭＶ ２に対するスケーリングには意味がない。
任意選択的に、本実施例において、関連ブロックの動きベクトルに基づき現在画像ブロックの動きベクトルを確定する場合、具体的に、関連ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、処理後の関連ブロックの動きベクトルに基づき現在画像ブロックの動きベクトルを確定し、ここでは、処理後の関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである。
例えば、処理後の関連ブロックの動きベクトルは、数値が１の縮尺で関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、スケーリングステップをスキップした関連ブロックの動きベクトルを含む。
任意選択的に、本実施例において、関連ブロックの動きベクトルに基づき現在画像ブロックの動きベクトルを確定する場合、具体的に、関連ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、関連ブロックの動きベクトルに基づき現在画像ブロックの動きベクトルを確定することを放棄する。
いくつかの実施例において、ステップＳ１２０は、Ｎ個の動きベクトル候補のうち事前設定条件に符合する動きベクトル候補が走査されていない時、動きベクトル第２候補リスト中の特定動きベクトル候補に対してスケーリング処理を行い、スケーリング処理後の特定動きベクトル候補に基づき参照動きベクトルを確定することを含む。この場合、任意選択的に、該方法はさらに、特定動きベクトル候補が特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、処理後の特定動きベクトル候補に基づき動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定することを含み、ここでは、処理後の特定動きベクトル候補の動きベクトルと処理前の特定動きベクトル候補の動きベクトルは同じである。
ここでは、処理後の関連ブロックの動きベクトルは、数値が１の縮尺で関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、スケーリングステップをスキップした関連ブロックの動きベクトルを含む。
いくつかの実施例において、ステップＳ１２０は、Ｎ個の動きベクトル候補のうち事前設定条件に符合する動きベクトル候補が走査されていない時、動きベクトル第２候補リスト中の特定動きベクトル候補に対してスケーリング処理を行い、スケーリング処理後の特定動きベクトル候補に基づき参照動きベクトルを確定することを含む。この場合、任意選択的に、該方法はさらに、特定動きベクトル候補が特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、特定動きベクトル候補に基づき動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定することを放棄することを含む。
以上からわかるように、本出願の実施例において、現在画像ブロックの参照動きベクトルを取得するプロセスにおいて、すでに取得されたＭ個の動きベクトル候補のうちのＮ（ＮはＭより小さい）個の動きベクトル候補のみを順次走査し、従来技術に比べて、現在画像ブロックの参照動きベクトルを取得するプロセスにおける動きベクトル候補に対する走査回数を減少することができる。本出願により提供される解決策を従来のＡＴＭＶＰ技術に適用することで、それにおける冗長操作を簡略化することができることを理解されたい。
Ｎ個の動きベクトル候補のうち参照フレームと現在フレームの同位フレームが同じである動きベクトル候補が走査されていない場合、Ｎ個の動きベクトル候補のうち１つの動きベクトル候補にスケーリング処理を行い、その参照フレームが現在フレームの同位フレームと同じになるようにし、続いてこのスケーリング処理された動きベクトル候補を現在画像ブロックの動きベクトルとすることで、現在画像ブロックの動きベクトルの正確さを向上させることができる。
現在画像ブロックをサイズ８×８のサブ画像ブロックに分割し、動画像標準規格ＶＶＣで規定された動きベクトルの記憶粒度に適応させることができる一方、前の符号化済みの画像ブロックのサブブロックのサイズの情報を記憶する必要がなく、そのため、記憶空間を省くことができる。
本出願のいくつかの実施例において、サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズが８×８画素の場合に、ＴＭＶＰ操作をしないように設定することで、一部の冗長操作をスキップし、符号化および復号の時間を効果的に節約し、符号化効率を向上させることができる。
本出願のいくつかの実施例において、現在ＣＵの幅および／または高さが８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。つまり、サブ画像ブロックおよび／または前記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。この場合、ＴＭＶＰ操作をスキップすることによる性能への影響は無視できるので、符号化および復号の時間を効果的に省き、符号化効率を向上させることができる。
図４に示すように、本出願の実施例は動画像処理方法をさらに提供し、該方法は以下のステップを含む。
Ｓ４１０、現在画像ブロックの動きベクトル第２候補リストに入れられるＭ個の動きベクトル候補を取得する。
ステップＳ４１０は以上の記載で説明されるステップＳ１１０に対応し、具体的な説明は以上の記載を参照し、ここでは再び説明しない。
Ｓ４２０、Ｍ個の動きベクトル候補のうちの少なくとも一部の動きベクトル候補を順次走査し、走査結果に基づき現在画像ブロックの参照動きベクトルを確定する。
オプションの実施形態として、Ｍ個の動きベクトル候補のうちの一部の動きベクトル候補を順次走査し、走査結果に基づき現在画像ブロックの参照動きベクトルを確定する。このような実施形態で、ステップＳ４２０は以上の記載で説明されるステップＳ１２０に対応でき、具体的な説明は以上の記載を参照する。
もう１つのオプションの実施形態として、Ｍ個の動きベクトル候補のうちの全ての動きベクトル候補を順次走査し、走査結果に基づき現在画像ブロックの参照動きベクトルを確定する。
なお、ステップＳ４２０において、走査結果に基づき現在画像ブロックの参照動きベクトルを確定する具体的な方式は以上の実施例での関連説明を参照でき、ここでは再び説明しない。
Ｓ４３０、現在画像ブロックを複数のサブ画像ブロックに分割し、ここでは、サブ画像ブロックのサイズは６４以上の画素に固定される。
例えば、現在画像ブロックは１つのＣＵであり、それを分割した後に得られたサブ画像ブロックはｓｕｂ－ＣＵと呼ばれてもよい。
Ｓ４４０、参照動きベクトルに基づき現在画像ブロックの参照画像においてサブ画像ブロックの関連ブロックを確定する。
現在画像ブロックの参照画像は現在画像ブロックの同位フレームであってもよい。
Ｓ４５０、関連ブロックの動きベクトルに基づき動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定する。
現在のＡＴＭＶＰ技術において、サブ画像ブロックのサイズに対してフレームレベルの適応的設定を行い、サブ画像ブロックのサイズはディフォルトで４×４であり、ある条件を満たす時、サブ画像ブロックのサイズは８×８に設定される。例えば、符号化側では、現在画像ブロックを符号化する時、同一時間レイヤにおける前の符号化画像ブロックのＡＴＭＶＰモードの符号化時にＣＵ中の各サブ画像ブロックの平均ブロックのサイズを算出し、平均ブロックのサイズが閾値より大きい場合、現在画像ブロックのサブ画像ブロックの寸法が８×８に設定され、そうでなければデフォルト値４×４を使用する。つまり、従来技術において、現在画像ブロックの符号化時に、さらに同一時間レイヤにおける前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がある。
本出願の実施例において、現在画像ブロックのサブ画像ブロックのサイズを６４以上の画素に固定され、前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がなく、したがって、記憶空間を省くことができる。
任意選択的に、本実施例において、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはいずれも８×８画素に固定される。
現在のＡＴＭＶＰ技術において、サブ画像ブロックのサイズに対してフレームレベルの適応的設定を行い、サブ画像ブロックのサイズはディフォルトで４×４であり、ある条件を満たす時、サブ画像ブロックのサイズは８×８に設定される。例えば、符号化側では、現在画像ブロックを符号化する時、同一時間レイヤにおける前の符号化画像ブロックのＡＴＭＶＰモードの符号化時にＣＵ中の各サブ画像ブロックの平均ブロックのサイズを算出し、平均ブロックのサイズが閾値より大きい場合、現在画像ブロックのサブ画像ブロックの寸法が８×８に設定され、そうでなければデフォルト値４×４を使用する。現在、次世代の動画像符号化規格（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、ＶＶＣ）において、８×８のサイズで動きベクトルを記憶する。サブ画像ブロックのサイズを４×４に設定すると、該サブ画像ブロックの動きベクトルのサイズ（４×４ともする）は現在規格における動きベクトルの記憶粒度に符合しないことを理解されたい。また、現在ＡＴＭＶＰ技術において、符号化現在画像ブロックを符号化する時、さらに、同一時間レイヤにおける前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がある。
本出願の実施例において、現在画像ブロックのサブ画像ブロックのサイズを８×８に設定し、動画像標準規格ＶＶＣで規定された動きベクトルの記憶粒度に適応させることができる一方、前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がなく、そのため、記憶空間を省くことができる。
本出願のいくつかの実施例において、サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズが８×８画素の場合に、ＴＭＶＰ操作をしないように設定することで、一部の冗長操作をスキップし、符号化および復号の時間を効果的に節約し、符号化効率を向上させることができる。
本出願のいくつかの実施例において、現在ＣＵの幅および／または高さが８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。つまり、サブ画像ブロックおよび／または前記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。この場合、ＴＭＶＰ操作をスキップすることによる性能への影響は無視できるので、符号化および復号の時間を効果的に省き、符号化効率を向上させることができる。
なお、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズが６４画素に固定されることを保証する前提で、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはさらに、他の寸法であってもよく、例えばサブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはＡ×Ｂ、Ａ≦６４、Ｂ≦６４であり、ＡとＢはともに４の整数である。例えば、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズは４×１６画素、または１６×４画素である。
任意選択的に、ステップＳ４２０において、少なくとも一部の動きベクトル候補を順次走査し、１つ目の事前設定条件に符合する動きベクトル候補まで走査すると、走査を停止し、かつ走査した１つ目の事前設定条件に符合する動きベクトル候補に基づき参照動きベクトルを確定する。
走査された１つ目の事前設定条件に符合する動きベクトル候補に基づき参照動きベクトルを確定することは、１つ目の事前設定条件に符合する動きベクトル候補を対象近傍ブロックとすることを含む。
任意選択的に、事前設定条件は、動きベクトル候補の参照画像と現在画像ブロックの参照画像が同じであることを含む。
任意選択的に、ステップＳ４５０は、関連ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、処理後の関連ブロックの動きベクトルに基づき動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定することを含み、ここでは、処理後の関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである。
例えば、処理後の関連ブロックの動きベクトルは、数値が１の縮尺で関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、スケーリングステップをスキップした関連ブロックの動きベクトルを含む。
任意選択的に、ステップＳ４５０は、関連ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、関連ブロックの動きベクトルに基づきベクトルの第２候補リストに引き続き入れる動きベクトル候補を確定することを放棄することを含む。
したがって、図４に示される実施例では、現在画像ブロックをサイズ８×８のサブ画像ブロックに分割し、動画像標準規格ＶＶＣで規定された動きベクトルの記憶粒度に適応させることができる一方、前の符号化済みの画像ブロックのサブブロックのサイズの情報を記憶する必要がなく、そのため、記憶空間を省くことができる。
本出願のいくつかの実施例において、サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズが８×８画素の場合に、ＴＭＶＰ操作をしないように設定することで、一部の冗長操作をスキップし、符号化および復号の時間を効果的に節約し、符号化効率を向上させることができる。
本出願のいくつかの実施例において、現在ＣＵの幅および／または高さが８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。つまり、サブ画像ブロックおよび／または前記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。この場合、ＴＭＶＰ操作をスキップすることによる性能への影響は無視できるので、符号化および復号の時間を効果的に省き、符号化効率を向上させることができる。
以上は、如何にＡＴＭＶＰ技術に基づいて動きベクトル第２候補リストに入れる候補を確定する方法について説明した。いくつかの実施形態において、動きベクトル第２候補リストに他の候補を入れることもできるが、ここでは限定しない。
以上、図１および図４に関連して、本出願の方法の実施例を説明した。以下、上記方法の実施例に対応する装置の実施例について説明する。装置の実施例の説明と、方法の実施例の説明は互いに対応しているので、詳細に説明されていない内容については、上記の方法の実施例を参照してもよい。簡単化のために、ここでは、再び説明しない。
図５は本出願の実施例によって提供される動画像処理装置５００の概略的ブロック図である。該装置５００は図１に示される方法の実施例を実行するために用いられる。該装置５００は以下のユニットを含む。
取得ユニット５１０であって、現在画像ブロックの動きベクトル第２候補リストに入れられるＭ個の動きベクトル候補を取得するために用いられる。
確定ユニット５２０であって、Ｍ個の動きベクトル候補のうちのＮ個の動きベクトル候補を順次走査し、走査結果に基づき参照動きベクトルを確定するために用いられ、ＮがＭより小さい。
確定ユニット５２０は、さらに、参照動きベクトル、現在画像ブロックおよび現在画像ブロックの参照画像に基づき、動きベクトル第２候補リストに引き続き入れられる動きベクトル候補を確定するために用いられる。
確定ユニット５２０はさらに、動きベクトル第２候補リストに基づき、現在画像ブロックの動きベクトルを確定するために用いられる。
従来のＡＴＭＶＰ技術のステップ１において、動きベクトル第２候補リスト中の現在すでに入れられたすべての動きベクトル候補を走査することによって、現在画像ブロックの時間ベクトルを取得する。例えば、動きベクトル第２候補リストには一般に、４個の動きベクトル候補が取り込まれるので、画像ブロックの時間ベクトルを得るために、４個の動きベクトル候補を走査する必要がある場合がある。
一方、本出願の実施例において、現在画像ブロックの参照動きベクトルを取得するプロセスにおいて、すでに取得されたＭ個の動きベクトル候補のうちのＮ（ＮはＭより小さい）個の動きベクトル候補のみを順次走査し、従来技術に比べて、現在画像ブロックの参照動きベクトルを取得するプロセスにおける動きベクトル候補に対する走査回数を減少することができる。本出願により提供される解決策を従来のＡＴＭＶＰ技術のステップ１に適用することで、それにおける冗長操作を簡略化することができることを理解されたい。
出願人は、次世代動画像符号化（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）の最新の参照ソフトウェアＶＴＭ－２．０上で、テストシーケンスとして公式通用テストシーケンスを選び、ＲＡ構成およびＬＤＢ構成のテスト構成で、本出願に提供される解決策に対してテストを行い、テスト結果によると、走査回数を減らした後、ＡＴＭＶＰ技術の性能上の利得を維持することができる。
従って、本出願で提供される解決策は、従来のＡＴＭＶＰ技術の性能上の利得を維持したまま、ＡＴＭＶＰ技術の複雑さを低減することができる。
任意選択的に、１つの実施例として、取得ユニット５１０は、現在画像ブロックの現在フレーム内でのＭ個の近傍ブロックの動きベクトルに基づき、現在画像ブロックの動きベクトル第２候補リストに入れられるＭ個の動きベクトル候補を取得するために用いられる。
任意選択的に、１つの実施例として、近傍ブロックは現在フレーム上において現在画像ブロックの位置に隣接しまたはある位置ピッチを有する画像ブロックである。
任意選択的に、１つの実施例として、確定ユニット５２０は、Ｍ個の動きベクトル候補のうちの前のＮ個の動きベクトル候補を順次走査するために用いられる。
任意選択的に、１つの実施例として、Ｍは４に等しく、Ｎは４より小さい。
任意選択的に、１つの実施例として、Ｎは１または２に等しい。
任意選択的に、１つの実施例として、確定ユニット５２０は、事前設定条件に基づき、Ｍ個の動きベクトル候補のうちのＮ個の動きベクトル候補を順次走査し、走査結果に基づき、参照動きベクトルを確定するために用いられる。
任意選択的に、１つの実施例として、事前設定条件は、指す参照フレームと現在画像ブロックの参照画像が同じである動きベクトル候補を含む。
任意選択的に、１つの実施例として、確定ユニット５２０は、Ｎ個の動きベクトル候補を順次走査し、１つ目の事前設定条件に符合する動きベクトル候補まで走査すると、走査を停止し、かつ走査した１つ目の事前設定条件に符合する動きベクトル候補に基づき参照動きベクトルを確定するために用いられる。
任意選択的に、１つの実施例として、確定ユニット５２０は、Ｎ個の動きベクトル候補のうち事前設定条件に符合する動きベクトル候補が走査されていない時、動きベクトル第２候補リスト中の特定動きベクトル候補に対してスケーリング処理を行い、スケーリング処理後の特定動きベクトル候補に基づき参照動きベクトルを確定するために用いられる。
任意選択的に、１つの実施例として、特定動きベクトル候補は、Ｎ個の動きベクトル候補のうち、走査順で得られた１つ目の動きベクトルまたは最後の動きベクトルである。
任意選択的に、１つの実施例として、確定ユニット５２０は、動きベクトル第２候補リスト中の特定動きベクトル候補にスケーリング処理を行い、スケーリング処理された特定動きベクトル候補が指す参照フレームは現在画像ブロックの参照画像と同じであるようにし、スケーリング処理後の特定動きベクトル候補を参照動きベクトルとするために用いられる。
任意選択的に、１つの実施例として、確定ユニット５２０は、Ｎ個の動きベクトル候補のうち事前設定条件に符合する動きベクトル候補が走査されていない時、デフォルト値を参照動きベクトルとするために用いられる。
任意選択的に、１つの実施例として、デフォルト値は動きベクトル（０，０）である。
任意選択的に、１つの実施例として、確定ユニット５２０は、現在画像ブロックを複数のサブ画像ブロックに分割し、参照動きベクトルに基づき、現在画像ブロックの参照画像のうちサブ画像ブロックの関連ブロックを確定し、関連ブロックの動きベクトルに基づき、動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定するために用いられる。
任意選択的に、１つの実施例として、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズは６４以上の画素に固定される。
任意選択的に、１つの実施例として、現在画像ブロックは１つの符号化ユニットＣＵである。
任意選択的に、１つの実施例として、確定ユニット５２０は、参照動きベクトルに基づき、現在画像ブロックの参照画像のうち現在画像ブロックの関連ブロックを確定し、関連ブロックの動きベクトルに基づき、動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定するために用いられる。
任意選択的に、１つの実施例として、確定ユニット５２０は、関連ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、処理後の関連ブロックの動きベクトルに基づき動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定するために用いられ、ここでは、処理後の関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである。
任意選択的に、１つの実施例として、処理後の関連ブロックの動きベクトルは、数値が１の縮尺で関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、スケーリングステップをスキップした関連ブロックの動きベクトルを含む。
任意選択的に、１つの実施例として、確定ユニット５２０は、関連ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、関連ブロックの動きベクトルの動きベクトルに基づきベクトルの第２候補リストに引き続き入れる動きベクトル候補を確定することを放棄するために用いられる。
任意選択的に、１つの実施例として、確定ユニット５２０は、特定動きベクトル候補が特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、処理後の特定動きベクトル候補に基づき動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定するために用いられ、ここでは、処理後の特定動きベクトル候補の動きベクトルと処理前の特定動きベクトル候補の動きベクトルは同じである。
任意選択的に、１つの実施例として、処理後の関連ブロックの動きベクトルは、数値が１の縮尺で関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、スケーリングステップをスキップした関連ブロックの動きベクトルを含む。
任意選択的に、１つの実施例として、確定ユニット５２０は、特定動きベクトル候補が特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、特定動きベクトル候補に基づきベクトルの第２候補リストに引き続き入れる動きベクトル候補を確定することを放棄するために用いられる。
任意選択的に、１つの実施例として、動きベクトル第２候補リストはＭｅｒｇｅ候補リストである。
任意選択的に、１つの実施例として、現在画像ブロックの参照画像は現在画像ブロックの同位フレームである。
任意選択的に、１つの実施例として、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはいずれも８×８画素に固定される。
任意選択的に、本出願のいくつかの実施例において、サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズが８×８画素の場合に、ＴＭＶＰ操作をしないように設定することで、一部の冗長操作をスキップし、符号化および復号の時間を効果的に節約し、符号化効率を向上させることができる。
任意選択的に、本出願のいくつかの実施例において、現在ＣＵの幅および／または高さが８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。つまり、サブ画像ブロックおよび／または前記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。この場合、ＴＭＶＰ操作をスキップすることによる性能への影響は無視できるので、符号化および復号の時間を効果的に省き、符号化効率を向上させることができる。
なお、本実施例における取得ユニット５１０と確定ユニット５２０はいずれもプロセッサによって実現できる。
図６に示すように、本出願の実施例はさらに、動画像処理装置６００を提供する。該装置６００は図４に示される方法の実施例を実行するために用いられる。該装置６００は以下のユニットを含む。
確定ユニット６１０であって、現在画像ブロックの動きベクトル第２候補リストに入れられるＭ個の動きベクトル候補を取得するために用いられる。
確定ユニット６２０であって、Ｍ個の動きベクトル候補のうちの少なくとも一部の動きベクトル候補を順次走査し、走査結果に基づき現在画像ブロックの参照動きベクトルを確定するために用いられる。
分割ユニット６３０であって、現在画像ブロックを複数のサブ画像ブロックに分割するために用いられ、ここでは、サブ画像ブロックのサイズは６４以上の画素に固定される。
確定ユニット６２０はさらに、参照動きベクトルに基づき現在画像ブロックの参照画像においてサブ画像ブロックの関連ブロックを確定するために用いられる。
確定ユニット６２０はさらに、関連ブロックの動きベクトルに基づき動きベクトル第２候補リストに引き続き入れる動きベクトル候補を確定するために用いられる。
現在のＡＴＭＶＰ技術において、サブ画像ブロックのサイズに対してフレームレベルの適応的設定を行い、サブ画像ブロックのサイズはディフォルトで４×４であり、ある条件を満たす時、サブ画像ブロックのサイズは８×８に設定される。例えば、符号化側では、現在画像ブロックを符号化する時、同一時間レイヤにおける前の符号化画像ブロックのＡＴＭＶＰモードの符号化時にＣＵ中の各サブ画像ブロックの平均ブロックのサイズを算出し、平均ブロックのサイズが閾値より大きい場合、現在画像ブロックのサブ画像ブロックの寸法が８×８に設定され、そうでなければデフォルト値４×４を使用する。つまり、従来技術において、現在画像ブロックの符号化時に、さらに同一時間レイヤにおける前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がある。
本出願の実施例において、現在画像ブロックのサブ画像ブロックのサイズを６４以上の画素に固定され、前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がなく、したがって、記憶空間を省くことができる。
任意選択的に、１つの実施例として、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはいずれも８×８画素に固定される。
現在、次世代の動画像符号化規格（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、ＶＶＣ）において、８×８のサイズで動きベクトルを記憶する。本出願の実施例において、現在画像ブロックのサブ画像ブロックのサイズを８×８に設定し、動画像標準規格ＶＶＣで規定された動きベクトルの記憶粒度に適応させることができる一方、前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がなく、そのため、記憶空間を省くことができる。
本出願のいくつかの実施例において、サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズが８×８画素の場合に、ＴＭＶＰ操作をしないように設定することで、一部の冗長操作をスキップし、符号化および復号の時間を効果的に節約し、符号化効率を向上させることができる。
本出願のいくつかの実施例において、現在ＣＵの幅および／または高さが８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。つまり、サブ画像ブロックおよび／または前記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。この場合、ＴＭＶＰ操作をスキップすることによる性能への影響は無視できるので、符号化および復号の時間を効果的に省き、符号化効率を向上させることができる。
任意選択的に、１つの実施例として、確定ユニット６２０は、少なくとも一部の動きベクトル候補を順次走査し、１つ目の事前設定条件に符合する動きベクトル候補まで走査すると、走査を停止し、かつ走査した１つ目の事前設定条件に符合する動きベクトル候補に基づき参照動きベクトルを確定するために用いられる。
任意選択的に、１つの実施例として、確定ユニット６２０は、１つ目の事前設定条件に符合する動きベクトル候補を対象近傍ブロックとするために用いられる。
任意選択的に、１つの実施例として、事前設定条件は、動きベクトル候補の参照画像と現在画像ブロックの参照画像が同じであることを含む。
なお、本実施例における取得ユニット６１０、確定ユニット６２０と分割ユニット６３０はいずれもプロセッサによって実現できる。
以上の説明において、１つの画像ブロックの動きベクトルは、１）該動きベクトルが指す画像、２）変位という二つの情報を含む。いくつかの応用シーンにおいて、１つの画像ブロックの動きベクトルは「変位」という情報のみを含む。該画像ブロックはまた、該画像ブロックの参照画像を指示するためのインデックス情報を提供する。符号化／復号済みの画像ブロックに対し、その動きベクトルの意味は、該符号化／復号済み画像ブロックの参照ブロックの参照画像上における該符号化／復号済み画像ブロックと位置と同じでありかつ該参照画像に位置する画像ブロックに対する変位を含む。該符号化／復号済みの画像ブロックの参照ブロックを確定する時、該符号化／復号済みの画像ブロックの参照画像のインデックス情報および該符号化／復号済みの画像ブロックの動きベクトルによって該符号化／復号済みの画像ブロックの参照ブロックを確定する必要がある。そこで、図１に示す動画像処理方法では、ステップＳ１２０は、動きベクトル第２候補リスト中の動きベクトル候補を走査するかわりに、該動きベクトル候補に対応する画像ブロックを直接走査する。以下、該動きベクトルの新しい定義（すなわち、「変位」情報を含むが「指す画像」を含まない）に対して、動画像処理方法を提供する。なお、「動きベクトル」の２つの異なる意味に対してそれぞれ提供されるＡＴＭＶＰ技術に基づいて動きベクトル候補を確定する方法は、ほぼ一致であり、上記の説明は、以下で提供される動画像処理方法にも適用され、区別は主に、動きベクトル第２候補リストの構築において、ＡＴＭＶＰ技術に基づいて動きベクトル第２候補リストに入れる候補を確定する時、上述した動画像処理方法では、動きベクトル第２候補リストに入れられた動きベクトルを走査することに対して、後述する動画像処理方法では、該動きベクトル第２候補リストに入れられた動きベクトルに対応する画像ブロックを走査することである。
図７に示すように、本出願の実施例は動画像処理方法を提供し、該方法は以下のステップを含む。
Ｓ７１０、現在画像ブロックのＭ個の近傍ブロックを確定する。
現在画像ブロックは符号化（または復号）対象の画像ブロックである。例えば、現在画像ブロックは１つの符号化ユニット（ＣＵ）である。
現在画像ブロックが位置する画像フレームは現在フレームと呼ばれる。
近傍ブロックは、現在画像において現在画像ブロックの位置に隣接しまたはある位置ピッチを有する画像ブロックである。
Ｍ個の近傍ブロックは現在フレーム内における符号化（または復号）済みの画像ブロックである。
一例として、図２に示すように、図２に示される現在画像ブロックの周囲の４つの位置Ａ１（左）→Ｂ１（上）→Ｂ０（右上）→Ａ０（左下）に位置する画像ブロックの順で、現在画像ブロックの４個の近傍ブロックを順次確定する。
Ｓ７２０、Ｍ個の近傍ブロックのうちのＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定し、ＮはＭより小さい。
Ｎ個の近傍ブロックの走査結果に基づき対象近傍ブロックを確定するプロセスは、事前設定条件に基づきＮ個の近傍ブロックを順次判断し、判断結果に基づき対象近傍ブロックを確定するプロセスであってもよい。
一例として、事前設定条件の定義は、近傍ブロックの参照画像と現在画像ブロックの参照画像と同じであることである。
ここでは、現在画像ブロックの参照画像は現在画像ブロックが位置する画像と時間距離が最も近い参照画像であり、または、現在画像ブロックの参照画像は符号化および復号側に予め設定された参照画像であり、または、現在画像ブロックの参照画像は動画像パラメータセット、シーケンスヘッダ、シーケンスパラメータセット、画像ヘッダ、画像パラメータセット、スライスヘッダ中に指定される参照画像である。
例えば、該現在画像ブロックの参照画像は現在画像ブロックの同位フレームであり、同位フレームは、スライスレベルの情報ヘッダに設定された動き情報を取得して予測するためのフレームである。
将来の技術の進化に応じて、この事前設定条件は他の異なる定義を与える可能性があり、それに応じた解決策も本出願の保護範囲に入ることを理解されたい。
以下、Ｎ個の近傍ブロックの走査結果に基づき対象近傍ブロックを確定するプロセスを詳細に説明する。
ステップＳ７２０において、ステップＳ７１０で取得されたＭ個の近傍ブロックのうちのＮ個の近傍ブロックのみを走査し、このようにして走査の回数を減少できる。
任意選択的に、ステップＳ７２０において、Ｍ個の近傍ブロックのうちの前のＮ個の近傍ブロックを順次走査してもよい。
ステップＳ７１０において、予め設定された順で現在画像ブロックのＭ個の近傍ブロックを順次確定する時、ステップＳ７２０で取得された前のＮ個の近傍ブロックとは、該予め設定された順で最初に確定されたＮ個の近傍ブロックを指す。
任意選択的に、ステップＳ７２０において、Ｍ個の近傍ブロックのうちの最後のＮ個の近傍ブロックを順次走査してもよいし、または、Ｍ個の近傍ブロックのうちの中間のＮ個の近傍ブロックを順次走査してもよい。本出願はこれに対して限定しない。
Ｓ７３０、対象近傍ブロックの動きベクトル、現在画像ブロック、および現在画像ブロックの参照画像に基づき、現在画像ブロックの関連ブロックを確定する。
Ｓ７４０、関連ブロックの動きベクトルに基づき現在画像ブロックを符号化／復号する。
任意選択的に、ステップＳ７４０は、関連ブロックの動きベクトルと参照画像に基づき、現在画像ブロックの参照ブロックを確定することを含む。
例えば、ステップＳ７４０は、現在画像ブロックの候補ブロックリストを構築し、該候補ブロックリスト中の候補ブロックはＭ個の近傍ブロックと関連ブロックを含み、候補ブロックリスト中の候補ブロックの参照ブロックに基づき現在画像ブロックに符号化および復号を行う。
一例において、該候補ブロックリストは現在画像ブロックのｍｅｒｇｅ候補リストである。一例において。該候補ブロックリストは現在画像ブロックのＡＭＶＰ候補リストである。
符号化側において、現在ブロックの候補ブロックのインデックス（ｉｎｄｅｘ）をコードストリームに書き込む。復号側において、インデックスを取得した後、候補ブロックリストから該インデックスに対応する候補ブロックを見つけ、該候補ブロックの参照ブロックに基づき現在画像ブロックの参照ブロックを確定し、または、該候補ブロックの動きベクトルに基づき現在画像ブロックの動きベクトルを確定する。
例えば、そのまま候補ブロックの参照ブロックを現在画像ブロックの参照ブロックとして確定し、または、そのまま候補ブロックの動きベクトルを現在画像ブロックの動きベクトルとして確定する。また、例えば、符号化側は該現在ブロックのＭＶＤをコードストリーム中に書き込む。復号側は該ＭＶＤを取得した後、該候補ブロックの動きベクトルにＭＶＤを加えたものを現在ブロックの動きベクトルとし、続いて該動きベクトルと現在ブロックの参照画像に基づき現在ブロックの参照ブロックを確定する。
本出願の実施例において、現在画像ブロックの対象近傍ブロックを取得するプロセスにおいて、すでに取得されたＭ個の近傍ブロックのうちのＮ（ＮはＭより小さい）個の近傍ブロックのみを順次走査し、従来技術に比べて、現在画像ブロックの対象近傍ブロックを取得するプロセスにおける近傍ブロックに対する走査回数を減少することができ、それにより複雑さを低下させる。
任意選択的に、本実施例において、ステップＳ７１０では、現在画像ブロックの現在フレーム内での４個の近傍ブロックを確定し、すなわちＭは４に等しい。ステップＳ７２０において、４個の近傍ブロックのうちのＮ個の近傍ブロックを走査し、Ｎは４より小さい。
例えば、Ｎは１に等しい。例えば、ステップＳ７２０において、４個の近傍ブロックのうちのの１つ目の近傍ブロックのみを走査する。
また、例えば、Ｎは２または３に等しい。
以下、ステップＳ７２０において、Ｎ個の近傍ブロックの走査結果に基づき対象近傍ブロックを確定する方式を説明する。
任意選択的に、ステップＳ７２０において、Ｎ個の近傍ブロックを順次走査し、１つ目の事前設定条件に符合する近傍ブロックまで走査すると、走査を停止し、かつ走査した１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定する。
例えば、事前設定条件の定義は、近傍ブロックの参照画像と現在画像ブロックの参照画像が同じであることである。
将来進化する技術では、事前条件は他の定義を与えることもあることを理解されたい。
ここでは、事前設定条件の定義は近傍ブロックの参照画像が現在画像ブロックの参照画像と同じであることを例として説明する。
例えば、１つ目の事前設定条件に符合する近傍ブロックを対象近傍ブロックとする。
任意選択的に、ステップＳ７２０において、Ｎ個の近傍ブロックにおいて事前設定条件に符合する近傍ブロックが走査されていない場合、該方法はさらに、Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行い、スケーリング処理後の動きベクトルに基づき現在画像ブロックを符号化／復号することを含む。
例えば、スケーリング処理後の動きベクトルと現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定する。
任意選択的に、特定近傍ブロックは、Ｎ個の近傍ブロックのうち、走査順で得られた１つ目近傍ブロックまたは最後の近傍ブロックである。
該特定近傍ブロックは、Ｎ個の近傍ブロックのうち、他の走査順で得られた近傍ブロックであってもよい。
任意選択的に、スケーリング処理後の動きベクトルに基づき現在画像ブロックを符号化／復号することは、特定近傍ブロックの動きベクトルにスケーリング処理を行い、スケーリング処理後の動きベクトルが指す参照フレームと現在画像ブロックの参照画像が同じになるようにし、スケーリング処理後の動きベクトルが現在画像ブロックの参照画像で指す画像ブロックを現在画像ブロックの参照ブロックとすることを含む。
任意選択的に、ステップＳ７２０において、Ｎ個の近傍ブロック中に事前設定条件に符合する近傍ブロックが走査されていない場合、ディフォルトブロックを現在画像ブロックの候補参照ブロックとする。
例えば、ディフォルトブロックは動きベクトル（０，０）が指す画像ブロックである。
以下、ステップＳ７３０において、対象近傍ブロックの動きベクトル、現在画像ブロック、および現在画像ブロックの参照画像に基づき、現在画像ブロックの関連ブロックを確定するプロセスを説明する。
任意選択的に、実施形態として、対象近傍ブロックの動きベクトル、現在画像ブロックおよび現在画像ブロックの参照画像に基づき、現在画像ブロックの関連ブロックを確定することは、現在画像ブロックを複数のサブ画像ブロックに分割することと、対象近傍ブロックの動きベクトルに基づき、現在画像ブロックの参照画像においてサブ画像ブロックの関連ブロックを確定することとを含み、現在画像ブロックの関連ブロックはサブ画像ブロックの関連ブロックを含む。
関連ブロックはｃｏｌｌｏｃａｔｅｄ ｂｌｏｃｋまたはｃｏｒｒｅｓｐｏｎｄｉｎｇ ｂｌｏｃｋと呼ばれてもよい。
例えば、現在画像ブロックは１つのＣＵであり、それを分割した後に得られたサブ画像ブロックはｓｕｂ－ＣＵと呼ばれてもよい。
任意選択的に、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズは６４画素以上に固定される。
任意選択的に、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはいずれも８×８画素に固定される。
現在のＡＴＭＶＰ技術において、サブ画像ブロックのサイズに対してフレームレベルの適応的設定を行い、サブ画像ブロックのサイズはディフォルトで４×４であり、ある条件を満たす時、サブ画像ブロックのサイズは８×８に設定される。例えば、符号化側では、現在画像ブロックを符号化する時、同一時間レイヤにおける前の符号化画像ブロックのＡＴＭＶＰモードの符号化時にＣＵ中の各サブ画像ブロックの平均ブロックのサイズを算出し、平均ブロックのサイズが閾値より大きい場合、現在画像ブロックのサブ画像ブロックの寸法が８×８に設定され、そうでなければデフォルト値４×４を使用する。現在、次世代の動画像符号化規格（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、ＶＶＣ）において、８×８のサイズで動きベクトルを記憶する。サブ画像ブロックのサイズを４×４に設定すると、該サブ画像ブロックの動きベクトルのサイズ（４×４ともする）は現在規格における動きベクトルの記憶粒度に符合しないことを理解されたい。また、現在ＡＴＭＶＰ技術において、符号化現在画像ブロックを符号化する時、さらに、同一時間レイヤにおける前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がある。
本出願の実施例において、現在画像ブロックのサブ画像ブロックのサイズを８×８に設定し、動画像標準規格ＶＶＣで規定された動きベクトルの記憶粒度に適応させることができる一方、前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がなく、そのため、記憶空間を省くことができる。
本出願のいくつかの実施例において、サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズが８×８画素の場合に、ＴＭＶＰ操作をしないように設定することで、一部の冗長操作をスキップし、符号化および復号の時間を効果的に節約し、符号化効率を向上させることができる。
本出願のいくつかの実施例において、現在ＣＵの幅および／または高さが８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。つまり、サブ画像ブロックおよび／または前記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。この場合、ＴＭＶＰ操作をスキップすることによる性能への影響は無視できるので、符号化および復号の時間を効果的に省き、符号化効率を向上させることができる。
なお、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズが６４画素に固定されることを保証する前提で、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはさらに、他の寸法であってもよく、例えばサブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはＡ×Ｂ、Ａ≦６４、Ｂ≦６４であり、ＡとＢはともに４の整数である。例えば、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズは４×１６画素、または１６×４画素である。
任意選択的に、もう１つの実施形態として、対象近傍ブロックの動きベクトル、現在画像ブロックおよび現在画像ブロックの参照画像に基づき、現在画像ブロックの関連ブロックを確定することは、対象近傍ブロックの動きベクトルに基づき、現在画像ブロックの参照画像において現在画像ブロックの関連ブロックを確定することを含む。
任意選択的に、ステップＳ７４０は、関連ブロックの参照画像が特定参照画像、または現在画像ブロックの参照画像が特定参照画像である時、処理後の関連ブロックの動きベクトルと現在画像ブロックの参照画像に基づき現在画像ブロックの候補参照ブロックを確定することを含み、ここでは、処理後の関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである。
例えば、処理後の関連ブロックの動きベクトルは、数値が１の縮尺で関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、スケーリングステップをスキップした関連ブロックの動きベクトルを含む。
任意選択的に、ステップＳ７４０は、関連ブロックの参照画像が特定参照画像、または現在ブロックの参照画像が特定参照画像である時、関連ブロックの動きベクトルに基づき現在画像ブロックの候補参照ブロックを確定することを放棄する。
いくつかの実施例において、ステップＳ７２０は、特定近傍ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、処理後の関連ブロックの動きベクトルと現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定することを含み、ここでは、処理後の関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである。
ここでは、処理後の関連ブロックの動きベクトルは、数値が１の縮尺で関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、スケーリングステップをスキップした関連ブロックの動きベクトルを含む。
以上からわかるように、本出願の実施例において、現在画像ブロックの対象近傍ブロックを取得するプロセスにおいて、すでに取得されたＭ個の近傍ブロックのうちのＮ（ＮはＭより小さい）個の近傍ブロックのみを順次走査し、従来技術に比べて、現在画像ブロックの対象近傍ブロックを取得するプロセスにおける近傍ブロックに対する走査回数を減少することができ、それにより複雑さを低下させる。
Ｎ個の近傍ブロックのうち参照フレームと現在フレームの同位フレームが同じである近傍ブロックが走査されていない場合、Ｎ個の近傍ブロックのうち１つの近傍ブロックの動きベクトルにスケーリング処理を行い、その参照フレームが現在フレームの同位フレームと同じになるようにし、続いてこのスケーリング処理された動きベクトルを現在画像ブロックの動きベクトルとすることで、現在画像ブロックの動きベクトルの正確さを向上させることができる。
現在画像ブロックをサイズ８×８のサブ画像ブロックに分割し、動画像標準規格ＶＶＣで規定された動きベクトルの記憶粒度に適応させることができる一方、前の符号化済みの画像ブロックのサブブロックのサイズの情報を記憶する必要がなく、そのため、記憶空間を省くことができる。
本出願のいくつかの実施例において、サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズが８×８画素の場合に、ＴＭＶＰ操作をしないように設定することで、一部の冗長操作をスキップし、符号化および復号の時間を効果的に節約し、符号化効率を向上させることができる。
本出願のいくつかの実施例において、現在ＣＵの幅および／または高さが８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。つまり、サブ画像ブロックおよび／または前記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。この場合、ＴＭＶＰ操作をスキップすることによる性能への影響は無視できるので、符号化および復号の時間を効果的に省き、符号化効率を向上させることができる。
本出願の実施例のいくつかの実施形態において、現在画像ブロックの動きベクトルを確定するプロセスにおいて、他の画像上のある画像ブロックの動きベクトルを利用して該画像ブロックの動きベクトルを確定することに関連する。説明の便宜上、該画像ブロックを第１画像ブロックと呼ばれ、利用しようとする他の画像上のある画像ブロックを該第１画像ブロックの時間領域参照ブロックまたは関連ブロックと呼ばれる。理解できるのは、第１画像ブロックと該第１画像ブロックの時間領域参照ブロック（または関連ブロック）が異なる画像上に位置することである。そこで、該時間領域参照ブロック（または関連ブロック）の動きベクトルを利用して第１画像ブロックの動きベクトルを確定するプロセスにおいて、該時間領域参照ブロック（または関連ブロック）の動きベクトルをスケーリングする必要がある可能性がある。説明の便宜上、本明細書では、「関連ブロック」という用語を統一して用いる。
例えば、ＡＴＭＶＰ技術応用をＡＭＶＰ候補リストの構築に応用する場合、ＡＴＭＶＰ技術に基づき現在画像ブロックの関連ブロックを確定した後、該関連ブロックの動きベクトルに基づき現在画像ブロックの動きベクトルを確定し、該関連ブロックの動きベクトルをスケーリングし、続いてスケーリング後の動きベクトルに基づき現在画像ブロックの動きベクトルを確定する必要がある。一般に、関連ブロックの動きベクトルが指す参照画像と該関連ブロックが位置する画像との間の時間距離、および現在画像ブロックの参照画像と現在画像ブロックが位置する画像との間の時間距離に基づき、該関連ブロックの動きベクトルの縮尺を確定する。
一例において、該関連ブロックの動きベクトルはＭＶ ２と呼ばれ、該動きベクトルＭＶ ２が指す参照画像の参照フレームインデックス値はｘと呼ばれる。ここでは、該参照フレームインデックス値ｘはＭＶ ２が指す参照画像の順序番号（例えばＰＯＣ）と該関連ブロックが位置する画像の順序番号との差である。第１画像ブロックの参照画像の参照フレームインデックス値はｙと呼ばれる。ここでは、該参照フレームインデックス値ｙは第１画像ブロックの参照画像の順序番号と該第１画像ブロックが位置する画像の順序番号との差である。そこで、動きベクトルＭＶ ２に対する縮尺はｙ／ｘである。任意選択的に、動きベクトルＭＶ ２とｙ／ｘの積を第１画像ブロックの動きベクトルとすることができる。
しかしながら、関連ブロックの動きベクトルＭＶ ２が特定参照画像を指す場合、または、第１の画像ブロックの参照画像が特定参照画像である時には、特定参照画像と第１の画像ブロックが位置する画像との時間距離の定義が曖昧であるため、関連ブロックの動きベクトルＭＶ ２に対するスケーリングには意味がない。
任意選択的に、本実施例において、関連ブロックの動きベクトルに基づき現在画像ブロックの動きベクトルを確定する場合、具体的に、関連ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、処理後の関連ブロックの動きベクトルに基づき現在画像ブロックの動きベクトルを確定し、ここでは、処理後の関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである。
例えば、処理後の関連ブロックの動きベクトルは、数値が１の縮尺で関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、スケーリングステップをスキップした関連ブロックの動きベクトルを含む。
任意選択的に、本実施例において、関連ブロックの動きベクトルに基づき現在画像ブロックの動きベクトルを確定する場合、具体的に、関連ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、関連ブロックの動きベクトルに基づき現在画像ブロックの動きベクトルを確定することを放棄する。
図８に示すように、本出願の実施例は動画像処理方法をさらに提供し、該方法は以下のステップを含む。
Ｓ８１０、現在画像ブロックのＭ個の近傍ブロックを確定する。
ステップＳ８１０は上記の実施例中のステップＳ７１０に対応できる。
Ｓ８２０、Ｍ個の近傍ブロック中の少なくとも一部の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定する。
任意選択的に、Ｍ個の近傍ブロック中の部分近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定する。
任意選択的に、Ｍ個の近傍ブロック中の全ての近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定する。
Ｓ８３０、現在画像ブロックを複数のサブ画像ブロックに分割し、ここでは、サブ画像ブロックのサイズは６４以上の画素に固定される。
Ｓ８４０、対象近傍ブロックの動きベクトルおよびサブ画像ブロックに基づき、現在画像ブロックの参照画像において現在画像ブロックの関連ブロックを確定する。
任意選択的に、現在画像ブロックの参照画像は現在画像ブロックが位置する画像と時間距離が最も近い参照画像である。
任意選択的に、現在画像ブロックの参照画像は符号化側および復号側で予め設定された参照画像である。
任意選択的に、現在画像ブロックの参照画像は在動画像パラメータセット、シーケンスヘッダ、シーケンスパラメータセット、画像ヘッダ、画像パラメータセット、スライスヘッダ中で指定される参照画像である。
Ｓ８５０、関連ブロックの動きベクトルに基づき現在画像ブロックを符号化／復号する。
本出願の実施例において、現在画像ブロックのサブ画像ブロックのサイズを６４以上の画素に固定され、前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がなく、したがって、記憶空間を省くことができる。
任意選択的に、本実施例において、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの時間領域参照ブロックのサイズはいずれも８×８画素に固定される。
現在、次世代の動画像符号化規格（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、ＶＶＣ）において、８×８のサイズで動きベクトルを記憶する。本出願の実施例において、現在画像ブロックのサブ画像ブロックのサイズを８×８に設定し、動画像標準規格ＶＶＣで規定された動きベクトルの記憶粒度に適応させることができる一方、前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がなく、そのため、記憶空間を省くことができる。
本出願のいくつかの実施例において、サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズが８×８画素の場合に、ＴＭＶＰ操作をしないように設定することで、一部の冗長操作をスキップし、符号化および復号の時間を効果的に節約し、符号化効率を向上させることができる。
本出願のいくつかの実施例において、現在ＣＵの幅および／または高さが８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。つまり、サブ画像ブロックおよび／または前記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。この場合、ＴＭＶＰ操作をスキップすることによる性能への影響は無視できるので、符号化および復号の時間を効果的に省き、符号化効率を向上させることができる。
なお、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズが６４画素に固定されることを保証する前提で、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはさらに、他の寸法であってもよく、例えばサブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはＡ×Ｂ、Ａ≦６４、Ｂ≦６４であり、ＡとＢはともに４の整数である。例えば、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズは４×１６画素、または１６×４画素である。
任意選択的に、ステップＳ８２０は、少なくとも一部の近傍ブロックを順次走査し、１つ目の事前設定条件に符合する近傍ブロックまで走査すると、走査を停止し、かつ走査した１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することを含む。
例えば、１つ目の事前設定条件に符合する近傍ブロックを対象近傍ブロックとする。
例えば、事前設定条件の定義は、近傍ブロックの参照画像と現在画像ブロックの参照画像が同じであることである。
任意選択的に、ステップＳ８４０は、対象近傍ブロックの動きベクトルおよびサブ画像ブロックに基づき、現在画像ブロックの参照画像においてサブ画像ブロックの関連ブロックを確定することを含み、ここでは、現在画像ブロックの関連ブロックは、サブ画像ブロックの関連ブロックを含む。
以上、図７および図８に関連して、本出願の方法の実施例を説明した。以下、図７および図８に示す方法の実施例に対応する装置の実施例について説明する。なお、装置の実施例の説明と、方法の実施の形態の説明は互いに対応しているので、詳細に説明されていないものについては、上記の方法の実施例を参照してもよい。簡単化のために、ここでは、再び説明しない。
図９は、本出願の実施例によって提供される動画像処理装置９００の概略的ブロック図である。該装置９００は図７に示される方法の実施例を実行するために用いられる。該装置９００は以下のユニットを含む。
取得ユニット９１０であって、現在画像ブロックのＭ個の近傍ブロックを取得するために用いられる。
取得ユニット９２０であって、Ｍ個の近傍ブロックのうちのＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定するために用いられ、ＮはＭより小さい。
確定ユニット９２０はさらに、対象近傍ブロックの動きベクトル、現在画像ブロックおよび現在画像ブロックの参照画像に基づき、現在画像ブロックの関連ブロックを確定するために用いられる。
符号化／復号ユニット９３０であって、関連ブロックの動きベクトルに基づき現在画像ブロックを符号化／復号するために用いられる。
本出願の実施例において、現在画像ブロックの対象近傍ブロックを取得するプロセスにおいて、すでに取得されたＭ個の近傍ブロックのうちのＮ（ＮはＭより小さい）個の近傍ブロックのみを順次走査し、従来技術に比べて、現在画像ブロックの対象近傍ブロックを取得するプロセスにおける近傍ブロックに対する走査回数を減少することができ、それにより複雑さを低下させる。
任意選択的に、１つの実施例として、Ｍは４に等しく、Ｎは４より小さい。
任意選択的に、１つの実施例として、Ｎは１または２に等しい。
任意選択的に、１つの実施例として、確定ユニット９２０は、Ｍ個の近傍ブロック中の前のＮ個の近傍ブロックを順次走査するために用いられる。
任意選択的に、１つの実施例として、取得ユニット９１０は、予め設定された順で現在画像ブロックのＭ個の近傍ブロックを順次取得し、前のＮ個の近傍ブロックとは、予め設定された順で最初に確定されたＮ個の近傍ブロックを指す。
任意選択的に、１つの実施例として、確定ユニット９２０は、Ｎ個の近傍ブロックを順次走査し、１つ目の事前設定条件に符合する近傍ブロックまで走査すると、走査を停止し、かつ走査した１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定するために用いられる。
任意選択的に、１つの実施例として、確定ユニット９２０は、１つ目の事前設定条件に符合する近傍ブロックを対象近傍ブロックとするために用いられる。
任意選択的に、１つの実施例として、事前設定条件は、近傍ブロックの参照画像と現在画像ブロックの参照画像が同じであることを含む。
任意選択的に、１つの実施例として、符号化／復号ユニット９３０は、関連ブロックの動きベクトルと参照画像に基づき現在画像ブロックの参照ブロックを確定するために用いられる。
任意選択的に、１つの実施例として、符号化／復号ユニット９３０は、現在画像ブロックの候補ブロックリストを構築し、候補ブロックリスト中の候補ブロックはＭ個の近傍ブロックと関連ブロックを含み、候補ブロックリスト中の候補ブロックの参照ブロックに基づき現在画像ブロックを符号化および復号するために用いられる。
任意選択的に、１つの実施例として、符号化／復号ユニット９３０はさらに、Ｎ個の近傍ブロックにおいて事前設定条件に符合する近傍ブロックが走査されていない場合、Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行い、スケーリング処理後の動きベクトルに基づき現在画像ブロックを符号化／復号するために用いられる。
任意選択的に、１つの実施例として、符号化／復号ユニット９３０は、スケーリング処理後の動きベクトルと現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定するために用いられる。
任意選択的に、１つの実施例として、特定近傍ブロックは、Ｎ個の近傍ブロックのうち、走査順で得られた１つ目近傍ブロックまたは最後の近傍ブロックである。
任意選択的に、１つの実施例として、符号化／復号ユニット９３０は、特定近傍ブロックの動きベクトルにスケーリング処理を行い、スケーリング処理後の動きベクトルが指す参照フレームと現在画像ブロックの参照画像が同じになるようにし、スケーリング処理後の動きベクトルが現在画像ブロックの参照画像で指す画像ブロックを現在画像ブロックの参照ブロックとするために用いられる。
任意選択的に、１つの実施例として、確定ユニット９２０は、Ｎ個の近傍ブロック中に事前設定条件に符合する近傍ブロックが走査されていない場合、ディフォルトブロックを現在画像ブロックの参照ブロックとするために用いられる。
任意選択的に、１つの実施例として、ディフォルトブロックは動きベクトル（０，０）が指す画像ブロックである。
任意選択的に、１つの実施例として、確定ユニット９２０は、
現在画像ブロックを複数のサブ画像ブロックに分割することと、
対象近傍ブロックの動きベクトルに基づき、現在画像ブロックの参照画像においてサブ画像ブロックの関連ブロックを確定することのために用いられ、現在画像ブロックの関連ブロックはサブ画像ブロックの関連ブロックを含む。
任意選択的に、１つの実施例として、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズは６４以上の画素に固定される。
任意選択的に、本出願のいくつかの実施例において、サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズが８×８画素の場合に、ＴＭＶＰ操作をしないように設定することで、一部の冗長操作をスキップし、符号化および復号の時間を効果的に節約し、符号化効率を向上させることができる。
任意選択的に、本出願のいくつかの実施例において、現在ＣＵの幅および／または高さが８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。つまり、サブ画像ブロックおよび／または前記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、ＴＭＶＰ操作をしないように設定する。この場合、ＴＭＶＰ操作をスキップすることによる性能への影響は無視できるので、符号化および復号の時間を効果的に省き、符号化効率を向上させることができる。
任意選択的に、１つの実施例として、現在画像ブロックは１つの符号化ユニットＣＵである。
任意選択的に、１つの実施例として、確定ユニット９２０は、対象近傍ブロックの動きベクトルに基づき、現在画像ブロックの参照画像中に現在画像ブロックの関連ブロックを確定するために用いられる。
任意選択的に、１つの実施例として、近傍ブロックは現在画像上において現在画像ブロックの位置に隣接しまたはある位置ピッチを有する画像ブロックである。
任意選択的に、１つの実施例として、符号化／復号ユニット９３０は、関連ブロックの参照画像が特定参照画像、または現在画像ブロックの参照画像が特定参照画像である時、処理後の関連ブロックの動きベクトルと現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定するために用いられ、
ここでは、処理後の関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである。
任意選択的に、１つの実施例として、処理後の関連ブロックの動きベクトルは、数値が１の縮尺で関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、スケーリングステップをスキップした関連ブロックの動きベクトルを含む。
任意選択的に、１つの実施例として、符号化／復号ユニット９３０は、関連ブロックの参照画像が特定参照画像、または現在ブロックの参照画像が特定参照画像である時、関連ブロックの動きベクトルに基づき現在画像ブロックの参照ブロックを確定することを放棄するために用いられる。
任意選択的に、１つの実施例として、確定ユニット９２０は、特定近傍ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、処理後の関連ブロックの動きベクトルと現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定するために用いられ、ここでは、処理後の関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである。
任意選択的に、１つの実施例として、処理後の関連ブロックの動きベクトルは、数値が１の縮尺で関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、スケーリングステップをスキップした関連ブロックの動きベクトルを含む。
なお、本実施例における取得ユニット９１０、確定ユニット９２０と符号化／復号ユニット９３０はいずれもプロセッサによって実現できる。
図１０に示すように、本出願の実施例はさらに、動画像処理装置１０００を提供する。該装置１０００は図８に示される方法の実施例を実行するために用いられる。該装置１０００は以下のユニットを含む。
取得ユニット１０１０であって、現在画像ブロックのＭ個の近傍ブロックを取得するために用いられる。
確定ユニット１０２０であって、Ｍ個の近傍ブロック中の少なくとも一部の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定するために用いられる。
分割ユニット１０３０であって、現在画像ブロックを複数のサブ画像ブロックに分割するために用いられ、ここでは、サブ画像ブロックのサイズは６４以上の画素に固定される。
確定ユニット１０２０はさらに、対象近傍ブロックの動きベクトルおよびサブ画像ブロックに基づき、現在画像ブロックの参照画像において現在画像ブロックの関連ブロックを確定するために用いられる。
符号化／復号ユニット１０４０であって、関連ブロックの動きベクトルに基づき現在画像ブロックを符号化／復号するために用いられる。
本出願の実施例において、現在画像ブロックのサブ画像ブロックのサイズを６４以上の画素に固定され、前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がなく、したがって、記憶空間を省くことができる。
任意選択的に、１つの実施例として、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの時間領域参照ブロックのサイズはいずれも８×８画素に固定される。
現在、次世代の動画像符号化規格（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、ＶＶＣ）において、８×８のサイズで動きベクトルを記憶する。本出願の実施例において、現在画像ブロックのサブ画像ブロックのサイズを８×８に設定し、動画像標準規格ＶＶＣで規定された動きベクトルの記憶粒度に適応させることができる一方、前の符号化済みの画像ブロックのサブ画像ブロックのサイズの情報を記憶する必要がなく、そのため、記憶空間を省くことができる。
本出願のいくつかの実施例において、ＡＴＭＶＰ技術におけるサブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズが８×８画素の場合に、ＴＭＶＰ操作をしないように設定することで、一部の冗長操作をスキップし、符号化および符復号化の時間を効果的に節約し、符号化効率を向上させることができる。
本出願のいくつかの実施例において、現在ＣＵの幅と高さのうちの少なくとも１つが８より小さい場合に、ＴＭＶＰ操作をしないように設定し、ＴＭＶＰ操作をスキップすることによる性能への影響は無視できるので、符号化および復号の時間を効果的に省き、符号化効率を向上させることができる。
なお、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズが６４画素に固定されることを保証する前提で、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはさらに、他の寸法であってもよく、例えばサブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズはＡ×Ｂ、Ａ≦６４、Ｂ≦６４であり、ＡとＢはともに４の整数である。例えば、サブ画像ブロックのサイズおよび／またはサブ画像ブロックの関連ブロックのサイズは４×１６画素、または１６×４画素である。
任意選択的に、１つの実施例として、Ｍ個の近傍ブロック中の少なくとも一部の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することは、少なくとも一部の近傍ブロックを順次走査し、１つ目の事前設定条件に符合する近傍ブロックまで走査すると、走査を停止し、かつ走査した１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することを含む。
任意選択的に、１つの実施例として、確定ユニット１０２０は、１つ目の事前設定条件に符合する近傍ブロックを対象近傍ブロックとするために用いられる。
任意選択的に、１つの実施例として、事前設定条件は、近傍ブロックの参照画像と現在画像ブロックの参照画像が同じであることを含む。
任意選択的に、１つの実施例として、確定ユニット１０２０は、対象近傍ブロックの動きベクトルおよびサブ画像ブロックに基づき、現在画像ブロックの参照画像においてサブ画像ブロックの関連ブロックを確定するために用いられ、ここでは、現在画像ブロックの関連ブロックは、サブ画像ブロックの関連ブロックを含む。
なお、本実施例における取得ユニット１０１０、確定ユニット１０２０、分割ユニット１０３０と符号化／復号ユニット１０４０はいずれもプロセッサによって実現できる。
図１１に示すように、本出願の実施例はさらに、動画像処理装置１１００を提供する。装置１１００は以上で説明される方法の実施例を実行するために用いてもよい。装置１１００はプロセッサ１１１０、メモリ１１２０を含み、メモリ１１２０は命令を記憶するために用いられ、プロセッサ１１１０はメモリ１１２０に記憶された命令を実行し、かつ、メモリ１１２０に記憶された命令の実行によってプロセッサ１１１０に上記の方法の実施例による方法を実行させるために用いられる。
任意選択的に、図１１に示すように、該装置１１００は、外部装置と通信するための通信インターフェース１１３０を含むことができる。例えば、プロセッサ１１１０は、信号の受信および／または送信を行うように通信インターフェース１１３０を制御するために用いられる。
本出願で提供される装置５００、６００、９００、１０００および１１００はコーダに応用されてもよく、デコーダに応用されてもよい。
以上の記載は、動きベクトル第２候補リストを説明したが、以下、動きベクトル第１候補リストについて説明する。
動き補償予測段階において、従来、主流となる動画像符号化規格には並進動きモデルのみが応用されている。現実世界では、拡大／縮小、回転、遠景動き、その他の不規則な動きなど、さまざまな動き形態がある。フレーム間予測の効率を高めるために、符号化および復号技術にアフィン変換（ａｆｆｉｎｅ）動き補償モデルを導入することができる。アフィン変換動き補償は１組のコントロールポイント（ｃｏｎｔｒｏｌ ｐｏｉｎｔ）のＭＶにより画像ブロックのアフィン動きフィールドを説明する。一例において、アフィン変換動き補償モデルに用いたのは４パラメータＡｆｆｉｎｅモデルであり、この場合、該組のコントロールポイントは２つのコントロールポイント（例えば、画像ブロックの左上隅のポイントと右上隅のポイント）を含む。一例において、アフィン変換動き補償モデルに用いたのは６パラメータＡｆｆｉｎｅモデルであり、この該組のコントロールポイントは３つのコントロールポイント（例えば、画像ブロックの左上隅のポイント、右上隅のポイントと左下隅のポイント）を含む。
一実施形態において、動きベクトルの第１候補リストを構築する時、入れられる候補は１組のコントロールポイントのＭＶであってもよく、またはコントロールポイント予測動きベクトル（ＣＰＭＶＰ、Ｃｏｎｔｒｏｌ ｐｏｉｎｔ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ）と称される。任意選択的に、動きベクトルの第１候補リストはＭｅｒｇｅモードに用いられてよく、具体的に、Ａｆｆｉｎｅ Ｍｅｒｇｅモードと称されてよく、対応的に、該動きベクトルの第１候補リストはａｆｆｉｎｅ ｍｅｒｇｅ ｃａｎｄｉｄａｔｅ ｌｉｓｔと称されてよい。Ａｆｆｉｎｅ Ｍｅｒｇｅモードにおいて、直接的に動きベクトルの第１候補リスト中の予測を用いて現在画像ブロックのＣＰＭＶ（Ｃｏｎｔｒｏｌ ｐｏｉｎｔ ｍｏｔｉｏｎ ｖｅｃｔｏｒ）とし、すなわち、ａｆｆｉｎｅ動き推定プロセスを行う必要はない。
一実施形態において、ＡＴＭＶＰ技術に基づいて確定された候補を動きベクトルの第１候補リストに入れることができる。
ここでは、一例において、現在画像ブロックの関連ブロックのコントロールポイントの動きベクトル群を候補として動きベクトルの第１候補リストに入れる。動きベクトルの第１リスト中の該候補を用いて予測する時、現在画像ブロックの関連ブロックのコントロールポイントの動きベクトル群に基づいて該現在画像ブロックを予測する。
ここでは、一例において、上記に示すように、現在の画像ブロックの関連ブロックの代表動きベクトルを候補として動きベクトルの第１候補リストに入れる。さらに、任意選択的に、該候補をＡＴＭＶＰ技術に基づいて確定されたものとマークする。動きベクトル第１候補リスト中の該候補を用いて予測する時、該マークと候補に基づき現在画像ブロックの関連ブロックを確定し、現在画像ブロックと該関連ブロックを同じ方式で複数のサブ画像ブロックに分割し、現在画像ブロック中の各サブ画像ブロックは前記関連ブロック中の各サブ画像ブロックと１対１に対応させ、該関連ブロック中の各サブ画像ブロックの動きベクトルに基づき現在画像ブロック中の対応するサブ画像ブロックの動きベクトルをそれぞれ予測する。
ここでは、任意選択的に、関連ブロックに動きベクトルが取得不可なサブ画像ブロックが出た時、該関連ブロックの代表動きベクトルで該取得不可な動きベクトルを代替し、現在画像ブロック中の対応するサブ画像ブロックを予測する。任意選択的に、関連ブロックの代表動きベクトルがすべて取得不可な場合、ＡＴＭＶＰ技術に基づいて確定された候補を該動きベクトル第２候補リストに入れることを放棄する。一例において、関連ブロック中のサブ画像ブロックが取得不可であり、または関連ブロック中のサブ画像ブロックがフレーム内符号化モードを用いる場合、該関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出たことを確定する。
ここでは、任意選択的に、動きベクトルの第１候補リスト中の各候補は１組のコントロールポイントの動きベクトルを含み、現在画像ブロックの関連ブロックの代表動きベクトルを動きベクトルの第１候補リストに入れる時、データフォーマットの一貫性を保証するために、該関連ブロックの代表動きベクトルを候補中のそれぞれのコントロールポイントの動きベクトルとして挿入してもよい（つまり、該候補中の各コントロールポイントの動きベクトルはすべて該関連ブロックの代表動きベクトルに割り当てられる）。
ここでは、任意選択的に、現在画像ブロックの関連ブロックの代表動きベクトルとは、該関連ブロックの中央位置の動きベクトルを指してもよく、または他の該関連ブロックを代表する動きベクトルを指してもよく、ここでは限定しない。
上記の動きベクトル第２候補リストについての説明から分かるように、ＡＴＭＶＰ技術に基づいて候補を確定する時、現在画像ブロックの関連ブロックを確定する必要がある。本解決策において、ＡＴＭＶＰ技術に基づいて動きベクトル第１候補リストに入れられる候補を確定する時、現在画像ブロックの関連ブロックを確定する方法には、
現在画像ブロックの予め設定されたＭ個の近傍ブロック中のＮ個の近傍ブロックを順次走査し、走査結果に基づいて対象近傍ブロックを確定し、ＮはＭより小さく、Ｍは４以下であり、前記対象近傍ブロックの動きベクトル、前記現在の画像ブロックおよび前記現在の画像ブロックの参照画像に基づいて、前記現在画像ブロックの関連ブロックを確定する方法１と、
現在画像ブロックの動きベクトル第２候補リスト中のＭ個の候補に基づいて現在画像ブロックのＭ個の近傍ブロックを確定し、該Ｍ個の近傍ブロック中のＮ個の近傍ブロックを順次走査し、走査結果に基づいて対象近傍ブロックを確定し、ＮはＭより小さく、Ｍは４以下であり、該対象近傍ブロックの動きベクトル、現在の画像ブロックおよび現在の画像ブロックの参照画像に基づいて、前記現在の画像ブロックの関連ブロックを確定する方法２とが含まれる。ここでは、動きベクトル第２候補リスト中のＭ個の候補とは、現在画像ブロックのＭ個の近傍ブロックを指してもよい。
ここでは、方法１と方法２における「走査結果に基づいて対象近傍ブロックを確定する」、および「前記対象近傍ブロックの動きベクトル、前記現在画像ブロックおよび前記現在画像ブロックの参照画像に基づいて、前記現在画像ブロックの関連ブロックを確定する」という２つのステップについての説明は、上記の説明を参照してよく、ここでは、再び説明しない。
一実施形態において、動きベクトルの第１候補リストに入れる候補を確定する方法は、現在の画像ブロックの近傍ブロックから、特定の走査順に応じてアフィン変換モードで予測する近傍ブロックのコントロールポイントの動きベクトル群を確定し、それぞれの確定された近傍ブロックのコントロールポイントの動きベクトル群を１つの候補として動きベクトルの第１候補リストに入れることを含む。
ここでは、一例において、アフィン変換モードで予測する近傍ブロックとは、該近傍ブロックの動きベクトルがａｆｆｉｎｅ ｍｅｒｇｅ ｃａｎｄｉｄａｔｅ ｌｉｓｔ中の候補に基づいて確定されたものであることを指す。すなわち、候補は現在画像ブロックのａｆｆｉｎｅモードを用いた空間領域近傍ブロックのａｆｆｉｎｅ動きモデルからのものであり、すなわち、ａｆｆｉｎｅモードを用いた空間領域近傍ブロックのＣＰＭＶを現在ブロックのＣＰＭＶＰとする。
ここでは、一例において、コントロールポイントの動きベクトル群は該近傍ブロックの２つのコントロールポイントの動きベクトル（例えば、該近傍ブロックの左上隅のポイントと右上隅のポイント）を含んでもよく、または該近傍ブロックの３つのコントロールポイントの動きベクトル（例えば、画像ブロックの左上隅のポイント、右上隅のポイントと左下隅のポイント）を含んでもよく、これは４パラメータＡｆｆｉｎｅモデルを用いたか、６パラメータＡｆｆｉｎｅモデルを用いたかに依存する。
ここでは、一例において、特定の走査順に応じてアフィン変換モードで予測する近傍ブロックのコントロールポイントの動きベクトル群を確定することは、
前記現在の画像ブロックの左側近傍ブロックにおいて第１走査順に応じて第１近傍ブロックのコントロールポイントの動きベクトル群を確定することと、
前記現在の画像ブロックの上側近傍ブロックにおいて第２走査順に応じて第２近傍ブロックのコントロールポイントの動きベクトル群を確定することと、
前記第１近傍ブロックのコントロールポイントの動きベクトル群と前記第２近傍ブロックのコントロールポイントの動きベクトル群を前記動きベクトルの第１候補リストに入れることと、を含む。
例えば、図１２に示すように、図１２は現在画像ブロックの近傍ブロックによって動きベクトル第１候補リストの候補を取得する概略図である。現在画像ブロックの左側において、画像ブロックＡ－＞画像ブロックＤ－＞画像ブロックＥの走査順に応じて順次走査し、１つ目の事前設定条件を満たす第１の画像ブロックのコントロールポイントの動きベクトル群を１つの候補として動きベクトルの第１候補リストに入れる。現在画像ブロックの上側において、画像ブロックＢ－＞画像ブロックＣの走査順に応じて順次走査し、１つめのプリセット条件を満たす第１の画像ブロックのコントロールポイントの動きベクトル群を１つの候補として動きベクトルの第１候補リストに入れる。任意選択的に、該走査順で、該閾値条件を満たす画像ブロックを見つけなければ、該走査順で候補を確定することを放棄する。
一実施形態において、動きベクトル第１候補リストに入れる候補を確定する方法は、
前記現在画像ブロックの一部のコントロールポイントの近傍ブロックに基づいて前記一部のコントロールポイントの動きベクトルを構築することと、
前記現在画像ブロックの一部のコントロールポイントの動きベクトルを前記動きベクトルの第１候補リストに入れることと、を含む。
つまり、このような実施形態において、候補を構築することによって動きベクトルの第１候補リストに入れることである。一例において、候補を構築することによって動きベクトルの第１候補リストに入れる前、まず動きベクトルの第１候補リスト中の候補の数が既にプリセット数値（例えば、５）に達したか否かを判断し、プリセット数値に達していない場合、候補を構築することによって動きベクトルの第１候補リストに入れる。
一例において、構築される候補は現在画像ブロックの一部のコントロールポイントの近傍ブロックの動き情報を組み合わせた後にＣＰＭＶＰとして動きベクトルの第１候補リストに入れる。
図１３に示すように、図１３は現在画像ブロックの近傍ブロックによって動きベクトルの第１候補リストの候補を構築する概略図である。現在画像ブロックは全部で４つのコントロールポイントがあり、それぞれＣＰ１、ＣＰ２、ＣＰ３、ＣＰ４である。ここでは、画像ブロックＡ０とＡ１はＣＰ１の空間領域近傍ブロックであり、画像ブロックＡ２、Ｂ２とＢ３はＣＰ２の空間領域近傍ブロックであり、画像ブロックＢ０とＢ１はＣＰ２の空間領域近傍ブロックであり、ＴはＣＰ４の時間領域近傍ブロックである。コントロールポイントＣＰ１、ＣＰ２、ＣＰ３とＣＰ４の座標は、それぞれ（０，０）、（Ｗ，０）、（Ｈ，０）と（Ｗ，Ｈ）、ＷとＨはそれぞれ現在ＣＵの幅と高を示す。各コントロールポイントの近傍ブロックの動き情報を取得する優先順位は、
ＣＰ１に対し、取得の優先順位は、Ｂ２－＞Ｂ３－＞Ａ２である。Ｂ２が利用可能な場合、Ｂ２のＭＶを用いてコントロールポイントＣＰ１のＭＶとし、Ｂ２が利用不可なば場合、Ｂ３のＭＶを用いてコントロールポイントＣＰ１のＭＶとし、Ｂ２とＢ３がすべて利用不可な場合、Ａ１のＭＶを用いてコントロールポイントＣＰ１のＭＶとし、Ｂ２、Ｂ３とＡ１がすべて利用不可な場合、コントロールポイントＣＰ１の動き情報が得られない。
同様に、ＣＰ２に対し、取得の優先順位は、Ｂ１－＞Ｂ０であり、ＣＰ３に対し、取得の優先順位は、Ａ１－＞Ａ０であり、ＣＰ４に対し、直接的にＴのＭＶを用いてコントロールポイントＣＰ４のＭＶとする。
現在ＣＵのコントロールポイント（６パラメータモデル：ＣＰ０、ＣＰ１とＣＰ２、４パラメータモデル：ＣＰ０とＣＰ１）のＭＶがすべて利用可能になってからはじめて、構築されたＭＶを挿入し、そうでなければ直接的に次のステップに入る。すべてのコントロールポイントのＭＶ（存在する場合）を得た後、コントロールポイントのＭＶに対する異なる組み合わせを行い、複数のａｆｆｉｎｅ ｃａｎｄｉｄａｔｅｓを得ることができ、組み合わせ方式は、
４パラメータａｆｆｉｎｅモデルを用いる場合、４つのコントロールポイントのＭＶのうちの２つを組み合わせると、１つまたは複数の候補を得ることができ、その中の２つの組み合わせ方式、つまり｛ＣＰ１、ＣＰ２｝、｛ＣＰ１、ＣＰ３｝を選択する。ここでは、組み合わせ方式｛ＣＰ１、ＣＰ３｝では、４パラメータモデルに基づいて、選択された２つのコントロールポイントのＭＶを現在ＣＵの左上隅と右上隅のコントロールポイントのＭＶ（ＣＰ１とＣＰ２）に変換する必要がある。
６パラメータａｆｆｉｎｅモデルを用いる場合、４つのコントロールポイントのＭＶのうちの３つを組み合わせると、１つまたは複数の候補を得ることができ、４つの組み合わせ方式、｛ＣＰ１、ＣＰ２、ＣＰ４｝、｛ＣＰ１，ＣＰ２、ＣＰ３｝、｛ＣＰ２、ＣＰ３、ＣＰ４｝、｛ＣＰ１、ＣＰ３、ＣＰ４｝を選択する。ここでは、組み合わせ方式｛ＣＰ１、ＣＰ２、ＣＰ３｝、｛ＣＰ２、ＣＰ３、ＣＰ４｝、｛ＣＰ１、ＣＰ３、ＣＰ４｝では６パラメータモデルに基づいて、選択された３つのコントロールポイントのＭＶを現在ＣＵの左上隅、右上隅と左下隅のコントロールポイントのＭＶ（ＣＰ１、ＣＰ２とＣＰ３）に変換する必要がある
一例において、異なる組み合わせのＭＶ（２個または３個）に使用される参照フレームが異なれば、該組み合わせによって構築された候補が使用不可であると考えられる。
一実施形態において、動きベクトルの第１候補リストに入れる候補を確定する方法は、デフォルトベクトルを用いて取り込むことを含む。任意選択的に、該デフォルトベクトルはゼロベクトルまたは他のベクトルであってもよい。任意選択的に、他の方法で動きベクトルの第１候補リストに入れる候補を確定した後、現在既に該第１候補リストに入れられた候補の数が既にプリセット数値に達したか否かを判断し、達していない場合、第１候補リスト中の候補の数がプリセット数値に達するまで、デフォルトベクトルを用いて第１候補リストに取り込む。
動きベクトルの第１候補リスト中の候補を用いて現在画像ブロックを予測する時、用いた候補はＡＴＭＶＰ技術によって確定された候補以外の少なくとも１つの候補である場合、アフィン動きモデルにより該候補に基づいて現在画像ブロック中のサブ画像ブロックの動きベクトルを導出する。用いた候補はＡＴＭＶＰ技術によって確定された候補である場合、上記の説明に基づいて、関連ブロックの中の各サブ画像ブロックの動きベクトルに基づいて現在画像ブロック中の各サブ画像ブロックの参照ブロックを確定し、各サブ画像ブロックの参照ブロックを現在画像ブロックの参照ブロックにつなぎ合わせ、該参照ブロックに基づいて現在画像ブロックの残差を算出する。
以下、図１４と図１５に関連して本出願の実施例で提供される動画像処理方法について例をあげて説明する。図１４に示すように、該方法は以下のステップを含む。
Ｓ１４１０、現在画像ブロックの予め設定されたＭ個の近傍ブロックのうちＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定し、ＮはＭより小さい。任意選択的に、Ｍは４以下である。
Ｓ１４２０、前記対象近傍ブロックの動きベクトル、前記現在画像ブロック、および前記現在画像ブロックの参照画像に基づき、前記現在画像ブロックの関連ブロックを確定する。
Ｓ１４３０、前記現在画像ブロックと前記関連ブロックを同じ方法で複数のサブ画像ブロックに分割し、前記現在画像ブロック中の各サブ画像ブロックは、前記関連ブロック中の各サブ画像ブロックと１対１に対応させる。
Ｓ１４４０、前記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、前記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測する。
図１４に示される動画像処理方法の説明は以上の記載に参照することができ、ここでは説明しない。
図１５に示すように、該方法は以下のステップを含む。
Ｓ１５１０、現在画像ブロックの動きベクトル第２候補リスト中のＭ個の候補に基づき、前記現在画像ブロックのＭ個の近傍ブロックを確定する。
Ｓ１５２０、前記Ｍ個の近傍ブロックのうちのＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定し、ＮはＭより小さい。任意選択的に、Ｍは４以下である。
Ｓ１５３０、前記対象近傍ブロックの動きベクトル、前記現在画像ブロック、および前記現在画像ブロックの参照画像に基づき、前記現在画像ブロックの関連ブロックを確定する。
Ｓ１５４０、前記現在画像ブロックの関連ブロックに基づき、前記現在画像ブロックの動きベクトル第１候補リスト中の特定候補を確定する。ここでは、該特定候補は以上の記載で言及されているＡＴＭＶＰ技術によって確定された候補であってもよい。
Ｓ１５５０、前記特定候補を用いることを確定した場合、前記現在画像ブロックと前記関連ブロックを同じ方法で複数のサブ画像ブロックに分割し、前記現在画像ブロック中の各サブ画像ブロックは、前記関連ブロック中の各サブ画像ブロックと１対１に対応させる。
Ｓ１５６０、前記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、前記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測する。
図１５に示される動画像処理方法の説明は以上の記載に参照することができ、ここでは説明しない。
図１６は本出願の実施例によって提供される動画像処理装置１６００の概略的ブロック図である。該装置１６００は図１４に示される方法の実施例を実行するために用いられる。該装置１６００は以下のユニットを含む。
現在画像ブロックの予め設定されたＭ個の近傍ブロックのうちＮ（ＮはＭより小さい）個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定し、前記対象近傍ブロックの動きベクトル、前記現在画像ブロック、および前記現在画像ブロックの参照画像に基づき、前記現在画像ブロックの関連ブロックを確定し、前記現在画像ブロックと前記関連ブロックを同じ方法で複数のサブ画像ブロックに分割し、前記現在画像ブロック中の各サブ画像ブロックは、前記関連ブロック中の各サブ画像ブロックと１対１に対応させるために用いられる構築モジュール１６１０と、
前記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、前記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測するために用いられる予測モジュール１６２０とを含む。
一例において、Ｎは１または２に等しい。
一例において、予測モジュールはさらに、前記の前記関連ブロック中の各サブ画像ブロックの動きベクトルに基づきそれぞれ前記現在画像ブロック中の対応するサブ画像ブロックを予測する前に前記関連ブロックの代表動きベクトルを候補として動きベクトル第１候補リストに入れ、
前記候補を採用すると確定した場合、前記予測モジュールは前記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、前記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測するために用いられる。
一例において、前記の前記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、前記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測することは、
前記関連ブロック中の各サブ画像ブロックの動きベクトルを、それぞれ前記現在画像ブロック中に対応するサブ画像ブロックの動きベクトルとする。
一例において、前記関連ブロックの代表動きベクトルを１つ目の候補として動きベクトル第１候補リストに入れる。
一例において、前記関連ブロックの代表動きベクトルは前記関連ブロックの中央位置の動きベクトルを含む。
一例において、予測モジュールはさらに、前記関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出た時、前記関連ブロックの代表動きベクトルを前記動きベクトルが取得不可なサブ画像ブロックの動きベクトルとし、前記現在画像ブロック中の対応するサブ画像ブロックを予測するために用いられる。
一例において、予測モジュールはさらに、前記関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出ており、かつ前記関連ブロックの代表動きベクトルが取得不可である場合、前記関連ブロック中各サブ画像ブロックの動きベクトルに基づきそれぞれ前記現在画像ブロック中対応するサブ画像ブロックを予測することを放棄する。
一例において、予測モジュールはさらに、前記関連ブロック中のサブ画像ブロックが取得不可であり、または関連ブロック中のサブ画像ブロックがフレーム内符号化モードを用いる時、該関連ブロックに動きベクトルが取得不可なサブ画像ブロックが出たことを確定するために用いられる。
一例において、構築モジュールはさらに、他の候補を確定し、前記他候補を前記動きベクトル第１候補リストに入れるために用いられ、ここでは、前記他の候補中の少なくとも１つの候補はサブ画像ブロックの動きベクトルを含む。
一例において、構築モジュールはさらに、前記他の候補のうちの１つの候補を採用することを確定する場合、前記採用した候補に基づき前記現在画像ブロック中のサブ画像ブロックの動きベクトルを確定するために用いられる。
一例において、前記少なくとも１つの候補は一組のコントロールポイントの動きベクトルを含む。
一例において、予測モジュールはさらに、
前記少なくとも１つの候補中の候補を採用することを確定する場合、アフィン変換モデルに基づき前記採用した候補にアフィン変換を行うことと、
前記アフィン変換後の候補に基づき前記現在画像ブロック中のサブ画像ブロックを予測することとのために用いられる。
一例において、前記アフィン変換モデルは４パラメータアフィン変換モデルを含む場合、前記少なくとも１つの候補において、各候補は２つのコントロールポイントの動きベクトルを含み、
前記アフィン変換モデルは６パラメータアフィン変換モデルを含む場合、前記少なくとも１つの候補において、各候補は３つのコントロールポイントの動きベクトルを含む。
一例において、構築モジュールはさらに、前記現在画像ブロックの近傍ブロックから、特定の走査順でアフィン変換モードで予測する近傍ブロックのコントロールポイント動きベクトル群を確定することと、
それぞれの確定された近傍ブロックのコントロールポイント動きベクトル群を１つの候補として前記動きベクトル第１候補リストに入れることとのために用いられる。
一例において、前記の前記現在画像ブロックの近傍ブロックから、特定の走査順に応じてアフィン変換モードで予測する近傍ブロックのコントロールポイント動きベクトル群を確定することは、
前記現在画像ブロックの左側近傍ブロックにおいて第１走査順で第１近傍ブロックのコントロールポイント動きベクトル群を確定することと、
前記現在画像ブロックの上側近傍ブロックにおいて第２走査順で第２近傍ブロックのコントロールポイント動きベクトル群を確定することと、
前記第１近傍ブロックのコントロールポイントの動きベクトル群と前記第２近傍ブロックのコントロールポイントの動きベクトル群を前記動きベクトルの第１候補リストに入れることと、を含む。
一例において、構築モジュールはさらに、前記現在画像ブロックの一部のコントロールポイントの近傍ブロックに基づき前記一部のコントロールポイントの動きベクトルを構築することと、
前記現在画像ブロックの一部のコントロールポイントの動きベクトルを前記動きベクトルの第１候補リストに入れることとのために用いられるを含む。
一例において、前記現在画像ブロックの一部のコントロールポイントの近傍ブロックに基づいて前記一部のコントロールポイントの動きベクトルを構築することは、
前記一部のコントロールポイントにおける各コントロールポイントに対し、第三走査順で前記コントロールポイントの特定近傍ブロックを順次走査し、事前設定条件を満たす特定近傍ブロックの動きベクトルを前記コントロールポイントの動きベクトルとすることを含む。
一例において、構築モジュールはさらに、
前記一部のコントロールポイントの動きベクトルがそれぞれ異なる参照フレームを指す時、前記現在画像ブロックの一部のコントロールポイントの動きベクトルを前記動きベクトル第１候補リストに入れることを放棄するために用いられる。
一例において、前記動きベクトル第１候補リスト中の候補の数量が予め設定された数値より大きい場合、前記現在画像ブロックの一部のコントロールポイントの動きベクトルを前記動きベクトル第１候補リストに入れることを放棄する。
一例において、構築モジュールはさらに、
動きベクトル第２候補リストを構築し、ここでは、前記動きベクトル第２候補リストに入れる候補は１つの画像ブロックの動きベクトルであり、
前記動きベクトル第２候補リスト中の候補を採用することを確定した場合、前記候補の動きベクトルに基づき前記現在画像ブロックの動きベクトルを確定するために用いられる。
一例において、前記の前記候補の動きベクトルに基づき前記現在画像ブロックの動きベクトルを確定することは、
前記の採用することを確定した候補を前記現在画像ブロックの動きベクトルとし、または前記採用することを確定した候補をスケーリングした後に前記現在画像ブロックの動きベクトルとすることを含む。
一例において、前記構築動きベクトル第２候補リストは、
前記現在画像ブロックの現在画像上での複数の近傍ブロックの動きベクトルに基づき前記動きベクトル第２候補リストに入れる候補を確定することを含む。
一例において、前記現在画像ブロックの現在画像上での複数の近傍ブロックは前記予め設定されたＭ個の近傍ブロックを含む。
一例において、構築モジュールはさらに、
予め設定された順で順に前記予め設定されたＭ個の近傍ブロックの動きベクトルをそれぞれＭ個の候補として、前記動きベクトル第２候補リストに入れるために用いられる。
前記Ｎ個の近傍ブロックとは、前記予め設定された順で最初に確定されたＮ個の近傍ブロックを指す。
一例において、構築モジュールはさらに、
前記Ｍ個の近傍ブロック中の１つのまたは複数の近傍ブロックの動きベクトルが取得不可である場合、前記１つのまたは複数の近傍ブロックの動きベクトルに基づき前記動きベクトル第２候補リストに入れる候補を確定することを放棄するために用いられる。
一例において、前記の前記Ｍ個の近傍ブロックのうちのＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することは、
前記Ｎ個の近傍ブロックを順次走査し、１つ目の事前設定条件に符合する近傍ブロックまで走査すると、走査を停止し、かつ前記走査した１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することを含む。
一例において、前記の走査された１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することは、
前記１つ目事前設定条件に符合する近傍ブロックを前記対象近傍ブロックとすることを含む。
一例において、前記事前設定条件は、
近傍ブロックの参照画像と前記現在画像ブロックの参照画像が同じであることを含む。
一例において、構築モジュールはさらに、前記Ｎ個の近傍ブロック中に前記事前設定条件に符合する近傍ブロックが走査されていない時、前記Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行うために用いられ、予測モジュールは前記スケーリング処理後の動きベクトルに基づき前記現在画像ブロックを予測するために用いられる。
一例において、前記の前記スケーリング処理後の動きベクトルに基づき前記現在画像ブロックを予測することは、
前記スケーリング処理後の動きベクトルと前記現在画像ブロックの参照画像に基づき前記現在画像ブロックの参照ブロックを確定することを含む。
一例において、前記特定近傍ブロックは、前記Ｎ個の近傍ブロックのうち、走査順で得られた１つ目近傍ブロックまたは最後の近傍ブロックである。
一例において、前記の前記Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行い、前記スケーリング処理後の動きベクトルに基づき前記現在画像ブロックを予測することは、
前記特定近傍ブロックの動きベクトルにスケーリング処理を行い、前記スケーリング処理後の動きベクトルが指す参照フレームが前記現在画像ブロックの参照画像と同じになるようにし、
前記スケーリング処理後の動きベクトルの前記現在画像ブロックの参照画像中で指す画像ブロックを前記現在画像ブロックの参照ブロックとすることを含む。
一例において、前記Ｎ個の近傍ブロック中に前記事前設定条件に符合する近傍ブロックが走査されていない時、ディフォルトブロックを前記現在画像ブロックの参照ブロックとする。
一例において、前記ディフォルトブロックは動きベクトル（０，０）が指す画像ブロックである。
一例において、前記サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズは６４以上の画素に固定される。
一例において、前記サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズは８×８画素、または１６×４画素または４×１６画素に固定される。
一例において、ＡＴＭＶＰ技術におけるサブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズが８×８画素またはその幅と高さのうち少なくとも一方が８画素より小さい場合、ＴＭＶＰ操作をしないように設定することで、一部の冗長操作をスキップし、符号化および符復号化の時間を効果的に節約し、符号化効率を向上させることができる。
一例において、前記現在画像ブロックは１つの符号化ユニットＣＵである。
一例において、前記の前記対象近傍ブロックの動きベクトル、前記現在画像ブロック、および前記現在画像ブロックの参照画像に基づき、前記現在画像ブロックの関連ブロックを確定することは、
前記対象近傍ブロックの動きベクトル、前記現在画像ブロックの参照画像において、前記現在画像ブロックの関連ブロックを確定することを含む。
一例において、前記近傍ブロックは、前記現在画像上で前記現在画像ブロックの位置に隣接しまたはある位置ピッチを有する画像ブロックである。
一例において、前記の前記関連ブロックの動きベクトルに基づき前記現在画像ブロックを予測することは、
前記関連ブロックの参照画像が特定参照画像、または現在画像ブロックの参照画像が特定参照画像である時、処理後の前記関連ブロックの動きベクトルと前記現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定することを含む。
ここでは、前記処理後の前記関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである。
一例において、前記処理後の前記関連ブロックの動きベクトルは、
数値が１の縮尺で前記関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、
スケーリングステップをスキップした前記関連ブロックの動きベクトルを含む。
一例において、前記の前記関連ブロックの動きベクトルに基づき前記現在画像ブロックを予測することは、
前記関連ブロックの参照画像が特定参照画像、または現在のブロックの参照画像が特定参照画像である時、前記関連ブロックの動きベクトルに基づき現在画像ブロックの参照ブロックを確定することを放棄することを含む。
一例において、構築モジュールはさらに、
前記近傍ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、処理後の前記関連ブロックの動きベクトルと前記現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定するために用いられる。
ここでは、前記処理後の前記関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである。
一例において、前記処理後の前記関連ブロックの動きベクトルは、
数値が１の縮尺で前記関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、
スケーリングステップをスキップした前記関連ブロックの動きベクトルを含む。
一例において、Ｍは４以下である。
図１７は本出願の実施例によって提供される動画像処理装置１７００の概略的ブロック図である。該装置１７００は図１５に示される方法の実施例を実行するために用いられる。該装置１７００は以下のユニットを含む。
現在画像ブロックの動きベクトル第２候補リスト中のＭ個の候補に基づき、前記現在画像ブロックのＭ個の近傍ブロックを確定し、前記Ｍ個の近傍ブロックのうちＮ（ＮはＭより小さい）個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定し、前記対象近傍ブロックの動きベクトル、前記現在画像ブロック、および前記現在画像ブロックの参照画像に基づき、前記現在画像ブロックの関連ブロックを確定し、前記現在画像ブロックの関連ブロックに基づき前記現在画像ブロックの動きベクトル第１候補リスト中の特定候補を確定し、前記特定候補を用いることを確定した場合、前記現在画像ブロックと前記関連ブロックを同じ方法で複数のサブ画像ブロックに分割し、前記現在画像ブロック中の各サブ画像ブロックは、前記関連ブロックの各サブ画像ブロックと１対１に対応させるために用いられる構築モジュール１７１０と、
前記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、前記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測するために用いられる予測モジュール１７２０とを含む。
一例において、前記動きベクトル第１候補リストの少なくとも１つの候補がサブ画像ブロックの動きベクトルを含み、前記動きベクトル第２候補リストの各候補が画像ブロックの動きベクトルを含む。
一例において、Ｎは１または２に等しい。
一例において、前記Ｍ個の候補は前記現在画像ブロックの現在画像上でのＭ個の近傍ブロックの動きベクトルを含む。
一例において、前記の前記Ｍ個の近傍ブロックのうちのＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することは、
前記Ｎ個の近傍ブロックを順次走査し、１つ目の事前設定条件に符合する近傍ブロックまで走査すると、走査を停止し、かつ前記走査した１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することを含む。
一例において、前記走査した１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することは、
前記１つ目の事前設定条件に符合する近傍ブロックを前記対象近傍ブロックとすることを含む。
一例において、前記事前設定条件は、
近傍ブロックの参照画像と前記現在画像ブロックの参照画像が同じであることを含む。
一例において、構築モジュールはさらに、前記Ｎ個の近傍ブロック中に前記事前設定条件に符合する近傍ブロックが走査されていない時、前記Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行うために用いられ、予測モジュールは前記スケーリング処理後の動きベクトルに基づき前記現在画像ブロックを予測するために用いられる。
一例において、前記の前記スケーリング処理後の動きベクトルに基づき前記現在画像ブロックを予測することは、
前記スケーリング処理後の動きベクトルと前記現在画像ブロックの参照画像に基づき前記現在画像ブロックの参照ブロックを確定することを含む。
一例において、前記特定近傍ブロックは、前記Ｎ個の近傍ブロックのうち、走査順で得られた１つ目近傍ブロックまたは最後の近傍ブロックである。
一例において、前記の前記Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行い、前記スケーリング処理後の動きベクトルに基づき前記現在画像ブロックを予測することは、
前記特定近傍ブロックの動きベクトルにスケーリング処理を行い、前記スケーリング処理後の動きベクトルが指す参照フレームが前記現在画像ブロックの参照画像と同じになるようにし、
前記スケーリング処理後の動きベクトルの前記現在画像ブロックの参照画像中で指す画像ブロックを前記現在画像ブロックの参照ブロックとすることを含む。
一例において、前記Ｎ個の近傍ブロック中に前記事前設定条件に符合する近傍ブロックが走査されていない時、ディフォルトブロックを前記現在画像ブロックの参照ブロックとする。
一例において、前記ディフォルトブロックは動きベクトル（０，０）が指す画像ブロックである。
一例において、前記サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズは６４以上の画素に固定される。
一例において、前記サブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズは８×８画素、または１６×４画素または４×１６画素に固定される。
一例において、ＡＴＭＶＰ技術におけるサブ画像ブロックのサイズおよび／または前記サブ画像ブロックの関連ブロックのサイズは８×８画素またはその幅と高さのうち少なくとも一方が８画素より小さい場合、ＴＭＶＰ操作をしないように設定することで、一部の冗長操作をスキップし、符号化および符復号化の時間を効果的に節約し、符号化効率を向上させることができる。
一例において、前記現在画像ブロックは１つの符号化ユニットＣＵである。
一例において、前記の前記対象近傍ブロックの動きベクトル、前記現在画像ブロック、および前記現在画像ブロックの参照画像に基づき、前記現在画像ブロックの関連ブロックを確定することは、
前記対象近傍ブロックの動きベクトル、前記現在画像ブロックの参照画像において、前記現在画像ブロックの関連ブロックを確定することを含む。
一例において、前記近傍ブロックは、前記現在画像上で前記現在画像ブロックの位置に隣接しまたはある位置ピッチを有する画像ブロックである。
一例において、前記の前記関連ブロックの動きベクトルに基づき前記現在画像ブロックを予測することは、
前記関連ブロックの参照画像が特定参照画像、または現在画像ブロックの参照画像が特定参照画像である時、処理後の前記関連ブロックの動きベクトルと前記現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定することを含む。
ここでは、前記処理後の前記関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである。
一例において、前記処理後の前記関連ブロックの動きベクトルは、
数値が１の縮尺で前記関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、
スケーリングステップをスキップした前記関連ブロックの動きベクトルを含む。
一例において、前記の前記関連ブロックの動きベクトルに基づき前記現在画像ブロックを予測することは、
前記関連ブロックの参照画像が特定参照画像、または現在のブロックの参照画像が特定参照画像である時、前記関連ブロックの動きベクトルに基づき現在画像ブロックの参照ブロックを確定することを放棄することを含む。
一例において、構築モジュールはさらに、前記近傍ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、処理後の前記関連ブロックの動きベクトルと前記現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定するために用いられる。
ここでは、前記処理後の前記関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである。
一例において、前記処理後の前記関連ブロックの動きベクトルは、
数値が１の縮尺で前記関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、
スケーリングステップをスキップした前記関連ブロックの動きベクトルを含む。
一例において、前記の前記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、前記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測することは、
前記関連ブロック中の各サブ画像ブロックの動きベクトルを、それぞれ前記現在画像ブロック中に対応するサブ画像ブロックの動きベクトルとすることを含む。
一例において、前記の前記現在画像ブロックの関連ブロックに基づき、前記現在画像ブロックの動きベクトル第１候補リスト中の特定候補を確定することは、
前記現在画像ブロックの関連ブロックの代表動きベクトルを前記特定候補として前記動きベクトル第１候補リストに入れることを含む。
一例において、前記関連ブロックの代表動きベクトルを１つ目の候補として動きベクトル第１候補リストに入れる。
一例において、前記関連ブロックの代表動きベクトルは前記関連ブロックの中央位置の動きベクトルを含む。
一例において、予測モジュールはさらに、前記関連ブロック中に取得不可な動きベクトルのサブ画像ブロックが出た時、前記関連ブロックの代表動きベクトルを前記取得不可な動きベクトルのサブ画像ブロックの動きベクトルとし、前記現在画像ブロック中の対応するサブ画像ブロックを予測するために用いられる。
一例において、予測モジュールはさらに、前記関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出ており、かつ前記関連ブロックの代表動きベクトルが取得不可である場合、前記関連ブロック中各サブ画像ブロックの動きベクトルに基づきそれぞれ前記現在画像ブロック中対応するサブ画像ブロックを予測することを放棄するために用いられる。
一例において、予測モジュールはさらに、前記関連ブロック中のサブ画像ブロックが取得不可であり、または関連ブロック中のサブ画像ブロックがフレーム内符号化モードを用いる時、該関連ブロックに動きベクトルが取得不可なサブ画像ブロックが出たことを確定するために用いられる。
一例において、予測モジュールはさらに、前記動きベクトル第２候補リスト中の前記特定候補以外のそのうちの１つの候補を採用することを確定する場合、アフィン変換モデルに基づき前記採用した候補にアフィン変換を行い、
前記アフィン変換後の候補に基づき前記現在画像ブロック中のサブ画像ブロックを予測することとのために用いられる。
一例において、前記動きベクトル第２候補リスト中の前記特定候補以外の少なくとも１つの候補において、各候補は一組のコントロールポイントの動きベクトルを含む。
一例において、前記アフィン変換モデルは４パラメータアフィン変換モデルを含む場合、前記少なくとも１つの候補において、各候補は２つのコントロールポイントの動きベクトルを含み、
前記アフィン変換モデルは６パラメータアフィン変換モデルを含む場合、前記少なくとも１つの候補において、各候補は３つのコントロールポイントの動きベクトルを含む。
一例において、予測モジュールはさらに、前記現在画像ブロックの近傍ブロックから、特定走査順でアフィン変換モードを採用して予測を行う近傍ブロックのコントロールポイント動きベクトル群を確定し、
それぞれの確定された近傍ブロックのコントロールポイント動きベクトル群を１つの候補として前記動きベクトル第１候補リストに入れるために用いられる。
一例において、前記の前記現在画像ブロックの近傍ブロックから、特定の走査順に応じてアフィン変換モードで予測する近傍ブロックのコントロールポイント動きベクトル群を確定することは、
前記現在画像ブロックの左側近傍ブロックにおいて第１走査順で第１近傍ブロックのコントロールポイント動きベクトル群を確定することと、
前記現在画像ブロックの上側近傍ブロックにおいて第２走査順で第２近傍ブロックのコントロールポイント動きベクトル群を確定することと、
前記第１近傍ブロックのコントロールポイントの動きベクトル群と前記第２近傍ブロックのコントロールポイントの動きベクトル群を前記動きベクトルの第１候補リストに入れることと、を含む。
一例において、構築モジュールはさらに、前記現在画像ブロックの一部のコントロールポイントの近傍ブロックに基づき前記一部のコントロールポイントの動きベクトルを構築し、
前記現在画像ブロックの一部のコントロールポイントの動きベクトルを前記動きベクトル第１候補リストに入れるために用いられる。
一例において、前記現在画像ブロックの一部のコントロールポイントの近傍ブロックに基づいて前記一部のコントロールポイントの動きベクトルを構築することは、
前記一部のコントロールポイントにおける各コントロールポイントに対し、第三走査順で前記コントロールポイントの特定近傍ブロックを順次走査し、事前設定条件を満たす特定近傍ブロックの動きベクトルを前記コントロールポイントの動きベクトルとすることを含む。
一例において、構築モジュールはさらに以、前記一部のコントロールポイントの動きベクトルがそれぞれ異なる参照フレームを指す場合、前記現在画像ブロックの一部のコントロールポイントの動きベクトルを前記動きベクトル第１候補リストに入れることを放棄するために用いられる。
一例において、構築モジュールはさらに、前記動きベクトル第１候補リスト中の候補の数量が予め設定された数値より大きい時、前記現在画像ブロックの一部のコントロールポイントの動きベクトルを前記動きベクトル第１候補リストに入れることを放棄するために用いられる。
一例において、構築モジュールはさらに、動きベクトル第２候補リストを構築すし、ここでは、前記動きベクトル第２候補リストに入れられる候補は１つの画像ブロックの動きベクトルであり、
前記動きベクトル第２候補リスト中の候補を採用することを確定した場合、前記候補の動きベクトルに基づき前記現在画像ブロックの動きベクトルを確定するために用いられる。
一例において、前記の前記候補の動きベクトルに基づき前記現在画像ブロックの動きベクトルを確定することは、
前記の採用することを確定した候補を前記現在画像ブロックの動きベクトルとし、または前記採用することを確定した候補をスケーリングした後に前記現在画像ブロックの動きベクトルとすることを含む。
一例において、前記構築動きベクトル第２候補リストは、
前記現在画像ブロックの現在画像上でのＭ個の近傍ブロックの動きベクトルに基づき前記動きベクトル第２候補リストに入れる前記Ｍ個の候補を確定することを含む。
一例において、構築モジュールはさらに、め設定された順で順に前記予め設定されたＭ個の近傍ブロックの動きベクトルをそれぞれＭ個の候補として、前記動きベクトル第２候補リストに入れるために用いられ、
前記Ｎ個の近傍ブロックとは、前記予め設定された順で最初に確定されたＮ個の近傍ブロックを指す。
一例において、構築モジュールはさらに、前記Ｍ個の近傍ブロック中の１つのまたは複数の近傍ブロックの動きベクトルが取得不可である場合、前記１つのまたは複数の近傍ブロックの動きベクトルに基づき前記動きベクトル第２候補リストに入れる候補を確定することを放棄するために用いられる。
一例において、Ｍは４以下である。
図１８に示すように、本出願の実施例は動画像処理方法１８００をさらに提供し、該方法は以下のステップを含む。
Ｓ１８１０、ベース動きベクトルリストを確定し、該ベース動きベクトルリストには少なくとも１つの双予測ベース動きベクトル群を含み、該双予測ベース動きベクトル群には第１ベース動きベクトルと第２ベース動きベクトルとを含む。
Ｓ１８２０、予め設定されたずれ量セットから二つの動きベクトルずれ量を確定し、該二つの動きベクトルずれ量はそれぞれ該第１ベース動きベクトルと該第２ベース動きベクトルに対応させる。
Ｓ１８３０、該第１ベース動きベクトル、該第２ベース動きベクトルと該二つの動きベクトルずれ量に基づき、現在画像ブロックの動きベクトルを確定する。
Ｓ１８４０、該現在画像ブロックの動きベクトルに基づき該現在画像ブロックを予測する。
本出願の実施例の動画像処理方法は、予め設定されたずれ量セットに基づき、双予測ベース動きベクトル群のベース動きベクトルをずらし、有限回の計算により現在画像ブロックのより正確な動きベクトルを得ることができ、予測した残差をより小さくすることができ、それにより符号化効率を向上させることができる。
いくつかの実施例において、本出願の実施例の動画像処理方法はマージ動きベクトル差分（Ｍｅｒｇｅ ｗｉｔｈ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ、ＭＭＶＤ）技術を改善するために用いることができ、それは最終動きベクトル表現（Ｕｌｔｉｍａｔｅ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｅｘｐｒｅｓｓｉｏｎ、ＵＭＶＥ）技術とも呼ばれる。特に、ＭＭＶＤ技術のマージ（ｍｅｒｇｅ）候補リスト（ｍｅｒｇｅ ｌｉｓｔ）の構築に応用され、それは動きベクトル候補リストとも呼ばれる。
いくつかの実施例において、Ｓ１８１０の前に、動画像処理方法１８００はさらに、マージ候補リストを取得するステップを含むことができ、前記マージ候補リストにはＰ組のマージ動きベクトル候補が含まれ、ここでは、Ｐは１以上の整数である。ベース動きベクトルリストを確定するＳ１８１０は、前記マージ候補リストに基づき、前記ベース動きベクトルリストを確定することを含むことができる。例えば、Ｐが２以上の場合、前記マージ候補リストのうちの２組のマージ動きベクトル候補を取って前記ベース動きベクトルリストを形成する。任意選択的に、該２組のマージ動きベクトル候補はマージ候補リストのうちの前の２組のマージ動きベクトル候補であってもよく、前の２組のマージ動きベクトル候補が条件に符合しない場合、他の２組のマージ動きベクトル候補であってもよい。または、該２組マージ動きベクトル候補はマージ候補リスト中の条件に符合する任意の２組のマージ動きベクトル候補であってもよく、本出願の実施例はこれに対して限定しない。また、例えば、Ｐが２より小さい時、動きベクトル（０，０）で充填して前記ベース動きベクトルリストが形成される。
具体的に、該ＭＭＶＤ技術はまず、既存のｍｅｒｇｅ候補リスト（または前文で説明される異なるタイプモードで取得された各種の動きベクトル候補リスト）中のマージ動きベクトル候補（ｃａｎｄｉｄａｔｅ）を利用してベース動きベクトルリスト（ｂａｓｅ ＭＶＰ ｌｉｓｔ）を構築することであってもよい。例えば、既存のｍｅｒｇｅ候補リスト（ｍｅｒｇｅ ｌｉｓｔ）中のマージ動きベクトル候補を全探索し、既存のｍｅｒｇｅ ｌｉｓｔ中のマージ動きベクトルｃａｎｄｉｄａｔｅの組数が２より大きい場合、ｍｅｒｇｅ ｌｉｓｔの前の２組のマージ動きベクトルｃａｎｄｉｄａｔｅを取ってＭＭＶＤのｂａｓｅ ＭＶＰ ｌｉｓｔを形成する。そうではない場合、ＭＶ（０，０）を使用して充填してＭＭＶＤのｂａｓｅ ＭＶＰ ｌｉｓｔを形成する。本出願の実施例において、他のディフォルト動きベクトルで充填してベース動きベクトルリストを形成してもよく、例えば（１，１）、（２，２）などであり、本出願の実施例はこれに対して限定しない。
ｂａｓｅ ＭＶＰ ｌｉｓｔに含まれる２組のベースＭＶのうち、各組のベースＭＶは一方向予測のベース動きベクトルであってもよいし、双予測のベース動きベクトル群であってもよいことを理解されたい。当然ながら、ｂａｓｅ ＭＶＰ ｌｉｓｔにはさらに多い組またはさらに小さい組のベースＭＶを含んでもよく、本出願はこれに対して限定しない。本明細書では、双予測ベース動きベクトル群の状況について検討し、双予測ベース動きベクトル組に含まれる２つのベース動きベクトルは、前方向ベース動きベクトルと後方向ベース動きベクトルであってもよく、同じ方向の２つのベース動きベクトル、例えば、２つの前方向ベース動きベクトルまたは２つの前方向ベース動きベクトルであってもよい。
任意選択的に、いくつかの実施例において、予め設定されたずれ量セットから二つの動きベクトルずれ量を確定するＳ１８２０は、前記ずれ量セットから二つの動きベクトルずれ量を含む複数組の動きベクトルずれ量のセットを確定することを含むことができ、前記第１ベース動きベクトル、前記第２ベース動きベクトルと前記二つのの動きベクトルずれ量に基づき、現在画像ブロックの動きベクトルを確定するＳ１８３０は、前記複数組動きベクトルずれ量セットからレート歪み損失が事前設定条件を満たすようにする動きベクトルずれ量セットを確定し、前記第１ベース動きベクトル、前記第２ベース動きベクトルと前記レート歪み損失が事前設定条件を満たすようにする動きベクトルずれ量セットに基づき、現在画像ブロックの動きベクトルを確定することを含むことができる。任意選択的に、レート歪み損失は事前設定条件を満たすことは、レート歪み損失が予め設定された閾値より小さく、またはレート歪み損失が最も小さく、例えば予測残差が最も小さいことなどであってもよく、本出願の実施例はこれに対して限定しない。
本出願の実施例において、ＭＭＶＤ技術は、ある規則に従ってベース動きベクトル予測値をずらし、新しい動きベクトル予測候補を発生させてＭＭＶＤ動きベクトル予測値として、ＭＭＶＤ動きベクトル候補リストに入れることができる。任意選択的に、いくつかの実施例において、ずれ量セット中の動きベクトルずれ量（ｏｆｆｓｅｔ）は８つの選択（２１，２２，……，２８）を有してもよく、すなわち予め設定されたずれ量セットは｛２，４，８，１６，３２，６４，１２８，２５６｝である。例えば、ｂａｓｅ ＭＶＰ ｌｉｓｔ中のベース動きベクトル（ベース動きベクトルｃａｎｄｉｄａｔｅとも呼ばれる）の組数が２であり、動きベクトルずれ量（ｏｆｆｓｅｔ）は８つの選択（２１，２２，……，２８）を有する。ＭＭＶＤのｂａｓｅ ＭＶＰ ｌｉｓｔ中の１組のベースＭＶの２つの成分ＭＶ＿ｘ， ＭＶ＿ｙに対し、それに（２つの選択）動きベクトルｏｆｆｓｅｔを加えたり、減算したりすることができる。具体的に、例えば、ＭＭＶＤ動きベクトル予測値＝ベース動きベクトル予測値＋動きベクトルずれ量ｏｆｆｓｅｔである。したがって、ＭＭＶＤの現在画像ブロックの動きベクトルは合わせて２ｘ８ｘ２ｘ２＝６４種の改良（ｒｅｆｉｎｅ）モードを有する。本出願の実施例は、６４種の改善モードから一部を選択してもよいし、又は６４種類の改善モードからより多くの改善モードを導出してもよいが、６４種の改善モードに限定されるものではない。例えば、改良モード数は３２種、１２８種などとすることができるが、本出願の実施例はこれに限定されない。これらの動きベクトルから、レート歪み損失が事前設定条件を満たすようにする動きベクトルを、符号化および／または復号化の際に現在画像ブロックの動きベクトルとして確定する。
別の観点から見ると、レート歪み損失が事前設定条件を満たすようにする動きベクトルを確定することは、前記複数セットの動きベクトルずれ量のセットの中から、レート歪み損失が事前設定条件を満たすようにする動きベクトルずれ量のセットを確定することに等価であってもよい。前記第１のベース動きベクトルと、前記第２のベース動きベクトルと、前記レート歪み損失が事前設定条件を満たすようにする動きベクトルずれ量のセットに基づき、現在画像ブロックの動きベクトルを確定する。
動きベクトルずれ量セットにおける２つの動きベクトルずれ量は、同一であっても異なってもよいことを理解されたい。
任意選択的に、二つの動きベクトルずれ量を含む複数組の動きベクトルずれ量の組み合わせセットは、予め設定されたずれ量セット中の動きベクトルずれ量を全探索して、複数組動きベクトルずれ量の組み合わせを形成することができる。
または、複数組の動きベクトルずれ量の組み合わせ中のそのうち１つの動きベクトルずれ量は、予め設定されたアルゴリズムによって計算して得られたずれ量セット中の１つの動きベクトルずれ量であってもよく、該計算で得られた動きベクトルずれ量を１つの固定値として、ずれ量セット中の動きベクトルずれ量を全探索して複数組の動きベクトルずれ量の組み合わせ中の別の動きベクトルずれ量として、複数組の動きベクトルずれ量の組み合わせを形成する。スケーリング操作（縮尺が１のスケーリング操作）をせず、簡単な全探索して適当な動きベクトルずれ量の組み合わせを探し、全体的に演算量を減らし、符号化／復号効率を向上させることができる。
または、複数組の動きベクトルずれ量の組み合わせ中のそのうち１つの動きベクトルずれ量は、予め設定されたアルゴリズムによって計算して得られたずれ量セット中の１つの動きベクトルずれ量であってもよく、該計算で得られた動きベクトルずれ量を１つの固定値として、該固定値をスケーリングして複数組の動きベクトルずれ量の組み合わせ中の別の動きベクトルずれ量を得て、複数組の動きベクトルずれ量の組み合わせを形成する。
または、２つの動きベクトルずれ量を含む複数組の動きベクトルずれ量の組み合わせは他の方式で形成することもでき、本出願の実施例はこれに大して限定しない。
任意選択的に、いくつかの実施例において、当前記第１ベース動きベクトルと第２ベース動きベクトルがいずれも非特定参照画像を指す時、選択した動きベクトルずれ量にスケーリング操作をした後に新しい動きベクトルずれ量を得ることができる。また、新しい動きベクトルずれ量によって第１ベース動きベクトルと第２ベース動きベクトルを調整する。第１ベース動きベクトル、第２ベース動きベクトルと二つの新しい動きベクトルずれ量に基づき、すなわち調整された現在画像ブロックの動きベクトルを確定し、前記現在画像ブロックの動きベクトルに基づき前記現在画像ブロックを予測する。つまり、双予測において、ＭＭＶＤ技術により現在画像ブロックの動きベクトル予測値を確定する際に、現在画像から２つのベース動きベクトルの参照画像までの距離が異なる場合に、動きベクトルずれ量をスケーリングし、続いてスケーリング後の動きベクトルずれ量をベース動きベクトル予測値に加算（または減算）して現在画像ブロックの動きベクトルを確定する必要がある。
前記第１ベース動きベクトルと第２ベース動きベクトルはいずれも非特定参照画像を指す場合、前記二つの動きベクトルずれ量は、前記二つの動きベクトルずれ量に基づき前記第１ベース動きベクトルと第２ベース動きベクトルを調整するために用いられる。任意選択的に、前記現在画像から前記第１ベース動きベクトルの参照画像までの距離と前記現在画像から前記第２ベース動きベクトルの参照画像までの距離との比は、前記第１ベース動きベクトルが使用する動きベクトルずれ量と前記第２ベース動きベクトルが使用する動きベクトルずれ量との比に等しい。換言すれば、縮尺は現在画像ブロック（例えば第１画像ブロック）が位置する画像と現在画像ブロックの二つの参考方向での参照画像との間の距離で確定され、この二つの参照画像は現在ベース動きベクトルの参照画像である。該実施形態は、さらに、試みる動きベクトルずれ量の組み合わせの数を減らすことができ、符号化および復号効率をさらに向上させることができる。
調整は、２つの動きベクトルずれ量をそれぞれ第１ベース動きベクトルおよび第２ベース動きベクトルに加算することであってもよいし、または、２つの動きベクトルずれ量をそれぞれ第１ベース動きベクトルおよび第２ベース動きベクトルに減算することであってもよい。
例えば、符号化または復号プロセスにおいて、選択可能な動きベクトルずれ量には｛２，４，８，１６，３２，６４，１２８，２５６｝という８つの選択がある。現在のプロセスで選択した動きベクトルずれ量をＸと記す。現在画像のフレーム番号をＰ２と記し、第１ベース動きベクトルの参照画像のフレーム番号、第２ベース動きベクトルの参照画像のフレーム番号をそれぞれＰ０、Ｐ１と記す。Ｐ２－Ｐ０＝Ｐ２－Ｐ１であれば、二つのベース動きベクトルに同じサイズの動きベクトルずれ量Ｘを加える。Ｐ２－Ｐ０＝２＊（Ｐ２－Ｐ１）であれば、第１ベース動きベクトル上に動きベクトルずれ量２＊Ｘを加え、第２ベース動きベクトル上に動きベクトルずれ量Ｘを加え、同様に、Ｐ２－Ｐ１＝２＊（Ｐ２－Ｐ０）であれば、第１ベース動きベクトル上に動きベクトルずれ量Ｘを加え、第２ベース動きベクトル上に動きベクトルずれ量２＊Ｘを加える。
また、現在画像から第１ベース動きベクトルの参照画像までの距離と現在画像から第２ベース動きベクトルの参照画像までの距離との比は２の倍数でなければ、適当な比（２の倍数）を選択して、第１ベース動きベクトルが使用する動きベクトルずれ量と第２ベース動きベクトルが使用する動きベクトルずれ量との比が現在画像から第１ベース動きベクトルの参照画像までの距離と現在画像から第２ベース動きベクトルの参照画像までの距離との比に可能な限り近い。例えば、Ｐ２－Ｐ０＝３＊Ｐ２－Ｐ１）であれば、比が２または４を選択する。第１ベース動きベクトル上に動きベクトルずれ量２＊Ｘを加え、第２ベース動きベクトル上に動きベクトルずれ量Ｘを加え、または、第１ベース動きベクトル上に動きベクトルずれ量４＊Ｘを加え、第２ベース動きベクトル上に動きベクトルずれ量Ｘを加える。また、例えば、Ｐ２－Ｐ０＝５＊（Ｐ２－Ｐ１）の場合、比は５に最も近い２の倍数４を選択する。第１ベース動きベクトル上に動きベクトルずれ量４＊Ｘを加え、第２ベース動きベクトル上に動きベクトルずれ量Ｘを加える。
前記第１ベース動きベクトルおよび／または第２ベース動きベクトルが、特定参照画像を指す場合（すなわち、現在画像ブロックの参照画像が特定参照画像である時）、特定参照画像と現在画像ブロックとの時間距離の定義が曖昧であるため、動きベクトルずれ量量に対するスケーリングに意味がない。
任意選択的に、いくつかの実施例において、前記第１ベース動きベクトルおよび／または第２ベース動きベクトルが特定参照画像を指す時、前記二つの動きベクトルずれ量中の少なくとも１つの動きベクトルずれ量は、数値１の縮尺で初始動きベクトルずれ量をスケーリングした後に得られた動きベクトルずれ量、または、スケーリング操作をスキップして得られた動きベクトルずれ量を含む。
換言すれば、前記第１ベース動きベクトルおよび／または第２ベース動きベクトルが特定参照画像を指す時、処理後の動きベクトルずれ量とベース動きベクトル群に基づき現在画像ブロックの動きベクトルを確定し、ここでは、処理後の動きベクトルずれ量と処理前の動きベクトルずれ量は同じである。例えば、処理後の二つの動きベクトルずれ量中の少なくとも１つの動きベクトルずれ量は、数値１の縮尺で初始動きベクトルずれ量を行スケーリングした後に得られた動きベクトルずれ量、または、スケーリング操作をスキップして得られた動きベクトルずれ量を含む。
１つの具体の実施例において、二つの動きベクトルずれ量中のある動きベクトルずれ量（例えばｏｆｆｓｅｔ１）は予め設定されたアルゴリズムによって算出されたものである。第１ベース動きベクトルが特定参照画像を指し、または第２ベース動きベクトルあ特定参照画像を指し、または第１ベース動きベクトルと第２ベース動きベクトルがいずれも特定参照画像を指す時、別の動きベクトルずれ量（例えばｏｆｆｓｅｔ２）はｏｆｆｓｅｔ１は縮尺１でスケーリングすることで得られたものであってもよく、またはｏｆｆｓｅｔ１にスケーリング操作をせず得られたものであってもよい。または、別のモーションベクトルのずれ量（たとえば、ｏｆｆｓｅｔ２）は、ある初期ずれ量に対して縮尺１でスケーリングするか、またはスケーリング操作をしないすることで得られたものであってもよい。言い換えれば、初期動きベクトルずれ量はｏｆｆｓｅｔ１であってもよいし、他の初期ずれ量であってもよく、本出願の実施例はこれに対して限定しない。
本出願のいくつかの実施例において、該方法は符号化側によって実行され、該方法はさらに、予測の結果に基づき符号化を行い、復号側にコードストリームを送信することを含み、前記コードストリームには、レート歪み損失が事前設定条件を満たすようにする動きベクトルずれ量に組み合わせになるように指示するためのインデックスが含まれる。該実施例において、符号化側は、確定された動きベクトルずれ量の組み合わせのインデックスを復号側に通知し、これにより、復号側は、少ない計算で２つの動きベクトルずれ量を知ることができ、復号側を簡略化することができる。任意選択的に、二つの動きベクトルずれ量中のある動きベクトルずれ量（たとえば、ｏｆｆｓｅｔ１）がプリセットアルゴリズムによって算出できる場合、該インデックスは、別の動きベクトルずれ量（たとえば、ｏｆｆｓｅｔ２）とｏｆｆｓｅｔ１の比であってもよい。
本出願のいくつかの実施例において、方法は復号側によって実行され、該方法はさらに、符号化側によって送信されたコードストリームを受信することを含み、前記コードストリームは、２つの動きベクトルずれ量に組み合わせになるように指示するためのインデックスを含み、前記プリセットされたずれ量のセットから２つの動きベクトルずれ量を確定することは、前記インデックスに基づき前記２つの動きベクトルずれ量を確定することを含む。該実施例において、符号化側は、確定された動きベクトルずれ量の組み合わせのインデックスを復号側に通知し、これにより、復号側は、少ない計算で２つの動きベクトルずれ量を知ることができ、復号側を簡略化することができる。任意選択的に、二つの動きベクトルずれ量のある動きベクトルずれ量（たとえば、ｏｆｆｓｅｔ１）がプリセットアルゴリズムによって算出できる場合、該インデックスは、別の動きベクトルずれ量（たとえば、ｏｆｆｓｅｔ２）とｏｆｆｓｅｔ１の比であってもよい。
以上、図１および図１８に関連して、本出願の方法の実施例を説明した。以下、上記方法の実施例に対応する装置の実施例について説明する。なお、装置の実施例の説明は、方法の実施の形態の説明と互いに対応しているので、詳細に説明されていないものについては、上記の方法の実施例を参照してもよい。簡単のために、ここでは、再び説明しない
図１９は本出願の実施例によって提供される動画像処理装置１９００の概略的ブロック図である。該装置１９００は図１８に示される方法の実施例を実行するために用いられる。該装置１９００は、
ベース動きベクトルリストを確定し、前記ベース動きベクトルリストには少なくとも１つの双予測ベース動きベクトル群を含み、前記双予測ベース動きベクトル群には第１ベース動きベクトルと第２ベース動きベクトルを含み、予め設定されたずれ量セットから二つの動きベクトルずれ量を確定し、前記二つの動きベクトルずれ量はそれぞれ前記第１ベース動きベクトルと前記第２ベース動きベクトルに対応し、前記第１ベース動きベクトル、前記第２ベース動きベクトルと前記二つの動きベクトルずれ量に基づき、現在画像ブロックの動きベクトルを確定するために用いられる構築モジュール１９１０と、
前記現在画像ブロックの動きベクトルに基づき前記現在画像ブロックを予測するために用いられる予測モジュール１９２０とを含む。
本出願の実施例の動画像処理装置は、予め設定されたずれ量セットに基づき、双予測ベース動きベクトル群のベース動きベクトルをずらし、有限回の計算により現在画像ブロックのより正確な動きベクトルを得ることができ、予測した残差をより小さくすることができ、それにより符号化効率を向上させることができる。
任意選択的に、いくつかの実施例において、前記構築モジュール１９１０が予め設定されたずれ量セットから２つの動きベクトルずれ量を確定することは、前記構築モジュールが前記ずれ量セットから２つの動きベクトルずれ量を含む複数組の動きベクトルずれ量の組み合わせを確定することを含み、前記構築モジュール１９１０が前記第１ベース動きベクトル、前記第２ベース動きベクトルと前記２つの動きベクトルずれ量に基づいて、現在画像ブロックの動きベクトルを確定することは、前記構築モジュール１９１０が前記複数組の動きベクトルずれ量の組み合わせからレートひずみ損失が所定の条件を満たす動きベクトルずれ量の組み合わせを確定し、前記第１ベース動きベクトル、前記第２ベース動きベクトルと前記レートひずみ損失が所定の条件を満たすようにする動きベクトルずれ量の組み合わせに基づいて、現在画像ブロックの動きベクトルを確定することを含む。
任意選択的に、いくつかの実施例において、動画像処理装置１９００は符号化側に用いられ、動画像処理装置１９００は、予測の結果に基づいてコーティングして復号側にコードストリートを送信するために用いられる送信モジュールをさらに含み、前記コードストリートにはレートひずみ損失が所定の条件を満たすようにする動きベクトルずれ量に組み合わせになるように指示するためのインデックスが含まれる。
任意選択的に、いくつかの実施例において、動画像処理装置１９００は復号側に用いられ、動画像処理装置１９００は、符号化側により送信されたコードストリートを受信するために用いられる受信モジュールをさらに含み、前記コードストリートには２つの動きベクトルずれ量に組み合わせになるように指示するためのインデックスが含まれ、構築モジュール１９１０が予め設定されたずれ量セットから２つの動きベクトルずれ量を確定することは、前記インデックスに基づいて前記２つの動きベクトルずれ量を確定することを含む。
任意選択的に、いくつかの実施例において、前記第１ベース動きベクトルおよび／または第２ベース動きベクトルが特定参照画像を指す時、前記二つの動きベクトルずれ量中の少なくとも１つの動きベクトルずれ量は、数値１の縮尺で初始動きベクトルずれ量をスケーリングした後に得られた動きベクトルずれ量、または、スケーリング操作をスキップして得られた動きベクトルずれ量を含む。
任意選択的に、いくつかの実施例において、前記第１ベース動きベクトルと第２ベース動きベクトルはいずれも非特定参照画像を指す場合、前記二つの動きベクトルずれ量は、前記二つの動きベクトルずれ量に基づき前記第１ベース動きベクトルと第２ベース動きベクトルを調整するために用いられる。
任意選択的に、いくつかの実施例において、前記現在画像から前記第１ベース動きベクトルの参照画像までの距離と前記現在画像から前記第２ベース動きベクトルの参照画像までの距離との比は、前記第１ベース動きベクトルが使用する動きベクトルずれ量と前記第２ベース動きベクトルが使用する動きベクトルずれ量との比に等しい。
任意選択的に、いくつかの実施例において、前記構築モジュール１９１０はさらに、マージ候補リストを取得するために用いられ、前記マージ候補リストにはＰ組のマージ動きベクトル候補が含まれ、ここでは、Ｐは１以上の整数であり、前記構築モジュール１９１０がベース動きベクトルリストを確定することは、前記構築モジュール１９１０が前記マージ候補リストに基づいて、前記ベース動きベクトルリストを確定することを含む。
任意選択的に、いくつかの実施例において、前記構築モジュール１９１０が前記マージ候補リストに基づいて、前記ベース動きベクトルリストを確定することは、Ｐは２以上である場合、前記構築モジュール１９１０が前記マージ候補リストの中の前の２組のマージ動きベクトル候補を取って前記ベース動きベクトルリストを形成することを含む。
任意選択的に、いくつかの実施例において、前記構築モジュール１９１０が前記マージ候補リストに基づいて、前記ベース動きベクトルリストを確定することは、Ｐは２より小さい場合、前記構築モジュール１９１０が動きベクトル（０，０）で充填して前記ベース動きベクトルリストを形成することを含む。
任意選択的に、いくつかの実施例において、前記予め設定されたずれ量セットは｛２，４，８，１６，３２，６４，１２８，２５６｝である。
任意選択的に、いくつかの実施例において、前記現在画像ブロックは１つの符号化ユニットＣＵである。
任意選択的に、いくつかの実施例において、前記現在画像ブロックは双予測画像ブロックである。
図２０は本出願の実施例によって提供される動画像処理装置の概略的ブロック図である。図２０に示される動画像処理装置２０００はプロセッサ２０１０とメモリ２０２０を含むことができ、前記メモリ２０２０中にコンピュータ命令が記憶され、前記プロセッサ２０１０は前記コンピュータ命令を実行する時、前記動画像処理装置２０００に、ベース動きベクトルリストを確定し、前記ベース動きベクトルリストには少なくとも１つの双予測ベース動きベクトル群を含み、前記双予測ベース動きベクトル群には第１ベース動きベクトルと第２ベース動きベクトルを含み、予め設定されたずれ量セットから二つの動きベクトルずれ量を確定し、前記二つの動きベクトルずれ量はそれぞれ前記第１ベース動きベクトルと前記第２ベース動きベクトルに対応し、前記第１ベース動きベクトル、前記第２ベース動きベクトルと前記二つの動きベクトルずれ量に基づき、現在画像ブロックの動きベクトルを確定し、前記現在画像ブロックの動きベクトルに基づき前記現在画像ブロックを予測するステップを実行させる。
なお、本出願の実施例の動画像処理装置２０００はさらに、コードストリームを伝送するためのネットワークインターフェースを含むことができる。例えば、符号化装置から送信したコードストリームを受信する。
本出願のいくつかの実施例において、プロセッサ２０１０は予め設定されたずれ量セットから２つの動きベクトルずれ量を確定することは、前記ずれ量セットから２つの動きベクトルずれ量を含む複数組の動きベクトルずれ量の組み合わせを確定することを含み、プロセッサ２０１０が前記第１ベース動きベクトル、前記第２ベース動きベクトルと前記２つの動きベクトルずれ量に基づいて、現在画像ブロックの動きベクトルを確定することは、前記複数組の動きベクトルずれ量の組み合わせからレートひずみ損失が所定の条件を満たすようにする動きベクトルずれ量の組み合わせを確定し、前記第１ベース動きベクトル、前記第２ベース動きベクトルと前記レートひずみ損失が所定の条件を満たすようにする動きベクトルずれ量の組み合わせに基づいて、現在画像ブロックの動きベクトルを確定することを含む。
本出願のいくつかの実施例において、動画像処理装置２０００は符号化側に用いられ、プロセッサ２０１０はさらに、予測の結果に基づいて符号化して復号側にコードストリートを送信するために用いられ、前記コードストリートにはレートひずみ損失が所定の条件を満たすようにする動きベクトルずれ量に組み合わせになるように指示するために用いられるインデックスが含まれる。
本出願のいくつかの実施例において、動画像処理装置２０００は復号側に用いられ、プロセッサ２０１０はさらに、符号化側により送信された符号化ストリームを受信するために用いられ、前記符号化ストリームには２つの動きベクトルずれ量に組み合わせになるように指示するためのインデックスが含まれ、プロセッサ２０１０が予め設定されたずれ量セットから２つの動きベクトルずれ量を確定することは、前記インデックスに基づいて前記２つの動きベクトルずれ量を確定することを含む。
本出願のいくつかの実施例において、前記第１ベース動きベクトルおよび／または第２ベース動きベクトルが特定の参照画像を指す場合、前記２つの動きベクトルずれ量のうちの少なくとも１つの動きベクトルずれ量は、数値が１の縮尺で初期の動きベクトルずれ量に対するスケーリングを行った後得られる動きベクトルずれ量、または、ズーム操作をスキップして得られた動きベクトルずれ量を含む。
本出願のいくつかの実施例において、前記第１ベース動きベクトルと第２ベース動きベクトルがすべて非特定の参照画像を指す場合、前記２つの動きベクトルずれ量は、前記２つの動きベクトルずれ量に基づいて前記第１ベース動きベクトルと第２ベース動きベクトルを調整するために用いられる。
本出願のいくつかの実施例において、前記現在画像から前記第１ベース動きベクトルの参照画像までの距離と前記現在画像から前記第２ベース動きベクトルの参照画像までの距離の比は、前記第１ベース動きベクトルに使用される動きベクトルずれ量と前記第２ベース動きベクトルに使用される動きベクトルずれ量の比と等しい。
本出願のいくつかの実施例において、プロセッサ２０１０はさらに、マージ候補リストを取得するために用いられ、前記マージ候補リストにはＰ組のマージ動きベクトル候補が含まれ、ここでは、Ｐは１以上の整数であり、プロセッサ２０１０がベース動きベクトルリストを確定することは、前記マージ候補リストに基づいて、前記ベース動きベクトルリストを確定することを含む。
本出願のいくつかの実施例において、プロセッサ２０１０が前記マージ候補リストに基づいて、前記ベース動きベクトルリストを確定することは、Ｐは２以上である場合、前記マージ候補リストの中の前の２組のマージ動きベクトル候補を取って前記ベース動きベクトルリストを形成することを含む。
本出願のいくつかの実施例において、プロセッサ２０１０が前記マージ候補リストに基づいて、前記ベース動きベクトルリストを確定することは、Ｐは２より小さい場合、動きベクトル（０，０）で充填して前記ベース動きベクトルリストを形成することを含む。
本出願のいくつかの実施例において、予め設定されたずれ量セットは｛２，４，８，１６，３２，６４，１２８，２５６｝である。
本出願のいくつかの実施例において、現在画像ブロックは１つの符号化ユニットＣＵである。
本出願のいくつかの実施例において、現在画像ブロックは双予測画像ブロックである。
図２０に示すような動画像処理装置２０００または図１９に示すような動画像処理装置１９００は、上記方法の実施例における操作またはフローを実行することができ、動画像処理装置２０００または動画像処理装置１９００における各モジュールとデバイスの操作および／または機能はそれぞれ上記方法の実施例の対応するフローを実現するためのものであり、簡単化のために、ここでは、再び説明しないことを理解されたい。
本出願の実施例は、さらに、動画像処理方法を提供し、ベース動きベクトルリストを確定し、前記ベース動きベクトルリストにはベース動きベクトル群が含まれ、前記ベース動きベクトル群には少なくとも１つのベース動きベクトルが特定の参照画像を指す場合、前記ベース動きベクトル群と動きベクトルずれ量に基づいて前記現在画像ブロックの動きベクトルを確定することを放棄することを含む。すなわち、ベース動きベクトル群には少なくとも１つのベース動きベクトルが特定の参照画像を指す場合、対応する動きベクトルをＭＶ候補リストに入れることを放棄する。
本出願のいくつかの実施例において、マージ候補リストを取得し、前記マージ候補リストにはＰ組のマージ動きベクトル候補が含まれ、ここでは、Ｐは１以上の整数であり、前記のベース動きベクトルリストを確定することは、前記マージ候補リストに基づいて、前記ベース動きベクトルリストを確定することを含む。
本出願のいくつかの実施例において、前記の前記マージ候補リストに基づいて、前記ベース動きベクトルリストを確定することは、Ｐは２以上である場合、前記マージ候補リストの中の前の２組のマージ動きベクトル候補を取って前記ベース動きベクトルリストを形成することを含む。
本出願のいくつかの実施例において、前記の前記マージ候補リストに基づいて、前記ベース動きベクトルリストを確定することは、Ｐは２より小さい場合、動きベクトル（０，０）で充填して前記ベース動きベクトルリストを形成することを含む。
本出願のいくつかの実施例において、前記現在画像ブロックは１つの符号化ユニットＣＵである。
それに応じて、本出願は、動画像処理装置を提供し、ベース動きベクトル群が含まれるベース動きベクトルリストを確定するために用いられる確定モジュールと、前記ベース動きベクトル群には少なくとも１つのベース動きベクトルが特定の参照画像を指す場合、前記ベース動きベクトル群と動きベクトルずれ量に基づいて前記現在画像ブロックの動きベクトルを確定することを放棄するために用いられる処理モジュールと、を含む。
本出願のいくつかの実施例において、前記動画像処理装置は構築モジュールをさらに含み、マージ候補リストを取得するために用いられ、前記マージ候補リストにはＰ組のマージ動きベクトル候補が含まれ、ここでは、Ｐは１以上の整数であり、前記確定モジュールは具体的に、前記マージ候補リストに基づいて、前記ベース動きベクトルリストを確定するために用いられる。
本出願のいくつかの実施例において、前記確定モジュールは具体的に、Ｐは２以上である場合、前記マージ候補リスト中の前の２組のマージ動きベクトル候補を取って前記ベース動きベクトルリストを形成するために用いられる。
本出願のいくつかの実施例において、前記確定モジュールは具体的に、Ｐは２より小さい場合、動きベクトル（０，０）で充填して前記ベース動きベクトルリストを形成するために用いられる。
在本出願のいくつかの実施例において、前記現在画像ブロックは１つの符号化ユニットＣＵである。
本出願は、プロセッサとメモリを含む動画像処理装置をさらに提供し、前記メモリは命令を記憶するために用いられ、前記プロセッサは前記メモリに記憶された命令を実行する時、前記動画像処理装置に、ベース動きベクトルリストを確定し、前記ベース動きベクトルリストにはベース動きベクトル群が含まれ、前記ベース動きベクトル群には少なくとも１つのベース動きベクトルが特定の参照画像を指す場合、前記ベース動きベクトル群と動きベクトルずれ量に基づいて前記現在画像ブロックの動きベクトルを確定することを放棄するステップを実行させる。
本出願の各実施形態に係る装置は、メモリおよびプロセッサに基づき実現することができ、各メモリは、本出願の各実施形態の方法を実行するための命令を記憶するために使用され、プロセッサは、上記の命令を実行し、本出願の各実施形態の方法を実行させることができることを理解されたい。
本明細書の実施例において言及されているプロセッサは、中央処理装置（ｃｅｎｔｒａｌ ｐｒｏｃｅｓｓｉｎｇ ｐｎｉｔ，ＣＰＵ）、ネットワークプロセッサ（ｎｅｔｗｏｒｋ ｐｒｏｃｅｓｓｏｒ，ＮＰ）、またはＣＰＵとＮＰの組み合わせを含むことができることを理解されたい。プロセッサにはハードウェアチップをさらに含むことができる。上記のハードウェアチップは、専用集積回路（ａｐｐｌｉｃａｔｉｏｎ－ｓｐｅｃｉｆｉｃ ｉｎｔｅｇｒａｔｅｄ ｃｉｒｃｕｉｔ，ＡＳＩＣ）、プログラム可能な論理デバイス（ｐｒｏｇｒａｍｍａｂｌｅ ｌｏｇｉｃ ｄｅｖｉｃｅ，ＰＬＤ）、またはそれらの組み合わせであってもよい。上記ＰＬＤは複合プログラマブルロジックデバイス（ｃｏｍｐｌｅｘ ｐｒｏｇｒａｍｍａｂｌｅ ｌｏｇｉｃ ｄｅｖｉｃｅ、ＣＰＬＤ）、フィールドプログラマブルゲートアレイ（ｆｉｅｌｄ－ｐｒｏｇｒａｍｍａｂｌｅ ｇａｔｅ ａｒｒａｙ、ＦＰＧＡ）、汎用アレイロジック（ｇｅｎｅｒｉｃ ａｒｒａｙ ｌｏｇｉｃ、ＧＡＬ）またはその任意の組み合わせであってもよい。
なお、本明細書の実施例において言及されているメモリは、揮発性メモリ（ｖｏｌａｔｉｌｅ ｍｅｍｏｒｙ）または非揮発性メモリ（ｎｏｎ－ｖｏｌａｔｉｌｅ ｍｅｍｏｒｙ）であってもよいし、揮発性メモリと不揮発性メモリの両方を含んでもよい。ここでは、非揮発性メモリは読み取り専用メモリ（ｒｅａｄ－ｏｎｌｙ ｍｅｍｏｒｙ、ＲＯＭ）、プログラマブル読み取り専用メモリ（ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ、ＰＲＯＭ）、消去可能プログラマブル読み取り専用メモリ（ｅｒａｓａｂｌｅ ＰＲＯＭ、ＥＰＲＯＭ）、電気的消去可能プログラマブル読み取り専用メモリ（ｅｌｅｃｔｒｉｃａｌｌｙ ＥＰＲＯＭ、ＥＥＰＲＯＭ）、フラッシュメモリ（ｆｌａｓｈ（登録商標） ｍｅｍｏｒｙ）、ハードディスク（ｈａｒｄ ｄｉｓｋ ｄｒｉｖｅ、ＨＤＤ）またはソリッドステートハードディスク（ｓｏｌｉｄ－ｓｔａｔｅ ｄｒｉｖｅ、ＳＳＤ）であってもよい。揮発性メモリはランダムアクセスメモリ（ｒａｎｄｏｍ ａｃｃｅｓｓ ｍｅｍｏｒｙ、ＲＡＭ）であってもよく、それは外部高速キャッシュとして用いられる。例示的であるが限定的ではく、多くの形式のＲＡＭが使用でき、例えばスタティックランダムアクセスメモリ（ｓｔａｔｉｃ ＲＡＭ、ＳＲＡＭ）、ダイナミックランダムアクセスメモリ（ｄｙｎａｍｉｃ ＲＡＭ、ＤＲＡＭ）、同期ダイナミックランダムアクセスメモリ（ｓｙｎｃｈｒｏｎｏｕｓ ＤＲＡＭ、ＳＤＲＡＭ）、ダブルデータレート同期ダイナミックランダムアクセスメモリ（ｄｏｕｂｌｅ ｄａｔａ ｒａｔｅ ＳＤＲＡＭ、ＤＤＲ ＳＤＲＡＭ）、強化型同期ダイナミックランダムアクセスメモリ（ｅｎｈａｎｃｅｄ ＳＤＲＡＭ、ＥＳＤＲＡＭ）、同期リンクダイナミックランダムアクセスメモリ（ｓｙｎｃｈｌｉｎｋ ＤＲＡＭ、ＳＬＤＲＡＭ）とダイレクトメモリバスランダムアクセスメモリ（ｄｉｒｅｃｔ ｒａｍｂｕｓ ＲＡＭ、ＤＲ ＲＡＭ）である。
なお、プロセッサが通用プロセッサ、ＤＳＰ、ＡＳＩＣ、ＦＰＧＡまたは他のプログラマブルロジックデバイス、ディスクリートゲートまたはトランジスタロジックデバイス、ディスクリートハードウェアコンポーネントである時、メモリ（記憶モジュール）はプロセッサに集積される。
なお、ここで説明するメモリは、これらおよびその他の適切なタイプのメモリを含むことを意図しているが、これらに限定されるものではない。
本出願の実施例は、命令が記憶されたコンピュータ可読記憶媒体をさらに提供し、命令がコンピュータに実行されるとき、前記コンピュータに上記方法の実施例のステップを実行させる。
本出願の実施例は、前記コンピュータ可読記憶媒体を含む計算装置をさらに提供する。
本出願の実施例は、前記コンピュータが前記コンピュータプログラム製品の前記命令を実行する時に、前記コンピュータが前記方法の実施例のステップを実行する、命令を含むコンピュータプログラム製品をさらに提供する。
本出願の実施例は上記方法の実施例のステップをコンピュータに実行させるためのコンピュータチップをさらに提供する。
本出願の実施例は、航空機、特に無人機分野に適用できる。
なお、本出願の各実施例の回路、サブ回路、サブセルの分割は、概略的なものである。当業者であれば、本明細書に開示された実施例に記載された各例の回路、サブ回路、サブユニットは、分割又は組み合わせが可能であることを認識することができる。
本出願の実施例で提供される装置は、ソフトウェア、ハードウェア、ファームウェア、またはそれらの任意の組み合わせにより全部又は一部で実施することができる。ソフトウェアで実現する場合、コンピュータプログラム製品の形で全部或いは一部で実現することができる。前記コンピュータプログラム製品は１つのまたは複数のコンピュータ命令を含む。コンピュータに前記コンピュータ命令をアップロードして実行すると、本出願の実施例による前記プロセス又は機能の全部又は一部が生成される。前記コンピュータは汎用コンピュータ、特殊用途コンピュータ、コンピュータネットワーク、または他プログラマブル装置であってもよい。前記コンピュータ命令は、コンピュータ可読記憶媒体に記憶されてもよく、あるいは、あるコンピュータ可読記憶媒体から別のコンピュータ可読記憶媒体に送信されてもよく、例えば、前記コンピュータ命令は、あるウェブサイト、コンピュータ、サーバ、またはデータセンタから有線（例えば、同軸ケーブル、光ファイバ、デジタル（ｄｉｇｉｔａｌ ｓｕｂｓｃｒｉｂｅｒ ｌｉｎｅ，ＤＳＬ）または無線（例えば、赤外線、無線、マイクロ波など）の方式で別のサイト、コンピュータ、サーバ、またはデータセンタに送信されてもよい。前記コンピュータ可読記憶媒体は、コンピュータがアクセス可能な任意の利用可能な媒体であってもよいし、１つまたは複数の利用可能な媒体が統合されたサーバ、データセンタなどのデータ記憶装置であってもよい。前記利用可能な媒体は磁気媒体（例えば、フロッピーディスク、ハードディスク、テープ）、光媒体（例えば、高密度デジタル・ビデオ・ディスク（ｄｉｇｉｔａｌ ｖｉｄｅｏ ｄｉｓｃ、ＤＶＤ））、または半導体媒体（例えば、ＳＳＤ）などであってもよい。
なお、本明細書に記載されている第１、第２、および種々の数字番号は、記載の便宜上での区別に過ぎず、本出願の範囲を限定するものではないことを理解されたい。
ここで、「および／または」という用語は、単に関連対象の関連関係を記述するものにすぎず、三つの関係が存在できることを表し、例えば、Ａおよび／またはＢは、Ａが単独で存在し、ＡとＢが同時に存在し、Ｂが単独で存在することを表すことができる。また、本明細書における文字「／」は、一般に前後の関連対象が「または」の関係であることを意味する。
なお、本出願の実施例においては、上記各プロセスの番号のサイズは、実行順序の前後を意味するものではなく、各プロセスの実行順序は、その機能および内在するロジックによって確定すべきであり、本出願の実施例の実施プロセスに何ら限定されるものではないことを理解されたい。
当業者であれば、本明細書に開示された実施例に関連して記載された各例のユニットおよびアルゴリズムステップは、電子ハードウェア、又はコンピュータソフトウェアと電子ハードウェアとの組み合わせで実現可能であることを認識することができる。これらの機能がハードウェアで実行されるかソフトウェアで実行されるかは、技術的解決策の特定応用と設計制約に依存する。当業者は、特定応用ごとに異なる方法を使用して、説明されている機能を実現できるが、その実現は本出願の範囲外とは見なすべきではない。
説明の容易さと簡潔さのため、上述したシステム、装置、およびユニットの具体的な動作手順は、上述した方法の実施例における対応する手順を参照すればよく、ここでは説明しない。
本明細書で提供されるいくつかの実施例では、開示されたシステム、装置、および方法は、他の方法で実現可能であることを理解されたい。例えば、以上に記述された装置の実施例は概略的なものであるに過ぎず、例えば、前記ユニットの区分は、論理的機能区分であるに過ぎず、実際に実現する際には他の区分方式があってよく、例えば、複数のユニットまたはアセンブリは結合してもよいか、もしくは、他のシステムに一体化してもよく、または、いくつかの特徴は無視してもよく、または実行しなくてもよい。そして、表示又は検討した相互結合又は直接結合又は通信接続は、いくつかのインタフェース、装置又はユニットを介した間接結合又は通信接続であってもよく、電気的、機械的又は他の形態であってもよい。
前記分離部材として説明したユニットは、物理的に分離しても物理的に分離しなくてもよく、ユニットとして表す部材は、物理ユニットであっても物理ユニットではなくてもよく、すなわち一つの場所に位置してもよいか、又は複数のネットワークユニットに分布してもよい。実際の需要に応じて、そのうちの一部又は全部のユニットを選択して本実施例の解決手段の目的を実現することができる。
また、本明細書の各実施例における各機能ユニットは、１つの処理ユニットに集積されてもよいし、各ユニットが個別に物理的に存在してもよいし、２つ以上のユニットが１つのユニットに集積されてもよい。
以上のように、本出願の発明を実施するための形態にすぎず、本出願の保護範囲は、これに限定されるものではなく、当業者であれば、本出願において開示されている技術範囲内において、容易に変更又は交換を行うことができるものであれば、本出願の保護範囲内に含まれるものである。したがって、本出願の保護範囲は、特許請求の範囲に準じるものとする。
［項目１］
動画像処理方法であって、
現在画像ブロックの予め設定されたＭ個の近傍ブロックのうち、Ｍよりも小さいＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することと、
上記対象近傍ブロックの動きベクトル、上記現在画像ブロック、および上記現在画像ブロックの参照画像に基づき、上記現在画像ブロックの関連ブロックを確定することと、
上記現在画像ブロックと上記関連ブロックを同じ方法で複数のサブ画像ブロックに分割し、上記現在画像ブロック中の各サブ画像ブロックは、上記関連ブロック中の各サブ画像ブロックと１対１に対応させることと、
上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、上記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測することとを含む、動画像処理方法。
［項目２］
Ｎは１または２に等しい、項目１に記載の方法。
［項目３］
上記の上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づきそれぞれ上記現在画像ブロック中の対応するサブ画像ブロックを予測する前に、
上記関連ブロックの代表動きベクトルを候補として動きベクトル第１候補リストに入れることと、
上記候補を採用すると確定した場合、上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、上記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測することとをさらに含むことを特徴する項目１または２に記載の方法。
［項目４］
上記の上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、上記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測することは、
上記関連ブロック中の各サブ画像ブロックの動きベクトルを、それぞれ上記現在画像ブロック中の対応するサブ画像ブロックの動きベクトルとすることを含む、項目３に記載の方法。
［項目５］
上記関連ブロックの代表動きベクトルを１つ目の候補として動きベクトル第１候補リストに入れる、項目３に記載の方法。
［項目６］
上記関連ブロックの代表動きベクトルは上記関連ブロックの中央位置の動きベクトルを含む、項目３に記載の方法。
［項目７］
上記方法は、
上記関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出た場合、上記関連ブロックの代表動きベクトルを上記動きベクトルが取得不可なサブ画像ブロックの動きベクトルとし、上記現在画像ブロック中の対応するサブ画像ブロックを予測することをさらに含む、項目３に記載の方法。
［項目８］
上記方法は、
上記関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出ており、かつ上記関連ブロックの代表動きベクトルが取得不可な場合、上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき上記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測することを放棄することをさらに含む、項目７に記載の方法。
［項目９］
上記関連ブロック中のサブ画像ブロックが取得不可であり、または関連ブロック中のサブ画像ブロックがフレーム内符号化モードを用いる場合、上記関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出たことを確定する、項目８に記載の方法。
［項目１０］
上記方法は、
他の候補を確定し、上記他の候補を上記動きベクトル第１候補リストに入れることをさらに含み、上記他の候補中の少なくとも１つの候補はサブ画像ブロックの動きベクトルを含む、項目３に記載の方法。
［項目１１］
上記方法は、
上記他の候補のうちの１つの候補を採用することを確定した場合、上記採用した候補に基づき上記現在画像ブロック中のサブ画像ブロックの動きベクトルを確定することをさらに含む、項目１０に記載の方法。
［項目１２］
上記少なくとも１つの候補は一組のコントロールポイントの動きベクトルを含む、項目１０または１１に記載の方法。
［項目１３］
上記方法は、
上記少なくとも１つの候補中の候補を採用することを確定する場合、アフィン変換モデルに基づき上記採用した候補にアフィン変換を行うことと、
上記アフィン変換後の候補に基づき上記現在画像ブロック中のサブ画像ブロックを予測することとをさらに含む、項目１０～１２のいずれか一項に記載の方法。
［項目１４］
上記アフィン変換モデルは４パラメータアフィン変換モデルを含む場合、上記少なくとも１つの候補において、各候補は２つのコントロールポイントの動きベクトルを含み、
上記アフィン変換モデルは６パラメータアフィン変換モデルを含む場合、上記少なくとも１つの候補において、各候補は３つのコントロールポイントの動きベクトルを含む、項目１３に記載の方法。
［項目１５］
上記方法は、
上記現在画像ブロックの近傍ブロックから、特定走査順でアフィン変換モードを採用して予測を行う近傍ブロックのコントロールポイント動きベクトル群を確定することと、
それぞれの確定された近傍ブロックのコントロールポイント動きベクトル群を１つの候補として上記動きベクトル第１候補リストに入れることとをさらに含む、項目３～１４のいずれか一項に記載の方法。
［項目１６］
上記の上記現在画像ブロックの近傍ブロックから、特定走査順でアフィン変換モードを採用して予測を行う近傍ブロックのコントロールポイント動きベクトル群を確定することは、
上記現在の画像ブロックの左側近傍ブロックにおいて第１走査順で第１近傍ブロックのコントロールポイントの動きベクトル群を確定することと、
上記現在の画像ブロックの上側近傍ブロックにおいて第２走査順で第２近傍ブロックのコントロールポイントの動きベクトル群を確定することと、
上記第１近傍ブロックのコントロールポイントの動きベクトル群と上記第２近傍ブロックのコントロールポイントの動きベクトル群を上記動きベクトルの第１候補リストに入れることと、を含む、項目１５に記載の方法。
［項目１７］
上記方法は、
上記現在画像ブロックの一部のコントロールポイントの近傍ブロックに基づき上記一部のコントロールポイントの動きベクトルを構築することと、
上記現在画像ブロックの一部のコントロールポイントの動きベクトルを上記動きベクトル第１候補リストに入れることとをさらに含む、項目３～１４のいずれか一項に記載の方法。
［項目１８］
上記の上記現在画像ブロックの一部のコントロールポイントの近傍ブロックに基づき上記一部のコントロールポイントの動きベクトルを構築することは、
上記一部のコントロールポイントにおける各コントロールポイントに対し、第３走査順で上記コントロールポイントの特定近傍ブロックを順次走査し、事前設定条件を満たす特定近傍ブロックの動きベクトルを上記コントロールポイントの動きベクトルとすることを含む項目１７に記載の方法。
［項目１９］
上記方法は、
上記一部のコントロールポイントの動きベクトルがそれぞれ異なる参照フレームを指す時、上記現在画像ブロックの一部のコントロールポイントの動きベクトルを上記動きベクトル第１候補リストに入れることを放棄することをさらに含む、項目１７または１８に記載の方法。
［項目２０］
上記方法は、
上記動きベクトル第１候補リスト中の候補の数量が予め設定された数値より大きい時、上記現在画像ブロックの一部のコントロールポイントの動きベクトルを上記動きベクトル第１候補リストに入れることを放棄することをさらに含む、項目１７または１８に記載の方法。
［項目２１］
上記方法は、
動きベクトル第２候補リストを構築し、上記動きベクトル第２候補リストに入れる候補は１つの画像ブロックの動きベクトルであり、
上記動きベクトル第２候補リスト中の候補を採用することを確定した場合、上記候補の動きベクトルに基づき上記現在画像ブロックの動きベクトルを確定することをさらに含む、項目３～１５のいずれか一項に記載方法。
［項目２２］
上記の上記候補の動きベクトルに基づき上記現在画像ブロックの動きベクトルを確定することは、
上記の採用することを確定した候補を上記現在画像ブロックの動きベクトルとし、または上記採用することを確定した候補をスケーリングした後に上記現在画像ブロックの動きベクトルとすることを含む、項目２１に記載の方法。
［項目２３］
上記の動きベクトル第２候補リストを構築することは、
上記現在画像ブロックの現在画像での複数の近傍ブロックの動きベクトルに基づき上記動きベクトル第２候補リストに入れる候補を確定することを含む、項目２１に記載の方法。
［項目２４］
上記現在画像ブロックの現在画像での複数の近傍ブロックは上記予め設定されたＭ個の近傍ブロックを含む、項目２３に記載の方法。
［項目２５］
予め設定された順で順に上記予め設定されたＭ個の近傍ブロックの動きベクトルをそれぞれＭ個の候補として、上記動きベクトル第２候補リストに入れ、
上記Ｎ個の近傍ブロックとは、上記予め設定された順で最初に確定されたＮ個の近傍ブロックを指す、項目２４に記載の方法。
［項目２６］
上記方法は、
上記Ｍ個の近傍ブロックのうちの１つのまたは複数の近傍ブロックの動きベクトルが取得不可である場合、上記１つのまたは複数の近傍ブロックの動きベクトルに基づき上記動きベクトル第２候補リストに入れる候補を確定することを放棄することをさらに含む、項目２４に記載の方法。
［項目２７］
上記の上記Ｍ個の近傍ブロックのうちのＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することは、
上記Ｎ個の近傍ブロックを順次走査し、１つ目の事前設定条件に符合する近傍ブロックまで走査すると、走査を停止し、かつ上記走査した１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することを含む、項目１または２６に記載の方法。
［項目２８］
上記の上記走査した上記１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することは、
上記１つ目の事前設定条件に符合する近傍ブロックを上記対象近傍ブロックとすることを含む、項目１９に記載の方法。
［項目２９］
上記事前設定条件は、
近傍ブロックの参照画像と上記現在画像ブロックの参照画像が同じであることを含む、項目１９または２８に記載の方法。
［項目３０］
上記方法は、
上記Ｎ個の近傍ブロック中に上記事前設定条件に符合する近傍ブロックが走査されていない場合、上記Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行い、上記スケーリング処理後の動きベクトルに基づき上記現在画像ブロックを予測することをさらに含む、項目２７～２９のいずれか一項に記載の方法。
［項目３１］
上記の上記スケーリング処理後の動きベクトルに基づき上記現在画像ブロックを予測することは、
上記スケーリング処理後の動きベクトルと上記現在画像ブロックの参照画像に基づき上記現在画像ブロックの参照ブロックを確定することを含む、項目３０に記載の方法。
［項目３２］
上記特定近傍ブロックは上記Ｎ個の近傍ブロックのうち、走査順で得られた１つ目の近傍ブロックまたは最後の近傍ブロックである、項目３０に記載の方法。
［項目３３］
上記の上記Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行い、上記スケーリング処理後の動きベクトルに基づき上記現在画像ブロックを予測することは、
上記特定近傍ブロックの動きベクトルにスケーリング処理を行って、上記スケーリング処理後の動きベクトルが指す参照フレームが上記現在画像ブロックの参照画像と同じになるようにすることと、
上記スケーリング処理後の動きベクトルの上記現在画像ブロックの参照画像中で指す画像ブロックを上記現在画像ブロックの参照ブロックとすることとを含む、項目３０に記載の方法。
［項目３４］
上記方法は、
上記Ｎ個の近傍ブロック中に上記事前設定条件に符合する近傍ブロックが走査されていない場合、デフォルトブロックを上記現在画像ブロックの参照ブロックとすることをさらに含む、項目２７～３０のいずれか一項に記載の方法。
［項目３５］
上記デフォルトブロックは動きベクトル（０，０）が指す画像ブロックである、項目３４に記載の方法。
［項目３６］
上記サブ画像ブロックのサイズおよび／または上記サブ画像ブロックの関連ブロックのサイズは６４以上の画素に固定される、項目１～３５のいずれか一項に記載の方法。
［項目３７］
上記サブ画像ブロックのサイズおよび／または上記サブ画像ブロックの関連ブロックのサイズは８×８画素、または１６×４画素または４×１６画素に固定される、項目３６に記載の方法。
［項目３８］
上記サブ画像ブロックのサイズおよび／または上記サブ画像ブロックの関連ブロックのサイズは８×８画素に固定され、上記方法は、
時間動きベクトル予測ＴＭＶＰ操作をしないように設定することをさらに含む、項目３７に記載の方法。
［項目３９］
上記方法は、
上記サブ画像ブロックおよび／または上記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、時間動きベクトル予測ＴＭＶＰ操作をしないように設定することをさらに含む、項目１～３６のいずれか一項に記載の方法。
［項目４０］
上記現在画像ブロックは１つの符号化ユニットＣＵである、項目１～３９のいずれか一項に記載の方法。
［項目４１］
上記の上記対象近傍ブロックの動きベクトル、上記現在画像ブロックおよび上記現在画像ブロックの参照画像に基づき、上記現在画像ブロックの関連ブロックを確定することは、
上記対象近傍ブロックの動きベクトル、上記現在画像ブロックの参照画像において、上記現在画像ブロックの関連ブロックを確定することを含む、項目１～４０のいずれか一項に記載方法。
［項目４２］
上記近傍ブロックは上記現在画像において上記現在画像ブロックの位置に隣接しまたはある位置ピッチを有する画像ブロックである、項目１～４１のいずれか一項に記載の方法。
［項目４３］
上記の上記関連ブロックの動きベクトルに基づき上記現在画像ブロックを予測することは、
上記関連ブロックの参照画像が特定参照画像、または現在画像ブロックの参照画像が特定参照画像である時、処理後の上記関連ブロックの動きベクトルと上記現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定することを含み、
上記処理後の上記関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである、項目１～４２のいずれか一項に記載の方法。
［項目４４］
上記処理後の上記関連ブロックの動きベクトルは、
数値が１の縮尺で上記関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、
スケーリングステップをスキップした上記関連ブロックの動きベクトルを含む、項目４３に記載の方法。
［項目４５］
上記の上記関連ブロックの動きベクトルに基づき上記現在画像ブロックを予測することは、
上記関連ブロックの参照画像が特定参照画像、または現在のブロックの参照画像が特定参照画像である場合、上記関連ブロックの動きベクトルに基づき現在画像ブロックの参照ブロックを確定することを放棄することを含む、項目１～４２のいずれか一項に記載の方法。
［項目４６］
上記方法は、
上記近傍ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である場合、処理後の上記関連ブロックの動きベクトルと上記現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定することをさらに含み、
上記処理後の上記関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである、項目１～４５のいずれか一項に記載の方法。
［項目４７］
上記処理後の上記関連ブロックの動きベクトルは、
数値が１の縮尺で上記関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、
スケーリングステップをスキップした上記関連ブロックの動きベクトルを含む、項目４６に記載の方法。
［項目４８］
Ｍは４以下である、項目１～４７のいずれか一項に記載の方法。
［項目４９］
動画像処理方法であって、
現在画像ブロックの動きベクトル第２候補リスト中のＭ個の候補に基づき、上記現在画像ブロックのＭ個の近傍ブロックを確定することと、
上記Ｍ個の近傍ブロックのうち、Ｍより小さいＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することと、
上記対象近傍ブロックの動きベクトル、上記現在画像ブロック、および上記現在画像ブロックの参照画像に基づき、上記現在画像ブロックの関連ブロックを確定することと、
上記現在画像ブロックの関連ブロックに基づき上記現在画像ブロックの動きベクトル第１候補リスト中の特定候補を確定することと、
上記特定候補を用いることを確定した場合、上記現在画像ブロックと上記関連ブロックを同じの方法で複数のサブ画像ブロックに分割し、上記現在画像ブロック中の各サブ画像ブロックは、上記関連ブロックの各サブ画像ブロックに１対１に対応させることと、
上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、上記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測することを含む、動画像処理方法。
［項目５０］
上記動きベクトル第１候補リストの少なくとも１つの候補がサブ画像ブロックの動きベクトルを含み、上記動きベクトル第２候補リストの各候補が画像ブロックの動きベクトルを含む、項目４９に記載の方法。
［項目５１］
Ｎは１または２に等しい、項目４９または５０に記載の方法。
［項目５２］
上記Ｍ個の候補は上記現在画像ブロックの現在画像でのＭ個の近傍ブロックの動きベクトルを含む、項目４９～５１のいずれか一項に記載の方法。
［項目５３］
上記の上記Ｍ個の近傍ブロックのうちのＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することは、
上記Ｎ個の近傍ブロックを順次走査し、１つ目の事前設定条件に符合する近傍ブロックまで走査すると、走査を停止し、かつ上記走査した１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することを含む、項目５２に記載の方法。
［項目５４］
上記の上記走査した上記１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することは、
上記１つ目の事前設定条件に符合する近傍ブロックを上記対象近傍ブロックとすることを含む、項目５２に記載の方法。
［項目５５］
上記事前設定条件は、
近傍ブロックの参照画像と上記現在画像ブロックの参照画像が同じであることを含む、項目５３または５４に記載の方法。
［項目５６］
上記方法は、
上記Ｎ個の近傍ブロック中に上記事前設定条件に符合する近傍ブロックが走査されていない時、上記Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行い、上記スケーリング処理後の動きベクトルに基づき上記現在画像ブロックを予測することをさらに含む、項目５３～５５のいずれか一項に記載の方法。
［項目５７］
上記の上記スケーリング処理後の動きベクトルに基づき上記現在画像ブロックを予測することは、
上記スケーリング処理後の動きベクトルと上記現在画像ブロックの参照画像に基づき上記現在画像ブロックの参照ブロックを確定することを含む、項目５６に記載の方法。
［項目５８］
上記特定近傍ブロックは上記Ｎ個の近傍ブロックのうち、走査順で得られた１つ目の近傍ブロックまたは最後の近傍ブロックである、項目５６に記載の方法。
［項目５９］
上記の上記Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行い、上記スケーリング処理後の動きベクトルに基づき上記現在画像ブロックを予測することは、
上記特定近傍ブロックの動きベクトルにスケーリング処理を行って、上記スケーリング処理後の動きベクトルが指す参照フレームが上記現在画像ブロックの参照画像と同じになるようにすることと、
上記スケーリング処理後の動きベクトルの上記現在画像ブロックの参照画像中で指す画像ブロックを上記現在画像ブロックの参照ブロックとすることとを含む、項目５６に記載の方法。
［項目６０］
上記方法は、
上記Ｎ個の近傍ブロック中に上記事前設定条件に符合する近傍ブロックが走査されていない場合、デフォルトブロックを上記現在画像ブロックの参照ブロックとすることをさらに含む、項目５３～５５のいずれか一項に記載の方法。
［項目６１］
上記デフォルトブロックは動きベクトル（０，０）が指す画像ブロックである、項目６０に記載の方法。
［項目６２］
上記サブ画像ブロックのサイズおよび／または上記サブ画像ブロックの関連ブロックのサイズは６４以上の画素に固定される、項目４９～６１のいずれか一項に記載の方法。
［項目６３］
上記サブ画像ブロックのサイズおよび／または上記サブ画像ブロックの関連ブロックのサイズは８×８画素、または１６×４画素または４×１６画素に固定される、項目６２に記載の方法。
［項目６４］
上記サブ画像ブロックのサイズおよび／または上記サブ画像ブロックの関連ブロックのサイズは８×８画素に固定され、上記方法は、
時間動きベクトル予測ＴＭＶＰ操作をしないように設定することをさらに含む、項目６３に記載の方法。
［項目６５］
上記方法は、
上記サブ画像ブロックおよび／または上記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、時間動きベクトル予測ＴＭＶＰ操作をしないように設定することをさらに含む、項目４９～６２のいずれか一項に記載の方法。
［項目６６］
上記現在画像ブロックは１つの符号化ユニットＣＵである、項目４９～６５のいずれか一項に記載の方法。
［項目６７］
上記の上記対象近傍ブロックの動きベクトル、上記現在画像ブロックおよび上記現在画像ブロックの参照画像に基づき、上記現在画像ブロックの関連ブロックを確定することは、
上記対象近傍ブロックの動きベクトル、上記現在画像ブロックの参照画像において、上記現在画像ブロックの関連ブロックを確定することを含む、項目４９～６６のいずれか一項に記載方法。
［項目６８］
上記近傍ブロックは上記現在画像上で上記現在画像ブロックの位置に隣接しまたはある位置ピッチを有する画像ブロックである、項目４９～６７のいずれか一項に記載の方法。
［項目６９］
上記の上記関連ブロックの動きベクトルに基づき上記現在画像ブロックを予測することは、
上記関連ブロックの参照画像が特定参照画像、または現在画像ブロックの参照画像が特定参照画像である場合、処理後の上記関連ブロックの動きベクトルと上記現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定することを含み、
上記処理後の上記関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである、項目４９～６８のいずれか一項に記載の方法。
［項目７０］
上記処理後の上記関連ブロックの動きベクトルは、
数値が１の縮尺で上記関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、
スケーリングステップをスキップした上記関連ブロックの動きベクトルを含む、項目６９に記載の方法。
［項目７１］
上記の上記関連ブロックの動きベクトルに基づき上記現在画像ブロックを予測することは、
上記関連ブロックの参照画像が特定参照画像、または現在のブロックの参照画像が特定参照画像である時、上記関連ブロックの動きベクトルに基づき現在画像ブロックの参照ブロックを確定することを放棄することを含む、項目４９～６８のいずれか一項に記載の方法。
［項目７２］
上記方法は、
上記近傍ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である時、処理後の上記関連ブロックの動きベクトルと上記現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定することをさらに含み、
上記処理後の上記関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである、項目４９～７１のいずれか一項に記載の方法。
［項目７３］
上記処理後の上記関連ブロックの動きベクトルは、
数値が１の縮尺で上記関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、
スケーリングステップをスキップした上記関連ブロックの動きベクトルを含む、項目７２に記載の方法。
［項目７４］
上記の上記関連ブロック中における各サブ画像ブロックの動きベクトルに基づきそれぞれ上記現在画像ブロック中における対応するサブ画像ブロックを予測することは、
上記関連ブロック中の各サブ画像ブロックの動きベクトルを、それぞれ上記現在画像ブロック中に対応するサブ画像ブロックの動きベクトルとすることを含む、項目４９～７３のいずれか一項に記載の方法。
［項目７５］
上記の上記現在画像ブロックの関連ブロックに基づき上記現在画像ブロックの動きベクトル第１候補リスト中の特定候補を確定することは、
上記現在画像ブロックの関連ブロックの代表動きベクトルを上記特定候補として上記動きベクトル第１候補リストに入れることを含む、項目４９から７３のいずれか一項に記載方法。
［項目７６］
上記関連ブロックの代表動きベクトルを１つ目の候補として動きベクトル第１候補リストに入れる、項目７５に記載の方法。
［項目７７］
上記関連ブロックの代表動きベクトルは上記関連ブロックの中央位置の動きベクトルを含む、項目７５に記載の方法。
［項目７８］
上記方法は、
上記関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出た場合、上記関連ブロックの代表動きベクトルを上記動きベクトルが取得不可なサブ画像ブロックの動きベクトルとし、上記現在画像ブロック中の対応するサブ画像ブロックを予測することをさらに含む、項目７５に記載の方法。
［項目７９］
上記方法は、
上記関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出ており、かつ上記関連ブロックの代表動きベクトルが取得不可である場合、上記関連ブロック中各サブ画像ブロックの動きベクトルに基づきそれぞれ上記現在画像ブロック中の対応するサブ画像ブロックを予測することを放棄することをさらに含む、項目７８に記載の方法。
［項目８０］
上記関連ブロック中のサブ画像ブロックが取得不可であり、または関連ブロック中のサブ画像ブロックがフレーム内符号化モードを用いる場合、該関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出たことを確定する、項目７８に記載の方法。
［項目８１］
上記方法は、
上記動きベクトル第２候補リスト中の上記特定候補以外のそのうちの１つの候補を採用することを確定する場合、アフィン変換モデルに基づき上記採用した候補にアフィン変換を行うことと、
上記アフィン変換後の候補に基づき上記現在画像ブロック中のサブ画像ブロックを予測することをさらに含む、項目４９～８０のいずれか一項に記載方法。
［項目８２］
上記動きベクトル第２候補リスト中の上記特定候補以外の少なくとも１つの候補において、各候補は一組のコントロールポイントの動きベクトルを含む、項目８１に記載の方法。
［項目８３］
上記アフィン変換モデルは４パラメータアフィン変換モデルを含む場合、上記少なくとも１つの候補において、各候補は２つのコントロールポイントの動きベクトルを含み、
上記アフィン変換モデルは６パラメータアフィン変換モデルを含む場合、上記少なくとも１つの候補において、各候補は３つのコントロールポイントの動きベクトルを含む、項目８２に記載の方法。
［項目８４］
上記方法は、
上記現在画像ブロックの近傍ブロックから、特定走査順でアフィン変換モードを採用して予測を行う近傍ブロックのコントロールポイント動きベクトル群を確定することと、
それぞれの確定された近傍ブロックのコントロールポイント動きベクトル群を１つの候補として上記動きベクトル第１候補リストに入れることとをさらに含む、項目４９～８３のいずれか一項に記載の方法。
［項目８５］
上記の上記現在画像ブロックの近傍ブロックから、特定走査順でアフィン変換モードを採用して予測を行う近傍ブロックのコントロールポイント動きベクトル群を確定することは、
上記現在の画像ブロックの左側近傍ブロックにおいて第１走査順で第１近傍ブロックのコントロールポイントの動きベクトル群を確定することと、
上記現在の画像ブロックの上側近傍ブロックにおいて第２走査順で第２近傍ブロックのコントロールポイントの動きベクトル群を確定することと、
上記第１近傍ブロックのコントロールポイントの動きベクトル群と上記第２近傍ブロックのコントロールポイントの動きベクトル群を上記動きベクトルの第１候補リストに入れることと、を含む、項目８４に記載の方法。
［項目８６］
上記方法は、
上記現在画像ブロックの一部のコントロールポイントの近傍ブロックに基づき上記一部のコントロールポイントの動きベクトルを構築することと、
上記現在画像ブロックの一部のコントロールポイントの動きベクトルを上記動きベクトル第１候補リストに入れることをさらに含む、項目４９～８５のいずれか一項に記載の方法。
［項目８７］
上記の上記現在画像ブロックの一部のコントロールポイントの近傍ブロックに基づき上記一部のコントロールポイントの動きベクトルを構築することは、
上記一部のコントロールポイントにおける各コントロールポイントに対し、第３走査順で上記コントロールポイントの特定近傍ブロックを順次走査し、事前設定条件を満たす特定近傍ブロックの動きベクトルを上記コントロールポイントの動きベクトルとすることを含む項目８６に記載の方法。
［項目８８］
上記方法は、
上記一部のコントロールポイントの動きベクトルがそれぞれ異なる参照フレームを指す時、上記現在画像ブロックの一部のコントロールポイントの動きベクトルを上記動きベクトル第１候補リストに入れることを放棄することをさらに含む、項目８６または８７に記載の方法。
［項目８９］
上記方法は、
上記動きベクトル第１候補リスト中の候補の数量が予め設定された数値より大きい時、上記現在画像ブロックの一部のコントロールポイントの動きベクトルを上記動きベクトル第１候補リストに入れることを放棄することをさらに含む、項目８６または８７に記載の方法。
［項目９０］
上記方法は、
動きベクトル第２候補リストを構築し、ここでは、上記動きベクトル第２候補リストに入れる候補は１つの画像ブロックの動きベクトルであり、
上記動きベクトル第２候補リスト中の候補を採用することを確定した場合、上記候補の動きベクトルに基づき上記現在画像ブロックの動きベクトルを確定することをさらに含む、項目５１～６３に記載の方法。
［項目９１］
上記の上記候補の動きベクトルに基づき上記現在画像ブロックの動きベクトルを確定することは、
上記の採用することを確定した候補を上記現在画像ブロックの動きベクトルとし、または上記採用することを確定した候補をスケーリングした後に上記現在画像ブロックの動きベクトルとすることを含む、項目９０に記載の方法。
［項目９２］
上記の動きベクトル第２候補リストを構築することは、
上記現在画像ブロックの現在画像上でのＭ個の近傍ブロックの動きベクトルに基づき上記動きベクトル第２候補リストに入れる上記Ｍ個の候補を確定することを含む、項目９０に記載の方法。
［項目９３］
予め設定された順で順に上記予め設定されたＭ個の近傍ブロックの動きベクトルをそれぞれＭ個の候補として、上記動きベクトル第２候補リストに入れ、上記Ｎ個の近傍ブロックとは、上記予め設定された順で最初に確定されたＮ個の近傍ブロックを指すこと、
および／または
上記Ｍ個の近傍ブロック中の１つのまたは複数の近傍ブロックの動きベクトルが取得不可である場合、上記１つのまたは複数の近傍ブロックの動きベクトルに基づき上記動きベクトル第２候補リストに入れる候補を確定することを放棄する、項目９２に記載の方法。
［項目９４］
Ｍは４以下である、項目４９～９３のいずれか一項に記載の方法。
［項目９５］
動画像処理装置であって、
現在画像ブロックの予め設定されたＭ個の近傍ブロックのうちＭよりも小さいＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することと、上記対象近傍ブロックの動きベクトル、上記現在画像ブロック、および上記現在画像ブロックの参照画像に基づき、上記現在画像ブロックの関連ブロックを確定することと、上記現在画像ブロックと上記関連ブロックを同じ方法で複数のサブ画像ブロックに分割し、上記現在画像ブロック中の各サブ画像ブロックは、上記関連ブロック中の各サブ画像ブロックと１対１に対応させることとのために用いられる構築モジュールと、
上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、上記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測するために用いられる予測モジュールとを含む、動画像処理装置。
［項目９６］
Ｎは１または２に等しい、項目９５に記載の動画像処理装置。
［項目９７］
上記予測モジュールはさらに、
上記の上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づきそれぞれ上記現在画像ブロック中の対応するサブ画像ブロックを予測する前に上記関連ブロックの代表動きベクトルを候補として動きベクトル第１候補リストに入れ、
上記候補を採用すると確定した場合、上記予測モジュールは上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、上記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測するために用いられる、項目９５または９６に記載の動画像処理装置。
［項目９８］
上記の上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づきそれぞれ上記現在画像ブロック中における対応するサブ画像ブロックを予測することは、
上記関連ブロック中の各サブ画像ブロックの動きベクトルを、それぞれ上記現在画像ブロック中の対応するサブ画像ブロックの動きベクトルとすることを含む、項目９７に記載の動画像処理装置。
［項目９９］
上記関連ブロックの代表動きベクトルを１つ目の候補として動きベクトル第１候補リストに入れる、項目９７に記載の動画像処理装置。
［項目１００］
上記関連ブロックの代表動きベクトルは上記関連ブロックの中央位置の動きベクトルを含む、項目９７に記載の動画像処理装置。
［項目１０１］
上記予測モジュールはさらに、
上記関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出た場合、上記関連ブロックの代表動きベクトルを上記動きベクトルが取得不可なサブ画像ブロックの動きベクトルとし、上記現在画像ブロック中の対応するサブ画像ブロックを予測するために用いられる、項目９７に記載の動画像処理装置。
［項目１０２］
上記予測モジュールはさらに、
上記関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出ており、かつ上記関連ブロックの代表動きベクトルが取得不可である場合、上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づきそれぞれ上記現在画像ブロック中の対応するサブ画像ブロックを予測することを放棄するために用いられる、項目１０１に記載の動画像処理装置。
［項目１０３］
上記予測モジュールはさらに、
上記関連ブロック中のサブ画像ブロックが取得不可であり、または関連ブロック中のサブ画像ブロックがフレーム内符号化モードを用いる場合、該関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出たことを確定するために用いられる、項目１０２に記載の動画像処理装置。
［項目１０４］
上記構築モジュールはさらに、
他の候補を確定し、上記他候補を上記動きベクトル第１候補リストに入れるために用いられ、上記他の候補中の少なくとも１つの候補はサブ画像ブロックの動きベクトルをさらに含む、項目９７に記載の動画像処理装置。
［項目１０５］
上記構築モジュールはさらに、
上記他の候補のうちの１つの候補を採用することを確定する場合、上記採用した候補に基づき上記現在画像ブロック中のサブ画像ブロックの動きベクトルを確定するために用いられる、項目１０４に記載の動画像処理装置。
［項目１０６］
上記少なくとも１つの候補は一組のコントロールポイントの動きベクトルを含む、項目１０４または１０５に記載の動画像処理装置。
［項目１０７］
上記予測モジュールはさらに、
上記少なくとも１つの候補中の候補を採用することを確定する場合、アフィン変換モデルに基づき上記採用した候補にアフィン変換を行うことと、
上記アフィン変換後の候補に基づき上記現在画像ブロック中のサブ画像ブロックを予測することとのために用いられる、項目１０４～１０６のいずれか一項に記載の動画像処理装置。
［項目１０８］
上記アフィン変換モデルは４パラメータアフィン変換モデルを含む場合、上記少なくとも１つの候補において、各候補は２つのコントロールポイントの動きベクトルを含み、
上記アフィン変換モデルは６パラメータアフィン変換モデルを含む場合、上記少なくとも１つの候補において、各候補は３つのコントロールポイントの動きベクトルを含む、項目１０７に記載の動画像処理装置。
［項目１０９］
上記構築モジュールはさらに、
上記現在画像ブロックの近傍ブロックから、特定走査順でアフィン変換モードを採用して予測を行う近傍ブロックのコントロールポイント動きベクトル群を確定することと、
それぞれの確定された近傍ブロックのコントロールポイント動きベクトル群を１つの候補として上記動きベクトル第１候補リストに入れることとのために用いられる、項目９７～１０８のいずれか一項に記載の動画像処理装置。
［項目１１０］
上記の上記現在画像ブロックの近傍ブロックから、特定走査順でアフィン変換モードを採用して予測を行う近傍ブロックのコントロールポイント動きベクトル群を確定することは、
上記現在の画像ブロックの左側近傍ブロックにおいて第１走査順で第１近傍ブロックのコントロールポイントの動きベクトル群を確定することと、
上記現在の画像ブロックの上側近傍ブロックにおいて第２走査順で第２近傍ブロックのコントロールポイントの動きベクトル群を確定することと、
上記第１近傍ブロックのコントロールポイントの動きベクトル群と上記第２近傍ブロックのコントロールポイントの動きベクトル群を上記動きベクトルの第１候補リストに入れることと、を含む、項目１０９に記載の動画像処理装置。
［項目１１１］
上記構築モジュールはさらに、
上記現在画像ブロックの一部のコントロールポイントの近傍ブロックに基づき上記一部のコントロールポイントの動きベクトルを構築することと、
上記現在画像ブロックの一部のコントロールポイントの動きベクトルを上記動きベクトル第１候補リストに入れることのために用いられる、項目９７～１０８のいずれか一項に記載の動画像処理装置。
［項目１１２］
上記の上記現在画像ブロックの一部のコントロールポイントの近傍ブロックに基づき上記一部のコントロールポイントの動きベクトルを構築することは、
上記一部のコントロールポイントにおける各コントロールポイントに対し、第３走査順で上記コントロールポイントの特定近傍ブロックを順次走査し、事前設定条件を満たす特定近傍ブロックの動きベクトルを上記コントロールポイントの動きベクトルとすることを含む項目１１１に記載の動画像処理装置。
［項目１１３］
上記構築モジュールはさらに、
上記一部のコントロールポイントの動きベクトルがそれぞれ異なる参照フレームを指す時、上記現在画像ブロックの一部のコントロールポイントの動きベクトルを上記動きベクトル第１候補リストに入れることを放棄するために用いられる、項目１１１または１１２に記載の動画像処理装置。
［項目１１４］
上記構築モジュールはさらに、
上記動きベクトル第１候補リスト中の候補の数量が予め設定された数値より大きい時、上記現在画像ブロックの一部のコントロールポイントの動きベクトルを上記動きベクトル第１候補リストに入れることを放棄するために用いられる、項目１１１または１１２のいずれか一項に記載の動画像処理装置。
［項目１１５］
上記構築モジュールはさらに、
動きベクトル第２候補リストを構築し、ここでは、上記動きベクトル第２候補リストに入れる候補は１つの画像ブロックの動きベクトルであり、
上記動きベクトル第２候補リスト中の候補を採用することを確定した場合、上記候補の動きベクトルに基づき上記現在画像ブロックの動きベクトルを確定するために用いられる、項目９７～１０９のいずれか一項に記載の動画像処理装置。
［項目１１６］
上記の上記候補の動きベクトルに基づき上記現在画像ブロックの動きベクトルを確定することは、
上記の採用することを確定した候補を上記現在画像ブロックの動きベクトルとし、または上記採用することを確定した候補をスケーリングした後に上記現在画像ブロックの動きベクトルとすることを含む、項目１１５に記載の動画像処理装置。
［項目１１７］
上記構築動きベクトル第２候補リストは、
上記現在画像ブロックの現在画像上での複数の近傍ブロックの動きベクトルに基づき上記動きベクトル第２候補リストに入れる候補を確定することを含む、項目１１５に記載の動画像処理装置。
［項目１１８］
上記現在画像ブロックの現在画像上での複数の近傍ブロックは上記予め設定されたＭ個の近傍ブロックを含む、項目１１７に記載の動画像処理装置。
［項目１１９］
上記構築モジュールはさらに、
予め設定された順で順に上記予め設定されたＭ個の近傍ブロックの動きベクトルをそれぞれＭ個の候補として、上記動きベクトル第２候補リストに入れるために用いられ、
上記Ｎ個の近傍ブロックとは、上記予め設定された順で最初に確定されたＮ個の近傍ブロックを指す、項目１１８に記載の動画像処理装置。
［項目１２０］
上記構築モジュールはさらに、
上記Ｍ個の近傍ブロック中の１つのまたは複数の近傍ブロックの動きベクトルが取得不可である場合、上記１つのまたは複数の近傍ブロックの動きベクトルに基づき上記動きベクトル第２候補リストに入れる候補を確定することを放棄するために用いられる、項目１１８に記載の動画像処理装置。
［項目１２１］
上記の上記Ｍ個の近傍ブロックのうちのＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することは、
上記Ｎ個の近傍ブロックを順次走査し、１つ目の事前設定条件に符合する近傍ブロックまで走査すると、走査を停止し、かつ上記走査した１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することを含む、項目９５または１２０に記載の動画像処理装置。
［項目１２２］
上記の上記走査した上記１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することは、
上記１つ目の事前設定条件に符合する近傍ブロックを上記対象近傍ブロックとすることを含む、項目１１３に記載の動画像処理装置。
［項目１２３］
上記事前設定条件は、
近傍ブロックの参照画像と上記現在画像ブロックの参照画像が同じであることを含む、項目１１３または１２２に記載の動画像処理装置。
［項目１２４］
上記構築モジュールはさらに、
上記Ｎ個の近傍ブロック中に上記事前設定条件に符合する近傍ブロックが走査されていない時、上記Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行うために用いられ、
上記予測モジュールはさらに、上記スケーリング処理後の動きベクトルに基づき上記現在画像ブロックを予測するために用いられる、項目１２１～１２３のいずれか一項に記載の動画像処理装置。
［項目１２５］
上記の上記スケーリング処理後の動きベクトルに基づき上記現在画像ブロックを予測することは、
上記スケーリング処理後の動きベクトルと上記現在画像ブロックの参照画像に基づき上記現在画像ブロックの参照ブロックを確定することを含む、項目１２４に記載の動画像処理。
［項目１２６］
上記特定近傍ブロックは上記Ｎ個の近傍ブロックのうち、走査順で得られた１つ目の近傍ブロックまたは最後の近傍ブロックである、項目１２４に記載の動画像処理装置。
［項目１２７］
上記の上記Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行い、上記スケーリング処理後の動きベクトルに基づき上記現在画像ブロックを予測することは、
上記特定近傍ブロックの動きベクトルにスケーリング処理を行い、上記スケーリング処理後の動きベクトルが指す参照フレームが上記現在画像ブロックの参照画像と同じになるようにし、
上記スケーリング処理後の動きベクトルの上記現在画像ブロックの参照画像中で指す画像ブロックを上記現在画像ブロックの参照ブロックとすることを含む、項目１２４に記載の動画像処理装置。
［項目１２８］
上記Ｎ個の近傍ブロック中に上記事前設定条件に符合する近傍ブロックが走査されていない場合、デフォルトブロックを上記現在画像ブロックの参照ブロックとする、項目１２１～１２４のいずれか一項に記載の動画像処理装置。
［項目１２９］
上記デフォルトブロックは動きベクトル（０，０）が指す画像ブロックである、項目１２８に記載の動画像処理装置。
［項目１３０］
上記サブ画像ブロックのサイズおよび／または上記サブ画像ブロックの関連ブロックのサイズは６４以上の画素に固定される、項目９５～１２９のいずれか一項に記載の動画像処理装置。
［項目１３１］
上記サブ画像ブロックのサイズおよび／または上記サブ画像ブロックの関連ブロックのサイズは８×８画素、または１６×４画素または４×１６画素に固定される、項目１３０に記載の動画像処理装置。
［項目１３２］
上記サブ画像ブロックのサイズおよび／または上記サブ画像ブロックの関連ブロックのサイズは８×８画素に固定され、上記動画像処理装置は、
時間動きベクトル予測ＴＭＶＰ操作をしないように設定するために用いられる処理モジュールをさらに含む、項目１３１に記載の動画像処理装置。
［項目１３３］
上記動画像処理装置は、
上記サブ画像ブロックおよび／または上記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、時間動きベクトル予測ＴＭＶＰ操作をしないように設定するために用いられる処理モジュールをさらに含む、項目９５～１３０のいずれか一項に記載の動画像処理装置。
［項目１３４］
上記現在画像ブロックは１つの符号化ユニットＣＵである、項目９５～１３３のいずれか一項に記載の動画像処理装置。
［項目１３５］
上記の上記対象近傍ブロックの動きベクトル、上記現在画像ブロックおよび上記現在画像ブロックの参照画像に基づき、上記現在画像ブロックの関連ブロックを確定することは、
上記対象近傍ブロックの動きベクトル、上記現在画像ブロックの参照画像において、上記現在画像ブロックの関連ブロックを確定することを含む、項目９５～１３４のいずれか一項に記載の動画像処理装置。
［項目１３６］
上記近傍ブロックは上記現在画像上で上記現在画像ブロックの位置に隣接しまたはある位置ピッチを有する画像ブロックである、項目８５～１３５のいずれか一項に記載の動画像処理装置。
［項目１３７］
上記の上記関連ブロックの動きベクトルに基づき上記現在画像ブロックを予測することは、
上記関連ブロックの参照画像が特定参照画像、または現在画像ブロックの参照画像が特定参照画像である場合、処理後の上記関連ブロックの動きベクトルと上記現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定することを含み、
上記処理後の上記関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである、項目９５～１３６のいずれか一項に記載の動画像処理装置。
［項目１３８］
上記処理後の上記関連ブロックの動きベクトルは、
数値が１の縮尺で上記関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、
スケーリングステップをスキップした上記関連ブロックの動きベクトルを含む、項目１３７に記載の動画像処理装置。
［項目１３９］
上記の上記関連ブロックの動きベクトルに基づき上記現在画像ブロックを予測することは、
上記関連ブロックの参照画像が特定参照画像、または現在のブロックの参照画像が特定参照画像である時、上記関連ブロックの動きベクトルに基づき現在画像ブロックの参照ブロックを確定することを放棄することを含む、項目９５～１３６のいずれか一項に記載の動画像処理装置。
［項目１４０］
上記構築モジュールはさらに、
上記近傍ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である場合、処理後の上記関連ブロックの動きベクトルと上記現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定するために用いられ、
上記処理後の上記関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである、項目９５～１３９のいずれか一項に記載の動画像処理装置。
［項目１４１］
上記処理後の上記関連ブロックの動きベクトルは、
数値が１の縮尺で上記関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、
スケーリングステップをスキップした上記関連ブロックの動きベクトルを含む、項目１４０に記載の動画像処理装置。
［項目１４２］
Ｍは４以下である、項目９５～１４１のいずれか一項に記載の動画像処理装置。
［項目１４３］
動画像処理装置であって、
現在画像ブロックの動きベクトル第２候補リスト中のＭ個の候補に基づき、上記現在画像ブロックのＭ個の近傍ブロックを確定することと、上記Ｍ個の近傍ブロックのうちＭより小さいＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することと、上記対象近傍ブロックの動きベクトル、上記現在画像ブロック、および上記現在画像ブロックの参照画像に基づき、上記現在画像ブロックの関連ブロックを確定することと、上記現在画像ブロックの関連ブロックに基づき上記現在画像ブロックの動きベクトル第１候補リスト中の特定候補を確定することと、上記特定候補を用いることを確定した場合、上記現在画像ブロックと上記関連ブロックを同じの方法で複数のサブ画像ブロックに分割し、上記現在画像ブロック中の各サブ画像ブロックは、上記関連ブロックの各サブ画像ブロックに１対１に対応させることとのために用いられる構築モジュールと、
上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づき、上記現在画像ブロック中の対応するサブ画像ブロックをそれぞれ予測するために用いられる予測モジュールとを含む、動画像処理装置。
［項目１４４］
上記動きベクトル第１候補リスト中の少なくとも１つの候補はサブ画像ブロックの動きベクトルを含み、上記動きベクトル第２候補リストののうちの各候補は画像ブロックの動きベクトルを含む、項目１４３に記載の動画像処理装置。
［項目１４５］
Ｎは１または２に等しい、項目１４３または１４４に記載の動画像処理装置。
［項目１４６］
上記Ｍ個の候補は上記現在画像ブロックの現在画像上でのＭ個の近傍ブロックの動きベクトルを含む、項目１４３～１４５のいずれか一項に記載の動画像処理装置。
［項目１４７］
上記の上記Ｍ個の近傍ブロックのうちのＮ個の近傍ブロックを順次走査し、走査結果に基づき対象近傍ブロックを確定することは、
上記Ｎ個の近傍ブロックを順次走査し、１つ目の事前設定条件に符合する近傍ブロックまで走査すると、走査を停止し、かつ上記走査した１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することを含む、１４６に記載の動画像処理装置。
［項目１４８］
上記の上記走査した上記１つ目の事前設定条件に符合する近傍ブロックに基づき対象近傍ブロックを確定することは、
上記１つ目の事前設定条件に符合する近傍ブロックを上記対象近傍ブロックとすることを含む、項目１４６に記載の動画像処理装置。
［項目１４９］
上記事前設定条件は、
近傍ブロックの参照画像と上記現在画像ブロックの参照画像が同じであることを含む、項目１４７または１４８のいずれか一項に記載の動画像処理装置。
［項目１５０］
上記構築モジュールはさらに、上記Ｎ個の近傍ブロック中に上記事前設定条件に符合する近傍ブロックが走査されていない場合、上記Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行うために用いられ、
上記予測モジュールはさらに、上記スケーリング処理後の動きベクトルに基づき上記現在画像ブロックを予測するために用いられる、項目１４７～１４９のいずれか一項に記載の動画像処理装置。
［項目１５１］
上記の上記スケーリング処理後の動きベクトルに基づき上記現在画像ブロックを予測することは、
上記スケーリング処理後の動きベクトルと上記現在画像ブロックの参照画像に基づき上記現在画像ブロックの参照ブロックを確定することを含む、項目１５０に記載の動画像処理装置。
［項目１５２］
上記特定近傍ブロックは上記Ｎ個の近傍ブロックのうち、走査順で得られた１つ目の近傍ブロックまたは最後の近傍ブロックである、項目１５０に記載の動画像処理装置。
［項目１５３］
上記の上記Ｍ個の近傍ブロック中の特定近傍ブロックの動きベクトルにスケーリング処理を行い、上記スケーリング処理後の動きベクトルに基づき上記現在画像ブロックを予測することは、
上記特定近傍ブロックの動きベクトルにスケーリング処理を行い、上記スケーリング処理後の動きベクトルが指す参照フレームが上記現在画像ブロックの参照画像と同じになるようにすることと、
上記スケーリング処理後の動きベクトルの上記現在画像ブロックの参照画像中で指す画像ブロックを上記現在画像ブロックの参照ブロックとすることとを含む、項目１５０に記載の動画像処理装置。
［項目１５４］
上記Ｎ個の近傍ブロック中に上記事前設定条件に符合する近傍ブロックが走査されていない場合、デフォルトブロックを上記現在画像ブロックの参照ブロックとする、項目１４７～１４９のいずれか一項に記載の動画像処理装置。
［項目１５５］
上記デフォルトブロックは動きベクトル（０，０）が指す画像ブロックである、項目１５４に記載の動画像処理装置。
［項目１５６］
上記サブ画像ブロックのサイズおよび／または上記サブ画像ブロックの関連ブロックのサイズは６４以上の画素に固定される、項目１４３～１５５のいずれか一項に記載の動画像処理装置。
［項目１５７］
上記サブ画像ブロックのサイズおよび／または上記サブ画像ブロックの関連ブロックのサイズは８×８画素、または１６×４画素または４×１６画素に固定される、項目１５６に記載の動画像処理装置。
［項目１５８］
上記サブ画像ブロックのサイズおよび／または上記サブ画像ブロックの関連ブロックのサイズは８×８画素に固定され、上記動画像処理装置は、
時間動きベクトル予測ＴＭＶＰ操作をしないように設定するために用いられる処理モジュールをさらに含む、項目１５７に記載の動画像処理装置。
［項目１５９］
上記動画像処理装置は、
上記サブ画像ブロックおよび／または上記サブ画像ブロックの関連ブロックの幅と高さのうち少なくとも一方が８画素より小さい場合、時間動きベクトル予測ＴＭＶＰ操作をしないように設定するために用いられる処理モジュールをさらに含む、項目１４３～１５５のいずれか一項に記載の動画像処理装置。
［項目１６０］
上記現在画像ブロックは１つの符号化ユニットＣＵである、項目１４３～１５９のいずれか一項に記載の動画像処理装置。
［項目１６１］
上記の上記対象近傍ブロックの動きベクトル、上記現在画像ブロックおよび上記現在画像ブロックの参照画像に基づき、上記現在画像ブロックの関連ブロックを確定することは、
上記対象近傍ブロックの動きベクトル、上記現在画像ブロックの参照画像において、上記現在画像ブロックの関連ブロックを確定することを含む、項目１４３～１６０のいずれか一項に記載の動画像処理装置。
［項目１６２］
上記近傍ブロックは上記現在画像上で上記現在画像ブロックの位置に隣接しまたはある位置ピッチを有する画像ブロックである、項目１４３～１６１のいずれか一項に記載の動画像処理装置。
［項目１６３］
上記の上記関連ブロックの動きベクトルに基づき上記現在画像ブロックを予測することは、
上記関連ブロックの参照画像が特定参照画像、または現在画像ブロックの参照画像が特定参照画像である時、処理後の上記関連ブロックの動きベクトルと上記現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定することを含み。
上記処理後の上記関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである、項目１４３～１６２のいずれか一項に記載の動画像処理装置。
［項目１６４］
上記処理後の上記関連ブロックの動きベクトルは、
数値が１の縮尺で上記関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、
スケーリングステップをスキップした上記関連ブロックの動きベクトルを含む、項目１６３に記載の動画像処理装置。
［項目１６５］
上記の上記関連ブロックの動きベクトルに基づき上記現在画像ブロックを予測することは、
上記関連ブロックの参照画像が特定参照画像、または現在のブロックの参照画像が特定参照画像である場合、上記関連ブロックの動きベクトルに基づき現在画像ブロックの参照ブロックを確定することを放棄することを含む、項目１４３～１６２のいずれか一項に記載の動画像処理装置。
［項目１６６］
上記構築モジュールはさらに、
上記近傍ブロックの動きベクトルが特定参照画像を指し、または現在画像ブロックの参照画像が特定参照画像である場合、処理後の上記関連ブロックの動きベクトルと上記現在画像ブロックの参照画像に基づき現在画像ブロックの参照ブロックを確定するために用いられ、
上記処理後の上記関連ブロックの動きベクトルと処理前の関連ブロックの動きベクトルは同じである、項目１４３～１６５のいずれか一項に記載の動画像処理装置。
［項目１６７］
上記処理後の上記関連ブロックの動きベクトルは、
数値が１の縮尺で上記関連ブロックの動きベクトルをスケーリングした後に得られた動きベクトル、または、
スケーリングステップをスキップした上記関連ブロックの動きベクトルを含む、項目１６６に記載の動画像処理装置。
［項目１６８］
上記の上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づきそれぞれ上記現在画像ブロック中における対応するサブ画像ブロックを予測することは、
上記関連ブロック中の各サブ画像ブロックの動きベクトルを、それぞれ上記現在画像ブロック中の対応するサブ画像ブロックの動きベクトルとすることを含む、項目１４３～１６７のいずれか一項に記載の動画像処理装置。
［項目１６９］
上記の上記現在画像ブロックの関連ブロックに基づき上記現在画像ブロックの動きベクトル第１候補リスト中の特定候補を確定することは、
上記現在画像ブロックの関連ブロックの代表動きベクトルを上記特定候補として上記動きベクトル第１候補リストに入れることを含む、項目１４３～１６７のいずれか一項に記載の動画像処理装置。
［項目１７０］
上記関連ブロックの代表動きベクトルを１つ目の候補として動きベクトル第１候補リストに入れる、項目１６９に記載の動画像処理装置。
［項目１７１］
上記関連ブロックの代表動きベクトルは上記関連ブロックの中央位置の動きベクトルを含む、項目１６９に記載の動画像処理装置。
［項目１７２］
上記予測モジュールはさらに、
上記関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出ると、上記関連ブロックの代表動きベクトルを上記動きベクトルが取得不可なサブ画像ブロックの動きベクトルとし、上記現在画像ブロック中の対応するサブ画像ブロックを予測するするために用いられる、項目１６９に記載の動画像処理装置。
［項目１７３］
上記予測モジュールはさらに、
上記関連ブロック中に動きベクトルが取得不可なサブ画像ブロックが出ており、かつ上記関連ブロックの代表動きベクトルが取得不可である場合、上記関連ブロック中の各サブ画像ブロックの動きベクトルに基づきそれぞれ上記現在画像ブロック中の対応するサブ画像ブロックを予測することを放棄するために用いられる、項目１７２に記載の動画像処理装置
［項目１７４］
上記予測モジュールはさらに、
上記関連ブロック中のサブ画像ブロックが取得不可であり、または関連ブロック中のサブ画像ブロックがフレーム内符号化モードを用いる場合、該関連ブロックに動きベクトルが取得不可なサブ画像ブロックを確定するために用いられる、項目１７２に記載の動画像処理装置。
［項目１７５］
上記予測モジュールはさらに、
上記動きベクトル第２候補リスト中の上記特定候補以外のそのうちの１つの候補を採用することを確定した場合、アフィン変換モデルに基づき上記採用した候補にアフィン変換を行うことと、
上記アフィン変換後の候補に基づき上記現在画像ブロック中のサブ画像ブロックを予測することとのために用いられる、項目１４３～１７４のいずれか一項に記載の動画像処理装置。
［項目１７６］
上記動きベクトル第２候補リスト中の上記特定候補以外の少なくとも１つの候補において、各候補は一組のコントロールポイントの動きベクトルを含む、項目１７５に記載の動画像処理装置。
［項目１７７］
上記アフィン変換モデルは４パラメータアフィン変換モデルを含む場合、上記少なくとも１つの候補において、各候補は２つのコントロールポイントの動きベクトルを含み、
上記アフィン変換モデルは６パラメータアフィン変換モデルを含む場合、上記少なくとも１つの候補において、各候補は３つのコントロールポイントの動きベクトルを含む、項目１７６に記載の動画像処理装置。
［項目１７８］
上記構築モジュールはさらに、
上記現在画像ブロックの近傍ブロックから、特定走査順でアフィン変換モードを採用して予測を行う近傍ブロックのコントロールポイント動きベクトル群を確定することと、
それぞれの確定された近傍ブロックのコントロールポイント動きベクトル群を１つの候補として上記動きベクトル第１候補リストに入れることとのために用いられる、項目１４３～１７７のいずれか一項に記載の動画像処理装置。
［項目１７９］
上記の上記現在画像ブロックの近傍ブロックから、特定走査順でアフィン変換モードを採用して予測を行う近傍ブロックのコントロールポイント動きベクトル群を確定することは、
上記現在の画像ブロックの左側近傍ブロックにおいて第１走査順で第１近傍ブロックのコントロールポイントの動きベクトル群を確定することと、
上記現在の画像ブロックの上側近傍ブロックにおいて第２走査順で第２近傍ブロックのコントロールポイントの動きベクトル群を確定することと、
上記第１近傍ブロックのコントロールポイントの動きベクトル群と上記第２近傍ブロックのコントロールポイントの動きベクトル群を上記動きベクトルの第１候補リストに入れることと、を含む、項目１７８に記載の動画像処理装置。
［項目１８０］
上記構築モジュールはさらに、
上記現在画像ブロックの一部のコントロールポイントの近傍ブロックに基づき上記一部のコントロールポイントの動きベクトルを構築することと、
上記現在画像ブロックの一部のコントロールポイントの動きベクトルを上記動きベクトル第１候補リストに入れるために用いられる、項目１４３～１７９のいずれか一項に記載の動画像処理装置。
［項目１８１］
上記の上記現在画像ブロックの一部のコントロールポイントの近傍ブロックに基づき上記一部のコントロールポイントの動きベクトルを構築することは、
上記一部のコントロールポイントにおける各コントロールポイントに対し、第３走査順で上記コントロールポイントの特定近傍ブロックを順次走査し、事前設定条件を満たす特定近傍ブロックの動きベクトルを上記コントロールポイントの動きベクトルとすることを含む項目１８０に記載の動画像処理装置。
［項目１８２］
上記構築モジュールはさらに、
上記一部のコントロールポイントの動きベクトルがそれぞれ異なる参照フレームを指す時、上記現在画像ブロックの一部のコントロールポイントの動きベクトルを上記動きベクトル第１候補リストに入れることを放棄するために用いられる、項目１８０または１８１に記載の動画像処理装置。
［項目１８３］
上記構築モジュールはさらに、
上記動きベクトル第１候補リスト中の候補の数量が予め設定された数値より大きい時、上記現在画像ブロックの一部のコントロールポイントの動きベクトルを上記動きベクトル第１候補リストに入れることを放棄するために用いられる、項目１８０または１８１に記載の動画像処理装置。
［項目１８４］
上記構築モジュールはさらに、
動きベクトル第２候補リストを構築し、ここでは、上記動きベクトル第２候補リストに入れる候補は１つの画像ブロックの動きベクトルであり、
上記動きベクトル第２候補リスト中の候補を採用することを確定した場合、上記候補の動きベクトルに基づき上記現在画像ブロックの動きベクトルを確定するために用いられる、項目１４３～１５７のいずれか一項に記載の動画像処理装置。
［項目１８５］
上記の上記候補の動きベクトルに基づき上記現在画像ブロックの動きベクトルを確定することは、
上記の採用することを確定した候補を上記現在画像ブロックの動きベクトルとし、または上記採用することを確定した候補をスケーリングした後に上記現在画像ブロックの動きベクトルとすることを含む、項目１８４に記載の動画像処理装置。
［項目１８６］
上記の動きベクトル第２候補リストを構築することは、
上記現在画像ブロックの現在画像上でのＭ個の近傍ブロックの動きベクトルに基づき上記動きベクトル第２候補リストに入れる上記Ｍ個の候補を確定することを含む、項目１８４に記載の動画像処理装置。
［項目１８７］
上記構築モジュールはさらに、予め設定された順で順に上記予め設定されたＭ個の近傍ブロックの動きベクトルをそれぞれＭ個の候補として、上記動きベクトル第２候補リストに入れるために用いられ、上記Ｎ個の近傍ブロックとは、上記予め設定された順で最初に確定されたＮ個の近傍ブロックを指すること、
および／または
上記構築モジュールはさらに、上記Ｍ個の近傍ブロック中の１つのまたは複数の近傍ブロックの動きベクトルが取得不可である場合、上記１つのまたは複数の近傍ブロックの動きベクトルに基づき上記動きベクトル第２候補リストに入れる候補を確定することを放棄するために用いられる、項目１８６に記載の動画像処理装置。
［項目１８８］
Ｍは４以下である、項目１４３～１８７のいずれか一項に記載の動画像処理装置。
［項目１８９］
動画像処理装置であって、メモリとプロセッサを含み、上記メモリは命令を記憶するために用いられ、上記プロセッサは上記メモリに記憶された命令を実行し、上記メモリに記憶された命令を実行することによって、上記プロセッサは項目１～４８のいずれか一項に記載の方法を実行するために用いられる、動画像処理装置。
［項目１９０］
動画像処理装置であって、メモリとプロセッサを含み、上記メモリは命令を記憶するために用いられ、上記プロセッサは上記メモリに記憶された命令を実行し、上記メモリに記憶された命令を実行することによって、上記プロセッサは項目４９～９４のいずれか一項に記載の方法を実行するために用いられる、動画像処理装置。
［項目１９１］
コンピュータ記憶媒体であって、それにコンピュータプログラムが記憶され、上記コンピュータプログラムはコンピュータに実行されると、上記コンピュータに項目１～４８のいずれか一項に記載の方法を実行させる、コンピュータ記憶媒体。
［項目１９２］
コンピュータ記憶媒体であって、それにコンピュータプログラムが記憶され、上記コンピュータプログラムはコンピュータに実行されると、上記コンピュータに項目４９～９４のいずれか一項に記載の方法を実行させる、コンピュータ記憶媒体。
［項目１９３］
命令を含むコンピュータプログラム製品であって、上記命令がコンピュータに実行されると、コンピュータに項目１～４８のいずれか一項に記載の方法を実行させる、コンピュータプログラム製品。
［項目１９４］
命令を含むコンピュータプログラム製品であって、上記命令がコンピュータに実行されると、コンピュータに項目４９～９４のいずれか一項に記載の方法を実行させる、コンピュータプログラム製品。
［項目１９５］
動画像処理方法であって、
第１ベース動きベクトルと第２ベース動きベクトルを含む双予測ベース動きベクトル群を少なくとも１つを含むベース動きベクトルリストを確定することと、
予め設定されたずれ量セットからそれぞれ上記第１ベース動きベクトルと上記第２ベース動きベクトルに対応する二つの動きベクトルずれ量を確定することと、
上記第１ベース動きベクトル、上記第２ベース動きベクトルと上記二つの動きベクトルずれ量に基づき、現在画像ブロックの動きベクトルを確定することと、
上記現在画像ブロックの動きベクトルに基づき上記現在画像ブロックを予測することとを含む、動画像処理方法。
［項目１９６］
上記の予め設定されたずれ量セットから二つの動きベクトルずれ量を確定することは、
上記ずれ量セットから二つの動きベクトルずれ量を含む複数組の動きベクトルずれ量組み合わせを確定することを含み、
上記の上記第１ベース動きベクトル、上記第２ベース動きベクトルと上記二つの動きベクトルずれ量に基づき、現在画像ブロックの動きベクトルを確定することは、
上記複数組の動きベクトルずれ量組み合わせから、レート歪み損失が事前設定条件を満たすようにする動きベクトルずれ量組み合わせを確定し、上記第１ベース動きベクトルと、上記第２ベース動きベクトルと、上記レート歪み損失が事前設定条件を満たすようにする動きベクトルずれ量組み合わせに基づき、現在画像ブロックの動きベクトルを確定することを含む、項目１９５に記載の方法。
［項目１９７］
上記方法は符号化側に実行され、上記方法は、さらに、
予測の結果に基づき符号化を行い、復号側にコードストリームを送信することを含み、上記コードストリームには、レート歪み損失が事前設定条件を満たすようにする動きベクトルずれ量に組み合わせになるように指示するためのインデックスが含まれる、項目１９５または１９６に記載の方法。
［項目１９８］
上記方法は復号側によって実行され、上記方法は、
符号化側から送信した、二つの動きベクトルずれ量に組み合わせになるように指示するためのインデックスを含むコードストリームを受信することを含み、
上記の予め設定されたずれ量セットから二つの動きベクトルずれ量を確定することは、
上記インデックスに基づき上記二つの動きベクトルずれ量を確定することをさらに含む、項目１９５に記載の方法。
［項目１９９］
上記第１ベース動きベクトルおよび／または第２ベース動きベクトルが特定参照画像を指す場合、上記二つの動きベクトルずれ量中の少なくとも１つの動きベクトルずれ量は、数値１の縮尺で初始動きベクトルずれ量をスケーリングした後に得られた動きベクトルずれ量、または、スケーリング操作をスキップして得られた動きベクトルずれ量を含む、項目１９５～１９８のいずれか一項に記載の方法。
［項目２００］
上記第１ベース動きベクトルと第２ベース動きベクトルがいずれも非特定参照画像を指す場合、上記二つの動きベクトルずれ量は、
上記二つの動きベクトルずれ量に基づき上記第１ベース動きベクトルと第２ベース動きベクトルを調整するために用いられる、項目１９５～１９８のいずれか一項に記載の方法。
［項目２０１］
上記現在画像から上記第１ベース動きベクトルの参照画像までの距離と上記現在画像から上記第２ベース動きベクトルの参照画像までの距離との比は、上記第１ベース動きベクトルが使用する動きベクトルずれ量と上記第２ベース動きベクトルが使用する動きベクトルずれ量との比に等しい、項目２００に記載の方法。
［項目２０２］
上記方法はさらに、
マージ候補リストを取得することを含み、上記マージ候補リストにはＰ組のマージ動きベクトル候補が含まれ、ここでは、Ｐは１以上の整数であり、
上記ベース動きベクトルリストを確定することは、
上記マージ候補リストに基づき、上記ベース動きベクトルリストを確定することを含む、項目１９５～２０１のいずれか一項に記載の方法。
［項目２０３］
上記の上記マージ候補リストに基づき、上記ベース動きベクトルリストを確定することは、
Ｐが２以上の場合、上記マージ候補リストのうちの２組のマージ動きベクトル候補を取って上記ベース動きベクトルリストを形成することを含む、項目２０２に記載の方法。
［項目２０４］
上記の上記マージ候補リストに基づき、上記ベース動きベクトルリストを確定することは、
Ｐが２より小さい場合、動きベクトル（０，０）で填充して上記ベース動きベクトルリストを形成することを含む、項目２０２に記載の方法。
［項目２０５］
上記予め設定されたずれ量セットは｛２，４，８，１６，３２，６４，１２８，２５６｝である、項目１９５～２０４のいずれか一項に記載の方法。
［項目２０６］
上記現在画像ブロックは１つの符号化ユニットＣＵである、項目１９５～２０５のいずれか一項に記載の方法。
［項目２０７］
上記現在画像ブロックは双予測画像ブロックである、項目１９５～２０６のいずれか一項に記載の方法。
［項目２０８］
動画像処理装置であって、
第１ベース動きベクトルと第２ベース動きベクトルを含む双予測ベース動きベクトル群を少なくとも１つを含むベース動きベクトルリストを確定することと、予め設定されたずれ量セットからそれぞれ上記第１ベース動きベクトルと上記第２ベース動きベクトルに対応する二つの動きベクトルずれ量を確定することと、上記第１ベース動きベクトル、上記第２ベース動きベクトルと上記二つの動きベクトルずれ量に基づき、現在画像ブロックの動きベクトルを確定することとのために用いられる構築モジュールと、
上記現在画像ブロックの動きベクトルに基づき上記現在画像ブロックを予測するために用いられる予測モジュールとを含む、動画像処理装置。
［項目２０９］
上記構築モジュールは予め設定されたずれ量セットから二つの動きベクトルずれ量を確定することは、
上記構築モジュールが上記ずれ量セットから二つの動きベクトルずれ量を含む複数組動きベクトルずれ量組み合わせを確定することを含み、
上記構築モジュールが上記第１ベース動きベクトル、上記第２ベース動きベクトルと上記二つの動きベクトルずれ量に基づき、現在画像ブロックの動きベクトルを確定することは、
上記構築モジュールが上記複数セットの動きベクトルずれ量のセットの中から、レート歪み損失が事前設定条件を満たすようにする動きベクトルずれ量組み合わせを確定し、上記第１のベース動きベクトルと、上記第２のベース動きベクトルと、上記レート歪み損失が事前設定条件を満たすようにする動きベクトルずれ量組み合わせに基づき、現在画像ブロックの動きベクトルを確定することを含む、項目２０８に記載の動画像処理装置。
［項目２１０］
上記動画像処理装置は符号化側に用いられ、上記動画像処理装置は、
予測の結果に基づき符号化を行い、復号側にコードストリームを送信するために用いられる送信モジュールをさらに含み、上記コードストリームには、レート歪み損失が事前設定条件を満たすようにする動きベクトルずれ量に組み合わせになるように指示するためのインデックスが含まれる、項目２０８または２０９に記載の動画像処理装置。
［項目２１１］
上記動画像処理装置は復号側に用いられ、上記動画像処理装置は
符号化側から送信した、二つの動きベクトルずれ量に組み合わせになるように指示するためのインデックスを含むコードストリームを受信するために用いられる受信モジュールを含み、
上記構築モジュールは予め設定されたずれ量セットから二つの動きベクトルずれ量を確定することは、
上記インデックスに基づき上記二つの動きベクトルずれ量を確定することを含む、項目２０８に記載の動画像処理装置。
［項目２１２］
上記第１ベース動きベクトルおよび／または第２ベース動きベクトルが特定参照画像を指す時、上記二つの動きベクトルずれ量中の少なくとも１つの動きベクトルずれ量は、数値１の縮尺で初始動きベクトルずれ量をスケーリングした後に得られた動きベクトルずれ量、または、スケーリング操作をスキップして得られた動きベクトルずれ量を含む、項目２０８～２１１のいずれか一項に記載の動画像処理装置。
［項目２１３］
上記第１ベース動きベクトルと第２ベース動きベクトルがいずれも非特定参照画像を指す場合、上記二つの動きベクトルずれ量は、
上記二つの動きベクトルずれ量に基づき上記第１ベース動きベクトルと第２ベース動きベクトルを調整するために用いられる、項目２０８～２１１のいずれか一項に記載の動画像処理装置。
［項目２１４］
上記現在画像から上記第１ベース動きベクトルの参照画像までの距離と上記現在画像から上記第２ベース動きベクトルの参照画像までの距離との比は、上記第１ベース動きベクトルが使用する動きベクトルずれ量と上記第２ベース動きベクトルが使用する動きベクトルずれ量との比に等しい、項目２１３に記載の動画像処理装置。
［項目２１５］
上記構築モジュールはさらに、
マージ候補リストを取得することを含み、上記マージ候補リストにはＰ組のマージ動きベクトル候補が含まれ、ここでは、Ｐは１以上の整数であり、
上記構築モジュールはベース動きベクトルリストを確定することは、
上記構築モジュールが上記マージ候補リストに基づき、上記ベース動きベクトルリストを確定することを含む、項目２０８～２１４のいずれか一項に記載の動画像処理装置。
［項目２１６］
上記構築モジュールは、上記マージ候補リストに基づき、上記ベース動きベクトルリストを確定することは、
Ｐが２以上の場合、上記構築モジュールが上記マージ候補リストのうちの２組のマージ動きベクトル候補を取って上記ベース動きベクトルリストを形成することを含む、項目２１５に記載の動画像処理装置。
［項目２１７］
上記構築モジュールは上記マージ候補リストに基づき、上記ベース動きベクトルリストを確定することは、
Ｐが２より小さい場合、上記構築モジュールが動きベクトル（０，０）で填充して上記ベース動きベクトルリストを形成することを含む、項目２１５に記載の動画像処理装置。
［項目２１８］
上記予め設定されたずれ量セットは｛２，４，８，１６，３２，６４，１２８，２５６｝である、項目２０８～２１７のいずれか一項に記載の動画像処理装置。
［項目２１９］
上記現在画像ブロックは１つの符号化ユニットＣＵである、項目２０８～２１８のいずれか一項に記載の動画像処理装置。
［項目２２０］
上記現在画像ブロックは双予測画像ブロックである、項目２０８～２１９のいずれか一項に記載の動画像処理装置。
［項目２２１］
動画像処理装置であって、メモリとプロセッサを含み、上記メモリはコマンドを記憶するために用いられ、上記プロセッサは上記メモリに記憶されたコマンドを実行し、上記メモリに記憶されたコマンドを実行することによって、上記プロセッサは項目１９５～２０７のいずれか一項に記載の方法を実行するために用いられる、動画像処理装置。
［項目２２２］
コンピュータ記憶媒体であって、それにコンピュータプログラムが記憶され、上記コンピュータプログラムはコンピュータに実行されると、上記コンピュータに項目１９５～２０７のいずれか一項に記載の方法を実行させる、コンピュータ記憶媒体。
［項目２２３］
命令を含むコンピュータプログラム製品であって、上記命令がコンピュータに実行されると、コンピュータに項目１９５～２０７のいずれか一項に記載の方法を実行させる、コンピュータプログラム製品。

Claims (14)

  1. 符号化端末により送信されるビットストリームを受信するステップであって、前記ビットストリームは、２つの動きベクトルずれ量の組み合わせを示すために使用される第１インデックスを含む、ステップと、
    ベース動きベクトルリストを確定するステップであって、前記ベース動きベクトルリストは、少なくとも１つの双予測ベース動きベクトル群を含み、前記双予測ベース動きベクトル群は、第１ベース動きベクトルと第２ベース動きベクトルとを含む、ステップと、
    前記ビットストリームに含まれる前記第１インデックスに従う予め設定されたずれ量セットを使用して、２つの動きベクトルずれ量を確定するステップであって、前記２つの動きベクトルずれ量は、前記第１ベース動きベクトルと前記第２ベース動きベクトルとに対応する、ステップと、
    前記第１ベース動きベクトル、前記第２ベース動きベクトル、及び前記２つの動きベクトルずれ量に基づき、現在画像ブロックの複数の動きベクトルを確定するステップと、
    前記現在画像ブロックの前記複数の動きベクトルに基づいて、前記現在画像ブロックを予測するステップと
    を備える動画像符号化方法。
  2. 前記ビットストリームは、第２インデックスを含み、前記第２インデックスは、動きベクトル候補リストから選択される前記第１ベース動きベクトル及び前記第２ベース動きベクトルを示すために使用される、請求項１に記載の動画像符号化方法。
  3. 前記予め設定されたずれ量セットは、複数の動きベクトルずれ量を含む、請求項１または２に記載の動画像符号化方法。
  4. 前記第１ベース動きベクトル及び前記第２ベース動きベクトルが非特定参照画像を示す場合、前記２つの動きベクトルずれ量のうち少なくとも１つの動きベクトルずれ量は、初期動きベクトルずれ量をスケーリングすることにより取得される動きベクトルずれ量を含み、前記現在画像ブロックの前記動きベクトルは、前記第１ベース動きベクトル、前記第２ベース動きベクトル、初期動きベクトルずれ量をスケーリングすることにより取得される前記動きベクトルずれ量に基づいて確定され、
    前記非特定参照画像は、合成フレーム、長期参照画像、及び非出力画像のうちの１つである、請求項１から３の何れか１つに記載の動画像符号化方法。
  5. スケーリングの縮尺は、前記現在画像ブロックを含む現在画像と、２つの参照方向における前記現在画像ブロックの２つの参照画像との間の距離によって確定される、請求項４に記載の動画像符号化方法。
  6. 前記２つの参照画像は、前記第１ベース動きベクトルにより指示される第１参照画像、及び前記第２ベース動きベクトルにより指示される第２参照画像を含む、請求項５に記載の動画像符号化方法。
  7. 前記現在画像ブロックを含む現在画像と、２つの参照方向における前記現在画像ブロックの２つの参照画像との間の距離が同じである場合、同じ動きベクトルずれ量が、前記第１ベース動きベクトル及び前記第２ベース動きベクトルに追加される、請求項４に記載の動画像符号化方法。
  8. 前記第１ベース動きベクトル及び／又は前記第２ベース動きベクトルが特定参照画像を示す場合、前記２つの動きベクトルずれ量のうち少なくとも１つの動きベクトルずれ量が、スケーリングの処理をスキップすることにより取得され、前記現在画像ブロックの前記動きベクトルは、前記第１ベース動きベクトル、前記第２ベース動きベクトル、及び前記初期動きベクトルずれ量に基づいて確定される、請求項４に記載の動画像符号化方法。
  9. マージ候補リストを取得するステップであって、前記マージ候補リストは、Ｐ組のマージ動きベクトル候補を含み、Ｐは、１以上の整数である、ステップと、
    前記ベース動きベクトルリストを確定するステップは、
    前記マージ候補リストに基づいて前記ベース動きベクトルリストを確定するステップであって、Ｐが２以上の場合に、前記マージ候補リスト内の最初の２組のマージ動きベクトル候補を取って、前記ベース動きベクトルリストを形成することを含む、請求項１から５の何れか１つに記載の動画像符号化方法。
  10. 前記マージ候補リスト内の前記２組のマージ動きベクトル候補は、前記マージ候補リスト内の最初の組のマージ動きベクトル候補、及び２番目の組のマージ動きベクトル候補を含む、請求項９に記載の動画像符号化方法。
  11. 予め設定されたずれ量セットから２つの動きベクトルずれ量を確定するステップは、
    前記予め設定されたずれ量セットからの２つの動きベクトルずれ量を含む複数組の動きベクトルずれ量の組み合わせを確定することを含み、
    前記第１ベース動きベクトル、前記第２ベース動きベクトル、及び前記２つ動きベクトルずれ量に基づいて前記現在画像ブロックの前記動きベクトルを確定するステップは、
    前記複数組の動きベクトルずれ量の組み合わせから動きベクトルずれ量の組み合わせを確定し、前記第１ベース動きベクトル、前記第２ベース動きベクトル、及び前記動きベクトルずれ量の組み合わせに基づいて前記現在画像ブロックの前記動きベクトルを確定することを含む、請求項１から１０の何れか１つに記載の動画像符号化方法。
  12. メモリ及びプロセッサを備える動画像符号化装置であって、
    前記メモリは、命令を格納するために使用され、
    前記プロセッサは、前記メモリに格納された前記命令を実行するように構成され、
    前記メモリに格納された前記命令の実行により、前記プロセッサが、請求項１から１１の何れか１つに記載の動画像符号化方法を実行する、動画像符号化装置。
  13. ベース動きベクトルリストを確定するステップであって、前記ベース動きベクトルリストは、少なくとも１つの双予測ベース動きベクトル群を含み、前記双予測ベース動きベクトル群は、第１ベース動きベクトルと第２ベース動きベクトルとを含む、ステップと、
    予め設定されたずれ量セットを使用して、２つの動きベクトルずれ量を確定するステップであって、前記２つの動きベクトルずれ量は、前記第１ベース動きベクトルと前記第２ベース動きベクトルとに対応する、ステップと、
    前記第１ベース動きベクトル、前記第２ベース動きベクトル、及び前記２つの動きベクトルずれ量に基づき、現在画像ブロックの複数の動きベクトルを確定するステップと、
    前記現在画像ブロックの前記複数の動きベクトルに基づいて、前記現在画像ブロックを符号化し、２つの動きベクトルずれ量の組み合わせを示すために使用される第１インデックスを含むビットストリームを生成するステップと
    を備えるビットストリーム生成方法。
  14. メモリ及びプロセッサを備える動画処理装置であって、
    前記メモリは、命令を格納するために使用され、
    前記プロセッサは、前記メモリに格納された前記命令を実行するように構成され、
    前記メモリに格納された前記命令の実行により、前記プロセッサが、
    ベース動きベクトルリストを確定するステップであって、前記ベース動きベクトルリストは、少なくとも１つの双予測ベース動きベクトル群を含み、前記双予測ベース動きベクトル群は、第１ベース動きベクトルと第２ベース動きベクトルとを含む、ステップと、
    予め設定されたずれ量セットを使用して、２つの動きベクトルずれ量を確定するステップであって、前記２つの動きベクトルずれ量は、前記第１ベース動きベクトルと前記第２ベース動きベクトルとに対応する、ステップと、
    前記第１ベース動きベクトル、前記第２ベース動きベクトル、及び前記２つの動きベクトルずれ量に基づき、現在画像ブロックの複数の動きベクトルを確定するステップと、
    前記現在画像ブロックの前記複数の動きベクトルに基づいて、前記現在画像ブロックを符号化し、２つの動きベクトルずれ量の組み合わせを示すために使用される第１インデックスを含むビットストリームを生成するステップと
    を実行する、動画処理装置。
JP2024025977A 2018-04-02 2024-02-22 動画像符号化方法、動画像符号化装置、及びビットストリーム生成方法 Pending JP2024057014A (ja)

Applications Claiming Priority (12)

Application Number Priority Date Filing Date Title
PCT/CN2018/081652 WO2019191890A1 (zh) 2018-04-02 2018-04-02 用于图像处理的方法和图像处理装置
CNPCT/CN2018/081652 2018-04-02
PCT/CN2018/095710 WO2019192102A1 (zh) 2018-04-02 2018-07-13 用于图像运动补偿的方法和装置
CNPCT/CN2018/095710 2018-07-13
CNPCT/CN2018/103693 2018-08-31
PCT/CN2018/103693 WO2019192141A1 (zh) 2018-04-02 2018-08-31 用于图像运动补偿的方法和装置
CNPCT/CN2018/107436 2018-09-25
PCT/CN2018/107436 WO2019192152A1 (zh) 2018-04-02 2018-09-25 获取视频图像运动矢量的方法与装置
CNPCT/CN2018/112805 2018-10-30
PCT/CN2018/112805 WO2019192170A1 (zh) 2018-04-02 2018-10-30 视频图像处理方法与装置
PCT/CN2019/078051 WO2019192301A1 (zh) 2018-04-02 2019-03-13 视频图像处理方法与装置
JP2020553581A JP2021520120A (ja) 2018-04-02 2019-03-13 動画像処理方法および装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2020553581A Division JP2021520120A (ja) 2018-04-02 2019-03-13 動画像処理方法および装置

Publications (1)

Publication Number Publication Date
JP2024057014A true JP2024057014A (ja) 2024-04-23

Family

ID=68099733

Family Applications (10)

Application Number Title Priority Date Filing Date
JP2020553616A Active JP7088606B2 (ja) 2018-04-02 2018-04-02 動画処理方法、画像処理装置、プログラム、符号化デバイス、及び復号化デバイス
JP2020553636A Pending JP2021520124A (ja) 2018-04-02 2018-07-13 画像動き補償方法及び装置
JP2020553654A Active JP7388659B2 (ja) 2018-04-02 2018-08-31 動画処理方法、ビットストリーム生成方法、動画処理装置、及びプログラム
JP2020553580A Active JP7294753B2 (ja) 2018-04-02 2018-09-25 動画像処理方法、及び動画像処理装置
JP2020553586A Active JP7216109B2 (ja) 2018-04-02 2018-10-30 動画像処理方法、動画像処理装置、及びコンピュータプログラム
JP2020553581A Pending JP2021520120A (ja) 2018-04-02 2019-03-13 動画像処理方法および装置
JP2022182636A Pending JP2023017981A (ja) 2018-04-02 2022-11-15 動画処理方法、エンコーダ、非一時的なコンピュータ可読記憶媒体、及びプログラム
JP2023092773A Pending JP2023110048A (ja) 2018-04-02 2023-06-05 動画像処理方法、動画処理装置、及びビットストリーム生成方法
JP2023190720A Pending JP2024010198A (ja) 2018-04-02 2023-11-08 動画処理方法、ビットストリーム生成方法、及び動画処理装置
JP2024025977A Pending JP2024057014A (ja) 2018-04-02 2024-02-22 動画像符号化方法、動画像符号化装置、及びビットストリーム生成方法

Family Applications Before (9)

Application Number Title Priority Date Filing Date
JP2020553616A Active JP7088606B2 (ja) 2018-04-02 2018-04-02 動画処理方法、画像処理装置、プログラム、符号化デバイス、及び復号化デバイス
JP2020553636A Pending JP2021520124A (ja) 2018-04-02 2018-07-13 画像動き補償方法及び装置
JP2020553654A Active JP7388659B2 (ja) 2018-04-02 2018-08-31 動画処理方法、ビットストリーム生成方法、動画処理装置、及びプログラム
JP2020553580A Active JP7294753B2 (ja) 2018-04-02 2018-09-25 動画像処理方法、及び動画像処理装置
JP2020553586A Active JP7216109B2 (ja) 2018-04-02 2018-10-30 動画像処理方法、動画像処理装置、及びコンピュータプログラム
JP2020553581A Pending JP2021520120A (ja) 2018-04-02 2019-03-13 動画像処理方法および装置
JP2022182636A Pending JP2023017981A (ja) 2018-04-02 2022-11-15 動画処理方法、エンコーダ、非一時的なコンピュータ可読記憶媒体、及びプログラム
JP2023092773A Pending JP2023110048A (ja) 2018-04-02 2023-06-05 動画像処理方法、動画処理装置、及びビットストリーム生成方法
JP2023190720A Pending JP2024010198A (ja) 2018-04-02 2023-11-08 動画処理方法、ビットストリーム生成方法、及び動画処理装置

Country Status (6)

Country Link
US (16) US11368714B2 (ja)
EP (6) EP3780608A4 (ja)
JP (10) JP7088606B2 (ja)
KR (1) KR20200134319A (ja)
CN (16) CN117135346A (ja)
WO (4) WO2019191890A1 (ja)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190108506A (ko) * 2018-03-14 2019-09-24 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
CN117135346A (zh) 2018-04-02 2023-11-28 深圳市大疆创新科技有限公司 用于图像处理的方法和图像处理装置
CN115250350B (zh) * 2018-09-03 2024-04-09 华为技术有限公司 运动矢量的获取方法、装置、计算机设备及存储介质
WO2020084553A1 (en) 2018-10-24 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Motion candidate derivation based on multiple information in sub-block motion vector prediction
WO2020130710A1 (ko) * 2018-12-21 2020-06-25 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
EP3903495A4 (en) * 2018-12-28 2022-03-16 Telefonaktiebolaget Lm Ericsson (Publ) GENERATION OF A LIST OF MOTION VECTOR PREDICTORS
EP3963890A4 (en) 2019-06-04 2022-11-02 Beijing Bytedance Network Technology Co., Ltd. BUILDING A LIST OF MOVEMENT CANDIDATES USING NEIGHBOR BLOCK INFORMATION
CN114097228B (zh) 2019-06-04 2023-12-15 北京字节跳动网络技术有限公司 具有几何分割模式编解码的运动候选列表
CN113994699B (zh) 2019-06-06 2024-01-12 北京字节跳动网络技术有限公司 视频编解码的运动候选列表构建
EP3984215A4 (en) 2019-07-14 2022-08-24 Beijing Bytedance Network Technology Co., Ltd. TRANSFORM BLOCK SIZE RESTRICTION IN VIDEO CODING
CN117560490A (zh) * 2019-07-27 2024-02-13 北京字节跳动网络技术有限公司 根据参考图片类型使用工具的限制
CN114270838B (zh) 2019-08-20 2024-04-12 北京字节跳动网络技术有限公司 变换跳过模式的信令通知
JP7323710B2 (ja) 2019-09-13 2023-08-08 北京字節跳動網絡技術有限公司 映像符号化における重み付けサンプルの双予測
CN114503574A (zh) 2019-09-19 2022-05-13 北京字节跳动网络技术有限公司 视频编解码中的缩放窗口
BR112022005293A2 (pt) 2019-09-19 2022-09-20 Beijing Bytedance Network Tech Co Ltd Método de processamento de vídeo, aparelho para processar dados de vídeo e meios de armazenamento e de gravação não transitórios legíveis por computador
WO2021057996A1 (en) 2019-09-28 2021-04-01 Beijing Bytedance Network Technology Co., Ltd. Geometric partitioning mode in video coding
KR20220070437A (ko) 2019-10-05 2022-05-31 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩 툴의 레벨 기반 시그널링
EP4042678A4 (en) 2019-10-12 2023-01-18 Beijing Bytedance Network Technology Co., Ltd. USE AND REPORTING OF REFINEMENT VIDEO CODING TOOLS
JP7414980B2 (ja) 2019-10-13 2024-01-16 北京字節跳動網絡技術有限公司 参照ピクチャリサンプリングと映像コーディングツールとの間の相互作用
CN113727119B (zh) * 2020-05-20 2023-03-17 Oppo广东移动通信有限公司 帧间预测方法、编码器、解码器以及计算机存储介质
CN111724422B (zh) * 2020-06-29 2024-01-09 深圳市慧鲤科技有限公司 图像处理方法及装置、电子设备及存储介质
CN112132732B (zh) * 2020-09-10 2023-06-02 宁波大学科学技术学院 立体图像的像素预测方法、可逆信息隐藏提取方法、终端及存储介质
WO2022141278A1 (zh) * 2020-12-30 2022-07-07 深圳市大疆创新科技有限公司 视频处理方法和编码装置
WO2023192335A1 (en) * 2022-03-28 2023-10-05 Beijing Dajia Internet Information Technology Co., Ltd. Methods and devices for candidate derivation for affine merge mode in video coding
WO2024005456A1 (ko) * 2022-06-27 2024-01-04 현대자동차주식회사 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
WO2024005616A1 (ko) * 2022-07-01 2024-01-04 엘지전자 주식회사 영상 인코딩/디코딩 방법 및 장치, 그리고 비트스트림을 저장한 기록 매체

Family Cites Families (87)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2754625T3 (es) * 2001-11-29 2020-04-20 Godo Kaisha Ip Bridge 1 Método de extracción de distorsión de codificación
JP4130783B2 (ja) * 2002-04-23 2008-08-06 松下電器産業株式会社 動きベクトル符号化方法および動きベクトル復号化方法
KR100491530B1 (ko) * 2002-05-03 2005-05-27 엘지전자 주식회사 모션 벡터 결정 방법
US20050013498A1 (en) * 2003-07-18 2005-01-20 Microsoft Corporation Coding of motion vector information
US7660354B2 (en) 2005-05-11 2010-02-09 Fang Shi Temporal error concealment for bi-directionally predicted frames
ZA200900102B (en) * 2006-07-06 2010-05-26 Thomson Licensing Method and apparatus for decoupling frame number and/or picture order count (poc) for multi-view video encoding and decoding
JP2010509799A (ja) * 2006-11-03 2010-03-25 サムスン エレクトロニクス カンパニー リミテッド 映像の予測符号化方法及び装置、その復号化方法及び装置
JP2009118221A (ja) * 2007-11-07 2009-05-28 Toshiba Corp ディジタル画像復号装置及びディジタル画像復号方法
CN101873500B (zh) * 2009-04-24 2012-05-23 华为技术有限公司 帧间预测编码方法、帧间预测解码方法及设备
EP2536150B1 (en) * 2010-02-09 2017-09-13 Nippon Telegraph And Telephone Corporation Predictive coding method for motion vector, predictive decoding method for motion vector, video coding device, video decoding device, and programs therefor
KR20120009861A (ko) * 2010-07-22 2012-02-02 에스케이 텔레콤주식회사 확장된 스킵모드를 이용한 영상 부호화/복호화 방법 및 장치
KR20120016991A (ko) 2010-08-17 2012-02-27 오수미 인터 프리딕션 방법
KR101952103B1 (ko) * 2010-10-08 2019-02-27 지이 비디오 컴프레션, 엘엘씨 블록 분할 및 블록 병합을 지원하는 픽처 코딩
US8824558B2 (en) 2010-11-23 2014-09-02 Mediatek Inc. Method and apparatus of spatial motion vector prediction
US8976873B2 (en) * 2010-11-24 2015-03-10 Stmicroelectronics S.R.L. Apparatus and method for performing error concealment of inter-coded video frames
CN107071459B (zh) 2010-12-14 2020-01-03 M&K控股株式会社 用于编码运动画面的设备
US9635383B2 (en) 2011-01-07 2017-04-25 Texas Instruments Incorporated Method, system and computer program product for computing a motion vector
US8755437B2 (en) * 2011-03-17 2014-06-17 Mediatek Inc. Method and apparatus for derivation of spatial motion vector candidate and motion vector prediction candidate
CN102611881B (zh) * 2011-01-19 2014-06-25 华为技术有限公司 参考运动矢量获取方法、模块及编、解码装置
KR101484171B1 (ko) * 2011-01-21 2015-01-23 에스케이 텔레콤주식회사 예측 움직임벡터 색인부호화에 기반한 움직임정보 생성/복원 장치 및 방법, 및 그것을 이용한 영상 부호화/복호화 장치 및 방법
HRP20230425T1 (hr) * 2011-03-21 2023-07-07 Lg Electronics, Inc. Odabir prediktora vektora kretanja
US9247249B2 (en) * 2011-04-20 2016-01-26 Qualcomm Incorporated Motion vector prediction in video coding
JP5786478B2 (ja) 2011-06-15 2015-09-30 富士通株式会社 動画像復号装置、動画像復号方法、及び動画像復号プログラム
EP3481066B1 (en) * 2011-06-28 2021-05-19 LG Electronics Inc. Method for deriving a motion vector predictor
CN105430390B (zh) * 2011-06-30 2017-04-12 Jvc建伍株式会社 图像解码装置、图像解码方法、接收装置及接收方法
BR122015001002B1 (pt) * 2011-06-30 2022-07-26 Sony Corporation Dispositivo e método de processamento de imagem
CN107360432A (zh) 2011-08-29 2017-11-17 苗太平洋控股有限公司 用于解码合并模式下的运动信息的装置
CN102447904A (zh) * 2011-10-24 2012-05-09 成都虢电智能电力科技有限公司 一种快速对视频序列进行运动估计的方法
JP5320525B1 (ja) * 2011-10-27 2013-10-23 パナソニック株式会社 予測動きベクトル導出方法および予測動きベクトル導出装置
ES2780188T3 (es) 2011-10-28 2020-08-24 Sun Patent Trust Método de codificación de imagen, método de decodificación de imagen, aparato de codificación de imagen y aparato de decodificación de imagen
EP2773111B1 (en) 2011-10-28 2020-01-01 Sun Patent Trust Image encoding method, image decoding method, image encoding device, and image decoding device
TWI569634B (zh) 2011-10-31 2017-02-01 Jvc Kenwood Corp Dynamic image decoding device, dynamic image decoding method and dynamic image decoding program
ES2898887T3 (es) * 2011-11-08 2022-03-09 Nokia Technologies Oy Manejo de imágenes de referencia
BR112014010966A2 (pt) * 2011-11-08 2017-06-06 Samsung Electronics Co Ltd método para determinar vetor de movimento para previsão inter, aparelho determinador de vetor de movimento para previsão inter, e mídia de gravação legível por computador
CN107659813B (zh) 2011-12-23 2020-04-17 韩国电子通信研究院 图像解码方法、图像编码方法和记录介质
ES2951398T3 (es) 2012-04-12 2023-10-20 Jvckenwood Corp Construcción de listas de candidatos a fusión
JP2013223049A (ja) * 2012-04-13 2013-10-28 Sharp Corp 画像復号装置、および画像符号化装置
US10051264B2 (en) * 2012-04-20 2018-08-14 Qualcomm Incorporated Marking reference pictures in video sequences having broken link pictures
RU2624578C2 (ru) 2012-07-02 2017-07-04 Самсунг Электроникс Ко., Лтд. Способ и устройство для прогнозирования вектора движения для кодирования видео или декодирования видео
US9325990B2 (en) 2012-07-09 2016-04-26 Qualcomm Incorporated Temporal motion vector prediction in video coding extensions
CN102883161B (zh) * 2012-09-19 2015-09-30 华为技术有限公司 视频编码和解码的处理方法和装置
WO2014045954A1 (ja) * 2012-09-20 2014-03-27 ソニー株式会社 画像処理装置および方法
US9538180B2 (en) * 2012-12-17 2017-01-03 Qualcomm Incorporated Motion vector prediction in video coding
JP6352248B2 (ja) * 2013-04-04 2018-07-04 シャープ株式会社 画像復号装置、および画像符号化装置
CN109379603A (zh) * 2013-04-07 2019-02-22 杜比国际公司 用信号通知输出层集的改变
US9591321B2 (en) * 2013-04-07 2017-03-07 Dolby International Ab Signaling change in output layer sets
US9930363B2 (en) 2013-04-12 2018-03-27 Nokia Technologies Oy Harmonized inter-view and view synthesis prediction for 3D video coding
US20160191933A1 (en) * 2013-07-10 2016-06-30 Sharp Kabushiki Kaisha Image decoding device and image coding device
US9894369B2 (en) * 2013-07-30 2018-02-13 Kt Corporation Image encoding and decoding method supporting plurality of layers and apparatus using same
US9762927B2 (en) * 2013-09-26 2017-09-12 Qualcomm Incorporated Sub-prediction unit (PU) based temporal motion vector prediction in HEVC and sub-PU design in 3D-HEVC
CN105612745A (zh) * 2013-10-08 2016-05-25 夏普株式会社 图像解码装置、图像编码装置以及编码数据
DK3958572T3 (da) * 2014-01-02 2024-03-04 Dolby Laboratories Licensing Corp Fremgangsmåde til kodning af multi-visnings-video, fremgangsmåde til afkodning af multi-visnings-video og lagringsmedium dertil
US20170026655A1 (en) * 2014-01-02 2017-01-26 Sharp Kabushiki Kaisha Parameter set signaling
US20170019666A1 (en) * 2014-03-13 2017-01-19 Sharp Kabushiki Kaisha Constrained reference picture parameters
US9788007B2 (en) * 2014-06-20 2017-10-10 Qualcomm Incorporated Profile, tier, level for the 0-th output layer set in video coding
JP2017532885A (ja) * 2014-09-26 2017-11-02 ヴィド スケール インコーポレイテッド 時間ブロックベクトル予測を用いたイントラブロックコピー符号化
CN107113440B (zh) * 2014-10-31 2020-10-13 三星电子株式会社 一种由视频解码装置执行的视频解码方法
US9872296B2 (en) 2015-01-06 2018-01-16 Qualcomm Incorporated Techniques for beam shaping at a millimeter wave base station and a wireless device and fast antenna subarray selection at a wireless device
WO2016165069A1 (en) * 2015-04-14 2016-10-20 Mediatek Singapore Pte. Ltd. Advanced temporal motion vector prediction in video coding
US10462468B2 (en) * 2015-09-08 2019-10-29 Mediatek Inc. Method and system of decoded picture buffer for intra block copy mode
CN106534858B (zh) 2015-09-10 2019-09-06 展讯通信（上海）有限公司 真实运动估计方法及装置
CN111526360A (zh) * 2016-02-06 2020-08-11 华为技术有限公司 图像编解码方法及装置
CN114466193A (zh) * 2016-03-16 2022-05-10 联发科技股份有限公司 视频编码的样式基础的运动向量推导之方法及装置
WO2017164441A1 (ko) 2016-03-24 2017-09-28 엘지전자 주식회사 비디오 코딩 시스템에서 인터 예측 방법 및 장치
US10560718B2 (en) 2016-05-13 2020-02-11 Qualcomm Incorporated Merge candidates for motion vector prediction for video coding
CA3025334C (en) 2016-05-25 2021-07-13 Arris Enterprises Llc Binary ternary quad tree partitioning for jvet coding of video data
WO2018033661A1 (en) 2016-08-15 2018-02-22 Nokia Technologies Oy Video encoding and decoding
US11409855B2 (en) * 2016-08-22 2022-08-09 Lenovo (Singapore) Pte. Ltd. Gesture based CAPTCHA test
CN107820095B (zh) * 2016-09-14 2020-01-03 北京金山云网络技术有限公司 一种长期参考图像选择方法及装置
US10812791B2 (en) * 2016-09-16 2020-10-20 Qualcomm Incorporated Offset vector identification of temporal motion vector predictor
EP3301914A1 (en) 2016-09-30 2018-04-04 Thomson Licensing Method and apparatus for encoding and decoding a large field of view video
EP3343924A1 (en) 2017-01-03 2018-07-04 Thomson Licensing Method and apparatus for encoding and decoding motion information
EP3343925A1 (en) 2017-01-03 2018-07-04 Thomson Licensing Method and apparatus for encoding and decoding motion information
US10542280B2 (en) 2017-01-09 2020-01-21 QUALCOMM Incorpated Encoding optimization with illumination compensation and integer motion vector restriction
US20180199057A1 (en) 2017-01-12 2018-07-12 Mediatek Inc. Method and Apparatus of Candidate Skipping for Predictor Refinement in Video Coding
JP7036628B2 (ja) * 2017-03-10 2022-03-15 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法及び復号方法
CN109089119B (zh) * 2017-06-13 2021-08-13 浙江大学 一种运动矢量预测的方法及设备
JP2020145486A (ja) * 2017-07-28 2020-09-10 シャープ株式会社 動画像符号化装置及び動画像復号装置
EP3651463A4 (en) * 2017-09-12 2021-05-19 Samsung Electronics Co., Ltd. MOVEMENT INFORMATION CODING AND DECODING PROCESS AND MOVEMENT INFORMATION CODING AND DECODING DEVICE
CN107682705B (zh) * 2017-09-26 2020-05-12 杭州电子科技大学 基于mv-hevc框架的立体视频b帧错误隐藏方法
US20190141320A1 (en) * 2017-11-07 2019-05-09 Qualcomm Incorporated Enhanced reference picture management in video coding
KR102387363B1 (ko) * 2017-11-30 2022-04-18 엘지전자 주식회사 영상 코딩 시스템에서 인터 예측에 따른 영상 디코딩 방법 및 장치
EP3764645A4 (en) 2018-03-09 2021-12-08 Electronics and Telecommunications Research Institute METHOD AND APPARATUS FOR IMAGE CODING / DECODING USING SAMPLE FILTER
WO2019194514A1 (ko) 2018-04-01 2019-10-10 엘지전자 주식회사 인터 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
CN116684638A (zh) 2018-04-01 2023-09-01 Lg电子株式会社 图像编码/解码方法、视频数据发送方法和存储介质
CN117135346A (zh) 2018-04-02 2023-11-28 深圳市大疆创新科技有限公司 用于图像处理的方法和图像处理装置
EP3831064B1 (en) * 2018-08-17 2024-02-07 Huawei Technologies Co., Ltd. Reference picture management in video coding

Also Published As

Publication number Publication date
WO2019192141A1 (zh) 2019-10-10
EP3780608A4 (en) 2021-12-01
US11997312B2 (en) 2024-05-28
US11330294B2 (en) 2022-05-10
US20210227251A1 (en) 2021-07-22
CN113852828A (zh) 2021-12-28
CN110419217A (zh) 2019-11-05
US11159821B2 (en) 2021-10-26
EP3783897A4 (en) 2022-02-23
US20210227254A1 (en) 2021-07-22
WO2019192102A1 (zh) 2019-10-10
US11381839B2 (en) 2022-07-05
EP3780614A1 (en) 2021-02-17
US20240137559A1 (en) 2024-04-25
EP3780618A4 (en) 2022-03-02
US20210021824A1 (en) 2021-01-21
CN114125440A (zh) 2022-03-01
JP2021520120A (ja) 2021-08-12
EP3780615A4 (en) 2022-03-02
US11949912B2 (en) 2024-04-02
CN117135346A (zh) 2023-11-28
US20210021855A1 (en) 2021-01-21
JP7216109B2 (ja) 2023-01-31
CN117294837A (zh) 2023-12-26
CN110786012B (zh) 2024-01-30
CN110720219B (zh) 2022-04-26
CN113824966B (zh) 2023-09-12
US20210227253A1 (en) 2021-07-22
US20220286706A1 (en) 2022-09-08
CN113824966A (zh) 2021-12-21
CN117061738A (zh) 2023-11-14
US20220353527A1 (en) 2022-11-03
JP7388659B2 (ja) 2023-11-29
US11368714B2 (en) 2022-06-21
CN110786012A (zh) 2020-02-11
JP7088606B2 (ja) 2022-06-21
US11190798B2 (en) 2021-11-30
JP2021520121A (ja) 2021-08-12
EP3780614A4 (en) 2022-02-23
CN114938452A (zh) 2022-08-23
US11350124B2 (en) 2022-05-31
CN110419220B (zh) 2023-08-29
CN110495169A (zh) 2019-11-22
CN116760999A (zh) 2023-09-15
JP2023052491A (ja) 2023-04-11
KR20200134319A (ko) 2020-12-01
WO2019191890A1 (zh) 2019-10-10
US20210218989A1 (en) 2021-07-15
JP2021520126A (ja) 2021-08-12
JP7294753B2 (ja) 2023-06-20
JP2021526322A (ja) 2021-09-30
US20210021812A1 (en) 2021-01-21
WO2019192152A1 (zh) 2019-10-10
US20210021856A1 (en) 2021-01-21
JP2021520124A (ja) 2021-08-12
CN113852828B (zh) 2023-09-12
EP3780618A1 (en) 2021-02-17
US11343534B2 (en) 2022-05-24
CN110326295A (zh) 2019-10-11
EP3780619A4 (en) 2022-02-23
US20210227252A1 (en) 2021-07-22
US11363294B2 (en) 2022-06-14
EP3780615A1 (en) 2021-02-17
JP2024010198A (ja) 2024-01-23
US20210021825A1 (en) 2021-01-21
EP3780619A1 (en) 2021-02-17
US11490118B2 (en) 2022-11-01
CN110495169B (zh) 2021-12-17
CN110720219A (zh) 2020-01-21
EP3783897A1 (en) 2021-02-24
US11871032B2 (en) 2024-01-09
CN110419220A (zh) 2019-11-05
US11323742B2 (en) 2022-05-03
JP2021520119A (ja) 2021-08-12
CN110419217B (zh) 2023-09-26
EP3780608A1 (en) 2021-02-17
US20210021865A1 (en) 2021-01-21
US20220321907A1 (en) 2022-10-06
JP2023110048A (ja) 2023-08-08
CN115037942A (zh) 2022-09-09
US20220086483A1 (en) 2022-03-17
CN116781928A (zh) 2023-09-19
CN110326295B (zh) 2021-11-16
JP2023017981A (ja) 2023-02-07
US11949911B2 (en) 2024-04-02
US11490120B2 (en) 2022-11-01

Similar Documents

Publication Publication Date Title
JP2024057014A (ja) 動画像符号化方法、動画像符号化装置、及びビットストリーム生成方法
US11140408B2 (en) Affine motion prediction
US20170150172A1 (en) Picture encoding device, picture encoding method, picture encoding program, picture decoding device, picture decoding method, and picture decoding program
TW201924350A (zh) 視訊寫碼中之仿射運動向量預測
TWI738081B (zh) 視訊編碼系統中結合多重預測子用於區塊預測之方法和裝置
CN114503584A (zh) 基于历史的运动矢量预测
WO2019192301A1 (zh) 视频图像处理方法与装置
TWI729497B (zh) 在視頻編解碼系統中組合多個預測子進行塊預測的方法和裝置
CN113475075B (zh) 基于共享Merge列表的运动预测
JP7497948B2 (ja) 動画像処理方法および装置
WO2019192170A1 (zh) 视频图像处理方法与装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240222