JP5882984B2 - ビデオ符号化およびビデオ復号化のための暗示的適応型動きベクトル予測子選択の方法および装置 - Google Patents

ビデオ符号化およびビデオ復号化のための暗示的適応型動きベクトル予測子選択の方法および装置 Download PDF

Info

Publication number
JP5882984B2
JP5882984B2 JP2013500043A JP2013500043A JP5882984B2 JP 5882984 B2 JP5882984 B2 JP 5882984B2 JP 2013500043 A JP2013500043 A JP 2013500043A JP 2013500043 A JP2013500043 A JP 2013500043A JP 5882984 B2 JP5882984 B2 JP 5882984B2
Authority
JP
Japan
Prior art keywords
motion vector
vector predictor
block
motion
predicted
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013500043A
Other languages
English (en)
Other versions
JP2013523010A5 (ja
JP2013523010A (ja
Inventor
ユンフェイ ツェン
ユンフェイ ツェン
イン ペン
ペン イン
ソール ジョエル
ソール ジョエル
シャオアン ルー
シャオアン ルー
キァン シュー
キァン シュー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of JP2013523010A publication Critical patent/JP2013523010A/ja
Publication of JP2013523010A5 publication Critical patent/JP2013523010A5/ja
Application granted granted Critical
Publication of JP5882984B2 publication Critical patent/JP5882984B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/109Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/521Processing of motion vectors for estimating the reliability of the determined motion vectors or motion vector field, e.g. for smoothing the motion vector field or for correcting motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/56Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/567Motion estimation based on rate distortion criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/57Motion estimation characterised by a search window with variable size or shape
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本原理は一般に、ビデオ符号化およびビデオ復号化に関し、より詳細には、ビデオ符号化およびビデオ復号化のための暗示的適応型の動きベクトル予測の選択(以下、暗示的適応型動きベクトル予測選択)の方法および装置に関する。
関連出願の相互参照
本出願は、その全体が参照により本明細書に組み込まれている、2010年3月16日に出願された米国特許仮出願第61/314,506号明細書の利益を主張するものである。
動き推定および動き補償は、ビデオシーケンスの画像間の固有の時間冗長性を活用するために、ビデオ圧縮において広く使用されている。通常、動き情報は、参照フレームバッファにおける現在の符号化ブロックの対応関係を示すために、動きベクトルおよび対応する参照フレームインデックスを用いた変位フォーマットによって表される。そのような動き情報は、オーバーヘッドとして復号器に送信されるか、別の方法で伝えられる。圧縮における目的が、画像の所望の主観的品質および客観的品質を依然として維持しながら、できるだけ少ないコストで情報を伝えることであることは明白である。
最新のビデオ符号化標準、すなわち、International Organization for Standardization/International Electrotechnical Commission (ISO/IEC) Moving Picture Experts Group−4 (MPEG−4) Part 10 Advanced Video Coding (AVC) Standard/International Telecommunication Union、Telecommunication Sector (ITU−T) H.264勧告(以下、「MPEG−4 AVC標準」)では、動きベクトルは、その空間因果的な隣接動きベクトルの中央値によって予測される。動き場が比較的平滑であり、隣接動きベクトルが高い忠実度を有するとき、この手法は非常に簡単で効果的である。しかし、動き場が複雑になる傾向があるとき、この手法は、隣接動きベクトルの中央値を選択することだけでは、うまく機能しない場合がある。さらに、現在の符号化ブロックの周りに、多くの低忠実度の動きベクトルがある可能性がある。これらの要因は、動きベクトル予測の品質の低下を引き起こす場合がある。
動きベクトル競合(MVComp)として知られている技法は、第1の従来技術の手法において説明される。MVCompでは、動きベクトル予測選択の手順は、符号化ブロックのレート歪み最適化の中に組み込まれる。結果として生じる出力として、MVCompは、最良の動きベクトル予測インデックスを復号器に明示的に送信する(または別の方法で伝える、例えば、媒体上に埋め込まれる)。MVCompでは、符号化ブロックは、1組の動きベクトル予測を有する。最良の動きベクトル予測は、レート歪み(RD)最適化に基づいて選択される。組が1より多い候補を有する場合、その組の中の動きベクトル予測のインデックスは、復号器に明示的に送信される。動きベクトル予測のそれぞれがチェックされ、他の動きベクトル予測と比較されるので、このプロセスは非常に最適化される。組は、空間因果的で時間因果的な隣接ブロックに由来する動きベクトルを含むことができる。1組の動きベクトル予測を考慮すると、この手法は、レート歪みという意味において、その組の中の最良の予測を見つけることもできる。しかし、このことは、それぞれの予測をそれぞれの符号化ブロックについてのモード決定ループに引き込むので、符号器における複雑性が非常に大きい。別の短所はオーバーヘッド(例えば、組の中の動きベクトル予測のインデックス)であり、特に低ビットレート用途の場合に、この手法を費用がかかる非効率的なものにする可能性がある。
従来技術のこれらおよび他の欠点および不利点は本原理によって対処され、本原理はビデオ符号化およびビデオ復号化のための暗示的適応型動きベクトル予測選択の方法および装置を対象とする。
本原理のある態様によれば、装置が提供される。この装置は、暗示的適応型動きベクトル予測選択を使用して、ピクチャ内の少なくとも1つのブロックを符号化するためのビデオ符号器を含む。ブロックを符号化するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づいて、ブロックに対して1組の動きベクトル予測候補を定義し、空間時間的な隣接動きベクトルの忠実度のそれぞれの値に応じて、ブロックを符号化するための動きベクトルとして、特定の動きベクトル予測候補をその組から選択することによって予測される。
本原理の別の態様によれば、ビデオ符号器における方法が提供される。この方法は、暗示的適応型動きベクトル予測選択を使用して、ピクチャ内の少なくとも1つのブロックを符号化するステップを含む。ブロックを符号化するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づいて、ブロックに対して1組の動きベクトル予測候補を定義し、空間時間的な隣接動きベクトルの忠実度のそれぞれの値に応じて、ブロックを符号化するための動きベクトルとして、特定の動きベクトル予測候補をその組から選択することによって予測される。
本原理のさらに別の態様によれば、装置が提供される。この装置は、暗示的適応型動きベクトル予測選択を使用して、ピクチャ内の少なくとも1つのブロックを復号するためのビデオ復号器を含む。ブロックを復号するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づいて、ブロックに対して1組の動きベクトル予測候補を定義し、空間時間的な隣接動きベクトルの忠実度のそれぞれの値に応じて、ブロックを復号するための動きベクトルとして、特定の動きベクトル予測候補をその組から選択することによって予測される。
本原理のさらにまた別の態様によれば、ビデオ復号器における方法が提供される。この方法は、暗示的適応型動きベクトル予測選択を使用して、ピクチャ内の少なくとも1つのブロックを復号するステップを含む。ブロックを復号するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づいて、ブロックに対して1組の動きベクトル予測候補を定義し、空間時間的な隣接動きベクトルの忠実度のそれぞれの値に応じて、ブロックを復号するための動きベクトルとして、特定の動きベクトル予測候補をその組から選択することによって予測される。
本原理のこれらおよび他の態様、特徴、および利点は、添付の図面に関連して読まれるべきである例示的な実施形態の以下の詳細な説明から明らかとなろう。
本原理は、以下の例示的な図に従って、よりよく理解され得る。
本原理のある実施形態による、本原理を適用することができる例示的なビデオ符号器を示すブロック図である。 本原理のある実施形態による、本原理を適用することができる例示的なビデオ復号器を示すブロック図である。 本原理のある実施形態による、ビデオ符号器における暗示的適応型動きベクトル予測選択の例示的な方法を示す流れ図である。 本原理のある実施形態による、ビデオ復号器における暗示的適応型動きベクトル予測選択の例示的な方法を示す流れ図である。 本原理のある実施形態による、ビデオ符号器における暗示的適応型動きベクトル予測選択の別の例示的な方法を示す流れ図である。 本原理のある実施形態による、ビデオ復号器における暗示的適応型動きベクトル予測選択の別の例示的な方法を示す流れ図である。 本原理のある実施形態による、ビデオ符号器における暗示的適応型動きベクトル予測選択のさらに別の例示的な方法を示す流れ図である。 本原理のある実施形態による、ビデオ復号器における暗示的適応型動きベクトル予測選択のさらに別の例示的な方法を示す流れ図である。
本原理は、ビデオ符号化およびビデオ復号化のための暗示的適応型動きベクトル予測選択の方法および装置を対象とする。
本説明は、本原理を例示する。したがって、当業者であれば、本明細書において明示的に説明されず、示されていないが、本原理を具体化し、その趣旨および範囲内に含まれる様々な構成を考案することができることを理解されたい。
本明細書に記載される全ての例および条件付きの文言は、当技術分野を推進するために本発明者(ら)によって寄与される本原理および概念を読者が理解するのを支援するための教育上の目的を意図するものであり、そのような具体的に記載された例および条件に限定されないものとして解釈されるべきである。
さらに、本原理の原理、態様、および実施形態を記載する本明細書における全ての記述、ならびにその特定の例は、その構造的等価物および機能的等価物の両方を包含することを意図する。加えて、そのような等価物は、現在知られている等価物ならびに将来開発される等価物、すなわち、構造にかかわらず同じ機能を実行する、開発される任意の要素の両方を含むことが意図される。
したがって、例えば、当業者であれば、本明細書に提示されるブロック図は、本原理を具体化する例示的な回路の概念図を表すことが理解されよう。同様に、任意のフローチャート、流れ図、状態遷移図、擬似コードなどは、コンピュータ可読媒体で実質的に表すことができ、コンピュータまたはプロセッサが明示的に示されているかどうかにかかわらず、そのようなコンピュータまたはプロセッサによってそのように実行することができる様々なプロセスを表すことを理解されたい。
図に示される様々な要素の機能は、専用ハードウェアならびに適切なソフトウェアに関連してソフトウェアを実行可能なハードウェアを使用することによって提供され得る。プロセッサによって提供されるとき、これらの機能は、単一の専用プロセッサによって、単一の共有プロセッサによって、またはその一部を共有することができる複数の個別のプロセッサによって提供できる。さらに、「プロセッサ」または「コントローラ」という用語の明示的な使用は、ソフトウェアを実行可能なハードウェアのみを指すと解釈されるべきではなく、デジタル信号プロセッサ(「DSP」)ハードウェア、ソフトウェアを記憶するための読取り専用メモリ(「ROM」)、ランダムアクセスメモリ(「RAM」)、および不揮発性記憶装置を暗示的に含み得るが、これらに限定されない。
従来のおよび/またはカスタムの他のハードウェアも含まれ得る。同様に、図に示される任意のスイッチは、概念的なものにすぎない。その機能は、プログラムロジックの動作を介して、専用ロジックを介して、プログラム制御および専用ロジックの相互作用を介して、または手動でも実行することができ、特定の技法は、文脈からより具体的に理解されるように、実装者によって選択可能である。
本明細書の特許請求の範囲では、特定の機能を実行するための手段として表現された任意の要素は、例えば、a)その機能を実行する回路素子の組合せ、またはb)その機能を実行するために、ソフトウェアを実行するための適切な回路と組み合わされた、任意の形態のソフトウェア(したがって、ファームウェア、マイクロコードなどを含む)を含む、その機能を実行する任意の方法を包含することが意図される。そのような特許請求の範囲によって定義される本原理は、様々な記載された手段によって提供される諸機能が、特許請求の範囲が要求する方法で組み合わされてまとめられるという事実にある。したがって、これらの機能を提供することができる任意の手段は、本明細書に示されるものと同等であると見なされる。
本明細書における本原理の「一実施形態(one embodiment)」または「ある実施形態(an embodiment)」、ならびに他のその変形形態への言及は、その実施形態に関連して説明される特定の特徴、構造、特性などが、本原理の少なくとも一実施形態に含まれることを意味する。したがって、本明細書全体を通じて様々な箇所に出現する、「一実施形態では(in one embodiment)」または「ある実施形態では(in an embodiment)」という句、ならびに任意の他の変形形態の出現は、必ずしも全てが同じ実施形態を指すわけではない。
例えば、「A/B」、「Aおよび/またはB」および「AおよびBの少なくとも1つ」の場合において、「/」、「および/または」、および「の少なくとも1つ」のいずれかの使用は、1番目に列挙された選択肢(A)のみの選択、または2番目に列挙された選択肢(B)のみの選択、または両方の選択肢(AおよびB)の選択を包含することを意図することを理解されたい。さらなる例として、「A、B、および/またはC」および「A、B、およびCの少なくとも1つ」の場合において、そのような言い回しは、1番目に列挙された選択肢(A)のみの選択、または2番目に列挙された選択肢(B)のみの選択、または3番目に列挙された選択肢(C)のみの選択、または1番目および2番目に列挙された選択肢(AおよびB)のみの選択、または1番目および3番目に列挙された選択肢(AおよびC)のみの選択、または2番目および3番目に列挙された選択肢(BおよびC)のみの選択、または3つ全ての選択肢(AおよびBおよびC)の選択を包含することを意図する。これは、当技術分野および関連技術分野の当業者には容易に明らかになるように、列挙した項目の数だけ拡張することができる。
さらに、例示および説明の目的で、本明細書において、例示のものはMPEG−4 AVC標準に対する改善の文脈で説明され、MPEG−4 AVC標準を説明のためのベースラインとして使用し、MPEG−4 AVC標準に勝る改善および拡張について説明する。しかし、本原理はMPEG−4 AVC標準および/またはその拡張のみに限定されないことを理解されたい。本明細書で提供される本原理の教示を考慮すると、当技術分野および関連技術分野の当業者であれば、他の標準の拡張に適用されるとき、またはまだ開発されていない標準に適用されるおよび/もしくは組み込まれるとき、本原理は等しく適用可能であり、少なくとも類似の利益をもたらすことが容易に理解されよう。本原理は、基準に準拠しないが、独自の定義に準拠するビデオ符号器およびビデオ復号器にも適用されることをさらに理解されたい。
また、本明細書で使用される場合、「ピクチャ」および「画像」という語は交換可能に使用され、ビデオシーケンスからの静止画像またはピクチャを指す。知られているように、ピクチャはフレームまたは場とすることができる。
図1を参照すると、本原理を適用することができる例示的なビデオ符号器が、全体的に参照番号100で示されている。ビデオ符号器100は、結合器185の非反転入力と信号通信する出力を有するフレーム配列バッファ110を含む。結合器185の出力は、変換器および量子化器125の第1の入力と信号通信で接続される。変換器および量子化器125の出力は、エントロピ符号器145の第1の入力ならびに逆変換器および逆量子化器150の第1の入力と信号通信で接続される。エントロピ符号器145の出力は、結合器190の第1の非反転入力と信号通信で接続される。結合器190の出力は、出力バッファ135の第1の入力と信号通信で接続される。
符号器コントローラ105の第1の出力は、フレーム配列バッファ110の第2の入力、逆変換器および逆量子化器150の第2の入力、ピクチャタイプ決定モジュール115の入力、マクロブロックタイプ(MBタイプ)決定モジュール120の第1の入力、イントラ予測モジュール160の第2の入力、デブロッキングフィルタ165の第2の入力、動き補償器170の第1の入力、動き推定器175の第1の入力、および参照ピクチャバッファ180の第2の入力と信号通信で接続される。
符号器コントローラ105の第2の出力は、付加拡張情報(SEI)挿入器130の第1の入力、変換器および量子化器125の第2の入力、エントロピ符号器145の第2の入力、出力バッファ135の第2の入力、ならびにシーケンスパラメータセット(SPS)およびピクチャパラメータセット(PPS)挿入器140の入力と信号通信で接続される。
SEI挿入器130の出力は、結合器190の第2の非反転入力と信号通信で接続される。
ピクチャタイプ決定モジュール115の第1の出力は、フレーム配列バッファ110の第3の入力と信号通信で接続される。ピクチャタイプ決定モジュール115の第2の出力は、マクロブロックタイプ決定モジュール120の第2の入力と信号通信で接続される。
シーケンスパラメータセット(SPS)およびピクチャパラメータセット(PPS)挿入器140の出力は、結合器190の第3の非反転入力と信号通信で接続される。
逆量子化器および逆変換器150の出力は、結合器119の第1の非反転入力と信号通信で接続される。結合器119の出力は、イントラ予測モジュール160の第1の入力およびデブロッキングフィルタ165の第1の入力と信号通信で接続される。デブロッキングフィルタ165の出力は、参照ピクチャバッファ180の第1の入力と信号通信で接続される。参照ピクチャバッファ180の出力は、動き推定器175の第2の入力および動き補償器170の第3の入力と信号通信で接続される。動き推定器175の第1の出力は、動き補償器170の第2の入力と信号通信で接続される。動き推定器175の第2の出力は、エントロピ符号器145の第3の入力と信号通信で接続される。
動き補償器170の出力は、スイッチ197の第1の入力と信号通信で接続される。イントラ予測モジュール160の出力は、スイッチ197の第2の入力と信号通信で接続される。マクロブロックタイプ決定モジュール120の出力は、スイッチ197の第3の入力と信号通信で接続される。スイッチ197の第3の入力は、(制御入力、すなわち、第3の入力と比較した)スイッチの「データ」入力が動き補償器170またはイントラ予測モジュール160によって提供されるべきかどうかを判定する。スイッチ197の出力は、結合器119の第2の非反転入力および結合器185の反転入力と信号通信で接続される。
フレーム配列バッファ110の第1の入力および符号器コントローラ105の入力は、入力ピクチャを受け取るための、符号器100の入力として利用可能である。さらに、付加拡張情報(SEI)挿入器130の第2の入力は、メタデータを受け取るための、符号器100の入力として利用可能である。出力バッファ135の出力は、ビットストリームを出力するための、符号器100の出力として利用可能である。
図2を参照すると、本原理を適用することができる例示的なビデオ復号器が、全体的に参照番号200で示されている。ビデオ復号器200は、エントロピ復号器245の第1の入力と信号通信で接続された出力を有する入力バッファ210を含む。エントロピ復号器245の第1の出力は、逆変換器および逆量子化器250の第1の入力と信号通信で接続される。逆変換器および逆量子化器250の出力は、結合器225の第2の非反転入力と信号通信で接続される。結合器225の出力は、デブロッキングフィルタ265の第2の入力およびイントラ予測モジュール260の第1の入力と信号通信で接続される。デブロッキングフィルタ265の第2の出力は、参照ピクチャバッファ280の第1の入力と信号通信で接続される。参照ピクチャバッファ280の出力は、動き補償器270の第2の入力と信号通信で接続される。
エントロピ復号器245の第2の出力は、動き補償器270の第3の入力、デブロッキングフィルタ265の第1の入力、およびイントラ予測器260の第3の入力と信号通信で接続される。エントロピ復号器245の第3の出力は、復号器コントローラ205の入力と信号通信で接続される。復号器コントローラ205の第1の出力は、エントロピ復号器245の第2の入力と信号通信で接続される。復号器コントローラ205の第2の出力は、逆変換器および逆量子化器250の第2の入力と信号通信で接続される。復号器コントローラ205の第3の出力は、デブロッキングフィルタ265の第3の入力と信号通信で接続される。復号器コントローラ205の第4の出力は、イントラ予測モジュール260の第2の入力、動き補償器270の第1の入力、および参照ピクチャバッファ280の第2の入力と信号通信で接続される。
動き補償器270の出力は、スイッチ297の第1の入力と信号通信で接続される。イントラ予測モジュール260の出力は、スイッチ297の第2の入力と信号通信で接続される。スイッチ297の出力は、結合器225の第1の非反転入力と信号通信で接続される。
入力バッファ210の入力は、入力ビットストリームを受け取るための、復号器200の入力として利用可能である。デブロッキングフィルタ265の第1の出力は、出力ピクチャを出力するための、復号器200の出力として利用可能である。
上記に述べたように、本原理は、ビデオ符号化およびビデオ復号化のための暗示的適応型動きベクトル予測選択の方法および装置を対象とする。本原理のある実施形態によれば、動きベクトルは、その空間時間的な隣接動きベクトルの1つによって予測される。選択は、符号器および復号器の両方で利用可能な、対応する動きベクトル候補の動き補償誤差に基づく。したがって、選択は、サイド情報または付加的な情報を符号器から復号器に送ることを必要とせずに、符号器および復号器で既に利用可能な、暗示的な(導出された)データに基づく。したがって、本原理を使用すると、動きベクトル予測選択のための付加的なコストまたはオーバーヘッドがなく、しかも、本原理は依然として、非常に正確な予測性能を実現する。動きベクトルは、その空間時間的な隣接動きベクトルと予測信頼度の間の相関関係を利用することによって、復号器で導出される。予測信頼度は、推定された動き補償誤差、動きベクトルの大きさ、参照インデックス、または動き情報に関する利用可能な他のパラメータの関数とすることができる。
本原理によれば、本発明者らは、それぞれの符号化ブロックの因果的な局所の近隣を定義することによって、隣接動きベクトル間の相関関係を利用する。近隣は、インター符号化ブロックとして符号化される、因果的で空間時間的な隣接ブロックを含む。これらのブロックは既に復号されているので、動きベクトルは符号器および復号器の両方で知られている。これらの動きベクトルは、動きベクトル候補の組を形成する。次の疑問は、符号化ブロックのための動きベクトル予測を候補の組の中からどのように選択するかである。
本原理によれば、本発明者らは、組の中のそれぞれの候補の忠実度について考察する。忠実度は、動きベクトルを使用して対応するブロックを補償することによって生じる、動き補償誤差として定義される。例えば、近隣の中のブロックBiについて考察すると、ブロックBiは符号器および復号器の両方で利用可能な動きベクトルMViを有する。MViを使用することによって生じた、Biの動き補償誤差Eiを、Biの残差情報によって推定することができる。したがって、MViの忠実度を、Eiの関数として以下のように定義することができる。
F(i)=f(Ei
この関数はEiの減少関数であるはずであり、これは大きい動き補償誤差が低忠実度をもたらすことを意味する。候補の組の中のそれぞれの動きベクトルは忠実度値を有し、忠実度値は動きベクトル予測選択のためのサイド情報を暗示的に提供する。
候補の忠実度値を取得した後、選択プロセスが行われる。選択を行うために使用される実際の1つまたは複数のパラメータは、様々なパラメータからのものとすることができる。例えば、ある実施形態では、本発明者らは、動きベクトル予測として、組の中の最も高い忠実度を有する動きベクトルを選択することができる。別の実施形態では、本発明者らは、動きベクトル予測として、組の中の動きベクトルの加重中央値を使用することができる。ある実施形態では、加重を忠実度値の関数とすることができる。ある実施形態では、本発明者らは、動きベクトル予測を導出するために、忠実度情報を考慮する加重平均または他の関数を使用することもできる。これらの変形を例示する実施形態が提示される。
忠実度値の選択および算出において使用される全ての情報は符号器および復号器の両方で利用可能であるので、オーバーヘッドを送る必要がなく、このことは本原理を低ビットレート用途および高ビットレート用途の両方において有望なものとする。MPEG−4 AVC標準における中央値手法と比較すると、本原理は隣接動きベクトルの忠実度を考慮し、このことは、複雑性がごくわずかしか増加しない、比較的複雑な動き場の場合に適していることがある。
[実施形態1]
実施形態1では、動きベクトル予測選択は、隣接候補の忠実度値によって提供された以前の情報に基づく。現在の符号化ブロックの動きベクトル予測は、組の中の最も高い忠実度を有する動きベクトルである。
図3を参照すると、ビデオ符号器における暗示的適応型動きベクトル予測選択の例示的な方法が、全体的に参照番号300で示されている。この方法300は、機能ブロック310に制御を渡す開始ブロック305を含む。機能ブロック310は、異なる分割モードの近隣のサイズを初期化し、機能ブロック315に制御を渡す。機能ブロック315は、現在の符号化ブロックに対して隣接動きベクトルの組を定義し、機能ブロック320に制御を渡す。機能ブロック320は、対応するブロックの残差に基づいて組の中のそれぞれの動きベクトルの忠実度を算出し、機能ブロック325に制御を渡す。機能ブロック325は、現在の符号化ブロックの動きベクトル予測を選択し(例えば、組の中の最も高い忠実度を有する動きベクトルを選択し)、機能ブロック330に制御を渡す。機能ブロック330は、動き推定、動き補償、およびエントロピ符号化にこの動きベクトル予測を使用し、終了ブロック399に制御を渡す。
図4を参照すると、ビデオ復号器における暗示的適応型動きベクトル予測選択の例示的な方法が、全体的に参照番号400で示されている。この方法400は、機能ブロック410に制御を渡す開始ブロック405を含む。機能ブロック410は、入力ビットストリームを構文解析し、機能ブロック415に制御を渡す。機能ブロック415は、異なる分割モードの近隣のサイズを初期化し、機能ブロック420に制御を渡す。機能ブロック420は、現在の符号化ブロックに対して隣接動きベクトルの組を定義し、機能ブロック425に制御を渡す。機能ブロック425は、対応するブロックの残差に基づいて組の中のそれぞれの動きベクトルの忠実度を算出し、機能ブロック430に制御を渡す。機能ブロック430は、現在の符号化ブロックの動きベクトル予測を選択し(例えば、組の中の最も高い忠実度を有する動きベクトルを選択し)、機能ブロック435に制御を渡す。機能ブロック435は、動きベクトル差を復号し、動きベクトル予測を使用することによって動きベクトルを算出し、終了ブロック499に制御を渡す。
[実施形態2]
実施形態2では、動きベクトル候補の忠実度値は、加重中央値フィルタが動きベクトル予測を導出するために使用される。加重中央値フィルタにおける加重は、フィルタサポート内での値の繰り返し回数を示す。ここでは、フィルタサポートは、ブロックの全ての動きベクトル候補を含む近隣である。動きベクトルの加重がnである場合、動きベクトルは、中央値フィルタによってフィルタリングされるときにn回複製される。実施形態2では、加重はマッピング関数によって忠実度と関連付けられ、マッピング関数は忠実度を動きベクトルの繰り返し回数にマップする。次いで、加重中央値フィルタの出力は、現在の符号化ブロックの動きベクトル予測と見なされる。
図5を参照すると、ビデオ符号器における暗示的適応型動きベクトル予測選択の別の例示的な方法が、全体的に参照番号500で示されている。この方法500は、機能ブロック510に制御を渡す開始ブロック505を含む。機能ブロック510は、異なる分割モードの近隣のサイズを初期化し、機能ブロック515に制御を渡す。機能ブロック515は、現在の符号化ブロックに対して隣接動きベクトルの組を定義し、機能ブロック520に制御を渡す。機能ブロック520は、対応するブロックの残差に基づいて組の中のそれぞれの動きベクトルの忠実度を算出し、機能ブロック525に制御を渡す。機能ブロック525は、忠実度を中央値フィルタの加重にマップし、機能ブロック530に制御を渡す。機能ブロック530は、現在の符号化ブロックの動きベクトル予測を取得するために、加重中央値フィルタを動きベクトル予測候補の組に適用し、機能ブロック535に制御を渡す。機能ブロック535は、動き推定、動き補償、およびエントロピ符号化に動きベクトル予測を使用し、終了ブロック599に制御を渡す。
図6を参照すると、ビデオ復号器における暗示的適応型動きベクトル予測選択の別の例示的な方法が、全体として参照番号600で示されている。この方法600は、機能ブロック610に制御を渡す開始ブロック605を含む。機能ブロック610は、入力ビットストリームを構文解析し、機能ブロック615に制御を渡す。機能ブロック615は、異なる分割モードの近隣のサイズを初期化し、機能ブロック620に制御を渡す。機能ブロック620は、現在の符号化ブロックに対して隣接動きベクトルの組を定義し、機能ブロック625に制御を渡す。機能ブロック625は、対応するブロックの残差に基づいて組の中のそれぞれの動きベクトルの忠実度を算出し、機能ブロック630に制御を渡す。機能ブロック630は、忠実度を中央値フィルタの加重にマップし、機能ブロック635に制御を渡す。機能ブロック635は、現在の符号化ブロックの動きベクトル予測を取得するために、加重中央値フィルタを動きベクトル予測候補の組に適用し、機能ブロック640に制御を渡す。機能ブロック640は、動きベクトル差を復号し、動きベクトル予測を使用することによって動きベクトルを算出し、終了ブロック699に制御を渡す。
[実施形態3]
実施形態3では、暗示的な動きベクトル予測選択を明示的な手法と組み合わせることができる。隣接動きベクトルの忠実度が生成され、事前定義された閾値と比較される。全ての忠実度が閾値より低い場合、レート歪み最適化に基づいて動きベクトル予測を選択するために、明示的なシグナリング手法が使用される。そうでない場合、暗示的なシグナリング手法が使用される。
図7を参照すると、ビデオ符号器における暗示的適応型動きベクトル予測選択のさらに別の例示的な方法が、全体的に参照番号700で示されている。この方法700は、機能ブロック710に制御を渡す開始ブロック705を含む。機能ブロック710は、異なる分割モードの近隣のサイズを初期化し、機能ブロック715に制御を渡す。機能ブロック715は、現在の符号化ブロックに対して隣接動きベクトルの組を定義し、機能ブロック720に制御を渡す。機能ブロック720は、対応するブロックの残差に基づいて組の中のそれぞれの動きベクトルの忠実度を算出し、決定ブロック725に制御を渡す。決定ブロック725は、全ての忠実度が閾値より小さいかどうかを判定する。全ての忠実度が閾値より小さい場合、制御は機能ブロック730に渡される。そうでない場合、制御は機能ブロック740に渡される。機能ブロック730は、レート歪み最適化に基づいて明示的な動きベクトル予測シグナリング手法を使用し、機能ブロック735に制御を渡す。機能ブロック740は、忠実度に基づいて暗示的な動きベクトル予測選択手法を使用し、機能ブロック735に制御を渡す。機能ブロック735は、動き推定、動き補償、およびエントロピ符号化にこの動きベクトル予測を使用し、終了ブロック799に制御を渡す。
図8を参照すると、ビデオ復号器における暗示的適応型動きベクトル予測選択のさらにまた別の例示的な方法が、全体的に参照番号800で示されている。この方法800は、機能ブロック810に制御を渡す開始ブロック805を含む。機能ブロック810は、入力ビットストリームを構文解析し、機能ブロック815に制御を渡す。機能ブロック815は、異なる分割モードの近隣のサイズを初期化し、機能ブロック820に制御を渡す。機能ブロック820は、現在の符号化ブロックに対して隣接動きベクトルの組を定義し、機能ブロック825に制御を渡す。機能ブロック825は、対応するブロックの残差に基づいて組の中のそれぞれの動きベクトルの忠実度を算出し、決定ブロック830に制御を渡す。決定ブロック830は、全ての忠実度が閾値より小さいかどうかを判定する。全ての忠実度が閾値より小さい場合、制御は機能ブロック835に渡される。そうでない場合、制御は機能ブロック840に渡される。機能ブロック835は、動きベクトルインデックスを復号し、機能ブロック840に制御を渡す。機能ブロック845は、忠実度に基づいて暗示的な動きベクトル予測選択手法を使用し、機能ブロック840に制御を渡す。機能ブロック840は、動きベクトル差を復号し、動きベクトル予測を使用することによって動きベクトルを算出し、終了ブロック899に制御を渡す。
[シンタックス]
表1は、本原理のある実施形態による例示的なスライスヘッダシンタックスを示す。
Figure 0005882984
表1のシンタックス要素の意味は以下の通りである。
use_implicit_mvp_signalingは、暗示的な動きベクトル予測選択が使用されるかどうかを指定する。1に等しいuse_implicit_mvp_signalingは、暗示的な動きベクトル予測選択が使用されることを意味し、0に等しいuse_implicit_mvp_signalingは、暗示的な動きベクトル予測選択が使用されないことを意味する。
mvp_indexは、候補の組の中で動きベクトル予測として選択された動きベクトルのインデックスを指定する。
次に、本発明の多くの付随的な利点/特徴のいくつかについて説明するが、そのうちのいくつかは上記に述べられている。例えば、1つの利点/特徴は、暗示的適応型動きベクトル予測選択を使用して、ピクチャ内の少なくとも1つのブロックを符号化するためのビデオ符号器を有する装置であって、ブロックを符号化するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づいて、ブロックに対して1組の動きベクトル予測候補を定義し、空間時間的な隣接動きベクトルの忠実度のそれぞれの値に応じて、ブロックを符号化するための動きベクトルとして、特定の動きベクトル予測候補をその組から選択することによって予測される。
別の利点/特徴は、上述のビデオ符号器を有する装置であって、忠実度は、動き補償誤差、動きベクトルの大きさ、参照インデックス、ならびに符号器および対応する復号器の両方で利用可能な他の動きに関連する情報のうちの少なくとも1つの関数である。
さらに別の利点/特徴は、上述のビデオ符号器を有する装置であって、ブロックを符号化するための動きベクトルとして選択された特定の動きベクトル予測候補は、組の中の動きベクトル予測候補の中で最も高い忠実度を有する。
さらにまた別の利点/特徴は、上述のビデオ符号器を有する装置であって、空間時間的な隣接動きベクトルの忠実度のそれぞれの値は、加重中央値フィルタが、ブロックを符号化するための動きベクトルとして選択された特定の動きベクトル予測候補を導出するために使用される。
さらに、別の利点/特徴は、上述のビデオ符号器を有する装置であって、暗示的適応型動きベクトル予測選択は、ハイブリッドシナリオにおいて、動きベクトル予測の明示的なシグナリングと組み合わされる。
さらに、別の利点/特徴は、ビデオ符号器を有する装置であって、暗示的適応型動きベクトル予測選択は、上述のハイブリッドシナリオにおいて、動きベクトル予測の明示的なシグナリングと組み合わされ、ブロックに対して暗示的適応型動きベクトル予測選択を使用するか、動きベクトル予測の明示的なシグナリングを使用するかの決定は、忠実度値の評価に応じて判定される。
また、別の利点/特徴は、ビデオ符号器を有する装置であって、暗示的適応型動きベクトル予測選択は、上述のハイブリッドシナリオにおいて、動きベクトル予測の明示的なシグナリングと組み合わされ、動きベクトル予測の明示的なシグナリングは、スライスレベルで使用され、ブロックに対して暗示的適応型動きベクトル予測選択を使用するか、動きベクトル予測の明示的なシグナリングを使用するかの決定は、ブロックレベルで行われる。
本原理のこれらおよび他の特徴および利点は、本明細書の教示に基づいて、関連する技術分野の当業者によって容易に確認され得る。本原理の教示は、様々な形態のハードウェア、ソフトウェア、ファームウェア、特殊用途プロセッサ、またはこれらの組合せにおいて実施され得ることを理解されたい。
最も好ましくは、本原理の教示は、ハードウェアとソフトウェアの組合せとして実施される。さらに、ソフトウェアは、プログラム記憶装置上で有形に具体化されるアプリケーションプログラムとして実施され得る。アプリケーションプログラムは、任意の適切なアーキテクチャを備えるマシンにアップロードされ、そのマシンによって実行され得る。好ましくは、このマシンは、1つまたは複数の中央処理装置(「CPU」)、ランダムアクセスメモリ(「RAM」)、および入力/出力(「I/O」)インターフェースなどのハードウェアを有するコンピュータプラットフォーム上に実装される。また、コンピュータプラットフォームは、オペレーティングシステムおよびマイクロ命令コードを含み得る。本明細書に記載される様々なプロセスおよび機能は、CPUによって実行され得る、マイクロ命令コードの一部またはアプリケーションプログラムの一部、またはこれらの任意の組合せのいずれかであってもよい。加えて、さらなるデータ記憶装置および印刷装置などの様々な他の周辺装置が、コンピュータプラットフォームに接続され得る。
添付の図面に図示される構成するシステムコンポーネントおよび方法のいくつかは、好ましくはソフトウェアにおいて実施されるので、システムコンポーネント間またはプロセスの機能ブロック間の実際の接続は、本原理がプログラムされる方法によって異なることがあることをさらに理解されたい。本明細書における教示を考慮すると、関連する技術分野の当業者であれば、本原理のこれらおよび類似の実施または構成を企図することができる。
例示的な実施形態について、添付の図面を参照しながら本明細書で説明してきたが、本原理はこれらの明確な実施形態に限定されないこと、また、本原理の範囲または趣旨から逸脱することなく、関連する技術分野の当業者によって、その中で様々な変更形態および修正形態を実施することができることを理解されたい。全てのそのような変更形態および修正形態は、添付の特許請求の範囲に記載されているように、本原理の範囲内に含まれることを意図する。
(付記1)
暗示的適応型動きベクトル予測子選択を使用して、画像のブロックを符号化するためのビデオ符号器(100)を備える装置であって、前記ブロックを符号化するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づいて、前記ブロックに対して1組の動きベクトル予測子候補を定義し、前記空間時間的な隣接動きベクトルの忠実度のそれぞれの値に応じて、前記ブロックを符号化するための前記動きベクトルとして、特定の動きベクトル予測子候補を前記組から選択することによって予測される、前記装置。
(付記2)
前記忠実度は、前記符号器および対応する復号器の両方で利用可能な、動き補償誤差、動きベクトルの大きさ、および参照インデックスのうちの少なくとも1つの関数である、付記1に記載の装置。
(付記3)
前記ブロックを符号化するための前記動きベクトルとして選択された前記特定の動きベクトル予測子候補は、前記組の中の前記動きベクトル予測子候補の中で最も高い忠実度を有する、付記1に記載の装置。
(付記4)
前記空間時間的な隣接動きベクトルの前記忠実度の前記それぞれの値は、加重中央値フィルタが、前記ブロックを符号化するための前記動きベクトルとして選択された前記特定の動きベクトル予測子候補を導出するために使用される、付記1に記載の装置。
(付記5)
前記暗示的適応型動きベクトル予測子選択は、ハイブリッドシナリオにおいて、動きベクトル予測子の明示的なシグナリングと組み合わされる、付記1に記載の装置。
(付記6)
前記ブロックに対して前記暗示的適応型動きベクトル予測子選択を使用するか、動きベクトル予測子の前記明示的なシグナリングを使用するかの決定は、忠実度値の評価に応じて判定される、付記5に記載の装置。
(付記7)
動きベクトル予測子の前記明示的なシグナリングは、スライスレベルで使用され、前記ブロックに対して前記暗示的適応型動きベクトル予測子選択を使用するか、動きベクトル予測子の前記明示的なシグナリングを使用するかの前記決定は、ブロックレベルで行われる、付記5に記載の装置。
(付記8)
ビデオ符号器において、
暗示的適応型動きベクトル予測子選択を使用して、画像のブロックを符号化するステップを含む方法であって、前記ブロックを符号化するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づいて、前記ブロックに対して1組の動きベクトル予測子候補を定義し(315、515、715)、前記空間時間的な隣接動きベクトルの忠実度のそれぞれの値に応じて(320、520、720)、前記ブロックを符号化するための前記動きベクトルとして、特定の動きベクトル予測子候補を前記組から選択する(325、530、740)ことによって予測される、前記方法。
(付記9)
前記忠実度は、前記符号器および対応する復号器の両方で利用可能な、動き補償誤差、動きベクトルの大きさ、および参照インデックスのうちの少なくとも1つの関数である(320、520、720)、付記8に記載の方法。
(付記10)
前記ブロックを符号化するための前記動きベクトルとして選択された前記特定の動きベクトル予測子候補は、前記組の中の前記動きベクトル予測子候補の中で最も高い忠実度を有する(325)、付記8に記載の方法。
(付記11)
前記空間時間的な隣接動きベクトルの前記忠実度の前記それぞれの値は、加重中央値フィルタが、前記ブロックを符号化するための前記動きベクトルとして選択された前記特定の動きベクトル予測子候補を導出するために使用される(525、530)、付記8に記載の方法。
(付記12)
前記暗示的適応型動きベクトル予測子選択は、ハイブリッドシナリオにおいて、動きベクトル予測子の明示的なシグナリングと組み合わされる(700)、付記8に記載の方法。
(付記13)
前記ブロックに対して前記暗示的適応型動きベクトル予測子選択を使用するか、動きベクトル予測子の前記明示的なシグナリングを使用するかの決定は、忠実度値の評価に応じて判定される(725)、付記12に記載の方法。
(付記14)
動きベクトル予測子の前記明示的なシグナリングは、スライスレベルで使用され、前記ブロックに対して前記暗示的適応型動きベクトル予測子選択を使用するか、動きベクトル予測子の前記明示的なシグナリングを使用するかの前記決定は、ブロックレベルで行われる(700)、付記12に記載の方法。
(付記15)
暗示的適応型動きベクトル予測子選択を使用して、画像のブロックを復号するためのビデオ復号器(200)を備える装置であって、前記ブロックを復号するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づいて、前記ブロックに対して1組の動きベクトル予測子候補を定義し、前記空間時間的な隣接動きベクトルの忠実度のそれぞれの値に応じて、前記ブロックを復号するための前記動きベクトルとして、特定の動きベクトル予測子候補を前記組から選択することによって予測される、前記装置。
(付記16)
前記忠実度は、前記復号器および対応する符号器の両方で利用可能な、動き補償誤差、動きベクトルの大きさ、および参照インデックスのうちの少なくとも1つの関数である、付記15に記載の装置。
(付記17)
前記ブロックを復号するための前記動きベクトルとして選択された前記特定の動きベクトル予測子候補は、前記組の中の前記動きベクトル予測子候補の中で最も高い忠実度を有する、付記15に記載の装置。
(付記18)
前記空間時間的な隣接動きベクトルの前記忠実度の前記それぞれの値は、加重中央値フィルタが、前記ブロックを復号するための前記動きベクトルとして選択された前記特定の動きベクトル予測子候補を導出するために使用される、付記15に記載の装置。
(付記19)
前記暗示的適応型動きベクトル予測子選択は、ハイブリッドシナリオにおいて、動きベクトル予測子の明示的なシグナリングと組み合わされる、付記15に記載の装置。
(付記20)
前記ブロックに対して前記暗示的適応型動きベクトル予測子選択を使用するか、動きベクトル予測子の前記明示的なシグナリングを使用するかの決定は、忠実度値の評価に応じて判定される、付記19に記載の装置。
(付記21)
動きベクトル予測子の前記明示的なシグナリングは、スライスレベルで使用され、前記ブロックに対して前記暗示的適応型動きベクトル予測子選択を使用するか、動きベクトル予測子の前記明示的なシグナリングを使用するかの前記決定は、ブロックレベルで行われる、付記19に記載の装置。
(付記22)
ビデオ復号器において、
暗示的適応型動きベクトル予測子選択を使用して、画像のブロックを復号するステップを含む方法であって、前記ブロックを復号するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づいて、前記ブロックに対して1組の動きベクトル予測子候補を定義し(420、620、820)、前記空間時間的な隣接動きベクトルの忠実度のそれぞれの値に応じて(425、625、825)、前記ブロックを復号するための前記動きベクトルとして、特定の動きベクトル予測子候補を前記組から選択する(430、635、845)ことによって予測される、前記方法。
(付記23)
前記忠実度は、前記復号器および対応する符号器の両方で利用可能な、動き補償誤差、動きベクトルの大きさ、および参照インデックスのうちの少なくとも1つの関数である(425、625、825)、付記22に記載の方法。
(付記24)
前記ブロックを復号するための前記動きベクトルとして選択された前記特定の動きベクトル予測子候補は、前記組の中の前記動きベクトル予測子候補の中で最も高い忠実度を有する(430)、付記22に記載の方法。
(付記25)
前記空間時間的な隣接動きベクトルの前記忠実度の前記それぞれの値は、加重中央値フィルタが、前記ブロックを復号するための前記動きベクトルとして選択された前記特定の動きベクトル予測子候補を導出するために使用される(630、635)、付記22に記載の方法。
(付記26)
前記暗示的適応型動きベクトル予測子選択は、ハイブリッドシナリオにおいて、動きベクトル予測子の明示的なシグナリングと組み合わされる(800)、付記22に記載の方法。
(付記27)
前記ブロックに対して前記暗示的適応型動きベクトル予測子選択を使用するか、動きベクトル予測子の前記明示的なシグナリングを使用するかの決定は、忠実度値の評価に応じて判定される(830)、付記26に記載の方法。
(付記28)
動きベクトル予測子の前記明示的なシグナリングは、スライスレベルで使用され、前記ブロックに対して前記暗示的適応型動きベクトル予測子選択を使用するか、動きベクトル予測子の前記明示的なシグナリングを使用するかの前記決定は、ブロックレベルで行われる(800)、付記26に記載の方法。
(付記29)
符号化されたビデオ信号データを有する非一時的なコンピュータ可読記憶媒体であって、
暗示的適応型動きベクトル予測子選択を使用して符号化された画像のブロックの圧縮されたデータを備え、前記ブロックを符号化するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づいて、前記ブロックに対して1組の動きベクトル予測子候補を定義し、特定の動きベクトル予測子候補の、前記ビデオ符号器および対応する復号器の両方で利用可能な動き補償誤差に基づいて、前記ブロックを符号化するための前記動きベクトルとして、前記特定の動きベクトル予測子候補を前記組から選択することによって予測される、前記非一時的なコンピュータ可読記憶媒体。

Claims (15)

  1. 隣接動きベクトル予測子候補の少なくとも1つの予測信頼度の値が閾値以上のときに、暗示的適応型動きベクトル予測選択を使用して画ブロックを符号化するためのビデオ符号器を備える装置であって、前記ブロックを符号化するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づい前記ブロックに対する動きベクトル予測候補の組を定義し、前記空間時間的な隣接動きベクトルの予測信頼度のそれぞれの値の関数に応じて、前記ブロックを符号化するための前記動きベクトルとして特定の動きベクトル予測候補を前記組から選択することによって予測される、前記装置。
  2. ビデオ符号器において、
    隣接動きベクトル予測子候補の少なくとも1つの予測信頼度の値が閾値以上のときに、暗示的適応型動きベクトル予測選択を使用して画ブロックを符号化するステップを含む方法であって、前記ブロックを符号化するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づいて前記ブロックに対する動きベクトル予測候補の組を定義し、前記空間時間的な隣接動きベクトルの予測信頼度のそれぞれの値の関数に応じて、前記ブロックを符号化するための前記動きベクトルとして特定の動きベクトル予測候補を前記組から選択することによって予測される、前記方法。
  3. 前記予測信頼度は、前記符号器および対応する復号器の両方で利用可能な、動き補償誤差、動きベクトルの大きさ、および参照インデックスのうちの少なくとも1つの関数である、請求項に記載の方法。
  4. 前記ブロックを符号化するための前記動きベクトルとして選択された前記特定の動きベクトル予測候補は、前記組の中の前記動きベクトル予測候補の中で最も高い予測信頼度を有する、請求項に記載の方法。
  5. 前記空間時間的な隣接動きベクトルの前記予測信頼度の前記それぞれの値は、加重中央値フィルタが、前記ブロックを符号化するための前記動きベクトルとして選択された前記特定の動きベクトル予測候補を導出するために使用される、請求項に記載の方法。
  6. 前記暗示的適応型動きベクトル予測選択は、ハイブリッドシナリオにおいて、動きベクトル予測の明示的なシグナリングと組み合わされる、請求項に記載の方法。
  7. 前記ブロックに対して前記暗示的適応型動きベクトル予測選択を使用するか、動きベクトル予測の前記明示的なシグナリングを使用するかの決定は、予測信頼度値の評価に応じて判定される、請求項に記載の方法。
  8. 隣接動きベクトル予測子候補の少なくとも1つの予測信頼度の値が閾値以上のときに、暗示的適応型動きベクトル予測選択を使用して画ブロックを復号するためのビデオ復号器を備える装置であって、前記ブロックを復号するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づいて前記ブロックに対する動きベクトル予測候補の組を定義し、前記空間時間的な隣接動きベクトルの予測信頼度のそれぞれの値の関数に応じて、前記ブロックを復号するための前記動きベクトルとして特定の動きベクトル予測候補を前記組から選択することによって予測される、前記装置。
  9. ビデオ復号器において、
    隣接動きベクトル予測子候補の少なくとも1つの予測信頼度の値が閾値以上のときに、暗示的適応型動きベクトル予測選択を使用して画ブロックを復号するステップを含む方法であって、前記ブロックを復号するための動きベクトルは、複数の空間時間的な隣接動きベクトルに基づいて前記ブロックに対する動きベクトル予測候補の組を定義し、前記空間時間的な隣接動きベクトルの予測信頼度のそれぞれの値の関数に応じて、前記ブロックを復号するための前記動きベクトルとして特定の動きベクトル予測候補を前記組から選択することによって予測される、前記方法。
  10. 前記予測信頼度は、前記復号器および対応する符号器の両方で利用可能な、動き補償誤差、動きベクトルの大きさ、および参照インデックスのうちの少なくとも1つの関数である、請求項に記載の方法。
  11. 前記ブロックを復号するための前記動きベクトルとして選択された前記特定の動きベクトル予測候補は、前記組の中の前記動きベクトル予測候補の中で最も高い予測信頼度を有する、請求項に記載の方法。
  12. 前記空間時間的な隣接動きベクトルの前記予測信頼度の前記それぞれの値は、加重中央値フィルタが、前記ブロックを復号するための前記動きベクトルとして選択された前記特定の動きベクトル予測候補を導出するために使用される、請求項に記載の方法。
  13. 前記暗示的適応型動きベクトル予測選択は、ハイブリッドシナリオにおいて、動きベクトル予測の明示的なシグナリングと組み合わされる、請求項に記載の方法。
  14. 前記ブロックに対して前記暗示的適応型動きベクトル予測選択を使用するか、動きベクトル予測の前記明示的なシグナリングを使用するかの決定は、予測信頼度値の評価に応じて判定される、請求項13に記載の方法。
  15. 動きベクトル予測の前記明示的なシグナリングは、スライスレベルで使用され、前記ブロックに対して前記暗示的適応型動きベクトル予測選択を使用するか、動きベクトル予測の前記明示的なシグナリングを使用するかの決定は、ブロックレベルで行われる、請求項13に記載の方法。
JP2013500043A 2010-03-16 2011-03-03 ビデオ符号化およびビデオ復号化のための暗示的適応型動きベクトル予測子選択の方法および装置 Active JP5882984B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US31450610P 2010-03-16 2010-03-16
US61/314,506 2010-03-16
PCT/US2011/000421 WO2011115659A1 (en) 2010-03-16 2011-03-03 Methods and apparatus for implicit adaptive motion vector predictor selection for video encoding and decoding

Publications (3)

Publication Number Publication Date
JP2013523010A JP2013523010A (ja) 2013-06-13
JP2013523010A5 JP2013523010A5 (ja) 2015-09-24
JP5882984B2 true JP5882984B2 (ja) 2016-03-09

Family

ID=44231283

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013500043A Active JP5882984B2 (ja) 2010-03-16 2011-03-03 ビデオ符号化およびビデオ復号化のための暗示的適応型動きベクトル予測子選択の方法および装置

Country Status (7)

Country Link
US (1) US9628788B2 (ja)
EP (1) EP2548372B1 (ja)
JP (1) JP5882984B2 (ja)
KR (1) KR101952606B1 (ja)
CN (1) CN102812706B (ja)
BR (1) BR112012023319A2 (ja)
WO (1) WO2011115659A1 (ja)

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3849192B1 (en) * 2011-06-28 2023-01-11 LG Electronics, Inc. Method for deriving a motion vector for video decoding and video encoding
TWI569634B (zh) * 2011-10-31 2017-02-01 Jvc Kenwood Corp Dynamic image decoding device, dynamic image decoding method and dynamic image decoding program
US9571833B2 (en) 2011-11-04 2017-02-14 Nokia Technologies Oy Method for coding and an apparatus
KR20130050405A (ko) 2011-11-07 2013-05-16 오수미 인터 모드에서의 시간 후보자 결정방법
JP5485969B2 (ja) * 2011-11-07 2014-05-07 株式会社Nttドコモ 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法及び動画像予測復号プログラム
MX355319B (es) 2011-11-08 2018-04-16 Kt Corp Método y aparato para exploración de coeficientes con base en el modo de división de la unidad de predicción.
TWI580264B (zh) * 2011-11-10 2017-04-21 Sony Corp Image processing apparatus and method
CN103108178B (zh) * 2011-11-11 2016-03-30 华为技术有限公司 视频图像编解码的方法及装置
BR122020008353B1 (pt) * 2011-12-28 2022-05-10 JVC Kenwood Corporation Dispositivo de codificação de foto em movimento e método de codificação de foto em movimento
US20150085932A1 (en) 2012-04-24 2015-03-26 Mediatek Inc. Method and apparatus of motion vector derivation for 3d video coding
PL400344A1 (pl) * 2012-08-13 2014-02-17 Politechnika Poznanska Sposób wyznaczania predyktora wektora ruchu
US9883180B2 (en) 2012-10-03 2018-01-30 Avago Technologies General Ip (Singapore) Pte. Ltd. Bounded rate near-lossless and lossless image compression
CN104704838B (zh) * 2012-10-03 2018-03-27 安华高科技通用Ip(新加坡)公司 二维块图像编码
US9978156B2 (en) * 2012-10-03 2018-05-22 Avago Technologies General Ip (Singapore) Pte. Ltd. High-throughput image and video compression
US10812829B2 (en) * 2012-10-03 2020-10-20 Avago Technologies International Sales Pte. Limited 2D block image encoding
US9338450B2 (en) * 2013-03-18 2016-05-10 Ecole De Technologie Superieure Method and apparatus for signal encoding producing encoded signals of high fidelity at minimal sizes
US9661331B2 (en) 2013-03-18 2017-05-23 Vantrix Corporation Method and apparatus for signal encoding realizing optimal fidelity
US10609405B2 (en) 2013-03-18 2020-03-31 Ecole De Technologie Superieure Optimal signal encoding based on experimental data
KR101649120B1 (ko) 2015-01-23 2016-08-18 오스템임플란트 주식회사 흡수성 치주조직 재생막 및 이를 보관하는 앰플
US10390033B2 (en) 2016-06-06 2019-08-20 Google Llc Adaptive overlapped block prediction in variable block size video coding
US20170359575A1 (en) * 2016-06-09 2017-12-14 Apple Inc. Non-Uniform Digital Image Fidelity and Video Coding
US10999602B2 (en) 2016-12-23 2021-05-04 Apple Inc. Sphere projected motion estimation/compensation and mode decision
US11259046B2 (en) 2017-02-15 2022-02-22 Apple Inc. Processing of equirectangular object data to compensate for distortion by spherical projections
US10924747B2 (en) 2017-02-27 2021-02-16 Apple Inc. Video coding techniques for multi-view video
US10491917B2 (en) * 2017-03-22 2019-11-26 Qualcomm Incorporated Decoder-side motion vector derivation
CN107094251B (zh) * 2017-03-31 2021-07-23 浙江大学 一种基于空间位置自适应质量调整的视频、图像编解码方法及装置
US11093752B2 (en) 2017-06-02 2021-08-17 Apple Inc. Object tracking in multi-view video
US10754242B2 (en) 2017-06-30 2020-08-25 Apple Inc. Adaptive resolution and projection format in multi-direction video
CH714289A2 (de) 2017-10-31 2019-05-15 Tecpharma Licensing Ag Stromversorgung Zusatzmodul.
US10623746B2 (en) * 2017-12-07 2020-04-14 Tencent America LLC Method and apparatus for video coding
US10880550B2 (en) * 2018-04-06 2020-12-29 Comcast Cable Communications, Llc Systems and methods for compressing video
KR102214669B1 (ko) 2020-04-09 2021-02-10 동아대학교 산학협력단 수정 하이브리드 메디안 필터로 최적화한 하드웨어 구조 추론 방법

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5546130A (en) * 1993-10-11 1996-08-13 Thomson Consumer Electronics S.A. Method and apparatus for forming a video signal using motion estimation and signal paths with different interpolation processing
KR100739281B1 (ko) * 2000-02-21 2007-07-12 주식회사 팬택앤큐리텔 움직임 추정 방법 및 장치
DE60141961D1 (de) * 2001-09-10 2010-06-10 Texas Instruments Inc Verfahren und Vorrichtung zur Bewegungsvektorenabschätzung
US20030123738A1 (en) * 2001-11-30 2003-07-03 Per Frojdh Global motion compensation for video pictures
EP1568222B1 (en) * 2002-12-04 2019-01-02 Thomson Licensing Encoding of video cross-fades using weighted prediction
KR100579493B1 (ko) 2003-06-16 2006-05-15 삼성전자주식회사 움직임 벡터 생성 장치 및 방법
US7366237B2 (en) * 2003-09-09 2008-04-29 Microsoft Corporation Low complexity real-time video coding
US20060012719A1 (en) * 2004-07-12 2006-01-19 Nokia Corporation System and method for motion prediction in scalable video coding
US20070131269A1 (en) 2005-12-09 2007-06-14 Biprodas Dutta High density nanowire arrays in glassy matrix
US8406303B2 (en) * 2005-12-15 2013-03-26 Analog Devices, Inc. Motion estimation using prediction guided decimated search
KR101383540B1 (ko) * 2007-01-03 2014-04-09 삼성전자주식회사 복수의 움직임 벡터 프리딕터들을 사용하여 움직임 벡터를추정하는 방법, 장치, 인코더, 디코더 및 복호화 방법
US20080247465A1 (en) * 2007-04-05 2008-10-09 Jun Xin Method and System for Mapping Motion Vectors between Different Size Blocks
EP2266318B1 (en) * 2008-03-19 2020-04-22 Nokia Technologies Oy Combined motion vector and reference index prediction for video coding
JP2010016453A (ja) 2008-07-01 2010-01-21 Sony Corp 画像符号化装置および方法、画像復号装置および方法、並びにプログラム
KR101768207B1 (ko) * 2010-01-19 2017-08-16 삼성전자주식회사 축소된 예측 움직임 벡터의 후보들에 기초해 움직임 벡터를 부호화, 복호화하는 방법 및 장치

Also Published As

Publication number Publication date
WO2011115659A1 (en) 2011-09-22
CN102812706A (zh) 2012-12-05
US9628788B2 (en) 2017-04-18
EP2548372A1 (en) 2013-01-23
KR20130006616A (ko) 2013-01-17
CN102812706B (zh) 2016-11-02
JP2013523010A (ja) 2013-06-13
KR101952606B1 (ko) 2019-02-27
EP2548372B1 (en) 2023-02-15
US20130208787A1 (en) 2013-08-15
BR112012023319A2 (pt) 2016-05-24

Similar Documents

Publication Publication Date Title
JP5882984B2 (ja) ビデオ符号化およびビデオ復号化のための暗示的適応型動きベクトル予測子選択の方法および装置
JP7179037B2 (ja) 動き情報の適応型符号化方法及び装置
US20240298023A1 (en) Methods and apparatus for adaptive motion vector candidate ordering for video encoding and decoding
JP6112523B2 (ja) マルチビュービデオ符号化のための低解像度アップデートモードを提供する方法及び装置
CN108028931B (zh) 用于视频编解码的自适应帧间预测的方法及装置
CN104937939B (zh) 用于时间运动矢量预测符标志的编码器和解码器及其方法
KR101682516B1 (ko) 파라미터 필터링을 사용하는 비디오 인코딩 및 디코딩을 위한 방법 및 장치
CN102204254B (zh) 使用隐式运动预测进行预测精细化的方法及装置
JP2013523010A5 (ja) ビデオ符号化およびビデオ復号化のための暗示的適応型動きベクトル予測子選択の方法および装置
WO2016206590A1 (en) Method and apparatus for transform coefficient coding of non-square blocks
KR20220036982A (ko) 비디오 인코딩 및 디코딩을 위한 이차 변환
US9167270B2 (en) Methods and apparatus for efficient adaptive filtering for video encoders and decoders

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140303

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150203

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20150507

A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A524

Effective date: 20150803

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160105

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160204

R150 Certificate of patent or registration of utility model

Ref document number: 5882984

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250