JP2015228651A - ビデオ復号方法及びビデオデコーダ - Google Patents

ビデオ復号方法及びビデオデコーダ Download PDF

Info

Publication number
JP2015228651A
JP2015228651A JP2015109698A JP2015109698A JP2015228651A JP 2015228651 A JP2015228651 A JP 2015228651A JP 2015109698 A JP2015109698 A JP 2015109698A JP 2015109698 A JP2015109698 A JP 2015109698A JP 2015228651 A JP2015228651 A JP 2015228651A
Authority
JP
Japan
Prior art keywords
block
prediction
unit
code
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015109698A
Other languages
English (en)
Other versions
JP6004407B2 (ja
Inventor
チーミン・チャン
Zhiming Zhang
ジシャン・ユー
Zhixiang Yu
リヤン・ザオ
Riyang Zhao
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of JP2015228651A publication Critical patent/JP2015228651A/ja
Application granted granted Critical
Publication of JP6004407B2 publication Critical patent/JP6004407B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122—Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】マルチプロトコルビデオデコーダのモジュール開発を減少させ、かつ、ビデオデコーダの面積及び消費電力を減少させるビデオ復号方法及びビデオデコーダを提供する。【解決手段】ビデオ復号方法は、ビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットをMxM残差ブロック及びMxM予測ブロックにそれぞれ変換するM=16、8又は4であり、かつ、ビデオ圧縮ビットストリームはHEVCビットストリーム、VP9ビットストリーム及びAVS2.0ビットストリームのいずれか一つを含むステップと、残差ブロック及び予測ブロックに基づいて再構成ピクチャブロックを取得するステップと、再構成ピクチャブロックに対してフィルタリングを実行することによって復号化された再構成ピクチャを取得するステップと、を含む。【選択図】図１

Description

本発明はピクチャ処理の分野に関し、特にビデオ復号方法及びビデオデコーダに関する。
ビデオ圧縮技術は、インターネット、テレビ放送、記憶媒体、及び通信の分野に広く適用されている。1993年のMPEG(Moving Picture Experts Group)標準以来、承継及び発展の数年後に、様々なビデオ圧縮フォーマットが共存している。これまで、あるコマーシャルビデオデコーダは、例えばMPEG-1, MPEG-2, MPEG-4, H.263, H.264, H.265, Real8, Real9, VC1, AVSP2, VP8, VP9, 及びDIVXのような11以上のビデオ圧縮フォーマットをサポートする必要があった。これは、ビデオデコーダに大きな課題をもたらし、かつ特にインテリジェントデバイスの出現により、ハードウェアの観点からビデオデコーダの面積及び電力消費に厳しい要件を課した。
例えば(MPEG-1, MPEG-2, MPEG-4, H.263, H.264, Real8, Real9, VC1, AVSP2, VP8, VP9, 及びDIVX)のような2013年よりも前のプロトコルでは、16x16マクロブロックが、ビデオピクチャを分割しかつ圧縮するために基本画素ユニットとして使用され、かつ前記マクロブロックを内部分割しかつ圧縮するための方法は様々なプロトコルにおいて異なっている。
しかしながら、2013年以後、例えばHEVC(高能率ビデオ符号化, High Efficiency Video Coding), VP9, 又はAVS(Audio Video Coding Standard, オーディオビデオコーディング標準)2.0のような新たなビデオ圧縮プロトコルが出現し、新たなピクチャ分割フォーマットが提唱され、かつ新たなピクチャ分割フォーマットの基本画素ユニットに対して、マクロブロックよりも大きいラージブロックと、前記マクロブロックよりも小さいスモールブロックが存在し、それによって、ビデオデコーダ設計の複雑さ及び難しさを増加させた。現在、多くの場合、問題を解決するために、新たなプロトコルをサポートする複数の復号コアが、このビデオデコーダのために独立的に設計される。しかしながら、複数の独立の復号コアを含むこのビデオデコーダの面積及び電力消費は増加し、開発期間は延びてしまう。
技術的問題を解決するために、本発明の態様は、ビデオ復号方法及びビデオデコーダを提供し、従来技術における、長い開発期間、大きなチップ面積、及びマルチプロトコルビデオデコーダの高電力消費の欠点を解消することができる。
前述の技術的問題を解決するために、本発明の実施の第1態様は、ビデオ復号方法を提供し、
ビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットを、MxM残差ブロック及びMxM予測ブロックにそれぞれ変換するステップであって、M=16, 8,又は4であり、かつビデオ圧縮ビットストリームは、HEVCビットストリーム、VP9ビットストリーム、及びAVS2.0ビットストリームのいずれか1つを含む、ステップと、
前記残差ブロック及び前記予測ブロックに基づいて、再構成ピクチャブロックを取得するステップと、
前記再構成ピクチャブロックに対してフィルタリングを実行することによって、復号化された再構成ピクチャを取得するステップと
を含む。
第1態様を参照する第1の可能な実施方式において、ビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットを、MxM残差ブロック及びMxM予測ブロックにそれぞれ変換する前記ステップの前に、前記方法はさらに、
前記ビデオ圧縮ビットストリームをエントロピー復号化することによって、動きベクトル及び変換係数を含む構文要素を解析するステップと、
前記変換ユニットを取得するために、前記変換係数で、逆スキャニングと、逆量子化と、逆変換とを実行するステップと、
前記予測ユニットを取得するために、前記動きベクトル及び参照ピクチャに基づいてフレーム間動き補償を実行するステップ、又はフレーム内予測ピクチャに基づいてフレーム内動き補償を実行するステップと
を含む。
第1態様又は第1の可能な実施方式を参照する第2の可能な実施方式において、M=16であり、かつビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットを、MxM残差ブロック及びMxM予測ブロックにそれぞれ変換する前記ステップは特に、
復号化されるコードツリーブロックの複数のコードユニットを取得するステップであって、各コードユニットのサイズは2Nx8x8であり、かつN=0, 2, 4, 又は8であり、各コードユニットは少なくとも1の予測ユニット又は少なくとも1の変換ユニットを含み、
もしN=0の場合、前記コードツリーブロックの4のコードユニットを、1の予測ブロック又は残差ブロックに組み合わせるステップ、又は
もしN=2の場合、前記コードツリーブロックの各コードユニットを、1の予測ブロック又は残差ブロックとして直接使用するステップ、又は
もしN=4の場合、前記コードツリーブロックの各コードユニットを、4の予測ブロック又は残差ブロックに分割するステップ、又は
もしN=8の場合、前記コードツリーブロックの各コードユニットを、16の予測ブロック又は残差ブロックに分割するステップ
を含む。
第1態様の第2の可能な実施方式を参照する第3の可能な実施方式において、ビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットを、MxM残差ブロック及びMxM予測ブロックにそれぞれ変換する前記ステップの後に、前記方法はさらに、
前記予測ブロックに対して画素補間処理を実行するステップ
を含む。
第1態様から第3の可能な実施方式までのいずれか一つを参照する第4の可能な実施方式において、前記再構成ピクチャブロックに対してフィルタリングを実行することによって復号化された再構成ピクチャを取得する前記ステップは、特に、
前記再構成ピクチャブロックに対してデブロッキングフィルタリングを実行することによって前記復号化された再構成ピクチャを取得するステップを含む。
それに対応して、本発明の実施の第2態様は、ビデオデコーダをさらに提供し、前記ビデオデコーダは、
ビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットを、MxM残差ブロック及びMxM予測ブロックにそれぞれ変更するように構成される変換モジュールであって、M=16, 8, 又は4であり、かつビデオ圧縮ビットストリームは、HEVCビットストリーム、VP9ビットストリーム、及びAVS2.0ビットストリームのいずれか1つを含む、変換モジュールと、
前記残差ブロック及び前記予測ブロックに基づいて再構成ピクチャブロックを取得するように構成された再構成モジュールと、
前記再構成ピクチャブロックに対して、デブロッキングフィルタリングを実行することによって、復号化された再構成ピクチャを取得するように構成されたフィルタリングモジュールと
を備える。
第2態様を参照する第1の可能な実施方式において、前記ビデオデコーダはさらに、
前記ビデオ圧縮ビットストリームをエントロピー復号化することによって、動きベクトル及び変換係数を含む構文要素を解析するように構成されたビットストリーム解析モジュールと、
前記変換ユニットを取得するために、前記変換係数で、逆スキャニングと、逆量子化と、逆変換とを実行するように構成された逆変換モジュールと、
前記予測ユニットを取得するために、前記動きベクトル及び参照ピクチャに基づいてフレーム間動き補償を実行し、又はフレーム内予測ピクチャに基づいてフレーム内動き補償を実行するように構成された予測モジュールと
を備える。
第2態様又は第1の可能な実施方式を参照する第2の可能な実施方式において、M=16であり、かつ前記変換モジュールは特に、復号化されるコードツリーブロックの複数のコードユニットを取得するように構成され、各コードユニットのサイズは2Nx8x8であり、かつN=0, 2, 4,又は8であり、各コードユニットは少なくとも1の予測ユニット又は少なくとも1の変換ユニットを含み、
もしN=0の場合、前記コードツリーブロックの4のコードユニットを、1の予測ブロック又は残差ブロックに組み合わせ、又は
もしN=2の場合、前記コードツリーブロックの各コードユニットを、1の予測ブロック又は残差ブロックとして直接使用し、又は
もしN=4の場合、前記コードツリーブロックの各コードユニットを、4の予測ブロック又は残差ブロックに分割し、又は
もしN=8の場合、前記コードツリーブロックの各コードユニットを、16の予測ブロック又は残差ブロックに分割する。
第2態様から第3の可能な実施方式までのいずれか一つを参照する第4の可能な実施方式において、前記フィルタリングモジュールは特に、前記再構成ピクチャブロックに対してデブロッキングフィルタリングを実行することによって、復号化された再構成ピクチャを取得するように構成される。
以下の有益な効果が本発明の態様を実施することによってもたらされる。
すなわち、異なるサイズである予測ユニット及び変換ユニットが、16x16, 8x8, 又は4x4の粒度に変換され、その結果、HEVCプロトコル、VP9プロトコル、又はAVS2.0プロトコルをサポートする復号コアのパイプライン粒度はマクロブロックに基づく復号コアのパイプライン粒度に等しく、かつHEVCプロトコル、VP9プロトコル、又はAVS2.0における復号コアは、3つのプロトコルのうちビデオ復号処理に共通する部分を使用することによって、最後の生成の復号コアのいくつかのモジュールを再利用してもよく、新たな復号コアのモジュール開発を減少させ、かつHEVCプロトコル、VP9プロトコル、又はAVS2.0プロトコルをサポートするマルチプロトコルビデオデコーダの面積及び電力消費を効果的にに減少させる。
本発明の実施形態又は従来技術における技術的解決策をより明瞭に説明するために、以下に実施形態又は従来技術を説明するために必要な添付図面を簡潔に説明する。当然ながら、以下の説明における添付図面は、本発明のいくつかの実施形態を示しているに過ぎず、当業者は、創造的努力なしにこれらの添付からさらに他の図面を導き出すことができる。
本発明の第1の実施形態に基づくビデオ復号方法の概略フローチャートである。 図1における変換ユニットを変換することの概略図である。 図1における変換ユニットを変換することの別の概略図である。 図1における変換ユニットを変換することのさらに別の概略図である。 図1における予測ユニットを変換することの概略図である。 図1における予測ユニットを変換することの別の概略図である。 本発明の第2の実施形態に基づくビデオ復号方法の概略フローチャートである。 本発明の第1の実施形態に基づくビデオデコーダの概略構造図である。 本発明の第2の実施形態に基づくビデオデコーダの概略構造図である。 本発明の第3の実施形態に基づくビデオデコーダの概略構造図である。 本発明の第4の実施形態に基づくビデオデコーダの概略構造図である。
本発明の実施形態における添付図面を参照して、本発明の実施形態における技術的解決策を以下に明確かつ十分に説明する。当然ながら、説明される実施形態は、単なる本発明のいくつかの実施形態に過ぎず全てではない。創造的努力なしに本発明の実施形態に基づいて当業者によって取得される他の全ての実施形態は、本発明の保護範囲内であるものとする。
図1を参照すると、図1は、本発明の実施形態に基づくビデオ復号方法である。この実施形態において、前記方法は以下のステップを含む。
S101: ビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットをMxM残差ブロック及びMxM予測ブロックにそれぞれ変換する。M=16, 8, 又は4である。
特に、ビデオエンコーダ側で、ビデオエンコーダが、HEVCプロトコル、VP9プロトコル、又はAVS2.0プロトコルに基づいてビデオに圧縮処理を実行するとき、CTB(Code Tree Block, コードツリーブロック)が基本分割ユニット(basic partition unit)として使用され、CTBは四分木構造であり、各CTBは1又は4のCU(Code Unit, コードユニット)を含み、CU分割のサイズは固定ではなく、各CUは0,1,又は4のPU(Prediction Unit, 予測ユニット)を有し、又は各CUは1又は4のTU(Transform Unit, 変換ユニット)を有する。CUのサイズは、4つの形式、すなわち8x8, 16x16, 32x32, 及び64x64を含む。CU, PU, 及びTUのさらなる定義については、既存のビデオ符号化技術のプロトコルの説明を参照されたく、この実施形態においては省略する。
ビデオデコーダは、NAL(Network Abstraction Layer, ネットワーク抽象化層)からビデオ圧縮ビットストリームを受信し、かつビデオ圧縮ビットストリームを解析した後、予測ユニット及び/又は変換ユニットを別々に取得する。前記ビデオ圧縮ビットストリームは、例えばHEVCビットストリーム、VP9ビットストリーム、及びAVS2.0ビットストリームのようなビデオ圧縮ビットストリームのいずれか一つを含む。ビデオデコーダは2つの並列処理チャネルを含み、1つは変換チャネルであり、もう1つは予測チャネルである。変換ユニットは残差情報を含み、予測ユニットは予測情報を含み、解析によって取得された変換ユニットは変換チャネル上で処理され、かつ予測ユニットは予測チャネル上で処理される。前記ビデオデコーダは、ビデオ圧縮ビットストリームにおけるCTBのサイズを使用することによって変換チャネル上で、変換ユニットに対して分割操作及び組み合わせ操作を実行し、かつ変換チャネル上にある変換ユニットを、MxMサイズの残差ブロックにそれぞれ変換するとともに、予測チャネル上にある予測ユニットをMxMサイズの予測ブロックに変換する。
どのようにビデオデコーダが変換チャネル及び予測チャネル上で変換ユニット及び予測ユニットを変換するのかを説明するために、M=16が以下に実施例として使用される。
図2は、変換チャネル上でCUを再結合する実施例を示している。ビデオデコーダは、ビデオ圧縮ビットストリームを解析することによって、復号化されるCTBのCUのサイズが8x8であることを学習し、かつ、変換を実行するためにキャッシュから復号化されるCTBによって含まれる4つのCUを読む。前記4つのCUはそれぞれCU 0, CU 1, CU 2, 及びCU 3として同定され、かつ4つの8x8 CUは、1つの16x16残差ブロックMB 0を形成する。CU 0はそれぞれTU 00, TU 01, TU 02, 及びTU 03である4つのTUを含む。CU 1は1つのTUユニットを含み、かつ前記TUはTU 10として同定され、CU 2は1つのTUを含み、かつ前記TUはTU 20として同定され、かつCU 3は4つのTUを含み、かつ4つのTUはそれぞれTU 30, TU 31, TU 32, 及びTU 33として同定される。
図3は、変換チャネル上でCUを分割する実施例を示している。ビデオデコーダは、ビデオ圧縮ビットストリームを解析することによって、復号化されるCTBのCUのサイズは32x32であることを学習し、CUは1のTUを含み、かつ前記TUはTU 0として同定される。前記32x32 CUは4つの16x16 残差ブロック、それぞれMB 0, MB 1, MB 2, 及びMB 3に分割される。分割の後、MB 0はTU 0の1/4であるTU 00から構成され、MB 1はTU 0の1/4であるTU 01から構成され、MB 2はTU 0の1/4であるTU 02から構成され、かつMB 3はTU 0の1/4であるTU 03から構成される。
図4は、変換チャネル上でCUを分割する実施例を示している。ビデオデコーダは、ビデオ圧縮ビットストリームを解析することによって、復号化されるCTBのCUのサイズは32x32であることを学習し、CUは31のTUを含み、それぞれTU 00−TU 09, TU 10−TU 115, TU 20−TU 22, 及びTU 30として同定され、かつ前記32x32 CUは4つの16x16 残差ブロック、それぞれはMB 0, MB 1, MB 2, 及びMB 3に分割される。分割の後、MB 0はTU 00−TU 09から構成され、MB 1はTU 10−TU 115から構成され、MB 2はTU 20−TU 22から構成され、かつMB 3はTU 30から構成される。
図5は、予測チャネル上でCUを再結合する実施例を示している。ビデオデコーダは、ビデオ圧縮ビットストリームを解析することによって、復号化されるCTBのCUのサイズが8x8であることを学習し、かつ変換を実行するためにキャッシュから復号化されるCTBによって含まれる4つのCUを読む。前記4つのCUは、それぞれCU 0, CU 1, CU 2, 及びCU 3として同定され、かつ4つの8x8 CUは1つの16x16 予測ブロックMB 0を形成する。CU 0はPU 00及びPU 01として同定される2のPUを含み、CU 1はPU 10として同定される1つのPUユニットを含み、CU 2はPU 20として同定される1つのPUを含み、CU 3はPU 30及びPU 31として同定される2つのPUを含む。
図6は、予測チャネル上でCUを分割する実施例を示している。ビデオデコーダは、ビデオ圧縮ビットストリームを解析することによって、復号化されるCTBのCUのサイズが32x32であることを学習し、CUはPU 0及びPU 1としてそれぞれ同定される2つのPUを含み、かつ32x32のCUは、それぞれがMB 0, MB 1, MB 2, 及びMB 3である4つの16x16の予測ブロックに分割される。分割の後に、MB 0はPU 0の1/3であるPU 00から構成され、MB 1はPU 0の1/6であるPU 01と、PU 1の1/2であるPU 10とから構成され、MB 2はPU 0の1/3であるPU 02から構成され、かつMB 3はPU 0の1/6であるPU 03と、PU 1の1/2であるPU 11とから構成される。
もしM=8又は4である場合、ビデオデコーダは、前述の分割又は再結合方法を使用することによって、コードユニット又は予測ユニットをMxMの粒度に変換してもよいと理解されてもよい。
異なるサイズである予測ユニット及び変換ユニットは、16x16, 8x8, 又は4x4の粒度に変換され、その結果、HEVCプロトコル、VP9プロトコル、又はAVS2.0プロトコルをサポートする復号コア(decoding core)のパイプライン粒度(pipeline granularity)は、マクロブロックに基づく復号コアのパイプライン粒度と等しく、かつHEVCプロトコル、VP9プロトコル、又はAVS2.0における復号コアは、3つのプロトコルのうちビデオ復号処理に共通する部分を使用することにより、最後の生成の復号コアのいくつかのモジュールを再利用してもよく、新たな復号コアのモジュール開発を減少させ、かつ、HEVCプロトコル、VP9プロトコル、又はAVS2.0プロトコルをサポートするマルチプロトコルビデオデコーダの面積及び電力消費を効果的に減少させる。
S102: 前記残差ブロック及び前記予測ブロックに基づいて、再構成ピクチャブロックを取得する。
特に、前記再構成ピクチャブロックは、前記残差ブロック及び前記予測ブロックが重み付けされた後に取得される。
S103: 前記再構成ピクチャブロックに対してフィルタリングを実行することによって復号化された再構成ピクチャを取得する。
特に、前記復号化された再構成ピクチャは、例えば再構成ピクチャブロックに対してデブロッキングフィルタリング又は適応フィルタリングのようなフィルタリング処理を実行することによって取得される。
図7を参照すると、図7は、本発明の実施形態に基づくビデオ復号方法の別の概略フローチャートである。この実施形態において、方法は、以下のステップを含む。
S201: ビデオ圧縮ビットストリームをエントロピー復号化することによって、動きベクトル及び変換係数を含む構文要素を解析する。
特に、ビデオデコーダは、NALからビデオ圧縮ビットストリームを受信し、圧縮ピクチャデータと、例えばシーケンスパラメータセット又はピクチャパラメータセットのようなパラメータとを解析し、かつ、エントロピー復号化を実行した後に、例えば動きベクトル及び変換係数のような構文要素を取得する。
S202: 変換ユニットを取得するために、前記変換係数で、逆スキャニングと、逆量子化と、逆変換とを実行する。
特に、S201において取得された変換係数は一次元データであり、ビデオデコーダは、逆スキャニングと、逆量子化と、逆変換との処理を実行することによって、一次元データ(変換係数)を二次元配列又は行列、つまり前記変換ユニットに変換し、かつ前記変換ユニットは、対応するブロックの輝度及び/又はクロミナンスについての残差情報を含む。
S203: 予測ユニットを取得するために、前記動きベクトル及び参照ピクチャに基づいてフレーム間動き補償を実行し、又はフレーム内予測ピクチャに基づいてフレーム内動き補償を実行する。
特に、前記予測ユニットは、動きベクトルに基づいて、対応する参照ピクチャから取得され、かつこの場合、予測ユニットはフレーム間予測情報を含む。あるいは、予測ユニットは、フレーム内予測ピクチャに基づいて、フレーム内動き補償が実行された後に取得され、かつこの場合、予測ユニットはフレーム内予測情報を含む。
S204: 前記ビデオ圧縮ビットストリームの復号化の後に取得される変換ユニット及び予測ユニットを、MxM残差ブロック及びMxM予測ブロックにそれぞれ変換する。M=16, 8, 又は4である。
特に、2Nx8x8として表されるコードユニットのサイズの4タイプが存在することがHEVCプロトコルで指定されており、N=0, 2, 4, 又は8であり、各コードユニットは少なくとも1の予測ユニット又は少なくとも1の変換ユニットを含む。コードユニットにおける変換ユニット又は予測ユニットの変換を説明するために、M=16, 8, 又は4が以下に実施例として別々に使用される。
実施例として、M=16を使用することによって変換が実行される。もしN=0の場合、コードツリーブロックの4のコードユニットが1の予測ブロック又は残差ブロックに組み合わされる。又は、もしN=2の場合、コードツリーブロックの各コードユニットが1の予測ブロック又は残差ブロックとして直接使用される。又は、もしN=4の場合、コードツリーブロックの各コードユニットが、4の予測ブロック又は残差ブロックに分割される。又は、もしN=8の場合、コードツリーブロックの各コードユニットが、16の予測ブロック又は残差ブロックに分割される。
実施例として、M=8を使用することによって変換が実行される。もしN=0の場合、コードツリーブロックの各コードユニットは、1の予測ブロック又は残差ブロックとして直接使用され、又は、もしN=2の場合、コードツリーブロックの各コードユニットは、4の予測ブロック又は残差ブロックに分割され、又は、もしN=4の場合、コードツリーブロックの各コードユニットは、16の予測ブロック又は残差ブロックに分割され、又は、もしN=8の場合、コードツリーブロックの各コードユニットは、64の予測ブロック又は残差ブロックに分割される。
実施例として、M=4を使用することによって変換が実行される。もしN=0の場合、コードツリーブロックの各コードユニットは、4の予測ブロック又は残差ブロックに分割され、もしN=2の場合、コードツリーブロックの各コードユニットは、8の予測ブロック又は残差ブロックに分割され、もしN=4の場合、コードツリーブロックの各コードユニットは、64の予測ブロック又は残差ブロックに分割され、もしN=8の場合、コードツリーブロックの各コードユニットは、256の予測ブロック又は残差ブロックに分割される。
S205: 前記予測ブロックに対して画素補間処理を実行する。
特に、補間点は隣接画素によって決定され、かつ補間はプロトコル標準に基づくフィルタによって完了される。
S206: 前記残差ブロック及び前記予測ブロックに基づいて再構成ピクチャブロックを取得する。
特に、再構成ピクチャブロックは、残差情報を含む残差ブロックと、予測情報を含む予測ブロックとに重み付け処理を実行することによって取得される。
S207: 再構成ピクチャブロックに対してフィルタリング(例えばデブロッキング効果フィルタリング又は適応補償フィルタリング)を実行することによって、復号化された再構成ピクチャを取得する。
異なるサイズである予測ユニット及び変換ユニットは、16x16, 8x8, 又は4x4の粒度に変換され、その結果、HEVCプロトコル、VP9プロトコル、又はAVS2.0プロトコルをサポートする復号コアのパイプライン粒度は、マクロブロックに基づく復号コアのパイプライン粒度に等しくなり、かつ、HEVCプロトコル、VP9プロトコル、又はAVS2.0における復号コアは、3つのプロトコルのうちビデオ復号処理に共通する部分を使用することによって、マクロブロックに基づく復号コアのいくつかのモジュールを再利用してもよく、新たな復号コアのモジュール開発を減少させ、かつ、HEVCプロトコル、VP9プロトコル、又はAVS2.0プロトコルをサポートするマルチプロトコルビデオデコーダの面積及び電力消費を効果的に減少させる。
図8を参照すると、図8は、本発明の実施形態に基づくビデオデコーダの概略構造図である。この実施形態において、ビデオデコーダは、変換モジュール10と、再構成モジュール11と、フィルタリングモジュール12とを備える。
前記変換モジュール10は、ビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットを、MxM残差ブロック及びMxM予測ブロックにそれぞれ変換するように構成される。M=16, 8, 又は4である。
特に、ビデオエンコーダ側で、ビデオエンコーダがビデオに対してHEVC圧縮処理を実行するとき、CTB(Code Tree Block, コードツリーブロック)が基本分割ユニットとして使用され、前記CTBは四分木構造であり、各CTBは1又は4のCU(Code Unit, コードユニット)を含み、CU分割のサイズは固定ではなく、各CUは0,1,又は4つのPU(Prediction Unit, 予測ユニット)を有し、又は各CUは1又は4つのTU(Transform Unit, 変換ユニット)を有する。CUのサイズは、4つの形式8x8, 16x16, 32x32, 及び64x64を含む。
前記ビデオデコーダは、NALからビデオ圧縮ビットストリームを受信し、かつビデオ圧縮ビットストリームを解析した後、変換ユニット及び予測ユニットをそれぞれ取得し、かつビデオデコーダは2の並列処理チャネルを含み、その1つが変換チャネルであり、もう1つが予測チャネルである。前記変換ユニットは残差情報を含み、前記予測ユニットは予測情報を含み、解析によって取得された変換ユニットは、変換チャネルで処理され、かつ予測ユニットは予測チャネルで処理される。変換モジュール10は、ビデオ圧縮ビットストリームにおけるCTBのサイズを使用することによって、変換チャネル上の変換ユニットに対して、分割操作(splitting operation)又は組み合わせ操作を実行し、変換チャネル上にある変換ユニットを、MxMサイズの残差ブロックにそれぞれ変換し、かつ、予測チャネル上にある予測ユニットを、MxMサイズの予測ブロックに変換する。
再構成モジュール11は、前記残差ブロック及び前記予測ブロックに基づいて再構成ピクチャブロックを取得するように構成される。
フィルタリングモジュール12は、再構成ピクチャブロックに対してフィルタリング(例えばデブロッキング効果フィルタリング又は適応補償)を実行することによって、復号化された再構成ピクチャを取得するように構成される。
本発明の実施形態及び方法の実施形態1は、同一の概念に基づいている。詳細なプロセスについては、方法の実施形態1の説明を参照されたく、ここでは省略する。
さらに、図9を参照すると、図9は、本発明の実施形態に基づくビデオデコーダの概略構造図である。この実施形態において、ビデオデコーダは、ビットストリーム解析モジュール13と、逆変換モジュール14と、予測モジュール15と、補間モジュール16と、さらに、前記変換モジュール10と、前記再構成モジュール11と、前記フィルタリングモジュール12とを備える。
ビットストリーム解析モジュール13は、ビデオ圧縮ビットストリームをエントロピー復号化することによって、モード情報と、動きベクトルと、変換係数とを含む構文要素を解析するように構成される。
前記逆変換モジュール14は、変換ユニットを取得するために、変換係数で、逆スキャニングと、逆量子化と、逆変換とを実行するように構成される。
予測モジュール15は、予測ユニットを取得するために、前記動きベクトル及び参照ピクチャに基づいてフレーム間動き補償を実行し、又は前記フレーム内予測ピクチャに基づいてフレーム内動き補償を実行するように構成される。
前記補間モジュール16は、予測ブロックに対して補間処理を実行し、かつ補間処理の後に予測ブロックを再構成モジュールに移すように構成される。
任意に、M=16であり、かつ変換モジュールは復号化されるコードツリーブロックから複数のコードユニットを取得するように構成され、各コードユニットのサイズは2Nx8x8であり、かつN=0, 2, 4, 又は8であり、各コードユニットは少なくとも1の予測ユニット又は少なくとも1の変換ユニットを含み、
もしN=0の場合、前記コードツリーブロックの4のコードユニットを、1の予測ブロック又は残差ブロックに組み合わせ、又は
もしN=2の場合、前記コードツリーブロックの各コードユニットを、1の予測ブロック又は残差ブロックとして直接使用し、又は
もしN=4の場合、前記コードツリーブロックの各コードユニットを、4の予測ブロック又は残差ブロックに分割し、
もしN=8の場合、前記コードツリーブロックの各コードユニットを、16の予測ブロック又は残差ブロックに分割する。
本発明のこの実施形態及び方法の実施形態2は同一の概念に基づいている。詳細なプロセスについては、方法の実施形態2の説明を参照されたく、ここでは省略する。
図10を参照すると、図10は、本発明の実施形態に基づくマルチプロトコルビデオデコーダの概略構造図である。この実施形態において、前記ビデオデコーダはHEVCプロトコル及びH.264プロトコルをサポートし、マルチプロトコルビデオデコーダは2の復号コア、すなわちH.264復号コア及びHEVC復号コアを含み、H.264復号コアはビットストリーム解析モジュール23を含み、H.264復号コアはビットストリーム解析モジュール23と、逆変換モジュール24と、予測モジュール25と、補間モジュール26と、再構成モジュール21と、フィルタリングモジュール22とを備える。HEVC復号コアは、ビットストリーム解析モジュール33と、逆変換モジュール34と、予測モジュール35と、変換モジュール30と、補間モジュール26と、再構成モジュール21と、フィルタリングモジュール22とを備える。トップ解析モジュール37は、ビデオ圧縮ビットストリームのフォーマットを同定するように構成され、もしビデオ圧縮ビットストリームがH.264ビットストリームである場合、ビデオ圧縮ビットストリームはビデオ復号化のためにH.264復号コアに送信され、H.264復号コアは、H.264プロトコルにおける方法を使用することによって、予測チャネル及び変換チャネルに対して予測処理及び変換処理をそれぞれ実行し、かつ予測処理又は変換処理の後、16x16マクロブロックが取得される。もしビデオ圧縮ビットストリームがHEVCビットストリームである場合、ビデオ圧縮ビットストリームが、復号化のためにHEVC復号コアに送信され、かつHEVC復号コアは、予測チャネル上で、取得された予測ユニットをMxM予測ブロックに変換し、かつ同時に変換チャネル上で、取得された変換ユニットをMxM残差ブロックに変換する。前述のパイプライン粒度の変換の後、HEVC復号コアは、H.264復号コアの補間モジュール26と、再構成モジュール21と、フィルタリングモジュール22とを再利用してもよい。同様に、VP9復号コア及びAVS2.0復号コアは、H.264復号コアの補間モジュール26と、再構成モジュール21と、フィルタリングモジュール22とを再利用してもよい。このように、マルチプロトコルビデオデコーダのいくつかのモジュールの開発は減少し、マルチプロトコルビデオデコーダのチップ面積及び電力消費は減少し、かつ開発期間は短縮する。
前述のビデオデコーダは、集積回路の製造プロセスを用いて、集積回路基板上に集積されてもよい。
それに応じて、図11を参照すると、本発明の第4の実施形態はビデオデコーダをさらに提供する。この実施形態において、デコーダ1は、プロセッサ61と、メモリ62と、通信インタフェース63とを備え、前記通信インタフェース63は外部デバイスと通信するように構成される。デコーダ1の中には1又は2以上のプロセッサ61があってもよく、かつ1のプロセッサは、図11における実施例として使用される。本発明のいくつかの実施形態において、プロセッサ61と、メモリ62と、通信インタフェース63とが、バス又は他の手段を使用して、お互いに接続されてもよく、かつバス接続が、図11において実施例として使用される。
メモリ62は、プログラムコードの一群を記憶し、かつプロセッサ61は、メモリ62に記憶されたプログラムコードを起動するように構成され、その結果、以下の動作を実行する。
ビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットを、MxM残差ブロック及びMxM予測ブロックにそれぞれ変換するステップであって、M=16, 8,又は4であり、かつ、ビデオ圧縮ビットストリームは、高能率ビデオ符号化HEVCビットストリーム、VP9ビットストリーム、及びオーディオビデオ標準AVS2.0ビットストリームのいずれか1つを含む、ステップ、
前記残差ブロック及び前記予測ブロックに基づいて、再構成ピクチャブロックを取得するステップ、及び
前記再構成ピクチャブロックに対してフィルタリングを実行することによって、復号化された再構成ピクチャを取得するステップ。
本発明のこの実施形態において、プロセッサ61はさらに、
ビデオ圧縮ビットストリームをエントロピー復号化することによって、動きベクトル及び変換係数を含む構文要素を解析し、
前記変換ユニットを取得するために、前記変換係数で、逆スキャニングと、逆量子化と、逆変換とを実行し、かつ
前記予測ユニットを取得するために、前記動きベクトル及び参照ピクチャに基づいてフレーム間動き補償を実行するか、又はフレーム内予測ピクチャに基づいてフレーム内動き補償を実行するように構成される。
本発明のいくつかの実施形態において、M=16であり、かつ、プロセッサ61によって実行されるビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットを、MxM残差ブロック及びMxM予測ブロックにそれぞれ変換する前記ステップは特に、
復号化されるコードツリーブロックの複数のコードユニットを取得するステップであって、各コードユニットのサイズは2Nx8x8であり、かつN=0, 2, 4, 又は8であり、各コードユニットは少なくとも1の予測ユニット又は少なくとも1の変換ユニットを含み、
もしN=0の場合、前記コードツリーブロックの4のコードユニットを、1の予測ブロック又は残差ブロックに組み合わせるステップ、又は
もしN=2の場合、前記コードツリーブロックの各コードユニットを、1の予測ブロック又は残差ブロックとして直接使用するステップ、又は
もしN=4の場合、前記コードツリーブロックの各コードユニットを、4の予測ブロック又は残差ブロックに分割するステップ、又は
もしN=8の場合、前記コードツリーブロックの各コードユニットを、16の予測ブロック又は残差ブロックに分割するステップを含む。
本発明のいくつかの実施形態において、プロセッサ61は予測ブロックに対して画素補間処理を実行するようにさらに構成される。
本発明のいくつかの実施形態において、プロセッサ61によって実行される再構成ピクチャブロックに対してフィルタリングを実行することによって復号化された再構成ピクチャを取得する前記ステップは、特に、
再構成ピクチャブロックに対してデブロッキングフィルタリングを実行することによって、復号化された再構成ピクチャを取得するステップを含み。
本発明のこの実施形態が実施されるとき、異なるサイズである予測ユニット及び変換ユニットが16x16, 8x8, 又は4x4の粒度に変換され、その結果、HEVCプロトコル、VP9プロトコル、又はAVS2.0プロトコルをサポートする復号コアのパイプライン粒度は、マクロブロックに基づく復号コアのパイプライン粒度に等しく、かつ、HEVCプロトコル、VP9プロトコル、又はAVS2.0における復号コアは、3つのプロトコルのうちビデオ復号処理に共通する部分を使用することによって、マクロブロックに基づく復号コアのいくつかのモジュールを再利用してもよく、新たな復号コアのモジュール開発を減少させ、かつHEVCプロトコル、VP9プロトコル、又はAVS2.0プロトコルをサポートするマルチプロトコルビデオデコーダの面積及び電力消費を効果的に減少させる。
当業者は、実施形態における方法のプロセスの全てまたはいくつかは、関連ハードウェアに命令するコンピュータプログラムによって実行されることができると理解できる。前記プログラムは、コンピュータ可読記憶媒体に記憶されてもよい。前記プログラムが動作するとき、実施形態における方法のプロセスが実行される。前述の記憶媒体は、磁気ディスク、光ディスク、読み取り専用メモリ(Read-Only Memory, ROM)、又はランダムアクセスメモリ(Random Access Memory, RAM)を含んでもよい。
上記に開示されているのは、本発明の例示的な実施形態に過ぎず、かつ当然ながら、本発明の保護範囲を限定することを意図していない。当業者は、前述の実施形態を実施するプロセスの全て又はいくつかと、本発明の特許請求の範囲に基づいて成される同等の修正は、本発明の保護範囲内であるものとする。
10 変換モジュール
11 再構成モジュール
12 フィルタリングモジュール
13 コードストリーム解析モジュール
14 逆変換モジュール
15 予測モジュール
16 補間モジュール
30 変換モジュール
21 再構成モジュール
22 フィルタリングモジュール
23 コードストリーム解析モジュール
24 逆変換モジュール
25 予測モジュール
26 補間モジュール
33 コードストリーム解析モジュール
34 逆変換モジュール
35 予測モジュール
37 トップ解析モジュール
61 プロセッサ
62 メモリ
63 通信インタフェース

Claims (10)

  1. ビデオ復号方法であって、
    ビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットをMxM残差ブロック及びMxM予測ブロックにそれぞれ変換するステップであって、M=16, 8, 又は4であり、かつ前記ビデオ圧縮ビットストリームは、高能率ビデオ符号化HEVCビットストリーム、VP9ビットストリーム、及びオーディオビデオ標準AVS2.0ビットストリームのいずれか一つを含む、ステップと、
    前記残差ブロック及び前記予測ブロックに基づいて、再構成ピクチャブロックを取得するステップと、
    前記再構成ピクチャブロックに対してフィルタリングを実行することによって、復号化された再構成ピクチャを取得するステップと、
    を含む方法。
  2. ビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットを、MxM残差ブロック及びMxM予測ブロックにそれぞれ変換する前記ステップの前に、
    前記ビデオ圧縮ビットストリームをエントロピー復号化することによって、動きベクトル及び変換係数を含む構文要素を解析するステップと、
    前記変換ユニットを取得するために、前記変換係数で、逆スキャニングと、逆量子化と、逆変換とを実行するステップと、
    前記予測ユニットを取得するために、前記動きベクトル及び参照ピクチャに基づいてフレーム間動き補償を実行するステップ又はフレーム内予測ピクチャに基づいてフレーム内動き補償を実行するステップと
    をさらに含む請求項1に記載の方法。
  3. M=16であり、かつビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットをMxM残差ブロック及びMxM予測ブロックにそれぞれ変換する前記ステップは特に、
    復号化されるコードツリーブロックの複数のコードユニットを取得するステップであって、各コードユニットのサイズは2Nx8x8であり、かつN=0, 2, 4, 又は8であり、各コードユニットは少なくとも1の予測ユニット又は少なくとも1の変換ユニットを含み、
    もしN=0の場合、前記コードツリーブロックの4のコードユニットを1の予測ブロック又は残差ブロックに組み合わせるステップ、又は
    もしN=2の場合、前記コードツリーブロックの各コードユニットを1の予測ブロック又は残差ブロックとして直接使用するステップ、又は
    もしN=4の場合、前記コードツリーブロックの各コードユニットを4の予測ブロック又は残差ブロックに分割するステップ、又は
    もしN=8の場合、前記コードツリーブロックの各コードユニットを16の予測ブロック又は残差ブロックに分割するステップ
    を含む、請求項1又は2に記載の方法。
  4. ビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットを、MxM残差ブロック及びMxM予測ブロックにそれぞれ変換する前記ステップの後に、
    前記予測ブロックに画素補間処理を実行するステップ
    をさらに含む請求項3に記載の方法。
  5. 前記再構成ピクチャブロックに対してフィルタリングを実行することによって復号化された再構成ピクチャを取得する前記ステップは、特に
    前記再構成ピクチャブロックに対してデブロッキングフィルタリングを実行することによって前記復号化された再構成ピクチャを取得するステップ
    を含む、請求項1〜4のいずれか一項に記載の方法。
  6. ビデオデコーダであって、
    ビデオ圧縮ビットストリームの復号化後に取得された変換ユニット及び予測ユニットを、MxM残差ブロック及びMxM予測ブロックにそれぞれ変換するように構成された変換モジュールであって、M=16, 8, 又は4であり、かつ前記ビデオ圧縮ビットストリームは、HEVCビットストリーム、VP9ビットストリーム、及びAVS2.0ビットストリームのいずれか一つを含む、変換モジュールと、
    前記残差ブロック及び前記予測ブロックに基づいて、再構成ピクチャブロックを取得するように構成された再構成モジュールと、
    前記再構成ピクチャブロックに対してデブロッキングフィルタリングを実行することによって復号化された再構成ピクチャを取得するように構成されたフィルタリングモジュールと
    を備えるビデオデコーダ。
  7. 前記ビデオ圧縮ビットストリームをエントロピー復号化することによって、動きベクトル及び変換係数を含む構文要素を解析するように構成されたビットストリーム解析モジュールと、
    前記変換ユニットを取得するために、前記変換係数で、逆スキャニングと、逆量子化と、逆変換とを実行するように構成された逆変換モジュールと、
    前記予測ユニットを取得するために、前記動きベクトル及び参照ピクチャに基づいてフレーム間動き補償を実行し、又はフレーム内予測ピクチャに基づいてフレーム内動き補償を実行するように構成された予測モジュールと
    をさらに備える請求項6に記載のビデオデコーダ。
  8. M=16であり、かつ前記変換モジュールは特に、復号化されるコードツリーブロックの複数のコードユニットを取得するように構成され、各コードユニットのサイズは2Nx8x8であり、かつN=0, 2, 4, 又は8であり、各コードユニットは少なくとも1の予測ユニット又は少なくとも1の変換ユニットを含み、
    もしN=0の場合、前記コードツリーブロックの4のコードユニットを1の予測ブロック又は残差ブロックに組み合わせ、又は
    もしN=2の場合、前記コードツリーブロックの各コードユニットを1の予測ブロック又は残差ブロックとして直接使用し、又は
    もしN=4の場合、前記コードツリーブロックの各コードユニットを4の予測ブロック又は残差ブロックに分割し、又は
    もしN=8の場合、前記コードツリーブロックの各コードユニットを16の予測ブロック又は残差ブロックに分割する
    ように構成される、請求項7に記載のビデオデコーダ。
  9. 前記予測ブロックに対して画素補間処理を実行し、かつ補間処理後に予測ブロックを前記再構成モジュールに移すように構成された補間モジュールをさらに備える、請求項8に記載のビデオデコーダ。
  10. 前記フィルタリングモジュールは、前記再構成ピクチャブロックに対してデブロッキングフィルタリングを実行することによって、前記復号化された再構成ピクチャを取得するように構成された、請求項6〜9のいずれか一項に記載のビデオデコーダ。
JP2015109698A 2014-05-30 2015-05-29 ビデオ復号方法及びビデオデコーダ Active JP6004407B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201410240979.XA CN103997650B (zh) 2014-05-30 2014-05-30 一种视频解码的方法和视频解码器
CN201410240979.X 2014-05-30

Publications (2)

Publication Number Publication Date
JP2015228651A true JP2015228651A (ja) 2015-12-17
JP6004407B2 JP6004407B2 (ja) 2016-10-05

Family

ID=51311636

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015109698A Active JP6004407B2 (ja) 2014-05-30 2015-05-29 ビデオ復号方法及びビデオデコーダ

Country Status (4)

Country Link
US (1) US20150350682A1 (ja)
EP (2) EP3328084A1 (ja)
JP (1) JP6004407B2 (ja)
CN (1) CN103997650B (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105430417B (zh) * 2014-09-22 2020-02-07 中兴通讯股份有限公司 编码方法、解码方法、装置及电子设备
US9807398B2 (en) * 2014-09-30 2017-10-31 Avago Technologies General Ip (Singapore) Pte. Ltd. Mode complexity based coding strategy selection
CN104581173A (zh) * 2015-01-13 2015-04-29 中国电子科技集团公司第三十二研究所 软解码验证模型平台
US11049219B2 (en) 2017-06-06 2021-06-29 Gopro, Inc. Methods and apparatus for multi-encoder processing of high resolution content
WO2019076138A1 (en) * 2017-10-16 2019-04-25 Huawei Technologies Co., Ltd. METHOD AND APPARATUS FOR ENCODING
CN111758255A (zh) 2018-02-23 2020-10-09 华为技术有限公司 用于视频编解码的位置相关空间变化变换
PT3782361T (pt) 2018-05-31 2023-11-17 Huawei Tech Co Ltd Transformada que varia espacialmente com um tipo de transformada adaptativa
TWI833807B (zh) 2018-09-19 2024-03-01 大陸商北京字節跳動網絡技術有限公司 用於幀內塊複製的基於歷史的運動矢量預測值
CN111200732B (zh) * 2018-11-20 2023-04-07 深圳市中兴微电子技术有限公司 一种反量化反变换方法及装置
US11109067B2 (en) 2019-06-26 2021-08-31 Gopro, Inc. Methods and apparatus for maximizing codec bandwidth in video applications
US11228781B2 (en) 2019-06-26 2022-01-18 Gopro, Inc. Methods and apparatus for maximizing codec bandwidth in video applications
US11481863B2 (en) 2019-10-23 2022-10-25 Gopro, Inc. Methods and apparatus for hardware accelerated image processing for spherical projections
CN113454997A (zh) * 2020-09-23 2021-09-28 深圳市大疆创新科技有限公司 视频编码装置、方法、计算机存储介质和可移动平台
CN114615497A (zh) * 2020-12-03 2022-06-10 腾讯科技（深圳）有限公司 视频解码方法、装置、计算机可读介质及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006524460A (ja) * 2003-04-17 2006-10-26 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ 符号化されたビデオデータのコンテンツ分析
WO2011161949A1 (ja) * 2010-06-23 2011-12-29 パナソニック株式会社 画像復号装置、画像復号方法、集積回路およびプログラム
WO2012046435A1 (ja) * 2010-10-04 2012-04-12 パナソニック株式会社 画像処理装置、画像符号化方法および画像処理方法
JP2014096754A (ja) * 2012-11-12 2014-05-22 Canon Inc 符号化方式変換装置、符号化方式変換方法、及びプログラム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110017719A (ko) * 2009-08-14 2011-02-22 삼성전자주식회사 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
CN104811717B (zh) * 2009-12-01 2018-09-14 数码士有限公司 用于编码/解码高分辨率图像的方法和设备
US9210442B2 (en) * 2011-01-12 2015-12-08 Google Technology Holdings LLC Efficient transform unit representation
US20130094779A1 (en) * 2011-10-04 2013-04-18 Texas Instruments Incorporated Method and Apparatus for Prediction Unit Size Dependent Motion Compensation Filtering Order
CN103024389B (zh) * 2012-12-24 2015-08-12 芯原微电子(北京)有限公司 一种用于hevc的解码装置和方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006524460A (ja) * 2003-04-17 2006-10-26 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ 符号化されたビデオデータのコンテンツ分析
WO2011161949A1 (ja) * 2010-06-23 2011-12-29 パナソニック株式会社 画像復号装置、画像復号方法、集積回路およびプログラム
WO2012046435A1 (ja) * 2010-10-04 2012-04-12 パナソニック株式会社 画像処理装置、画像符号化方法および画像処理方法
JP2014096754A (ja) * 2012-11-12 2014-05-22 Canon Inc 符号化方式変換装置、符号化方式変換方法、及びプログラム

Also Published As

Publication number Publication date
CN103997650B (zh) 2017-07-14
EP2950536A1 (en) 2015-12-02
JP6004407B2 (ja) 2016-10-05
EP3328084A1 (en) 2018-05-30
US20150350682A1 (en) 2015-12-03
CN103997650A (zh) 2014-08-20

Similar Documents

Publication Publication Date Title
JP6004407B2 (ja) ビデオ復号方法及びビデオデコーダ
JP6882560B2 (ja) 画像予測方法および装置
US11076175B2 (en) Video encoding method for encoding division block, video decoding method for decoding division block, and recording medium for implementing the same
TWI722341B (zh) 用於在視訊寫碼中自適應之迴路濾波之線路緩衝減少
JP7483035B2 (ja) ビデオ復号方法並びにその、ビデオ符号化方法、装置、コンピュータデバイス及びコンピュータプログラム
RU2580066C2 (ru) Эффективное по памяти моделирование контекста
CN109547790B (zh) 用于在高效率视频编解码中处理分区模式的设备和方法
JP5787116B2 (ja) ビデオデータのコンテキストモデルを決定する方法及びシステム
TW201906406A (zh) 與視訊寫碼中之變換處理一起應用之內部濾波
US20180139453A1 (en) Method of processing video signal and device for same
TWI520584B (zh) 用信號發送用於一葉層級編碼單元之子集的轉換係數的語法元素
WO2019135930A1 (en) Sign prediction in video coding
TW201742458A (zh) 二值化二次轉換指數
TW201637446A (zh) 用於預測剩餘之增強型多重轉變
TW201444350A (zh) 方形區塊預測
JP2017535150A (ja) ビデオ符号化および復号におけるベクトル符号化のための方法および装置
TW201309026A (zh) 用於視訊編碼之濾波區塊效應之人為誤差
WO2012099743A1 (en) Method and system for processing video data
TW201349866A (zh) 已寫碼區塊旗標寫碼
US10306255B2 (en) Image decoding device, image decoding method, and integrated circuit
JP7520809B2 (ja) スカラー量子化従属性のためのスカラー量子化器決定スキーム
RU2010135495A (ru) Видеотранскодер с гибким управлением качеством и сложностью
KR20220036982A (ko) 비디오 인코딩 및 디코딩을 위한 이차 변환
JP2022518378A (ja) 画像予測方法、機器、及びシステム、装置、及び記憶媒体
CN114731447B (zh) 用于视频解码的方法和设备

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160411

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160419

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160719

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160809

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160830

R150 Certificate of patent or registration of utility model

Ref document number: 6004407

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250