JP6360969B2 - 画像符号化、復号化方法、及び装置 - Google Patents

画像符号化、復号化方法、及び装置 Download PDF

Info

Publication number
JP6360969B2
JP6360969B2 JP2017511908A JP2017511908A JP6360969B2 JP 6360969 B2 JP6360969 B2 JP 6360969B2 JP 2017511908 A JP2017511908 A JP 2017511908A JP 2017511908 A JP2017511908 A JP 2017511908A JP 6360969 B2 JP6360969 B2 JP 6360969B2
Authority
JP
Japan
Prior art keywords
mapping
matching
matching relationship
value
parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017511908A
Other languages
English (en)
Other versions
JP2017529784A (ja
Inventor
リン,タオ
リー,ミン
シャン,グオチアン
ウー,ツァオ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tongji University
ZTE Corp
Original Assignee
Tongji University
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tongji University, ZTE Corp filed Critical Tongji University
Publication of JP2017529784A publication Critical patent/JP2017529784A/ja
Application granted granted Critical
Publication of JP6360969B2 publication Critical patent/JP6360969B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本発明は、デジタルビデオ圧縮符号化及び復号化に関し、具体的に、画像符号化、復号化方法、及び装置に関する。
画像のデジタルビデオ信号の自然形式は画像のシーケンスである。1つの画像は一般的に幾つかの画素からなる矩形領域であり、1つのデジタルビデオ信号は、秒当たりに50枚の画像があると、一段30分間のデジタルビデオ信号は30×60×50=90000枚の画像からなるビデオ画像シーケンスであり、ビデオシーケンス又はシーケンスとも略称される場合がある。デジタルビデオ信号を符号化することは、一枚一枚の画像を符号化することである。
最新の国際ビデオ圧縮標準HEVC(High Efficiency Video Coding)では、1枚の画像を符号化する際に、1枚の画像を若干のM×M画素のサブ画像に分割し、「符号化ユニット(Coding Unit、CUと略称される)」と呼ばれ、CUを基本的な符号化単位として、サブ画像をブロックずつに符号化する。よく使用されるMのサイズは、4、8、16、32、64である。このため、1つのビデオ画像シーケンスを符号化することは、各フレームの各符号化ユニットを順次に符号化することである。同様に、復号化する際にも、各フレームの各符号化ユニットを同様な順序で順次に復号化し、最終的に全体のビデオ画像シーケンスを再構成する。HEVCは、予測符号化の方式によって、画像を符号化する。まず、符号化された画像情報に基づき、入力ビデオ画像における画素の予測値を構築し、次に、入力ビデオ画像における画素の元の値と上記予測値との間の差を符号化し、同時に予測値の構築に必要なパラメータを符号化する必要がある。復号化過程において、まずビットストリームから得られたパラメータと復号化された画像情報に基づき、復号化しようとする画像における画素の予測値を構築し、次に、フィルタリング処理された上記予測値とビットストリームから得られた差との和を現在の復号化しようとする画像における画素の回復値とする。なお、符号化過程の自体にも復号化過程と類似する方法を使用する必要があり、入力ビデオ画像のローカル復号化回復値を構築し、後続の入力ビデオ画像における画素予測値の予測参照を構築することに用いる。
1枚の画像内の各部分の画像の内容と性質の異なりに適応して、特定的に最も効果的な符号化を行うために、1枚の画像内の各CUの大きさは異なってもよく、あるものは8×8であり、あるものは64×64などである。異なる大きさのCUをシームレスに接合することができるように、1枚の画像は常にまず、大きさが完全に同じでN×N画素を有する「最大の符号化ユニット(Largest Coding Unit、LCUと略称される)」に分けられ、次に、各LCUは更に、複数の大きさが必ずしも同じではないCUに分けられる。例えば、1枚の画像はまず、大きさが完全に同じである64×64画素のLCU(N=64)に分けられる。その中、あるLCUは、3つの32×32画素のCUと4つの16×16画素のCUからなる。他のLCUは、2つの32×32画素のCU、3つの16×16画素のCU、及び20個の8×8画素のCUからなる。1枚の画像を符号化することは、順次に1つ1つのLCUにおける1つ1つのCUを符号化することである。どの時点においても、符号化しているCUは、現在符号化CUと呼ばれる。同様に、1つのフレームの画像を復号化することは、同様な順序に順次に1つ1つのLCUにおける1つ1つのCUを復号化することである。どの時点においても、復号化しているCUは、現在復号化CUと呼ばれる。現在符号化CU又は現在復号化CUは、いずれも現在CUと総称される。
1つのカラー画素は、3つの成分(component)からなる。最もよく使用される2種の画素カラーフォーマット(pixel color format)は、緑色成分、青色成分、赤色成分からなるGBRカラーフォーマット、及び1つの輝度(luma)成分と2つのクロミナンス(chroma)成分からなる、一般的にYUVと呼ばれるカラーフォーマット、例えばYCbCrカラーフォーマットである。このため、1つのCUを符号化する際に、1つのCUを3つの成分平面(G平面、B平面、R平面、又はY平面、U平面、V平面)に分け、3つの成分平面をそれぞれ符号化することができ、1つの画素の3つの成分をバインディングして1つの3タプルを組成し、これらの3タプルからなるCU全体を符号化することもできる。前者の画素及びその成分の配列方式は、画像(及びそのCU)の平面フォーマット(planar format)と呼ばれ、後者の画素及びその成分の配列方式は、画像(及びそのCU)のパックフォーマット(packed format)と呼ばれる。
YUVカラーフォーマットはまた、クロミナンス成分をダウンサンプリングするか否かに基づき、1つの画素が1つのY成分、1つのU成分、1つのV成分からなるYUV4:4:4画素カラーフォーマット、左右に隣接する2つの画素が2つのY成分、1つのU成分、1つのV成分からなるYUV4:2:2画素カラーフォーマット、左右上下に隣接する2×2空間の位置に配列する4つの画素が4つのY成分、1つのU成分、1つのV成分からなるYUV4:2:0画素カラーフォーマットという幾つかの種類のサブフォーマットに更に細分される。1つの成分は、一般的に1つの8〜16ビットの数字で表す。YUV4:2:2画素カラーフォーマットとYUV4:2:0画素カラーフォーマットとは、いずれもYUV4:4:4画素カラーフォーマットに対してクロミナンス成分のダウンサンプリングを行って得られる。1つの画素成分は、1つの画素サンプル(pixel sample)とも呼ばれ、又は簡単に1つのサンプル(sample)と呼ばれる。
本発明の特許出願において、画素と画素サンプルは、画素値と総称され、即ち「画素値」は「画素」を指すだけでなく、「画素サンプル」も指す。
いずれかのCUを符号化又は復号化する際に、いずれも再構成画素値を生成し、また、符号化又は復号化過程に発生した異なる程度の一部再構成画素値と、符号化又は復号化過程を全部に完成した後に発生した完全再構成画素値に分けられる。完全再構成画素値と符号化する前の元の入力画素値とが等しい数値であると、経た符号化と復号化過程は無損失符号化及び復号化と呼ばれる。完全再構成画素値と符号化する前の元の入力画素値とが等しくない数値であると、経た符号化と復号化過程はロッシー符号化及び復号化と呼ばれる。1つ1つのCUを順次に符号化又は復号化する際に、発生した再構成画素値は一般的にいずれも履歴データとして保存し、後続のCU符号化又は復号化時の参照画素値として使用される。再構成画素履歴データを保存する記憶空間は、参照画素値一時保存空間と呼ばれ、参照画素値セットとも呼ばれる。参照画素値一時保存空間は限られ、一部の履歴データしか保存できない。参照画素値一時保存空間における履歴データは、現在CUの再構成画素値を含んでもよい。
リモートデスクトップを典型的な表現形式とする新世代クラウドコンピューティング及び情報処理モード及びプラットフォームの発展及び普及に伴って、複数のコンピュータの間、コンピュータホストとスマートテレビ、スマートフォン、パネルコンピュータ等のその他のデジタル機器との間、及び様々なデジタル機器の間の相互接続は、既に現実となって且つ益々主要動向となる。これは、サーバー側(クラウド)からユーザ側までのリアルタイム画面伝送が現在の差し迫った需要となる。伝送する必要がある画面ビデオデータ量が巨大であるため、コンピュータ画面画像に対して効率的な高品質のデータ圧縮を行わなければならない。
コンピュータ画面画像の特点を十分に利用して、コンピュータ画面画像に対して超高効率の圧縮を行うことは、最新の国際ビデオ圧縮標準HEVCの1つの主な目標でもある。
コンピュータ画面画像の1つの顕著な特点は、同一フレームの画像内で一般的に多くの類似ひいては完全に同じである画素パターン(pixel pattern)があることである。例えば、コンピュータ画面画像によく出現した中国語又は外国語文字は、いずれも少数のいくつかの基本的なストロークからなり、同一フレームの画像内に多くの類似又は同じであるストロークを見つけることができる。コンピュータ画面画像によく見られたメニュー、アイコン等も、多くの類似又は同じであるパターンを有する。従来の画像及びビデオ圧縮技術において使用されるイントラ予測(intra prediction)方式は、隣接する画素値のみを参照し、1フレームの画像における類似性又は同一性を利用して圧縮効率を向上させることができない。このため、HEVC作業委員会は幾つかのマッチング方式を研究及び受け入れる用意があり、コンピュータ画面画像に存在する類似又は同じパターンを十分に発掘して利用し、大幅に圧縮効果を向上させる。この幾つかのマッチング方式は、イントラブロックマッチング(intra block matching)方式(イントラブロックコピーintra block copyとも呼ばれる)、マイクロブロックマッチング方式、精細分割マッチング方式、ストリングマッチング(string matching)方式、マイクロブロックストリングマッチング方式、パレット-インデックスマッチング方式、2次元原体マッチング方式、4分木(4分岐ツリーとも呼ばれる)マッチング方式、任意形状領域コピーマッチング方式等を含む。どのマッチング方式に関わらず、幾つかの最も基本的なマッチング関係パラメータ、例えばマッチング位置とマッチングの大きさを使用して、マッチング関係を表す。マッチング位置は、現在の符号化(又は復号化)における画素値(マッチング現在画素値と総称される)にマッチングするマッチング参照画素値が再構成された画素からなる参照画素値セット内でのどこの位置にあるかを表し、マッチングの大きさは、マッチング現在画素値の数を表す。無論、マッチング現在画素値の数は、マッチング参照画素値の数に等しい。
マッチング位置は、マッチング参照画素値とマッチング現在画素値との間の相対位置である。1フレームの画像では、マッチング参照画素値の位置は、1つの2次元座標で表してもよく、1つの線形アドレスで表してもよく、マッチング現在画素値の位置も、1つの2次元座標で表してもよく、1つの線形アドレスで表してもよい。このため、マッチング位置は、マッチング参照画素値の2次元座標とマッチング現在画素値の2次元座標との差を使用してもよく、マッチング参照画素値の線形アドレスとマッチング現在画素値の線形アドレスとの差を使用してもよく、変位ベクトルとも呼ばれる。2次元座標の場合に、マッチング位置即ち変位ベクトルは、2つのマッチング関係パラメータ即ち2つのベクトル成分、例えば1つの水平成分と1つの垂直成分で表す。線形アドレスの場合に、マッチング位置即ち変位ベクトルは1つのマッチング関係パラメータ即ち線形アドレスの差で表し、一般的にマッチング距離とも呼ばれる。
マッチングの大きさは、同一のマッチング位置を有するマッチング現在画素値が合計でいくらであるかを表す。マッチング現在画素値の数は、マッチング参照画素値の数と等しいため、マッチングの大きさも、同一のマッチング位置を有するマッチング参照画素値が合計でいくらであるかを表す。あるマッチング方式において、マッチングの大きさは、1つのマッチング関係パラメータ、例えばマッチングストリングの長さ、幾つかの予め所定されたマッチング形状とサイズ(例えば4×4画素値のブロック、4×8画素値のブロック、8×8画素値のブロック、16×16画素値のブロック等)の番号等である。あるマッチング方式において、マッチングの大きさは、幾つかのマッチング関係パラメータ、例えばマッチング矩形の高さと幅の2つのマッチング関係パラメータ、マッチング直角台形の高さ及び上底及び下底の幅又はこの三者に等価である3つのマッチング関係パラメータ、I本の水平線区からなる1つのマッチング領域の、このI本の水平線区のそれぞれの長さを表すI個のマッチング関係パラメータである。
1つのマッチング関係パラメータの取る値範囲は、1つの予め定められた、一定の順序で配列する数の有限要素セットであり、最もよく見られるのは小から大まで配列する幾つかの整数のセットである。例えばマッチング位置とする線形アドレスの差(一般的にマッチング距離と呼ばれる)を表すマッチング関係パラメータの取る値範囲は、1〜D=1048576であり、Dは可能なマッチング距離の最大値である。また、例えばマッチングストリング長さを表すマッチング関係パラメータの取る値範囲は、1〜D=12288であり、Lは可能なマッチングストリング長さの最大値である。
2つ又は3つ又はより多くのマッチング関係パラメータは、ある演算によって1つのマッチング関係パラメータに合併されることもできる。合併したマッチング関係パラメータは、より大きい取る値範囲がある。
マッチング関係パラメータに対して、必ずエントロピー符号化を実行してデータ圧縮を行う。エントロピー符号化の入力は、予め定められた取る値範囲を有する整数である。エントロピー符号化は2つのステップに分けられ、1) 入力した整数を2値化し、即ち整数を1ストリングのビット数に変換し、各ビット数は0又は1の2つの値の中の1つを取ることができ、2) 各ビット数に対してコンテキストに基づく自適応型2値算術符号化を実行する。
関連技術において使用される2値化方法はいずれも1つの特性があり、即ち、小さい整数を取る場合、2値化の後に短い1ストリングのビット数に変換し、このためエントロピー符号化後に少ないデータを生成して圧縮ビットストリームに書き込み、大きい整数を取る場合、2値化の後に長い1ストリングのビット数に変換し、このためエントロピー符号化後に多くのデータを生成して圧縮ビットストリームに書き込む。
2値化方法のこの特性のため、1つのマッチング関係パラメータは、取る値範囲内で取ったある整数値の大きさと該整数値が符号化過程の全体に出現した頻度の間に、整数値が大きくなるほどその頻度が低くなる全体傾向の特性を有すると、エントロピー符号化は比較的よいデータ圧縮効果を有する。逆に、整数値が大きくなるほどその頻度が大きく、小さくて持続的に繰り返し発振する特性を有すると、エントロピー符号化のデータ圧縮効果は負の影響を受ける。
多くの場合に、マッチング関係パラメータの取る値範囲内のいずれかの整数が符号化過程全体に出現した頻度は、いつもその値の増大に伴って低下することがなく、ある特定の整数Aが出現した頻度p(A)は、もう1つのはるかに小さい整数Bの出現した頻度p(B)よりはるかに高い可能性があり、即ちAはBよりはるかに大きいが、p(A)はp(B)よりはるかに高く、頻度が整数値の増大に伴って大きく、小さくて持続的に繰り返し発振する特性を呈する。
関連技術において、マッチング関係パラメータに対して直接にエントロピー符号化を実行する場合に、マッチング関係パラメータのある特定の整数が出現した頻度が高いが、その値も大きく、このためエントロピー符号化を行った後に、多くの圧縮ビットストリームデータを生成するという状況が発生する場合は多い。
関連技術において、マッチング関係パラメータに対して直接にエントロピー符号化を実行することによる問題に対して、まだ効果的な解決的手段は提案されていない。
本発明は、少なくとも関連技術における、マッチング関係パラメータに対して直接、エントロピー符号化を実行することによる問題を解決するようにした、画像符号化、復号化方法及び装置を提供する。
本発明の一態様によれば、画像符号化装置を提供し、
入力ビデオ画像の画素値に対して画素前処理及びマッチング符号化を実行し、1つ或いは複数のマッチング関係パラメータと前記1つ或いは複数のマッチング関係パラメータ以外の他のマッチング符号化結果を生成して出力するように設定されるモジュール1)である、画素前処理及びマッチング符号化モジュールと、
前記マッチング関係パラメータの取る値範囲を一対一にマッピングし、前記マッピングの入力は、前記モジュール1)が出力した前記マッチング関係パラメータであり、前記マッピングの出力は、マッピング後のマッチング関係パラメータであるように設定されるモジュール2)である、マッピングモジュールと、
前記入力ビデオ画像、前記マッチング関係パラメータ及び変数に対して符号化及び再構成演算を実行するように設定されるモジュール3)である、符号化及び再構成モジュールと、
再構成された参照画素値セットの画素値を一時に記憶するように設定されるモジュール4)である、一時記憶モジュールと、
前記マッピング後のマッチング関係パラメータとその他の符号化結果を含む、全ての圧縮ビットストリームに出力する必要がある符号化結果に対してエントロピー符号化演算を実行し、エントロピー符号化の結果を出力し、前記エントロピー符号化の結果にマッチング関係パラメータ圧縮データ及び前記その他の符号化結果の圧縮ビットストリームが含まれるように設定されるモジュール5)である、エントロピー符号化モジュールと、を備える。
選択的に、前記取る値範囲はK個のサブ取る値範囲に分けられ、前記マッピングも対応的にK個のサブ取る値範囲内のマッピングに分けられる。
選択的に、前記取る値範囲はL組のサブ取る値範囲に分けられ、各組のサブ取る値範囲内の各サブ取る値範囲はいずれも互いに等しい有限要素があり、前記マッピングも対応的にL組のマッピングに分けられ、各組のマッピングは各組のサブ取る値範囲内の1つの完全なサブ取る値範囲を、同一組内の1つの完全なサブ取る値範囲にマッピングし、且つサブ取る値範囲内の全ての要素の順序を変えないように保持し、Lは自然数である。
選択的に、前記取る値範囲或いは前記サブ取る値範囲内の1つの前記マッピングは、複数の連続的に実行する一部のマッピングにより合成される。
選択的に、前記取る値範囲或いは前記サブ取る値範囲内の1つの前記マッピング或いは前記一部のマッピングのマッピング関係は、全部が1つ或いは1組の計算式で示す方式、全部が1つのリストで示す方式、一部が1つ或いは1組の計算式で示し、一部が1つのリストで示す方式、の中の1つによって示される。
選択的に、前記取る値範囲或いは前記サブ取る値範囲内の1つの前記マッピング或いは前記一部のマッピングのマッピング関係は、現在の符号化の1つの状態或いはパラメータの変化に伴って変化する。
選択的に、前記取る値範囲或いは前記サブ取る値範囲内の1つの前記マッピング或いは前記一部のマッピングのマッピング関係は、現在の符号化ブロックの幅の変化に伴って変化する。
選択的に、前記マッチング関係パラメータの一つはマッチング距離であり、前記現在の符号化ブロックの幅Wは、64、32、16、8の4つの値があり、前記マッピングも対応的に4種のマッピング関係がある。
選択的に、前記装置は、マッチング関係パラメータの取る値範囲内の各数値の特性をリアルタイムに統計し、前記マッチング関係パラメータの各数値のリアルタイム統計結果に基づき、前記マッピング或いは前記一部のマッピングのマッピング関係を動的に調整するように設定されるリアルタイム統計モジュールを更に備える。
本発明の他の態様によれば、画像復号化装置を更に提供し、
入力した、マッチング関係パラメータを含む圧縮データ及び前記マッチング関係パラメータを含む圧縮データ以外の他の符号化結果の圧縮ビットストリームに対してエントロピー復号化を実行して、エントロピー復号化して得られた様々なデータを解析するように設定されるモジュール1)である、エントロピー復号化モジュールと、
マッピング後のマッチング関係パラメータの取る値範囲を一対一に逆マッピングし、前記逆マッピングはマッピング前のマッチング関係パラメータを回復して出力するように設定されるモジュール2)である、逆マッピングモジュールと、
前記マッチング関係パラメータに基づきマッチング復号化演算を実行するように設定されるモジュール3)である、マッチング復号化モジュールと、
現在の復号化におけるマッチング領域或いは現在の復号化における復号化ブロックの様々なパラメータ及び変数に対して、復号化及び再構成演算を実行するように設定されるモジュール4)である、復号化及び再構成モジュールと、
再構成された参照画素値セットの画素値を一時に記憶するように設定されるモジュール5)である、一時記憶モジュールと、を備える。
選択的に、前記マッチング領域は、マッチングストリング或いはマッチングブロックである。
選択的に、前記取る値範囲はK個のサブ取る値範囲に分けられ、前記逆マッピングも対応的にK個のサブ取る値範囲内の逆マッピングに分けられる。
選択的に、前記取る値範囲はL組のサブ取る値範囲に分けられ、各組のサブ取る値範囲内の各サブ取る値範囲はいずれも互いに等しい有限要素があり、前記逆マッピングも対応的にL組の逆マッピングに分けられ、各組の逆マッピングは各組のサブ取る値範囲内の1つの完全なサブ取る値範囲を、同一組内の1つの完全なサブ取る値範囲に逆マッピングし、且つサブ取る値範囲内の全ての要素の順序を変えないように保持し、Lは自然数である。
選択的に、前記取る値範囲或いは前記サブ取る値範囲内の1つの前記マッピング或いは1つの前記逆マッピングは、複数の連続的に実行する一部のマッピング或いは一部の逆マッピングにより合成される。
選択的に、前記取る値範囲或いは前記サブ取る値範囲内の1つの前記逆マッピング或いは前記一部の逆マッピングの逆マッピング関係は、全部が1つ或いは1組の計算式で示す方式、全部が1つのリストで示す方式、一部が1つ或いは1組の計算式で示し、一部が1つのリストで示す方式、の中の1つによって示される。
選択的に、前記取る値範囲或いは前記サブ取る値範囲内の1つの前記逆マッピング或いは前記一部の逆マッピングの逆マッピング関係は、現在の復号化の1つの状態或いはパラメータの変化に伴って変化する。
選択的に、前記取る値範囲或いは前記サブ取る値範囲内の1つの前記逆マッピング或いは前記一部の逆マッピングの逆マッピング関係は、復号化ブロックの幅の変化に伴って変化する。
選択的に、前記マッチング関係パラメータの一つはマッチング距離であり、前記復号化ブロックの幅Wは、64、32、16、8の4つの値があり、前記逆マッピングも対応的に4種の逆マッピング関係がある。
選択的に、前記装置は、マッチング関係パラメータの取る値範囲内の各数値の特性をリアルタイムに統計し、前記マッチング関係パラメータの各数値のリアルタイム統計結果に基づき、前記逆マッピング或いは前記一部の逆マッピングの逆マッピング関係を動的に調整するように設定されるリアルタイム統計モジュールを更に備える。
本発明の一態様によれば、画像符号化方法を提供し、前記方法は、入力ビデオ画像の画素値に対して画素前処理及びマッチング符号化を実行し、1つ或いは複数のマッチング関係パラメータを生成して出力することと、前記マッチング関係パラメータの取る値範囲を一対一にマッピングして、マッピング後のマッチング関係パラメータを出力することと、前記入力ビデオ画像、前記マッチング関係パラメータ及び変数に対して、符号化及び再構成演算を実行することと、再構成された参照画素値セットの画素値を一時に記憶することと、前記マッピング後のマッチング関係パラメータに対してエントロピー符号化を実行し、エントロピー符号化後の結果を出力することと、を含む。
本発明の他の態様によれば、画像復号化方法を更に提供し、前記方法は、入力した、マッチング関係パラメータを含む圧縮データ及び前記マッチング関係パラメータを含む圧縮データ以外の他のパラメータの圧縮ビットストリームに対してエントロピー復号化を実行することと、マッピング後のマッチング関係パラメータの取る値範囲を一対一に逆マッピングし、マッピング前のマッチング関係パラメータを回復して出力することと、前記マッチング関係パラメータに基づき、マッチング復号化を実行することと、現在の復号化におけるマッチング領域、或いは現在の復号化における復号化ブロックの様々なパラメータ及び変数に対して、復号化及び再構成演算を実行することと、再構成された参照画素値セットの画素値を一時に記憶することと、を含む。
本発明の一態様によれば、画像符号化方法を提供し、入力ビデオ画像の画素をマッチング符号化し、1つ或いは複数のマッチング関係パラメータを取得し、前記マッチング関係パラメータは、前記入力ビデオ画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであることと、前記マッチング関係パラメータをマッピングし、マッチング関係パラメータのマッピング値を取得することと、前記マッチング関係パラメータのマッピング値に対してエントロピー符号化を行うことと、を含む。
選択的に、前記マッチング関係パラメータをマッピングすることは、既存のマッチング関係パラメータに基づき、マッチングしようとする関係パラメータを変換し、変換後に得られた値を前記マッチングしようとする関係パラメータのマッピング値とすること、及び/又は、同じタイプのマッチング関係パラメータを、指定された規則に従って集め及び/又は再配列してマッチング関係パラメータグループを構成し、前記マッチング関係パラメータグループをマッピング処理し、マッピング処理後に得られたマッチング関係パラメータグループを前記マッチング関係パラメータのマッピング値とすることを含む。
選択的に、前記指定された規則は、予め設定された規則、既存のマッチング関係パラメータの取る値に基づき設定した、複数のマッチングしようとする関係パラメータを集め及び/又は再配列する操作ステップの少なくとも1つを含む。
選択的に、前記マッチング関係パラメータグループをマッピング処理することは、前記マッチング関係パラメータグループにおけるマッチング関係パラメータの取る値をマッピング処理の出力とすること、及び/又は、前記マッチング関係パラメータグループにおけるマッチング関係パラメータの取る値を変換した後に得られた値をマッピング処理の出力とすることを含む。
本発明の他の態様によれば、画像復号化方法を提供し、受信したビットストリームに対してエントロピー復号化を行い、マッチング関係パラメータを指示するためのフィールドの取る値を取得し、前記マッチング関係パラメータは復号化しようとするビデオ画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであることと、前記フィールドの取る値をマッピングし、マッピング後のマッチング関係パラメータを取得することと、前記マッピング後のマッチング関係パラメータに基づき、前記復号化しようとするビデオ画像における画素の予測値及び/又は回復値を構築することとを含む。
選択的に、前記フィールドの取る値をマッピングし、マッピング後のマッチング関係パラメータを取得することは、得られた前記マッチング関係パラメータに基づき、処理しようとする前記フィールドの取る値を変換し、変換後の値を前記マッピング後のマッチング関係パラメータとすること、及び/又は、同じタイプの処理しようとするフィールドの取る値を、指定された規則に従って集め及び/又は再配列して配列を構成し、前記配列を処理した後に前記マッピング後のマッチング関係パラメータとすることを含む。
選択的に、前記指定された規則は、予め設定された規則、得られた前記フィールドの取る値に基づき設定した、前記処理しようとする前記フィールドの取る値を集め及び/又は再配列する操作ステップの少なくとも1つを含む。
選択的に、前記配列を処理することは、前記配列における処理しようとするフィールドの取る値を処理後の出力値とすること、及び/又は、前記配列における前記処理しようとするフィールドの取る値を変換した後に得られた値を処理後の出力値とすることを含む。
本発明の一態様によれば、画像符号化装置を提供し、前記装置は、
入力ビデオ画像の画素をマッチング符号化し、1つ或いは複数のマッチング関係パラメータを取得し、前記マッチング関係パラメータは、前記入力ビデオ画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであるように設定されるマッチング符号化モジュールと、
前記マッチング関係パラメータをマッピングし、マッチング関係パラメータのマッピング値を取得するように設定されるマッピングモジュールと、
前記マッチング関係パラメータのマッピング値に対して、エントロピー符号化を行うように設定されるエントロピー符号化モジュールと、を備える。
本発明の他の態様によれば、画像復号化装置を更に提供し、前記装置は、
受信したビットストリームに対してエントロピー復号化を行い、マッチング関係パラメータを指示するためのフィールドの取る値を取得し、前記マッチング関係パラメータは、復号化しようとするビデオ画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであるように設定されるエントロピー復号化モジュールと、
前記フィールドの取る値をマッピングし、マッピング後のマッチング関係パラメータを取得するように設定されるマッピングモジュールと、
前記マッピング後のマッチング関係パラメータに基づき、前記復号化しようとするビデオ画像における画素の予測値及び/又は回復値を構築するように設定される構築モジュールと、を備える。
本発明によって、入力ビデオ画像の画素をマッチング符号化し、1つ或いは複数のマッチング関係パラメータを取得し、マッチング関係パラメータは、該画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであること、マッチング関係パラメータをマッピングし、マッチング関係パラメータのマッピング値を取得すること、マッチング関係パラメータのマッピング値に対してエントロピー符号化を行うこと、を採用する。関連技術における、マッチング関係パラメータに対して直接、エントロピー符号化を実行することによる問題を解決し、更にエントロピー符号化のよいデータ圧縮効果を達成する。
ここで説明する図面は本発明のさらなる理解を提供して、本願の一部となり、本発明の例示的な実施例及びその説明は本発明を解釈するためのものであり、本発明を不適切に制限することがない。図面では、
図1は、本発明の実施例による画像符号化装置の構造ブロック図である。 図2は、本発明の実施例による画像符号化装置の構造ブロック図(1)である。 図3は、本発明の実施例による画像符号化方法のフローチャートである。 図4は、本発明の実施例による画像復号化装置の構造ブロック図である。 図5は、本発明の実施例による画像復号化装置の構造ブロック図(1)である。 図6は、本発明の実施例による画像復号化方法のフローチャートである。 図7は、本発明の実施例による画像符号化方法のフローチャート(1)である。 図8は、本発明の実施例による画像符号化装置の構造ブロック図(2)である。 図9は、本発明の実施例による画像復号化方法のフローチャート(1)である。 図10は、本発明の実施例による画像復号化装置の構造ブロック図(2)である。 図11は、本発明の実施例によるマッチング関係パラメータの取る値範囲の双方向単一のマッピングの模式図である。 図12は、本発明の実施例による符号化装置のモジュール構成模式図である。 図13は、本発明の実施例による復号化装置のモジュール構成模式図である。
以下、図面を参照して実施例と結び付けながら、詳細に本発明について説明する。なお、矛盾が生じない場合には、本願における実施例及び実施例における特徴を互いに組み合わせることができる。
図1は、本発明の実施例による画像符号化装置の構造ブロック図であり、図1に示すように、該画像符号化装置は、
入力ビデオ画像の画素値に対して画素前処理及びマッチング符号化を実行し、1つ或いは複数のマッチング関係パラメータと該1つ或いは複数のマッチング関係パラメータ以外の他のマッチング符号化結果を生成して出力するように設定されるモジュール1)である、画素前処理及びマッチング符号化モジュール22と、
マッチング関係パラメータの取る値範囲を一対一にマッピングし、該マッピングの入力は、該モジュール1)が出力したマッチング関係パラメータであり、該マッピングの出力は、マッピング後のマッチング関係パラメータであるように設定されるモジュール2)である、マッピングモジュール24と、
入力ビデオ画像、該マッチング関係パラメータ及び変数に対して符号化及び再構成演算を実行するように設定されるモジュール3)である、符号化及び再構成モジュール26と、
再構成された参照画素値セットの画素値を一時に記憶するように設定されるモジュール4)である、一時記憶モジュール28と、
マッピング後のマッチング関係パラメータとその他の符号化結果を含む、全ての圧縮ビットストリームに出力する必要がある符号化結果に対してエントロピー符号化演算を実行し、エントロピー符号化の結果を出力し、エントロピー符号化の結果にマッチング関係パラメータ圧縮データ及び該その他の符号化結果の圧縮ビットストリームが含まれるように設定されるモジュール5)である、エントロピー符号化モジュール30と、を備える。
上記の画像符号化装置によって、マッチング関係パラメータをマッピングした後に、マッピング後のマッチング関係パラメータを符号化し、関連技術においてマッチング関係パラメータを直接、符号化することによりマッチング関係パラメータのある特定の整数の出現した頻度が非常に高いが、その値も大きくなることで、それに対してエントロピー符号化を実行した後に多くの圧縮ビットストリームデータを生成することに比べて、上記の画像符号化装置は、関連技術における、マッチング関係パラメータに対して直接、エントロピー符号化を実行することによる問題を解決し、更にエントロピー符号化のよいデータ圧縮効果を達成する。
一つの選択的な実施例において、上記取る値範囲はK個のサブ取る値範囲に分けられ、マッピングも対応的にK個のサブ取る値範囲内のマッピングに分けられる。
他の選択的な実施例において、取る値範囲はL組のサブ取る値範囲に分けられ、各組のサブ取る値範囲内の各サブ取る値範囲はいずれも互いに等しい有限要素があり、該マッピングも対応的にL組のマッピングに分けられ、各組のマッピングは各組のサブ取る値範囲内の1つの完全なサブ取る値範囲を、同一組内の1つの完全なサブ取る値範囲にマッピングして、サブ取る値範囲内の全ての要素の順序を変えないように保持し、Lは自然数である。
一つの選択的な実施例において、上記取る値範囲或いは上記サブ取る値範囲内の1つのマッピングは複数の連続的に実行する一部のマッピングにより合成される。
上記取る値範囲或いは上記サブ取る値範囲内の1つの該マッピング或いは該一部のマッピングのマッピング関係は、多種の方式によって示すことができ、以下、これを例を挙げて説明する。一つの選択的な実施例において、全部が1つ或いは1組の計算式で示す方式、全部が1つのリストで示す方式、一部が1つ或いは1組の計算式で示し、一部が1つのリストで示す方式、の中の1つによって示される。
一つの選択的な実施例において、上記取る値範囲或いはサブ取る値範囲内の1つのマッピング或いは一部のマッピングのマッピング関係は、現在の符号化の1つの状態或いはパラメータの変化に伴って変化する。
他の選択的な実施例において、取る値範囲或いはサブ取る値範囲内の1つの該マッピング或いは該一部のマッピングのマッピング関係は、現在の符号化ブロックの幅の変化に伴って変化する。
マッチング関係パラメータは多種であり、マッチング関係パラメータがマッチング距離である際に、一つの選択的な実施例において、現在の符号化ブロックの幅Wは、64、32、16、8の4つの値があり、マッピングも対応的に4種のマッピング関係がある。
図2は、本発明の実施例による画像符号化装置の構造ブロック図(1)であり、図2に示すように、該装置は、マッチング関係パラメータの取る値範囲内の各数値の特性をリアルタイムに統計し、該マッチング関係パラメータの各数値のリアルタイム統計結果に基づき、該マッピング或いは該一部のマッピングのマッピング関係を動的に調整するように設定されるリアルタイム統計モジュール32を更に備える。
他の実施例において、画像符号化方法を提供し、図3は、本発明の実施例による画像符号化方法のフローチャートであり、図3に示すように、該フローは、以下のステップを含む。
ステップS302: 入力ビデオ画像の画素値に対して画素前処理及びマッチング符号化を実行し、1つ或いは複数のマッチング関係パラメータを生成して出力するステップ。
ステップS304: マッチング関係パラメータの取る値範囲を一対一にマッピングして、マッピング後のマッチング関係パラメータを出力するステップ。
ステップS306: 入力ビデオ画像、マッチング関係パラメータ及び変数に対して符号化及び再構成演算を実行するステップ。
ステップS308: 再構成された参照画素値セットの画素値を一時に記憶するステップ。
ステップS310: マッピング後のマッチング関係パラメータに対してエントロピー符号化を実行し、エントロピー符号化後の結果を出力するステップ。
上記ステップによって、マッチング関係パラメータをマッピングした後に、マッピング後のマッチング関係パラメータを符号化し、関連技術においてマッチング関係パラメータを直接、符号化することによりマッチング関係パラメータのある特定の整数の出現した頻度が非常に高いが、その値も大きくなることで、それに対してエントロピー符号化を実行した後に多くの圧縮ビットストリームデータを生成することに比べて、上記の画像符号化装置は、関連技術における、マッチング関係パラメータに対して直接、エントロピー符号化を実行することによる問題を解決し、更にエントロピー符号化のよいデータ圧縮効果を達成する。
図4は、本発明の実施例による画像復号化装置の構造ブロック図であり、図4に示すように、該装置は、
入力した、マッチング関係パラメータを含む圧縮データ及び該マッチング関係パラメータを含む圧縮データ以外の他の符号化結果の圧縮ビットストリームに対してエントロピー復号化を実行して、エントロピー復号化して得られた様々なデータを解析するように設定されるモジュール1)である、エントロピー復号化モジュール42と、
マッピング後のマッチング関係パラメータの取る値範囲を一対一に逆マッピングし、該逆マッピングはマッピング前のマッチング関係パラメータを回復して出力するように設定されるモジュール2)である、逆マッピングモジュール44と、
該マッチング関係パラメータに基づきマッチング復号化演算を実行するように設定されるモジュール3)である、マッチング復号化モジュール46と、
現在の復号化におけるマッチング領域或いは現在の復号化における復号化ブロックの様々なパラメータ及び変数に対して、復号化及び再構成演算を実行するように設定されるモジュール4)である、復号化及び再構成モジュール48と、
再構成された参照画素値セットの画素値を一時に記憶するように設定されるモジュール5)である、一時記憶モジュール50と、を備える。
上記の画像復号化装置によって、エントロピー符号化過程において得られたマッピング後のマッチング関係パラメータの取る値範囲を逆マッピングし、マッピング前のマッチング関係パラメータを出力することにより、関連技術における、マッチング関係パラメータに対して直接、エントロピー符号化を実行することによる問題を解決し、更にエントロピー符号化のよいデータ圧縮効果を達成する。
一つの選択的な実施例において、マッチング領域は、マッチングストリング或いはマッチングブロックである。
一つの選択的な実施例において、取る値範囲はK個のサブ取る値範囲に分けられ、逆マッピングも対応的にK個のサブ取る値範囲内の逆マッピングに分けられる。
他の選択的な実施例において、取る値範囲はL組のサブ取る値範囲に分けられ、各組のサブ取る値範囲内の各サブ取る値範囲はいずれも互いに等しい有限要素があり、該逆マッピングも対応的にL組の逆マッピングに分けられ、各組の逆マッピングは各組のサブ取る値範囲内の1つの完全なサブ取る値範囲を、同一組内の1つの完全なサブ取る値範囲に逆マッピングして、サブ取る値範囲内の全ての要素の順序を変えないように保持し、Lは自然数である。
他の選択的な実施例において、取る値範囲或いはサブ取る値範囲内の1つの該マッピング或いは1つの該逆マッピングは、複数の連続的に実行する一部のマッピング或いは一部の逆マッピングにより合成される。
取る値範囲或いはサブ取る値範囲内の1つの該逆マッピング或いは該一部の逆マッピングの逆マッピング関係は、多種の表現方式があり、一つの選択的な実施例において、全部が1つ或いは1組の計算式で示す方式、全部が1つのリストで示す方式、一部が1つ或いは1組の計算式で示し、一部が1つのリストで示す方式、の中の1つによって示される。
一つの選択的な実施例において、取る値範囲或いはサブ取る値範囲内の1つの逆マッピング或いは該一部の逆マッピングの逆マッピング関係は、現在の復号化の1つの状態或いはパラメータの変化に伴って変化する。
他の選択的な実施例において、取る値範囲或いはサブ取る値範囲内の1つの逆マッピング或いは一部の逆マッピングの逆マッピング関係は、復号化ブロックの幅の変化に伴って変化する。
マッチング関係パラメータは多種の情報であってもよく、マッチング関係パラメータがマッチング距離である際に、一つの選択的な実施例において、復号化ブロックの幅Wは、64、32、16、8の4つの値があり、逆マッピングも対応的に4種の逆マッピング関係がある。
図5は、本発明の実施例による画像復号化装置の構造ブロック図(1)であり、図5に示すように、該装置は、マッチング関係パラメータの取る値範囲内の各数値の特性をリアルタイムに統計し、該マッチング関係パラメータの各数値のリアルタイム統計結果に基づき、該逆マッピング或いは該一部の逆マッピングの逆マッピング関係を動的に調整するように設定されるリアルタイム統計モジュール52を更に備える。
他の実施例において、画像復号化方法を提供し、図6は、本発明の実施例による画像復号化方法のフローチャートであり、図6に示すように、該フローは、以下のステップを含む。
ステップS602: 入力した、マッチング関係パラメータを含む圧縮データ及び該マッチング関係パラメータを含む圧縮データ以外の他のパラメータの圧縮ビットストリームに対してエントロピー復号化を実行するステップ。
ステップS604: マッピング後のマッチング関係パラメータの取る値範囲を一対一に逆マッピングし、マッピング前のマッチング関係パラメータを回復して出力するステップ。
ステップS606: マッチング関係パラメータに基づきマッチング復号化を実行するステップ。
ステップS608: 現在の復号化におけるマッチング領域或いは現在の復号化における復号化ブロックの様々なパラメータ及び変数に対して、復号化及び再構成演算を実行するステップ。
ステップS610: 再構成された参照画素値セットの画素値を一時に記憶するステップ。
上記ステップによって、エントロピー符号化過程において得られたマッピング後のマッチング関係パラメータの取る値範囲を逆マッピングし、マッピング前のマッチング関係パラメータを出力することにより、関連技術における、マッチング関係パラメータに対して直接、エントロピー符号化を実行することによる問題を解決し、更にエントロピー符号化のよいデータ圧縮効果を達成する。
他の実施例において、画像符号化方法を提供し、図7は、本発明の実施例による画像符号化方法のフローチャート(1)であり、図7に示すように、該フローは、以下のステップを含む。
ステップS702: 入力ビデオ画像の画素をマッチング符号化し、1つ或いは複数のマッチング関係パラメータを取得し、マッチング関係パラメータは入力ビデオ画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであるステップ。
ステップS704: マッチング関係パラメータをマッピングし、マッチング関係パラメータのマッピング値を取得するステップ。
ステップS706: マッチング関係パラメータのマッピング値に対してエントロピー符号化を実行するステップ。
上記ステップによって、マッチング関係パラメータをマッピングした後に、マッピング後のマッチング関係パラメータを符号化し、関連技術においてマッチング関係パラメータを直接、符号化することによりマッチング関係パラメータのある特定の整数の出現した頻度が非常に高いが、その値も大きくなることで、それに対してエントロピー符号化を実行した後に多くの圧縮ビットストリームデータを生成することに比べて、上記ステップは関連技術における、マッチング関係パラメータに対して直接、エントロピー符号化を実行することによる問題を解決し、更にエントロピー符号化のよいデータ圧縮効果を達成する。
一つの選択的な実施例において、マッチング関係パラメータのマッピング値の増大に伴って、マッチング関係パラメータのマッピング値の頻度が低くなり、該頻度はマッピング値の取る値が大きいほど、該値の実際に出現した確率が小さく、即ち出現した「回数」が少なくなると考えられる。
上記ステップS704において該マッチング関係パラメータをマッピングすることに関し、一つの選択的な実施例において、既存のマッチング関係パラメータに基づき、マッチングしようとする関係パラメータを変換し、変換後に得られた値をマッチングしようとする関係パラメータのマッピング値とし、ここでのマッピング操作は直接的な「コピー操作」と理解されることができ、即ち入力データに対していずれの処理を行わない。及び/又は、同じタイプのマッチング関係パラメータを、指定された規則に従って集め及び/又は再配列してマッチング関係パラメータグループを構成し、マッチング関係パラメータグループをマッピング処理し、マッピング処理された後に得られたマッチング関係パラメータグループを該マッチング関係パラメータのマッピング値とする。それにより、マッチング関係パラメータに対するマッピングを完成する。
上記の指定された規則は多種を含んでもよく、以下、これを例を挙げて説明する。一つの選択的な実施例において、指定された規則は予め設定された規則であってもよく、既存のマッチング関係パラメータの取る値に基づき設定した、複数のマッチングしようとする関係パラメータを集め及び/又は再配列する操作ステップであってもよい。
上記のマッチング関係パラメータグループをマッピング処理する方法は複数種を含んでもよく、以下、これを例を挙げて説明する。一つの選択的な実施例において、処理方法はマッチング関係パラメータグループにおけるマッチング関係パラメータの取る値をマッピング処理の出力とすることであってもよく、マッチング関係パラメータグループにおけるマッチング関係パラメータの取る値を変換し、変換値をマッピング処理の出力とすることであってもよい。
本実施例においては、画像符号化装置を更に提供し、該装置は、上記実施例及び好ましい実施形態を実現することに用いられ、既に説明したものについては繰り返して説明しない。以下で使用されるように、「モジュール」という用語は、プリセットの機能のソフトウェア及び/又はハードウェアの組み合わせを実現することができるものである。以下の実施例が説明する装置は、好ましくはソフトウェアによって実現するが、ハードウェア、或いはソフトウェア及びハードウェアの組み合わせでの実現も可能で、構想されることができる。
図8は、本発明の実施例による画像符号化装置の構造ブロック図(2)であり、図8に示すように、該装置は、
入力ビデオ画像の画素をマッチング符号化し、1つ或いは複数のマッチング関係パラメータを取得し、該マッチング関係パラメータは入力ビデオ画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであるように設定されるマッチング符号化モジュール82と、
該マッチング関係パラメータをマッピングし、マッチング関係パラメータのマッピング値を取得するように設定されるマッピングモジュール84と、
該マッチング関係パラメータのマッピング値に対してエントロピー符号化を実行するように設定されるエントロピー符号化モジュール86とを備える。
他の実施例において、画像復号化方法を提供し、図9は、本発明の実施例による画像復号化方法のフローチャート(1)であり、図9に示すように、該フローは、以下のステップを含む。
ステップS902: 受信したビットストリームに対してエントロピー復号化を行い、マッチング関係パラメータを指示するためのフィールドの取る値を取得し、マッチング関係パラメータは、復号化しようとするビデオ画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであるステップ。
ステップS904: 該フィールドの取る値をマッピングし、マッピング後のマッチング関係パラメータを取得するステップ。
ステップS906: 該マッピング後のマッチング関係パラメータに基づき、復号化しようとするビデオ画像における画素の予測値及び/又は回復値を構築するステップ。
上記のステップによって、エントロピー符号化過程において得られたマッピング後のマッチング関係パラメータの取る値範囲を逆マッピングし、マッピング前のマッチング関係パラメータを出力することにより、関連技術においてマッチング関係パラメータに対して直接、エントロピー符号化を実行することによる問題を解決し、更にエントロピー符号化のよいデータ圧縮効果を達成する。
一つの選択的な実施例において、マッチング関係パラメータのマッピング値の増大に伴って、マッチング関係パラメータのマッピング値の頻度が低くなり、該頻度はマッピング値の取る値が大きいほど、該値の実際に出現した確率が小さく、即ち出現した「回数」が少なくなると考えられる。
上記ステップS904は、該フィールドの取る値をマッピングし、マッピング後のマッチング関係パラメータを取得することに関し、一つの選択的な実施例において、得られた該マッチング関係パラメータに基づき、処理しようとする該フィールドの取る値を変換し、変換後の値を該マッピング後のマッチング関係パラメータとする。他の選択的な実施例において、同じタイプの処理しようとするフィールドを、指定された規則に従って集め及び/又は再配列して配列を構成し、該配列を処理した後に該マッピング後のマッチング関係パラメータとする。
選択的に、該指定された規則は、予め設定された規則、得られた該フィールドの取る値に基づき設定した、該処理しようとする該フィールドの取る値を集め及び/又は再配列する操作ステップの少なくとも1つを含む。
選択的に、上記配列を処理し、一つの選択的な実施例において、使用する処理方法は配列における処理しようとするフィールドの取る値を処理後の出力値とすることであってもよく、配列における処理しようとするフィールドの取る値を変換し、変換値を処理後の出力値とすることであってもよい。
本実施例においては、画像復号化装置を更に提供し、該装置は上記実施例及び好ましい実施形態を実現することに用いられ、既に説明したものについては繰り返して説明しない。以下で使用されるように、「モジュール」という用語は、プリセットの機能のソフトウェア及び/又はハードウェアの組み合わせを実現することができるものである。以下の実施例が説明する装置は、好ましくはソフトウェアによって実現するが、ハードウェア、或いはソフトウェア及びハードウェアの組み合わせでの実現も可能で、構想されることができる。
図10は、本発明の実施例による画像復号化装置の構造ブロック図(2)であり、図10に示すように、該装置は、
受信したビットストリームに対してエントロピー復号化を行い、マッチング関係パラメータを指示するためのフィールドの取る値を取得し、マッチング関係パラメータは、復号化しようとする画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであるように設定されるエントロピー復号化モジュール102と、
フィールドの取る値をマッピングし、マッピング後のマッチング関係パラメータを取得するように設定されるマッピングモジュール104と、
マッピング後のマッチング関係パラメータに基づき、復号化しようとする画像における画素の予測値及び/又は回復値を構築するように設定される構築モジュール106と、を備える。
関連技術に存在する上記問題に対して、以下、例示した選択的な実施例と結び付けながら説明し、以下の選択的な実施例において、上記選択的な実施例及びその選択的な実施形態を結合する。
この選択的な実施例の主な技術的特徴は、1つのマッチング関係パラメータに対してエントロピー符号化を実行する前に、このマッチング関係パラメータの取る値範囲に対して1つの双方向単一のマッピング(双射と略称される)を行い、取る値範囲内の頻度が高い値を小さい値にマッピングし、取る値範囲内の頻度が低い値を大きい値にマッピングすることである。双射は、1対1の全射とも呼ばれる。双射に逆マッピングが存在して、逆マッピングも、1対1の全射である。
図11は、本発明の実施例によるマッチング関係パラメータの取る値範囲の双方向単一のマッピングの模式図であり、図11に示すように、あるマッチング関係パラメータの取る値範囲は1〜12288の間の整数区間であり、[1、12288]と表される。このマッチング関係パラメータの頻度の特性は、4の倍数即ち4、8、12、…、6144、…、12288の頻度が非4の倍数の頻度よりはるかに高いことである。4の倍数を1〜3072の間の整数にマッピングして、非4の倍数を3073〜12288の間の整数にマッピングし、このように、マッピング後のマッチング関係パラメータは数値の増大に伴ってその頻度が低くなる全体傾向の特性を有し、それにより後続のエントロピー符号化の圧縮効率を向上させる。図11におけるマッピングの式は下記の通りであり、
4kをkにマッピングし、その中、k=1、2、3、4、…、3072。
4k+1を3072+3k+1にマッピングし、その中、k=0、1、2、3、…、3071。
4k+2を3072+3k+2にマッピングし、その中、k=0、1、2、3、…、3071。
4k+3を3072+3k+3にマッピングし、その中、k=0、1、2、3、…、3071。
このマッピングは、取る値範囲の整数区間[1、12288]から整数区間[1、12288]自体までの1つの双射であり、その逆マッピングの式は下記通りである。
kを4kにマッピングし、その中、k=1、2、3、4、…、3072。
3072+3k+1を4k+1にマッピングし、その中、k=0、1、2、3、…、3071。
3072+3k+2を4k+2にマッピングし、その中、k=0、1、2、3、…、3071。
3072+3k+3を4k+3にマッピングし、その中、k=0、1、2、3、…、3071。
逆マッピングも、取る値範囲の整数区間[1、12288]から整数区間[1、12288]自体までの1つの双射である。
本発明の選択的な実施例の符号化装置において、最も基本的な特有な技術的特徴は、まずマッチング符号化して生成したマッチング関係パラメータに対して、取る値範囲のマッピングを行い、マッピング後のマッチング関係パラメータが数値の増大に伴ってその頻度が低くなる全体傾向の特性を有し、次にマッピング後のマッチング関係パラメータに対してエントロピー符号化を実行することである。
本発明の選択的な実施例の復号化装置において、最も基本的な特有な技術的特徴は、エントロピー復号化により得られたマッチング関係パラメータ(実際はマッピング後のマッチング関係パラメータ)に対して、まず取る値範囲の逆マッピングを行い、本当のマッチング関係パラメータを取得し、次にマッチング関係パラメータを使用してマッチング復号化を実行することである。
図12は、本発明の実施例による符号化装置のモジュール組成模式図であり、本発明の選択的な実施例の符号化装置の模式図を図12に示す。全体の符号化装置は、以下のモジュール1)〜5)からなる。
モジュール1)である、画素前処理及びマッチング符号化モジュールは、 入力ビデオ画像の画素値に対して画素前処理及びマッチング符号化を実行し、1つ又は幾つかのマッチング関係パラメータ(それぞれマッチング関係パラメータ1、マッチング関係パラメータ2、…、マッチング関係パラメータJにマークする)とその他のマッチング符号化結果を生成して出力する。前記画素前処理の例は、サンプル量子化、カラー量子化及びカラーに基づく画素クラスタリング、パレットとインデックスによって入力元画素のカラーを表すことであり、前記マッチング符号化の例は、ブロックマッチング方式、マイクロブロックマッチング方式、マイクロブロックストリングマッチング方式、精細分割マッチング方式、ストリングマッチング方式、パレット-インデックスマッチング方式、2次元原体マッチング方式、4分木(4分岐ツリーとも呼ばれる)マッチング方式、任意形状領域コピーマッチング方式であり、前記マッチング関係パラメータの例は、マッチング位置、変位ベクトル、変位ベクトルの1つの成分、マッチング距離、マッチングの大きさ、マッチングの長さ、マッチング矩形の高さ、マッチング矩形の幅、1つの特定マッチング領域を定義する1組のパラメータ、幾つかの種類の予め所定されたマッチング形状及びサイズの番号であり、1つのマッチング関係パラメータの取る値範囲は、1つの予め所定された、一定の順序に配列する数の有限要素セット、例えば小から大まで配列する整数の1つの有限要素サブセットであり、前記その他のマッチング符号化結果の例は、マッチング残差、非マッチング画素値である。
モジュール2)である、マッチング関係パラメータの取る値範囲のマッピングモジュールは、1つのマッチング関係パラメータの取る値範囲に対して1つの双方向単一のマッピングを行い、前記マッピングの入力は、前記モジュール1)が出力したマッチング関係パラメータであり、前記マッピングはマッピング後のマッチング関係パラメータを生成して出力する。前記マッピングの目的は、取る値範囲内の頻度が高い値を小さい値にマッピングして、取る値範囲内の頻度が低い値を大きい値にマッピングすることであり、双方向単一のマッピングは1対1の全射であり、双射と略称され、双射に逆マッピングが存在して、逆マッピングも1対1の全射であり、各マッチング関係パラメータはいずれも自分の1つのマッピングがあり、マッチング関係パラメータ1、マッチング関係パラメータ2、…、マッチング関係パラメータJのマッピングモジュールをそれぞれ、取る値範囲のマッピングモジュール1、取る値範囲のマッピングモジュール2、…、取る値範囲のマッピングモジュールJにマークし、あるマッチング関係パラメータのマッピングは恒等マッピング(取る値範囲内の各数値はいずれも自分にマッピングする)であってもよいが、少なくとも1つのマッチング関係パラメータのマッピングは恒等マッピングではなく、前記マッピングのマッピング関係(即ちマッピングの入力とマッピングの出力との間の関係、どの入力数値がどの出力数値にマッピングするか)は予め所定された静的マッピング関係であってもよく、入力マッチング関係パラメータの各数値のリアルタイム統計特性(例えば現在時刻まで出現した頻度)に基づき動的調整してもよい。
モジュール3)である、 その他のマッチング方式及び各種のよく使用される技術符号化及び再構成モジュールは、入力ビデオ画像、様々なパラメータ及び変数に対してその他のマッチング方式と各種のよく使用される技術、例えばイントラ予測、インター予測、変換、量子化、逆変換、逆量子化、予測残差とマッチング残差に対応する補償(即ち残差演算の逆演算を取る)、DPCM、一次及び高次差分、マッピング、ラン、インデックス、デブロッキングフィルタ、サンプル自適応型補償(Sample Adaptive Offset)の符号化及び再構成演算を実行する。前記その他のマッチング方式とは、符号化装置において前記モジュール1)が実行したマッチング方式と異なるマッチング方式を指し、該モジュールの入力は、前記モジュール1)の出力、元の前記入力ビデオ画像の画素値及び参照画素であり、該モジュールの出力は、再構成画素値及びその他の符号化結果であり、前記再構成画素値を再構成された参照画素値一時記憶モジュールに入れ、後続のマッチング符号化演算、その他のマッチング方式及び各種のよく使用される技術符号化及び再構成演算の所要の参照画素値として使用する。
モジュール4)である、再構成された参照画素値一時記憶モジュールは、再構成された参照画素値セットの画素値、即ち符号化過程において現在の符号化におけるCU又は現在の符号化におけるマッチング領域(マッチング領域はマッチングストリング又はマッチングブロックであってもよい)の開始位置までの再構成された画素値を一時に記憶し、現在と後続のマッチング符号化の参照画素値として使用し、現在と後続のCUに対してその他のマッチング方式と各種のよく使用される技術符号化及び再構成演算を実行する際に必要な参照画素値としても使用する。
モジュール5)である、エントロピー符号化モジュールは、前記マッピング後のマッチング関係パラメータと前記その他の符号化結果を含む全ての圧縮ビットストリームに出力する必要がある符号化結果に対してエントロピー符号化演算を実行する。エントロピー符号化の結果、即ちマッチング関係パラメータを含む圧縮データ及びその他の符号化結果の圧縮ビットストリームも、該符号化装置の最後の出力である。
図13は、本発明の実施例による復号化装置のモジュール組成模式図であり、本発明の選択的な実施例の復号化装置の模式図を図13に示す。復号化装置全体は以下のモジュール1)〜5)からなる。
モジュール1)である、エントロピー復号化モジュールは、入力した、マッチング関係パラメータを含む圧縮データ及びその他の符号化結果の圧縮ビットストリームに対してエントロピー復号化を実行して、エントロピー復号化して得られた各種のデータの意味を解析し、解析して得られた1つ又は若干のマッピング後のマッチング関係パラメータ(それぞれマッピング後のマッチング関係パラメータ1、マッピング後のマッチング関係パラメータ2、…、マッピング後のマッチング関係パラメータJにマークする)を取る値範囲の逆マッピングモジュールに送り、解析して得られたマッチング残差、非マッチング画素値等のその他のマッチング符号化結果とその他のデータをその他のマッチング方式と各種のよく使用される技術復号化及び再構成モジュールに送る。1つのマッピング後のマッチング関係パラメータの取る値範囲は、1つの予め所定された、一定の順序で配列する数の有限要素セット、例えば小から大まで配列する整数の1つの有限要素サブセットである。
モジュール2)である、マッチング関係パラメータの取る値範囲の逆マッピングモジュールは、 1つのマッピング後のマッチング関係パラメータの取る値範囲に対して1つの双方向単一のマッピングの逆マッピングを行い、前記逆マッピングの入力は、前記モジュール1)が解析して得られた、且つ出力したマッピング後のマッチング関係パラメータであり、前記逆マッピングはマッピング前(即ち符号化装置において実行されないマッピング)のマッチング関係パラメータを回復して出力し、各マッチング関係パラメータはいずれも自分の1つの逆マッピングを有し、マッチング関係パラメータ1、マッチング関係パラメータ2、…、マッチング関係パラメータJの逆マッピングモジュールをそれぞれ取る値範囲の逆マッピングモジュール1、取る値範囲の逆マッピングモジュール2、…、取る値範囲の逆マッピングモジュールJにマークする。あるマッチング関係パラメータの逆マッピングは、恒等マッピング(取る値範囲内の各数値はいずれも自分にマッピングする)であってもよいが、少なくとも1つのマッチング関係パラメータの逆マッピングは、恒等マッピングではなく、前記逆マッピングの逆マッピング関係(即ち逆マッピングの入力と逆マッピングの出力との間の関係、どの入力数値をどの出力数値に逆マッピングするか)は、予め所定された静的逆マッピング関係であってもよく、マッチング関係パラメータの各数値のリアルタイム統計特性(現在の時刻まで出現した頻度)に基づき動的調整してもよい。前記マッチング関係パラメータの例は、マッチング位置、変位ベクトル、変位ベクトルの1つの成分、マッチング距離、マッチングの大きさ、マッチング長さ、マッチング矩形の高さ、マッチング矩形の幅、1つの特定マッチング領域を定義する1組のパラメータ、幾つかの種類の予め所定されたマッチング形状及びサイズの番号である。
モジュール3)である、マッチング復号化モジュールは、前記マッチング関係パラメータに基づきマッチング復号化演算を実行する。該モジュールの入力は、前記モジュール2)が出力した前記マッチング関係パラメータである。前記マッチング復号化の例は、ブロックマッチング方式、マイクロブロックマッチング方式、マイクロブロックストリングマッチング方式、精細分割マッチング方式、ストリングマッチング方式、パレット-インデックスマッチング方式、2次元原体マッチング方式、4分木(4分岐ツリーとも呼ばれる)マッチング方式、任意形状領域コピーマッチング方式である。マッチング復号化演算を実行する際に、まずマッチング参照画素値が再構成された参照画素値一時記憶モジュールにある位置を確定して、及びマッチング参照画素値からなるマッチング領域(マッチング領域はマッチングストリング又はマッチングブロックであってもよい)の形状と大きさを確定し、次に、前記位置から前記形状と大きさの前記マッチング領域内のマッチング参照画素値をコピーして、前記マッチング参照画素値を現在の復号化におけるマッチング現在画素値の位置に移動して貼り付け、マッチング現在画素値を回復する。該モジュールの出力は全ての回復した前記マッチング現在画素値である。
モジュール4)である、その他のマッチング方式と各種のよく使用される技術復号化及び再構成モジュールは、現在の復号化におけるマッチング領域(マッチング領域はマッチングストリング又はマッチングブロックであってもよい)又は現在の復号化におけるCUの様々なパラメータ及び変数に対して、その他のマッチング方式と各種のよく使用される技術、例えばイントラ予測、インター予測、逆変換、逆量子化、予測残差とマッチング残差に対する補償(即ち残差演算の逆演算を取る)、DPCM、一次及び高次差分、マッピング、ラン、インデックス、デブロッキングフィルタ、サンプル自適応型補償(Sample Adaptive Offset)の復号化及び再構成演算を実行する。前記その他のマッチング方式とは、復号化装置において前記モジュール3)が実行したマッチング方式と異なるマッチング方式を指す。該モジュールの出力は、再構成画素値(完全再構成画素値及び異なる程度の一部の再構成画素値を含む)である。前記再構成画素値を再構成された参照画素値一時記憶モジュールに入れ、後続のマッチング復号化演算、その他のマッチング方式と各種のよく使用される技術復号化及び再構成演算に必要な参照画素値として使用する。前記完全再構成画素値も該復号化装置の最後の出力である。
モジュール5)である再構成された参照画素値一時記憶モジュールは、再構成された参照画素値セットの画素値、即ち復号化過程において現在の復号化におけるCU又は現在の復号化におけるマッチング領域(マッチング領域はマッチングストリング又はマッチングブロックであってもよい)の開始位置までの再構成された画素値を一時に記憶し、現在と後続のマッチング復号化の参照画素値として使用し、現在と後続のCUに対してその他のマッチング方式と各種のよく使用される技術の復号化及び再構成演算を実行する際に必要な参照画素値としても使用する。
本発明の選択的な実施例は、パックフォーマット画像又はCUの符号化及び復号化に適用される。本発明の選択的な実施例は、同様に成分平面フォーマット画像又はCUの符号化及び復号化にも適用される。本発明の選択的な実施例は、無損失マッチング符号化及び復号化に適用される。本発明の実施例は、同様にロッシーマッチング符号化及び復号化にも適用される。本発明の実施例は、無損失符号化及び復号化に適用される。本発明の実施例は、同様にロッシー符号化及び復号化にも適用される。本発明の選択的な実施例は、同時に多種のマッチング方式(例えば、同時にブロックマッチング方式、任意形状領域コピーマッチング方式、パレット-インデックスマッチング方式の3種のマッチング方式を採用し、又は同時にブロックマッチング方式、パレット-インデックスマッチング方式、ストリングマッチング方式の3種のマッチング方式を採用する)を採用する符号化及び復号化にも適用される。
以上に提供する図示は、例示的に本発明の実施例の基本的な構想を説明するもので、図示では、本発明の実施例に直接関連するアセンブリのみを表示し、実際に実施する際のアセンブリ数、形状及びサイズに従って描いたものではなく、実際に実施する際における各アセンブリの形態、数及び比は、任意の変更が可能であり、且つそのアセンブリレイアウト形態もより複雑である可能性がある。
以下は、本発明の選択的な実施例のより多くの実施細部及び変形である。
マッチング関係パラメータの取る値範囲のマッピングの実施例1
上記取る値範囲はK(一般的に1<K<20)個のサブ取る値範囲に分けられ、前記マッピング又は前記逆マッピングも対応的にK個のサブ取る値範囲内のマッピング又は逆マッピングに分けられる。
マッチング関係パラメータの取る値範囲のマッピングの実施例2
上記取る値範囲はL(一般的に1<L<40)組のサブ取る値範囲に分けられ、各組のサブ取る値範囲内の各サブ取る値範囲はいずれも互いに等しい有限要素があり、上記マッピング又は上記逆マッピングも対応的にL組のマッピング又はL組の逆マッピングに分けられ、各組のマッピング又は各組の逆マッピングは各組のサブ取る値範囲内の1つの完全なサブ取る値範囲を、同一組内の1つ(他でもよく、同一でもよい)の完全なサブ取る値範囲にマッピング又は逆マッピングして、サブ取る値範囲内の全ての要素の順序を変えないように保持し、即ち要素Aを要素Bの前に配列すると、マッピングした後の要素Aもマッピング後の要素Bの前に配列し、又は逆マッピング後の要素Aも逆マッピング後の要素Bの前に配列し、その逆も同様である。
マッチング関係パラメータの取る値範囲のマッピングの実施例3
上記取る値範囲又は前記サブ取る値範囲内の1つの上記マッピング又は1つの前記逆マッピングは、幾つかの(一般的に4つより少ない)連続的に実行する一部のマッピング又は一部の逆マッピングの合成である。
マッチング関係パラメータの取る値範囲のマッピングの実施例4
上記取る値範囲又は前記サブ取る値範囲内の1つの上記マッピング(又は上記一部のマッピング)のマッピング関係又は1つの上記逆マッピング(又は上記一部の逆マッピング)の逆マッピング関係は、全部が1つの又は1組の計算式によって示し、或いは全部が1つのリストで示し、或いは一部が1つの又は1組の計算式によって示し、一部が1つのリストで示す。
マッチング関係パラメータの取る値範囲のマッピングの実施例5
上記取る値範囲又は前記サブ取る値範囲内の1つの上記マッピング(又は上記一部のマッピング)のマッピング関係又は1つの前記逆マッピング(又は上記一部の逆マッピング)の逆マッピング関係は、現在の符号化(復号化)の1つの状態又はパラメータの変化に伴って変化する。
マッチング関係パラメータの取る値範囲のマッピングの実施例6
上記取る値範囲又は前記サブ取る値範囲内の1つの前記マッピング(又は上記一部のマッピング)のマッピング関係又は1つの前記逆マッピング(又は上記一部の逆マッピング)の逆マッピング関係は、現在のCUの幅の変化に伴って変化し、即ち現在のCUの幅が1つの値である際に、1種のマッピング関係又は逆マッピング関係を採用し、現在のCUの幅が他の1つの値である際に、他種のマッピング関係又は逆マッピング関係を採用し、例えば、現在のCUの幅をWとし、あるマッチング関係パラメータ(例えばマッチング距離)取る値Wの幾つか又は全部の倍数の頻度は、非Wの幾つか又は全部の倍数の頻度よりはるかに高いため、Wの幾つか又は全部の倍数を取る値範囲内の小さい値にマッピングして、非Wの幾つか又は全部の倍数を取る値範囲内の大きい値にマッピングする必要があり、このように、マッピング関係はWに関連し、Wが異なる時に、マッピング関係も異なり、それにより逆マッピング関係も異なる。
マッチング関係パラメータの取る値範囲のマッピングの実施例7
本実施例は、実施例6の特別な例であり、上記マッチング関係パラメータの一つはマッチング距離であり、上記現在のCUの幅Wは、64、32、16、8の4つの値があり、上記マッピング又は前記逆マッピングも対応的に4種のマッピング関係又は4種の逆マッピング関係がある。
マッチング関係パラメータの取る値範囲のマッピングの実施例8
上記各モジュール以外、1つのマッチング関係パラメータの取る値範囲内の各数値のリアルタイム統計モジュールを更に有し、各数値の特性、例えば現在の時刻まで各数値が出現した頻度をリアルタイムに統計し、マッチング関係パラメータの各数値のリアルタイム統計結果に基づき、前記マッピング(又は上記一部のマッピング)のマッピング関係又は前記逆マッピング(又は上記一部の逆マッピング)の逆マッピング関係を動的に調整する。
以上のように、本発明の実施例による画像符号化、復号化方法及び装置によって、画像圧縮性能を向上させる。
他の実施例において、ソフトウェアを更に提供し、該ソフトウェアは上記実施例及び好ましい実施形態に説明する技術的解決手段を実行することに用いられる。
他の実施例において、記憶媒体を更に提供し、該記憶媒体に上記ソフトウェアが記憶され、該記憶媒体はCD、フロッピーディスク、ハードディスク、フラッシュメモリ等を含むが、これらに制限されない。
もちろん、当業者が理解できるように、上記の本発明の各モジュール又は各ステップは汎用の計算装置によって実現することができ、それらは単一の計算装置に集積してもよく、又は複数の計算装置からなるネットワークに配布されてもよく、選択的に、それらは、計算装置が実行可能なプログラムコードで実現してもよく、それにより、それらを記憶装置に記憶して計算装置で実行してもよく、且つある場合には、ここでの順序と異なる順序で示した又は記述したステップを実行してもよく、又はそれらをそれぞれ各集積回路モジュールに製造し、又はそれらにおける複数のモジュール又はステップを単一の集積回路モジュールに製造して実現してもよい。このように、本発明はいずれの特定のハードウェアとソフトウェアの組み合わせに限定されたものではない。
以上のものは本発明の好ましい実施例であるに過ぎず、本発明を制限するためのものではなく、当業者にとっては、本発明が様々な変更と変化を有することを理解できる。本発明の趣旨と原則にある限り、行ったいずれの変更、等価置き換え、改善等は、いずれも本発明の保護範囲に含まれるべきである。
本発明はデジタルビデオ圧縮符号化及び復号化に関し、画像符号化、復号化方法、及び装置を提供し、該画像符号化方法は、入力ビデオ画像の画素をマッチング符号化し、1つ或いは複数のマッチング関係パラメータを取得し、マッチング関係パラメータは、該画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであることと、マッチング関係パラメータをマッピングし、マッチング関係パラメータのマッピング値を取得することと、マッチング関係パラメータのマッピング値に対してエントロピー符号化を実行することと、を含む。本発明によって、関連技術における、マッチング関係パラメータに対して直接、エントロピー符号化を実行することによる問題を解決し、更にエントロピー符号化のよいデータ圧縮効果を達成する。

Claims (6)

  1. 入力ビデオ画像の画素値に対して画素前処理及びマッチング符号化を実行し、1つ或いは複数のマッチング関係パラメータを生成して出力することと、
    前記マッチング関係パラメータの取る値範囲を一対一にマッピングして、マッピング後のマッチング関係パラメータを出力することと、
    前記入力ビデオ画像、前記マッチング関係パラメータ及び変数に対して、符号化及び再構成演算を実行することと、
    再構成された参照画素値セットの画素値を一時に記憶することと、
    前記マッピング後のマッチング関係パラメータに対してエントロピー符号化を実行し、エントロピー符号化後の結果を出力することと、を含み、
    前記マッチング関係パラメータの取る値範囲を一対一にマッピングすることは、
    同じタイプの前記マッチング関係パラメータを、指定された規則に従って集め及び/又は再配列してマッチング関係パラメータグループを構成し、前記マッチング関係パラメータグループをマッピング処理し、マッピング処理して得られたマッチング関係パラメータグループを前記マッチング関係パラメータのマッピング値とすることを含み、
    前記マッチング関係パラメータグループをマッピング処理することは、
    前記マッチング関係パラメータグループにおけるマッチング関係パラメータの取る値を変換した後に得られた値を、マッピング処理の出力とすることを含む画像符号化方法。
  2. 入力した、マッチング関係パラメータを含む圧縮データ及び前記マッチング関係パラメータを含む圧縮データ以外の他のパラメータの圧縮ビットストリームに対してエントロピー復号化を実行することと、
    マッピング後のマッチング関係パラメータの取る値範囲を一対一に逆マッピングし、マッピング前のマッチング関係パラメータを回復して出力することと、
    前記マッチング関係パラメータに基づき、マッチング復号化を実行することと、
    現在の復号化におけるマッチング領域、或いは現在の復号化における復号化ブロックの様々なパラメータ及び変数に対して、復号化及び再構成演算を実行することと、
    再構成された参照画素値セットの画素値を一時に記憶することと、を含み、
    前記マッピング後のマッチング関係パラメータの取る値範囲を一対一に逆マッピングし、マッピング前のマッチング関係パラメータを回復して出力することは、
    同じタイプの処理しようとするフィールドの取る値を、指定された規則に従って集め及び/又は再配列して配列を構成し、前記配列を処理した後に前記回復後のマッチング関係パラメータとすることを含み、
    前記配列を処理することは、
    前記配列における処理しようとするフィールドの取る値を変換した後に得られた値を、処理後の出力値とすることを含む画像復号化方法。
  3. 入力ビデオ画像の画素をマッチング符号化し、1つ或いは複数のマッチング関係パラメータを取得し、前記マッチング関係パラメータは前記入力ビデオ画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであることと、
    前記マッチング関係パラメータをマッピングし、マッチング関係パラメータのマッピング値を取得することと、
    前記マッチング関係パラメータのマッピング値に対してエントロピー符号化を行うことと、を含み、
    前記マッチング関係パラメータをマッピングすることは、
    同じタイプの前記マッチング関係パラメータを、指定された規則に従って集め及び/又は再配列してマッチング関係パラメータグループを構成し、前記マッチング関係パラメータグループをマッピング処理し、マッピング処理して得られたマッチング関係パラメータグループを前記マッチング関係パラメータのマッピング値とすることを含み、
    前記マッチング関係パラメータグループをマッピング処理することは、
    前記マッチング関係パラメータグループにおけるマッチング関係パラメータの取る値を変換した後に得られた値を、マッピング処理の出力とすることを含む画像符号化方法。
  4. 受信したビットストリームに対してエントロピー復号化を行い、マッチング関係パラメータを指示するためのフィールドの取る値を取得し、前記マッチング関係パラメータは、復号化しようとするビデオ画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであることと、
    前記フィールドの取る値をマッピングし、マッピング後のマッチング関係パラメータを取得することと、
    前記マッピング後のマッチング関係パラメータに基づき、前記復号化しようとするビデオ画像における画素の予測値及び/又は回復値を構築することと、を含み、
    前記フィールドの取る値をマッピングし、マッピング後のマッチング関係パラメータを取得することは、
    同じタイプの処理しようとするフィールドの取る値を、指定された規則に従って集め及び/又は再配列して配列を構成し、前記配列を処理した後に前記マッピング後のマッチング関係パラメータとすることを含み、
    前記配列を処理することは、
    前記配列における処理しようとするフィールドの取る値を変換した後に得られた値を、処理後の出力値とすることを含む画像復号化方法。
  5. 入力ビデオ画像の画素をマッチング符号化し、1つ或いは複数のマッチング関係パラメータを取得し、前記マッチング関係パラメータは、前記入力ビデオ画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであるように設定されるマッチング符号化モジュールと、
    前記マッチング関係パラメータをマッピングし、マッチング関係パラメータのマッピング値を取得するように設定されるマッピングモジュールと、
    前記マッチング関係パラメータのマッピング値に対して、エントロピー符号化を行うように設定されるエントロピー符号化モジュールと、を備え
    前記マッチング関係パラメータをマッピングすることは、
    同じタイプの前記マッチング関係パラメータを、指定された規則に従って集め及び/又は再配列してマッチング関係パラメータグループを構成し、前記マッチング関係パラメータグループをマッピング処理し、マッピング処理して得られたマッチング関係パラメータグループを前記マッチング関係パラメータのマッピング値とすることを含み、
    前記マッチング関係パラメータグループをマッピング処理することは、
    前記マッチング関係パラメータグループにおけるマッチング関係パラメータの取る値を変換した後に得られた値を、マッピング処理の出力とすることを含む画像符号化装置。
  6. 受信したビットストリームに対してエントロピー復号化を行い、マッチング関係パラメータを指示するためのフィールドの取る値を取得し、前記マッチング関係パラメータは、復号化しようとするビデオ画像における画素の予測値及び/又は回復値を構築する過程に使用されるパラメータであるように設定されるエントロピー復号化モジュールと、
    前記フィールドの取る値をマッピングし、マッピング後のマッチング関係パラメータを取得するように設定されるマッピングモジュールと、
    前記マッピング後のマッチング関係パラメータに基づき、前記復号化しようとするビデオ画像における画素の予測値及び/又は回復値を構築するように設定される構築モジュールと、を備え
    前記フィールドの取る値をマッピングし、マッピング後のマッチング関係パラメータを取得することは、
    同じタイプの処理しようとするフィールドの取る値を、指定された規則に従って集め及び/又は再配列して配列を構成し、前記配列を処理した後に前記マッピング後のマッチング関係パラメータとすることを含み、
    前記配列を処理することは、
    前記配列における処理しようとするフィールドの取る値を変換した後に得られた値を、処理後の出力値とすることを含む画像復号化装置。
JP2017511908A 2014-05-06 2015-05-06 画像符号化、復号化方法、及び装置 Active JP6360969B2 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
CN201410187858 2014-05-06
CN201510219125.8 2015-04-30
CN201510219125.8A CN105100814B (zh) 2014-05-06 2015-04-30 图像编码、解码方法及装置
PCT/CN2015/078420 WO2016172994A1 (zh) 2015-04-30 2015-05-06 图像编码、解码方法及装置

Publications (2)

Publication Number Publication Date
JP2017529784A JP2017529784A (ja) 2017-10-05
JP6360969B2 true JP6360969B2 (ja) 2018-07-18

Family

ID=57200721

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017511908A Active JP6360969B2 (ja) 2014-05-06 2015-05-06 画像符号化、復号化方法、及び装置

Country Status (6)

Country Link
US (2) US10834428B2 (ja)
EP (1) EP3177021B1 (ja)
JP (1) JP6360969B2 (ja)
KR (1) KR101946598B1 (ja)
CN (1) CN105100814B (ja)
WO (1) WO2016172994A1 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2019065297A1 (ja) * 2017-09-29 2020-11-05 ソニー株式会社 情報処理装置および方法
CN110008478B (zh) * 2017-12-30 2023-10-31 中国移动通信集团贵州有限公司 语言转换方法、装置、计算设备及存储介质
US10649098B2 (en) 2018-01-29 2020-05-12 Samsung Electronics Co., Ltd. Light converting nanoparticle, method of making the light converting nanoparticle, and composition and optical film comprising the same
CN112672132B (zh) * 2018-09-30 2023-12-26 Oppo广东移动通信有限公司 数据处理方法及装置、电子设备及存储介质
EP3664017B1 (en) * 2018-12-06 2022-03-02 Robert Bosch GmbH Method and device for digital image or video data processing
CN111479116A (zh) * 2019-01-23 2020-07-31 上海天荷电子信息有限公司 等比特精度预测、映射和分段编码的数据压缩方法和装置
US11595694B2 (en) * 2020-04-01 2023-02-28 Tencent America LLC Method and apparatus for video coding
US11496731B2 (en) * 2020-06-08 2022-11-08 Tencent America LLC String matching with single color value
CN113949867B (zh) * 2020-07-16 2023-06-20 武汉Tcl集团工业研究院有限公司 一种图像处理的方法及装置
US20220066975A1 (en) * 2020-09-01 2022-03-03 Texas Instruments Incorporated Bit stream transformation in parallel data interfaces

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4769039B2 (ja) * 2005-07-26 2011-09-07 パナソニック株式会社 デジタル信号符号化および復号化装置ならびにその方法
CN101557514B (zh) 2008-04-11 2011-02-09 华为技术有限公司 一种帧间预测编解码方法、装置及系统
WO2009150801A1 (ja) * 2008-06-10 2009-12-17 パナソニック株式会社 復号化装置、復号化方法及び受信装置
JP5413161B2 (ja) 2008-12-17 2014-02-12 三菱電機株式会社 テーブル装置、符号化装置、復号装置および符号化/復号装置
US20110274169A1 (en) 2010-05-05 2011-11-10 Paz Adar Device, system, and method for spatially encoding video data
CN102497546B (zh) * 2011-11-28 2014-03-05 同济大学 一种屏幕图像压缩装置及压缩方法
EP3723369A1 (en) 2012-01-20 2020-10-14 Dolby Laboratories Licensing Corporation Intra prediction mode mapping device
CN103167289B (zh) * 2013-03-06 2015-10-28 硅谷数模半导体(北京)有限公司 图像的编码、解码方法及编码、解码装置
US10021419B2 (en) * 2013-07-12 2018-07-10 Qualcomm Incorported Rice parameter initialization for coefficient level coding in video coding process
CN105659606B (zh) 2013-10-14 2019-06-18 微软技术许可有限责任公司 用于视频和图像编码和解码的方法、系统和介质
US10542274B2 (en) * 2014-02-21 2020-01-21 Microsoft Technology Licensing, Llc Dictionary encoding and decoding of screen content
AU2014201583A1 (en) * 2014-03-14 2015-10-01 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding video data using a block dictionary

Also Published As

Publication number Publication date
KR101946598B1 (ko) 2019-02-11
WO2016172994A1 (zh) 2016-11-03
US10834428B2 (en) 2020-11-10
CN105100814B (zh) 2020-07-14
US20210021872A1 (en) 2021-01-21
EP3177021B1 (en) 2022-03-16
CN105100814A (zh) 2015-11-25
US20180242023A1 (en) 2018-08-23
KR20170038052A (ko) 2017-04-05
JP2017529784A (ja) 2017-10-05
EP3177021A1 (en) 2017-06-07
US11451835B2 (en) 2022-09-20
EP3177021A4 (en) 2017-08-23

Similar Documents

Publication Publication Date Title
JP6360969B2 (ja) 画像符号化、復号化方法、及び装置
KR102071764B1 (ko) 영상 부호화, 복호화 방법 및 장치
US10349085B2 (en) Efficient parameter storage for compact multi-pass transforms
US11394970B2 (en) Image encoding and decoding method and device
TW201906406A (zh) 與視訊寫碼中之變換處理一起應用之內部濾波
WO2015120823A1 (zh) 使用多种形式的参考像素存储空间的图像压缩方法和装置
CN104581177B (zh) 一种结合块匹配和串匹配的图像压缩方法和装置
JP2017508415A (ja) 画像符号化/復号方法及び装置
CN104754362B (zh) 使用精细划分块匹配的图像压缩方法
WO2016119746A1 (zh) 图像编码方法及装置、图像解码方法及装置
CN115086664A (zh) 未匹配像素的解码方法、编码方法、解码器以及编码器
WO2021197158A1 (zh) 一种图像处理方法和图像处理装置
CN117356092A (zh) 用于混合特征视频比特流和解码器的系统、方法和比特流结构

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180427

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180529

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180625

R150 Certificate of patent or registration of utility model

Ref document number: 6360969

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250