JP2022553624A - 予測値の確定方法、復号器及びコンピュータ記憶媒体 - Google Patents

予測値の確定方法、復号器及びコンピュータ記憶媒体 Download PDF

Info

Publication number
JP2022553624A
JP2022553624A JP2022519101A JP2022519101A JP2022553624A JP 2022553624 A JP2022553624 A JP 2022553624A JP 2022519101 A JP2022519101 A JP 2022519101A JP 2022519101 A JP2022519101 A JP 2022519101A JP 2022553624 A JP2022553624 A JP 2022553624A
Authority
JP
Japan
Prior art keywords
template
current block
matching
determining
block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2022519101A
Other languages
English (en)
Other versions
JP7471399B2 (ja
Inventor
ワン、ジュン
リャン、ファン
チャン、ホン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Publication of JP2022553624A publication Critical patent/JP2022553624A/ja
Application granted granted Critical
Publication of JP7471399B2 publication Critical patent/JP7471399B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本発明の実施形態において、予測値の確定方法、復号器、コンピュータ記憶媒体が提供される。当該方法は復号器に応用される。当該方法は以下の内容を含む。ビットストリームを解析することによって現在のブロックの復号化パラメータを取得し、復号化パラメータは現在のブロックを復号化する過程において使用されるパラメータを含み、現在のブロックが回転テンプレートモードを使用すると復号化パラメータによって指示される場合、現在のブロックの第一テンプレートを取得し、第一テンプレートは現在のブロックの隣接再構成サンプルを含み、現在のブロックの参照領域を確定し、参照領域において、参照テンプレート処理パラメータに基づいて第一テンプレートのマッチングテンプレートを確定し、参照テンプレート処理パラメータは復号化パラメータに含まれ、且つマッチングテンプレートを構築するために用いられるパラメータであり、マッチングテンプレートに基づいて、現在のブロックのマッチングブロックを確定し、マッチングブロックに基づいて、現在のブロックの予測値を確定する。

Description

本発明は、ビデオ符号化・復号化におけるイントラ予測技術分野に関し、特に、予測値の確定方法、復号器及びコンピュータ記憶媒体に関する。
現行のビデオ符号化・復号化標準、例えば、Ｈ２６５／２６６では、イントラ領域ベーステンプレートマッチング（ｉｎｔｒａ ｒｅｇｉｏｎ－ｂａｓｅｄ ｔｅｍｐｌａｔｅ ｍａｔｃｈｉｎｇ）技術を利用してイントラ予測を行うことが多い。また、ＪＥＶＴ（Ｊｏｉｎｔ Ｖｉｄｅｏ Ｅｘｐｌｏｒａｔｉｏｎ Ｔｅａｍ）－Ｌ００４１では、イントラ予測に用いられる回転イントラブロックコピー（ｒｏｔａｔｅ ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ）技術が提案された。
イントラ予測に用いられるイントラ領域ベーステンプレートマッチング技術では、全ての再構成ブロックのテンプレートをトラバース（ｔｒａｖｅｒｓｅ）することによって、再構成ブロックのテンプレートにおける対応位置のサンプル値と現在のブロックのテンプレートにおける対応位置のサンプル値との間の差分二乗和のうちの最小値を見つけ、最小値を有するテンプレートに対応する再構成ブロックのサンプル値を現在のブロックの予測値として確定する。
また、イントラ領域ベーステンプレートマッチング技術と比べて、イントラ予測に用いられる回転イントラブロックコピー技術は、以下のように実現される。ブロック全体を任意の角度で回転させてマッチングを行い、再構成された画像ブロックの頂点のサンプル値と現在のブロックの頂点のサンプル値との間の差分二乗和のうちの最小値を見つけ、最小値に対応する再構成ブロックのサンプル値を現在のブロックの予測値として確定する。明らかに、イントラ領域ベーステンプレートマッチング技術では、予測値が符号化・復号化済みの再構成ブロックのテンプレートから選択されるため、最も類似である再構成ブロックを見つけることは難しい。イントラ予測に用いられる回転イントラブロックコピー技術では、再構成ブロックの回転が導入されたが、大量の計算量が増える。そこから、現行のビデオ符号化・復号化では、イントラ予測で確定された予測値がビデオ符号化・復号化の低効率につながっていることが分かる。
上記に踏まえて、本発明の実施形態において、予測値の確定方法、復号器及びコンピュータ記憶媒体が提供される。それによって、復号器の復号化効率を高めることができる。
本発明の実施形態の技術的解決策は以下のように実現されることができる。
第一様態において、本発明の実施形態では、予測値の確定方法が提供され、当該方法は復号器に応用される。当該方法は以下の内容を含む。
ビットストリームを解析することによって現在のブロックの復号化パラメータを取得し、復号化パラメータは現在のブロックを復号化する過程において使用されるパラメータを含み、
現在のブロックが回転テンプレートモードを使用すると復号化パラメータによって指示される場合、現在のブロックの第一テンプレートを取得し、第一テンプレートは現在のブロックの隣接再構成サンプルを含み、
現在のブロックの参照領域を確定し、
参照領域において、参照テンプレート処理パラメータに基づいて、第一テンプレートのマッチングテンプレートを確定し、参照テンプレート処理パラメータは復号化パラメータに含まれ、且つマッチングテンプレートを構築するために用いられるパラメータであり、
マッチングテンプレートに基づいて、現在のブロックのマッチングブロックを確定し、
マッチングブロックに基づいて、現在のブロックの予測値を確定する。
第二様態において、本発明の実施形態では、予測値の確定方法が提供され、当該方法は符号器に応用される。当該方法は以下の内容を含む。
現在のブロックと現在のブロックの第一テンプレートとの間のデータ依存性を取得し、第一テンプレートは現在のブロックの隣接再構成サンプルを含み、
データ依存性が予め設定された閾値以上である場合、回転テンプレートモードを使用し、
回転テンプレートモードのもとで、現在のブロックの参照領域を確定し、
参照領域において、参照テンプレート処理パラメータに基づいて、第一テンプレートのマッチングテンプレートを確定し、
マッチングテンプレートに基づいて、現在のブロックのマッチングブロックを確定し、
マッチングブロックに基づいて、現在のブロックの予測値を確定する。
第三様態において、本発明の実施形態では、復号器が提供される。当該復号器は解析モジュール、第一取得モジュール及び第一確定モジュールを含む。
解析モジュールは、ビットストリームを解析することによって現在のブロックの復号化パラメータを取得するように構成されている。復号化パラメータは現在のブロックを復号化する過程において使用されるパラメータを含む。
第一取得モジュールは、現在のブロックが回転テンプレートモードを使用すると復号化パラメータによって指示される場合、現在のブロックの第一テンプレートを取得するように構成されている。第一テンプレートは現在のブロックの隣接再構成サンプルを含む。
第一確定モジュールは、現在のブロックの参照領域を確定し、参照領域において、参照テンプレート処理パラメータに基づいて第一テンプレートのマッチングテンプレートを確定し、マッチングテンプレートに基づいて現在のブロックのマッチングブロックを確定し、マッチングブロックに基づいて現在のブロックの予測値を確定するように構成されている。参照テンプレート処理パラメータは復号化パラメータに含まれ、且つマッチングテンプレートを構築するために用いられるパラメータである。
第四様態において、本発明の実施形態では、復号器が提供される。当該復号器はプロセッサとプロセッサによって実行可能な命令を記憶する記憶媒体とを含む。
記憶媒体は通信バスを介してプロセッサに依存して操作を実行し、プロセッサによって実行されると、命令は以下のステップを実行する。
ビットストリームを解析することによって現在のブロックの復号化パラメータを取得し、復号化パラメータは現在のブロックを復号化する過程において使用されるパラメータを含み、
現在のブロックが回転テンプレートモードを使用すると復号化パラメータによって指示される場合、現在のブロックの第一テンプレートを取得し、第一テンプレートは現在のブロックの隣接再構成サンプルを含み、
現在のブロックの参照領域を確定し、
参照領域において、参照テンプレート処理パラメータに基づいて、第一テンプレートのマッチングテンプレートを確定し、参照テンプレート処理パラメータは復号化パラメータに含まれ、且つマッチングテンプレートを構築するために用いられるパラメータであり、
マッチングテンプレートに基づいて、現在のブロックのマッチングブロックを確定し、
マッチングブロックに基づいて、現在のブロックの予測値を確定する。
第五様態において、本発明の実施形態では、第一コンピュータ記憶媒体が提供される。第一コンピュータ記憶媒体は実行可能な命令を記憶する。実行可能な命令が１つ又は複数のプロセッサによって実行されると、プロセッサが上記予測値の確定方法を実行する。
第六様態において、本発明の実施形態では、符号器が提供される。当該符号器は、第二取得モジュールと第二確定モジュールを含む。
第二取得モジュールは、現在のブロックと現在のブロックの第一テンプレートとの間のデータ依存性を取得するように構成されている。第一テンプレートは現在のブロックの隣接再構成サンプルを含む。
第二確定モジュールは、データ依存性が予め設定された閾値以上である場合に回転テンプレートモードを使用し、回転テンプレートモードのもとで現在のブロックの参照領域を確定し、参照領域において、参照テンプレート処理パラメータに基づいて第一テンプレートのマッチングテンプレートを確定し、マッチングテンプレートに基づいて現在のブロックのマッチングブロックを確定し、マッチングブロックに基づいて現在のブロックの予測値を確定するように構成されている。
第七様態において、本発明の実施形態では、符号器が提供される。当該符号器は第二プロセッサと第二プロセッサによって実行可能な命令を記憶する記憶媒体とを含む。
記憶媒体は通信バスを介して第二プロセッサに依存して操作を実行し、第二プロセッサによって実行されると、命令は以下のステップを実行する。
現在のブロックと現在のブロックの第一テンプレートとの間のデータ依存性を取得し、第一テンプレートは現在のブロックの隣接再構成サンプルを含み、
データ依存性が予め設定された閾値以上である場合、回転テンプレートモードを使用し、
回転テンプレートモードのもとで、現在のブロックの参照領域を確定し、
参照領域において、参照テンプレート処理パラメータに基づいて、第一テンプレートのマッチングテンプレートを確定し、
マッチングテンプレートに基づいて、現在のブロックのマッチングブロックを確定し、
マッチングブロックに基づいて、現在のブロックの予測値を確定する。
第八様態において、本発明の実施形態では、第二コンピュータ記憶媒体が提供される。第二コンピュータ記憶媒体は実行可能な命令を記憶する。実行可能な命令が１つ又は複数のプロセッサによって実行されると、プロセッサが上記予測値の確定方法を実行する。
本発明の実施形態において、予測値の確定方法、復号器、コンピュータ記憶媒体が提供される。当該方法は復号器に応用される。当該方法は以下の内容を含む。ビットストリームを解析することによって現在のブロックの復号化パラメータを取得し、復号化パラメータは現在のブロックを復号化する過程において使用されるパラメータを含み、現在のブロックが回転テンプレートモードを使用すると復号化パラメータによって指示される場合、現在のブロックの第一テンプレートを取得し、第一テンプレートは現在のブロックの隣接再構成サンプルを含み、現在のブロックの参照領域を確定し、参照領域において、参照テンプレート処理パラメータに基づいて第一テンプレートのマッチングテンプレートを確定し、参照テンプレート処理パラメータは復号化パラメータに含まれ、且つマッチングテンプレートを構築するために用いられるパラメータであり、マッチングテンプレートに基づいて、現在のブロックのマッチングブロックを確定し、マッチングブロックに基づいて、現在のブロックの予測値を確定する。換言すると、本発明の実施形態において、ビットストリームから回転テンプレートモードを取得し、回転テンプレートモードのもとで、現在のブロックの第一テンプレートを取得し且つ現在のブロックの参照領域を確定する。参照領域において、参照テンプレート処理パラメータに基づいて、第一テンプレートのマッチングテンプレートを確定する。次に、マッチングテンプレートに基づいて現在のブロックにマッチするマッチングブロックを確定し、現在のブロックの予測値を確定する。それで、画像ブロックのテンプレートを処理することによってより多くのテンプレートを取得し、より多くのテンプレートを現在のブロックのテンプレートと比較して、現在のブロックに最もマッチするマッチングブロックを見つけることができる。それは、現在のブロックに最もマッチするマッチングブロックをより正確に確定し、現在のブロックの予測値を確定することに有益である。テンプレートを回転させるという計算方法を利用することで、符号化・復号化の計算量を減らし、符号化・復号化の効率を高めることができる。
図１は、イントラ領域ベーステンプレートマッチングにおけるフレームの配列を示す概略図である。 図２は、回転イントラブロックコピーにおけるフレームの配列を示す概略図である。 図３は、本発明の実施形態に係る選択可能な予測値の確定方法を示すフローチャートである。 図４は、本発明の実施形態に係る選択可能なイントラテンプレートの回転の配列を示す概略図である。 図５は、本発明の実施形態に係る別の選択可能な予測値の確定方法を示すフローチャートである。 図６は、本発明の実施形態に係る別の選択可能なイントラテンプレートの回転の配列を示す概略図である。 図７は、本発明の実施形態に係る選択可能なイントラテンプレートのサンプルの回転の構造を示す概略図である。 図８は、本発明の実施形態に係る図７におけるイントラテンプレートの一部のサンプルの回転の構造を示す概略図である。 図９は、本発明の実施形態に係るもう一つの選択可能な予測値の確定方法を示すフローチャートである。 図１０は、本発明の実施形態に係る選択可能な現在のブロックと現在のブロックの第一テンプレートとの間の構造を示す概略図である。 図１１は、本発明の実施形態に係る選択可能な予測値の確定方法の実例を示すフローチャートである。 図１２は、本発明の実施形態に係る復号器の構造を示す概略図一である。 図１３は、本発明の実施形態に係る復号器の構造を示す概略図二である。 図１４は、本発明の実施形態に係る符号器の構造を示す概略図一である。 図１５は、本発明の実施形態に係る符号器の構造を示す概略図二である。
本発明の実施形態の特徴及び技術内容をより詳しく理解するために、以下、図面を参照しながら本発明の実施形態の実現を詳細に説明する。添付された図面はただ説明するために用いられ、本発明を限定するものではない。
イントラ予測において、イントラ領域ベーステンプレートマッチング技術が利用される。図１は、イントラ領域ベーステンプレートマッチングにおけるフレームの配列を示す概略図である。図１に示されたように、現在のブロックＢにとって、ＴｃはＢのテンプレートである。Ｂを符号化するとき、再構成ブロックにおける各々のテンプレートをトラバースし、各再構成ブロックのテンプレートにおける対応位置のサンプル値とＢのテンプレートにおける対応位置のサンプル値との間の差分二乗和を計算し、差分二乗和の最小値を有するテンプレートＴｒをＢにマッチする画像ブロックのテンプレートとして称し、Ｔｒに対応する再構成ブロックＰのサンプル値をＢの予測値として確定する。
上記方法では、再構成ブロックのテンプレートを考慮に入れたが、再構成ブロックの数が比較的に少ないため、現在のブロックにマッチする画像ブロックを見つけることは難しい。上記欠点を克服するために、回転イントラブロックコピーを利用する。図２は、回転イントラブロックコピーにおけるフレームの配列を示す概略図である。図３に示されたように、図２－（ａ）は回転前の再構成ブロックと現在のブロックの配列を示す概略図であり、図２－（ｂ）回転後の再構成ブロックと現在のブロックの配列を示す概略図である。図２－（ａ）と図２－（ｂ）において、Ｂは現在のブロックであり、Ｂの頂点座標はｘ０である。Ｐが最終的に確定された現在のブロックにマッチする画像ブロックであり、且つＰの頂点座標がхであると仮設すると、Ｂのサンプル行列はＰ（ｘ０）と表記される。符号器は符号化済みのサンプル行列Ω（ｘ０）（再構成ブロックのサンプル行列に相当する）を利用して、Ｐ（ｘ０）を予測する。イントラブロックコピー技術とは、Ｐ（ｘ）の各サンプルのサンプル値とＰ（ｘ０）の各サンプルのサンプル値との差分二乗和が最小となるよう、Ω（ｘ０）において頂点がхである再構成ブロックを見つけ、そして、Ｐを見つけることである。
回転イントラブロックコピー技術では、画像ブロックを任意の角度θで回転させることができる。Ｐθ（ｘ）は、頂点がхである画像ブロックをθで回転させた後に得られた画像ブロックのサンプル行列を表す。Ｐθ（ｘ）の各サンプルのサンプル値とＰ（ｘ０）の各サンプルのサンプル値との差分二乗和が最小となるよう、Ω（ｘ０）において頂点がхである画像ブロックを見つけ、そして、Ｐθ（ｘ）をＢの予測値として確定する。
しかしながら、上記回転イントラブロックコピー技術では、画像ブロック全体に対して計算を行うため、計算が複雑であり、符号化・復号化の効率が悪い。ビデオ符号化・復号化の効率を向上させるために、本発明の実施形態において、予測値の確定方法が提供される。
本発明の実施形態において、予測値の確定方法が提供され、当該方法は復号器に応用される。図３は、本発明の実施形態に係る選択可能な予測値の確定方法を示すフローチャートである。図３に示されたように、上記予測値の確定方法は以下の内容を含むことができる。
Ｓ１０１、ビットストリームを解析することによって現在のブロックの復号化パラメータを取得する。復号化パラメータは現在のブロックを復号化する過程において使用されるパラメータを含む。
イントラ予測の過程において、符号器は、現在のブロックを復号化する過程において使用される復号化パラメータをビットストリームに書き込み、ビットストリームを復号器に送信する。復号器は上記ビットストリームを受信した後、ビットストリームを解析することによって現在のブロックの復号化パラメータを取得する。
Ｓ１０２、復号化パラメータは現在のブロックが回転テンプレートモード（ｒｏｔａｔｅ ｔｅｍｐｌａｔｅ ｍｏｄｅ）を使用すると指示する場合、現在のブロックの第一テンプレートを取得する。第一テンプレートは現在のブロックの隣接再構成サンプル（ｎｅｉｇｈｂｏｕｒｉｎｇ ｒｅｃｏｎｓｔｒｕｃｔｅｄ ｓａｍｐｌｅ）を含む。
本実施形態において、復号化パラメータは、符号化段階に使用される予測モードフラグであることができる。例えば、ｆｌａｇ（予測モードフラグ）＝１の場合、回転テンプレートモードが符号化段階に使用されることを表す。復号器は回転テンプレートモードを使用すると確定した場合、予め設定された第一テンプレートの形状に基づいて、現在のブロックの隣接再構成サンプルのうちの、形状の範囲内に含まれているサンプルを第一テンプレートにおけるサンプルとする。
例示的に、現在のブロックの上隣接再構成サンプルと左隣接再構成サンプルを第一テンプレートの像素とする。
Ｓ１０３、現在のブロックの参照領域を確定する。
現在のブロックの参照領域を確定するために、一つの可能な実施形態において、復号器は、現在のブロックが位置する画像に含まれ且つ現在のブロックが復号化される前に再構成された全部又は一部のサンプルを、参照領域として確定する。もう一つの可能な実施形態において、復号器は、現在のブロックが位置する画像以外の他の画像における再構成された全部又は一部のサンプルを、参照領域として確定する。
得られた候補テンプレート（ｃａｎｄｉｄａｔｅ ｔｅｍｐｌａｔｅ）が依然として参照領域に位置するように、一つの選択可能な実施形態において、復号器は回転角度を取得し、回転角度に基づいて候補テンプレートを候補テンプレートの頂点を中心として回転させ、回転後の再構成ブロックの参照領域を超えた部分をインターセプト（又は除外）する。インターセプト後に得られた再構成ブロックを回転可能な再構成ブロックとして確定し、回転可能な再構成ブロックのサンプル行列を取得し、回転可能な再構成ブロックのサンプル行列で再構成ブロックのサンプル行列を更新する。
図４は、本発明の実施形態に係る選択可能なイントラテンプレートの回転の配列を示す概略図である。図４に示されたように、Ｂは現在のブロックであり、ｂはＢのテンプレートであり、Ｂの頂点座標ｘ０に対応する画像ブロックのサンプル行列はＰ（ｘ０）である。例えば、図５における再構成ブロックＰに対して、回転を経て、回転後の再構成ブロックＰとＰのテンプレートｐがちょうど参照領域を超えていない。Ｐの上の行と左の行は回転すると、いずれも参照領域を超える。そのため、再構成ブロックに対して、高さがａである再構成ブロック領域を上側の境界から下へインターセプトし、高さがａである再構成ブロック領域を左側の境界から右へインターセプトする。インターセプト後の残りの領域を回転可能な再構成ブロックとして確定し、回転可能な再構成ブロックで再構成ブロックを更新する。
Ｓ１０４、参照領域において、参照テンプレート処理パラメータ（ｒｅｆｅｒｅｎｃｅ ｔｅｍｐｌａｔｅ ｐｒｏｃｅｓｓｉｎｇ ｐａｒａｍｅｔｅｒ）に基づいて、第一テンプレートのマッチングテンプレート（ｍａｔｃｈｉｎｇ ｔｅｍｐｌａｔｅ）を確定する。参照テンプレート処理パラメータは、復号化パラメータに含まれ、且つマッチングテンプレートを構築するために用いられるパラメータである。
現在のブロックに最もマッチするマッチングブロック（ｍａｔｃｈｉｎｇ ｂｌｏｃｋ）を見つけるために、参照テンプレート処理パラメータを利用して第一テンプレートに対応する候補テンプレートのサンプル行列を処理し、処理後のマッチングテンプレートを取得することができる。参照テンプレート処理パラメータが複数ある場合、複数のマッチングテンプレートを取得することができる。これで、複数のマッチングテンプレートを取得して現在のブロックの第一テンプレートと比較することができる。
参照テンプレート処理パラメータはテンプレートの回転角度を指示することができ、例えば、時計回り回転角度又は反時計回り回転角度が挙げられる。具体的な選択は実際の状況に応じて行われ、本実施形態では特に限定されない。
また、当該参照テンプレート処理パラメータは移動パラメータであってもよく、移動パラメータは、移動距離と移動方向を含むことができる。復号器は、移動距離と移動方向に基づいて候補テンプレートを移動させ、マッチングテンプレートを取得する。例えば、復号器は候補テンプレートを上に又は下に平行移動させる。具体的な選択は実際の状況に応じて行われ、本実施形態では特に限定されない。
本実施形態において、参照テンプレート処理パラメータが回転角度である場合、一つの選択可能な実施形態において、図５は、本発明の実施形態に係る別の選択可能な予測値の確定方法を示すフローチャートである。図５に示されたように、復号器が参照領域において、参照テンプレート処理パラメータに基づいて第一テンプレートのマッチングテンプレートを確定することは、以下の内容を含む。
Ｓ２０１、復号器は参照領域における１つ又は複数の候補マッチング位置（ｃａｎｄｉｄａｔｅ ｍａｔｃｈｉｎｇ ｐｏｓｉｔｉｏｎ）に対して、回転角度に基づいて、第一テンプレートと同じ形状を有する１つ又は複数の候補テンプレートを構築する。
本実施形態において、参照テンプレート処理パラメータは初期角度値と間隔ステップサイズ値（ｉｎｔｅｒｖａｌ ｓｔｅｐ－ｓｉｚｅ ｖａｌｕｅ）を備える。復号器は、初期角度値に等しい初期値と間隔ステップサイズ値で示された間隔角度（ｉｎｔｅｒｖａｌ ａｎｇｌｅ）との合計を回転角度とする。
また、回転角度は３６０度より小さい。
例えば、初期角度値が３０度で、間隔ステップサイズ値が３０度である場合、回転角度は３０度、６０度、９０度、１２０度、１５０度、１８０度、２１０度、２４０度、２７０度、３００度と３３０度を含むことができる。
具体的に、復号器は、候補マッチング位置を頂点として、第一テンプレートと同じサイズを有する形状を候補マッチングポイントを中心として回転角度で回転させた後、形状の範囲内に含まれているサンプルを候補テンプレートとする。
復号器は回転角度に基づいて、予め設定された第一フィルタで参照領域における１つ又は複数の再構成サンプルに対してフィルタ処理を行うことによって、候補テンプレートにおけるサンプル値を得る。第一フィルタはローパスフィルタ又は補間フィルターである。具体的な選択は実際の状況に応じて行われ、本実施形態では特に限定されない。
マッチングテンプレートを取得した後、復号器は、候補テンプレートにおける各サンプルのサンプル値と、回転角度と、２つの隣接サンプルの間の距離とに基づいて、補間法で候補テンプレートを計算する。
例えば、図６は、本発明の実施形態に係る別の選択可能なイントラテンプレートの回転の配列を示す概略図である。図６に示されたように、Ｂは現在のブロックであり、Ｂの頂点座標はｘ０である。Ｐが現在のブロックにマッチする画像ブロックであり、Ｐの頂点座標がхである場合、Ｂのサンプル行列はＰ（ｘ０）と表記される。復号器は、符号化済みのサンプル行列Ω（ｘ０）を利用してＰ（ｘ０）を予測する。予測の前に、予め設定された回転角度θに基づいてＰのテンプレートｐをＰの頂点を中心として回転させることによって、図７に示されたＰの回転後のテンプレートｐを得る。Ω（ｘ０）において頂点がхである画像ブロックのテンプレートにマッチする候補テンプレート、即ち図７におけるｐを見つけるために、ｐ（ｘ）の各サンプルのサンプル値とｂ（ｘ０）の各サンプルのサンプル値との差分二乗和を最小にする必要がある。それで、Ｐを見つけることができる。
ｐ（ｘ）の各サンプルのサンプル値とｂ（ｘ０）の各サンプルのサンプル値との差分二乗和を計算する前に、ｐ（ｘ）を先に確定する必要がある。ｐ（ｘ）を確定するために、図７は、本発明の実施形態に係る選択可能なイントラテンプレートのサンプルの回転の構造を示す概略図である。図７に示されたように、点線は回転前のテンプレートｐを示し、実線は回転後のテンプレートｐを示す。回転前のテンプレートｐで、点ａのサンプル値ｆ（ａ）、点ｂのサンプル値ｆ（ｂ）、点ｃのサンプル値ｆ（ｃ）と点ｄのサンプル値ｆ（ｄ）を取得し、且つ２つの隣接サンプル値の間の距離ｘを取得する。バイリニア補間法で点ｐ（回転後の点ｂ）のサンプル値を計算する。図８は、本発明の実施形態に係る図７におけるイントラテンプレートの一部のサンプルの回転の構造を示す概略図である。図８に示されたように、点ｐのサンプル値を計算するための公式は以下のようである。
Figure 2022553624000002
このように、最後に、回転角度がθである候補テンプレートのサンプル行列を得ることができる。
Ｓ２０２、復号器は、１つ又は複数の候補テンプレートと第一テンプレートとの間のマッチング誤差を計算し、マッチング誤差が最小の候補テンプレートをマッチングテンプレートとする。１つ又は複数の候補マッチング位置は参照領域において予め設定された１つ又は複数のサンプル位置であり、サンプル位置は整数サンプル位置又は分数サンプル位置である。
具体的に、復号器はマッチング誤差基準に基づいて、１つ又は複数の候補テンプレートと第一テンプレートとの間のマッチング誤差を計算する。マッチング誤差基準は誤差平方和、平均二乗誤差、差分絶対値和、平均絶対誤差、構造的類似性のうちの少なくとも１つを備える。具体的な選択は実際の状況に応じて行われ、本実施形態では特に限定されない。
処理パラメータが時計回り回転角度であることを例として、実際の応用では、復号器は、第一テンプレートに対応する候補テンプレートを確定し、参照領域において、予め設定された回転角度に基づいて候補テンプレートを回転させる。画像ブロックの回転と比べて、テンプレートに対して回転を行う。テンプレートにおけるサンプルの数が画像ブロックにおけるサンプルの数より少ないため、テンプレートに対して回転を行うことによって、回転後のテンプレートにおける各サンプルのサンプル値の計算量を減らすことができる。
Ｓ１０５、マッチングテンプレートに基づいて、現在のブロックのマッチングブロックを確定する。
本実施形態において、復号器がマッチングテンプレートに基づいて現在のブロックのマッチングブロックを確定する過程は以下のようである。復号器は、マッチングテンプレートによって指示されたポジションに位置し且つ現在のブロックと同じサイズを有する領域に含まれているマッチングサンプルを、マッチングブロックにおけるサンプルとする。マッチングテンプレートとマッチングブロックとの間の相対位置は現在のブロックと第一テンプレートとの間の相対位置と同じである。
本実施形態において、復号器は、予め設定された第二フィルタで参照領域における１つ又は複数のサンプルに対してフィルタ処理を行うことによって、マッチングブロックにおけるサンプル値を得る。第二フィルタはローパスフィルタ又は補間フィルターである。具体的な選択は実際の状況に応じて行われ、本実施形態では特に限定されない。
Ｓ１０６、マッチングブロックに基づいて、現在のブロックの予測値を確定する。
本実施形態において、復号器は、マッチングブロックを現在のブロックの予測値とする。又は、復号器は、線形モデルでマッチングブロックにおけるサンプル値に対して加重処理を行うことによって、現在のブロックの予測値を得る。線形モデルパラメータは、予め設定されたパラメータ、予め設定されたルールに基づいて導き出されたパラメータ、復号化パラメータに含まれている線形モデルパラメータのうちの１つである。具体的な選択は実際の状況に応じて行われ、本実施形態では特に限定されない。
さらに、復号器は、マッチングブロックに基づいて現在のブロックの予測値を確定した後、ビットストリームを解析することによって、現在のブロックの予測残差を取得する。その後、復号器は、現在のブロックの予測値と予測残差に基づいて、現在のブロックにおけるサンプルの再構成値を得る。
本発明に係るサンプル行列は彩度値のサンプル行列であってもよく、輝度値のサンプル行列であってもよい。それについては、本発明の実施形態では限定されない。
ビットストリームから回転テンプレートモードを取得し、回転テンプレートモードのもとで、現在のブロックの第一テンプレートを取得し且つ現在のブロックの参照領域を確定する。参照領域において、参照テンプレート処理パラメータに基づいて、第一テンプレートのマッチングテンプレートを確定する。次に、マッチングテンプレートに基づいて現在のブロックにマッチするマッチングブロックを確定し、現在のブロックの予測値を確定する。それで、画像ブロックのテンプレートを処理することによってより多くのテンプレートを取得し、より多くのテンプレートを現在のブロックのテンプレートと比較して、現在のブロックに最もマッチするマッチングブロックを見つけることができる。それは、現在のブロックに最もマッチするマッチングブロックをより正確に確定し、現在のブロックの予測値を確定することに有益である。テンプレートを回転させるという計算方法を利用することで、符号化・復号化の計算量を減らし、符号化・復号化の効率を高めることができる。
本発明の実施形態において、予測値の確定方法がさらに提供され、当該方法は符号器に応用される。図９は、本発明の実施形態に係るもう一つの選択可能な予測値の確定方法を示すフローチャートである。図９に示されたように、上記予測値の確定方法は以下の内容を含むことができる。
Ｓ３０１、符号器は、現在のブロックと現在のブロックの第一テンプレートとの間のデータ依存性を取得する。第一テンプレートは現在のブロックの隣接再構成サンプルを含む。
符号器は現在のブロックの隣接再構成サンプルを取得し、且つ現在のブロックの隣接再構成サンプルを現在のブロックの第一テンプレートとして確定する。その後、符号器は、現在のブロックと現在のブロックの第一テンプレートとの間のデータ依存性を取得する。
例示的に、図１０に示されたように、図１０は、現在のブロックと現在のブロックの第一テンプレートとの間の構造を示す概略図である。符号器は、現在のブロックと現在のブロックの第一テンプレートとの間のデータ依存性を取得する。
Ｓ３０２、データ依存性が予め設定された閾値以上である場合、符号器は回転テンプレートモードを使用する。
符号器内に予め設定された閾値が予めに設定される。現在のブロックと現在のブロックの第一テンプレートとの間のデータ依存性を取得した後、符号器はデータ依存性と予め設定された閾値とを比較する。データ依存性が予め設定された閾値以上であると判断した場合、符号器は回転テンプレートモードを使用する。さらに、データ依存性が予め設定された閾値より小さいと判断した場合、符号器は従来の角度予測モードを使用する。
Ｓ３０３、回転テンプレートモードのもとで、符号器は現在のブロックの参照領域を確定する。
符号器によって実行されるＳ３０３の過程は、復号器によって実行されるＳ１０３の過程と同じであるため、ここで繰り返されないことに留意されたい。
Ｓ３０４、符号器は参照領域において、参照テンプレート処理パラメータに基づいて、第一テンプレートのマッチングテンプレートを確定する。
符号器によって実行されるＳ３０４の過程は、復号器によって実行されるＳ１０４の過程と同じであるため、ここで繰り返されないことに留意されたい。
Ｓ３０５、符号器はマッチングテンプレートに基づいて、現在のブロックのマッチングブロックを確定する。
符号器によって実行されるＳ３０５の過程は、復号器によって実行されるＳ１０５の過程と同じであるため、ここで繰り返されないことに留意されたい。
Ｓ３０６、符号器はマッチングブロックに基づいて、現在のブロックの予測値を確定する。
符号器によって実行されるＳ３０６の過程は、復号器によって実行されるＳ１０６の過程と同じであるため、ここで繰り返されないことに留意されたい。
さらに、符号器は現在のブロックの予測値を確定した後、現在のブロックの予測値とオリジナル画像に対応の取得されたサンプル値とに基づいて現在のブロックの予測残差を確定する。現在のブロックの予測残差と、回転テンプレートモードを使用すると指示する復号化パラメータとをビットストリームに書き込む。これで、復号器は、本発明の実施形態に係る符号器によって使用される予測値の確定方法と同じな予測値の確定方法を利用して、現在のブロックの予測値を確定する。
符号器は現在のブロックと現在のブロックの第一テンプレートとの間のデータ依存性を確定し、データ依存性が予め設定された閾値以上である場合のみ、回転テンプレートモードを使用する。現在のブロックと現在のブロックの第一テンプレートとの間のデータ依存性が低い場合、マッチされたマッチングテンプレートに対応するマッチングブロックが一般的に現在のブロックとの類似性が低い。そのため、その場合に回転テンプレートモードを使用することはふさわしくない。現在のブロックと現在のブロックの第一テンプレートとの間のデータ依存性が高い場合のみ、回転テンプレートモードを使用する。それによって、検索時間を減らし、検索効率を高める。
以下、実例を挙げて上記１つ又は複数の実施形態に記載の予測値の確定方法について説明する。
図１１は、本発明の実施形態に係る選択可能な予測値の確定方法の実例を示すフローチャートである。図１１に示されたように、上記予測値の確定方法は以下の内容を含むことができる。
Ｓ４０１：符号器はイントラ回転テンプレートマッチング（ｉｎｔｒａ ｒｏｔａｔｅ ｔｅｍｐｌａｔｅ ｍａｔｃｈｉｎｇ）の方法を利用して、再構成ブロックのテンプレートを回転させる。符号器はイントラ角度予測（ｉｎｔｒａ ａｎｇｌｅ ｐｒｅｄｉｃｔｉｏｎ）の方法をさらに利用する。
Ｓ４０２：符号器は再構成ブロックのテンプレートを回転させた後、検索範囲内の全ての現在のブロックと同じサイズを有する再構成ブロックのテンプレート（再構成ブロックによって取得される）をトラバースし、各回転後のテンプレートと現在のブロックのテンプレートとの差分二乗和を計算し、３０度の初期値と３０度のステップサイズ値、且つ３６０度より小さい角度値の回転角度で回転させて、回転後のテンプレートを得て、各回転角度に対応するテンプレートと現在のブロックのテンプレートとの差分二乗和を計算する。
Ｓ４０３：符号器は差分二乗和のうちの最小値に対応するテンプレートを取って、当該テンプレートが属する再構成ブロックのサンプル値を、現在のブロックの予測値とする。
Ｓ４０４：符号器は取得された予測値に基づいて予測残差を取得し、量子化、変化及びエントロピー符号化に基づいてイントラ回転テンプレートマッチングの方法を利用するコスト（ｃｏｓｔ）１を取得する。符号器は角度予測を利用するコスト（ｃｏｓｔ）２をさらに取得する。
Ｓ４０５：符号器はコスト１とコスト２を比較する。コスト１のほうが小さい場合、符号器は回転テンプレートマッチングによって取得された予測情報を保存し、コスト２のほうが小さい場合、従来の角度予測によって取得された予測情報を保存する。
前記実施形態と同じ発明思想に基づいて、図１２を参照すると、図１２は、本発明の実施形態に係る復号器１の構造を示す概略図一である。当該復号器１は解析モジュール１０、第一取得モジュール１１及び第一確定モジュール１２を含む。
解析モジュール１０は、ビットストリームを解析することによって現在のブロックの復号化パラメータを取得するように構成されている。復号化パラメータは現在のブロックを復号化する過程において使用されるパラメータを含む。
第一取得モジュール１１は、現在のブロックが回転テンプレートモードを使用すると復号化パラメータによって指示される場合、現在のブロックの第一テンプレートを取得するように構成されている。第一テンプレートは現在のブロックの隣接再構成サンプルを含む。
第一確定モジュール１２は、現在のブロックの参照領域を確定し、参照領域において、参照テンプレート処理パラメータに基づいて第一テンプレートのマッチングテンプレートを確定し、マッチングテンプレートに基づいて現在のブロックのマッチングブロックを確定し、マッチングブロックに基づいて現在のブロックの予測値を確定するように構成されている。参照テンプレート処理パラメータは復号化パラメータに含まれ、且つマッチングテンプレートを構築するために用いられるパラメータである。
上記解決策において、第一取得モジュール１１は具体的に、予め設定された第一テンプレートの形状に基づいて、現在のブロックの隣接再構成サンプルのうちの、形状の範囲内に含まれているサンプルを第一テンプレートにおけるサンプルとするように構成されている。
上記解決策において、第一確定モジュール１２は具体的に、現在のブロックが位置する画像に含まれ、且つ現在のブロックが復号化される前に再構成された全部又は一部のサンプルを、参照領域として確定するように構成されている。
上記解決策において、第一確定モジュール１２は具体的に、現在のブロックが位置する画像以外の他の画像における再構成された全部又は一部のサンプルを、参照領域として確定するように構成されている。
上記解決策において、参照テンプレート処理パラメータはテンプレートの回転角度を指示する。
上記解決策において、第一確定モジュールは、第一構築サブモジュールと第一計算サブモジュールをさらに含む。
第一構築サブモジュールは、参照領域における１つ又は複数の候補マッチング位置に対して、回転角度に基づいて、第一テンプレートと同じ形状を有する１つ又は複数の候補テンプレートを構築するように構成されている。
第一計算サブモジュールは、１つ又は複数の候補テンプレートと第一テンプレートとの間のマッチング誤差を計算し、マッチング誤差が最小の候補テンプレートをマッチングテンプレートとするように構成されている。
上記解決策において、１つ又は複数の候補マッチング位置は参照領域において予め設定された１つ又は複数のサンプル位置であり、サンプル位置は整数サンプル位置又は分数サンプル位置である。
上記解決策において、第一構築サブモジュールは具体的に、候補マッチング位置を頂点として、第一テンプレートと同じサイズを有する形状を候補マッチングポイントを中心として回転角度で回転させた後、形状の範囲内に含まれているサンプルを候補テンプレートとするように構成されている。
上記解決策において、第一確定モジュール１２は、第一フィルタサブモジュールをさらに含む。
第一フィルタサブモジュールは、回転角度に基づいて、予め設定された第一フィルタで参照領域における１つ又は複数の再構成サンプルに対してフィルタ処理を行うことによって、候補テンプレートにおけるサンプル値を得るように構成されている。
上記解決策において、第一確定モジュール１２はさらに、マッチングテンプレートによって指示されたポジションに位置し、且つ現在のブロックと同じサイズを有する領域に含まれているマッチングサンプルをマッチングブロックにおけるサンプルとするように構成されている。マッチングテンプレートとマッチングブロックとの間の相対位置は現在のブロックと第一テンプレートとの間の相対位置と同じである。
上記解決策において、第一フィルタサブモジュールはさらに、予め設定された第二フィルタで参照領域における１つ又は複数のサンプルに対してフィルタ処理を行うことによって、マッチングブロックにおけるサンプル値を得るように構成されている。
上記解決策において、第一フィルタはローパスフィルタ又は補間フィルターである。
上記解決策において、第二フィルタはローパスフィルタ又は補間フィルターである。
上記解決策において、参照テンプレート処理パラメータは初期角度値と間隔ステップサイズ値を備える。初期角度値に等しい初期値と間隔ステップサイズ値で示された間隔角度との合計は回転角度とされる。
上記解決策において、回転角度が３６０度より小さい。
上記解決策において、第一計算サブモジュールはさらに、マッチング誤差基準に基づいて、１つ又は複数の候補テンプレートと第一テンプレートとの間のマッチング誤差を計算するように構成されている。
上記解決策において、マッチング誤差基準は誤差平方和、平均二乗誤差、差分絶対値和、平均絶対誤差、構造的類似性のうちの少なくとも１つを備える。
上記解決策において、第一確定モジュール１２はさらに、マッチングブロックを現在のブロックの予測値とし、又は、線形モデルでマッチングブロックにおけるサンプル値に対して加重処理を行うことによって、現在のブロックの予測値を得るように構成されている。線形モデルパラメータは、予め設定されたパラメータ、予め設定されたルールに基づいて導き出されたパラメータ、復号化パラメータに含まれている線形モデルパラメータのうちの１つである。
上記解決策において、解析モジュール１０はさらに、ビットストリームを解析することによって、現在のブロックの予測残差を取得するように構成されている。
第一確定モジュール１２はさらに、現在のブロックの予測値と予測残差に基づいて、現在のブロックにおけるサンプルの再構成値を得るように構成されている。
本実施形態において、「ユニット」は、回路の一部、プロセッサの一部、プログラムの一部又はソフトウェアの一部などであり得ることが理解され得る。もちろん、「ユニット」は、モジュール又は非モジュールであることもできる。
また、本実施形態に係る各構成ユニットは、１つの処理ユニットに集積されてもよいし、各ユニットが単独に物理的に存在してもよいし、２つ以上のユニットは１つのユニットに集積されてもよい。上記集積ユニットは、ハードウェア又はソフトウェア機能モジュールの形式で実現されることができる。
集積ユニットは、ソフトウェアの機能モジュールとして実現され、且つ独立の製品として販売されたり使用されたりする場合、コンピュータ可読記録媒体に記憶されてもよい。この理解によれば、本発明の技術的解決策について、本質的な部分、又は従来技術に貢献できた部分、又は当該技術的解決策の全部又は一部は、ソフトウェア製品として表現され得る。このコンピュータソフトウェア製品は、記憶媒体に記憶されており、１つのコンピュータ（パソコン、サーバー、又はネットワークデバイスなどであってもよい）又はプロセッサに本発明の各実施形態に記載の方法の全部又は一部のステップを実行させるための複数の命令を含む。前記記憶媒体は、ユニバーサルシリアルバス（ｕｎｉｖｅｒｓａｌ ｓｅｒｉａｌ ｂｕｓ、ＵＳＢ）フラッシュディスク、モバイルハードディスク、読み取り専用メモリ（Ｒｅａｄ－Ｏｎｌｙ Ｍｅｍｏｒｙ、ＲＯＭ）、ランダムアクセスメモリ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ＲＡＭ）、磁気ディスク又は光ディスクなどの各種のプログラムコードを記憶可能な媒体を含む。
図１３は、本発明の実施形態に係る復号器の構造を示す概略図二である。図１３に示されたように、本発明の実施形態において、復号器１が提供される。復号器１は第一プロセッサ１４と第一プロセッサ１４によって実行可能な命令を記憶する第一記憶媒体１５とを含む。第一記憶媒体１５は第一通信バス１６を介して第一プロセッサ１４に依存して操作を実行する。第一プロセッサ１４によって実行されると、命令は上記復号器に対応する予測値の確定方法を実行する。
実際の応用では、端末における各コンポーネントは第一通信バス１６を介して結合されている。第一通信バス１６はこれらのコンポーネントの間の接続と通信を実現するために用いられる。第一通信バス１６はデータバス以外に、電力バス、制御バス及びステータス信号バスをさらに含む。ただし、明確に説明するために、図１３において、各種類のバスがいずれも通信バス１６と表記される。
本発明の実施形態において、第一コンピュータ記憶媒体が提供される。当該第一コンピュータ記憶媒体は実行可能な命令を記憶する。実行可能な命令が１つ又は複数のプロセッサによって実行されると、第一プロセッサが上記１つ又は複数の実施形態における符号器に対応の予測値の確定方法を実行する。
前記実施形態と同じ発明思想に基づいて、図１４を参照すると、図１４は、本発明の実施形態に係る符号器２の構造を示す概略図一である。当該符号器２は第二取得モジュール２０と第二確定モジュール２１を含む。
第二取得モジュール２０は、現在のブロックと現在のブロックの第一テンプレートとの間のデータ依存性を取得するように構成されている。第一テンプレートは現在のブロックの隣接再構成サンプルを含む。
第二確定モジュール２１は、データ依存性が予め設定された閾値以上である場合に回転テンプレートモードを使用し、回転テンプレートモードのもとで現在のブロックの参照領域を確定し、参照領域において、参照テンプレート処理パラメータに基づいて第一テンプレートのマッチングテンプレートを確定し、マッチングテンプレートに基づいて現在のブロックのマッチングブロックを確定し、マッチングブロックに基づいて現在のブロックの予測値を確定するように構成されている。
上記解決策において、第二取得モジュール２０は具体的に、予め設定された第一テンプレートの形状に基づいて、現在のブロックの隣接再構成サンプルのうちの、形状の範囲内に含まれているサンプルを第一テンプレートにおけるサンプルとするように構成されている。
上記解決策において、第二確定モジュール２１は具体的に、現在のブロックが位置する画像に含まれ、且つ現在のブロックが復号化される前に再構成された全部又は一部のサンプルを、参照領域として確定するように構成されている。
上記解決策において、第二確定モジュール２１は具体的に、現在のブロックが位置する画像以外の他の画像における再構成された全部又は一部のサンプルを、参照領域として確定するように構成されている。
上記解決策において、参照テンプレート処理パラメータはテンプレートの回転角度を指示する。
上記解決策において、第二確定モジュールは、第二構築サブモジュールと第二計算サブモジュールをさらに含む。
第二構築サブモジュールは、参照領域における１つ又は複数の候補マッチング位置に対して、回転角度に基づいて、第一テンプレートと同じ形状を有する１つ又は複数の候補テンプレートを構築するように構成されている。
第二計算サブモジュールは、１つ又は複数の候補テンプレートと第一テンプレートとの間のマッチング誤差を計算し、マッチング誤差が最小の候補テンプレートをマッチングテンプレートとするように構成されている。
上記解決策において、１つ又は複数の候補マッチング位置は参照領域において予め設定された１つ又は複数のサンプル位置であり、サンプル位置は整数サンプル位置又は分数サンプル位置である。
上記解決策において、第二構築サブモジュールは具体的に、候補マッチング位置を頂点として、第一テンプレートと同じサイズを有する形状を候補マッチングポイントを中心として回転角度で回転させた後、形状の範囲内に含まれているサンプルを候補テンプレートとするように構成されている。
上記解決策において、第二確定モジュール２１は、第二フィルタサブモジュールをさらに含む。
第二フィルタサブモジュールは、回転角度に基づいて、予め設定された第一フィルタで参照領域における１つ又は複数の再構成サンプルに対してフィルタ処理を行うことによって、候補テンプレートにおけるサンプル値を得るように構成されている。
上記解決策において、第二確定モジュール２１はさらに、マッチングテンプレートによって指示されたポジションに位置し、且つ現在のブロックと同じサイズを有する領域に含まれているマッチングサンプルをマッチングブロックにおけるサンプルとするように構成されている。マッチングテンプレートとマッチングブロックとの間の相対位置は現在のブロックと第一テンプレートとの間の相対位置と同じである。
上記解決策において、第二フィルタサブモジュールはさらに、予め設定された第二フィルタで参照領域における１つ又は複数のサンプルに対してフィルタ処理を行うことによって、マッチングブロックにおけるサンプル値を得るように構成されている。
上記解決策において、第一フィルタはローパスフィルタ又は補間フィルターである。
上記解決策において、第二フィルタはローパスフィルタ又は補間フィルターである。
上記解決策において、参照テンプレート処理パラメータは初期角度値と間隔ステップサイズ値を備える。初期角度値に等しい初期値と間隔ステップサイズ値で示された間隔角度との合計は回転角度とされる。
上記解決策において、回転角度が３６０度より小さい。
上記解決策において、第二計算サブモジュールはさらに、マッチング誤差基準に基づいて、１つ又は複数の候補テンプレートと第一テンプレートとの間のマッチング誤差を計算するように構成されている。
上記解決策において、マッチング誤差基準は誤差平方和、平均二乗誤差、差分絶対値和、平均絶対誤差、構造的類似性のうちの少なくとも１つを備える。
上記解決策において、第二確定モジュール２１はさらに、マッチングブロックを現在のブロックの予測値とし、又は、線形モデルでマッチングブロックにおけるサンプル値に対して加重処理を行うことによって、現在のブロックの予測値を得るように構成されている。線形モデルパラメータは、予め設定されたパラメータ、予め設定されたルールに基づいて導き出されたパラメータ、復号化パラメータに含まれている線形モデルパラメータのうちの１つである。
上記解決策において、符号器２は書き込みモジュールをさらに含む。
書き込みモジュールは、現在のブロックの予測残差と、回転テンプレートモードを使用すると指示する復号化パラメータとをビットストリームに書き込むように構成されている。予測残差は、現在のブロックの予測値とオリジナル画像に対応の取得されたサンプル値とに基づいて確定される。
本実施形態において、「ユニット」は、回路の一部、プロセッサの一部、プログラムの一部又はソフトウェアの一部などであり得ることが理解され得る。もちろん、「ユニット」は、モジュール又は非モジュールであることもできる。
また、本実施形態に係る各構成ユニットは、１つの処理ユニットに集積されてもよいし、各ユニットが単独に物理的に存在してもよいし、２つ以上のユニットは１つのユニットに集積されてもよい。上記集積ユニットは、ハードウェア又はソフトウェア機能モジュールの形式で実現されることができる。
集積ユニットは、ソフトウェアの機能モジュールとして実現され、且つ独立の製品として販売されたり使用されたりする場合、コンピュータ可読記録媒体に記憶されてもよい。この理解によれば、本発明の技術的解決策について、本質的な部分、又は従来技術に貢献できた部分、又は当該技術的解決策の全部又は一部は、ソフトウェア製品として表現され得る。このコンピュータソフトウェア製品は、記憶媒体に記憶されており、１つのコンピュータ（パソコン、サーバー、又はネットワークデバイスなどであってもよい）又はプロセッサに本発明の各実施形態に記載の方法の全部又は一部のステップを実行させるための複数の命令を含む。前記記憶媒体は、ユニバーサルシリアルバス（ＵＳＢ）フラッシュディスク、モバイルハードディスク、読み取り専用メモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）、磁気ディスク又は光ディスクなどの各種のプログラムコードを記憶可能な媒体を含む。
図１５は、本発明の実施形態に係る符号器の構造を示す概略図二である。図１５に示されたように、本発明の実施形態において、符号器２が提供される。符号器２は、第二プロセッサ２３と第二プロセッサ２３によって実行可能な命令を記憶する第二記憶媒体２４とを含む。第二記憶媒体２４は第二通信バス２５を介して第二プロセッサ２３に依存して操作を実行する。第二プロセッサ２３によって実行されると、命令は上記符号器に対応する的予測値の確定方法を実行する。
実際の応用では、端末における各コンポーネントは第二通信バス２５を介して結合されている。第二通信バス２５はこれらのコンポーネントの間の接続と通信を実現するために用いられる。第二通信バス２５はデータバス以外に、電力バス、制御バス及びステータス信号バスをさらに含む。ただし、明確に説明するために、図１５において、各種類のバスがいずれも第二通信バス２５と表記される。
本発明の実施形態において、第二コンピュータ記憶媒体が提供される。当該第二コンピュータ記憶媒体は実行可能な命令を記憶する。実行可能な命令が１つ又は複数のプロセッサによって実行されると、プロセッサが上記１つ又は複数の実施形態における符号器に対応の予測値の確定方法を実行する。
本発明の実施形態のメモリは、揮発性メモリ又は不揮発性メモリであることができ、又は揮発性メモリ及び不揮発性メモリの両方を含むことができる。不揮発性メモリは、読み取り専用メモリ（Ｒｅａｄ－Ｏｎｌｙ Ｍｅｍｏｒｙ、ＲＯＭ）、プログラム可能な読み取り専用メモリ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ－Ｏｎｌｙ Ｍｅｍｏｒｙ、ＰＲＯＭ）、消去可能なプログラム可能な読み取り専用メモリ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ－Ｏｎｌｙ Ｍｅｍｏｒｙ、ＥＰＲＯＭ）、電気的に消去可能なプログラム可能な読み取り専用メモリ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ－Ｏｎｌｙ Ｍｅｍｏｒｙ、ＥＥＰＲＯＭ）、又はフラッシュメモリ（Ｆｌａｓｈ Ｍｅｍｏｒｙ）であることができる。揮発性メモリは、外部高速キャッシュとして機能するランダムアクセスメモリ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ＲＡＭ）であることができる。例示的であるが限定的ではない例として、様々なＲＡＭが利用可能であり、例えば、スタティックランダムアクセスメモリ（Ｓｔａｔｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ＳＲＡＭ）、ダイナミックランダムアクセスメモリ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ＤＲＡＭ）、同期ダイナミックランダムアクセスメモリ（Ｓｙｎｃｈｒｏｎｏｕｓ Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ＳＤＲＡＭ）、ダブルデータレート同期ダイナミックランダムアクセスメモリ（Ｄｏｕｂｌｅ Ｄａｔａ Ｒａｔｅ Ｓｙｎｃｈｒｏｎｏｕｓ Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ＤＤＲＳＤＲＡＭ）、強化された同期ダイナミックランダムアクセスメモリ（Ｅｎｈａｎｃｅｄ Ｓｙｎｃｈｒｏｎｏｕｓ Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ＥＳＤＲＡＭ）、同期リンクダイナミックランダムアクセスメモリ（Ｓｙｎｃｈ－ｌｉｎｋ Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ＳＬＤＲＡＭ）、ダイレクトランバスランダムアクセスメモリ（Ｄｉｅｒｃｔ Ｒａｍｂｕｓ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ＤＲＲＡＭ）が挙げられる。本明細書に記載されるシステム及び方法のメモリは、これら及び他の任意の適切なタイプのメモリを含むことができるが、これらに限定されない。
プロセッサは、信号処理能力を有する集積回路チップであることができる。実施プロセスにおいて、上記方法実施形態の各ステップは、プロセッサのハードウェア形態の集積論理回路（Ｉｎｔｅｇｒａｔｅｄ Ｌｏｇｉｃ Ｃｉｒｃｕｉｔ）又はソフトウェア形態の命令によって完成されることができる。上記プロセッサは、汎用プロセッサ、デジタル信号プロセッサ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ、ＤＳＰ）、特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ、ＡＳＩＣ）、フィールドプログラム可能なゲートアレイ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ、ＦＰＧＡ）又は他のプログラム可能なロジックデバイス、ディスクリートゲート又はトランジスタロジックデバイス、ディスクリートハードウェアコンポーネントであることができる。プロセッサは、本発明の実施形態に開示された様々な方法、ステップ及び論理ブロック図を実現又は実行することができる。汎用プロセッサは、マイクロプロセッサ又は任意の従来のプロセッサなどであることができる。本発明の実施形態に開示された方法のステップは、直接にハードウェア復号化プロセッサによって実行及び完成されることができ、又は復号化プロセッサにおけるハードウェア及びソフトウェアモジュールの組み合わせによって実行及び完成されることができる。ソフトウェアモジュールは、ランダムアクセスメモリ、フラッシュメモリ、読み取り専用メモリ、プログラム可能な読み取り専用メモリ、又は電気的に消去可能なプログラム可能なメモリ、レジスタなど本技術分野のマチュアな記憶媒体に位置することができる。記憶媒体はメモリにある。プロセッサはメモリにおける情報を読み取り、プロセッサのハードウェアとともに上記方法のステップを完成する。
本発明に記載される実施形態は、ハードウェア、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード又はその組合によって実現されることができることが理解され得る。ハードウェアによって実現される場合、処理ユニットは、１つ又は複数の特定用途向け集積回路（ＡＳＩＣ）、デジタル信号処理（ＤＳＰ）、ＤＳＰデバイス（ＤＳＰ Ｄｅｖｉｃｅ、ＤＳＰＤ）、プログラム可能なロジックデバイス（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ、ＰＬＤ）、フィールドプログラム可能なゲートアレイ（ＦＰＧＡ）、汎用プロセッサ、コントローラ、マイクロコントローラ、マイクロプロセッサ、本発明に記載される機能を実行するために用いられるその他の電子ユニット又はその組合で実現することができる。
ソフトウェアによって実現される場合、本発明に記載される技術は、本発明に記載される機能を実行するためのモジュール（例えば、手順、関数など）によって実現されることができる。ソフトウェアコードはメモリに記憶され且つプロセッサで実行される。メモリは、プロセッサ内又はプロセッサの外部で実現することができる。
本明細書において、「含む」、「備える」又は他のバリアントなどの用語は非排他的な含みをカバーすることを意図するため、一連の要素を含むプロセス、方法、物品又は装置は、リストされた要素だけではなく、明確にリストされていない他の要素も含み、又はプロセス、方法、物品又は装置の固有の他の要素を含むことができる。制限がない限り、「…を含む」という文によって限定された要素を含むプロセス、方法、物品又は装置に別の同じ要素が存在することを排除しない。
上記本発明の実施形態のシーケンス番号は、実施形態の優劣を示すものではなく、ただ説明するために採用される。
上記実施形態の説明から、上記実施形態の方法が、ソフトウェアと必要な一般的なハードウェアプラットフォームによって実施されることができ、もちろん、ハードウェアによって実施されることも可能であることは当業者にとって明らかである。しかし、多くの場合、前者の方がより優れた実施態様である。この理解によれば、本発明の技術的解決策について、本質的な部分、又は従来技術に貢献できた部分は、ソフトウェア製品として表現され得る。このコンピュータソフトウェア製品は、記憶媒体（例えば、ＲＡＭ／ＲＯＭ、磁気ディスク、光ディスク）に記憶されており、１つの端末（例えば、携帯電話、コンピュータ、サーバー、又はネットワークデバイス）に本発明の各実施形態に記載の方法を実行させるための複数の命令を含む。
以上、添付図面を参照しながら本発明の実施態様を説明した。しかしながら、本発明は上記具体的な実施形態に限定されない。上記具体的な実施形態は、本発明を制限するものではなく、単に例示のためのものである。本発明の着想のもとで、本発明の主旨及び特許請求の範囲によって保護される範囲から逸脱しない限り、当業者は変更を加えることができる。これらはすべて、本発明の保護範囲に属する。
本発明の実施形態において、ビットストリームを解析することによって現在のブロックの復号化パラメータを取得し、復号化パラメータは現在のブロックを復号化する過程において使用されるパラメータを含む。現在のブロックが回転テンプレートモードを使用すると復号化パラメータによって指示される場合、現在のブロックの第一テンプレートを取得し、第一テンプレートは現在のブロックの隣接再構成サンプルを含む。現在のブロックの参照領域を確定する。参照領域において、参照テンプレート処理パラメータに基づいて、第一テンプレートのマッチングテンプレートを確定する。参照テンプレート処理パラメータは復号化パラメータに含まれ、且つマッチングテンプレートを構築するために用いられるパラメータである。マッチングテンプレートに基づいて、現在のブロックのマッチングブロックを確定する。マッチングブロックに基づいて、現在のブロックの予測値を確定する。換言すると、本発明の実施形態において、ビットストリームから回転テンプレートモードを取得し、回転テンプレートモードのもとで、現在のブロックの第一テンプレートを取得し且つ現在のブロックの参照領域を確定する。参照領域において、参照テンプレート処理パラメータに基づいて、第一テンプレートのマッチングテンプレートを確定する。次に、マッチングテンプレートに基づいて現在のブロックにマッチするマッチングブロックを確定し、現在のブロックの予測値を確定する。それで、画像ブロックのテンプレートを処理することによってより多くのテンプレートを取得し、より多くのテンプレートを現在のブロックのテンプレートと比較して、現在のブロックに最もマッチするマッチングブロックを見つけることができる。それは、現在のブロックに最もマッチするマッチングブロックをより正確に確定し、現在のブロックの予測値を確定することに有益である。テンプレートを回転させるという計算方法を利用することで、符号化・復号化の計算量を減らし、符号化・復号化の効率を高めることができる。
上記方法では、再構成ブロックのテンプレートを考慮に入れたが、再構成ブロックの数が比較的に少ないため、現在のブロックにマッチする画像ブロックを見つけることは難しい。上記欠点を克服するために、回転イントラブロックコピーを利用する。図２は、回転イントラブロックコピーにおけるフレームの配列を示す概略図である。図２に示されたように、図２－（ａ）は回転前の再構成ブロックと現在のブロックの配列を示す概略図であり、図２－（ｂ）回転後の再構成ブロックと現在のブロックの配列を示す概略図である。図２－（ａ）と図２－（ｂ）において、Ｂは現在のブロックであり、Ｂの頂点座標はｘ０である。Ｐが最終的に確定された現在のブロックにマッチする画像ブロックであり、且つＰの頂点座標がхであると仮設すると、Ｂのサンプル行列はＰ（ｘ０）と表記される。符号器は符号化済みのサンプル行列Ω（ｘ０）（再構成ブロックのサンプル行列に相当する）を利用して、Ｐ（ｘ０）を予測する。イントラブロックコピー技術とは、Ｐ（ｘ）の各サンプルのサンプル値とＰ（ｘ０）の各サンプルのサンプル値との差分二乗和が最小となるよう、Ω（ｘ０）において頂点がхである再構成ブロックを見つけ、そして、Ｐを見つけることである。
図４は、本発明の実施形態に係る選択可能なイントラテンプレートの回転の配列を示す概略図である。図４に示されたように、Ｂは現在のブロックであり、ｂはＢのテンプレートであり、Ｂの頂点座標ｘ０に対応する画像ブロックのサンプル行列はＰ（ｘ０）である。例えば、図４における再構成ブロックＰに対して、回転を経て、回転後の再構成ブロックＰとＰのテンプレートｐがちょうど参照領域を超えていない。Ｐの上の行と左の行は回転すると、いずれも参照領域を超える。そのため、再構成ブロックに対して、高さがａである再構成ブロック領域を上側の境界から下へインターセプトし、高さがａである再構成ブロック領域を左側の境界から右へインターセプトする。インターセプト後の残りの領域を回転可能な再構成ブロックとして確定し、回転可能な再構成ブロックで再構成ブロックを更新する。
実際の応用では、端末における各コンポーネントは第一通信バス１６を介して結合されている。第一通信バス１６はこれらのコンポーネントの間の接続と通信を実現するために用いられる。第一通信バス１６はデータバス以外に、電力バス、制御バス及びステータス信号バスをさらに含む。ただし、明確に説明するために、図１３において、各種類のバスがいずれも第一通信バス１６と表記される。
本発明の実施形態において、第一コンピュータ記憶媒体が提供される。当該第一コンピュータ記憶媒体は実行可能な命令を記憶する。実行可能な命令が１つ又は複数のプロセッサによって実行されると、第一プロセッサが上記１つ又は複数の実施形態における復号器に対応の予測値の確定方法を実行する。

Claims (44)

  1. 予測値の確定方法であって、前記方法は復号器に応用され、
    前記方法は、ビットストリームを解析することによって現在のブロックの復号化パラメータを取得することと、
    前記現在のブロックが回転テンプレートモードを使用すると前記復号化パラメータによって指示される場合、前記現在のブロックの第一テンプレートを取得することと、
    前記現在のブロックの参照領域を確定することと、
    前記参照領域において、参照テンプレート処理パラメータに基づいて、前記第一テンプレートのマッチングテンプレートを確定することと、
    前記マッチングテンプレートに基づいて、前記現在のブロックのマッチングブロックを確定することと、
    前記マッチングブロックに基づいて、前記現在のブロックの予測値を確定することとを含み、
    前記復号化パラメータは前記現在のブロックを復号化する過程において使用されるパラメータを含み、前記第一テンプレートは前記現在のブロックの隣接再構成サンプルを含み、前記参照テンプレート処理パラメータは前記復号化パラメータに含まれ、且つマッチングテンプレートを構築するために用いられるパラメータである、
    ことを特徴とする予測値の確定方法。
  2. 前記現在のブロックの第一テンプレートを取得することは、
    予め設定された前記第一テンプレートの形状に基づいて、前記現在のブロックの隣接再構成サンプルのうちの、前記形状の範囲内に含まれているサンプルを前記第一テンプレートにおけるサンプルとすることを含む、
    ことを特徴とする請求項１に記載の方法。
  3. 前記現在のブロックの参照領域を確定することは、
    前記現在のブロックが位置する画像に含まれ、且つ前記現在のブロックが復号化される前に再構成された全部又は一部のサンプルを、前記参照領域として確定することを含む、
    ことを特徴とする請求項１に記載の方法。
  4. 前記現在のブロックの参照領域を確定することは、
    前記現在のブロックが位置する画像以外の他の画像における再構成された全部又は一部のサンプルを、前記参照領域として確定することを含む、
    ことを特徴とする請求項１に記載の方法。
  5. 前記参照テンプレート処理パラメータはテンプレートの回転角度を指示する、
    ことを特徴とする請求項１に記載の方法。
  6. 前記参照領域において、参照テンプレート処理パラメータに基づいて、前記第一テンプレートのマッチングテンプレートを確定することは、
    前記参照領域における１つ又は複数の候補マッチング位置に対して、前記回転角度に基づいて、前記第一テンプレートと同じ形状を有する１つ又は複数の候補テンプレートを構築することと、
    前記１つ又は複数の候補テンプレートと前記第一テンプレートとの間のマッチング誤差を計算し、マッチング誤差が最小の候補テンプレートを前記マッチングテンプレートとすることとを含む、
    ことを特徴とする請求項５に記載の方法。
  7. 前記１つ又は複数の候補マッチング位置は前記参照領域において予め設定された１つ又は複数のサンプル位置であり、前記サンプル位置は整数サンプル位置又は分数サンプル位置である、
    ことを特徴とする請求項６に記載の方法。
  8. 前記回転角度に基づいて、前記第一テンプレートと同じ形状を有する１つ又は複数の候補テンプレートを構築することは、
    前記候補マッチング位置を頂点として、前記第一テンプレートと同じサイズを有する形状を候補マッチングポイントを中心として前記回転角度で回転させた後、前記形状の範囲内に含まれているサンプルを前記候補テンプレートとすることを含む、
    ことを特徴とする請求項６に記載の方法。
  9. 前記方法はさらに、
    前記回転角度に基づいて、予め設定された第一フィルタで前記参照領域における１つ又は複数の再構成サンプルに対してフィルタ処理を行うことによって、前記候補テンプレートにおけるサンプル値を得ることを含む、
    ことを特徴とする請求項８に記載の方法。
  10. 前記マッチングテンプレートに基づいて、前記現在のブロックのマッチングブロックを確定することは、
    前記マッチングテンプレートによって指示されたポジションに位置し、且つ前記現在のブロックと同じサイズを有する領域に含まれているマッチングサンプルを前記マッチングブロックにおけるサンプルとすることを含み、
    前記マッチングテンプレートと前記マッチングブロックとの間の相対位置は前記現在のブロックと前記第一テンプレートとの間の相対位置と同じである、
    ことを特徴とする請求項１に記載の方法。
  11. 前記方法はさらに、
    予め設定された第二フィルタで前記参照領域における１つ又は複数のサンプルに対してフィルタ処理を行うことによって、前記マッチングブロックにおけるサンプル値を得ることを含む、
    ことを特徴とする請求項１０に記載の方法。
  12. 前記方法はさらに、
    前記第一フィルタがローパスフィルタ又は補間フィルターであることを含む、
    ことを特徴とする請求項９に記載の方法。
  13. 前記方法はさらに、
    前記第二フィルタがローパスフィルタ又は補間フィルターであることを含む、
    ことを特徴とする請求項１１に記載の方法。
  14. 前記方法は、
    前記参照テンプレート処理パラメータが初期角度値と間隔ステップサイズ値を備えることと、
    前記初期角度値に等しい初期値と前記間隔ステップサイズ値で示された間隔角度との合計が前記回転角度とされることとを含む、
    ことを特徴とする請求項５又は請求項６に記載の方法。
  15. 前記回転角度が３６０度より小さいことを含む、
    ことを特徴とする請求項５又は請求項６に記載の方法。
  16. 前記１つ又は複数の候補テンプレートと前記第一テンプレートとの間のマッチング誤差を計算することは、
    マッチング誤差基準に基づいて、前記１つ又は複数の候補テンプレートと前記第一テンプレートとの間のマッチング誤差を計算することを含む、
    ことを特徴とする請求項６に記載の方法。
  17. 前記マッチング誤差基準が誤差平方和、平均二乗誤差、差分絶対値和、平均絶対誤差、構造的類似性のうちの少なくとも１つを備えることを含む、
    ことを特徴とする請求項１６に記載の方法。
  18. 前記マッチングブロックに基づいて、前記現在のブロックの予測値を確定することは、
    前記マッチングブロックを前記現在のブロックの予測値とすること、又は、
    線形モデルで前記マッチングブロックにおけるサンプル値に対して加重処理を行うことによって、前記現在のブロックの予測値を得ることを含み、
    前記線形モデルパラメータは、予め設定されたパラメータ、予め設定されたルールに基づいて導き出されたパラメータ、前記復号化パラメータに含まれている線形モデルパラメータのうちの１つである、
    ことを特徴とする請求項１に記載の方法。
  19. 前記マッチングブロックに基づいて、前記現在のブロックの予測値を確定した後、前記方法はさらに、
    ビットストリームを解析することによって、前記現在のブロックの予測残差を取得することと、
    前記現在のブロックの予測値と予測残差に基づいて、前記現在のブロックにおけるサンプルの再構成値を得ることとを含む、
    ことを特徴とする請求項１に記載の方法。
  20. 予測値の確定方法であって、前記方法は符号器に応用され、
    前記方法は、現在のブロックと前記現在のブロックの第一テンプレートとの間のデータ依存性を取得することと、
    前記データ依存性が予め設定された閾値以上である場合、回転テンプレートモードを使用することと、
    前記回転テンプレートモードのもとで、前記現在のブロックの参照領域を確定することと、
    前記参照領域において、参照テンプレート処理パラメータに基づいて、前記第一テンプレートのマッチングテンプレートを確定することと、
    前記マッチングテンプレートに基づいて、前記現在のブロックのマッチングブロックを確定することと、
    前記マッチングブロックに基づいて、前記現在のブロックの予測値を確定することとを含み、
    前記第一テンプレートは前記現在のブロックの隣接再構成サンプルを含む、
    ことを特徴とする予測値の確定方法。
  21. 前記現在のブロックの第一テンプレートを取得することは、
    予め設定された前記第一テンプレートの形状に基づいて、前記現在のブロックの隣接再構成サンプルのうちの、前記形状の範囲内に含まれているサンプルを前記第一テンプレートにおけるサンプルとすることを含む、
    ことを特徴とする請求項２０に記載の方法。
  22. 前記現在のブロックの参照領域を確定することは、
    前記現在のブロックが位置する画像における再構成された全部又は一部のサンプルを、前記参照領域として確定することを含む、
    ことを特徴とする請求項２０に記載の方法。
  23. 前記現在のブロックの参照領域を確定することは、
    前記現在のブロックが位置する画像以外の他の画像における再構成された全部又は一部のサンプルを、前記参照領域として確定することを含む、
    ことを特徴とする請求項２０に記載の方法。
  24. 前記参照テンプレート処理パラメータはテンプレートの回転角度を指示する、
    ことを特徴とする請求項２０に記載の方法。
  25. 前記参照領域において、参照テンプレート処理パラメータに基づいて、前記第一テンプレートのマッチングテンプレートを確定することは、
    前記参照領域における１つ又は複数の候補マッチング位置に対して、前記回転角度に基づいて、前記第一テンプレートと同じ形状を有する１つ又は複数の候補テンプレートを構築することと、
    前記１つ又は複数の候補テンプレートと前記第一テンプレートとの間のマッチング誤差を計算し、マッチング誤差が最小の候補テンプレートを前記マッチングテンプレートとすることとを含む、
    ことを特徴とする請求項２４に記載の方法。
  26. 前記１つ又は複数の候補マッチング位置は前記参照領域において予め設定された１つ又は複数のサンプル位置であり、前記サンプル位置は整数サンプル位置又は分数サンプル位置である、
    ことを特徴とする請求項２５に記載の方法。
  27. 前記回転角度に基づいて、前記第一テンプレートと同じ形状を有する１つ又は複数の候補テンプレートを構築することは、
    前記候補マッチング位置を頂点として、前記第一テンプレートと同じサイズを有する形状を候補マッチングポイントを中心として前記回転角度で回転させた後、前記形状の範囲内に含まれているサンプルを前記候補テンプレートとすることを含む、
    ことを特徴とする請求項２６に記載の方法。
  28. 前記方法はさらに、
    前記回転角度に基づいて、予め設定された第一フィルタで前記参照領域における１つ又は複数の再構成サンプルに対してフィルタ処理を行うことによって、前記候補テンプレートにおけるサンプル値を得ることを含む、
    ことを特徴とする請求項２７に記載の方法。
  29. 前記マッチングテンプレートに基づいて、前記現在のブロックのマッチングブロックを確定することは、
    前記マッチングテンプレートによって指示されたポジションに位置し、且つ前記現在のブロックと同じサイズを有する領域に含まれているマッチングサンプルを前記マッチングブロックにおけるサンプルとすることを含み、
    前記マッチングテンプレートと前記マッチングブロックとの間の相対位置は前記現在のブロックと前記第一テンプレートとの間の相対位置と同じである、
    ことを特徴とする請求項２０に記載の方法。
  30. 前記方法はさらに、
    予め設定された第二フィルタで前記参照領域における１つ又は複数のサンプルに対してフィルタ処理を行うことによって、前記マッチングブロックにおけるサンプル値を得ることを含む、
    ことを特徴とする請求項２９に記載の方法。
  31. 前記方法はさらに、
    前記第一フィルタがローパスフィルタ又は補間フィルターであることを含む、
    ことを特徴とする請求項２８に記載の方法。
  32. 前記方法はさらに、
    前記第二フィルタがローパスフィルタ又は補間フィルターであることを含む、
    ことを特徴とする請求項３０に記載の方法。
  33. 前記方法は、
    前記参照テンプレート処理パラメータが初期角度値と間隔ステップサイズ値を備えることと、
    前記初期角度値に等しい初期値と前記間隔ステップサイズ値で示された間隔角度との合計が前記回転角度とされることとを含む、
    ことを特徴とする請求項２４又は請求項２５に記載の方法。
  34. 前記回転角度が３６０度より小さいことを含む、
    ことを特徴とする請求項２４又は請求項２５に記載の方法。
  35. 前記１つ又は複数の候補テンプレートと前記第一テンプレートとの間のマッチング誤差を計算することは、
    マッチング誤差基準に基づいて、前記１つ又は複数の候補テンプレートと前記第一テンプレートとの間のマッチング誤差を計算することを含む、
    ことを特徴とする請求項２５に記載の方法。
  36. 前記マッチング誤差基準が誤差平方和、平均二乗誤差、差分絶対値和、平均絶対誤差、構造的類似性のうちの少なくとも１つを備えることを含む、
    ことを特徴とする請求項３５に記載の方法。
  37. 前記マッチングブロックに基づいて、前記現在のブロックの予測値を確定することは、
    前記マッチングブロックを前記現在のブロックの予測値とすること、又は、
    線形モデルで前記マッチングブロックにおけるサンプル値に対して加重処理を行うことによって、前記現在のブロックの予測値を得ることを含み、
    前記線形モデルパラメータは、予め設定されたパラメータ、予め設定されたルールに基づいて導き出されたパラメータのうちの１つである、
    ことを特徴とする請求項２０に記載の方法。
  38. 前記マッチングブロックに基づいて、前記現在のブロックの予測値を確定した後、前記方法はさらに、
    前記現在のブロックの予測残差と、前記回転テンプレートモードを使用すると指示する復号化パラメータとをビットストリームに書き込むことを含み、
    前記予測残差は、前記現在のブロックの予測値とオリジナル画像に対応の取得されたサンプル値とに基づいて確定される、
    ことを特徴とする請求項２０に記載の方法。
  39. 復号器であって、解析モジュール、第一取得モジュール及び第一確定モジュールを含み、
    前記解析モジュールは、ビットストリームを解析することによって現在のブロックの復号化パラメータを取得するように構成されており、前記復号化パラメータは前記現在のブロックを復号化する過程において使用されるパラメータを含み、
    前記第一取得モジュールは、前記現在のブロックが回転テンプレートモードを使用すると前記復号化パラメータによって指示される場合、前記現在のブロックの第一テンプレートを取得するように構成されており、前記第一テンプレートは前記現在のブロックの隣接再構成サンプルを含み、
    第一確定モジュールは、前記現在のブロックの参照領域を確定し、前記参照領域において、参照テンプレート処理パラメータに基づいて前記第一テンプレートのマッチングテンプレートを確定し、前記マッチングテンプレートに基づいて前記現在のブロックのマッチングブロックを確定し、前記マッチングブロックに基づいて前記現在のブロックの予測値を確定するように構成されており、前記参照テンプレート処理パラメータは前記復号化パラメータに含まれ、且つマッチングテンプレートを構築するために用いられるパラメータである、
    ことを特徴とする復号器。
  40. 復号器であって、プロセッサと前記プロセッサによって実行可能な命令を記憶する記憶媒体とを含み、
    前記記憶媒体は通信バスを介して前記プロセッサに依存して操作を実行し、前記プロセッサによって実行されると、前記命令は以下のステップを実行し、
    ビットストリームを解析することによって現在のブロックの復号化パラメータを取得し、前記復号化パラメータは前記現在のブロックを復号化する過程において使用されるパラメータを含み、
    前記現在のブロックが回転テンプレートモードを使用すると前記復号化パラメータによって指示される場合、前記現在のブロックの第一テンプレートを取得し、前記第一テンプレートは前記現在のブロックの隣接再構成サンプルを含み、
    前記現在のブロックの参照領域を確定し、
    前記参照領域において、参照テンプレート処理パラメータに基づいて、前記第一テンプレートのマッチングテンプレートを確定し、前記参照テンプレート処理パラメータは前記復号化パラメータに含まれ、且つマッチングテンプレートを構築するために用いられるパラメータであり、
    前記マッチングテンプレートに基づいて、前記現在のブロックのマッチングブロックを確定し、
    前記マッチングブロックに基づいて、前記現在のブロックの予測値を確定する、
    ことを特徴とする復号器。
  41. 第一コンピュータ記憶媒体であって、
    実行可能な命令を記憶し、前記実行可能な命令が１つ又は複数のプロセッサによって実行されると、前記プロセッサが前記請求項１～１９のいずれか一項に記載の予測値の確定方法を実行する、
    ことを特徴とする第一コンピュータ記憶媒体。
  42. 符号器であって、第二取得モジュールと第二確定モジュールを含み、
    前記第二取得モジュールは、現在のブロックと前記現在のブロックの第一テンプレートとの間のデータ依存性を取得するように構成されており、前記第一テンプレートは前記現在のブロックの隣接再構成サンプルを含み、
    第二確定モジュールは、前記データ依存性が予め設定された閾値以上である場合に回転テンプレートモードを使用し、前記回転テンプレートモードのもとで前記現在のブロックの参照領域を確定し、前記参照領域において、参照テンプレート処理パラメータに基づいて前記第一テンプレートのマッチングテンプレートを確定し、前記マッチングテンプレートに基づいて前記現在のブロックのマッチングブロックを確定し、前記マッチングブロックに基づいて前記現在のブロックの予測値を確定するように構成されている、
    ことを特徴とする符号器。
  43. 符号器であって、第二プロセッサと前記第二プロセッサによって実行可能な命令を記憶する記憶媒体とを含み、
    前記記憶媒体は通信バスを介して前記第二プロセッサに依存して操作を実行し、前記第二プロセッサによって実行されると、前記命令は以下のステップを実行し、
    現在のブロックと前記現在のブロックの第一テンプレートとの間のデータ依存性を取得し、前記第一テンプレートは前記現在のブロックの隣接再構成サンプルを含み、
    前記データ依存性が予め設定された閾値以上である場合、回転テンプレートモードを使用し、
    前記回転テンプレートモードのもとで、前記現在のブロックの参照領域を確定し、
    前記参照領域において、参照テンプレート処理パラメータに基づいて、前記第一テンプレートのマッチングテンプレートを確定し、
    前記マッチングテンプレートに基づいて、前記現在のブロックのマッチングブロックを確定し、
    前記マッチングブロックに基づいて、前記現在のブロックの予測値を確定する、
    ことを特徴とする符号器。
  44. 第二コンピュータ記憶媒体であって、
    実行可能な命令を記憶し、前記実行可能な命令が１つ又は複数のプロセッサによって実行されると、前記プロセッサが前記請求項２０～３８のいずれか一項に記載の予測値の確定方法を実行する、
    ことを特徴とする第二コンピュータ記憶媒体。
JP2022519101A 2019-09-27 2019-09-27 予測値の確定方法、復号器及びコンピュータ記憶媒体 Active JP7471399B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2019/108598 WO2021056433A1 (zh) 2019-09-27 2019-09-27 预测值的确定方法、解码器以及计算机存储介质

Publications (2)

Publication Number Publication Date
JP2022553624A true JP2022553624A (ja) 2022-12-26
JP7471399B2 JP7471399B2 (ja) 2024-04-19

Family

ID=75166301

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022519101A Active JP7471399B2 (ja) 2019-09-27 2019-09-27 予測値の確定方法、復号器及びコンピュータ記憶媒体

Country Status (6)

Country Link
US (1) US20220217335A1 (ja)
EP (1) EP4037314A4 (ja)
JP (1) JP7471399B2 (ja)
KR (1) KR20220065059A (ja)
CN (1) CN114424533A (ja)
WO (1) WO2021056433A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4346200A1 (en) * 2022-09-27 2024-04-03 Beijing Xiaomi Mobile Software Co., Ltd. Encoding/decoding video picture data
EP4346201A1 (en) * 2022-09-27 2024-04-03 Beijing Xiaomi Mobile Software Co., Ltd. Encoding/decoding video picture data
WO2024147679A1 (ko) * 2023-01-04 2024-07-11 한국전자통신연구원 영상 부호화/복호화를 위한 방법, 장치 및 기록 매체
WO2024197752A1 (zh) * 2023-03-30 2024-10-03 Oppo广东移动通信有限公司 编解码方法、码流、编码器、解码器以及存储介质
CN116702571B (zh) * 2023-08-07 2023-10-20 中国空气动力研究与发展中心计算空气动力研究所 基于多重光滑度量因子的数值模拟方法及装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018509005A (ja) * 2016-02-17 2018-03-29 テレフオンアクチーボラゲット エルエム エリクソン（パブル） ビデオピクチャを符号化および復号する方法および装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102319384B1 (ko) * 2014-03-31 2021-10-29 인텔렉추얼디스커버리 주식회사 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치
CN105338351B (zh) * 2014-05-28 2019-11-12 华为技术有限公司 基于模板匹配的帧内预测编、解码、阵列扫描方法及装置
CN104363449B (zh) * 2014-10-31 2017-10-10 华为技术有限公司 图像预测方法及相关装置
US9948930B2 (en) * 2016-05-17 2018-04-17 Arris Enterprises Llc Template matching for JVET intra prediction
CN110650349B (zh) * 2018-06-26 2024-02-13 中兴通讯股份有限公司 一种图像编码方法、解码方法、编码器、解码器及存储介质

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018509005A (ja) * 2016-02-17 2018-03-29 テレフオンアクチーボラゲット エルエム エリクソン（パブル） ビデオピクチャを符号化および復号する方法および装置

Also Published As

Publication number Publication date
WO2021056433A1 (zh) 2021-04-01
US20220217335A1 (en) 2022-07-07
JP7471399B2 (ja) 2024-04-19
EP4037314A1 (en) 2022-08-03
EP4037314A4 (en) 2022-11-09
CN114424533A (zh) 2022-04-29
KR20220065059A (ko) 2022-05-19

Similar Documents

Publication Publication Date Title
JP7471399B2 (ja) 予測値の確定方法、復号器及びコンピュータ記憶媒体
EP3923577A1 (en) Method for constructing motion information candidate list and triangular prediction decoding method and apparatus
JP2019071652A (ja) Ｈｅｖｃビデオ符号化における論理的イントラモードネーミング
JP6697582B2 (ja) イントラ予測動画符号化方法および装置
US11711543B2 (en) Method and apparatus for low-complexity bidirectional intra prediction in video encoding and decoding
WO2021196235A1 (zh) 帧间预测方法、编码器、解码器及存储介质
US20210160515A1 (en) Method and device for video predicting colour component, and computer storage medium
JP6690061B2 (ja) 動き補償予測方法およびデバイス
WO2020133115A1 (zh) 编码预测方法、装置及计算机存储介质
CN106375764A (zh) 一种结合方向预测和块复制预测的视频帧内编码方法
US20220014754A1 (en) Prediction method, encoder, decoder and computer storage medium
CN117280691A (zh) 增强的运动向量预测
JP7480319B2 (ja) 画像およびビデオ圧縮のイントラ予測
CA3028510C (en) Bidirectional interframe predictive coding method and device using forward and backward block weighting and block brightness weighting
WO2020181554A1 (zh) 预测值的确定方法、解码器以及计算机存储介质
US12052425B2 (en) Prediction value determination method, encoder and computer storage medium
US12003764B2 (en) Prediction method for current block and electronic device
CN116074536A (zh) 编码方法、解码方法、电子设备和计算机可读存储介质
JP7535057B2 (ja) 画像予測方法、エンコーダ、デコーダ及び記憶媒体
Lei et al. Joint local and nonlocal progressive prediction for versatile video coding
CN114391253A (zh) 几何交叉分量滤波
CN110677673A (zh) 帧间编码方法、帧间解码方法及其设备和存储介质
CN117412058A (zh) 编码、解码方法、装置及设备
CN117812269A (zh) 基于整像素精度搜索的仿射运动估计方法、装置及介质
JP2024147829A (ja) 画像予測方法、エンコーダ、デコーダ及び記憶媒体

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220829

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220829

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230926

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230929

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231221

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240315

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240409

R150 Certificate of patent or registration of utility model

Ref document number: 7471399

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150