JP7383720B2 - 画像成分予測方法、エンコーダ、デコーダ及び記憶媒体 - Google Patents

画像成分予測方法、エンコーダ、デコーダ及び記憶媒体 Download PDF

Info

Publication number
JP7383720B2
JP7383720B2 JP2021551793A JP2021551793A JP7383720B2 JP 7383720 B2 JP7383720 B2 JP 7383720B2 JP 2021551793 A JP2021551793 A JP 2021551793A JP 2021551793 A JP2021551793 A JP 2021551793A JP 7383720 B2 JP7383720 B2 JP 7383720B2
Authority
JP
Japan
Prior art keywords
current block
adjacent
prediction
reference pixel
pixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021551793A
Other languages
English (en)
Other versions
JP2022522487A (ja
Inventor
フオ、チュンイェン
ワン、シューアイ
マー、イェンチュオ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Publication of JP2022522487A publication Critical patent/JP2022522487A/ja
Application granted granted Critical
Publication of JP7383720B2 publication Critical patent/JP7383720B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Algebra (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Color Television Systems (AREA)

Description

本願の実施例は画像処理技術分野に関し、特に画像成分予測方法、エンコーダ、デコーダ及び記憶媒体に関する。
ビデオ表示品質への要件が高まるにつれて、高精細及び超高精細ビデオ等の新たなビデオ応用形態が現れた。Ｈ．２６５／高効率ビデオ符号化（ＨＥＶＣ、Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）はビデオ応用の迅速な発展の要件を満足することができないため、共同ビデオ調査チーム（ＪＶＥＴ、Ｊｏｉｎｔ Ｖｉｄｅｏ Ｅｘｐｌｏｒａｔｉｏｎ Ｔｅａｍ）は次世代のビデオ符号化標準Ｈ．２６６／多用途ビデオ符号化（ＶＶＣ、Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）を提案し、その対応のテストモデルがＶＶＣの参照ソフトウェアテストモデル（ＶＴＭ、ＶＶＣ Ｔｅｓｔ Ｍｏｄｅｌ）である。
現在、ＶＴＭには予測モデルに基づく画像成分予測方法が統合されており、予測モデルによって、現在の符号化ブロックの輝度成分に基づいて色度成分を予測することができる。しかしながら、予測モデルの構築過程において、特に予測モデルが非線形モデル又はマルチモデルである（例えば、複数の線形モデルからなる）場合、現在、モデルパラメータを導出するためのサンプルポイントの数が比較的多く、計算複雑性及びメモリ帯域幅が比較的高いとともに、これらのサンプルポイントに異常のサンプルポイントが存在する可能性があるため、予測モデルの構築は正確ではない。
本願の実施例は画像成分予測方法、エンコーダ、デコーダ及び記憶媒体を提供する。隣接参照画素セットにおける画素の個数を減少させることにより、計算複雑性を低減することができるだけではなく、予測モデルの精度を向上させることもでき、それにより処理対象画像成分の予測正確度を向上させることができる。
本願の実施例の技術案は以下のように実現されてもよい。
第１態様では、本願の実施例は画像成分予測方法を提供し、エンコーダ又はデコーダに適用され、該方法は、
画像における現在ブロックの隣接参照画素を決定することと、
前記隣接参照画素に基づいて隣接参照画素サブセットを構築し、前記隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれることと、
前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算し、前記予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、前記予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数であることと、を含む。
第２態様では、本願の実施例は画像成分予測方法を提供し、エンコーダ又はデコーダに適用され、該方法は、
画像における現在ブロックの第１画像成分の第１参照画素セットを決定し、前記第１参照画素セットには前記現在ブロックに隣接する画素が含まれることと、
第１参照画素セットを利用してＮ個の第１参照画素サブセットを構築し、前記第１参照画素サブセットに前記第１参照画素セットにおける一部の画素が含まれ、Ｎが予測モデルの数に等しいことと、
前記Ｎ個の第１参照画素サブセットを利用して、それぞれＮ個の予測モデルのモデルパラメータを計算し、前記予測モデルは前記現在ブロックの第１画像成分値を前記現在ブロックの第２画像成分の予測値にマッピングすることに用いられ、前記第２画像成分が前記第１画像成分と異なることと、を含む。
第３態様では、本願の実施例はエンコーダを提供し、該エンコーダは第１決定ユニット、第１構築ユニット及び第１計算ユニットを備え、
第１決定ユニットは、画像における現在ブロックの隣接参照画素を決定するように設定され、
第１構築ユニットは、前記隣接参照画素に基づいて隣接参照画素サブセットを構築するように設定され、隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれ、
第１計算ユニットは、前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算するように設定され、予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数である。
第４態様では、本願の実施例はエンコーダを提供し、該エンコーダは第１メモリ及び第１プロセッサを備え、
第１メモリは、前記第１プロセッサにおいて実行され得るコンピュータプログラムを記憶することに用いられ、
第１プロセッサは、前記コンピュータプログラムを実行するとき、第１態様又は第２態様に記載の方法を実行することに用いられる。
第５態様では、本願の実施例はデコーダを提供し、該デコーダは第２決定ユニット、第２構築ユニット及び第２計算ユニットを備え、
第２決定ユニットは、画像における現在ブロックの隣接参照画素を決定するように設定され、
第２構築ユニットは、前記隣接参照画素に基づいて隣接参照画素サブセットを構築するように設定され、隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれ、
第２計算ユニットは、前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算するように設定され、予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数である。
第６態様では、本願の実施例はデコーダを提供し、該デコーダは第２メモリ及び第２プロセッサを備え、
第２メモリは、前記第２プロセッサにおいて実行され得るコンピュータプログラムを記憶することに用いられ、
第２プロセッサは、前記コンピュータプログラムを実行するとき、第１態様又は第２態様に記載の方法を実行することに用いられる。
第７態様では、本願の実施例はコンピュータ記憶媒体を提供し、該コンピュータ記憶媒体に画像成分予測プログラムが記憶され、画像成分予測プログラムが第１プロセッサ又は第２プロセッサにより実行されるとき、第１態様又は第２態様に記載の方法を実現する。
本願の実施例は画像成分予測方法、エンコーダ、デコーダ及び記憶媒体を提供し、画像における現在ブロックの隣接参照画素を決定し、隣接参照画素に基づいて隣接参照画素サブセットを構築し、隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれ、隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算し、予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数である。このように、現在ブロックの隣接参照画素を選別処理することにより、重要ではない参照画素点又は異常の参照画素点を除去することができ、それにより隣接参照画素セットにおける画素の個数を減少させ、隣接参照画素サブセットにおける画素の個数を比較的少なくし、計算複雑性及びメモリ帯域幅を低減するだけではなく、予測モデルの精度も向上させる。また、少なくとも２つの予測サブモデルにより処理対象画像成分に対して成分間予測処理を行うことにより、処理対象画像成分の予測正確度を向上させるとともに、ビデオ画像の予測効率も向上させる。
図１は本願の実施例に係るビデオ符号化システムの模式的な構成ブロック図である。 図２は本願の実施例に係るビデオ復号化システムの模式的な構成ブロック図である。 図３は本願の実施例に係る画像成分予測方法の模式的なフローチャートである。 図４は本願の実施例に係る現在ブロックの上側辺に隣接する参照画素サブセットを選択する構造模式図である。 図５は本願の実施例に係る他の現在ブロックの上側辺に隣接する参照画素サブセットを選択する構造模式図である。 図６は本願の実施例に係る符号化ブロックの隣接参照画素点をグループ分けする模式図である。 図７は本願の実施例に係る他の画像成分予測方法の模式的なフローチャートである。 図８は本願の実施例に係るエンコーダの構成模式図である。 図９は本願の実施例に係るエンコーダの具体的なハードウェアの構造模式図である。 図１０は本願の実施例に係るデコーダの構成模式図である。 図１１は本願の実施例に係るデコーダの具体的なハードウェアの構造模式図である。
本願の実施例の特徴及び技術的内容を更に詳しく理解するために、以下に図面を参照しながら本願の実施例の実現を詳しく説明する。添付の図面は参照・説明のためのものに過ぎず、本願の実施例を制限するためのものではない。
ビデオ画像において、一般的に第１画像成分、第２画像成分及び第３画像成分で符号化ブロック（ＣＢ、Ｃｏｄｉｎｇ Ｂｌｏｃｋ）を示す。この３つの画像成分はそれぞれ輝度成分、青色色度成分及び赤色色度成分である。具体的に、輝度成分は一般的に符号Ｙで示され、青色色度成分は一般的に符号Ｃｂ又はＵで示され、赤色色度成分は一般的に符号Ｃｒ又はＶで示される。そうすると、ビデオ画像はＹＣｂＣｒフォーマットで示されてもよく、ＹＵＶフォーマットで示されてもよい。
本願の実施例では、第１画像成分は輝度成分であってもよく、第２画像成分は青色色度成分であってもよく、第３画像成分は赤色色度成分であってもよいが、本願の実施例は具体的に制限しない。
次世代のビデオ符号化標準Ｈ．２６６において、符号化性能及び符号化効率を更に向上させるために、成分間予測（ＣＣＰ、Ｃｒｏｓｓ－ｃｏｍｐｏｎｅｎｔ Ｐｒｅｄｉｃｔｉｏｎ）に対して拡張改善を行い、クロスコンポーネント線形モデル予測（ＣＣＬＭ、Ｃｒｏｓｓ－ｃｏｍｐｏｎｅｎｔ Ｌｉｎｅａｒ Ｍｏｄｅｌ Ｐｒｅｄｉｃｔｉｏｎ）を提案する。Ｈ．２６６において、ＣＣＬＭは第１画像成分から第２画像成分までの予測を実現することができるだけではなく、第１画像成分から第３画像成分まで又は第３画像成分から第１画像成分までの予測を実現することもでき、ひいては第２画像成分から第３画像成分まで又は第３画像成分から第２画像成分までの予測を実現することもできる。以下、第１画像成分から第２画像成分までの予測を例として説明するが、本願の実施例の技術案は同様に他の画像成分の予測に適用できる。
ＶＴＭにおいて、現在、２つのＣＣＬＭの予測モデル、即ちシングルモデルＣＣＬＭの予測モデル、ＭＭＬＭの予測モデルとも称されるマルチモデルＣＣＬＭ（ＭＭＬＭ、Ｍｕｌｔｉｐｌｅ Ｍｏｄｅｌ ＣＣＬＭ）の予測モデルがある。その名の示すとおり、シングルモデルＣＣＬＭの予測モデルは１つのみの予測モデルにより第１画像成分から第２画像成分までの予測を実現するが、ＭＭＬＭの予測モデルは複数の予測モデルにより共同で第１画像成分から第２画像成分までの予測を実現する。例えば、ＭＭＬＭの予測モデルにおいて、符号化ブロックに隣接する参照画素点により隣接参照画素セットを構成し、且つ隣接参照画素セットを２組に分け、各組はいずれも独立して予測モデルのモデルパラメータを導出する訓練セットとされてもよく、即ち各組はいずれも１組のモデルパラメータα及びβを導出することができる。
ＭＭＬＭの予測モデルのうちの各予測モデルが使用するモデルパラメータの正確度を確保するために、モデルパラメータを導出するために構築された参照画素セットをより正確にする必要がある。これに基づいて、本願の実施例は画像成分予測方法を提供し、画像における現在ブロックの隣接参照画素を決定し、隣接参照画素に基づいて隣接参照画素サブセットを構築し、隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれ、更に、隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算し、予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数である。このように、現在ブロックの隣接参照画素を選別処理することにより、重要ではない参照画素点又は異常の参照画素点を除去することができ、それにより隣接参照画素セットにおける画素の個数を減少させ、隣接参照画素サブセットにおける画素の個数を比較的少なくし、計算複雑性及びメモリ帯域幅を低減するだけではなく、予測モデルの精度も向上させる。また、少なくとも２つの予測サブモデルにより処理対象画像成分に対して成分間予測処理を行うことにより、処理対象画像成分の予測正確度を向上させるとともに、ビデオ画像の予測効率も向上させる。
以下、図面を参照しながら本願の各実施例を詳しく説明する。
図１には本願の実施例に係るビデオ符号化システムの構成ブロック図の例を示す。図１に示すように、該ビデオ符号化システム１００は、変換及び量子化ユニット１０１、イントラ推定ユニット１０２、イントラ予測ユニット１０３、動き補償ユニット１０４、動き推定ユニット１０５、逆変換及び逆量子化ユニット１０６、フィルタ制御分析ユニット１０７、フィルタリングユニット１０８、符号化ユニット１０９及び復号化画像キャッシュユニット１１０等を備える。フィルタリングユニット１０８はデブロッキングフィルタリング及びサンプル適応オフセット（ＳＡＯ、Ｓａｍｐｌｅ Ａｄａｐｔｉｖｅ Ｏｆｆｓｅｔ）フィルタリングを実現することができ、符号化ユニット１０９はヘッダ情報符号化及びコンテキストベースの適応２値算術符号化（ＣＡＢＡＣ、Ｃｏｎｔｅｘｔ－ｂａｓｅｄ Ａｄａｐｔｉｖｅ Ｂｉｎａｒｙ Ａｒｉｔｈｍａｔｉｃ Ｃｏｄｉｎｇ）を実現することができる。入力されたオリジナルビデオ信号に対して、符号化ツリーユニット（ＣＴＵ、Ｃｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ）の分割によって１つのビデオ符号化ブロックを取得することができ、次に、イントラ又はインター予測後に取得された残差画素情報に対して、変換及び量子化ユニット１０１により該ビデオ符号化ブロックを変換し、該変換は残差情報を画素フィールドから変換フィールドに変換して、取得された変換係数を量子化して、ビットレートを更に減少させることを含む。イントラ推定ユニット１０２及びイントラ予測ユニット１０３は該ビデオ符号化ブロックに対してイントラ予測を行うことに用いられる。明らかに、イントラ推定ユニット１０２及びイントラ予測ユニット１０３は、該ビデオ符号化ブロックを符号化するためのイントラ予測モデルを決定することに用いられる。時間予測情報を提供するために、動き補償ユニット１０４及び動き推定ユニット１０５は、１つ又は複数の参照フレームにおける１つ又は複数のブロックに対する受信されたビデオ符号化ブロックのインター予測符号化を実行することに用いられる。動き推定ユニット１０５により実行される動き推定は動きベクトルの生成過程であり、前記動きベクトルは該ビデオ符号化ブロックの動きを推定することができ、次に、動き補償ユニット１０４は動き推定ユニット１０５により決定された動きベクトルに基づいて動き補償を実行する。イントラ予測モデルを決定した後、イントラ予測ユニット１０３は更に、選択されたイントラ予測データを符号化ユニット１０９に提供することに用いられ、且つ動き推定ユニット１０５は計算して決定された動きベクトルデータも符号化ユニット１０９に送信する。また、逆変換及び逆量子化ユニット１０６は該ビデオ符号化ブロックの再構築に使用され、画素フィールドにおいて残差ブロックを再構築し、該再構築された残差ブロックはフィルタ制御分析ユニット１０７及びフィルタリングユニット１０８によりブロッキング効果アーティファクトを除去し、次に、該再構築された残差ブロックを復号化画像キャッシュユニット１１０のフレームにおける１つの予測性ブロックに追加して、再構築されたビデオ符号化ブロックを生成することに用いられる。符号化ユニット１０９は様々な符号化パラメータ及び量子化後の変換係数を符号化することに用いられる。ＣＡＢＡＣに基づく符号化アルゴリズムにおいて、コンテキストコンテンツは隣接符号化ブロックに基づくものであってもよく、決定されたイントラ予測モデルを示す情報を符号化して、該ビデオ信号のビットストリームを出力することに用いられてもよい。復号化画像キャッシュユニット１１０は再構築されたビデオ符号化ブロックを記憶して、予測参照に使用することに用いられる。ビデオ画像が符号化されるにつれて、新しい再構築されたビデオ符号化ブロックを絶えず生成することとなり、これらの再構築されたビデオ符号化ブロックはいずれも復号化画像キャッシュユニット１１０に記憶される。
図２には本願の実施例に係るビデオ復号化システムの構成ブロック図の例を示す。図２に示すように、該ビデオ復号化システム２００は、復号化ユニット２０１、逆変換及び逆量子化ユニット２０２、イントラ予測ユニット２０３、動き補償ユニット２０４、フィルタリングユニット２０５及び復号化画像キャッシュユニット２０６等を備える。復号化ユニット２０１はヘッダ情報の復号化及びＣＡＢＡＣの復号化を実現することができ、フィルタリングユニット２０５はデブロッキングフィルタリング及びＳＡＯフィルタリングを実現することができる。入力されたビデオ信号が図１における符号化処理された後、該ビデオ信号のビットストリームが出力される。該ビットストリームはビデオ復号化システム２００に入力され、まず、復号化後の変換係数を取得するために復号化ユニット２０１を通過し、画素フィールドにおいて残差ブロックを生成するように該変換係数に対して逆変換及び逆量子化ユニット２０２により処理される。イントラ予測ユニット２０３は、決定されたイントラ予測モデル及び現在フレーム又はピクチャからの、先に復号化ブロックを通過したデータに基づいて、現在ビデオ復号化ブロックの予測データを生成することに用いられてもよい。動き補償ユニット２０４は、動きベクトル及び他の関連文法要素を解析することにより、ビデオ復号化ブロックのための予測情報を決定し、且つ該予測情報を使用して復号化されているビデオ復号化ブロックの予測性ブロックを生成する。逆変換及び逆量子化ユニット２０２からの残差ブロックとイントラ予測ユニット２０３又は動き補償ユニット２０４により生成された対応の予測性ブロックとの和を求めることにより、復号化されたビデオブロックを形成する。ブロッキング効果アーティファクトを除去するように、該復号化されたビデオ信号はフィルタリングユニット２０５を通過し、ビデオ品質を改善することができる。次に、復号化されたビデオブロックを復号化画像キャッシュユニット２０６に記憶し、復号化画像キャッシュユニット２０６は、後続のイントラ予測又は動き補償のための参照画像を記憶するとともに、ビデオ信号の出力にも使用され、そうすると、復元されたオリジナルビデオ信号を取得する。
本願の実施例の画像成分予測方法は、主に図１に示されるイントラ予測ユニット１０３部分及び図２に示されるイントラ予測ユニット２０３部分に適用され、具体的にイントラ予測におけるＣＣＬＭ予測部分に適用される。即ち、本願の実施例の画像成分予測方法は、ビデオ符号化システムに適用でき、ビデオ復号化システムにも適用でき、ひいてはビデオ符号化システム及びビデオ復号化システムに同時に適用できるが、本願の実施例は具体的に制限しない。該方法がビデオ符号化システムにおけるイントラ予測ユニット１０３部分に適用される場合、「現在ブロック」とは具体的にイントラ予測における現在符号化ブロックを指すが、該方法がビデオ復号化システムにおけるイントラ予測ユニット２０３部分に適用される場合、「現在ブロック」とは具体的にイントラ予測における現在復号化ブロックを指す。
上記図１又は図２の応用シーンの例に基づいて、図３には本願の実施例に係る画像成分予測方法の模式的なフローチャートを示す。図３に示すように、該方法は以下を含んでもよい。
Ｓ３０１、画像における現在ブロックの隣接参照画素を決定する。
なお、ビデオ画像は複数の画像ブロックに分割されてもよく、各現在に符号化を待つ画像ブロックは符号化ブロックと称されてもよい。各符号化ブロックは第１画像成分、第２画像成分及び第３画像成分を含んでもよいが、現在ブロックはビデオ画像における現在に第１画像成分、第２画像成分又は第３画像成分を予測することを待つ符号化ブロックである。予測モデルにより第１画像成分を予測する必要がある場合、予測対象画像成分は第１画像成分であり、予測モデルにより第２画像成分を予測する必要がある場合、予測対象画像成分は第２画像成分であり、予測モデルにより第３画像成分を予測する必要がある場合、予測対象画像成分は第３画像成分である。
更に、左側隣接領域、左下側隣接領域、上側隣接領域及び右上側隣接領域がいずれも有効領域である場合、隣接参照画素は現在ブロックの左側隣接領域及び上側隣接領域における隣接参照画素点で構成されてもよく、現在ブロックの左側隣接領域及び左下側隣接領域における隣接参照画素点で構成されてもよく、現在ブロックの上側隣接領域及び右上側隣接領域における隣接参照画素点で構成されてもよく、本願の実施例は具体的に制限しない。
いくつかの実施例では、選択肢として、Ｓ３０１にとって、前記画像における現在ブロックの隣接参照画素を決定することは、
前記現在ブロックの少なくとも１つの辺に隣接する参照画素を取得し、前記現在ブロックの少なくとも１つの辺は上行、右上行、左列及び左下列のうちの少なくとも１つを含むことと、
取得された参照画素に基づいて、前記隣接参照画素を取得することと、を含んでもよい。
なお、現在ブロックの少なくとも１つの辺は、上行（上側辺と称されてもよい）、右上行（右上側辺と称されてもよい）、左列（左側辺と称されてもよい）又は左下列（左下側辺と称されてもよい）のうちの少なくとも１つを含んでもよい。
選択肢として、いくつかの実施例では、現在ブロックの少なくとも１つの辺が左側辺及び／又は上側辺である場合、Ｓ３０１にとって、前記画像における現在ブロックの隣接参照画素を決定することは、
前記現在ブロックの少なくとも１つの辺に隣接する参照画素点を取得し、前記少なくとも１つの辺が前記現在ブロックの左側辺及び／又は前記現在ブロックの上側辺を含むことと、
取得された参照画素に基づいて、前記隣接参照画素を取得することと、を含んでもよい。
なお、現在ブロックの少なくとも１つの辺は、現在ブロックの左側辺及び／又は現在ブロックの上側辺を含んでもよい。即ち、現在ブロックの少なくとも１つの辺とは、現在ブロックの上側辺を指してもよく、現在ブロックの左側辺を指してもよく、ひいては現在ブロックの上側辺及び左側辺を指してもよく、本願の実施例は具体的に制限しない。
このように、左側隣接領域及び上側隣接領域がいずれも有効領域である場合、隣接参照画素は現在ブロックの左側辺に隣接する参照画素点及び現在ブロックの上側辺に隣接する参照画素点で構成されてもよい。左側隣接領域が有効領域であるが、上側隣接領域が無効領域である場合、隣接参照画素は現在ブロックの左側辺に隣接する参照画素点で構成されてもよい。左側隣接領域が無効領域であるが、上側隣接領域が有効領域である場合、隣接参照画素は現在ブロックの上側辺に隣接する参照画素点で構成されてもよい。
選択肢として、現在ブロックの少なくとも１つの辺が左側辺と左下側辺からなる隣接列、及び／又は上側辺と右上側辺からなる隣接行である場合、Ｓ３０１にとって、前記画像における現在ブロックの隣接参照画素を決定することは、
前記現在ブロックに隣接する参照行又は参照列の参照画素点を取得し、前記参照行が前記現在ブロックの上側辺及び右上側辺に隣接する行で構成され、前記参照列が前記現在ブロックの左側辺及び左下側辺に隣接する列で構成されることと、
取得された参照画素に基づいて、前記隣接参照画素を取得することと、を含んでもよい。
なお、現在ブロックに隣接する参照行は、前記現在ブロックの上側辺及び右上側辺に隣接する行で構成されてもよく、現在ブロックに隣接する参照列は、前記現在ブロックの左側辺及び左下側辺に隣接する列で構成されてもよい。現在ブロックに隣接する参照行又は参照列とは、現在ブロックの上側辺に隣接する参照行を指してもよく、現在ブロックの左側辺に隣接する参照列を指してもよく、ひいては現在ブロックの他の辺に隣接する参照行又は参照列を指してもよく、本願の実施例は具体的に制限しない。説明の都合上、本願の実施例では、現在ブロックに隣接する参照行は上側辺に隣接する参照行を例として説明され、現在ブロックに隣接する参照列は左側辺に隣接する参照列を例として説明される。
現在ブロックに隣接する参照行の参照画素点は、上側辺及び右上側辺に隣接する参照画素点（上側辺及び右上側辺に対応する隣接参照画素点とも称される）を含んでもよい。上側辺は現在ブロックの上側辺を示し、右上側辺は、現在ブロックの上側辺より右向きに水平に拡張された現在ブロックの高さと同じ辺長を示す。現在ブロックに隣接する参照列の参照画素点は、左側辺及び左下側辺に隣接する参照画素点（左側辺及び左下側辺に対応する隣接参照画素点とも称される）を更に含んでもよい。左側辺は現在ブロックの左側辺を示し、左下側辺は、現在ブロックの左側辺より下向きに垂直に拡張された現在復号化ブロックの幅と同じ辺長を示す。本願の実施例は具体的に制限しない。
このように、左側隣接領域及び左下側隣接領域が有効領域である場合、隣接参照画素は現在ブロックに隣接する参照列の参照画素点で構成されてもよい。上側隣接領域及び右上側隣接領域が有効領域である場合、隣接参照画素は現在ブロックに隣接する参照行の参照画素点で構成されてもよい。
Ｓ３０２、前記隣接参照画素に基づいて隣接参照画素サブセットを構築し、前記隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれる。
なお、隣接参照画素は現在の関連技術案において予測モデルを構築するための対応の参照画素である。一般的に、ビデオ符号化システムがビデオ復号化システムにモデルパラメータを伝送することを回避するために、現在ブロックの上側辺、右上側辺、左側辺、左下側辺等の４つの辺のうちの１つ又は複数の辺に隣接する参照画素点を利用して隣接参照画素を構成して、モデルパラメータを導出することができる。ところが、こんなたくさんの参照画素点をサンプルポイントとして利用してマルチモデルを構築する複雑性は比較的高く、且つ異常値を有するいくつかの参照画素点は予測モデルの品質を低減してしまう。
即ち、該隣接参照画素には、一部の重要ではない参照画素点（例えば、これらの参照画素点の関連性が比較的低い）又は一部の異常の参照画素点が存在する可能性がある。モデルパラメータを導出する正確度を確保するために、これらの参照画素点を除去する必要があり、それにより隣接参照画素サブセットを取得する。そうすると、隣接参照画素サブセットに基づいて予測モデルの正確度を確保して、処理対象画像成分の予測効率を高くすることができる。
隣接参照画素サブセットに所定数の参照画素点が含まれる。ここで、所定数はＮ個であってもよく、Ｎが１より大きな正の整数である。実際の応用では、Ｎの値は４つあってもよいが、本願の実施例は具体的に制限しない。
いくつかの実施例では、Ｓ３０２にとって、前記隣接参照画素に基づいて隣接参照画素サブセットを構築することは、
前記現在ブロックの少なくとも１つの辺に基づいて前記候補画素の候補位置を決定することと、
前記隣接参照画素から前記候補位置に対応する参照画素を選択し、選択された参照画素により前記隣接参照画素サブセットを構成することと、を含んでもよい。
更に、前記現在ブロックの少なくとも１つの辺に基づいて前記候補画素の候補位置を決定することは、
前記現在ブロックの少なくとも１つの辺に隣接する参照画素に対応する画素位置に基づいて、前記候補位置を決定することを含んでもよい。
更に、前記現在ブロックの少なくとも１つの辺に基づいて前記候補画素の候補位置を決定することは、
前記現在ブロックの少なくとも１つの辺に隣接する参照画素に対応する画像成分強度値に基づいて、前記候補位置を決定することを含んでもよい。
更に、前記現在ブロックの少なくとも１つの辺に基づいて前記候補画素の候補位置を決定することは、
前記現在ブロックの少なくとも１つの辺に隣接する参照画素に対応する画素位置及び画像成分強度値に基づいて、前記候補位置を決定することを含んでもよい。
なお、画像成分強度は画像成分値、例えば輝度値、色度値等で示されてもよい。ここで、画像成分値が大きければ大きいほど、画像成分強度が高くなると説明される。本願の実施例の選択された参照画素は候補画素の候補位置によって選択されてもよい。候補位置は画素位置によって決定されてもよく、画像成分強度値（例えば、輝度値、色度値等）によって決定されてもよく、本願の実施例は具体的に制限しない。
Ｓ３０３、前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算し、前記予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、前記予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数である。
なお、隣接参照画素サブセットに基づいて複数組のモデルパラメータを算出することができ、各組のモデルパラメータに基づいて１つの予測サブモデルを構築することができる。そうすると、Ｎ組のモデルパラメータを算出した場合、Ｎ個の予測サブモデルを取得することができる。
更に、予測モデルは非線形モデル又は複雑モデルであってもよい。複雑モデルは二次曲線等の非線形形式の非線形モデルであってもよく、複数の線形モデルからなるマルチモデルであってもよい。そうすると、複雑モデルについては、隣接参照画素サブセットから重要ではない参照画素点又は一部の異常の参照画素点を除去したため、隣接参照画素サブセットに基づいて決定したＮ組のモデルパラメータをより正確にし、それにより複雑モデルの精度を向上させ、且つ処理対象画像成分の予測正確度を向上させる。
本実施例は画像成分予測方法を提供し、画像における現在ブロックの隣接参照画素を決定し、隣接参照画素に基づいて隣接参照画素サブセットを構築し、隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれ、隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算し、予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数である。このように、現在ブロックの隣接参照画素を選別処理することにより、重要ではない参照画素点又は異常の参照画素点を除去することができ、それにより隣接参照画素セットにおける画素の個数を減少させ、隣接参照画素サブセットにおける画素の個数を比較的少なくし、計算複雑性及びメモリ帯域幅を低減するだけではなく、予測モデルの精度も向上させる。また、少なくとも２つの予測サブモデルにより処理対象画像成分に対して成分間予測処理を行うことにより、処理対象画像成分の予測正確度を向上させるとともに、ビデオ画像の予測効率も向上させる。
更に、取得された隣接参照画素にはいくつかの重要ではない参照画素点又は異常の参照画素点が存在する可能性があり、これらの参照画素点はモデルパラメータの計算に影響し、それにより予測モデルの正確度に影響する。このとき、隣接参照画素から一部の参照画素点を選択して隣接参照画素サブセットを構成し、該隣接参照画素サブセットに基づいてモデルパラメータを計算することができる。
なお、本願の実施例の選択された一部の参照画素点は、参照画素に対応する画素位置によって選択されてもよく、参照画素に対応する画像成分強度値（例えば、輝度値、色度値等）によって選択されてもよく、本願の実施例は具体的に制限しない。参照画素に対応する画素位置それとも参照画素に対応する画像成分強度値によって隣接参照画素を選別するかにかかわらず、いずれも適切な参照画素点を選択し、更に隣接参照画素サブセットを構成する。そうすると、隣接参照画素サブセットに基づいて導出したモデルパラメータがより正確であり、該モデルパラメータに基づいて構築した予測モデルをより正確にする。
いくつかの実施例では、前記現在ブロックの少なくとも１つの辺に基づいて前記候補画素の候補位置を決定することは、
所定の候補画素数を決定し、前記所定の候補画素数は前記現在ブロックの少なくとも１つの辺に隣接する参照画素からサンプリングされた画素数を示すことと、
前記所定の候補画素数及び前記現在ブロックの少なくとも１つの辺の長さに基づいて、前記候補位置を決定し、前記現在ブロックの少なくとも１つの辺の長さは前記現在ブロックの少なくとも１つの辺に含まれる画素数に等しいことと、を含んでもよい。
なお、所定の候補画素数は予め設定されたサンプリング対象の画素点の個数、即ち隣接参照画素サブセットに含まれる画素の個数を示す。画素位置を例として、所定の候補画素数を決定した後、少なくとも１つの辺の辺長及び所定の候補画素数に基づいて候補画素の候補位置を算出することができ、次に、候補位置に基づいて、隣接参照画素から適切な参照画素点を選択して隣接参照画素サブセットを構成する。そうすると、隣接参照画素サブセットに基づいて計算したモデルパラメータがより正確であり、それにより構築された予測モデルもより正確であり、更に予測対象画像成分の予測正確度を向上させ、ビデオ画像の予測効率を向上させる。
更に、候補位置の決定については、まず、第１サンプリング間隔を計算し、次に、第１サンプリング間隔に基づいて該少なくとも１つの辺をサンプリング処理して、該少なくとも１つの辺に対応する候補画素の候補位置を決定してもよい。従って、いくつかの実施例では、前記現在ブロックの少なくとも１つの辺に基づいて前記候補画素の候補位置を決定することは、
前記所定の候補画素数及び前記現在ブロックの少なくとも１つの辺の長さに基づいて、第１サンプリング間隔を計算することと、
前記現在ブロックの少なくとも１つの辺から１つの基準点を決定し、前記第１サンプリング間隔に応じて前記候補位置を決定することと、を含んでもよい。
なお、基準点は前記少なくとも１つの辺の中点であってもよく、前記少なくとも１つの辺の中点より左の１番目の参照画素点位置であってもよく、前記少なくとも１つの辺の中点より右の第１参照画素点位置であってもよく、ひいては前記少なくとも１つの辺の他の参照画素点位置であってもよく、本願の実施例は具体的に制限しない。
具体的に、前記少なくとも１つの辺の長さに基づいて前記少なくとも１つの辺の中点を決定し、次に、前記少なくとも１つの辺の中点を前記基準点とすることができる。基準点は前記少なくとも１つの辺の中点であってもよく、前記少なくとも１つの辺の中点より左の１番目の参照画素点位置であってもよく、前記少なくとも１つの辺の中点より右の第１参照画素点位置であってもよく、ひいては前記少なくとも１つの辺の他の参照画素点位置であってもよく、本願の実施例は具体的に制限しない。
なお、現在ブロックの少なくとも１つの辺に隣接する参照画素点の重要性がその対応の位置に関連することを考慮して、隣接参照画素サブセットにおける参照画素点に隣接辺全体の特性を代表させるために、該辺の中心位置に位置する参照画素点をできる限り選択する必要があり、それにより重要性の比較的低い点（例えば、該辺の両側縁の参照画素点）を除去する。本願の実施例では、現在ブロックの上側辺を例として説明すれば、中間位置より右又は左の１番目の参照画素点位置を該辺の基準点としてもよく、現在ブロックの左側辺を例として説明すれば、中間位置より下又は上の１番目の参照画素点位置を該辺の基準点としてもよい。
これ以外に、基準点を決定する前に更に、まず、現在ブロックの１つの辺の終了位置に対応する所定数の参照画素点を除去し、又は、該辺に対して終了位置から所定のオフセット量に基づいて初期オフセットを行って、オフセット後の参照画素点位置を開始点として、新たな辺を取得し、次に、新たな辺に対応する中間位置を基準点とすることができる。それに対応して、まず、現在ブロックの１つの辺の開始位置に対応する所定数の参照画素点を除去し、又は、該辺に対して開始位置から所定のオフセット量に基づいて初期オフセットを行って、オフセット後の参照画素点位置を開始点として、新たな辺を取得し、次に、新たな辺に対応する中間位置を基準点とすることができる。
実際の応用では、現在ブロックの左側辺又は上側辺の辺長がいずれも２の整数倍であるため、現在ブロックの左側辺又は上側辺の中間位置はいずれも２つの点の間に位置する。図４の例では、中間位置より左の１番目の画素点を該辺の中点とするが、本願の実施例では、図５に示すように、中間位置より右の１番目の画素点を該辺の中点としてもよい。図４では、中間位置より左の１番目の画素点（例えば、図４における３）を該辺の中点とし、所定のサンプリング個数が２であるため、選択対象の参照画素点位置（例えば、図４における灰色点の例）を１及び５として決定することができ、これらの参照画素点位置に基づいて対応の参照画素点を選択することもでき、これらにより隣接参照画素サブセットを構成する。従って、本願の実施例では、現在ブロックの上側辺については、中間位置より右の１番目の画素点を該辺の中点としてもよく、中間位置より左の１番目の画素点を該辺の中点としてもよく、本願の実施例は具体的に制限しない。また、現在ブロックの左側辺については、中間位置より下の１番目の画素点を該辺の中点としてもよく、中間位置より上の１番目の画素点を該辺の中点としてもよく、本願の実施例は具体的に制限しない。
特に説明しない限り、以下に現在ブロックの上側辺を例として説明するが、本願の実施例の画像成分予測方法は同様に現在ブロックの左側辺、ひいては再設定ブロックの右側辺又は再設定ブロックの下側辺に適用され、本願の実施例は具体的に制限しない。
Figure 0007383720000001
Figure 0007383720000002
更に、所定の候補画素数及び現在ブロックの１つの辺の長さに基づいて、該辺に対応する第１サンプリング間隔を算出することができる。また、現在ブロックの左側辺又は上側辺の辺長がいずれも２の整数倍であるため、現在ブロックの左側辺又は上側辺の中間位置はいずれも２つの点の間に位置し、この場合、算出された中点値は非整数であり、算出された参照画素点位置も非整数である。ところが、現在ブロックの左側辺又は上側辺の辺長が２の整数倍ではない場合、現在ブロックの左側辺又は上側辺の中間位置は２つの点の間に位置せず、この場合、算出された中点値は整数であり、算出された参照画素点位置も整数であり、即ち、算出された中点値は整数であってもよく、非整数であってもよい。これに対応して、算出された参照画素点位置は整数であってもよく、非整数であってもよい。本願の実施例は具体的に制限しない。
このように、算出された中点値が整数である場合、これに対応して、算出された参照画素点位置も整数であり、この場合、直接に算出された参照画素点位置を候補位置としてもよい。算出された中点値が非整数である場合、これに対応して、算出された参照画素点位置も非整数であり、この場合、端数を切り上げる又は端数を切り捨てることによって候補位置を決定することができる。
更に、いくつかの実施例では、第１サンプリング間隔を計算した後、該方法は更に、
前記第１サンプリング間隔を調整して、第２サンプリング間隔を取得することと、
前記基準点に基づいて、前記第２サンプリング間隔に応じて前記候補位置を決定することと、を含んでもよい。
なお、第１サンプリング間隔を算出した後、更に第１サンプリング間隔を微調整することができ、例えば、第１サンプリング間隔に１を加え、又は第１サンプリング間隔から１を引くことにより、第２サンプリング間隔を取得する。例えば、第１サンプリング間隔が４である場合、調整後の第２サンプリング間隔は３又は５であってもよい。本願の実施例では、第１サンプリング間隔の調整については、小幅（例えば、１を加え又は１を引く）の調整を行うことができるが、調整幅の具体的な設定については、本願の実施例は具体的に制限しない。
更に、いくつかの実施例では、第２サンプリング間隔を取得した後、該方法は更に、
前記基準点に基づいて、前記第１サンプリング間隔に応じて前記基準点の片側に対応する候補位置を決定し、前記第２サンプリング間隔に応じて前記基準点の他側に対応する候補位置を決定することを含んでもよい。
即ち、現在ブロックの少なくとも１つの辺の基準点を決定した後、第１サンプリング間隔又は第２サンプリング間隔に応じて均一にサンプリングしてもよく、第１サンプリング間隔及び第２サンプリング間隔に応じて非均一にサンプリングしてもよい。且つサンプリング後に決定した候補位置は、基準点の両側に対称に分布してもよく、基準点の両側に非対称に分布してもよい。本願の実施例は具体的に制限しない。
更に、隣接参照画素における現在ブロックの予測対象画像成分に比較的関連するのは少なくとも１つの辺の中間位置に位置する参照画素点であるため、該中間位置近傍の連続する所定のサンプリング個数の参照画素点位置を選択対象の参照画素点位置としてもよく、該方法は中間位置で連続的に点を取る方式と称されてもよい。具体的に、現在ブロックの上側辺又は左側辺に隣接する１行／１列の参照画素点位置に０から番号をつけると仮定すれば、本実施例における構成された隣接参照画素サブセットにおける隣接参照画素点の個数及び対応の選択対象の参照画素点位置は表１に示される。このとき、中間位置近傍の連続する所定のサンプリング個数の参照画素点位置を候補位置とし、これらにより隣接参照画素サブセットを構成することができる。
Figure 0007383720000003
更に、隣接参照画素の選別処理については、少なくとも１つの辺の参照画素点をスキップ処理することができ、即ち重要ではない参照画素点又は異常の参照画素点をスキップして（削除処理として見なしてもよい）、隣接参照画素サブセットを取得する。これに基づいて、即ち少なくとも１つの辺の一部の参照画素点をスキップした後、残った参照画素点を選別処理して、隣接参照画素サブセットを取得してもよい。従って、いくつかの実施例では、前記現在ブロックの少なくとも１つの辺に基づいて前記候補画素の候補位置を決定することは、
前記現在ブロックの少なくとも１つの辺に対応する所定のスキップ画素数Ｋを決定し、Ｋが１以上の正の整数であることと、
前記現在ブロックの少なくとも１つの辺の開始位置及び／又は終了位置から、Ｋ個のスキップ対象画素点に対応する位置を決定することと、
前記Ｋ個のスキップ対象画素点に対応する位置に基づいて、前記現在ブロックの少なくとも１つの辺の開始位置及び／又は終了位置から、Ｋ個のスキップ対象画素点を連続的にスキップして、前記現在ブロックの少なくとも１つの新たな辺を取得することと、
前記現在ブロックの少なくとも１つの新たな辺及び前記所定の候補画素数に基づいて、前記候補位置を決定することと、を含んでもよい。
なお、所定のスキップ画素数は、予め設定された削除対象又はスキップ対象の画素点の個数を示す。また、少なくとも１つの辺の開始位置は、現在ブロックの上側辺の最左縁位置又は現在ブロックの左側辺の最上縁位置を示し、少なくとも１つの辺の終了位置は、現在ブロックの上側辺の最右縁位置又は現在ブロックの左側辺の最下縁位置を示す。
更に、Ｋの値は予め設定された参照画素点の個数、例えば１、２又は４等であってもよく、現在ブロックの辺長及びその対応の所定比率に基づいて算出したものであってもよいが、実際の応用では、依然として実際の状況に応じて設定され、本願の実施例は具体的に制限しない。現在ブロックの上側辺に対応する所定比率は第１所定比率で示されてもよく、現在ブロックの左側辺に対応する所定比率は第２所定比率で示されてもよく、第１所定比率及び第２所定比率の値は同じであってもよく、又は異なってもよく、本願の実施例は具体的に制限しない。
このように、少なくとも１つの辺の開始位置から、少なくとも１つの辺が現在ブロックの上側辺（現在ブロックの参照行と称されてもよい）であると仮定すれば、少なくとも１つの辺の最左縁位置からＫ個のスキップ対象画素点に対応する位置を決定することができ、少なくとも１つの辺が現在ブロックの左側辺（現在ブロックの参照列と称されてもよい）である場合、少なくとも１つの辺の最上縁位置からＫ個のスキップ対象画素点に対応する位置を決定することができる。少なくとも１つの辺の終了位置から、少なくとも１つの辺が現在ブロックの上側辺であると仮定すれば、少なくとも１つの辺の最右縁位置から、Ｋ個のスキップ対象画素点に対応する位置を決定することができ、少なくとも１つの辺が現在ブロックの左側辺である場合、少なくとも１つの辺の最下縁位置から、Ｋ個のスキップ対象画素点に対応する位置を決定することができる。実際の応用では、実際の状況に応じて設定し、本願の実施例は具体的に制限しない。
Ｋ個のスキップ対象画素点に対応する位置を決定した後、少なくとも１つの辺の開始位置から、少なくとも１つの辺が現在ブロックの上側辺であると仮定すれば、該上側辺の最左縁位置から右へ連続するＫ個のスキップ対象画素点に対応する位置を決定し、次に、このＫ個のスキップ対象画素点を連続的にスキップして、新たな上側辺を取得することができる。このとき、新たな上側辺の辺長及び所定の候補画素数に基づいて該新たな上側辺に対応する候補位置を決定することができ、それにより選択された候補画素により隣接参照画素サブセットを構成する。少なくとも１つの辺が現在ブロックの左側辺である場合、該左側辺の最上縁位置から下へ連続するＫ個のスキップ対象画素点に対応する位置を決定し、次に、このＫ個のスキップ対象画素点を連続的にスキップして、新たな左側辺を取得することができる。このとき、新たな左側辺の辺長及び所定の候補画素数に基づいて該新たな左側辺に対応する候補位置を決定することができ、それにより選択された候補画素により隣接参照画素サブセットを構成する。又は、少なくとも１つの辺の終了位置から、少なくとも１つの辺が現在ブロックの上側辺であると仮定すれば、該上側辺の最右縁位置から左へ連続するＫ個のスキップ対象画素点に対応する位置を決定し、次に、このＫ個のスキップ対象画素点を連続的にスキップして、新たな上側辺を取得することができる。このとき、新たな上側辺の辺長及び所定の候補画素数に基づいて該新たな上側辺に対応する候補位置を決定することができ、それにより選択された候補画素により隣接参照画素サブセットを構成する。少なくとも１つの辺が現在ブロックの左側辺である場合、該左側辺の最下縁位置から上へ連続するＫ個のスキップ対象画素点に対応する位置を決定し、次に、このＫ個のスキップ対象画素点を連続的にスキップして、新たな左側辺を取得することができる。このとき、新たな左側辺の辺長及び所定の候補画素数に基づいて該新たな左側辺に対応する候補位置を決定することができ、それにより選択された候補画素により隣接参照画素サブセットを構成する。
このように、本願の実施例は現在ブロックに隣接する参照画素点に基づいて取得した隣接参照画素のうちの一部の画素（即ち、隣接参照画素サブセット）を使用して、複雑モデル（例えば、非線形モデル又はマルチモデル）に対応するモデルパラメータを導出する。取得されたサブセット（即ち、隣接参照画素サブセット）から重要ではない参照画素点又は異常の参照画素点を除去したため、より少ない参照画素点個数を有する。そうすると、計算複雑性及びメモリ帯域幅を低減するだけではなく、複雑モデルの精度も向上させ、それにより処理対象画像成分の予測正確度及びビデオ画像の予測効率を向上させる目的を実現することができる。
更に、隣接参照画素サブセットを決定した後、該隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算して、予測モデルを構築することができる。該予測モデルはＮ個の予測サブモデルを含んでもよく、Ｎが２以上の正の整数である。従って、いくつかの実施例では、Ｓ３０３にとって、前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算することは、
前記隣接参照画素サブセットに基づいてＮ個の第１隣接参照画素サブセットを構築することと、
前記Ｎ個の第１隣接参照画素サブセットに基づいて、前記Ｎ個の予測サブモデルに対応するＮ組のモデルパラメータを計算し、各予測サブモデルが１組のモデルパラメータに対応することと、を含んでもよい。
更に、前記隣接参照画素サブセットに基づいてＮ個の第１隣接参照画素サブセットを構築することは、
前記隣接参照画素サブセットに基づいて少なくとも１つの閾値を決定することと、
前記少なくとも１つの閾値に基づいて、前記隣接参照画素サブセットを前記Ｎ個の第１隣接参照画素サブセットに分割することと、を含んでもよい。
なお、閾値は隣接参照画素サブセットに含まれる参照画素点を分類する根拠であるとともに、現在ブロックの第１画像成分再設定値の分類根拠でもある。また、閾値は更に複数の予測サブモデルを設定するように指示するために根拠となる設定値であり、閾値の大きさは、該現在ブロックにおけるすべての画素点に対応する第１画像成分再設定値に関連する。
具体的に、閾値の大きさは、該現在ブロックにおけるすべての画素点に対応する第１画像成分再設定値の平均値を計算することにより取得されてもよく、該現在ブロックにおけるすべての画素点の第１画像成分再設定値の中央値を計算することにより取得されてもよく、本願の実施例は具体的に制限しない。
Figure 0007383720000004
Figure 0007383720000005
Figure 0007383720000006
更に、いくつかの実施例では、前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算した後、該方法は更に、
前記現在ブロックにおける各画素に対応する第１画像成分再設定値を決定することと、
前記Ｎ個の予測サブモデルから１つの予測サブモデルを選択することと、
選択された予測サブモデル及び前記現在ブロックにおける各画素に対応する第１画像成分再設定値に基づいて、前記現在ブロックにおける各画素に対応する第２画像成分予測値を計算し、前記予測対象画像成分が第２画像成分であることと、を含んでもよい。
更に、前記Ｎ個の予測サブモデルから１つの予測サブモデルを選択することは、
前記現在ブロックにおける各画素に対応する第１画像成分再設定値と前記少なくとも１つの閾値とを比較することと、
比較結果に基づいて、前記Ｎ個の予測サブモデルから前記現在ブロックにおける各画素に対応する予測サブモデルを選択することと、を含んでもよい。
Figure 0007383720000007
更に、なお、少なくとも２つの予測サブモデルを設定した後、該現在ブロックにおける各画素点に対応する第１画像成分再設定値と少なくとも１つの閾値とを比較してもよく、比較結果に基づいて、前記少なくとも２つの予測サブモデルから各画素点に対応する予測サブモデルを選択し、次に、選択された予測サブモデルに基づいて予測対象画像成分を予測処理して、予測対象画像成分の予測値を取得する。
Figure 0007383720000008
Figure 0007383720000009
Figure 0007383720000010
Figure 0007383720000011
Figure 0007383720000012
具体的に、複雑モデル（例えば、２つ又は複数の線形モデルを含む）については、ＭＭＬＭの予測モデルを利用して予測対象画像成分の予測処理を行うことができる。現在ブロックについては、異なる位置座標の画素点は、異なるモデルパラメータに対応する予測サブモデルペアを選択して、予測値を構築することができる。例えば、２つの線形モデルがあり、且つ該現在ブロックに２つの画素点ｍ及びｎがあり、この２つの画素点が２つの異なる再設定輝度値を有し、且つこの２つの再設定輝度値が異なる２つの間隔内にあると仮定する。
Figure 0007383720000013
Figure 0007383720000014
これ以外に、本願の実施例はより複雑な予測モデル（例えば、より複雑な非線形モデル又はより複雑なマルチモデル）を構築することができ、成分間予測又は交差成分予測を実現することに用いられる。例えば、取得された再設定輝度値に基づいて色度値を予測してもよく、取得された再設定色度値に基づいて輝度値を予測してもよく、ひいては異なる色度値の間で予測してもよい。
本実施例は画像成分予測方法を提供し、上記実施例の具体的な実現を詳しく説明したが、上記実施例の技術案から分かるように、現在ブロックの隣接参照画素を選別処理することにより、重要ではない参照画素点又は異常の参照画素点を除去することができ、それにより成分間予測においてモデルパラメータを導出するために必要なサンプル数を減少させ、計算複雑性及びメモリ帯域幅を低減するだけではなく、予測モデルも最適化し、予測モデルの精度を向上させる。また、本願は主に複雑モデル（非線形モデル又はマルチモデル）におけるモデルパラメータの導出過程を最適化し、少なくとも２つの予測サブモデルを利用して予測対象画像成分の予測処理を実現し、予測対象画像成分の予測正確度を向上させるとともに、ビデオ画像の予測効率も向上させる。
図７には本願の実施例に係る他の画像成分予測方法の模式的なフローチャートを示す。図７に示すように、該方法は、
画像における現在ブロックの第１画像成分の第１参照画素セットを決定し、前記第１参照画素セットには前記現在ブロックに隣接する画素が含まれるＳ７０１と、
第１参照画素セットを利用してＮ個の第１参照画素サブセットを構築し、前記第１参照画素サブセットに前記第１参照画素セットにおける一部の画素が含まれ、Ｎが予測モデルの数に等しいＳ７０２と、
前記Ｎ個の第１参照画素サブセットを利用して、それぞれＮ個の予測モデルのモデルパラメータを計算し、前記予測モデルは前記現在ブロックの第１画像成分値を前記現在ブロックの第２画像成分の予測値にマッピングすることに用いられ、前記第２画像成分が前記第１画像成分と異なるＳ７０３と、を含んでもよい。
なお、ビデオ画像は複数の画像ブロックに分割されてもよく、各現在の符号化対象の画像ブロックは符号化ブロックと称されてもよい。各符号化ブロックは第１画像成分、第２画像成分及び第３画像成分を含んでもよいが、現在ブロックはビデオ画像における現在に第１画像成分、第２画像成分又は第３画像成分を予測することを待つ符号化ブロックである。予測モデルにより第１画像成分を予測する必要がある場合、予測対象画像成分は第１画像成分であり、予測モデルにより第２画像成分を予測する必要がある場合、予測対象画像成分は第２画像成分であり、予測モデルにより第３画像成分を予測する必要がある場合、予測対象画像成分は第３画像成分である。本願の実施例では、予測対象画像成分は第２画像成分を例として説明し、予測モデルにより現在ブロックの第１画像成分値を現在ブロックの第２画像成分の予測値にマッピングすることができる。
更に、予測モデルは非線形モデル又は複雑モデルであってもよい。複雑モデルは二次曲線等の非線形形式の非線形モデルであってもよく、複数の線形モデルからなるマルチモデルであってもよい。そうすると、複雑モデルについては、現在ブロックの隣接参照画素には一部の重要ではない参照画素点（例えば、これらの参照画素点の関連性が比較的低い）又は一部の異常の参照画素点が存在する可能性があり、従って、モデルパラメータの導出の正確度を確保するために、これらの参照画素点を除去する必要があり、それにより参照画素サブセットを構築する。このように参照画素サブセットに基づいて決定したモデルパラメータがより正確であり、複雑モデルの精度を向上させるだけではなく、処理対象画像成分の予測正確度も向上させる。
本実施例は画像成分予測方法を提供し、画像における現在ブロックの第１画像成分の第１参照画素セットを決定し、前記第１参照画素セットには前記現在ブロックに隣接する画素が含まれ、第１参照画素セットを利用してＮ個の第１参照画素サブセットを構築し、第１参照画素サブセットに前記第１参照画素セットにおける一部の画素が含まれ、Ｎが予測モデルの数に等しく、更に、前記Ｎ個の第１参照画素サブセットを利用して、それぞれＮ個の予測モデルのモデルパラメータを計算し、前記予測モデルは前記現在ブロックの第１画像成分値を前記現在ブロックの第２画像成分の予測値にマッピングすることに用いられ、前記第２画像成分が前記第１画像成分と異なる。このように、現在ブロックの隣接参照画素を選別処理することにより、重要ではない参照画素点又は異常の参照画素点を除去することができ、それにより隣接参照画素セットにおける画素の個数を減少させ、隣接参照画素サブセットにおける画素の個数を比較的少なくし、計算複雑性及びメモリ帯域幅を低減するだけではなく、予測モデルの精度も向上させる。また、少なくとも２つの予測サブモデルにより処理対象画像成分に対して成分間予測処理を行うことにより、処理対象画像成分の予測正確度を向上させるとともに、ビデオ画像の予測効率も向上させる。
更に、いくつかの実施例では、Ｓ７０２にとって、前記第１参照画素セットを利用してＮ個の第１参照画素サブセットを構築することは、
前記第１参照画素セットに基づいて少なくとも１つの閾値を決定することと、
前記少なくとも１つの閾値に基づいて、前記第１参照画素セットを前記Ｎ個の第１参照画素サブセットに分割することと、を含んでもよい。
なお、Ｎの値は２以上の正の整数である。
更に、閾値は隣接参照画素サブセットに含まれる参照画素点を分類する根拠であるとともに、現在ブロックの第１画像成分再設定値の分類根拠でもある。また、閾値は更に複数の予測サブモデルを設定するように指示するために根拠となる設定値であり、閾値の大きさは、該現在ブロックにおけるすべての画素点に対応する第１画像成分再設定値に関連する。具体的に、閾値の大きさは、該現在ブロックにおけるすべての画素点に対応する第１画像成分再設定値の平均値を計算することにより取得されてもよく、該現在ブロックにおけるすべての画素点の第１画像成分再設定値の中央値を計算することにより取得されてもよく、本願の実施例は具体的に制限しない。
いくつかの実施例では、Ｓ７０１にとって、前記画像における現在ブロックの第１画像成分の第１参照画素セットを決定することは、
前記現在ブロックの辺における一部又は全部の画素に基づいて、前記第１参照画素セットを取得し、前記現在ブロックの辺は上側隣接行、右上側隣接行、左側隣接列及び左下側隣接列のうちの少なくとも１つを含むことを含んでもよい。
なお、現在ブロックの少なくとも１つの辺は上行（上側辺と称されてもよい）、右上行（右上側辺と称されてもよい）、左列（左側辺と称されてもよい）又は左下列（左下側辺と称されてもよい）のうちの少なくとも１つを含んでもよい。これらの辺における一部の画素又は全部画素により第１参照画素セットを構成することができる。
更に、現在ブロックの隣接参照画素には一部の重要ではない参照画素点（例えば、これらの参照画素点の関連性が比較的低い）又は一部の異常の参照画素点が存在する可能性があり、従って、隣接参照画素を選別する必要があり、選別された候補画素により第１参照画素セットを構成する。従って、いくつかの実施例では、前記現在ブロックの辺における一部又は全部の画素に基づいて前記第１参照画素セットを取得することは、
前記現在ブロックの辺において前記候補画素の候補位置を決定することと、
前記候補位置の画素に基づいて前記第１参照画素セットを取得することと、を含んでもよい。
更に、前記現在ブロックの辺において前記候補画素の候補位置を決定することは、
前記現在ブロックの辺における画素に対応する画素位置に基づいて、前記候補位置を決定することを含んでもよい。
更に、前記現在ブロックの辺において前記候補画素の候補位置を決定することは、
前記現在ブロックの辺における画素に対応する第１画像成分値に基づいて、前記候補位置を決定することを含んでもよい。
更に、前記現在ブロックの辺において前記候補画素の候補位置を決定することは、
前記現在ブロックの辺における画素に対応する画素位置、及び前記現在ブロックの辺における画素に対応する第１画像成分値に基づいて、前記候補位置を決定することを含んでもよい。
なお、第１画像成分値は主に画素の画像成分強度、例えば輝度値、色度値等を示すことに用いられ、ここで、画像成分値が大きければ大きいほど、画像成分強度が高くなると説明される。
更に、本願の実施例の選択された参照画素は候補画素の候補位置により選択されたものであってもよい。候補位置は画素位置に基づいて決定したものであってもよく、第１画像成分値（例えば、輝度値、色度値等）に基づいて決定したものであってもよく、画素位置及び第１画像成分値に基づいて共同で決定したものであってもよく、本願の実施例は具体的に制限しない。即ち、本願の実施例の選択された一部の参照画素点は、参照画素に対応する画素位置により選択されたものであってもよく、参照画素に対応する画像成分強度値（例えば、輝度値、色度値等）に基づいて選択したものであってもよい。参照画素に対応する画素位置それとも参照画素に対応する画像成分強度値により隣接参照画素を選別するかにかかわらず、いずれも適切な参照画素点を選択し、更に第１参照画素セットを構成する。そうすると、第１参照画素セットをＮ個の第１参照画素サブセットに分割した後、Ｎ個の第１参照画素サブセットに基づいて導出したモデルパラメータがより正確であり、該モデルパラメータに基づいて構築した予測モデルをより正確にする。
更に、候補位置の決定については、まず、第１サンプリング間隔を計算し、次に、第１サンプリング間隔に基づいて該少なくとも１つの辺をサンプリング処理して、該少なくとも１つの辺に対応する候補画素の候補位置を決定してもよい。従って、いくつかの実施例では、前記現在ブロックの辺において前記候補画素の候補位置を決定することは、
所定の候補画素数を決定し、前記所定の候補画素数は前記現在ブロックの辺から選択された画素数を示すことと、
前記所定の画素数及び前記現在ブロックの辺の長さに基づいて、前記候補位置を決定し、前記現在ブロックの辺の長さが前記現在ブロックの辺における画素数に等しいことと、を含んでもよい。
なお、所定の候補画素数は、予め設定されたサンプリング対象の画素点の個数、即ち隣接参照画素サブセットに含まれる画素の個数を示す。画素位置を例として、所定の候補画素数を決定した後、少なくとも１つの辺の辺長及び所定の候補画素数に基づいて候補画素の候補位置を算出し、次に、候補位置に基づいて、隣接参照画素から適切な参照画素点を選択して隣接参照画素サブセットを構成することができる。
更に、候補位置の決定については、まず、第１サンプリング間隔を計算し、次に、第１サンプリング間隔に基づいて該少なくとも１つの辺をサンプリング処理して、該少なくとも１つの辺に対応する候補画素の候補位置を決定してもよい。従って、いくつかの実施例では、前記所定の候補画素数を決定した後、該方法は更に、
前記現在ブロックの辺の長さ及び前記所定の候補画素数に基づいて、第１サンプリング間隔を計算することを含んでもよい。
更に、前記第１サンプリング間隔を計算した後、該方法は更に、
前記第１サンプリング間隔を調整して、第２サンプリング間隔を取得することを含んでもよい。
更に、前記現在ブロックの辺において前記候補画素の候補位置を決定することは、
前記現在ブロックの辺において基準点を決定し、前記基準点から前記第１サンプリング間隔で前記候補位置を決定することを含んでもよい。
なお、基準点は前記少なくとも１つの辺の中点であってもよく、前記少なくとも１つの辺の中点より左の１番目の参照画素点位置であってもよく、前記少なくとも１つの辺の中点より右の第１参照画素点位置であってもよく、ひいては前記少なくとも１つの辺の他の参照画素点位置であってもよく、本願の実施例は具体的に制限しない。
更に、第１サンプリング間隔を算出した後、更に第１サンプリング間隔を微調整することができ、例えば、第１サンプリング間隔に１を加え、又は第１サンプリング間隔から１を引くことにより、第２サンプリング間隔を取得する。例えば、第１サンプリング間隔が４である場合、調整後の第２サンプリング間隔は３又は５であってもよい。本願の実施例では、第１サンプリング間隔の調整については、小幅（例えば、１を加え又は１を引く）の調整を行うことができるが、調整幅の具体的な設定については、本願の実施例は具体的に制限しない。
更に、いくつかの実施例では、前記現在ブロックの辺において前記候補画素の候補位置を決定することは、
前記現在ブロックの辺において基準点を決定し、前記第１サンプリング間隔で前記基準点の両側の前記候補位置を決定することを含んでもよい。
更に、いくつかの実施例では、前記現在ブロックの辺において前記候補画素の候補位置を決定することは、
前記現在ブロックの辺において基準点を決定し、前記基準点から前記第２サンプリング間隔で前記候補位置を決定することを含んでもよい。
更に、いくつかの実施例では、前記現在ブロックの辺において前記候補画素の候補位置を決定することは、
前記現在ブロックの辺において基準点を決定し、前記第２サンプリング間隔で前記基準点の両側の前記候補位置を決定することを含んでもよい。
更に、いくつかの実施例では、前記現在ブロックの辺において前記候補画素の候補位置を決定することは、
前記現在ブロックの辺において基準点を決定し、前記第１サンプリング間隔で前記基準点の片側に対応する候補位置を決定し、前記第２サンプリング間隔で前記基準点の他側に対応する候補位置を決定することを含んでもよい。
なお、現在ブロックの少なくとも１つの辺の基準点を決定した後、第１サンプリング間隔又は第２サンプリング間隔に応じて均一にサンプリングしてもよく、第１サンプリング間隔及び第２サンプリング間隔に応じて非均一にサンプリングしてもよい。且つサンプリング後に決定した候補位置は、基準点の両側に対称に分布してもよく、基準点の両側に非対称に分布してもよく、本願の実施例は具体的に制限しない。
更に、隣接参照画素の選別処理については、更に少なくとも１つの辺の参照画素点をスキップ処理してもよく、即ち重要ではない参照画素点又は異常の参照画素点をスキップし（削除処理として見なしてもよい）、それにより隣接参照画素サブセットを取得する。これに基づいて、即ち少なくとも１つの辺の一部の参照画素点をスキップした後、残った参照画素点を選別処理してもよく、それにより隣接参照画素サブセットを取得する。従って、いくつかの実施例では、該方法は更に、
前記現在ブロックの辺の所定のスキップ画素数Ｋを決定し、Ｋが非負整数であることと、
前記現在ブロックの辺の端位置からＫ番目の画素位置を前記基準点として設定し、前記現在ブロックの辺の端位置が前記現在ブロックの辺の開始画素位置又は終了画素位置であることと、を含んでもよい。
なお、所定のスキップ画素数は予め設定された削除対象又はスキップ対象の画素点の個数を示す。また、少なくとも１つの辺の開始位置は現在ブロックの上側辺の最左縁位置又は現在ブロックの左側辺の最上縁位置を示し、少なくとも１つの辺の終了位置は現在ブロックの上側辺の最右縁位置又は現在ブロックの左側辺の最下縁位置を示す。
更に、Ｋの値は予め設定された参照画素点の個数、例えば１、２又は４等であってもよく、現在ブロックの辺長及びその対応の所定比率に基づいて算出したものであってもよいが、実際の応用では、依然として実際の状況に応じて設定され、本願の実施例は具体的に制限しない。現在ブロックの上側辺に対応する所定比率は第１所定比率で示されてもよく、現在ブロックの左側辺に対応する所定比率は第２所定比率で示されてもよく、第１所定比率及び第２所定比率の値は同じであってもよく、又は異なってもよく、本願の実施例は具体的に制限しない。
更に、前記Ｎ個の第１参照画素サブセットを決定した後、該Ｎ個の第１参照画素サブセットに基づいて予測モデルのモデルパラメータを計算して、予測モデルを構築することができる。該予測モデルはＮ個の予測サブモデルを含んでもよく、Ｎが２以上の正の整数である。従って、いくつかの実施例では、前記Ｎ個の第１参照画素サブセットを利用して、それぞれＮ個の予測モデルのモデルパラメータを計算した後、該方法は更に、
前記現在ブロックにおける画素に対応する第１画像成分再設定値を決定することと、
前記Ｎ個の予測モデルから１つの予測モデルを選択することと、
選択された予測モデル及び前記現在ブロックにおける画素に対応する第１画像成分再設定値を利用して、前記現在ブロックにおける画素に対応する第２画像成分予測値を計算することと、を含んでもよい。
更に、前記Ｎ個の予測モデルから１つの予測モデルを選択することは、
前記現在ブロックにおける画素に対応する第１画像成分再設定値と前記少なくとも１つの閾値とを比較することと、
比較結果に基づいて、前記Ｎ個の予測モデルから前記現在ブロックにおける画素が使用する予測モデルを選択することと、を含んでもよい。
なお、Ｎ個の予測モデルを構築した後、該現在ブロックにおける各画素点に対応する第１画像成分再設定値と少なくとも１つの閾値とを比較し、比較結果に基づいて、Ｎ個の予測モデルから各画素点に対応する１つの予測モデルを選択し、次に、選択された予測モデルに基づいて予測対象画像成分を予測処理し、それにより予測対象画像成分の予測値を取得することができる。
更に、予測モデルは非線形モデル又は複雑モデルであってもよい。複雑モデルは二次曲線等の非線形形式の非線形モデルであってもよく、複数の線形モデルからなるマルチモデルであってもよい。そうすると、複雑モデルについては、隣接参照画素サブセットから重要ではない参照画素点又は一部の異常の参照画素点を除去したため、隣接参照画素サブセットに基づいて決定したＮ組のモデルパラメータをより正確にし、それにより複雑モデルの精度を向上させ、且つ処理対象画像成分の予測正確度を向上させる。
また、本願の実施例では、該画像成分予測方法がエンコーダ側に適用される場合、隣接参照画素に基づいて隣接参照画素サブセットを構築し、次に、該隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算し、且つ算出されたモデルパラメータをビットストリームに書き込むことができ、該ビットストリームはエンコーダ側からデコーダ側に伝送される。それに対応して、該画像成分予測方法がデコーダ側に適用される場合、ビットストリームを解析することにより予測モデルのモデルパラメータを直接に取得することができ、又は、デコーダ側において、隣接参照画素に基づいて隣接参照画素サブセットを構築し、次に、該隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算してもよく、それにより予測モデルを構築し、該予測モデルを利用して現在ブロックの少なくとも１つの画像成分に対して成分間予測処理を行う。
本実施例は画像成分予測方法を提供し、上記実施例の具体的な実現を詳しく説明したが、上記実施例の技術案から分かるように、現在ブロックの隣接参照画素を選別処理することにより、重要ではない参照画素点又は異常の参照画素点を除去することができ、それにより隣接参照画素セットにおける画素の個数を減少させ、隣接参照画素サブセットにおける画素の個数を比較的少なくし、計算複雑性及びメモリ帯域幅を低減するだけではなく、予測モデルの精度も向上させる。また、少なくとも２つの予測サブモデルにより処理対象画像成分に対して成分間予測処理を行うことにより、処理対象画像成分の予測正確度を向上させるとともに、ビデオ画像の予測効率も向上させる。
上記実施例と同じ発明構想に基づいて、図８には本願の実施例に係るエンコーダ８０の構成模式図を示す。該エンコーダ８０は第１決定ユニット８０１、第１構築ユニット８０２及び第１計算ユニット８０３を備えてもよく、
前記第１決定ユニット８０１は、画像における現在ブロックの隣接参照画素を決定するように設定され、
前記第１構築ユニット８０２は、前記隣接参照画素に基づいて隣接参照画素サブセットを構築するように設定され、前記隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれ、
前記第１計算ユニット８０３は、前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算するように設定され、前記予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、前記予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数である。
上記解決手段では、図８に示すように、エンコーダ８０は更に第１取得ユニット８０４を備えてもよい。該第１取得ユニット８０４は、前記現在ブロックの少なくとも１つの辺に隣接する参照画素を取得し、前記現在ブロックの少なくとも１つの辺は上行、右上行、左列及び左下列のうちの少なくとも１つを含み、取得された参照画素に基づいて、前記隣接参照画素を取得するように設定される。
上記解決手段では、図８に示すように、エンコーダ８０は更に第１選択ユニット８０５を備えてもよく、
前記第１決定ユニット８０１は更に、前記現在ブロックの少なくとも１つの辺に基づいて前記候補画素の候補位置を決定するように設定され、
前記第１選択ユニット８０５は、前記隣接参照画素から前記候補位置に対応する参照画素を選択し、選択された参照画素により前記隣接参照画素サブセットを構成するように設定される。
上記解決手段では、前記第１決定ユニット８０１は更に、前記現在ブロックの少なくとも１つの辺に隣接する参照画素に対応する画素位置に基づいて、前記候補位置を決定するように設定される。
上記解決手段では、前記第１決定ユニット８０１は更に、前記現在ブロックの少なくとも１つの辺に隣接する参照画素に対応する画像成分強度値に基づいて、前記候補位置を決定するように設定される。
上記解決手段では、前記第１決定ユニット８０１は更に、前記現在ブロックの少なくとも１つの辺に隣接する参照画素に対応する画素位置及び画像成分強度値に基づいて、前記候補位置を決定するように設定される。
上記解決手段では、前記第１決定ユニット８０１は更に、所定の候補画素数を決定し、前記所定の候補画素数は前記現在ブロックの少なくとも１つの辺に隣接する参照画素からサンプリングされた画素数を示し、前記所定の候補画素数及び前記現在ブロックの少なくとも１つの辺の長さに基づいて、前記候補位置を決定し、前記現在ブロックの少なくとも１つの辺の長さは前記現在ブロックの少なくとも１つの辺に含まれる画素数に等しいように設定される。
上記解決手段では、前記第１計算ユニット８０３は更に、前記所定の候補画素数及び前記現在ブロックの少なくとも１つの辺の長さに基づいて、第１サンプリング間隔を計算するように設定され、
前記第１決定ユニット８０１は更に、前記現在ブロックの少なくとも１つの辺から１つの基準点を決定し、前記第１サンプリング間隔に応じて前記候補位置を決定するように設定される。
上記解決手段では、図８に示すように、エンコーダ８０は更に第１調整ユニット８０６を備えてもよく、該第１調整ユニット８０６は、前記第１サンプリング間隔を調整して、第２サンプリング間隔を取得するように設定され、
前記第１決定ユニット８０１は更に、前記基準点に基づいて、前記第２サンプリング間隔に応じて前記候補位置を決定するように設定される。
上記解決手段では、前記第１決定ユニット８０１は更に、前記基準点に基づいて、前記第１サンプリング間隔に応じて前記基準点の片側に対応する候補位置を決定し、前記第２サンプリング間隔に応じて前記基準点の他側に対応する候補位置を決定するように設定される。
上記解決手段では、前記第１決定ユニット８０１は更に、前記現在ブロックの少なくとも１つの辺に対応する所定のスキップ画素数Ｋを決定し、Ｋが１以上の正の整数であり、前記現在ブロックの少なくとも１つの辺の開始位置及び／又は終了位置から、Ｋ個のスキップ対象画素点に対応する位置を決定し、前記Ｋ個のスキップ対象画素点に対応する位置に基づいて、前記現在ブロックの少なくとも１つの辺の開始位置及び／又は終了位置から、Ｋ個のスキップ対象画素点を連続的にスキップして、前記現在ブロックの少なくとも１つの新たな辺を取得し、前記現在ブロックの少なくとも１つの新たな辺及び前記所定の候補画素数に基づいて、前記候補位置を決定するように設定される。
上記解決手段では、前記第１構築ユニット８０２は、前記隣接参照画素サブセットに基づいてＮ個の第１隣接参照画素サブセットを構築するように設定され、
前記第１計算ユニット８０３は、前記Ｎ個の第１隣接参照画素サブセットに基づいて、前記Ｎ個の予測サブモデルに対応するＮ組のモデルパラメータを計算するように設定され、各予測サブモデルは１組のモデルパラメータに対応する。
上記解決手段では、図８に示すように、エンコーダ８０は更に第１分割ユニット８０７を備えてもよく、
前記第１決定ユニット８０１は更に、前記隣接参照画素サブセットに基づいて少なくとも１つの閾値を決定するように設定され、
前記第１分割ユニット８０７は、前記少なくとも１つの閾値に基づいて、前記隣接参照画素サブセットを前記Ｎ個の第１隣接参照画素サブセットに分割するように設定される。
上記解決手段では、前記第１決定ユニット８０１は更に、前記現在ブロックにおける各画素に対応する第１画像成分再設定値を決定するように設定され、
前記第１選択ユニット８０５は更に、前記Ｎ個の予測サブモデルから１つの予測サブモデルを選択するように設定され、
前記第１計算ユニット８０３は更に、選択された予測サブモデル及び前記現在ブロックにおける各画素に対応する第１画像成分再設定値に基づいて、前記現在ブロックにおける各画素に対応する第２画像成分予測値を計算するように設定され、前記予測対象画像成分は第２画像成分である。
上記解決手段では、図８に示すように、エンコーダ８０は更に第１比較ユニット８０８を備えてもよく、該第１比較ユニット８０８は、前記現在ブロックにおける各画素に対応する第１画像成分再設定値と前記少なくとも１つの閾値とを比較するように設定され、
前記第１選択ユニット８０５は更に、比較結果に基づいて、前記Ｎ個の予測サブモデルから前記現在ブロックにおける各画素に対応する予測サブモデルを選択するように設定される。
理解されるように、本願の実施例では、「ユニット」は一部の回路、一部のプロセッサ、一部のプログラム又はソフトウェア等であってもよく、当然ながら、モジュールであってもよく、モジュール化されていないものであってもよい。且つ、本実施例の各構成部分は１つの処理ユニットに統合されてもよく、各ユニットは独立して物理的に存在してもよく、２つ以上のユニットは１つのユニットに統合されてもよい。上記統合されたユニットはハードウェアの形式で実現されてもよく、ソフトウェア機能モジュールの形式で実現されてもよい。
前記統合されたユニットはソフトウェア機能モジュールの形式で実現され、独立した製品として販売又は使用されるとき、１つのコンピュータ可読記憶媒体に記憶されてもよい。このような理解に基づいて、本実施例の技術案の本質的又は従来技術に貢献する部分、又は該技術案の全部又は一部はソフトウェア製品の形式で具現されてもよい。該コンピュータソフトウェア製品は、１台のコンピュータ装置（パーソナルコンピュータ、サーバ又はネットワーク装置等であってもよい）又はｐｒｏｃｅｓｓｏｒ（プロセッサ）に本実施例に記載の方法の全部又は一部のステップを実行させるための若干の命令を含む１つの記憶媒体に記憶される。そして、上記記憶媒体はＵＳＢメモリ、ポータブルハードディスク、読み出し専用メモリ（ＲＯＭ、Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ランダムアクセスメモリ（ＲＡＭ、Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、磁気ディスク又は光ディスク等のプログラムコードを記憶できる様々な媒体を含む。
従って、本願の実施例はコンピュータ記憶媒体を提供し、該コンピュータ記憶媒体に画像成分予測プログラムが記憶され、前記画像成分予測プログラムが少なくとも１つのプロセッサにより実行されるとき、上記実施例のいずれか１項に記載の方法を実現する。
上記エンコーダ８０の構成及びコンピュータ記憶媒体に基づいて、図９には本願の実施例に係るエンコーダ８０の具体的なハードウェアの構造例を示し、第１通信インターフェース９０１、第１メモリ９０２及び第１プロセッサ９０３を備えてもよい。各コンポーネントは第１バスシステム９０４によって一体に結合される。理解されるように、第１バスシステム９０４はこれらのコンポーネントの間の接続通信を実現することに用いられる。第１バスシステム９０４はデータバスのほか、更に電源バス、制御バス及び状態信号バスを含むが、明確に説明するために、図９では様々なバスがいずれも第１バスシステム９０４と記され、
第１通信インターフェース９０１は、他の外部ネットワーク要素との情報送受信過程において、信号を送受信することに用いられ、
第１メモリ９０２は、第１プロセッサ９０３において実行され得るコンピュータプログラムを記憶することに用いられ、
第１プロセッサ９０３は、前記コンピュータプログラムを実行するとき、
画像における現在ブロックの隣接参照画素を決定することと、
前記隣接参照画素に基づいて、前記隣接参照画素のうちの一部の画素が含まれる隣接参照画素サブセットを構築することと、
前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算し、前記予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、前記予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数であることと、を実行することに用いられる。
理解されるように、本願の実施例では、第１メモリ９０２は揮発性メモリ又は不揮発性メモリであってもよく、又は、揮発性メモリ及び不揮発性メモリの両方を含んでもよい。不揮発性メモリは読み出し専用メモリ（ＲＯＭ、Ｒｅａｄ－Ｏｎｌｙ Ｍｅｍｏｒｙ）、プログラム可能読み出し専用メモリ（ＰＲＯＭ、Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、消去可能プログラム可能読み出し専用メモリ（ＥＰＲＯＭ、Ｅｒａｓａｂｌｅ ＰＲＯＭ）、電気的消去可能プログラム可能読み出し専用メモリ（ＥＥＰＲＯＭ、Ｅｌｅｃｔｒｉｃａｌｌｙ ＥＰＲＯＭ）又はフラッシュメモリであってもよい。揮発性メモリは外部キャッシュメモリとして使用されるランダムアクセスメモリ（ＲＡＭ、Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）であってもよい。例示的な説明であって制限的ではないが、多くの形式のＲＡＭ、例えばスタティックランダムアクセスメモリ（ＳＲＡＭ、Ｓｔａｔｉｃ ＲＡＭ）、ダイナミックランダムアクセスメモリ（ＤＲＡＭ、Ｄｙｎａｍｉｃ ＲＡＭ）、シンクロナスダイナミックランダムアクセスメモリ（ＳＤＲＡＭ、Ｓｙｎｃｈｒｏｎｏｕｓ ＤＲＡＭ）、ダブルデータレートシンクロナスダイナミックランダムアクセスメモリ（ＤＤＲＳＤＲＡＭ、Ｄｏｕｂｌｅ Ｄａｔａ Ｒａｔｅ ＳＤＲＡＭ）、拡張型シンクロナスダイナミックランダムアクセスメモリ（ＥＳＤＲＡＭ、Ｅｎｈａｎｃｅｄ ＳＤＲＡＭ）、シンクリンクダイナミックランダムアクセスメモリ（ＳＬＤＲＡＭ、Ｓｙｎｃｈｌｉｎｋ ＤＲＡＭ）及びダイレクトラムバスランダムアクセスメモリ（ＤＲＲＡＭ、Ｄｉｒｅｃｔ Ｒａｍｂｕｓ ＲＡＭ）は利用可能である。本願に説明されるシステム及び方法の第１メモリ９０２はこれらのメモリ及び任意の他の適切なタイプのメモリを含むが、それらに限らないように意図されるものである。
第１プロセッサ９０３は信号処理機能を有する集積回路チップでありうる。実現過程において、上記方法の各ステップは第１プロセッサ９０３におけるハードウェアの集積論理回路又はソフトウェア形式の命令で行われてもよい。上記第１プロセッサ９０３は汎用プロセッサ、デジタルシグナルプロセッサ（ＤＳＰ、Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）、特定用途向け集積回路（ＡＳＩＣ、Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ、Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）又は他のプログラマブルロジックデバイス、個別ゲート又はトランジスタロジックデバイス、個別ハードウェアコンポーネントであってもよい。本願の実施例に開示される各方法、ステップ及び論理ブロックを実現又は実行することができる。汎用プロセッサはマイクロプロセッサであってもよく、又は該プロセッサはいかなる通常のプロセッサ等であってもよい。本願の実施例に開示される方法のステップはハードウェア復号プロセッサで遂行し、又は復号プロセッサにおけるハードウェア及びソフトウェアモジュールの組み合わせで遂行するように直接具現されてもよい。ソフトウェアモジュールはランダムアクセスメモリ、フラッシュメモリ、読み出し専用メモリ、プログラム可能読み出し専用メモリ又は電気消去可能プログラム可能メモリ、レジスタ等の本分野で成熟している記憶媒体に位置してもよい。該記憶媒体は第１メモリ９０２に位置し、第１プロセッサ９０３は第１メモリ９０２における情報を読み取り、そのハードウェアと組み合わせて上記方法のステップを行う。
理解されるように、本願に説明されるこれらの実施例はハードウェア、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード又はそれらの組み合わせにより実現されてもよい。ハードウェアによる実現については、処理ユニットは１つ又は複数の特定用途向け集積回路（ＡＳＩＣ、Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔｓ）、デジタルシグナルプロセッサ（ＤＳＰ、Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｉｎｇ）、デジタル信号処理装置（ＤＳＰＤ、ＤＳＰ Ｄｅｖｉｃｅ）、プログラマブルロジックデバイス（ＰＬＤ、Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ、Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）、汎用プロセッサ、コントローラ、マイクロコントローラ、マイクロプロセッサ、本願に記載の機能を実行するための他の電子ユニット又はそれらの組み合わせにおいて実現されてもよい。ソフトウェアによる実現については、本願に記載の機能を実行するモジュール（例えば、過程、関数等）により本願に記載の技術を実現することができる。ソフトウェアコードはメモリに記憶されることができ、プロセッサにより実行される。メモリはプロセッサの内部又はプロセッサの外部で実現されることができる。
選択肢として、他の実施例として、第１プロセッサ９０３は更に、前記コンピュータプログラムを実行するとき、上記実施例のいずれか１項に記載の方法を実行するように設定される。
本実施例はエンコーダを提供する。該エンコーダは第１決定ユニット、第１構築ユニット及び第１計算ユニットを備えてもよい。第１決定ユニットは、画像における現在ブロックの隣接参照画素を決定するように設定される。第１構築ユニットは、前記隣接参照画素に基づいて隣接参照画素サブセットを構築するように設定され、隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれる。第１計算ユニットは、前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算するように設定され、予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数である。そうすると、隣接参照画素セットにおける画素の個数を減少させ、隣接参照画素サブセットにおける画素の個数を比較的少なくし、計算複雑性及びメモリ帯域幅を低減するだけではなく、予測モデルの精度も向上させる。
上記実施例と同じ発明構想に基づいて、図１０には本願の実施例に係るデコーダ１００の構成模式図を示す。該デコーダ１００は第２決定ユニット１００１、第２構築ユニット１００２及び第２計算ユニット１００３を備えてもよく、
前記第２決定ユニット１００１は、画像における現在ブロックの隣接参照画素を決定するように設定され、
前記第２構築ユニット１００２は、前記隣接参照画素に基づいて隣接参照画素サブセットを構築するように設定され、前記隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれ、
前記第２計算ユニット１００３は、前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算するように設定され、前記予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、前記予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数である。
上記解決手段では、図１０に示すように、デコーダ１００は更に第２取得ユニット１００４を備えてもよい。該第２取得ユニット１００４は、前記現在ブロックの少なくとも１つの辺に隣接する参照画素を取得し、前記現在ブロックの少なくとも１つの辺は上行、右上行、左列及び左下列のうちの少なくとも１つを含み、取得された参照画素に基づいて、前記隣接参照画素を取得するように設定される。
上記解決手段では、図１０に示すように、デコーダ１００は更に第２選択ユニット１００５を備えてもよく、
前記第２決定ユニット１００１は更に、前記現在ブロックの少なくとも１つの辺に基づいて前記候補画素の候補位置を決定するように設定され、
前記第２選択ユニット１００５は、前記隣接参照画素から前記候補位置に対応する参照画素を選択し、選択された参照画素により前記隣接参照画素サブセットを構成するように設定される。
上記解決手段では、前記第２決定ユニット１００１は更に、前記現在ブロックの少なくとも１つの辺に隣接する参照画素に対応する画素位置に基づいて、前記候補位置を決定するように設定される。
上記解決手段では、前記第２決定ユニット１００１は更に、前記現在ブロックの少なくとも１つの辺に隣接する参照画素に対応する画像成分強度値に基づいて、前記候補位置を決定するように設定される。
上記解決手段では、前記第２決定ユニット１００１は更に、前記現在ブロックの少なくとも１つの辺に隣接する参照画素に対応する画素位置及び画像成分強度値に基づいて、前記候補位置を決定するように設定される。
上記解決手段では、前記第２決定ユニット１００１は更に、所定の候補画素数を決定し、前記所定の候補画素数は前記現在ブロックの少なくとも１つの辺に隣接する参照画素からサンプリングされた画素数を示し、前記所定の候補画素数及び前記現在ブロックの少なくとも１つの辺の長さに基づいて、前記候補位置を決定し、前記現在ブロックの少なくとも１つの辺の長さは前記現在ブロックの少なくとも１つの辺に含まれる画素数に等しいように設定される。
上記解決手段では、前記第２計算ユニット１００３は更に、前記所定の候補画素数及び前記現在ブロックの少なくとも１つの辺の長さに基づいて、第１サンプリング間隔を計算するように設定され、
前記第２決定ユニット１００１は更に、前記現在ブロックの少なくとも１つの辺から１つの基準点を決定し、前記第１サンプリング間隔に応じて前記候補位置を決定するように設定される。
上記解決手段では、図１０に示すように、デコーダ１００は更に第２調整ユニット１００６を備えてもよく、該第２調整ユニット１００６は、前記第１サンプリング間隔を調整して、第２サンプリング間隔を取得するように設定され、
前記第２決定ユニット１００１は更に、前記基準点に基づいて、前記第２サンプリング間隔に応じて前記候補位置を決定するように設定される。
上記解決手段では、前記第２決定ユニット１００１は更に、前記基準点に基づいて、前記第１サンプリング間隔に応じて前記基準点の片側に対応する候補位置を決定し、前記第２サンプリング間隔に応じて前記基準点の他側に対応する候補位置を決定するように設定される。
上記解決手段では、前記第２決定ユニット１００１は更に、前記現在ブロックの少なくとも１つの辺に対応する所定のスキップ画素数Ｋを決定し、Ｋが１以上の正の整数であり、前記現在ブロックの少なくとも１つの辺の開始位置及び／又は終了位置から、Ｋ個のスキップ対象画素点に対応する位置を決定し、前記Ｋ個のスキップ対象画素点に対応する位置に基づいて、前記現在ブロックの少なくとも１つの辺の開始位置及び／又は終了位置から、Ｋ個のスキップ対象画素点を連続的にスキップして、前記現在ブロックの少なくとも１つの新たな辺を取得し、前記現在ブロックの少なくとも１つの新たな辺及び前記所定の候補画素数に基づいて、前記候補位置を決定するように設定される。
上記解決手段では、前記第２構築ユニット１００２は、前記隣接参照画素サブセットに基づいてＮ個の第１隣接参照画素サブセットを構築するように設定され、
前記第２計算ユニット１００３は、前記Ｎ個の第１隣接参照画素サブセットに基づいて、前記Ｎ個の予測サブモデルに対応するＮ組のモデルパラメータを計算するように設定され、各予測サブモデルは１組のモデルパラメータに対応する。
上記解決手段では、図１０に示すように、デコーダ１００は更に第２分割ユニット１００７を備えてもよく、
前記第２決定ユニット１００１は更に、前記隣接参照画素サブセットに基づいて少なくとも１つの閾値を決定するように設定され、
前記第２分割ユニット１００７は、前記少なくとも１つの閾値に基づいて、前記隣接参照画素サブセットを前記Ｎ個の第１隣接参照画素サブセットに分割するように設定される。
上記解決手段では、前記第２決定ユニット１００１は更に、前記現在ブロックにおける各画素に対応する第１画像成分再設定値を決定するように設定され、
前記第２選択ユニット１００５は更に、前記Ｎ個の予測サブモデルから１つの予測サブモデルを選択するように設定され、
前記第２計算ユニット１００３は更に、選択された予測サブモデル及び前記現在ブロックにおける各画素に対応する第１画像成分再設定値に基づいて、前記現在ブロックにおける各画素に対応する第２画像成分予測値を計算するように設定され、前記予測対象画像成分は第２画像成分である。
上記解決手段では、図１０に示すように、デコーダ１００は更に第２比較ユニット１００８を備えてもよく、該第２比較ユニット１００８は、前記現在ブロックにおける各画素に対応する第１画像成分再設定値と前記少なくとも１つの閾値とを比較するように設定され、
前記第２選択ユニット１００５は更に、比較結果に基づいて、前記Ｎ個の予測サブモデルから前記現在ブロックにおける各画素に対応する予測サブモデルを選択するように設定される。
理解されるように、本実施例では、「ユニット」は一部の回路、一部のプロセッサ、一部のプログラム又はソフトウェア等であってもよく、当然ながら、モジュールであってもよく、モジュール化されていないものであってもよい。且つ、本実施例の各構成部分は１つの処理ユニットに統合されてもよく、各ユニットは独立して物理的に存在してもよく、２つ以上のユニットは１つのユニットに統合されてもよい。上記統合されたユニットはハードウェアの形式で実現されてもよく、ソフトウェア機能モジュールの形式で実現されてもよい。
前記統合されたユニットはソフトウェア機能モジュールの形式で実現され、独立した製品として販売又は使用されるとき、１つのコンピュータ可読記憶媒体に記憶されてもよい。このような理解に基づいて、本実施例はコンピュータ記憶媒体を提供し、該コンピュータ記憶媒体に画像成分予測プログラムが記憶され、前記画像成分予測プログラムが第２プロセッサにより実行されるとき、上記実施例のいずれか１項に記載の方法を実現する。
上記デコーダ１００の構成及びコンピュータ記憶媒体に基づいて、図１１には本願の実施例に係るデコーダ１００の具体的なハードウェア構造を示し、第２通信インターフェース１１０１、第２メモリ１１０２及び第２プロセッサ１１０３を備えてもよく、各コンポーネントは第２バスシステム１１０４によって一体に結合される。理解されるように、第２バスシステム１１０４はこれらのコンポーネントの間の接続通信を実現することに用いられる。第２バスシステム１１０４はデータバスのほか、更に電源バス、制御バス及び状態信号バスを含むが、明確に説明するために、図１１では様々なバスがいずれも第２バスシステム１１０４と記され、
第２通信インターフェース１１０１は、他の外部ネットワーク要素との情報送受信過程において、信号を送受信することに用いられ、
第２メモリ１１０２は、第２プロセッサ１１０３において実行され得るコンピュータプログラムを記憶することに用いられ、
第２プロセッサ１１０３は、前記コンピュータプログラムを実行するとき、
画像における現在ブロックの隣接参照画素を決定することと、
前記隣接参照画素に基づいて、前記隣接参照画素のうちの一部の画素が含まれる隣接参照画素サブセットを構築することと、
前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算し、前記予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、前記予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数であることと、を実行することに用いられる。
選択肢として、他の実施例として、第２プロセッサ１１０３は更に、前記コンピュータプログラムを実行するとき、上記実施例のいずれか１項に記載の方法を実行するように設定される。
理解されるように、第２メモリ１１０２及び第１メモリ９０２のハードウェア機能は類似し、第２プロセッサ１１０３及び第１プロセッサ９０３のハードウェア機能は類似するため、ここで詳細な説明は省略する。
本実施例はデコーダを提供し、該デコーダは第２決定ユニット、第２構築ユニット及び第２計算ユニットを備えてもよい。第２決定ユニットは、画像における現在ブロックの隣接参照画素を決定するように設定され、第２構築ユニットは、前記隣接参照画素に基づいて隣接参照画素サブセットを構築するように設定され、隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれ、第２計算ユニットは、前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算するように設定され、予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数である。そうすると、隣接参照画素セットにおける画素の個数を減少させ、隣接参照画素サブセットにおける画素の個数を比較的少なくし、計算複雑性及びメモリ帯域幅を低減するだけではなく、予測モデルの精度も向上させる。
なお、本願では、用語「含む」、「包含」又はそのいかなる変形は非排他的包含を網羅することが意図され、それにより一連の要素を含む過程、方法、物品又は装置はそれらの要素を含むだけではなく、明確に列挙しない他の要素も含み、又はこのような過程、方法、物品又は装置固有の要素も含む。特に制限しない限り、語句「〇〇を含む」により制限される要素は、該要素を含む過程、方法、物品又は装置には他の同じ要素が更に存在することを排除しない。
上記本願の実施例の番号は説明のためのものに過ぎず、実施例の優劣を代表しない。
衝突しない限り、本願に係るいくつかの方法実施例に開示される方法は、任意に組み合わせられてもよく、それにより新たな方法実施例を取得する。
衝突しない限り、本願に係るいくつかの製品実施例に開示される特徴は、任意に組み合わせられてもよく、それにより新たな製品実施例を取得する。
衝突しない限り、本願に係るいくつかの方法又は装置実施例に開示される特徴は、任意に組み合わせられてもよく、それにより新たな方法実施例又は装置実施例を取得する。
以上の説明は、本願の具体的な実施形態に過ぎず、本願の保護範囲を制限するためのものではない。当業者が本願に開示される技術的範囲内で容易に想到し得る変更や置換は、いずれも本願の保護範囲内に含まれるべきである。従って、本願の保護範囲は特許請求の範囲に準じるべきである。
本願の実施例では、まず、画像における現在ブロックの隣接参照画素を決定し、次に、隣接参照画素に基づいて隣接参照画素サブセットを構築し、隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれ、更に、隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算し、予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数である。このように、現在ブロックの隣接参照画素を選別処理することにより、重要ではない参照画素点又は異常の参照画素点を除去することができ、それにより隣接参照画素セットにおける画素の個数を減少させ、隣接参照画素サブセットにおける画素の個数を比較的少なくし、計算複雑性及びメモリ帯域幅を低減するだけではなく、予測モデルの精度も向上させる。また、少なくとも２つの予測サブモデルにより処理対象画像成分に対して成分間予測処理を行うことにより、処理対象画像成分の予測正確度を向上させるとともに、ビデオ画像の予測効率も向上させる。

Claims (6)

  1. エンコーダに適用される画像成分予測方法であって、
    画像における現在ブロックの隣接参照画素を決定することと、
    前記隣接参照画素に基づいて隣接参照画素サブセットを構築し、前記隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれることと、
    前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算し、前記予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、前記予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数であることと、を含み、
    前記画像における現在ブロックの隣接参照画素を決定することは、前記現在ブロックの上行と右上行に隣接する参照画素又は前記現在ブロックの左列と左下列に隣接する参照画素を取得し、取得された参照画素に基づいて前記隣接参照画素を取得することを含み、
    前記隣接参照画素に基づいて隣接参照画素サブセットを構築することは、
    前記現在ブロックの少なくとも１つの辺に基づいて候補画素の候補位置を決定することと、
    前記隣接参照画素から前記候補位置に対応する参照画素を選択し、選択された参照画素により前記隣接参照画素サブセットを構成することと、を含み、
    前記現在ブロックの少なくとも１つの辺に基づいて前記候補画素の候補位置を決定することは、
    前記現在ブロックの少なくとも１つの辺に隣接する参照画素に対応する画素位置及び画像成分強度値に基づいて、前記候補位置を決定することを含む画像成分予測方法。
  2. 前記画像における現在ブロックの隣接参照画素を決定することは、
    前記現在ブロックの上行と左列に隣接する参照画素を取得することと、
    取得された参照画素に基づいて、前記隣接参照画素を取得することと、を更に含む、請求項１に記載の方法。
  3. デコーダに適用される画像成分予測方法であって、
    画像における現在ブロックの隣接参照画素を決定することと、
    前記隣接参照画素に基づいて隣接参照画素サブセットを構築し、前記隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれることと、
    前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算し、前記予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、前記予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数であることと、を含み、
    前記画像における現在ブロックの隣接参照画素を決定することは、前記現在ブロックの上行と右上行に隣接する参照画素又は前記現在ブロックの左列と左下列に隣接する参照画素を取得し、取得された参照画素に基づいて前記隣接参照画素を取得することを含み、
    前記隣接参照画素に基づいて隣接参照画素サブセットを構築することは、
    前記現在ブロックの少なくとも１つの辺に基づいて候補画素の候補位置を決定することと、
    前記隣接参照画素から前記候補位置に対応する参照画素を選択し、選択された参照画素により前記隣接参照画素サブセットを構成することと、を含み、
    前記現在ブロックの少なくとも１つの辺に基づいて前記候補画素の候補位置を決定することは、
    前記現在ブロックの少なくとも１つの辺に隣接する参照画素に対応する画素位置及び画像成分強度値に基づいて、前記候補位置を決定することを含む画像成分予測方法。
  4. 前記画像における現在ブロックの隣接参照画素を決定することは、
    前記現在ブロックの上行と左列に隣接する参照画素を取得することと、
    取得された参照画素に基づいて、前記隣接参照画素を取得することと、を更に含む、請求項３に記載の方法。
  5. エンコーダであって、第１決定ユニット、第１構築ユニット及び第１計算ユニットを備え、
    前記第１決定ユニットは、画像における現在ブロックの隣接参照画素を決定するように設定され、前記画像における現在ブロックの隣接参照画素を決定することは、前記現在ブロックの上行と右上行に隣接する参照画素又は前記現在ブロックの左列と左下列に隣接する参照画素を取得し、取得された参照画素に基づいて前記隣接参照画素を取得することを含み、
    前記第１構築ユニットは、前記隣接参照画素に基づいて隣接参照画素サブセットを構築するように設定され、前記隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれ、前記隣接参照画素に基づいて隣接参照画素サブセットを構築することは、前記現在ブロックの少なくとも１つの辺に基づいて候補画素の候補位置を決定することと、前記隣接参照画素から前記候補位置に対応する参照画素を選択し、選択された参照画素により前記隣接参照画素サブセットを構成することと、を含み、前記現在ブロックの少なくとも１つの辺に基づいて前記候補画素の候補位置を決定することは、前記現在ブロックの少なくとも１つの辺に隣接する参照画素に対応する画素位置及び画像成分強度値に基づいて、前記候補位置を決定することを含み、
    前記第１計算ユニットは、前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算するように設定され、前記予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、前記予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数である、エンコーダ。
  6. デコーダであって、第２決定ユニット、第２構築ユニット及び第２計算ユニットを備え、
    前記第２決定ユニットは、画像における現在ブロックの隣接参照画素を決定するように設定され、前記画像における現在ブロックの隣接参照画素を決定することは、前記現在ブロックの上行と右上行に隣接する参照画素又は前記現在ブロックの左列と左下列に隣接する参照画素を取得し、取得された参照画素に基づいて前記隣接参照画素を取得することを含み、
    前記第２構築ユニットは、前記隣接参照画素に基づいて隣接参照画素サブセットを構築するように設定され、前記隣接参照画素サブセットに前記隣接参照画素のうちの一部の画素が含まれ、
    前記隣接参照画素に基づいて隣接参照画素サブセットを構築することは、前記現在ブロックの少なくとも１つの辺に基づいて候補画素の候補位置を決定することと、前記隣接参照画素から前記候補位置に対応する参照画素を選択し、選択された参照画素により前記隣接参照画素サブセットを構成することと、を含み、前記現在ブロックの少なくとも１つの辺に基づいて前記候補画素の候補位置を決定することは、前記現在ブロックの少なくとも１つの辺に隣接する参照画素に対応する画素位置及び画像成分強度値に基づいて、前記候補位置を決定することを含み、
    前記第２計算ユニットは、前記隣接参照画素サブセットに基づいて予測モデルのモデルパラメータを計算するように設定され、前記予測モデルはＮ個の予測サブモデルを含み、Ｎ個の予測サブモデルはＮ組のモデルパラメータに対応し、前記予測サブモデルは対応のモデルパラメータによって予測対象画像成分に対して成分間予測処理を行うことに用いられ、Ｎが２以上の正の整数である、デコーダ。
JP2021551793A 2019-03-18 2019-10-28 画像成分予測方法、エンコーダ、デコーダ及び記憶媒体 Active JP7383720B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962819851P 2019-03-18 2019-03-18
US62/819,851 2019-03-18
PCT/CN2019/113771 WO2020186763A1 (zh) 2019-03-18 2019-10-28 图像分量预测方法、编码器、解码器以及存储介质

Publications (2)

Publication Number Publication Date
JP2022522487A JP2022522487A (ja) 2022-04-19
JP7383720B2 true JP7383720B2 (ja) 2023-11-20

Family

ID=72519653

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021551793A Active JP7383720B2 (ja) 2019-03-18 2019-10-28 画像成分予測方法、エンコーダ、デコーダ及び記憶媒体

Country Status (6)

Country Link
US (3) US11368680B2 (ja)
EP (2) EP3910951A4 (ja)
JP (1) JP7383720B2 (ja)
KR (1) KR20210119514A (ja)
CN (3) CN113676732B (ja)
WO (1) WO2020186763A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023247533A1 (en) * 2022-06-21 2023-12-28 Interdigital Ce Patent Holdings, Sas Methods and apparatuses for encoding and decoding an image or a video
WO2024058494A1 (ko) * 2022-09-13 2024-03-21 엘지전자 주식회사 예측 모델의 학습에 기반한 피쳐 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9462273B2 (en) 2011-11-04 2016-10-04 Huawei Technologies Co., Ltd. Intra-frame prediction and decoding methods and apparatuses for image signal
US20180077426A1 (en) 2016-09-15 2018-03-15 Qualcomm Incorporated Linear model chroma intra prediction for video coding

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101496406B (zh) * 2006-03-23 2012-02-01 三星电子株式会社 图像编码/解码方法和设备
KR101261526B1 (ko) * 2006-07-04 2013-05-06 삼성전자주식회사 영상의 부호화 방법 및 장치, 복호화 방법 및 장치
KR101498044B1 (ko) * 2007-01-10 2015-03-05 삼성전자주식회사 매크로 블럭이 적응적으로 부호화된 압축영상에 대한축소영상 생성방법 및 이를 적용한 영상기기
US8885726B2 (en) * 2007-12-04 2014-11-11 Vixs Systems, Inc. Neighbor management for use in entropy encoding and methods for use therewith
KR101997462B1 (ko) * 2010-04-09 2019-07-08 엘지전자 주식회사 비디오 데이터 처리 방법 및 장치
US9288500B2 (en) * 2011-05-12 2016-03-15 Texas Instruments Incorporated Luma-based chroma intra-prediction for video coding
US9106927B2 (en) 2011-09-23 2015-08-11 Qualcomm Incorporated Video coding with subsets of a reference picture set
JP2013141187A (ja) * 2012-01-06 2013-07-18 Sony Corp 画像処理装置及び画像処理方法
CN104380741B (zh) * 2012-01-19 2018-06-05 华为技术有限公司 用于lm帧内预测的参考像素缩减
CN102625126B (zh) * 2012-03-22 2014-10-15 北京工业大学 一种基于预测的三维网格编码方法
CA2896637C (en) * 2013-03-26 2018-02-13 Mediatek Inc. Method of cross color intra prediction
US9516306B2 (en) * 2013-03-27 2016-12-06 Qualcomm Incorporated Depth coding modes signaling of depth data for 3D-HEVC
US9826242B2 (en) * 2014-03-14 2017-11-21 Qualcomm Incorporated Palette-based video coding
WO2017139937A1 (en) * 2016-02-18 2017-08-24 Mediatek Singapore Pte. Ltd. Advanced linear model prediction for chroma coding
US11032550B2 (en) * 2016-02-25 2021-06-08 Mediatek Inc. Method and apparatus of video coding
US10484712B2 (en) * 2016-06-08 2019-11-19 Qualcomm Incorporated Implicit coding of reference line index used in intra prediction
EP3528497A4 (en) * 2016-10-14 2020-07-22 Industry-Academia Cooperation Foundation of Sejong University IMAGE CODING AND DECODING PROCESS AND DEVICE
US10873746B2 (en) * 2016-12-21 2020-12-22 Sharp Kabushiki Kaisha Intra prediction image generation device using cross-component liner model, image decoding apparatus, and image coding apparatus using same
JP2020120141A (ja) * 2017-05-26 2020-08-06 シャープ株式会社 動画像符号化装置及び動画像復号装置、フィルタ装置
CN107580222B (zh) * 2017-08-01 2020-02-14 北京交通大学 一种基于线性模型预测的图像或视频编码方法
GB2567249A (en) * 2017-10-09 2019-04-10 Canon Kk New sample sets and new down-sampling schemes for linear component sample prediction
US10419754B1 (en) * 2018-04-02 2019-09-17 Tencent America LLC Method and apparatus for video decoding using multiple line intra prediction
US10404980B1 (en) * 2018-07-10 2019-09-03 Tencent America LLC Intra prediction with wide angle mode in video coding

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9462273B2 (en) 2011-11-04 2016-10-04 Huawei Technologies Co., Ltd. Intra-frame prediction and decoding methods and apparatuses for image signal
US20180077426A1 (en) 2016-09-15 2018-03-15 Qualcomm Incorporated Linear model chroma intra prediction for video coding

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
Adarsh K. Ramasubramonian, et al.，"CE3: On MMLM (Test 2.1)"，JVET-M0097，version 1，[online], Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，2019年01月03日，Pages 1-4，[令和4年8月26日検索], インターネット, <URL: https://jvet-experts.org/doc_end_user/current_document.php?id=4902> and <URL: https://jvet-experts.org/doc_end_user/documents/13_Marrakech/wg11/JVET-M0097-v1.zip>.
Adarsh K. Ramasubramonian，"Cross-check of JVET-K0204: On cross-component linear model simplification"，JVET-K0512，version 2，[online], Joint Video Exploration Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，2018年07月16日，Pages 1-4，[令和4年8月25日検索], インターネット, <URL: https://jvet-experts.org/doc_end_user/current_document.php?id=4042> and <URL: https://jvet-experts.org/doc_end_user/documents/11_Ljubljana/wg11/JVET-K0512-v2.zip>.
Junyan Huo, et al.，"CE3-related: Fixed Reference Samples Design for CCLM"，JVET-M0211，version 3，[online], Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，2019年01月10日，Pages 1-6，[令和4年8月25日検索], インターネット, <URL: https://jvet-experts.org/doc_end_user/current_document.php?id=5018> and <URL: https://jvet-experts.org/doc_end_user/documents/13_Marrakech/wg11/JVET-M0211-v3.zip>.
Sheng-Po Wang, et al.，"Non-CE3: Adaptive multiple cross-component linear model"，JVET-K0536，version 1，[online], Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，2018年07月14日，Pages 1-3，[令和4年8月26日検索], インターネット, <URL: https://jvet-experts.org/doc_end_user/current_document.php?id=4066> and <URL: https://jvet-experts.org/doc_end_user/documents/11_Ljubljana/wg11/JVET-K0536-v1.zip>.
Xiang Ma, et al.，"CE3: CCLM/MDLM using simplified coefficients derivation method (Test 5.6.1, 5.6.2 and 5.6.3)"，JVET-L0340，version 5，[online], Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，2018年10月23日，Pages 1-6，[令和4年5月17日検索], インターネット, <URL: http://phenix.it-sudparis.eu/jvet/doc_end_user/current_document.php?id=4437> and <URL: http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/12_Macao/wg11/JVET-L0340-v5.zip>.

Also Published As

Publication number Publication date
EP4340360A3 (en) 2024-06-12
EP3910951A1 (en) 2021-11-17
JP2022522487A (ja) 2022-04-19
CN113676732A (zh) 2021-11-19
US20230388491A1 (en) 2023-11-30
CN113676732B (zh) 2023-06-20
EP4340360A2 (en) 2024-03-20
US11778172B2 (en) 2023-10-03
US11368680B2 (en) 2022-06-21
US20210368167A1 (en) 2021-11-25
CN113273194A (zh) 2021-08-17
EP3910951A4 (en) 2022-03-16
US20220248000A1 (en) 2022-08-04
WO2020186763A1 (zh) 2020-09-24
KR20210119514A (ko) 2021-10-05
CN116708794A (zh) 2023-09-05

Similar Documents

Publication Publication Date Title
CN111066326B (zh) 机器学习视频处理系统和方法
CN104702962B (zh) 帧内编解码方法、编码器和解码器
US20190014325A1 (en) Video encoding method, video decoding method, video encoder and video decoder
JP7540841B2 (ja) ループ内フィルタリングの方法、コンピュータ可読記憶媒体及びプログラム
JP7383720B2 (ja) 画像成分予測方法、エンコーダ、デコーダ及び記憶媒体
CN116438796A (zh) 图像预测方法、编码器、解码器以及计算机存储介质
JP2024503193A (ja) フレーム内予測方法、装置、及びデコーダとエンコーダ
JP2022520295A (ja) デコードのための予測方法及びその装置、並びにコンピュータ記憶媒体
JP7437426B2 (ja) インター予測方法および装置、機器、記憶媒体
KR20220088888A (ko) 인트라 예측을 위한 신경망의 반복 트레이닝
JP2022521366A (ja) イントラ予測方法、装置およびコンピュータ記憶媒体
CN116114246B (zh) 帧内预测平滑滤波器系统及方法
CN115834882A (zh) 一种帧内预测方法、装置、电子设备及存储介质
EP3462744A1 (en) Method and apparatus for encoding a picture block
WO2022188114A1 (zh) 帧内预测方法、编码器、解码器以及存储介质
JP2015076765A (ja) 画像処理装置及びその制御方法、並びに、コンピュータプログラム
JP2024511272A (ja) イントラ予測方法、符号器、復号器及び記憶媒体
WO2020258052A1 (zh) 图像分量预测方法、装置及计算机存储介质
JP7147145B2 (ja) 動画像符号化装置、動画像符号化方法、及び動画像符号化プログラム
CN113395520A (zh) 解码预测方法、装置及计算机存储介质
WO2023193253A1 (zh) 解码方法、编码方法、解码器以及编码器
JP7448568B2 (ja) 画像成分の予測方法、装置およびコンピュータ記憶媒体
CN113840144B (zh) 图像分量的预测方法、编码器、解码器及计算机存储介质
WO2023193254A1 (zh) 解码方法、编码方法、解码器以及编码器
WO2022165763A1 (zh) 编码方法、解码方法、编码器、解码器以及电子设备

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210831

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210831

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220902

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221202

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230324

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230724

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20230802

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231013

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231108

R150 Certificate of patent or registration of utility model

Ref document number: 7383720

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150