JP2022516808A - クロスコンポーネント線形モデルを用いたビデオコーディング - Google Patents

クロスコンポーネント線形モデルを用いたビデオコーディング Download PDF

Info

Publication number
JP2022516808A
JP2022516808A JP2021540265A JP2021540265A JP2022516808A JP 2022516808 A JP2022516808 A JP 2022516808A JP 2021540265 A JP2021540265 A JP 2021540265A JP 2021540265 A JP2021540265 A JP 2021540265A JP 2022516808 A JP2022516808 A JP 2022516808A
Authority
JP
Japan
Prior art keywords
sample
chroma
samples
parameter
adjacent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021540265A
Other languages
English (en)
Other versions
JP7119236B2 (ja
Inventor
チェン、イ－ウェン
ワン、シャンリン
シウ、シャオユー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Dajia Internet Information Technology Co Ltd
Original Assignee
Beijing Dajia Internet Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Dajia Internet Information Technology Co Ltd filed Critical Beijing Dajia Internet Information Technology Co Ltd
Publication of JP2022516808A publication Critical patent/JP2022516808A/ja
Priority to JP2022123496A priority Critical patent/JP7311689B2/ja
Application granted granted Critical
Publication of JP7119236B2 publication Critical patent/JP7119236B2/ja
Priority to JP2023111692A priority patent/JP2023126949A/ja
Priority to JP2023111695A priority patent/JP2023126950A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Investigating Or Analysing Biological Materials (AREA)

Abstract

ビデオコーディングのための方法およびコンピューティングデバイスが提供される。前記方法は、コーディングユニット（ＣＵ）における所定数の隣接する再構成されたルーマサンプルおよびクロマサンプルを用いることによってＣＣＬＭモードに対するパラメータαおよびパラメータβを導出することと、前記パラメータαおよび前記パラメータβを用いることによって前記ＣＵの前記クロマサンプルに対する最終的なクロマ予測子を生成することと、を含んでいてもよい。

Description

この出願は、２０１９年１月９日に出願された米国仮出願第６２／７９０，４５９号の利益を主張する。前述の出願の開示全体は、参照により本明細書に援用される。
本開示は、一般に、ビデオコーディングおよび圧縮に関する。より具体的には、この開示は、クロスコンポーネント線形モデルを用いたビデオコーディングを実行するためのシステムおよび方法に関する。方法は、特定の例示的な実施形態において、コーディングユニットのクロマサンプルに対する最終的なクロマ予測子によって記述される。
このセクションは、本開示に関連する背景情報を提供する。このセクションに含まれる情報は、必ずしも、先行技術として解釈されるべきものではない。
ビデオデータを圧縮するために、様々なビデオコーディング技術が用いられ得る。ビデオコーディングは、１以上のビデオコーディング標準に従って実行される。例えば、ビデオコーディング標準は、ＶＶＣ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）、ＪＥＭ（ｊｏｉｎｔ ｅｘｐｌｏｒａｔｉｏｎ ｔｅｓｔ ｍｏｄｅｌ）、Ｈ．２６５／ＨＥＶＣ（ｈｉｇｈ－ｅｆｆｉｃｉｅｎｃｙ ｖｉｄｅｏ ｃｏｄｉｎｇ）、Ｈ．２６４／ＡＶＣ（ａｄｖａｎｃｅｄ ｖｉｄｅｏ ｃｏｄｉｎｇ）、ＭＰＥＧ（ｍｏｖｉｎｇ ｐｉｃｔｕｒｅ ｅｘｐｅｒｔｓ ｇｒｏｕｐ）コーディングなどを含む。ビデオコーディングは、一般に、ビデオ画像またはシーケンスに存在する冗長性を利用する予測方法を用いる（例えば、インター予測、イントラ予測など）。ビデオコーディング技術の重要な目的の一つは、ビデオの品質に対する劣化を回避または最小化しつつ、より低いビットレートを用いる形式にビデオデータを圧縮することである。進化し続けるビデオサービスを可能にするには、より優れた圧縮効率を有するコーディング技術が必要とされる。
このセクションは開示の概要を提供するものであり、その全範囲やその特徴の全てに対する包括的な開示ではない。
本開示の第１の側面によれば、ビデオコーディングの方法は、１以上のプロセッサと、当該１以上のプロセッサによって実行される複数のプログラムを記憶する１以上のメモリと、を有するコンピューティングデバイスにおいて実行される。当該方法は、コーディングユニット（ＣＵ）における所定数の隣接する再構成されたルーマサンプルおよびクロマサンプルを用いることによってクロスコンポーネント線形モデル（ＣＣＬＭ）モードに対する第１パラメータαおよび第２パラメータβを導出することと、第１パラメータαおよび第２パラメータβを用いることにより、ＣＵのクロマサンプルに対する最終的なクロマ予測子を生成することと、を含む。
本開示の第２の側面によれば、コンピューティングデバイスが提供される。コンピューティングデバイスは、少なくとも一つのプロセッサと、当該１以上のプロセッサと接続された非一時的な記憶装置と、当該非一時的な記憶装置に格納され、当該プロセッサによって実行されると当該コンピューティングデバイスに以下を含む動作を行わせる複数のプログラムと、を含み、当該動作は、コーディングユニット（ＣＵ）における所定数の隣接する再構成されたルーマサンプルおよびクロマサンプルを用いることによってクロスコンポーネント線形モデル（ＣＣＬＭ）モードに関する第１パラメータαおよび第２パラメータβを導出することと、当該第１パラメータαおよび当該第２パラメータβを用いることによって当該ＣＵの当該クロマサンプルに対する最終的なクロマ予測子を生成することと、を含む。
以下では、本開示の例示的で非限定的な実施形態のセットが説明される。構造、方法、または機能のバリエーションは、ここで示された例に基づき、関連の技術分野の通常の技術者によって実施され得るし、そのようなバリエーションは全て本開示の範囲内に含まれる。矛盾が存在しない場合、異なる実施形態の教示は、必要ではないが、互いに組み合わせられてもよい。
図１は、多数のビデオコーディング標準とともに用いられ得る例示的なエンコーダを説明するブロック図である。 図２は、多数のビデオコーディング標準とともに用いられ得る例示的なデコーダを説明するブロック図である。 図３は、ビデオコーディング方法のフローチャートである。 図４は、ルーマ／クロマのピクセルサンプリンググリッドの例である。 図５は、αおよびβの導出のために用いられたサンプルの位置を示す。 図６は、ｍｉｎ－ｍａｘ法を用いたαおよびβの直線的導出を示す。 図７は、ＬＭ＿Ａモードを示す。 図８は、ＬＭ＿Ａモードを示す。 図９は、ＹＵＶ４：２：２フォーマットに対するルーマ／クロマのピクセルサンプリンググリッドである。 図１０は、ＹＵＶ４：２：４フォーマットに対するルーマ／クロマのピクセルサンプリンググリッドである。 図１１は、ＭＭＬＭの複数のネイバーを示す。 図１２は、三つのサンプルペアの一例の位置を示す。 図１３は、三つのサンプルペアの別の例の位置を示す。 図１４は、四つのサンプルペアの一例の位置を示す。 図１５は、四つのサンプルペアの別の例の位置を示す。
本開示において用いられた用語は、本開示を限定するのではなく、特定の例を説明することを対象とする。本開示および付随する特許請求の範囲に用いられた「ａ」、「ａｎ」および「ｔｈｅ」にあたる単数形は、他の意味が明らかに文脈に含まれる場合でなければ、複数形も指す。ここで用いられる用語「および／または」は１以上の関連する挙げられた項目の任意または全ての可能な組み合わせを指すということは理解されるべきである。
ここでは、様々な情報を示すために、「第１」、「第２」、「第３」などの用語が使用されてよく、当該情報は、これらの用語によって限定されるべきものではないということは理解されるべきである。これらの用語は、情報のある一つのカテゴリと、別のものと、を区別するために単に用いられている。例えば、本開示の範囲から逸脱することなく、第１の情報は、第２の情報と称されてもよいし、同様に、第２の情報も、第１の情報と称されてもよい。「であれば」にあたる用語は、ここで使用されるように、文脈に応じて、「場合」、「際」、または「に応じて」を意味すると理解されてもよい。
この明細書を通じて、「一実施形態」、「ある実施形態」、「別の実施形態」、または、単数形もしくは複数形のそのようなものへの言及は、ある実施形態に関連して説明された１以上の固有の特徴、構造、または性質が本開示の少なくとも一つの実施形態に含まれるということを意味する。したがって、この明細書を通じて様々な場所において「一実施形態において」、「ある実施形態において」、「別の実施形態において」、または、単数形もしくは複数形のそのようなもの、というフレーズの登場は、全てが同じ実施形態を必ずしも言及しているわけではない。さらに、どのような適切な方法においても、１以上の実施形態における固有の特徴、構造、または性質が組み合わせられてもよい。
概念的には、「背景」のセクションにおいて先に言及されたものも含め、多数のビデオコーディング標準は類似している。例えば、ほぼ全てのビデオコーディング標準は、ブロックベースの処理を用いており、映像圧縮を実現するために類似のビデオコーディングのブロック図を共有している。
図１は、多数のビデオコーディング標準とともに用いられ得る例示的なエンコーダ１００のブロック図を示す。エンコーダ１００では、ビデオフレームは、処理のために複数のビデオブロックに分割される。与えられた各ビデオブロックに対して、インター予測のアプローチまたはイントラ予測のアプローチのいずれかに基づいて予測が成される。インター予測では、先に再構成されたフレームからのピクセルに基づき、モーション推定およびモーション補償を通じて１以上の予測子が形成される。イントラ予測では、現フレームにおける再構成されたピクセルに基づいて予測子は形成される。モードの決定を通じて、現ブロックを予測するために最適な予測子が選択される。
現ビデオブロックとその予測子との相違を表す予測残差は、変換回路１０２に送られる。そして、エントロピー低減のために、変換回路１０２から量子化回路１０４に変換係数が送られる。そして、量子化された係数は、エントロピーコーディング回路１０６に供給され、圧縮されたビデオビットストリームを生成する。図１に示されるように、インター予測回路および／またはイントラ予測回路１１２からの、ビデオブロックパーティション情報、動きベクトル、参照ピクチャインデックス、イントラ予測モードなどといった予測関連情報１１０も、また、エントロピーコーディング回路１０６を通じて供給されて、圧縮されたビデオビットストリーム１１４に保存される。
エンコーダ１００では、予測を目的とした画素の再構成を行うために、デコーダ関連の回路もまた必要とされる。まず、逆量子化１１６と逆変換回路１１８を通じて、予測残差が再構成される。この再構成された予測残差は、ブロック予測子１２０と組み合わされ、現ビデオブロックに対するフィルタリングされていない再構成されたピクセルを生成する。
コーディング効率と画質を向上させるために、インループフィルタが一般的に使われる。例えば、ＶＶＣの現バーションと同様、ＡＶＣ、ＨＥＶＣにはデブロッキングフィルタが利用可能である。ＨＥＶＣでは、コーディング効率をさらに高めるために、ＳＡＯ（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）と呼ばれる追加のインループフィルタが定義されている。ＶＶＣ標準の今の現バーションでは、ＡＬＦ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）と呼ばれる別のインループフィルタが積極的に研究されており、最終標準に含まれる十分な可能性があるとされている。
これらのインループフィルタの操作はオプションである。これらの操作を行うことは、コーディング効率と画質の向上に役立つ。また、それらは、計算の手間を省くために、エンコーダ１００によってなされた決定として、オフにされてもよい。
これらのフィルタのオプションがエンコーダ１００によってオンになっているのであれば、インター予測はフィルタリングされた再構成されたピクセルに基づき、一方で、イントラ予測は通常フィルタリングされていない再構成されたピクセルに基づくことに留意すべきである。
図２は、多数のビデオコーディング標準とともに用いられ得る例示的なデコーダ２００を説明するブロック図である。このデコーダ２００は、図１のエンコーダ１００に存在する再構成の関連セクションと同様である。デコーダ２００（図２）では、まず、入力されるビデオビットストリーム２０１がエントロピーデコーディング２０２を通じてデコードされ、量子化された係数のレベルと予測関連情報が導出される。そして、量子化された係数のレベルは、逆量子化２０４および逆変換２０６を通じて処理され、再構成された予測残差が得られる。ブロック予測子のメカニズムは、イントラ／インターモードセレクタ２１２に実装されているが、復号された予測情報に基づき、イントラ予測２０８またはモーション補償２１０を実行するように構成される。フィルタリングされていない再構成されたピクセルのセットは、合算器２１４を用いて、逆変換２０６からの再構成された予測残差と、ブロック予測子のメカニズムによって生成された予測出力と、を合算することによって得られる。インループフィルタがオンになっている状況では、フィルタリング操作が、これらの再構成されたピクセルに対して行われて、出力用の最終的な再構成されたビデオが導出される。
クロスコンポーネントの冗長性を低減するため、クロスコンポーネント線形モデル（ＣＣＬＭ）の予測モードがＶＶＣにおいて用いられる。ＶＶＣの開発の間の共通テスト条件においてＹＵＶフォーマット４：２：０が用いられ、ＹＵＶフォーマット４：２：０に対するルーマサンプルおよびクロマサンプルのサンプリンググリッドは図４に示されている。ルーマサンプルおよびクロマサンプルの座標（ダウンサンプルされたルーマサンプルもまた図４に示されている）。ＲｅｃＬ’［ｘ，ｙ］は、ダウンサンプルされた上および左に隣接する再構成されたルーマサンプルを表し、ＲｅｃＣ’［ｘ，ｙ］は、上および左に隣接する再構成されたクロマサンプルを表し、ｘおよびｙは、図に示されているようにピクセルインデックスを示す。この開示では、ＣＣＬＭのパラメータの導出の複雑さを低減するため、いくつかの方法を提案する。
本開示は、一般に、ビデオデータのコーディング（例えば、エンコーディングおよびデコーディング）に関する。より具体的には、この開示は、ビデオコーディング方法と、ビデオコーディング方法のクロスコンポーネントの冗長性を低減するためのコンピューティングデバイスと、に関する。同じＣＵの再構成されたルーマサンプルに基づいてクロマサンプルを予測するために、ＣＣＬＭ予測子モードが使用される。コンピューティングデバイスは、少なくとも一つのプロセッサと、当該１以上のプロセッサと接続された非一時的な記憶装置と、当該非一時的な記憶装置に格納されて当該プロセッサによって実行されると当該コンピューティングデバイスにビデオコーディング方法の動作を行わせる複数のプログラムと、を含む。
図３に示すように、ビデオコーディングの方法は、少なくとも以下のステップを含む。
ステップ１０：ＣＵにおける所定数の隣接する再構成されたルーマサンプルおよびクロマサンプルを用いることによるＣＣＬＭモードに対する第１パラメータαおよび第２パラメータβの導出
ステップ２０：第１パラメータαおよび第２パラメータβを用いることによってＣＵのクロマサンプルに対する最終的なクロマ予測子の生成
ステップ２０では、次式を用いることによってＣＵのクロマサンプルに対する最終的なクロマ予測子を生成する。
Figure 2022516808000002
ｐｒｅｄＣ（ｘ，ｙ）は、ＣＵのクロマサンプルに対する最終的なクロマ予測子であり、ｒｅｃＬ’（ｘ，ｙ）はＣＵのダウンサンプルされた再構成されたルーマサンプルであり、ｘは行インデックスを示し、ｙは列インデックスを示す。
図５では、ルーマサンプルおよびクロマサンプル（ダウンサンプルされたルーマサンプル）の座標が示されている。
パラメータαおよびパラメータβは、次式（次のセクションにおいてｍｉｎ－ｍａｘ法と称されます）によって導出される。
Figure 2022516808000003
各クロマサンプルおよびそれの対応ルーマサンプルは、サンプルペアと称される。ｙＢは最大のサンプルペアのクロマサンプル値であり、ｙＡは最小のサンプルペアのクロマサンプル値であり、ｘＢは最大のサンプルペアのルーマサンプル値であり、ｘＡは最小のサンプルペアのルーマサンプル値である。
図６に描かれているように、２ポイント（ルーマおよびクロマの組み合わせ）（Ａ,Ｂ）は、隣接するルーマサンプルのセットのなかの最小値および最大値である。図６は、式（２）に従って線形モデルのパラメータαおよびパラメータβが得られた場合における、ルーマの最小値および最大値の間の直線についての図である。
図５では、ＲｅｃＬ’［ｘ，ｙ］はダウンサンプルされた上および左の隣接する再構成されたルーマサンプルを表し、ＲｅｃＣ［ｘ，ｙ］は上および左の隣接する再構成されたクロマサンプルを表し、ｘは行インデックスを示し、ｙは列インデックスを示す。なお、図５の四角いブロックは図４に描かれたルーマサンプルの位置に対応する再構成されたルーマサンプルであり、図５の丸は、図４に描かれたクロマサンプルまたはダウンサンプルされたルーマサンプルの位置に対応する。四角形状のコーディングブロックに対しては、ｍｉｎ－ｍａｘ法が直接適用される。四角ではないコーディングブロックに対しては、まず、長い方の境界の隣接するサンプルが、短い方の境界に対するサンプルと同数になるようにサブサンプリングされる。図５は、左および上のサンプルの位置と、ＣＣＬＭモードに関わる現在のブロックのサンプルと、を示している。
ｍｉｎ－ｍａｘ法の計算は、デコーディング処理の一部として実行され、単なるエンコーダの検索操作としてではない。そのため、パラメータαおよびパラメータβの値をデコーダに伝えるためのシンタックスは使用されていない。現在、式／フィルタ（３）は、ダウンサンプルされたルーマサンプルを生成するために、ルーマダウンサンプリングフィルタとして使用される。しかし、式（３）から（１９）に示すように、ダウンサンプルされたルーマサンプルを生成するために、異なる式／フィルタを選択することができる。なお、式（５）から（１０）は、ダウンサンプリング処理なしで直接サンプルを取得しているとみなすことができる。
Figure 2022516808000004
上のテンプレートおよび左のテンプレートは、ともに線形モデルの係数を計算するために使用することができる上に、代替として、他の２つのＬＭモード、ＬＭ＿ＡおよびＬＭＬと呼ばれるが、においても、それぞれ使用することができる。図７に示すように、ＬＭ＿Ａモードでは、上のテンプレートが線形モデルの係数の算出に用いられる。より多くのサンプルを得るために、上のテンプレートは（Ｗ＋Ｈ）に拡張される。図８に示すように、ＬＭＬモードでは、左のテンプレートのみが線形モデルの係数の算出に使用される。より多くのサンプルを得るために、左のテンプレートは（Ｈ＋Ｗ）に拡張される。四角形でないブロックでは、上のテンプレートはＷ＋Ｗに拡張され、左のテンプレートはＨ＋Ｈに拡張される。上／左のテンプレートが利用できない場合、ＬＭ＿Ａ／ＬＭＬモードはチェックまたは合図されない。利用可能なサンプルが十分でない場合は、最も右（上のテンプレートの場合）または最も下（左のテンプレートの場合）のサンプルを最も近いｌｏｇ２の数にコピーすることにより、テンプレートが水増しされる。コーデックは、４：２：０ＹＵＶフォーマットに加え、４：２：２フォーマット（図９）および４：４：４フォーマット（図１０）もサポートしている。
ＪＶＥＴのミーティングでは、ＬＭモードを改善するためのいくつかの方法が以下のように提案されている。
ＭＭＬＭモード：ＭＭＬＭは、マルチモデルのＬＭモードに該当し、二つの線形モデルがクロマサンプルの予測を導出するために用いられる場合である。再構成されたルーマの値は、二つのカテゴリに分けられ、一つのモデルが各カテゴリに当てがわれる。各モデルのαおよびβパラメータの導出は、ＣＣＬＭモードとして行われるが、パラメータの導出に用いられる再構成されたルーマ（ダウンサンプリルされた）も、各モデルに応じて分けられる。
ＭＦＬＭモード：ＭＦＬＭは、マルチフィルタのＬＭモードに該当し、予測モデルにおいて使用される再構成されたルーマサンプルをダウンサンプルするために、異なるフィルタが用いられる場合である。四つのそのようなフィルタが用いられ、ビットストリームにおいて用いられる特定のフィルタが示される／合図される。
ＬＭ角度予測：このモードでは、ＭＭＬＭモードおよび非ＬＭモードは、二つのモードによって得られた予測サンプルを平均化することにより、組み合わせられる。
ＭＮＬＭ（Ｍｕｌｔｉｐｌｅ Ｎｅｉｇｈｂｏｒ－ｂａｓｅｄ Ｌｉｎｅａｒ Ｍｏｄｅｌ）は、ＭＭＬＭ導出のために複数のネイバーセットを用い、ＣＵのルーマサンプルおよびクロマサンプルとの間の様々な線形関係をカバーする。図１１に描かれているように、異なるネイバーセットを有する三つのＭＮＬＭが、ＭＭＬＭにおいて提案されている。
ＭＭＬＭ：Ａ、Ｂ、Ｃ、Ｄ（上および左のネイバーを含む）
上のＭＭＬＭ：Ｃ、Ｄ、Ｆ、Ｈ（上のネイバーだけを含む）
左のＭＭＬＭ：Ａ、Ｂ、Ｅ、Ｇ（左のネイバーだけを含む）
図１１に示されるように、Ａは左の２番目のネイバーである。Ｂは左の１番目のネイバーである。Ｃは上の１番目のネイバーである。Ｄは上の２番目のネイバーである。Ｅは左の３番目のネイバーである。Ｆは上の３番目のネイバーである。Ｇは左の４番目のネイバーである。Ｈは上の４番目のネイバーである。
ＭＮＬＭの異なるＣＣＬＭ予測モードは、下の表にリストされている。
Figure 2022516808000005
モード０、モード１、モード２、およびモード３は、同じダウンサンプリングフィルタを用いるが、ＬＭおよびＭＭＬＭ導出のため異なるネイバーセットを用いる。
ＣＣＬＭのパラメータの導出の複雑さを軽減するために、第１の実施形態では、パラメータαおよびパラメータβを導出するために三つのサンプルペアが用いられている。図１２に示すように、サンプルペアは、左の隣接するサンプルのうちの最も上のサンプル（Ｒｅｃ’Ｌ［－１,０］,ＲｅｃＣ［－１,０］）と、左の隣接するサンプルのうちの最も下のサンプル（Ｒｅｃ’Ｌ［－１,Ｈ－１］,ＲｅｃＣ［－１,Ｈ－１］）と、上の隣接するサンプルのうちの最も右のサンプル（Ｒｅｃ’Ｌ［Ｗ－１,－１］,ＲｅｃＣ［Ｗ－１,－１］）と、を含む。ＷおよびＨは、クロマのブロックの幅および高さを示す。
別の実施形態では、図１３に示すように、サンプルペアは、上の隣接するサンプルのうちの最も左のサンプル（Ｒｅｃ’Ｌ［０,－１］,ＲｅｃＣ［０,－１］）と、左の隣接するサンプルのうちの最も下のサンプル（Ｒｅｃ’Ｌ［－１,Ｈ－１］,ＲｅｃＣ［－１,Ｈ－１］）と、上の隣接するサンプルのうちの最も右のサンプル（Ｒｅｃ’Ｌ［Ｗ－１,－１］,ＲｅｃＣ［Ｗ－１,－１］）と、を含む。
なお、サンプルペアの選択は、前述された実施形態に限定されない。三つのサンプルペアは、上または左の再構成された隣接するサンプルから選択されたいずれの三つのサンプルペアであり得るし、隣接するサンプルは上の１ラインまたは左の１ラインのみであるということに限定されない。
一実施形態では、最大のルーマサンプル値、中間のサンプル値、および最小のルーマサンプル値をそれぞれ有するサンプルペアが、ルーマサンプル比較を通じて識別される。最大および中間のサンプルペアのルーマサンプル値の加重平均はｘＢと示され（式（２１）に示される）、最大および中間のサンプルペアのクロマサンプル値の加重平均はｙＢと示される（式（２３）に示される）。また、中間および最小のサンプルペアのルーマサンプル値の加重平均はｘＡと示され（式（２０）に示す）、中間および最小のサンプルペアのクロマサンプル値の加重平均はｙＡと示される（式（２２）に示される）。そして、式（２）を用いて、パラメータαおよびパラメータβが算出される
Figure 2022516808000006
Figure 2022516808000007
Figure 2022516808000008
Figure 2022516808000009
ｘｍａｘは最大のサンプルペアのルーマサンプル値であり、ｘｍｉｄは中間のサンプルペアのルーマサンプル値であり、ｘｍｉｎは最小のサンプルペアのルーマサンプル値であり、ｙｍａｘは最大のサンプルペアのクロマサンプル値であり、ｙｍｉｄは中間のサンプルペアのクロマサンプル値であり、ｙｍｉｎは最小のサンプルペアのクロマサンプル値であり、ｗ１＋ｗ２＝（１＜＜Ｎ１）、ｏｆｆｓｅｔ１＝１＜＜（Ｎ１－１）であり、ｗ３＋ｗ４＝（１＜＜Ｎ２）、ｏｆｆｓｅｔ２＝１＜＜（Ｎ２－１）である。
ｗ１は第１の重み付け係数であり、ｗ２は第２の重み付け係数であり、ｗ３は第３の重み付け係数であり、ｗ４は第４の重み付け係数である。また、Ｎ１は第１の平均値であり、Ｎ２は第２の平均値である。また、ｏｆｆｓｅｔ１は第１のオフセット係数であり、ｏｆｆｓｅｔ２は第２のオフセット係数である。
均等な重み付けが適用される場合の一例では、ｗ１＝１、ｗ２＝１、ｗ３＝１、ｗ４＝１であり、Ｎ１＝１、Ｎ２＝１、そしてｏｆｆｓｅｔ１＝１、ｏｆｆｓｅｔ２＝１である。
さらに別の例では、ｗ１＝３、ｗ２＝１、ｗ３＝１、ｗ４＝３であり、Ｎ１＝２、Ｎ２＝２、そしてｏｆｆｓｅｔ１＝２、ｏｆｆｓｅｔ２＝２である。
さらに別の例では、ｗ１＝３、ｗ２＝１、ｗ３＝１、ｗ４＝３であり、Ｎ１＝２、Ｎ２＝２、そしてｏｆｆｓｅｔ１＝２、ｏｆｆｓｅｔ２＝２である。
さらに別の実施形態では、三つのサンプルペアに対するインデックスとして、ｉ、ｊ、ｋが用いられ、ｌｕｍａｉおよびｌｕｍａｊと、ｌｕｍａｉおよびｌｕｍａｋと、という二つだけの比較が行われる。当該二つの比較により、当該三つのサンプルペアは、ルーマ値によって完全にソートされるか、または、二つのグループ、一方はより大きな二つの値を含んでいてもう一方はより小さな値を含んでいるもしくはその逆、に分けられるか、ができる。値が完全にソートされている場合は、前のセクションで説明された方法を使用することができる。サンプルペアが二つのグループに分けられた場合、同じグループ内のルーマおよびクロマのサンプルは、それぞれ加重平均される（グループ内の単一のサンプルペアは実質的に加重平均を行うことを必要としない）。例えば、一つのグループに二つのサンプルペアがある場合に、一つのグループの二つのルーマ値は均等に重み付けられて平均化され、一方、二つのクロマ値もまた均等に重み付けられて平均化される。ここでは、（２）を用いてＣＣＬＭのパラメータを導出するために、加重平均された値を、ｘＡ、ｘＢ、ｙＡおよびｙＢとして用いる。
さらに別の実施形態では、最大のルーマサンプル値を有するサンプルペアと、最小のルーマサンプル値を有するサンプルペアと、が、ルーマサンプルの比較を通じて識別される。最大のサンプルペアのルーマサンプル値をｘＢと示し、最大のサンプルペアのクロマサンプル値をｙＢと示し、最小のサンプルペアのルーマサンプル値をｘＡと示し、最小のサンプルペアのクロマサンプル値をｙＡと示す。そして、パラメータαおよびパラメータβは、式（２）を用いて算出される。
なお、ＣＣＬＭのパラメータの導出方法は、前述された実施形態に限られない。選択された三つのサンプルペアは、ＣＣＬＭのパラメータを導出するために、どのような方法においても用いることができる。
第２の実施形態では、ＣＣＬＭの導出の複雑さを低減するために、四つのサンプルペアを用いてパラメータαおよびパラメータβを導出する。図１４に示すように、サンプルペアは、左の隣接するサンプルのうちの最も上のサンプル（Ｒｅｃ’Ｌ［－１,０］,ＲｅｃＣ［－１,０］）と、上の隣接するサンプルのうちの最も左のサンプル（Ｒｅｃ’Ｌ［０,－１］,ＲｅｃＣ［０,－１］）と、左の隣接するサンプルのうちの最も下のサンプル（Ｒｅｃ’Ｌ［－１,Ｈ－１］,ＲｅｃＣ［－１,Ｈ－１］）と、上の隣接するサンプルのうちの最も右のサンプル（Ｒｅｃ’Ｌ［Ｗ－１,－１］,ＲｅｃＣ［Ｗ－１,－１］）と、を含む。
別の実施形態では、図１５に示すように、サンプルペアは、上の隣接するサンプルのうちの最も左のサンプルの幅の４分の１の部分（Ｒｅｃ’Ｌ［Ｗ／４，－１］，ＲｅｃＣ［Ｗ／４，－１］）と、左の隣接するサンプルのうちの最も上のサンプルの幅の４分の１の部分（Ｒｅｃ’Ｌ［－１，Ｈ／４］，ＲｅｃＣ［－１，Ｈ／４］）と、左の隣接するサンプルのうちの最も下のサンプル（Ｒｅｃ’Ｌ［－１，Ｈ－１］，ＲｅｃＣ［－１，Ｈ－１］）と、上の隣接するサンプルのうちの最も右のサンプル（Ｒｅｃ’Ｌ［Ｗ－１，－１］，ＲｅｃＣ［Ｗ－１，－１］）と、を含む。
なお、サンプルペアの選択は、前述された実施形態に限定されない。四つのサンプルペアは、上または左の再構成された隣接するサンプルから選択されたいずれの四つのサンプルペアであり得るし、隣接するサンプルは、上の１ラインまたは左のラインのみであるということに限定されない。例えば、一つのサンプルペアのセットは、上の隣接するサンプルのうちの最も左のサンプルの幅の４分の１の部分と、左の隣接するサンプルのうちの最も上のサンプルの幅の４分の１の部分と、上の隣接するサンプルのうちの最も左のサンプルの幅の４分の３の部分と、左の隣接するサンプルのうちの最も上のサンプルの幅の４分の３の部分と、を含む。
あるいは、別のサンプルペアのセットは、上の隣接するサンプルのうちの最も左のサンプルの幅の８分の１の部分と、上の隣接するサンプルのうちの最も左のサンプルの幅の８分の３の部分と、上の隣接するサンプルのうちの最も左のサンプルの幅の８分の５の部分と、上の隣接するサンプルのうちの最も左のサンプルの幅の８分の７の部分と、を含む。
あるいは、別のサンプルペアのセットは、左の隣接するサンプルのうちの最も上のサンプルの高さの８分の１の部分と、左の隣接するサンプルのうちの最も上のサンプルの高さの８分の３の部分と、左の隣接するサンプルのうちの最も上のサンプルの高さの８分の５の部分と、左の隣接するサンプルのうちの最も上のサンプルの高さの８分の７の部分と、を含む。
一実施形態では、より大きな二つのルーマサンプル値と最小の二つのルーマサンプル値とをそれぞれ有するサンプルペアが、ルーマサンプルの比較を通じて識別される。より大きな二つのサンプルペアのルーマサンプル値はｘＢ０、ｘＢ１と示され、より大きな二つの最大サンプルペアのクロマサンプル値はｙＢ０、ｙＢ１と示される。より小さな二つのサンプルペアのルーマサンプル値はｘＡ０、ｘＡ１と示され、より小さな二つの最小サンプルペアのクロマサンプル値はｙＡ０、ｙＡ１と示される。そして、下の式、式（２４）－（２７）、で示されるように、ｘＡ、ｘＢ、ｙＡおよびｙＢは、ｘＡ０、ｘＡ１、ｘＢ０、ｘＢ１、ｙＡ０、ｙＡ１およびｙＢ０、ｙＢ１の加重平均として導出される。そして、パラメータαおよびパラメータβは、式（２）を用いて算出される。
Figure 2022516808000010
Figure 2022516808000011
Figure 2022516808000012
Figure 2022516808000013
ｗ１＋ｗ２＝（１＜＜Ｎ１）、ｏｆｆｓｅｔ１＝１＜＜（Ｎ１－１）である。ｗ３＋ｗ４＝（１＜＜Ｎ２）、ｏｆｆｓｅｔ２＝１＜＜（Ｎ２－１）である。ｗ１は第１の重み付け係数であり、ｗ２は第２の重み付け係数であり、ｗ３は第３の重み付け係数であり、ｗ４は第４の重み付け係数である。また、Ｎ１は第１の平均値であり、Ｎ２は第２の平均値である。また、ｏｆｆｓｅｔ１は第１のオフセット係数であり、ｏｆｆｓｅｔ２は第２のオフセット係数である。
均等な重み付けが適用される場合の一例では、ｗ１＝１、ｗ２＝１、ｗ３＝１、ｗ４＝１であり、Ｎ１＝１、Ｎ２＝１、そしてｏｆｆｓｅｔ１＝１、ｏｆｆｓｅｔ２＝１である。
さらに別の例では、ｗ１＝３、ｗ２＝１、ｗ３＝１、ｗ４＝３であり、Ｎ１＝２、Ｎ２＝２、そしてｏｆｆｓｅｔ１＝２、ｏｆｆｓｅｔ２＝２である。
別の実施形態では、最大のルーマサンプル値と、最小のルーマサンプル値と、をそれぞれ有するサンプルペアが、ルーマサンプルの比較を通じて識別される。最大のサンプルペアのルーマサンプル値をｘＢと示し、最大のサンプルペアのクロマサンプル値をｙＢと示す。また、最小のサンプルペアのルーマサンプル値をｘＡと示し、最小のサンプルペアのクロマサンプル値をｙＡと示す。そして、パラメータαおよびパラメータβは、式（２）を用いて算出される。
なお、ＣＣＬＭのパラメータの導出方法は、前述された実施形態に限られない。選択された四つのサンプルペアは、ＣＣＬＭのパラメータを導出するために、どのような方法においても用いることができる。
本発明の他の実施形態は、本明細書と、ここに開示された発明の実施と、を考慮することにより、当業者には明らかであろう。この出願は、本発明の、その一般原則に従うあらゆる変形、使用、または適応をカバーすることが意図されており、本技術分野における既知または慣例的な実施の範囲内にあるような本開示からの逸脱を含む。本明細書および例は、単に例示的なものとして考慮されることを意図されており、以下の特許請求の範囲によって示された本発明の真の範囲および精神を伴う。
本発明が、上述し、添付図面に示された具体例に限定されないことや、その範囲を逸脱することなく様々な修正および変更を行うことができることは、認められるであろう。本発明の範囲は、添付の請求項によってのみ限定されることが意図されている。
１以上の例では、説明された機能は、ハードウェア、ソフトウェア、ファームウェア、またはそれらのいずれの組み合わせにおいて実装されてよい。ソフトウェアで実装されるのであれば、機能は、１以上の命令またはコードとして、コンピュータ可読媒体に格納されるか、またはそれを介して送信され、ハードウェアベースの処理ユニットによって実行されてもよい。コンピュータ可読媒体は、データ記憶媒体などの有形媒体に相当するコンピュータ可読記憶媒体や、例えば通信プロトコルに従って、ある場所から別のところへのコンピュータプログラムの伝送を容易にするあらゆる媒体を含む通信媒体を、含む。このように、コンピュータ可読媒体は、一般に、（１）非一時的で有形のコンピュータ可読記憶媒体、または（２）信号、搬送波などといった通信媒体、に相当してよい。データ記憶媒体は、本明細書に記載されている実装についての、命令、コードおよび／または実装のためのデータ構造を取得するために、１以上のコンピュータまたは１以上のプロセッサによってアクセス可能なあらゆる利用可能な媒体であってもよい。コンピュータプログラム製品は、コンピュータ可読媒体を含んでもよい。
さらに、上記の方法は、１以上の回路を含む装置を用いて実装されてもよく、当該回路は、ＡＳＩＣｓ（ａｐｐｌｉｃａｔｉｏｎ ｓｐｅｃｉｆｉｃ ｉｎｔｅｇｒａｔｅｄ ｃｉｒｃｕｉｔｓ）、ＤＳＰｓ（ｄｉｇｉｔａｌ ｓｉｇｎａｌ ｐｒｏｃｅｓｓｏｒｓ）、ＤＳＰＤｓ（ｄｉｇｉｔａｌ ｓｉｇｎａｌ ｐｒｏｃｅｓｓｉｎｇ ｄｅｖｉｃｅｓ）、ＰＬＤｓ（ｐｒｏｇｒａｍｍａｂｌｅ ｌｏｇｉｃ ｄｅｖｉｃｅｓ）、ＦＰＧＡｓ（ｆｉｅｌｄ ｐｒｏｇｒａｍｍａｂｌｅ ｇａｔｅ ａｒｒａｙｓ）、コントローラ、マイクロコントローラ、マイクロプロセッサ、または他の電子部品を含む。本装置は、上述の方法を実行するための他のハードウェアまたはソフトウェアのコンポーネントと組み合わせた回路を用いてよい。上記のモジュール、サブモジュール、ユニット、またはサブユニットのそれぞれは、１以上の回路を用いて、少なくとも部分的に実装されてもよい。
本発明の他の実施形態は、本明細書と、ここに開示された本発明の実施と、を考慮することにより、当業者には明らかであろう。この出願は、本発明の、その一般原則に従うあらゆる変形、使用、または適応をカバーすることが意図されており、本技術分野における既知または慣例的な実施の範囲内にあるような本開示からの逸脱を含む。本明細書および例は、単に例示的なものとして考慮されることを意図されており、以下の特許請求の範囲によって示された本発明の真の範囲および精神を伴う。
本発明が、上述し、添付図面に示された具体例に限定されないことや、その範囲を逸脱することなく様々な修正および変更を行うことができることは、認められるであろう。本発明の範囲は、添付の請求項によってのみ限定されることが意図されている。
この出願は、２０１９年１月９日に出願された米国仮出願第６２／７９０，４５９号の利益を主張する。前述の出願の開示全体は、参照により本明細書に援用される。
本開示は、一般に、ビデオコーディングおよび圧縮に関する。より具体的には、この開示は、クロスコンポーネント線形モデルを用いたビデオコーディングを実行するためのシステムおよび方法に関する。方法は、特定の例示的な実施形態において、コーディングユニットのクロマサンプルに対する最終的なクロマ予測子によって記述される。
このセクションは、本開示に関連する背景情報を提供する。このセクションに含まれる情報は、必ずしも、先行技術として解釈されるべきものではない。
ビデオデータを圧縮するために、様々なビデオコーディング技術が用いられ得る。ビデオコーディングは、１以上のビデオコーディング標準に従って実行される。例えば、ビデオコーディング標準は、ＶＶＣ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）、ＪＥＭ（ｊｏｉｎｔ ｅｘｐｌｏｒａｔｉｏｎ ｔｅｓｔ ｍｏｄｅｌ）、Ｈ．２６５／ＨＥＶＣ（ｈｉｇｈ－ｅｆｆｉｃｉｅｎｃｙ ｖｉｄｅｏ ｃｏｄｉｎｇ）、Ｈ．２６４／ＡＶＣ（ａｄｖａｎｃｅｄ ｖｉｄｅｏ ｃｏｄｉｎｇ）、ＭＰＥＧ（ｍｏｖｉｎｇ ｐｉｃｔｕｒｅ ｅｘｐｅｒｔｓ ｇｒｏｕｐ）コーディングなどを含む。ビデオコーディングは、一般に、ビデオ画像またはシーケンスに存在する冗長性を利用する予測方法を用いる（例えば、インター予測、イントラ予測など）。ビデオコーディング技術の重要な目的の一つは、ビデオの品質に対する劣化を回避または最小化しつつ、より低いビットレートを用いる形式にビデオデータを圧縮することである。進化し続けるビデオサービスを可能にするには、より優れた圧縮効率を有するコーディング技術が必要とされる。
このセクションは開示の概要を提供するものであり、その全範囲やその特徴の全てに対する包括的な開示ではない。
本開示の第１の側面によれば、ビデオコーディングの方法は、１以上のプロセッサと、当該１以上のプロセッサによって実行される複数のプログラムを記憶する１以上のメモリと、を有するコンピューティングデバイスにおいて実行される。当該方法は、コーディングユニット（ＣＵ）における所定数の隣接する再構成されたルーマサンプルおよびクロマサンプルを用いることによってクロスコンポーネント線形モデル（ＣＣＬＭ）モードに対する第１パラメータαおよび第２パラメータβを導出することと、第１パラメータαおよび第２パラメータβを用いることにより、ＣＵのクロマサンプルに対する最終的なクロマ予測子を生成することと、を含む。
本開示の第２の側面によれば、コンピューティングデバイスが提供される。コンピューティングデバイスは、少なくとも一つのプロセッサと、当該１以上のプロセッサと接続された非一時的な記憶装置と、当該非一時的な記憶装置に格納され、当該プロセッサによって実行されると当該コンピューティングデバイスに以下を含む動作を行わせる複数のプログラムと、を含み、当該動作は、コーディングユニット（ＣＵ）における所定数の隣接する再構成されたルーマサンプルおよびクロマサンプルを用いることによってクロスコンポーネント線形モデル（ＣＣＬＭ）モードに関する第１パラメータαおよび第２パラメータβを導出することと、当該第１パラメータαおよび当該第２パラメータβを用いることによって当該ＣＵの当該クロマサンプルに対する最終的なクロマ予測子を生成することと、を含む。
以下では、本開示の例示的で非限定的な実施形態のセットが説明される。構造、方法、または機能のバリエーションは、ここで示された例に基づき、関連の技術分野の通常の技術者によって実施され得るし、そのようなバリエーションは全て本開示の範囲内に含まれる。矛盾が存在しない場合、異なる実施形態の教示は、必要ではないが、互いに組み合わせられてもよい。
図１は、多数のビデオコーディング標準とともに用いられ得る例示的なエンコーダを説明するブロック図である。 図２は、多数のビデオコーディング標準とともに用いられ得る例示的なデコーダを説明するブロック図である。 図３は、ビデオコーディング方法のフローチャートである。 図４は、ルーマ／クロマのピクセルサンプリンググリッドの例である。 図５は、αおよびβの導出のために用いられたサンプルの位置を示す。 図６は、ｍｉｎ－ｍａｘ法を用いたαおよびβの直線的導出を示す。 図７は、ＬＭ＿Ａモードを示す。 図８は、ＬＭ＿Ｌモードを示す。 図９は、ＹＵＶ４：２：２フォーマットに対するルーマ／クロマのピクセルサンプリンググリッドである。 図１０は、ＹＵＶ４：４：４フォーマットに対するルーマ／クロマのピクセルサンプリンググリッドである。 図１１は、ＭＭＬＭの複数のネイバーを示す。 図１２は、三つのサンプルペアの一例の位置を示す。 図１３は、三つのサンプルペアの別の例の位置を示す。 図１４は、四つのサンプルペアの一例の位置を示す。 図１５は、四つのサンプルペアの別の例の位置を示す。
本開示において用いられた用語は、本開示を限定するのではなく、特定の例を説明することを対象とする。本開示および付随する特許請求の範囲に用いられた「ａ」、「ａｎ」および「ｔｈｅ」にあたる単数形は、他の意味が明らかに文脈に含まれる場合でなければ、複数形も指す。ここで用いられる用語「および／または」は１以上の関連する挙げられた項目の任意または全ての可能な組み合わせを指すということは理解されるべきである。
ここでは、様々な情報を示すために、「第１」、「第２」、「第３」などの用語が使用されてよく、当該情報は、これらの用語によって限定されるべきものではないということは理解されるべきである。これらの用語は、情報のある一つのカテゴリと、別のものと、を区別するために単に用いられている。例えば、本開示の範囲から逸脱することなく、第１の情報は、第２の情報と称されてもよいし、同様に、第２の情報も、第１の情報と称されてもよい。「であれば」にあたる用語は、ここで使用されるように、文脈に応じて、「場合」、「際」、または「に応じて」を意味すると理解されてもよい。
この明細書を通じて、「一実施形態」、「ある実施形態」、「別の実施形態」、または、単数形もしくは複数形のそのようなものへの言及は、ある実施形態に関連して説明された１以上の固有の特徴、構造、または性質が本開示の少なくとも一つの実施形態に含まれるということを意味する。したがって、この明細書を通じて様々な場所において「一実施形態において」、「ある実施形態において」、「別の実施形態において」、または、単数形もしくは複数形のそのようなもの、というフレーズの登場は、全てが同じ実施形態を必ずしも言及しているわけではない。さらに、どのような適切な方法においても、１以上の実施形態における固有の特徴、構造、または性質が組み合わせられてもよい。
概念的には、「背景」のセクションにおいて先に言及されたものも含め、多数のビデオコーディング標準は類似している。例えば、ほぼ全てのビデオコーディング標準は、ブロックベースの処理を用いており、映像圧縮を実現するために類似のビデオコーディングのブロック図を共有している。
図１は、多数のビデオコーディング標準とともに用いられ得る例示的なエンコーダ１００のブロック図を示す。エンコーダ１００では、ビデオフレームは、処理のために複数のビデオブロックに分割される。与えられた各ビデオブロックに対して、インター予測のアプローチまたはイントラ予測のアプローチのいずれかに基づいて予測が成される。インター予測では、先に再構成されたフレームからのピクセルに基づき、モーション推定およびモーション補償を通じて１以上の予測子が形成される。イントラ予測では、現フレームにおける再構成されたピクセルに基づいて予測子は形成される。モードの決定を通じて、現ブロックを予測するために最適な予測子が選択される。
現ビデオブロックとその予測子との相違を表す予測残差は、変換回路１０２に送られる。そして、エントロピー低減のために、変換回路１０２から量子化回路１０４に変換係数が送られる。そして、量子化された係数は、エントロピーコーディング回路１０６に供給され、圧縮されたビデオビットストリームを生成する。図１に示されるように、インター予測回路および／またはイントラ予測回路１１２からの、ビデオブロックパーティション情報、動きベクトル、参照ピクチャインデックス、イントラ予測モードなどといった予測関連情報１１０も、また、エントロピーコーディング回路１０６を通じて供給されて、圧縮されたビデオビットストリーム１１４に保存される。
エンコーダ１００では、予測を目的とした画素の再構成を行うために、デコーダ関連の回路もまた必要とされる。まず、逆量子化１１６と逆変換回路１１８を通じて、予測残差が再構成される。この再構成された予測残差は、ブロック予測子１２０と組み合わされ、現ビデオブロックに対するフィルタリングされていない再構成されたピクセルを生成する。
コーディング効率と画質を向上させるために、インループフィルタが一般的に使われる。例えば、ＶＶＣの現バーションと同様、ＡＶＣ、ＨＥＶＣにはデブロッキングフィルタが利用可能である。ＨＥＶＣでは、コーディング効率をさらに高めるために、ＳＡＯ（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）と呼ばれる追加のインループフィルタが定義されている。ＶＶＣ標準の今の現バーションでは、ＡＬＦ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）と呼ばれる別のインループフィルタが積極的に研究されており、最終標準に含まれる十分な可能性があるとされている。
これらのインループフィルタの操作はオプションである。これらの操作を行うことは、コーディング効率と画質の向上に役立つ。また、それらは、計算の手間を省くために、エンコーダ１００によってなされた決定として、オフにされてもよい。
これらのフィルタのオプションがエンコーダ１００によってオンになっているのであれば、インター予測はフィルタリングされた再構成されたピクセルに基づき、一方で、イントラ予測は通常フィルタリングされていない再構成されたピクセルに基づくことに留意すべきである。
図２は、多数のビデオコーディング標準とともに用いられ得る例示的なデコーダ２００を説明するブロック図である。このデコーダ２００は、図１のエンコーダ１００に存在する再構成の関連セクションと同様である。デコーダ２００（図２）では、まず、入力されるビデオビットストリーム２０１がエントロピーデコーディング２０２を通じてデコードされ、量子化された係数のレベルと予測関連情報が導出される。そして、量子化された係数のレベルは、逆量子化２０４および逆変換２０６を通じて処理され、再構成された予測残差が得られる。ブロック予測子のメカニズムは、イントラ／インターモードセレクタ２１２に実装されているが、復号された予測情報に基づき、イントラ予測２０８またはモーション補償２１０を実行するように構成される。フィルタリングされていない再構成されたピクセルのセットは、合算器２１４を用いて、逆変換２０６からの再構成された予測残差と、ブロック予測子のメカニズムによって生成された予測出力と、を合算することによって得られる。インループフィルタがオンになっている状況では、フィルタリング操作が、これらの再構成されたピクセルに対して行われて、出力用の最終的な再構成されたビデオが導出される。
クロスコンポーネントの冗長性を低減するため、クロスコンポーネント線形モデル（ＣＣＬＭ）の予測モードがＶＶＣにおいて用いられる。ＶＶＣの開発の間の共通テスト条件においてＹＵＶフォーマット４：２：０が用いられ、ＹＵＶフォーマット４：２：０に対するルーマサンプルおよびクロマサンプルのサンプリンググリッドは図４に示されている。ルーマサンプルおよびクロマサンプル（ダウンサンプルされたルーマサンプル）の座標もまた図４に示されている。ＲｅｃＬ’［ｘ，ｙ］は、ダウンサンプルされた上および左に隣接する再構成されたルーマサンプルを表し、ＲｅｃＣ’［ｘ，ｙ］は、上および左に隣接する再構成されたクロマサンプルを表し、ｘおよびｙは、図に示されているようにピクセルインデックスを示す。この開示では、ＣＣＬＭのパラメータの導出の複雑さを低減するため、いくつかの方法を提案する。
本開示は、一般に、ビデオデータのコーディング（例えば、エンコーディングおよびデコーディング）に関する。より具体的には、この開示は、ビデオコーディング方法と、ビデオコーディング方法のクロスコンポーネントの冗長性を低減するためのコンピューティングデバイスと、に関する。同じＣＵの再構成されたルーマサンプルに基づいてクロマサンプルを予測するために、ＣＣＬＭ予測子モードが使用される。コンピューティングデバイスは、少なくとも一つのプロセッサと、当該１以上のプロセッサと接続された非一時的な記憶装置と、当該非一時的な記憶装置に格納されて当該プロセッサによって実行されると当該コンピューティングデバイスにビデオコーディング方法の動作を行わせる複数のプログラムと、を含む。
図３に示すように、ビデオコーディングの方法は、少なくとも以下のステップを含む。
ステップ１０：ＣＵにおける所定数の隣接する再構成されたルーマサンプルおよびクロマサンプルを用いることによるＣＣＬＭモードに対する第１パラメータαおよび第２パラメータβの導出
ステップ２０：第１パラメータαおよび第２パラメータβを用いることによってＣＵのクロマサンプルに対する最終的なクロマ予測子の生成
ステップ２０では、次式を用いることによってＣＵのクロマサンプルに対する最終的なクロマ予測子を生成する。
Figure 2022516808000037
ｐｒｅｄＣ（ｘ，ｙ）は、ＣＵのクロマサンプルに対する最終的なクロマ予測子であり、ｒｅｃＬ’（ｘ，ｙ）はＣＵのダウンサンプルされた再構成されたルーマサンプルであり、ｘは行インデックスを示し、ｙは列インデックスを示す。
図５では、ルーマサンプルおよびクロマサンプル（ダウンサンプルされたルーマサンプル）の座標が示されている。
パラメータαおよびパラメータβは、次式（次のセクションにおいてｍｉｎ－ｍａｘ法と称されます）によって導出される。
Figure 2022516808000038
各クロマサンプルおよびそれの対応ルーマサンプルは、サンプルペアと称される。ｙＢは最大のサンプルペアのクロマサンプル値であり、ｙＡは最小のサンプルペアのクロマサンプル値であり、ｘＢは最大のサンプルペアのルーマサンプル値であり、ｘＡは最小のサンプルペアのルーマサンプル値である。
図６に描かれているように、２ポイント（ルーマおよびクロマの組み合わせ）（Ａ,Ｂ）は、隣接するルーマサンプルのセットのなかの最小値および最大値である。図６は、式（２）に従って線形モデルのパラメータαおよびパラメータβが得られた場合における、ルーマの最小値および最大値の間の直線についての図である。
図５では、ＲｅｃＬ’［ｘ，ｙ］はダウンサンプルされた上および左の隣接する再構成されたルーマサンプルを表し、ＲｅｃＣ［ｘ，ｙ］は上および左の隣接する再構成されたクロマサンプルを表し、ｘは行インデックスを示し、ｙは列インデックスを示す。なお、図５の四角いブロックは図４に描かれたルーマサンプルの位置に対応する再構成されたルーマサンプルであり、図５の丸は、図４に描かれたクロマサンプルまたはダウンサンプルされたルーマサンプルの位置に対応する。四角形状のコーディングブロックに対しては、ｍｉｎ－ｍａｘ法が直接適用される。四角ではないコーディングブロックに対しては、まず、長い方の境界の隣接するサンプルが、短い方の境界に対するサンプルと同数になるようにサブサンプリングされる。図５は、左および上のサンプルの位置と、ＣＣＬＭモードに関わる現在のブロックのサンプルと、を示している。
ｍｉｎ－ｍａｘ法の計算は、デコーディング処理の一部として実行され、単なるエンコーダの検索操作としてではない。そのため、パラメータαおよびパラメータβの値をデコーダに伝えるためのシンタックスは使用されていない。現在、式／フィルタ（３）は、ダウンサンプルされたルーマサンプルを生成するために、ルーマダウンサンプリングフィルタとして使用される。しかし、式（３）から（１９）に示すように、ダウンサンプルされたルーマサンプルを生成するために、異なる式／フィルタを選択することができる。なお、式（５）から（１０）は、ダウンサンプリング処理なしで直接サンプルを取得しているとみなすことができる。
Figure 2022516808000039
上のテンプレートおよび左のテンプレートは、ともに線形モデルの係数を計算するために使用することができる上に、代替として、他の２つのＬＭモード、ＬＭ＿ＡおよびＬＭＬと呼ばれるが、においても、それぞれ使用することができる。図７に示すように、ＬＭ＿Ａモードでは、上のテンプレートが線形モデルの係数の算出に用いられる。より多くのサンプルを得るために、上のテンプレートは（Ｗ＋Ｈ）に拡張される。図８に示すように、ＬＭＬモードでは、左のテンプレートのみが線形モデルの係数の算出に使用される。より多くのサンプルを得るために、左のテンプレートは（Ｈ＋Ｗ）に拡張される。四角形でないブロックでは、上のテンプレートはＷ＋Ｗに拡張され、左のテンプレートはＨ＋Ｈに拡張される。上／左のテンプレートが利用できない場合、ＬＭ＿Ａ／ＬＭＬモードはチェックまたは合図されない。利用可能なサンプルが十分でない場合は、最も右（上のテンプレートの場合）または最も下（左のテンプレートの場合）のサンプルを最も近いｌｏｇ２の数にコピーすることにより、テンプレートが水増しされる。コーデックは、４：２：０ＹＵＶフォーマットに加え、４：２：２フォーマット（図９）および４：４：４フォーマット（図１０）もサポートしている。
ＪＶＥＴのミーティングでは、ＬＭモードを改善するためのいくつかの方法が以下のように提案されている。
ＭＭＬＭモード：ＭＭＬＭは、マルチモデルのＬＭモードに該当し、二つの線形モデルがクロマサンプルの予測を導出するために用いられる場合である。再構成されたルーマの値は、二つのカテゴリに分けられ、一つのモデルが各カテゴリに当てがわれる。各モデルのαおよびβパラメータの導出は、ＣＣＬＭモードとして行われるが、パラメータの導出に用いられる再構成されたルーマ（ダウンサンプリルされた）も、各モデルに応じて分けられる。
ＭＦＬＭモード：ＭＦＬＭは、マルチフィルタのＬＭモードに該当し、予測モデルにおいて使用される再構成されたルーマサンプルをダウンサンプルするために、異なるフィルタが用いられる場合である。四つのそのようなフィルタが用いられ、ビットストリームにおいて用いられる特定のフィルタが示される／合図される。
ＬＭ角度予測：このモードでは、ＭＭＬＭモードおよび非ＬＭモードは、二つのモードによって得られた予測サンプルを平均化することにより、組み合わせられる。
ＭＮＬＭ（Ｍｕｌｔｉｐｌｅ Ｎｅｉｇｈｂｏｒ－ｂａｓｅｄ Ｌｉｎｅａｒ Ｍｏｄｅｌ）は、ＭＭＬＭ導出のために複数のネイバーセットを用い、ＣＵのルーマサンプルおよびクロマサンプルとの間の様々な線形関係をカバーする。図１１に描かれているように、異なるネイバーセットを有する三つのＭＮＬＭが、ＭＭＬＭにおいて提案されている。
ＭＭＬＭ：Ａ、Ｂ、Ｃ、Ｄ（上および左のネイバーを含む）
上のＭＭＬＭ：Ｃ、Ｄ、Ｆ、Ｈ（上のネイバーだけを含む）
左のＭＭＬＭ：Ａ、Ｂ、Ｅ、Ｇ（左のネイバーだけを含む）
図１１に示されるように、Ａは左の２番目のネイバーである。Ｂは左の１番目のネイバーである。Ｃは上の１番目のネイバーである。Ｄは上の２番目のネイバーである。Ｅは左の３番目のネイバーである。Ｆは上の３番目のネイバーである。Ｇは左の４番目のネイバーである。Ｈは上の４番目のネイバーである。
ＭＮＬＭの異なるＣＣＬＭ予測モードは、下の表にリストされている。
Figure 2022516808000040
モード０、モード１、モード２、およびモード３は、同じダウンサンプリングフィルタを用いるが、ＬＭおよびＭＭＬＭ導出のため異なるネイバーセットを用いる。
ＣＣＬＭのパラメータの導出の複雑さを軽減するために、第１の実施形態では、パラメータαおよびパラメータβを導出するために三つのサンプルペアが用いられている。図１２に示すように、サンプルペアは、左の隣接するサンプルのうちの最も上のサンプル（Ｒｅｃ’Ｌ［－１,０］,ＲｅｃＣ［－１,０］）と、左の隣接するサンプルのうちの最も下のサンプル（Ｒｅｃ’Ｌ［－１,Ｈ－１］,ＲｅｃＣ［－１,Ｈ－１］）と、上の隣接するサンプルのうちの最も右のサンプル（Ｒｅｃ’Ｌ［Ｗ－１,－１］,ＲｅｃＣ［Ｗ－１,－１］）と、を含む。ＷおよびＨは、クロマのブロックの幅および高さを示す。
別の実施形態では、図１３に示すように、サンプルペアは、上の隣接するサンプルのうちの最も左のサンプル（Ｒｅｃ’Ｌ［０,－１］,ＲｅｃＣ［０,－１］）と、左の隣接するサンプルのうちの最も下のサンプル（Ｒｅｃ’Ｌ［－１,Ｈ－１］,ＲｅｃＣ［－１,Ｈ－１］）と、上の隣接するサンプルのうちの最も右のサンプル（Ｒｅｃ’Ｌ［Ｗ－１,－１］,ＲｅｃＣ［Ｗ－１,－１］）と、を含む。
なお、サンプルペアの選択は、前述された実施形態に限定されない。三つのサンプルペアは、上または左の再構成された隣接するサンプルから選択されたいずれの三つのサンプルペアであり得るし、隣接するサンプルは上の１ラインまたは左の１ラインのみであるということに限定されない。
一実施形態では、最大のルーマサンプル値、中間のサンプル値、および最小のルーマサンプル値をそれぞれ有するサンプルペアが、ルーマサンプル比較を通じて識別される。最大および中間のサンプルペアのルーマサンプル値の加重平均はｘＢと示され（式（２０）に示される）、最大および中間のサンプルペアのクロマサンプル値の加重平均はｙＢと示される（式（２２）に示される）。また、中間および最小のサンプルペアのルーマサンプル値の加重平均はｘＡと示され（式（２１）に示す）、中間および最小のサンプルペアのクロマサンプル値の加重平均はｙＡと示される（式（２３）に示される）。そして、式（２）を用いて、パラメータαおよびパラメータβが算出される
Figure 2022516808000041
Figure 2022516808000042
Figure 2022516808000043
Figure 2022516808000044
ｘｍａｘは最大のサンプルペアのルーマサンプル値であり、ｘｍｉｄは中間のサンプルペアのルーマサンプル値であり、ｘｍｉｎは最小のサンプルペアのルーマサンプル値であり、ｙｍａｘは最大のサンプルペアのクロマサンプル値であり、ｙｍｉｄは中間のサンプルペアのクロマサンプル値であり、ｙｍｉｎは最小のサンプルペアのクロマサンプル値であり、ｗ１＋ｗ２＝（１＜＜Ｎ１）、ｏｆｆｓｅｔ１＝１＜＜（Ｎ１－１）であり、ｗ３＋ｗ４＝（１＜＜Ｎ２）、ｏｆｆｓｅｔ２＝１＜＜（Ｎ２－１）である。
ｗ１は第１の重み付け係数であり、ｗ２は第２の重み付け係数であり、ｗ３は第３の重み付け係数であり、ｗ４は第４の重み付け係数である。また、Ｎ１は第１の平均値であり、Ｎ２は第２の平均値である。また、ｏｆｆｓｅｔ１は第１のオフセット係数であり、ｏｆｆｓｅｔ２は第２のオフセット係数である。
均等な重み付けが適用される場合の一例では、ｗ１＝１、ｗ２＝１、ｗ３＝１、ｗ４＝１であり、Ｎ１＝１、Ｎ２＝１、そしてｏｆｆｓｅｔ１＝１、ｏｆｆｓｅｔ２＝１である。
さらに別の例では、ｗ１＝３、ｗ２＝１、ｗ３＝１、ｗ４＝３であり、Ｎ１＝２、Ｎ２＝２、そしてｏｆｆｓｅｔ１＝２、ｏｆｆｓｅｔ２＝２である。
さらに別の例では、ｗ１＝３、ｗ２＝１、ｗ３＝１、ｗ４＝３であり、Ｎ１＝２、Ｎ２＝２、そしてｏｆｆｓｅｔ１＝２、ｏｆｆｓｅｔ２＝２である。
さらに別の実施形態では、三つのサンプルペアに対するインデックスとして、ｉ、ｊ、ｋが用いられ、ｌｕｍａｉおよびｌｕｍａｊと、ｌｕｍａｉおよびｌｕｍａｋと、という二つだけの比較が行われる。当該二つの比較により、当該三つのサンプルペアは、ルーマ値によって完全にソートされるか、または、二つのグループ、一方はより大きな二つの値を含んでいてもう一方はより小さな値を含んでいるもしくはその逆、に分けられるか、ができる。値が完全にソートされている場合は、前のセクションで説明された方法を使用することができる。サンプルペアが二つのグループに分けられた場合、同じグループ内のルーマおよびクロマのサンプルは、それぞれ加重平均される（グループ内の単一のサンプルペアは実質的に加重平均を行うことを必要としない）。例えば、一つのグループに二つのサンプルペアがある場合に、一つのグループの二つのルーマ値は均等に重み付けられて平均化され、一方、二つのクロマ値もまた均等に重み付けられて平均化される。ここでは、（２）を用いてＣＣＬＭのパラメータを導出するために、加重平均された値を、ｘＡ、ｘＢ、ｙＡおよびｙＢとして用いる。
さらに別の実施形態では、最大のルーマサンプル値を有するサンプルペアと、最小のルーマサンプル値を有するサンプルペアと、が、ルーマサンプルの比較を通じて識別される。最大のサンプルペアのルーマサンプル値をｘＢと示し、最大のサンプルペアのクロマサンプル値をｙＢと示し、最小のサンプルペアのルーマサンプル値をｘＡと示し、最小のサンプルペアのクロマサンプル値をｙＡと示す。そして、パラメータαおよびパラメータβは、式（２）を用いて算出される。
なお、ＣＣＬＭのパラメータの導出方法は、前述された実施形態に限られない。選択された三つのサンプルペアは、ＣＣＬＭのパラメータを導出するために、どのような方法においても用いることができる。
第２の実施形態では、ＣＣＬＭの導出の複雑さを低減するために、四つのサンプルペアを用いてパラメータαおよびパラメータβを導出する。図１４に示すように、サンプルペアは、左の隣接するサンプルのうちの最も上のサンプル（Ｒｅｃ’Ｌ［－１,０］,ＲｅｃＣ［－１,０］）と、上の隣接するサンプルのうちの最も左のサンプル（Ｒｅｃ’Ｌ［０,－１］,ＲｅｃＣ［０,－１］）と、左の隣接するサンプルのうちの最も下のサンプル（Ｒｅｃ’Ｌ［－１,Ｈ－１］,ＲｅｃＣ［－１,Ｈ－１］）と、上の隣接するサンプルのうちの最も右のサンプル（Ｒｅｃ’Ｌ［Ｗ－１,－１］,ＲｅｃＣ［Ｗ－１,－１］）と、を含む。
別の実施形態では、図１５に示すように、サンプルペアは、上の隣接するサンプルのうちの最も左のサンプルの幅の４分の１の部分（Ｒｅｃ’Ｌ［Ｗ／４，－１］，ＲｅｃＣ［Ｗ／４，－１］）と、左の隣接するサンプルのうちの最も上のサンプルの高さの４分の１の部分（Ｒｅｃ’Ｌ［－１，Ｈ／４］，ＲｅｃＣ［－１，Ｈ／４］）と、左の隣接するサンプルのうちの最も下のサンプル（Ｒｅｃ’Ｌ［－１，Ｈ－１］，ＲｅｃＣ［－１，Ｈ－１］）と、上の隣接するサンプルのうちの最も右のサンプル（Ｒｅｃ’Ｌ［Ｗ－１，－１］，ＲｅｃＣ［Ｗ－１，－１］）と、を含む。
なお、サンプルペアの選択は、前述された実施形態に限定されない。四つのサンプルペアは、上または左の再構成された隣接するサンプルから選択されたいずれの四つのサンプルペアであり得るし、隣接するサンプルは、上の１ラインまたは左のラインのみであるということに限定されない。例えば、一つのサンプルペアのセットは、上の隣接するサンプルのうちの最も左のサンプルの幅の４分の１の部分と、左の隣接するサンプルのうちの最も上のサンプルの高さの４分の１の部分と、上の隣接するサンプルのうちの最も左のサンプルの幅の４分の３の部分と、左の隣接するサンプルのうちの最も上のサンプルの高さの４分の３の部分と、を含む。
あるいは、別のサンプルペアのセットは、上の隣接するサンプルのうちの最も左のサンプルの幅の８分の１の部分と、上の隣接するサンプルのうちの最も左のサンプルの幅の８分の３の部分と、上の隣接するサンプルのうちの最も左のサンプルの幅の８分の５の部分と、上の隣接するサンプルのうちの最も左のサンプルの幅の８分の７の部分と、を含む。
あるいは、別のサンプルペアのセットは、左の隣接するサンプルのうちの最も上のサンプルの高さの８分の１の部分と、左の隣接するサンプルのうちの最も上のサンプルの高さの８分の３の部分と、左の隣接するサンプルのうちの最も上のサンプルの高さの８分の５の部分と、左の隣接するサンプルのうちの最も上のサンプルの高さの８分の７の部分と、を含む。
一実施形態では、より大きな二つのルーマサンプル値とより小さな二つのルーマサンプル値とをそれぞれ有するサンプルペアが、ルーマサンプルの比較を通じて識別される。より大きな二つのサンプルペアのルーマサンプル値はｘＢ０、ｘＢ１と示され、より大きなサンプルペアのクロマサンプル値はｙＢ０、ｙＢ１と示される。より小さな二つのサンプルペアのルーマサンプル値はｘＡ０、ｘＡ１と示され、より小さな二つのサンプルペアのクロマサンプル値はｙＡ０、ｙＡ１と示される。そして、下の式、式（２４）－（２７）、で示されるように、ｘＡ、ｘＢ、ｙＡおよびｙＢは、ｘＡ０、ｘＡ１、ｘＢ０、ｘＢ１、ｙＡ０、ｙＡ１およびｙＢ０、ｙＢ１の加重平均として導出される。そして、パラメータαおよびパラメータβは、式（２）を用いて算出される。
Figure 2022516808000045
Figure 2022516808000046
Figure 2022516808000047
Figure 2022516808000048
ｗ１＋ｗ２＝（１＜＜Ｎ１）、ｏｆｆｓｅｔ１＝１＜＜（Ｎ１－１）である。ｗ３＋ｗ４＝（１＜＜Ｎ２）、ｏｆｆｓｅｔ２＝１＜＜（Ｎ２－１）である。ｗ１は第１の重み付け係数であり、ｗ２は第２の重み付け係数であり、ｗ３は第３の重み付け係数であり、ｗ４は第４の重み付け係数である。また、Ｎ１は第１の平均値であり、Ｎ２は第２の平均値である。また、ｏｆｆｓｅｔ１は第１のオフセット係数であり、ｏｆｆｓｅｔ２は第２のオフセット係数である。
均等な重み付けが適用される場合の一例では、ｗ１＝１、ｗ２＝１、ｗ３＝１、ｗ４＝１であり、Ｎ１＝１、Ｎ２＝１、そしてｏｆｆｓｅｔ１＝１、ｏｆｆｓｅｔ２＝１である。
さらに別の例では、ｗ１＝３、ｗ２＝１、ｗ３＝１、ｗ４＝３であり、Ｎ１＝２、Ｎ２＝２、そしてｏｆｆｓｅｔ１＝２、ｏｆｆｓｅｔ２＝２である。
別の実施形態では、最大のルーマサンプル値と、最小のルーマサンプル値と、をそれぞれ有するサンプルペアが、ルーマサンプルの比較を通じて識別される。最大のサンプルペアのルーマサンプル値をｘＢと示し、最大のサンプルペアのクロマサンプル値をｙＢと示す。また、最小のサンプルペアのルーマサンプル値をｘＡと示し、最小のサンプルペアのクロマサンプル値をｙＡと示す。そして、パラメータαおよびパラメータβは、式（２）を用いて算出される。
なお、ＣＣＬＭのパラメータの導出方法は、前述された実施形態に限られない。選択された四つのサンプルペアは、ＣＣＬＭのパラメータを導出するために、どのような方法においても用いることができる。
本発明の他の実施形態は、本明細書と、ここに開示された発明の実施と、を考慮することにより、当業者には明らかであろう。この出願は、本発明の、その一般原則に従うあらゆる変形、使用、または適応をカバーすることが意図されており、本技術分野における既知または慣例的な実施の範囲内にあるような本開示からの逸脱を含む。本明細書および例は、単に例示的なものとして考慮されることを意図されており、以下の特許請求の範囲によって示された本発明の真の範囲および精神を伴う。
本発明が、上述し、添付図面に示された具体例に限定されないことや、その範囲を逸脱することなく様々な修正および変更を行うことができることは、認められるであろう。本発明の範囲は、添付の請求項によってのみ限定されることが意図されている。
１以上の例では、説明された機能は、ハードウェア、ソフトウェア、ファームウェア、またはそれらのいずれの組み合わせにおいて実装されてよい。ソフトウェアで実装されるのであれば、機能は、１以上の命令またはコードとして、コンピュータ可読媒体に格納されるか、またはそれを介して送信され、ハードウェアベースの処理ユニットによって実行されてもよい。コンピュータ可読媒体は、データ記憶媒体などの有形媒体に相当するコンピュータ可読記憶媒体や、例えば通信プロトコルに従って、ある場所から別のところへのコンピュータプログラムの伝送を容易にするあらゆる媒体を含む通信媒体を、含む。このように、コンピュータ可読媒体は、一般に、（１）非一時的で有形のコンピュータ可読記憶媒体、または（２）信号、搬送波などといった通信媒体、に相当してよい。データ記憶媒体は、本明細書に記載されている実装についての、命令、コードおよび／または実装のためのデータ構造を取得するために、１以上のコンピュータまたは１以上のプロセッサによってアクセス可能なあらゆる利用可能な媒体であってもよい。コンピュータプログラム製品は、コンピュータ可読媒体を含んでもよい。
さらに、上記の方法は、１以上の回路を含む装置を用いて実装されてもよく、当該回路は、ＡＳＩＣｓ（ａｐｐｌｉｃａｔｉｏｎ ｓｐｅｃｉｆｉｃ ｉｎｔｅｇｒａｔｅｄ ｃｉｒｃｕｉｔｓ）、ＤＳＰｓ（ｄｉｇｉｔａｌ ｓｉｇｎａｌ ｐｒｏｃｅｓｓｏｒｓ）、ＤＳＰＤｓ（ｄｉｇｉｔａｌ ｓｉｇｎａｌ ｐｒｏｃｅｓｓｉｎｇ ｄｅｖｉｃｅｓ）、ＰＬＤｓ（ｐｒｏｇｒａｍｍａｂｌｅ ｌｏｇｉｃ ｄｅｖｉｃｅｓ）、ＦＰＧＡｓ（ｆｉｅｌｄ ｐｒｏｇｒａｍｍａｂｌｅ ｇａｔｅ ａｒｒａｙｓ）、コントローラ、マイクロコントローラ、マイクロプロセッサ、または他の電子部品を含む。本装置は、上述の方法を実行するための他のハードウェアまたはソフトウェアのコンポーネントと組み合わせた回路を用いてよい。上記のモジュール、サブモジュール、ユニット、またはサブユニットのそれぞれは、１以上の回路を用いて、少なくとも部分的に実装されてもよい。
本発明の他の実施形態は、本明細書と、ここに開示された本発明の実施と、を考慮することにより、当業者には明らかであろう。この出願は、本発明の、その一般原則に従うあらゆる変形、使用、または適応をカバーすることが意図されており、本技術分野における既知または慣例的な実施の範囲内にあるような本開示からの逸脱を含む。本明細書および例は、単に例示的なものとして考慮されることを意図されており、以下の特許請求の範囲によって示された本発明の真の範囲および精神を伴う。
本発明が、上述し、添付図面に示された具体例に限定されないことや、その範囲を逸脱することなく様々な修正および変更を行うことができることは、認められるであろう。本発明の範囲は、添付の請求項によってのみ限定されることが意図されている。

Claims (18)

  1. コーディングユニット（ＣＵ）における所定数の隣接する再構成されたルーマサンプルおよびクロマサンプルを用いることによってクロスコンポーネント線形モデル（ＣＣＬＭ）モードに対する第１パラメータαおよび第２パラメータβを導出することと、
    前記第１パラメータαおよび前記第２パラメータβを用いることによって前記ＣＵの前記クロマサンプルに対する最終的なクロマ予測子を生成することと、
    を備えるビデオコーディングのための方法。
  2. 前記第１パラメータαおよび前記第２パラメータβを用いることによって前記ＣＵの前記クロマサンプルに対する前記最終的なクロマ予測子を生成することは、
    次式を用いて前記最終的なクロマ予測子を得ること、
    Figure 2022516808000014
     を備え、
    ｐｒｅｄＣ（ｘ，ｙ）は、前記ＣＵの前記クロマサンプルに対する前記最終的なクロマ予測子であり、ｒｅｃＬ'（ｘ，ｙ）は前記ＣＵのダウンサンプルされた再構成されたルーマサンプルであり、ｘは行インデックスを示し、ｙは列インデックスを示す、
    請求項１に記載の方法。
  3. コーディングユニット（ＣＵ）における所定数の隣接する再構成されたルーマサンプルおよびクロマサンプルを用いることによって前記ＣＣＬＭモードに対する前記第１パラメータαおよび前記第２パラメータβを導出することは、
    隣接する再構成されたクロマサンプルおよびそれらの対応するルーマサンプルを用いることによって前記第１パラメータαおよび前記第２パラメータβを導出することであって、クロマサンプルおよびその対応するルーマサンプルのそれぞれはサンプルペアと称されることと、
    を備える請求項２に記載の方法。
  4. クロマサンプルおよびその対応するルーマサンプルのそれぞれは前記サンプルペアと称され、隣接する再構成されたクロマサンプルおよびそれらの対応するルーマサンプルを用いることによって前記第１パラメータαおよび前記第２パラメータβを導出することは、
    次式を用いて前記第１パラメータαおよび前記第２パラメータβを得ること、
    Figure 2022516808000015
     を備え、
    ｙＢは最大のサンプルペアのクロマサンプル値であり、ｙＡは最小のサンプルペアのクロマサンプル値であり、ｘＢは最大のサンプルペアのルーマサンプル値であり、ｘＡは最小のサンプルペアのルーマサンプル値である、
    請求項３に記載の方法。
  5. 隣接する再構成されたクロマサンプルおよびそれらの対応するルーマサンプルを用いることによって前記第１パラメータαおよび前記第２パラメータβを導出することは、
    前記パラメータαおよび前記パラメータβを導出するために三つのサンプルペアを用いること、
    を備え、
    前記三つのサンプルペアは、
    左の隣接するサンプルのうちの最も上のサンプル、前記左の隣接するサンプルのうちの最も下のサンプル、および上の隣接するサンプルのうちの最も右のサンプルのサンプルペアセットと、
    前記上の隣接するサンプルのうちの最も左のサンプル、前記左の隣接するサンプルのうちの前記最も下のサンプル、および前記上の隣接するサンプルのうちの前記最も右のサンプルのサンプルペアセットと、
    のうちの一つのサンプルセットを含む、
    請求項４に記載の方法。
  6. 次式を用いてｘＡ、ｘＢ、ｙＡ、およびｙＢを得ること、
    Figure 2022516808000016
     をさらに備え、
    ｘｍａｘは前記最大のサンプルペアのルーマサンプル値であり、ｘｍｉｄは中間のサンプルペアのルーマサンプル値であり、ｘｍｉｎは前記最小のサンプルペアのルーマサンプル値であり、ｙｍａｘは前記最大のサンプルペアのクロマサンプル値であり、ｙｍｉｄは前記中間のサンプルペアのクロマサンプル値であり、ｙｍｉｎは前記最小のサンプルペアのクロマサンプル値であり、ｗ１＋ｗ２＝（１＜＜Ｎ１）、ｏｆｆｓｅｔ１＝１＜＜（Ｎ１－１）であり、ｗ３＋ｗ４＝（１＜＜Ｎ２）、ｏｆｆｓｅｔ２＝１＜＜（Ｎ２－１）であり、
    ｗ１は第１の重み付け係数であり、ｗ２は第２の重み付け係数であり、ｗ３は第３の重み付け係数であり、ｗ４は第４の重み付け係数であり、Ｎ１は第１の平均値であり、Ｎ２は第２の平均値であり、ｏｆｆｓｅｔ１は第１のオフセット係数であり、ｏｆｆｓｅｔ２は第２のオフセット係数である、
    請求項５に記載の方法。
  7. 前記最大のサンプルペアの前記ルーマサンプル値としてｘＢを得ることと、
    前記最大のサンプルペアの前記クロマサンプル値としてｙＢを得ることと、
    前記最小のサンプルペアの前記ルーマサンプル値としてｘＡを得ることと、
    前記最小のサンプルペアの前記クロマサンプル値としてｙＡを得ることと、
    をさらに備える請求項５に記載の方法。
  8. 隣接する再構成されたクロマサンプルおよびそれらの対応するルーマサンプルを用いることによって前記パラメータαおよび前記パラメータβを導出することは、
    前記パラメータαおよび前記パラメータβを導出するために四つのサンプルペアを用いること、
    を備え、
    前記四つのサンプルペアは、
    左の隣接するサンプルのうちの最も上のサンプル、上の隣接するサンプルのうちの最も左のサンプル、前記左の隣接するサンプルのうちの最も下のサンプル、および前記上の隣接するサンプルのうちの最も右のサンプルのサンプルペアセットと、
    前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の４分の１の部分、前記左の隣接するサンプルのうちの前記最も上のサンプルの幅の４分の１の部分、前記左の隣接するサンプルのうちの前記最も下のサンプル、および前記上の隣接するサンプルのうちの前記最も右のサンプルのサンプルペアセットと、
    前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の４分の１の部分、前記左の隣接するサンプルのうちの前記最も上のサンプルの幅の４分の１の部分、前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の４分の３の部分、および前記左の隣接するサンプルのうちの前記最も上のサンプルの幅の４分の３の部分のサンプルペアセットと、
    前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の８分の１の部分、前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の８分の３の部分、前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の８分の５の部分、および前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の８分の７の部分のサンプルペアセットと、
    前記左の隣接するサンプルのうちの前記最も上のサンプルの高さの８分の１の部分、前記左の隣接するサンプルのうちの前記最も上のサンプルの高さの８分の３の部分、前記左の隣接するサンプルのうちの前記最も上のサンプルの高さの８分の５の部分、および前記左の隣接するサンプルのうちの前記最も上のサンプルの高さの８分の７の部分のサンプルペアセットと、
    のうちの一つのサンプルセットを含む、
    請求項４に記載の方法。
  9. 次式を用いてｘＡ、ｘＢ、ｙＡおよびｙＢを得ること、
    Figure 2022516808000017
     をさらに備え、
    ｗ１＋ｗ２＝（１＜＜Ｎ１）、ｏｆｆｓｅｔ１＝１＜＜（Ｎ１－１）であり、ｗ３＋ｗ４＝（１＜＜Ｎ２）、ｏｆｆｓｅｔ２＝１＜＜（Ｎ２－１）であり、
    より大きな二つのサンプルペアのルーマサンプル値はｘＢ０、ｘＢ１と示され、より大きな二つの最大サンプルペアのクロマサンプル値はｙＢ０、ｙＢ１と示され、より小さな二つのサンプルペアのルーマサンプル値はｘＡ０、ｘＡ１と示され、より小さな二つの最小サンプルペアのクロマサンプル値はｙＡ０、ｙＡ１と示され、
    ｗ１は第１の重み付け係数であり、ｗ２は第２の重み付け係数であり、ｗ３は第３の重み付け係数であり、ｗ４は第４の重み付け係数であり、Ｎ１は第１の平均値であり、Ｎ２は第２の平均値であり、ｏｆｆｓｅｔ１は第１のオフセット係数であり、ｏｆｆｓｅｔ２は第２のオフセット係数である、
    請求項８に記載の方法。
  10. コンピューティングデバイスであって、
    少なくとも一つのプロセッサと、
    １以上の前記プロセッサと接続された非一時的な記憶装置と、
    前記非一時的な記憶装置に格納され、前記プロセッサによって実行されると前記コンピューティングデバイスに以下を含む動作を行わせる、複数のプログラムと、
    備え、
    前記動作は、
    コーディングユニット（ＣＵ）における所定数の隣接する再構成されたルーマサンプルおよびクロマサンプルを用いることによってクロスコンポーネント線形モデル（ＣＣＬＭ）モードに対する第１パラメータαおよび第２パラメータβを導出することと、
    前記第１パラメータαおよび前記第２パラメータβを用いることによって前記ＣＵの前記クロマサンプルに対する最終的なクロマ予測子を生成することと、
    を備える、
    コンピューティングデバイス。
  11. 前記第１パラメータαおよび前記第２パラメータβを用いることによって前記ＣＵの前記クロマサンプルに対する前記クロマの最終的な予測子を生成することは、
    次式を用いて前記最終的なクロマ予測子を得ること、
    Figure 2022516808000018
     を備え、
    ｐｒｅｄＣ（ｘ，ｙ）は、前記ＣＵの前記クロマサンプルに対する前記最終的なクロマ予測子であり、ｒｅｃＬ’（ｘ，ｙ）は前記ＣＵのダウンサンプルされた再構成されたルーマサンプルであり、xは行インデックスを示し、yは列インデックスを示す、
    請求項１０に記載のコンピューティングデバイス。
  12. コーディングユニット（ＣＵ）における所定数の隣接する再構成されたルーマサンプルおよびクロマサンプルを用いることによって前記ＣＣＬＭモードに対する前記第１パラメータαおよび前記第２パラメータβを導出することは、
    クロマサンプルおよびその対応するルーマサンプルのそれぞれはサンプルペアと称され、隣接する再構成されたクロマサンプルおよびそれらの対応するルーマサンプルを用いることによって第１パラメータαおよび第２パラメータβを導出すること、
    を備える請求項１１に記載のコンピューティングデバイス。
  13. クロマサンプルおよびその対応するルーマサンプルのそれぞれは前記サンプルペアと称され、隣接する再構成されたクロマサンプルおよびそれらの対応するルーマサンプルを用いることによって前記第１パラメータαおよび前記第２パラメータβを導出することは、
    次式を用いて前記第１パラメータαおよび前記第２パラメータβを得ること、
    Figure 2022516808000019
     を備え、
    ｙＢは最大のサンプルペアのクロマサンプル値であり、ｙＡは最小のサンプルペアのクロマサンプル値であり、ｘＢは最大のサンプルペアのルーマサンプル値であり、ｘＡは最小のサンプルペアのルーマサンプル値である、
    請求項１２に記載のコンピューティングデバイス。
  14. 隣接する再構成されたクロマサンプルおよびそれらの対応するルーマサンプルを用いることによって前記第１パラメータαおよび前記第２パラメータβを導出することは、
    前記パラメータαおよび前記パラメータβを導出するために三つのサンプルペアを用いること、
    を備え、
    前記三つのサンプルペアは、
    左の隣接するサンプルのうちの最も上のサンプル、前記左の隣接するサンプルのうちの最も下のサンプル、および上の隣接するサンプルのうちの最も右のサンプルのサンプルペアと、
    前記上の隣接するサンプルのうちの最も左のサンプル、前記左の隣接するサンプルのうちの前記最も下のサンプル、および前記上の隣接するサンプルのうちの前記最も右のサンプルのサンプルペアと、
    のうちの一つのサンプルペアを含む、
    請求項１３に記載のコンピューティングデバイス。
  15. 前記行為は、
    次式を用いてｘＡ、ｘＢ、ｙＡおよびｙＢを得ること、
    Figure 2022516808000020
     をさらに備え、
    ｘｍａｘは前記最大のサンプルペアのルーマサンプル値であり、ｘｍｉｄは中間のサンプルペアのルーマサンプル値であり、ｘｍｉｎは前記最小のサンプルペアのルーマサンプル値であり、ｙｍａｘは前記最大のサンプルペアのクロマサンプル値であり、ｙｍｉｄは前記中間のサンプルペアのクロマサンプル値であり、ｙｍｉｎは前記最小のサンプルペアのクロマサンプル値であり、ｗ１＋ｗ２＝（１＜＜Ｎ１）、ｏｆｆｓｅｔ１＝１＜＜（Ｎ１－１）であり、ｗ３＋ｗ４＝（１＜＜Ｎ２）、ｏｆｆｓｅｔ２＝１＜＜（Ｎ２－１）であり、
    ｗ１は第１の重み付け係数であり、ｗ２は第２の重み付け係数であり、ｗ３は第３の重み付け係数であり、ｗ４は第４の重み付け係数であり、Ｎ１は第１の平均値であり、Ｎ２は第２の平均値であり、ｏｆｆｓｅｔ１は第１のオフセット係数であり、ｏｆｆｓｅｔ２は第２のオフセット係数である、
    請求項１４に記載のコンピューティングデバイス。
  16. 前記行為は、
    前記最大のサンプルペアの前記ルーマサンプル値としてｘＢを得ることと、
    前記最大のサンプルペアの前記クロマサンプル値としてｙＢを得ることと、
    前記最小のサンプルペアの前記ルーマサンプル値としてｘＡを得ることと、
    前記最小のサンプルペアの前記クロマサンプル値としてｙＡを得ることと、
    をさらに備える請求項１４に記載のコンピューティングデバイス。
  17. 隣接する再構成されたクロマサンプルおよびそれらの対応するルーマサンプルを用いることによって前記パラメータαおよび前記パラメータβを導出することは、
    前記パラメータαおよび前記パラメータβを導出するために四つのサンプルペアを用いること、
    を備え、
    前記四つのサンプルペアは、
    左の隣接するサンプルのうちの最も上のサンプル、上の隣接するサンプルのうちの最も左のサンプル、前記左の隣接するサンプルのうちの最も下のサンプル、および前記上の隣接するサンプルのうちの最も右のサンプルのサンプルペアセットと、
    前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の４分の１の部分、前記左の隣接するサンプルのうちの前記最も上のサンプルの幅の４分の１の部分、前記左の隣接するサンプルのうちの前記最も下のサンプル、および前記上の隣接するサンプルのうちの前記最も右のサンプルのサンプルペアセットと、
    前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の４分の１の部分、前記左の隣接するサンプルのうちの前記最も上のサンプルの幅の４分の１の部分、前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の４分の３の部分、および前記左の隣接するサンプルのうちの前記最も上のサンプルの幅の４分の３の部分のサンプルペアセットと、
    前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の８分の１の部分、前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の８分の３の部分、前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の８分の５の部分、および前記上の隣接するサンプルのうちの前記最も左のサンプルの幅の８分の７の部分のサンプルペアセットと、
    前記左の隣接するサンプルのうちの前記最も上のサンプルの高さの８分の１の部分、前記左の隣接するサンプルのうちの前記最も上のサンプルの高さの８分の３の部分、前記左の隣接するサンプルのうちの前記最も上のサンプルの高さの８分の５の部分、および前記左の隣接するサンプルのうちの前記最も上のサンプルの高さの８分の７の部分のサンプルペアセットと、
    のうちの一つのサンプルセットを含む、
    請求項１３に記載のコンピューティングデバイス。
  18. 前記行為は、
    次式を用いてｘＡ、ｘＢ、ｙＡおよびｙＢを得ること、
    Figure 2022516808000021
     をさらに備え、
    ｗ１＋ｗ２＝（１＜＜Ｎ１）、ｏｆｆｓｅｔ１＝１＜＜（Ｎ１－１）であり、ｗ３＋ｗ４＝（１＜＜Ｎ２）、ｏｆｆｓｅｔ２＝１＜＜（Ｎ２－１）であり、
    より大きな二つのサンプルペアのルーマサンプル値はｘＢ０、ｘＢ１と示され、より大きな二つの最大サンプルペアのクロマサンプル値はｙＢ０、ｙＢ１と示され、より小さな二つのサンプルペアのルーマサンプル値はｘＡ０、ｘＡ１と示され、より小さな二つの最小サンプルペアのクロマサンプル値はｙＡ０、ｙＡ１と示され、
    ｗ１は第１の重み付け係数であり、ｗ２は第２の重み付け係数であり、ｗ３は第３の重み付け係数であり、ｗ４は第４の重み付け係数であり、Ｎ１は第１の平均値であり、Ｎ２は第２の平均値であり、ｏｆｆｓｅｔ１は第１のオフセット係数であり、ｏｆｆｓｅｔ２は第２のオフセット係数である、
    請求項１７に記載のコンピューティングデバイス。
JP2021540265A 2019-01-09 2020-01-08 クロスコンポーネント線形モデルを用いたビデオコーディング Active JP7119236B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2022123496A JP7311689B2 (ja) 2019-01-09 2022-08-02 クロスコンポーネント線形モデルを用いたビデオコーディング
JP2023111692A JP2023126949A (ja) 2019-01-09 2023-07-06 クロスコンポーネント線形モデルを用いたビデオコーディング
JP2023111695A JP2023126950A (ja) 2019-01-09 2023-07-06 クロスコンポーネント線形モデルを用いたビデオコーディング

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962790459P 2019-01-09 2019-01-09
US62/790,459 2019-01-09
PCT/US2020/012814 WO2020146553A1 (en) 2019-01-09 2020-01-08 Video coding using cross-component linear model

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022123496A Division JP7311689B2 (ja) 2019-01-09 2022-08-02 クロスコンポーネント線形モデルを用いたビデオコーディング

Publications (2)

Publication Number Publication Date
JP2022516808A true JP2022516808A (ja) 2022-03-02
JP7119236B2 JP7119236B2 (ja) 2022-08-16

Family

ID=71521931

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2021540265A Active JP7119236B2 (ja) 2019-01-09 2020-01-08 クロスコンポーネント線形モデルを用いたビデオコーディング
JP2022123496A Active JP7311689B2 (ja) 2019-01-09 2022-08-02 クロスコンポーネント線形モデルを用いたビデオコーディング
JP2023111692A Pending JP2023126949A (ja) 2019-01-09 2023-07-06 クロスコンポーネント線形モデルを用いたビデオコーディング
JP2023111695A Pending JP2023126950A (ja) 2019-01-09 2023-07-06 クロスコンポーネント線形モデルを用いたビデオコーディング

Family Applications After (3)

Application Number Title Priority Date Filing Date
JP2022123496A Active JP7311689B2 (ja) 2019-01-09 2022-08-02 クロスコンポーネント線形モデルを用いたビデオコーディング
JP2023111692A Pending JP2023126949A (ja) 2019-01-09 2023-07-06 クロスコンポーネント線形モデルを用いたビデオコーディング
JP2023111695A Pending JP2023126950A (ja) 2019-01-09 2023-07-06 クロスコンポーネント線形モデルを用いたビデオコーディング

Country Status (7)

Country Link
US (5) US11405609B2 (ja)
EP (1) EP3895421A4 (ja)
JP (4) JP7119236B2 (ja)
KR (3) KR102632259B1 (ja)
CN (2) CN114125439A (ja)
MX (1) MX2021008391A (ja)
WO (1) WO2020146553A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021517753A (ja) * 2018-02-23 2021-07-26 キヤノン株式会社 線形成分サンプル予測のための新しいサンプルセット及び新しいダウンサンプリング方式

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2019417996A1 (en) * 2019-01-02 2021-07-22 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Prediction decoding method, device and computer storage medium
CN116366859A (zh) * 2020-07-28 2023-06-30 北京达佳互联信息技术有限公司 对视频信号进行解码的方法、设备和介质
WO2023128704A1 (ko) * 2021-12-30 2023-07-06 엘지전자 주식회사 Cclm(cross-component linear model) 인트라 예측에 기반한 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장하는 기록 매체
KR20230137250A (ko) * 2022-03-21 2023-10-04 주식회사 케이티 영상 부호화/복호화 방법 및 장치
WO2024080828A1 (ko) * 2022-10-13 2024-04-18 한국전자통신연구원 영상 부호화/복호화를 위한 방법, 장치 및 기록 매체

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170366818A1 (en) * 2015-01-22 2017-12-21 Mediatek Singapore Pte. Ltd. Method of Video Coding for Chroma Components
WO2018053293A1 (en) * 2016-09-15 2018-03-22 Qualcomm Incorporated Linear model chroma intra prediction for video coding
WO2018118940A1 (en) * 2016-12-19 2018-06-28 Qualcomm Incorporated Linear model prediction mode with sample accessing for video coding

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9288500B2 (en) * 2011-05-12 2016-03-15 Texas Instruments Incorporated Luma-based chroma intra-prediction for video coding
US9693070B2 (en) 2011-06-24 2017-06-27 Texas Instruments Incorporated Luma-based chroma intra-prediction for video coding
KR102277121B1 (ko) 2011-11-08 2021-07-15 한국과학기술원 영상 부호화/복호화 방법 및 장치
WO2013102293A1 (en) * 2012-01-04 2013-07-11 Mediatek Singapore Pte. Ltd. Improvements of luma-based chroma intra prediction
US9307237B2 (en) * 2012-01-19 2016-04-05 Futurewei Technologies, Inc. Reference pixel reduction for intra LM prediction
JP6175505B2 (ja) * 2012-09-28 2017-08-02 ヴィド スケール インコーポレイテッド ビデオコーディングにおけるクロマ信号強調のためのクロスプレーンフィルタリング
CN105474639B (zh) * 2013-07-10 2018-08-07 凯迪迪爱通信技术有限公司 视频编码装置、视频解码装置、视频系统、视频编码方法、视频解码方法以及程序
US10038919B2 (en) 2014-05-29 2018-07-31 Apple Inc. In loop chroma deblocking filter
JP7356347B2 (ja) * 2016-10-04 2023-10-04 エルエックス セミコン カンパニー， リミティド 画像復号方法、画像符号化方法、及び記録媒体
WO2018174357A1 (ko) 2017-03-22 2018-09-27 엘지전자 주식회사 영상 코딩 시스템에서 영상 디코딩 방법 및 장치
US10542264B2 (en) 2017-04-04 2020-01-21 Arris Enterprises Llc Memory reduction implementation for weighted angular prediction
WO2018225593A1 (ja) 2017-06-05 2018-12-13 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法および復号方法
WO2019004283A1 (ja) 2017-06-28 2019-01-03 シャープ株式会社 動画像符号化装置及び動画像復号装置
CN111699682A (zh) * 2017-12-07 2020-09-22 韩国电子通信研究院 用于使用通道之间的选择性信息共享进行编码和解码的方法和设备
WO2020014563A1 (en) * 2018-07-12 2020-01-16 Futurewei Technologies, Inc. Intra-prediction using a cross-component linear model in video coding

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170366818A1 (en) * 2015-01-22 2017-12-21 Mediatek Singapore Pte. Ltd. Method of Video Coding for Chroma Components
WO2018053293A1 (en) * 2016-09-15 2018-03-22 Qualcomm Incorporated Linear model chroma intra prediction for video coding
WO2018118940A1 (en) * 2016-12-19 2018-06-28 Qualcomm Incorporated Linear model prediction mode with sample accessing for video coding

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
GUILLAUME LAROCHE, JONATHAN TAQUET, CHRISTOPHE GISQUET, AND PATRICE ONNO: "Non-CE3: On cross-component linear model simplification", JOINT VIDEO EXPERTS TEAM (JVET) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, vol. JVET-K0204-v3, JPN6021046487, July 2018 (2018-07-01), pages 1 - 7, ISSN: 0004730435 *
JANGWON CHOI, WT AL.: "CE3-related : Reduced number of reference samples for CCLM parameter calculation", JOINT VIDEO EXPERTS TEAM (JVET) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, vol. JVET-L0138-v2, JPN6021046485, October 2018 (2018-10-01), pages 1 - 5, ISSN: 0004730436 *
JUNYAN HUO, ET AL.: "CE3-related: Fixed Reference Samples Design for CCLM", JOINT VIDEO EXPERTS TEAM (JVET) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, vol. JVET-M0211-v1, JPN6021046486, 3 January 2019 (2019-01-03), pages 1 - 6, ISSN: 0004730437 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021517753A (ja) * 2018-02-23 2021-07-26 キヤノン株式会社 線形成分サンプル予測のための新しいサンプルセット及び新しいダウンサンプリング方式
JP7308844B2 (ja) 2018-02-23 2023-07-14 キヤノン株式会社 線形成分サンプル予測のための新しいサンプルセット及び新しいダウンサンプリング方式

Also Published As

Publication number Publication date
MX2021008391A (es) 2021-08-11
JP2023126949A (ja) 2023-09-12
US11843770B2 (en) 2023-12-12
US20220256142A1 (en) 2022-08-11
KR20220104076A (ko) 2022-07-25
US11405609B2 (en) 2022-08-02
CN114125439A (zh) 2022-03-01
US20220329784A1 (en) 2022-10-13
CN113475064A (zh) 2021-10-01
KR20230010065A (ko) 2023-01-17
WO2020146553A1 (en) 2020-07-16
US20210337188A1 (en) 2021-10-28
KR102632259B1 (ko) 2024-02-01
EP3895421A1 (en) 2021-10-20
EP3895421A4 (en) 2022-06-15
US11924411B2 (en) 2024-03-05
JP7311689B2 (ja) 2023-07-19
JP2022153609A (ja) 2022-10-12
KR20210094126A (ko) 2021-07-28
JP2023126950A (ja) 2023-09-12
KR102487528B1 (ko) 2023-01-10
US20240137489A1 (en) 2024-04-25
JP7119236B2 (ja) 2022-08-16
US20240137495A1 (en) 2024-04-25

Similar Documents

Publication Publication Date Title
JP2022516808A (ja) クロスコンポーネント線形モデルを用いたビデオコーディング
CN110199521B (zh) 用于有损视频编码的低复杂度混合域协同环内滤波器
JP7092951B2 (ja) ビデオ符号化方法、コンピューティングデバイス、非一時的コンピュータ可読記憶媒体、及びプログラム
KR20190030230A (ko) 비디오 코딩/디코딩 시스템들을 위한 다차원 양자화 기법들
EP3909247A1 (en) Methods and devices for selectively applying bi-directional optical flow and decoder-side motion vector refinement for video coding
US11936890B2 (en) Video coding using intra sub-partition coding mode
CN114640845B (zh) 编解码方法、装置及其设备
CN114143548B (zh) 视频编解码中变换系数的编解码
KR20210124241A (ko) 조명 보상을 이용한 픽처 인코딩 및 디코딩을 위한 방법 및 디바이스
US12003737B2 (en) Coding of transform coefficients in video coding
US20240187623A1 (en) Video Coding Using Intra Sub-Partition Coding Mode
TW202320545A (zh) 用於編碼器中的迴路濾波器及相關的訊號處理方法
KR20130070195A (ko) 문맥 기반의 샘플 적응적 오프셋 필터 방향 추론 및 적응적 선택에 대한 비디오 방법 및 장치

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210709

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210709

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20210819

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211126

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220318

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220616

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220705

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220803

R150 Certificate of patent or registration of utility model

Ref document number: 7119236

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150