JP7321365B2 - クロマデブロックフィルタリングの量子化パラメータ - Google Patents

クロマデブロックフィルタリングの量子化パラメータ Download PDF

Info

Publication number
JP7321365B2
JP7321365B2 JP2022516001A JP2022516001A JP7321365B2 JP 7321365 B2 JP7321365 B2 JP 7321365B2 JP 2022516001 A JP2022516001 A JP 2022516001A JP 2022516001 A JP2022516001 A JP 2022516001A JP 7321365 B2 JP7321365 B2 JP 7321365B2
Authority
JP
Japan
Prior art keywords
video
quantization information
block
coding
chroma
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022516001A
Other languages
English (en)
Other versions
JP2022548008A (ja
Inventor
ズゥー,ウェイジア
ザン,リー
シュイ,ジィジォン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ByteDance Inc
Original Assignee
ByteDance Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ByteDance Inc filed Critical ByteDance Inc
Publication of JP2022548008A publication Critical patent/JP2022548008A/ja
Application granted granted Critical
Publication of JP7321365B2 publication Critical patent/JP7321365B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/14Coding unit complexity, e.g. amount of activity or edge presence estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本特許文書は、ビデオコーディング技術、装置、およびシステムに関する。
関連出願の相互参照
本出願は、2019年9月14日に出願された国際特許出願第PCT/CN2019/105831号の優先権および利益を主張する、2020年9月14日に出願された国際特許出願第PCT/US2020/050644号に基づくものである。上記の特許出願の全体は、参照により、本出願の開示の一部として組み込まれている。
現在、より良い圧縮比を提供するため、または、より低い複雑性または並列化された実装を可能にするビデオコーディングおよびデコーディング方式を提供するために、現在ビデオコーデック技術の性能を改善するための努力が進行中である。産業界の専門家は、最近、いくつかの新しいビデオコーディングツールを提案し、そして、それらの有効性を決定するためのテストが現在進行中である。
デジタルビデオコーディング、そして、特には、動きベクトルの管理に関連する装置、システム、および方法が説明される。説明される方法は、既存のビデオコーディング規格(例えば、高効率ビデオコーディング(High Efficiency Video Coding、HEVC)またはバーサタイルビデオコーディング(Versatile Video Coding))、および、将来のビデオコーディング規格またはビデオコーデックに適用することができる。
1つの代表的な態様において、開示される技術は、ビデオ処理のための方法を提供するために使用され得る。この方法は、ビデオのクロマ成分のブロックと、ビデオのビットストリーム表現との間の変換を実行することを含む。変換の最中に、ブロックのエッジに沿って、サンプルに対してデブロッキングフィルタリングプロセスを選択的に適用し、そして、デブロッキングフィルタプロセスのパラメータを決定するために、クロマ量子化パラメータ(QP)オフセットをクロマQPテーブルからのアウトプットに追加する。
別の代表的な態様において、開示される技術は、ビデオ処理のための方法を提供するために使用され得る。この方法は、ビデオのクロマ成分のブロックと、ビデオのビットストリーム表現との間の変換のために、ルールに従って、エッジの一方側にサンプルを含む第1ビデオ領域の第1量子化情報、及び/又は、エッジの他方側にサンプルを含む第2ビデオ領域の第2量子化情報に基づいて、フィルタリングプロセスをブロックのエッジに適用するか否かを決定することを含む。ルールは、エッジの一方側または他方側のサンプルをコード化するためのブロックに適用可能なコーディングモードに基づいている。ルールは、異なるビデオユニットレベルで複数のQPオフセットが、第1量子化情報または第2量子化情報を決定するために使用されることを指定する。この方法は、また、決定に基づいて変換を実行することも含む。
別の代表的な態様において、開示される技術は、ビデオ処理のための方法を提供するために使用され得る。この方法は、ビデオの現在ブロックと、ビデオのビットストリーム表現との間の変換のために、ビデオユニットのレベルにおけるシンタックス要素に従って、現在ブロックに対するクロマ量子化パラメータ(QP)オフセットの使用を可能にするか否かを決定することを含む。ビデオユニットは、現在ブロックおよびビデオの第2ブロックを含む。
別の代表的な態様において、開示される技術は、ビデオ処理のための方法を提供するために使用され得る。この方法は、第1クロマ成分および第2クロマ成分を含むビデオと、ビデオのビットストリーム表現との間の変換を実行することを含む。第1クロマ成分の第1クロマブロックおよび第2クロマ成分の第2クロマブロックの残差(residuals)は、ルールに従って、コーディングモードを使用してビットストリーム表現において結合的にコード化される。本ルールは、変換のための量子化パラメータ(QP)を導出する方法がコーディングモードから独立していることを規定する。
別の代表的な態様において、開示される技術は、ビデオ処理のための方法を提供するために使用され得る。この方法は、ビデオの第1ブロックとビデオのビットストリーム表現との間の変換を実行することを含む。ビデオは、複数の色成分のカラーフォーマットを有し、第1ブロックは、ビデオの第1色成分に関連付けられる。変換の最中に、第1ブロックのエッジに沿って、少なくともいくつかのサンプルに対してデブロッキングフィルタリングプロセスが適用される。本方法は、また、ビデオの残りの色成分に関連するブロックと、ビデオのビットストリーム表現との間で、後続の変換を実行することを含む。後続の変換の最中に、第1ブロックの変換と同じ方法で、各ブロックのエッジに沿って、少なくともいくつかのサンプルに対してデブロッキングフィルタプロセスが適用される。
別の代表的な態様において、開示される技術は、ビデオ処理のための方法を提供するために使用され得る。この方法は、ビデオとビデオのビットストリーム表現との間の変換のために、ビデオの2つのブロック間の境界の境界強度を決定することを含む。境界強度は、2つのブロックのいずれか1つがクロマ残差の結合コーディング(JCCR)モードでコード化されるか否かにかかわらず決定される。本方法は、また、決定に基づいて変換を実行することも含む。
別の代表的な態様において、開示される技術は、ビデオ処理のための方法を提供するために使用され得る。この方法は、ビデオとビデオのビットストリーム表現との間の変換のために、第1ブロックと第2ブロックとの間の境界の境界強度を決定することを含む。決定は、第1ブロックの情報を第2ブロックの対応する情報と比較することなく実行される。本情報は、参照ピクチャ及び/又は対応するブロックの数動きベクトルを含み、そして、境界強度は、デブロッキングフィルタリングプロセスが境界に対して適用可能か否かを決定するために使用される。本方法は、また、決定に基づいて変換を実行することも含む。
別の代表的な態様において、開示される技術は、ビデオ処理のための方法を提供するために使用され得る。この方法は、ビデオのビデオブロックとビデオのビットストリーム表現との間の変換のために、ルールに従って、ビデオブロックに対してデブロッキングフィルタを適用するために使用される量子化パラメータ(QP)を決定することを含む。本ルールは、ビデオブロックの残差が変換の適用をスキップすることによってビットストリーム表現においてコード化される、変換スキップ(TS)モードを使用してビデオブロックがコード化される場合に、決定のために第1QPが使用されることを規定している。第1QPとは異なる第2QPは、ビデオブロックの残差が変換を適用した後にビットストリーム表現においてコード化される、非変換スキップモードを使用してビデオブロックがコード化される場合に、決定のために使用される。本方法は、また、決定に基づいて変換を実行することも含む。
別の代表的な態様において、開示される技術は、ビデオ処理のための方法を提供するために使用され得る。この方法は、ビデオのビデオブロックとビデオのビットストリーム表現との間の変換のために、ルールに従って、ビデオブロックのエッジの少なくともいくつかのサンプルに対するデブロッキングフィルタリングプロセスの適用可能性を決定するための勾配(gradient)を決定することを含む。本ルールは、勾配が決定される方法は、ビデオブロックのサイズから独立していることを規定する。本方法は、また、決定に基づいて変換を実行することも含む。
別の代表的な態様において、開示される技術は、ビデオ処理のための方法を提供するために使用され得る。この方法は、ビデオユニットとビデオユニットのビットストリーム表現との間の変換を実行することを含む。ここで、変換の最中に、デブロッキングフィルタがビデオユニットの境界において使用され、クロマ量子化パラメータ(QP)テーブルがデブロッキングフィルタのパラメータを導出するために使用されるとき、クロマQPテーブルによる処理が個々のクロマQP値に対して実行される。
別の代表的な態様においては、ビデオ処理のための別の方法を提供するために、開示される技術が使用され得る。この方法は、ビデオユニットとビデオユニットのビットストリーム表現との間の変換を実行することを含む。ここで、変換の最中に、クロマQPオフセットがデブロッキングフィルタ内で使用されるように、デブロッキングフィルタがビデオユニットの境界において使用される。ここで、クロマQPオフセットは、画像/スライス/タイル/ブリック/サブピクチャレベルである。
別の代表的な態様においては、ビデオ処理のための別の方法を提供するために、開示される技術が使用され得る。この方法は、ビデオユニットとビデオユニットのビットストリーム表現との間の変換を実行することを含む。ここで、変換の最中に、クロマQPオフセットがデブロッキングフィルタ内で使用されるように、デブロッキングフィルタがビデオユニットの境界において使用される。ここで、同じルマコーディングユニットに関する情報は、デブロッキングフィルタ内で使用され、そして、クロマQPオフセットを導出する。
別の代表的な態様においては、ビデオ処理のための別の方法を提供するために、開示される技術が使用され得る。この方法は、ビデオユニットとビデオユニットのビットストリーム表現との間の変換を実行することを含む。ここで、変換の最中に、クロマQPオフセットがデブロッキングフィルタ内で使用されるように、デブロッキングフィルタがビデオユニットの境界において使用される。ここで、クロマQPオフセットの使用をイネーブルにする指示(indication)がビットストリーム表現において信号化される。
別の代表的な態様においては、ビデオ処理のための別の方法を提供するために、開示される技術が使用され得る。この方法は、ビデオユニットとビデオユニットのビットストリーム表現との間の変換を実行することを含む。ここで、変換の最中に、デブロッキングフィルタにおいてクロマQPオフセットが使用されるように、デブロッキングフィルタがビデオユニットの境界において使用される。ここで、デブロッキングフィルタにおいて使用されるクロマQPオフセットは、ビデオユニットの境界においてJCCRコード化方法が適用されるか、または、ビデオユニットの境界においてJCCRコード化方法とは異なる方法が適用されるかである。
別の代表的な態様においては、ビデオ処理のための別の方法を提供するために、開示される技術が使用され得る。この方法は、ビデオユニットとビデオユニットのビットストリーム表現との間の変換を実行することを含む。ここで、変換の最中に、デブロッキングフィルタ内でクロマQPオフセットが使用されるように、ビデオユニットの境界においてデブロッキングフィルタが使用される。ここで、デブロッキングフィルタの境界強度(BS)は、P側境界におけるビデオユニットに関連する参照ピクチャ及び/又は動きベクトル(MV)の数を、Q側境界におけるビデオユニットの参照ピクチャと比較することなく計算される。
さらに、代表的な態様においては、プロセッサ、および、その上に命令を含む非一時的メモリを備えるビデオシステム内の装置が開示される。プロセッサによる実行の際に、命令は、開示される方法のいずれか1つ以上をプロセッサに実施させる。
加えて、代表的な態様においては、開示される方法のいずれか1つ以上を実施するように構成されたプロセッサを備えるビデオデコーディング装置が開示される。
別の代表的な態様においては、開示される方法のいずれか1つ以上を実施するように構成されたプロセッサを備えるビデオコーディング装置が開示される。
また、非一時的コンピュータ読取り可能媒体に保管されたコンピュータプログラム製品であって、開示される方法のいずれか1つ以上を実行するためのプログラムコードを含むコンピュータプログラム製品が開示される。
開示される技術に係る上記の態様および特徴は、図面、明細書、および特許請求の範囲において、より詳細に記載されている。
図1は、ブロッキング・デブロッキングフィルタプロセスの全体的な処理フローに係る一つの例を示している。 図2は、Bs計算のフロー図に係る一つの例を示している。 図3は、CTU境界におけるBs計算のために参照される情報に係る一つの例を示している。 図4は、フィルタのオン/オフ決定および強/弱フィルタ選択に含まれるピクセルに係る一つの例を示している。 図5は、VVCにおけるデブロッキングフィルタプロセスの全体的な処理フローに係る一つの例を示している。 図6は、VVCにおけるルマ(luma)デブロッキングフィルタプロセスに係る一つの例を示している。 図7は、VVCにおけるクロマ(chroma)デブロッキングフィルタプロセスに係る一つの例を示している。 図8は、サブPU境界に対するフィルタ長の決定に係る一つの例を示している。 図9Aは、クロマブロックの中心位置に係る一つの例を示している。 図9Bは、クロマブロックの中心位置に係る別の例を示している。 図10は、P側およびQ側におけるブロックに係る例を示している。 図11は、ルマブロックのデコーディングされた情報の使用に係る例を示している。 図12は、本文書で説明されるビジュアルメディア・デコーディングまたはビジュアルメディア・コーディング技術を実装するためのハードウェアプラットフォームに係る一つの例のブロック図である。 図13は、ビデオコーディングのための一つの例示的方法に係るフローチャートを示している。 図14は、開示される技術を実施することができる一つの例示的なビデオ処理システムに係るブロック図である。 図15は、本技術に従った、ビデオ処理方法に係るフローチャート表現である。 図16は、本技術に従った、別のビデオ処理方法に係るフローチャート表現である。 図17は、本技術に従った、別のビデオ処理方法に係るフローチャート表現である。 図18は、本技術に従った、別のビデオ処理方法に係るフローチャート表現である。 図19は、本技術に従った、別のビデオ処理方法に係るフローチャート表現である。 図20は、本技術に従った、別のビデオ処理方法に係るフローチャート表現である。 図21は、本技術に従った、別のビデオ処理方法に係るフローチャート表現である。 図22は、本技術に従った、別のビデオ処理方法に係るフローチャート表現である。 図23は、本技術に従った、ビデオ処理のさらに別の方法に係るフローチャート表現である。 図24は、一つの例示的なビデオコーディングシステムを説明するブロック図である。 図25は、本開示のいくつかの実施形態に従った、エンコーダを説明するブロック図である。 図26は、本開示のいくつかの実施形態に従った、デコーダを説明するブロック図である。
1. HEVC/H.265におけるビデオコーディング
ビデオコーディング規格は、主に、周知のITU-TおよびISO/IEC規格の開発を通じて発展してきた。ITU-TはH.261とH.263を製作し、ISO/IECはMPEG-1とMPEG-4 Visualを製作し、そして、2つの組織はH.262/MPEG-2 Video、H.264/MPEG-4 Advanced Video Coding(AVC)、およびH.265/HEVC規格を共同で作成した。H.262から、ビデオコーディング規格は、時間的予測と変換コーディングが利用されるハイブリッドビデオコーディング構造に基づいている。HEVCを越えた将来のビデオコーディング技術を探求するため、2015年にVCEGとMPEGが共同で共同ビデオ探査チーム(Joint Exploration Team、JVET)を設立した。それ以来、JVETによって多くの新しい方法が採用され、JEM(Joint Exploration Model)と名付けられた参照ソフトウェアに入れられた。2018年4月には、VCEG(Q6/16)とISO/IEC JTC1 SC29/WG11(MPEG)の合同ビデオエキスパートチーム(JVET)を発足されて、HEVCに対して50%のビットレート低減を目指すVVC規格に取り組んでいる。
2.1. HEVCにおけるデブロッキングスキーム
デブロッキング(deblocking)フィルタプロセスは、デコーディングプロセスと同じ順序で各CUに対して実行される。最初に、垂直エッジがフィルタリングされ(水平フィルタリング)、次いで、水平エッジがフィルタリングされる(垂直フィルタリング)。フィルタリングは、ルマ成分およびクロマ成分の両方に対して、フィルタリングされると決定された8×8ブロック境界に適用される。4×4ブロック境界は、複雑性を低減するために処理されない。
図1は、デブロッキングフィルタプロセスの全体的な処理フローを示している。境界は、3個のフィルタリングステータスを有し得る。フィルタリングなし、弱いフィルタリング、および、強いフィルタリング、である。各フィルタリング決定は、境界強度、Bs、および、閾値、βおよびtCに基づいている。
フィルタリングプロセスには3種類の境界が含まれ得る。CU境界、TU境界、および、PU境界でがある。CU境界、CUの外側エッジ、は、常にフィルタリングに含まれる。CU境界は、また、常にTU境界またはPU境界でもあるからである。PU形状が2N×N (N>4)であり、かる、RQT深さが1に等しい場合、8×8ブロックグリッドにおけるTU境界、および、CU内部の各PU間のPU境界が、フィルタリングに含まれる。1つの例外は、PU境界がTU内部にある場合、その境界はフィルタリングされないことである。
2.1.1. 境界強度計算
一般的に言えば、境界強度(Bs)は、境界に対してどの程度強いフィルタリングが必要であるかを反映する。Bsが大きい場合は、強いフィルタリングが考慮されるべきである。
PおよびQをフィルタリングに関与するブロックとして定義する。ここで、Pは境界の左側(垂直エッジの場合)または上方(水平エッジの場合)に置かれたブロックを表し、そして、Qは境界の右側(垂直エッジの場合)または上方(水平エッジの場合)に置かれたブロックを表している。図2は、イントラコーディングモード、非ゼロ変換係数と動き情報の存在、参照ピクチャ、動きベクトル(motion vector)の数、および、動きベクトルの差に基づいて、Bs値がどのように計算されるかを示す図である。
Bsは、4×4ブロックについて計算されるが、8×8グリッドへ再マッピングされる。4×4グリッドにおけるライン(line)で構成される8ピクセルに対応する、Bsの2つの値のうち最大値が、8×8グリッドにおける境界のBsとして選択される。
ラインバッファメモリ要求を低減するために、CTU境界についてのみ、図3に示されるように、左側または上側における第2ブロック(4×4グリッド)毎の情報が再使用される。
2.1.2 βとt C の決定
フィルタのオン/オフ決定に関与する閾値βとtC、強いフィルタと弱いフィルタの選択、および、弱いフィルタリングプロセスは、PとQブロックのルマ量子化パラメータ、QPPとQPQ、それぞれに、基づいて導出される。βとtCを導出するために使用されるQは、以下のように計算される。
Q=((QPP+QPQ+1)>>1)
Qに基づいて、テーブル1に示されるように、βが導出される。Bsが1より大きい場合は、Clip3(0,55,Q+2)を入力とするテーブル1のように変数tCが指定される。そうでなければ(BSが1以下)、変数tCは、Qを入力とするテーブル1のように変数tCが指定される。
テーブル1 入力Qからの閾値変数βとtCの導出
Figure 0007321365000001
2.1.3. 4ラインについてフィルタのオン/オフ決定
フィルタのオン/オフは、4ラインを単位として行われる。図4は、フィルタのオン/オフ決定に関与するピクセルを示す。第1の4ラインについて赤い2個のボックスにおける6ピクセルが、4ラインについてフィルタのオン/オフを決定するために使用される。第2の4ラインについて赤い2個のボックスにおける6ピクセルが、第2の4ラインについてフィルタのオン/オフを決定するために使用される。
dp0+dq0+dp3+dq3<βの場合、第1の4ラインについてフィルタリングがオンになり、そして、強/弱フィルタ選択プロセスが適用される。各変数は、以下のように導出される。
dp0=|p2,0-2*p1,0+p0,0|,dp3=|p2,3-2*p1,3+p0,3|,dp4=|p2,4-2*p1,4+p0,4|,dp7=|p2,7-2*p1,7+p0,7|
dq0=|q2,0-2*q1,0+q0,0|,dq3=|q2,3-2*q1,3+q0,3|,dq4=|q2,4-2*q1,4+q0,4|,dq7=|q2,7-2*q1,7+q0,7|
条件が満たされない場合、第1の4ラインについてフィルタリングは行われない。加えて、条件が満たされる場合、dE、dEp1、およびdEp2が、弱いフィルタリングプロセスに対して導出される。変数dEは1に等しく設定される。dp0+dp3<(β+(β>>1))>>3の場合、変数dEp1は1に等しく設定される。dq0+dq3<(β+(β>>1))>>3の場合、変数dEq1は1に等しく設定される。
第2の4ラインについては、上記と同じ方法で決定される。
2.1.4. 4ラインについて強弱フィルタ選択
フィルタのオン/オフ決定において第1の4ラインについてフィルタリングすることが決定された後で、以下の2つの条件が満たされる場合、第1の4ラインのフィルタリングに強いフィルタを使用する。そうでなければ、フィルタリングに弱いフィルタが使用される。関与するピクセルは、図4に示すように、フィルタのオン/オフ決定に使用されるピクセルと同じである。
1)2*(dp0+dq0)<(β>>2),|p30-p00|+|q00-q30|<(β>>3)and|p00-q00|<(5*tC+1)>>1
2)2*(dp3+dq3)<(β>>2),|p33-p03|+|q03-q33|<(β>>3)and|p03-q03|<(5*tC+1)>>1
同様に、以下の2つの条件が満たされる場合、第2の4ラインのフィルタリングには強いフィルタが使用される。そうでなければ、フィルタリングに弱いフィルタが使用される。
1)2*(dp4+dq4)<(β>>2),|p34-p04|+|q04-q34|<(β>>3)and|p04-q04|<(5*tC+1)>>1
2)2*(dp7+dq7)<(β>>2),|p37-p07|+|q07-q37|<(β>>3)and|p07-q07|<(5*tC+1)>>1
2.1.4.1. 強いフィルタリング
強いフィルタリングについて、フィルタリングされたピクセル値は、以下の式によって得られる。3個のピクセルは、各PおよびQブロックについて、それぞれに、入力として4個のピクセルを使用して修正されることは注意に値する。
p0’=(p2+2*p1+2*p0+2*q0+q1+4)>>3
q0’=(p1+2*p0+2*q0+2*q1+q2+4)>>3
p1’=(p2+p1+p0+q0+2)>>2
q1’=(p0+q0+q1+q2+2)>>2
p2’=(2*p3+3*p2+p1+p0+q0+4)>>3
q2’=(p0+q0+q1+3*q2+2*q3+4)>>3
2.1.4.2. 弱いフィルタリング
Dを以下のように定義する。
D=(9*(q0-p0)-3*(q1-p1)+8)>>4
abs(D)がtC*10より小さい場合、
D=Clip3(-tC,tC,D)
p0’=Clip1Y(p0+D)
q0’=Clip1Y(q0-D)
dEp1が1に等しい場合、
Dp=Clip3(-(tC>>1),tC>>1,(((p2+p0+1)>>1)-p1+D)>>1)
p1’=Clip1Y(p1+Dp)
dEq1が1に等しい場合、
Dq=Clip3(-(tC>>1),tC>>1,(((q2+q0+1)>>1)-q1-D)>>1)
q1’=Clip1Y(q1+Dq)
最大2個のピクセルが、各PブロックおよびQブロックについて、それぞれに、入力として3個のピクセルを用使用して修正されることは注意に値する。
2.1.4.3. クロマフィルタリング
クロマフィルタリングのBsは、ルマから継承される。Bs>1、または、コード化クロマ係数が存在する場合には、クロマフィルタリングが実行される。他にフィルタリングの決定は無い。そして、クロマについて1つだけのフィルタが適用される。クロマについてフィルタ選択プロセスは使用されない。フィルタリングされたサンプル値p0'およびq0'は、以下のように導出される。
D=Clip3(-tC,tC,((((q0-p0)<<2)+p1-q1+4)>>3))
p0’=Clip1C(p0+D)
q0’=Clip1C(q0-D)
2.2 VVCにおけるデブロッキングスキーム
VTM6において、デブロッキングフィルタリングプロセスは、HEVCとほとんど同じである。しかしながら、以下の変更が加えられている。
A)再構成されたサンプルの平均ルマレベルに依存するデブロッキングフィルタのフィルタ強度。
B)デブロッキングtCテーブルの拡張、および、10ビットビデオへの適合。
C)ルマのための、4×4グリッドのデブロッキング。
D)ルマのための、より強いデブロッキングフィルタ。
E)クロマのための、より強いデブロッキングフィルタ。
F)サブブロック境界のための、デブロッキングフィルタ。
G)動きにおけるより小さい差異に対して適合されたデブロッキング決定。
図5は、コーディングユニットについて、VVCにおけるデブロッキングフィルタプロセスのフローチャートを示している。
2.2.1. 再構成された平均ルマに依存するフィルタ強度
HEVCでは、デブロッキングフィルタのフィルタ強度は、平均量子化パラメータqPLから導出される変数βとtCによって制御される。VTM6では、この方法のSPSフラグが真である場合、デブロッキングフィルタは、再構成されたサンプルのルマレベルに従って、qPLにオフセットを加えることによって、デブロッキングフィルタの強度を制御する。再構成されたルマレベルLLは、以下のように導出される。
LL=((p0,0+p0,3+q0,0+q0,3)>>2)/(1<<bitDepth) (3-1)
ここで、i=0..3、かつ、k=0および3でのサンプル値pi,k、qi,kを導出することができる。次いで、SPSにおいて信号化された閾値に基づいてオフセットqpOffsetを決定するために、LLが使用される。その後で、以下のように導出される、qPLを使用して、βおよびtCを導出する。
qPL=((QpQ+QpP+1)>>1)+qpOffset (3-2)
ここで、QpQおよびQpPは、それぞれに、サンプルq0,0およびp0,0を含むコーディングユニットの量子化パラメータを示す。現在のVVCにおいて、この方法は、ルマ・デブロッキングプロセスにのみ適用されている。
2.2.2 ルマについて4×4デブロッキング・グリッド
HEVCは、ルマとクロマの両方について8×8デブロッキング・グリッドを使用する。VTM6では、ルマ境界について、4×4グリッド格子におけるデブロッキングが、矩形変換形状からのブロッキングアーチファクトを処理するために導入された。4×4グリッドにおける並列のフレンドリーなルマデブロッキングは、片側が4以下の幅を持つ垂直ルマ境界の各側面における1サンプル、または、片側が4以下の高さを持つ水平ルマ境界の各側面における1サンプルに、デブロッキングされるサンプルの数を制限することによって達成される。
2.2.3. ルマのについて境界強度の導出
詳細な境界強度の導出がテーブル2から分かるだろう。テーブル2における条件は、順次チェックされる。
テーブル2 境界強度の導出
Figure 0007321365000002
Figure 0007321365000003
2.2.4. ルマ用のより強いデブロッキングフィルタ
境界の片側のサンプルが大きいブロックに属する場合、本提案は、バイリニア(bilinear)フィルタを使用する。大きいブロックに属するサンプルは、垂直エッジについて幅が32以上(width>=32)の場合、そして、水平エッジについて高さが32以上(height>=32)の場合として定義される。
バイリニアフィルタが、以下に列挙される。
i=0~Sp-1でのブロック境界サンプルpi、および、j=0~Sq-1でのブロック境界サンプルqi(piとqiは上記のHEVCデブロッキングにおける定義に従う)は、以下のように線形補間によって置き換えられる。
Figure 0007321365000004
Figure 0007321365000005
ここで、用語tcPDiおよびtcPDjは、セクション2.2.5で説明される位置依存のクリッピングであり、そして、Middles,t、Ps、および、Qsは、以下のように与えられる。
Figure 0007321365000006
Figure 0007321365000007
2.2.5. ルマのデブロッキング制御
デブロッキング決定プロセスが、このサブセクションにおいて説明される。
より強力なルマフィルタは、条件1条件2、および、条件3の全てが真(TRUE)の場合にのみ使用される。
条件1は「大きいブロック条件(“large block condition”)」である。この条件は、P側とQ側のサンプルが、大きいブロックに属するか否かを検出する。それらは、変数bSidePisLargeBlkおよびbSideQisLargeBlkで、それぞれ表される。bSidePisLargeBlkおよびbSideQisLargeBlkは、以下のように定義される。
bSidePisLargeBlk=((エッジタイプが垂直かつp0がCUに属し、width>=32)||(エッジタイプが水平かつp0がCUに属し、width>=32))?TRUE:FALSE
bSideQisLargeBlk=((エッジタイプが垂直かつq0がCUに属し、width>=32)||(エッジタイプが水平かつq0がCUに属し、width>=32))?TRUE:FALSE
bSidePisLargeBlkおよびbSideQisLargeBlkに基づいて、条件1は、以下のように定義される。
条件1=(bSidePisLargeBlk||bSidePisLargeBlk)?TRUE:FALSE
次に、条件1が真(true)の場合は、条件2が、さらにチェックされる。最初に、以下の変数が導出される。
dp0、dp3、dq0、dq3が、最初に、HEVCと同様に導出される
if(p側が32以上である)
dp0=(dp0+Abs(p5,0-2*p4,0+p3,0)+1)>>1
dp3=(dp3+Abs(p5,3-2*p4,3+p3,3)+1)>>1
if(q側が32以上である)
dq0=(dq0+Abs(q5,0-2*q4,0+q3,0)+1)>>1
dq3=(dq3+Abs(q5,3-2*q4,3+q3,3)+1)>>1
dpq0、dpq3、dp、dq、dが、次いで、HEVCにおけるように導出される。
条件2は、以下のように定義される。
条件2=(d<β) ?TRUE:FALSE
ここで、セクション2.1.4に示されるように、d=dp0+dq0+dp3+dq3である。
条件1と条件2が有効の場合、いずれかのブロックがサブブロックを使用しているか否かがチェックされる。
If(bSidePisLargeBlk)
If(mode blockP==SUBBLOCKMODE)
Sp=5
else
Sp=7
else
Sp=3
If(bSideQisLargeBlk)
If(modeblockQ==SUBBLOCKMODE)
Sq=5
else
Sq=7
else
Sq=3
最終的に、条件1と条件2の両方が有効である場合、提案したデブロッキング方法は条件3(大きいブロック強いフィルタ条件)をチェックし、これは、以下のように定義される。条件3StrongFilterConditionにおいては、以下の変数が導出される。
DpqがHEVCのように導出される
sp3=Abs(p3-p0),HEVCのように導出される
if(p側が32以上である)
if(Sp==5)
sp3=(sp3+Abs(p5-p3)+1)>>1
else
sp3=(sp3+Abs(p7-p3)+1)>>1
sq3=Abs(q0-q3),HEVCのように導出される
if(q側が32以上である)
If(Sq==5)
sq3=(sq3+Abs(q5-q3)+1)>>1
else
sq3=(sq3+Abs(q7-q3)+1)>>1
HEVCにおけるように、
StrongFilterCondition=(dpqislessthan(β>>2),sp3+sq3islessthan(3*β>>5),andAbs(p0-q0)islessthan(5*tC+1)>>1)?TRUE:FALSE
である。
図6は、ルマ(luma)デブロッキングフィルタプロセスに係るフローチャートを示している。
2.2.6. クロマの強力なデブロッキングフィルタ
以下に、クロマのための強いデブロックフィルタが定義される。
p2′=(3*p3+2*p2+p1+p0+q0+4)>>3
p1′=(2*p3+p2+2*p1+p0+q0+q1+4)>>3
p0′=(p3+p2+p1+2*p0+q0+q1+q2+4)>>3
提案されるクロマフィルタは、4×4のクロマサンプルグリッドにおいてデブロッキングを実行する。
2.2.7. クロマに対するデブロッキング制御
上記のクロマフィルタは、8×8のクロマサンプルグリッドにおいてデブロッキングを実行する。クロマの強いフィルタがブロック境界の両側において使用される。ここで、クロマフィルタは、クロマエッジの両側が8以上(クロマサンプルの単位)の場合に選択され、そして、3個の条件を伴う以下の判定が満足される。1番目は、境界強度、並びに、大きいブロック(large block)の決定である。2番目と3番目の条件は、基本的に、HEVCルマ判定と同じであり、それは、それぞれに、オン/オフ判定と強いフィルタ決定である。
図7は、クロマデブロッキングフィルタプロセスのフローチャートを示している。
2.2.8. 位置依存クリッピング
本提案は、また、境界で7、5、および3個のサンプルを修正する、強く、かつ、長いフィルタを含むルマフィルタリングプロセスの出力サンプルに対して適用される位置依存クリッピングtcPDを導入している。量子化誤差分布を仮定して、より高い量子化ノイズを有することが期待される、従って、再構成されたサンプル値に係る真のサンプル値からのより高い偏差を有することが期待されるサンプルに対して、クリッピング値を増加させることが提案されている。
セクション2.2で説明された意思決定プロセスの結果に依存して、提案された非対称フィルタを用いてフィルタリングされた各PまたはQ境界に対して、位置依存閾値(position dependent threshold)テーブルは、サイド情報としてデコーダに提供されているTc7およびTc3テーブルから選択される。
Tc7={6,5,4,3,2,1,1};
Tc3={6,4,2};
tcPD=(SP==3)?Tc3:Tc7;
tcQD=(SQ==3)?Tc3:Tc7;
短い対称フィルタを用いてフィルタリングされるPまたはQ境界に対しては、より低い規模(magnitude)の位置依存閾値が適用される。
Tc3={3,2,1};
閾値を定義した後で、フィルタリングされたp'iおよびq'iのサンプル値は、tcPおよびtcQのクリッピング値に従ってクリップされる。
p''i=clip3(p'i+tcPi,p'i-tcPi,p'i);
q''j=clip3(q'j+tcQj,q'j-tcQj,q'j);
ここで、p'iとq'iはフィルタリングされたサンプル値であり、p''iとq''ijはクリッピング後の出力サンプル値であり、そして、tcPiとtcPiはVVCtcパラメータとtcPDとtcQDから導出されたクリッピング閾値である。用語clip3は、VVCで指定されるクリッピング機能である。
2.2.9. サブブロックのデブロッキング調整
長いフィルタ(long filter)とサブブロックデブロッキングの両方を使用して、並列したフレンドリー(friendly)なデブロッキングを可能にするために、長いフィルタは、長いフィルタに対するルマコントロールに示されているように、サブブロックデブロッキング(AFFINEまたはATMVP)を使用する側において、最大で5個のサンプルを修正するように制限されている。加えて、サブブロックのデブロッキングは、CUまたは黙示的(implicit)TU境界に近い8×8グリッド上のサブブロック境界が、それぞれの側で最大2個のサンプルを修正するように制限されるように、調整されている。
以下が、CU境界と整列されていないサブブロック境界に対して適用される。
If(modeblockQ==SUBBLOCKMODE&&edge!=0){
if(!(implicitTU&&(edge==(64/4))))
if(edge==2||edge==(orthogonalLength-2)||edge==(56/4)||edge==(72/4))
Sp=Sq=2;
else
Sp=Sq=3;
else
Sp=Sq=bSideQisLargeBlk?5:3
}
0に等しいエッジがCU境界に対応する場合、2に等しい、または、orthogonalLength-2に等しいエッジは、CU境界からのサブブロック境界の8個のサンプルに対応する、等。ここで、TUの黙示的分割が使用される場合、黙示的TUは真である。図8は、TU境界およびサブPU境界に対する決定プロセスのフローチャートを示している。
水平境界のフィルタリングは、水平境界がCTU境界と整列されている場合、ルマについてSp=3、クロマについてSp=1およびSq=1に制限している。
2.2.10. より小さい差異の動きに適合されたデブロッキング決定
HEVCは、境界のそれぞれの側におけるブロック間の少なくとも1つの動きベクトル成分における差異が、1サンプルの閾値以上である場合に、予測ユニット境界のデブロッキングを可能にする。VTM6では、半ルマサンプル(half luma sample)の閾値が導入され、動きベクトルにおいて小さい差異を有するインター予測ユニット間の境界から生じるブロックアーチファクトの除去も可能にする。
2.3. 結合されたインター予測とイントラ予測(CIIP)
VTM6では、CUがマージモードでコード化されているときに、CUが少なくとも64ルマサンプルを含み(すなわち、CU幅×CU高さが64以上)、かつ、CU幅とCU高さの両方が128ルマサンプル未満である場合に、結合されたインター/イントラ予測(CIIP)モードが現在CUに適用されるか否かを示すために追加フラグが信号化される。その名前が示すように、CIIP予測は、インター予測(inter prediction)信号とイントラ予測(intra prediction)信号を結合している。CIIPモードにおけるインター予測信号Pinterは、通常のマージモードに適用されるのと同じインター予測プロセスを使用して導出され、そして、イントラ予測信号Pintraは、プラナーモード(planar mode)での通常のイントラ予測プロセスに従って導出される。次いで、重み付け平均を使用して、イントラおよびインター予測信号が結合される。ここで、重み付け値は、以下のように、上隣接ブロックおよび左隣接ブロックのコーディングモードに依存して計算される。
-上隣接が利用可能、かつ、イントラコード化されている場合、isIntraTopを1に設定し、そうでなければ、isIntraTopを0に設定する
-左隣接が利用可能、かつ、イントラコード化されている場合、isIntraLeftを1に設定し、そうでなければ、isIntraLeftを0に設定する
-(isIntraLeft+isIntraLeft)が2に等しい場合、wtは3に設定される
-そうでなければ、(isIntraLeft+isIntraLeft)が1に等しい場合、wtは2に設定される
-そうでなければ、wtを1に設定する。
CIIP予測は、以下のように形成される。
PCIIP=((4-wt)*Pinter+wt*Pintra+2)>>2
2.4. VTM-6.0におけるクロマQPテーブル設計
いくつかの実施態様においては、クロマQPテーブルが使用される。いくつかの実施形態においては、信号化(signaling)メカニズムがクロマQPテーブルについて使用され、これにより、SDRおよびHDRコンテンツについてテーブルを最適化する機会をフレキシブルにエンコーダに提供することが可能になる。これは、Cb成分とCr成分について別個のテーブルの信号化をサポートする。提案されるたメカニズムは、区分的な(piece-wise)線形関数としてクロマQPテーブルを信号化する。
2.5. 変換スキップ(TS)
HEVCと同様に、ブロックの残差(residual)は、変換スキップモードを用いてコード化することができる。シンタックスコーディング(syntax coding)の冗長性を避けるために、CUレベルMTS_CU_flagがゼロに等しくない場合、変換スキップフラグは信号化されない。変換スキップに対するブロックサイズ制限は、JEM4におけるMTSに対するものと同じであり、これは、ブロック幅と高さの両方が32以下である場合に、変換スキップがCUに対して適用できることを示している。現在CUに対してLFNSTまたはMIPがアクティブになっている場合、黙示的MTS変換はDCT2に設定されることに注意すること。また、MTSがインターコード化ブロックについてイネーブルされている場合でも、黙示的MTSは、未だにイネーブルにされ得る。
加えて、変換スキップブロックについて、最小許容量子化パラメータ(QP)は、以下のように定義される。
6*(internalBitDepth-inputBitDepth)+4
2.6. クロマ残差の結合コーディング(JCCR)
いくつかの実施態様において、クロマ残差は、一緒にコード化される。結合クロマコーディングモードの使用(起動)は、TUレベルのフラグtu_joint_cbcr_residual_flagで示され、そして、選択されたモードはクロマCBFによって黙示的に示される。フラグ
tu_joint_cbcr_residual_flagは、TUについてクロマCBFの一方または両方が1に等しい場合に存在する。PPSおよびスライスヘッダにおいて、クロマQPオフセット値は、通常のクロマ残差コーディングモードについて信号化された、通常のクロマQPオフセット値と差別化するために、結合クロマ残差コーディングモードについて信号化される。これらのクロマQPオフセット値は、結合クロマ残差コーディングモードを使用してコード化されたブロックについてクロマQP値を導出するために使用される。対応する結合クロマコーディングモード(テーブル3におけるモード2)がTU内でアクティブな場合、このクロマQPオフセットは、そのTUの量子化およびデコーディングの最中に、適用されたルマ由来(luma-derived)クロマQPに対して追加される。その他のモードについて(テーブル3におけるモード1およびモード3である、テーブル3 クロマ残差の再構成。値CSignは符号値(+1または-1)であり、それは、スライスヘッダにおいて指定されており、resJointC[][]は送信される残差である)、クロマQPは、従来のCbまたはCrブロックと同じ方法で導出される。送信された変換ブロックからのクロマ残差(resCbおよびresCr)の再構成プロセスがテーブル3に示されている。このモードが起動されると、1つの単一結合クロマ残差ブロック(テーブル3におけるresJointC[x][y])が信号化され、そして、Cbの残差ブロック(resCb)、Crの残差ブロック(resCr)は、tu_cbf_cb、tu_cbf_cr、および、スライスヘッダで指定された符号値である、Csignといった、情報を考慮して導出される。
エンコーダ側では、以下に説明するように、結合クロマ成分が導出される。モード(上のテーブルにリストされているもの)に応じて、resJointC{1,2}はエンコーダによって次のように生成される。
・モードが2に等しい場合(再構成Cb=C,Cr=CSign*Cでの単一残差)、結合残差は、以下に従って決定される。
resJointC[x][y]=(resCb[x][y]+CSign*resCr[x][y])/2
・そうでなければ、モードが1に等しい場合(再構成Cb=C,Cr=(CSign*C)/2での単一残差)、結合残差は、以下に従って決定される。
resJointC[x][y]=(4*resCb[x][y]+2*CSign*resCr[x][y])/5
・そうでなければ(モードが3に等しい、すなわち、単一残差、再構成Cr=C,Cb=(CSign*C)/2)、結合残差は、以下に従って決定される。
resJointC[x][y]=(4*resCr[x][y]+2*CSign*resCb[x][y])/5

Figure 0007321365000008
テーブル3 クロマ残差の再構成
値CSignは、スライスヘッダで指定される符号値(+1または-1)であり、resJointC[][]は送信された残差である。
上記の3つのモードでは、異なるQPが利用される。モード2では、JCCRコード化ブロックについてPPSで信号化されたQPオフセットが適用され、他の2つのモードで、それは適用されず、代わりに、非JCCRコード化ブロックについてPPSで信号化されたQPオフセットが適用される。
対応する仕様は以下の通りである。
Figure 0007321365000009
Figure 0007321365000010
3. 既存の実装の欠点
DMVRおよびBIOは、動きベクトルを精緻化する際に元の信号を含まず、その結果、不正確な動き情報を有するコーディングブロックを生じる可能性がある。また、DMVRおよびBIOは、ときどき、動き精緻化後の分数の(fractional)動きベクトルを採用するが、スクリーンビデオは、たいてい、整数の(integer)動きベクトルを有し、これは、現在のモーション情報をより不正確にし、そして、コーディングモード性能を悪化させる。
1.クロマQPテーブルとクロマデブロッキングとの間の相互作用に問題があり得る。例えば、クロマQPテーブルは、個々のQPに適用されるべきであるが、QPの加重和には適用されない。
2.ルマ・デブロッキング・フィルタリングプロセスの論理は、ハードウェア設計について複雑である。
3.境界強度導出の論理は、ソフトウェア設計とハードウェア設計の両方について複雑すぎる。
4.BS決定プロセスにおいて、JCCRは、JCCTを適用せずにコード化されたブロックとは別に扱われる。しかしながら、JCCRは残差をコード化するための特別な方法にすぎない。従って、そうした設計は、明確な利点がない限り、さらなる複雑性をもたらし得る。
5.クロマエッジ決定において、QpQおよびQpPは、それぞれ、サンプルq0,0およびp0,0を含むコーディングブロックを含むコーディングユニットのQpY値に等しく設定される。しかしながら、量子化/脱量子化プロセスでは、クロマサンプルのQPは、現在クロマCUの中心位置の対応するルマサンプルをカバーするルマブロックのQPから導出される。デュアルツリーをイネーブルにする場合、ルマブロックの位置が異なると、QPが異なる可能性がある。従って、クロマデブロッキングプロセスにおいて、誤ったQPがフィルタ決定に使用される可能性がある。そうした位置ずれは、視覚的なアーチファクトを生じさせることがある。図9(a)および図9(b)を含む一つの例が図9に示されている。図9において、左側(図9(a))はルマブロックについて対応するCTB分割であり、そして、右側(図9(b))はデュアルツリーの下のクロマCTB分割である。CUC1で示される、クロマブロックのQPを決定する場合、CUC1の中心位置が最初に導かれる。次いで、CUC1の中心位置の対応するルマサンプルが識別され、そして、対応するルマサンプル、すなわちCUY3をカバーするルマCUに関連するルマQPが、CUC1のQPを導出するためにアンタイル化(untilized)される。しかしながら、図示された3個のサンプル(実線の円)のフィルタ決定を行う場合は、対応する3個のサンプルをカバーするCUのQPが選択される。従って、第1、第2、および第3クロマサンプル(図9(b)に示される)については、CUY2、CUY3、およびCUY4のQPが使用される。つまり、同じCU内のクロマサンプルがフィルタ決定に異なるQPを使用することがあり、それは、誤った決定を招く可能性がある。
6.異なるピクチャレベルQPオフセット(すなわち、pps_joint_cbcr_qp_offset)は、JCCRコード化ブロックに適用され、非JCCRコード化ブロックに適用されるCb/Crのピクチャレベルオフセット(例えば、pps_cb_qp_offsetおよびpps_cr_qp_offset)とは異なる。しかしながら、クロマデブロッキングフィルタ決定プロセスでは、非JCCRコーディングブロックに対するそれらのオフセットのみが利用される。コード化されたモードの考慮が欠けていると、間違ったフィルタの決定を結果として生じる可能性がある。
7.TSおよび非TSコーディングブロックは、脱量子化プロセスにおいて異なるQPを採用しており、それは、デブロック化プロセスにおいても考慮される可能性がある。
8.異なるモードを持つJCCRコーディングブロックのスケーリングプロセス(量子化/脱量子化)では、異なるQPが使用される。そうした設計は一貫性がない。
4. 例示的な技術および実施形態
以下に説明される詳細な実施形態は、一般的な概念を説明するための例として考慮されるべきである。これらの実施形態は狭義に解釈されるべきではない。さらに、これらの実施形態は、任意の方法で組み合わせることができる。
以下に説明される方法は、以下に説明されるDMVRおよびBIOに加えて、他のデコーダ動作情報導出技術にも適用可能である。
以下の例において、MVM[i].xおよびMVM[i].yは、M(Mは、PまたはQ)側のブロックの参照ピクチャリストi(iは、0または1)における動きベクトルの水平成分および垂直成分を示す。Absは、入力の絶対値を取得する操作を示し、「&&」および「||」は、論理演算ANDとORを示す。図10を参照すると、PはP側のサンプルを示し、QはQ側のサンプルを示すことができる。P側とQ側のブロックは、ダッシュ線で示されたブロックを示すことができる。
デブロッキングにおけるクロマQPについて
1.クロマQPテーブルがクロマのデブロッキングを制御するパラメータを導出するために使用される場合(例えば、クロマブロックエッジの決定プロセスにおいて)、クロマQPオフセットがクロマQPテーブルを適用した後に適用され得る。
a.一つの例において、クロマQPオフセットは、クロマQPテーブルによって出力される値に追加され得る。
b.代替的に、クロマQPオフセットは、クロマQPテーブルへの入力とみなされない場合がある。
c.一つの例において、クロマQPオフセットは、ピクチャレベルまたは他のビデオユニットレベル(スライス/タイル/ブリック/サブピクチャ)クロマ量子化パラメータオフセット(例えば、仕様におけるpps_cb_qp_offset、pps_cr_qp_offset)であってよい。
2.クロマQPテーブルの入力には、QPクリッピングが適用されない場合がある。
3.デブロッキングフィルタ決定プロセスにおける種々のコーディング方法に使用される画像/スライス/タイル/ブリック/サブピクチャレベル量子化パラメータオフセットを考慮することが提案されている。
a.一つの例において、フィルタ決定のための画像/スライス/タイル/ブリック/サブピクチャレベル量子化パラメータオフセットの選択(例えば、デブロッキングフィルタプロセスにおけるクロマエッジ決定)は、各側面についてコード化された方法に依存し得る。
b.一つの例において、クロマブロックに対して量子化パラメータを使用することを必要とするフィルタリングプロセス(例えば、クロマエッジ決定プロセス)は、ブロックがJCCRを使用するか否かに依存し得る。
i.代替的に、さらに、JCCRコーディングブロックに適用される画像/スライスレベルQPオフセット(例えば、pps_joint_cbcr_qp_offset)が、デブロッキングフィルタリングプロセスにおいてさらに考慮され得る。
ii.一つの例において、TCおよびβ設定を決定するために使用されるcQpPicOffsetは、特定の条件下でpps_cb_qp_offsetまたはpps_cr_qp_offsetの代わりにpps_joint_cbcr_qp_offsetに設定され得る。
1.一つの例においては、P側またはQ側のブロックのいずれかがJCCRを使用する場合である。
2.一つの例においては、PまたはQ側の両方のブロックがJCCRを使用する場合である。
4.ルマブロックのデコーディングされた情報にアクセスすることを必要とするクロマフィルタリングプロセス(例えば、クロマエッジ決定プロセス)は、脱量子化/量子化プロセスにおいてクロマQPを導出するために使用されるのと同じルマ・コーディングブロックに関連付けられた情報を利用することができる。
a.一つの例において、ルマブロックに対して量子化パラメータを使用することを必要とするクロマフィルタリングプロセス(例えば、クロマエッジ決定プロセス)は、現在クロマCUの中心位置の対応するルマサンプルをカバーするルマコーディングユニットを利用することができる。
b.一つの例が図9に示されており、図9(b)の3個のクロマサンプル(第1、第2、および第3)の決定をフィルタリングするために、CUY3のデコーディングされた情報を使用することができる。
5.クロマフィルタリングプロセス(例えば、クロマエッジ決定プロセス)は、クロマブロックのスケーリングプロセスに適用される量子化パラメータ(例えば、量子化/脱量子化)に依存し得る。
a.一つの例において、βおよびTCを導出するために使用されるQPは、クロマブロックのスケーリングプロセスに適用されるQPに依存し得る。
b.代替的に、さらに、クロマブロックのスケーリングプロセスに使用されるQPは、クロマCUレベルQPオフセットを考慮に入れてよい。
6.上記の項目(bullets)を呼び出すか否かは、フィルタリングされるサンプルがPまたはQ側のブロック内にあることに依存し得る。
a.例えば、現在クロマサンプルの対応するルマサンプルをカバーするルマコーディングブロックの情報を使用するか、現在クロマサンプルをカバーするクロマコーディングブロックの中心位置の対応するルマサンプルをカバーするルマコーディングブロックの情報を使用するかは、ブロック位置に依存する。
i.一つの例において、現在クロマサンプルがQ側のブロック内にある場合、現在クロマサンプルをカバーするクロマコーディングブロックの中心位置の対応するルマサンプルをカバーするルマコーディングブロックのQP情報が使用され得る。
ii.一つの例において、現在クロマサンプルがP側のブロック内にある場合、クロマサンプルの対応するルマサンプルをカバーするルマコーディングブロックのQP情報が使用され得る。

QP設定について
7.ブロックレベルクロマQPオフセット(例えば、slice_cu_chroma_qp_offset_enabled_flag)を、スライス/タイル/ブリック/サブピクチャレベルでイネーブルにすることの指示を信号化することが提案されている。
a.代替的に、そのような指示の信号は条件付きで信号化されてよい。
i.一つの例において、JCCRイネーブルフラグの条件下で、信号が送られてよい。
ii.一つの例において、それは、ブロックレベルクロマQPオフセットの条件下で、ピクチャレベルでフラグをイネーブルにすることができる。
iii.代替的に、そうした指示を代わりに導出することができる。
b.一つの例において、slice_cu_chroma_qp_offset_enabled_flagは、クロマQPオフセットのPPSフラグがある場合にのみ、信号化され得る(例えば、slice_cu_chroma_qp_offset_enabled_flagが真である)。
c.一つの例において、slice_cu_chroma_qp_offset_enabled_flagは、クロマQPオフセットのPPSフラグがある場合にのみ、偽に推定され得る(例えば、slice_cu_chroma_qp_offset_enabled_flagが偽である)。
d.一つの例において、ブロック上でクロマQPオフセットを使用するか否かは、PPSレベル及び/又はスライスレベルにおけるクロマQPオフセットのフラグに基づいてよい。 8.異なるモードを持つJCCRコーディングブロックのスケーリングプロセス(量子化/脱量子化)では、同じQP導出法が使用される。
a.一つの例において、モード1および3を有するJCCRの場合、QPは、画像/スライスレベルで信号化されたQPオフセット(例えば、pps_cbcr_qp_offset、slice_cbcr_qp_offset)に依存する。

フィルタリングのプロシージャ
1.第1色成分を除く全ての色成分のためのデブロッキングは、第1色成分のためのデブロッキングプロセスに従い得る。
a.一つの例において、カラーフォーマットが4:4:4である場合、第2および第3構成要素のためのデブロッキングプロセスは、第1構成要素のためのデブロッキングプロセスに従い得る。
b.一つの例において、カラーフォーマットがRGB色空間において4:4:4である場合、第2および第3構成要素のためのデブロッキング処理は、第1構成要素のためのデブロッキング処理に従い得る。
c.一つの例において、カラーフォーマットが4:2:2である場合、第2および第3構成要素の垂直方向のデロック処理は、第1構成要素の垂直方向のデロック処理に従い得る。
d.上記の例では、デブロッキングプロセスは、デブロッキング決定プロセス及び/又はデブロッキングフィルタリングプロセスを参照することができる。

境界強度の導出について
10.境界強度決定プロセスにおいて、JCCRコーディングブロックを非JCCRコーディングブロックとして扱うことが提案されている。
a.一つの例において、境界強度(BS)の決定は、P側およびQ側の2つのブロックに対するJCCRの使用のチェックから独立し得る。
b.一つの例において、ブロックの境界強度(BS)は、そのブロックがJCCRでコード化されるか否かにかかわらず、決定され得る。
11.P側のブロックに関連する参照ピクチャ及び/又はMV数をQ側のブロックの参照ピクチャと比較することなく、境界強度(BS)を導出することが提案されている。
a.一つの例において、デブロッキングフィルタは、2つのブロックが異なる参照ピクチャを有する場合でさえ、ディセーブルにされ得る。
b.一つの例において、デブロッキングフィルタは、2つのブロックが異なるMV数を持つ場合であってもディセーブルにされ得る(例えば、一方はユニ予測であり、他方はバイ予測)。
c.一つの例において、BSの値は、P側とQ側のブロック間の1つまたは全ての参照ピクチャリストの動きベクトル差が閾値Th以上である場合に1に設定され得る。
i.代替的に、さらに、BSの値は、P側とQ側のブロック間の一つまたは全ての参照ピクチャリストの動きベクトル差が閾値Th以下の場合には、0に設定され得る。
d.一つの例において、閾値Thより大きい2つのブロックの動きベクトルの差は、以下のように定義され得る。
(Abs(MVP[0].x-MVQ[0].x)>Th||Abs(MVP[0].y-MVQ[0].y)>Th||
Abs(MVP[1].x-MVQ[1].x)>Th)||Abs(MVP[1].y-MVQ[1].y)>Th)
i.代替的に、閾値Thより大きい2ブロックの動きベクトルの差は、以下のように定義され得る。
(Abs(MVP[0].x-MVQ[0].x)>Th&&Abs(MVP[0].y-MVQ[0].y)>Th&&
Abs(MVP[1].x-MVQ[1].x)>Th)&&Abs(MVP[1].y-MVQ[1].y)>Th)
ii.代替的に、一つの例において、閾値Thより大きい2ブロックの動きベクトルの差は、以下のように定義され得る。
(Abs(MVP[0].x-MVQ[0].x)>Th||Abs(MVP[0].y-MVQ[0].y)>Th)&&
(Abs(MVP[1].x-MVQ[1].x)>Th)||Abs(MVP[1].y-MVQ[1].y)>Th)
iv.代替的に、一つの例において、閾値Thより大きい2ブロックの動きベクトルの差は、以下のように定義され得る。
(Abs(MVP[0].x-MVQ[0].x)>Th&&Abs(MVP[0].y-MVQ[0].y)>Th)||
(Abs(MVP[1].x-MVQ[1].x)>Th)&&Abs(MVP[1].y-MVQ[1].y)>Th)
e.一つの例において、所与のリスト内に動きベクトルを有しないブロックは、そのリスト内にゼロ動きベクトルを有するものとして取り扱うことができる。
f.上記の例では、Thは整数(例えば、4、8、または16)である。
g.上記の例では、Thは以下に依存し得る。
i.映像コンテンツ(例えば、スクリーンコンテンツ、または自然コンテンツ)
ii.DPS/SPS/VPS/PPS/PPS/APS/picture header/slice header/tile group header/Largest coding unit(LCU)/Coding unit(CU)/LCU row/group of LCUs/TU/PU block/Video coding unitにおいて信号化されたメッセージ
iii.CU/PU/TU/block/Video coding unitの位置
iv.エッジに沿ったサンプルを含むブロックのコーディングモード
v.エッジに沿ってサンプルを含むブロックに適用された変換行列
vi.ブロックディメンション/現在ブロック及び/又は隣接ブロックのブロック形状
vii.カラーフォーマットの表示(4:2:0、4:4:4、RGBまたはYUV、など)
viii.コーディングツリー構造(デュアルツリーまたはシングルツリー、など)
ix.スライス/タイルグループタイプ、及び/又は、ピクチャタイプ
x.色成分(例えば、CbまたはCrにのみ適用され得る)
xi.時間レイヤID
xii.規格のプロファイル/レベル/ティア(Tier)
xiii.代替的に、Thはデコーダに対して信号化され得る
h.上記の例は、所定の条件下で適用することができる。
i.一つの例において、条件は、blkPおよびblkQが、イントラモードでコード化されていないことである。
ii.一つの例において、条件は、blkPおよびblkQが、ルマ成分において係数ゼロを有することである。
iii.一つの例において、条件は、blkPおよびblkQが、CIIPモードでコード化されていないことである。
iv.一つの例において、条件は、blkPおよびblkQが、同じ予測モード(例えば、IBCまたはInter)でコード化されていることである。

ルマデブロッキングフィルタリングプロセスについて
12.デブロッキングは、TSコーディングブロックと非TSコーディングブロックに対して異なるQPを使用し得る。
a.一つの例において、TSのQPはTSコーディングブロックで使用され、TS以外のQPはTSコード化されていないブロックで使用される。
13.ルマフィルタリングプロセス(例えば、ルマエッジ決定プロセス)は、ルマブロックのスケーリングプロセスに適用される量子化パラメータに依存し得る。
a.一つの例において、ベータおよびTCを導出するために使用されるQPは、例えばQpPrimeTsMinによって示されるように、変換スキップのクリッピング範囲に依存し得る。
14.大きいブロック境界と小さいブロック境界に対して同一の勾配計算を用いることが提案されている。
a.一つの例において、セクション2.1.4で説明したデブロッキングフィルタのオン/オフ決定は、大きいブロック境界にも適用することができる。
i.一つの例において、決定における閾値ベータ(beta)は、大きいブロック境界に対して修正され得る。
1.一つの例において、ベータは、量子化パラメータに依存し得る。
2.一つの例において、大きいブロック境界に対するフィルタのオン/オフ決定に使用されるベータは、小さいブロック境界に対するベータより小さくてもよい。
a.代替的に、一つの例において、大きいブロック境界に対するフィルタのオン/オフ決定に使用されるベータは、小さいブロック境界に対するベータより大きくてもよい。
b.代替的に、一つの例において、大きいブロック境界に対するフィルタのオン/オフ決定に使用されるベータは、小さいブロック境界に対するものと等しくてよい。
3.一つの例において、ベータは整数であり、以下に基づいてよい。
a.映像コンテンツ(例えば、スクリーンコンテンツ、または自然コンテンツ)
b.DPS/SPS/VPS/PPS/PPS/APS/picture header/slice header/tile group header/Largest coding unit(LCU)/Coding unit(CU)/LCU row/group of LCUs/TU/PU block/Video coding unitにおいて信号化されたメッセージ
c.CU/PU/TU/block/Video coding unitの位置
d.エッジに沿ったサンプルを含むブロックのコーディングモード
e.エッジに沿ってサンプルを含むブロックに適用された変換行列
f.現在ブロック及び/又はその隣接ブロックのブロック寸法
g.ブロックディメンション/現在ブロック及び/又は隣接ブロックのブロック形状
h.カラーフォーマットの表示(4:2:0、4:4:4、RGBまたはYUV、など)
i.コーディングツリー構造(デュアルツリーまたはシングルツリー、など)
j.スライス/タイルグループタイプ、及び/又は、ピクチャタイプ
k.色成分(例えば、CbまたはCrにのみ適用され得る)
l.時間レイヤID
m.規格のプロファイル/レベル/ティア(Tier)
n.代替的に、Thはデコーダに対して信号化され得る

一般
15.上記の方法は、所定の条件下で適用することができる。
a.一つの例において、条件は、カラーフォーマットが4:2:0及び/又は4:2:2なことである。
i.代替的に、さらに、4:4:4カラーフォーマットの場合、2つのカラークロマ成分にデブロッキングフィルタを適用する方法は、現在の設計に従い得る。
b.一つの例において、上記方法の使用の指示は、シーケンス/ピクチャ/スライス/タイル/ブリック/ビデオ領域レベル、例えば、SPS/PPS/ピクチャヘッダ/スライスヘッダで信号化されてよい。
c.一つの例において、上記の方法の使用は、以下に依存し得る。
i.映像コンテンツ(例えば、スクリーンコンテンツ、または自然コンテンツ)
ii.DPS/SPS/VPS/PPS/PPS/APS/picture header/slice header/tile group header/Largest coding unit(LCU)/Coding unit(CU)/LCU row/group of LCUs/TU/PU block/Video coding unitにおいて信号化されたメッセージ
iii.CU/PU/TU/block/Video coding unitの位置
iv.エッジに沿ったサンプルを含むブロックのコーディングモード
v.エッジに沿ってサンプルを含むブロックに適用された変換行列
vi.現在ブロック及び/又はその隣接ブロックのブロック寸法

vii.ブロックディメンション/現在ブロック及び/又は隣接ブロックのブロック形状
viii.カラーフォーマットの表示(4:2:0、4:4:4、RGBまたはYUV、など)
ix.コーディングツリー構造(デュアルツリーまたはシングルツリー、など)
x.スライス/タイルグループタイプ、及び/又は、ピクチャタイプ
xi.色成分(例えば、CbまたはCrにのみ適用され得る)
xii.時間レイヤID
xiii.規格のプロファイル/レベル/ティア(Tier)
xiv.代替的に、Thはデコーダに対して信号化され得る
5. 追加の実施形態
新たに追加されたテキストは、下線が付けられ、太字のイタリック体で示されている。削除されたテキストは[[ ]]でマーク付けされている。
5.1. デブロッキングにおけるクロマQPに関する実施例#1
Figure 0007321365000011
Figure 0007321365000012
5.2. 境界強度の導出に関する実施例#2
Figure 0007321365000013
Figure 0007321365000014
Figure 0007321365000015
5.3. 境界強度の導出に関する実施例#3
Figure 0007321365000016
Figure 0007321365000017
Figure 0007321365000018
5.4. ルマデブロッキングフィルタリングプロセスに関する実施例#4
Figure 0007321365000019
Figure 0007321365000020
5.5. クロマデブロッキングフィルタリングプロセスに関する実施例#5
Figure 0007321365000021
Figure 0007321365000022
Figure 0007321365000023
Figure 0007321365000024
Figure 0007321365000025
Figure 0007321365000026
Figure 0007321365000027
6. 開示される技術の実施例
図12は、ビデオ処理装置1200のブロック図である。装置1200は、ここにおいて説明される1つ以上の方法を実装するために使用され得る。装置1200は、スマートフォン、タブレット、コンピュータ、モノのインターネット(IoT)受信器、等で実現することができる。装置1200は、1つ以上のプロセッサ1202、1つ以上のメモリ1204、およびビデオ処理ハードウェア1206を含み得る。プロセッサ1202は、本文書に説明される1つ以上の方法を実装するように構成され得る。メモリ(複数のメモリ)1204は、ここにおいて説明される方法および技術を実施するために使用されるデータおよびコードを保管するために使用され得る。ビデオ処理ハードウェア1206は、ハードウェア回路において、本文書に説明されるいくつかの技術を実装するために使用することができ、部分的または完全にプロセッサ1202(例えば、グラフィックスプロセッサコアGPU、または他の信号処理回路)の一部であってよい。
本文書において、用語「ビデオ処理(“video processing”)」は、ビデオコーディング、ビデオデコーディング、ビデオ圧縮またはビデオ解凍を指すことができる。例えば、ビデオ圧縮アルゴリズムは、ビデオのピクセル表現から対応するビットストリーム表現へ、または、その逆への変換の最中に適用され得る。現在ビデオブロックのビットストリーム表現は、例えば、シンタックスによって定義されるように、ビットストリーム内の異なる場所に共配置されるか、または拡散されるビットに対応し得る。例えば、マクロブロックは、変換され、かつ、コード化されたエラー残差値の観点から、また、ビットストリーム内のヘッダおよび他のフィールド内のビットを使用して、エンコーディングされ得る。
開示される方法および技術は、スマートフォン、ラップトップ、デスクトップ、および、類似の装置といった、ビデオ処理装置内に組み込まれたビデオエンコーダ及び/又はデコーダの実施形態に有益であることが、ここにおいて開示される技術の使用を可能にすることによって理解されるであろう。
図13は、ビデオ処理の例示的な方法1300のためのフローチャートである。方法1300は、1310において、ビデオユニットとビデオユニットのビットストリーム表現との間の変換を実行することを含む。ここで、本変換の最中は、デブロッキングフィルタがビデオユニットの境界において使用され、そうして、クロマ量子化パラメータ(QP)テーブルがデブロッキングフィルタのパラメータを導出するために使用されるとき、クロマQPテーブルによる処理が個々のクロマQP値に対して実行される。
いくつかの実施形態が、以下の条項ベース(clause-based)のフォーマットを使用して説明され得る。
1.ビデオ処理の方法であって、以下を含む方法。
ビデオユニットとビデオユニットのビットストリーム表現との間の変換を実行するステップであり、前記変換の最中に、クロマ量子化パラメータ(QP)テーブルが前記デブロッキングフィルタのパラメータを導出するために使用されるとき、クロマQPテーブルによる処理が個々のクロマQP値に対して実行されるように、デブロッキングフィルタが前記ビデオユニットの境界において使用される、ステップ。
2.クロマQPオフセットが、クロマQPテーブルによる処理の後で、個々のクロマQP値に追加される、条項1に記載の方法。
3.クロマQPオフセットが、クロマQPテーブルによって出力される値に追加される、条項1または2に記載の方法。
4.クロマQPオフセットは、クロマQPテーブルへの入力とはみなされない、条項1または2に記載の方法。
5.クロマQPオフセットは、ピクチャレベルまたはビデオユニットレベルである、条項2に記載の方法。
6.ビデオ処理の方法であって、以下を含む方法。
ビデオユニットと前記ビデオユニットのビットストリーム表現との間の変換を実行するステップであり、前記変換の最中に、クロマQPオフセットが前記デブロッキングフィルタにおいて使用されるように、デブロッキングフィルタが前記ビデオユニットの境界において使用され、前記クロマQPオフセットがピクチャ/スライス/タイル/ブリック/サブピクチャレベルで使用される、ステップ。
7.デブロッキングフィルタで使用されるクロマQPオフセットは、前記ビデオユニットの境界に適用されるコーディング方法と関連付けられる、条項6に記載の方法。
8.コーディング方法が、クロマ残差の結合コーディング(JCCR)方法である、条項7に記載の方法。
9.ビデオ処理の方法であって、以下を含む方法。
ビデオユニットとビデオユニットのビットストリーム表現との間の変換を実行するステップであり、前記変換の最中に、クロマQPオフセットが前記デブロッキングフィルタにおいて使用されるように、デブロッキングフィルタが前記ビデオユニットの境界において使用され、前記デブロッキングフィルタにおいて同じルマコーディングユニットに関連する情報が使用され、クロマQPオフセットを導出する、ステップ。
10.同じルマコーディングユニットが、ビデオユニットの中心位置の対応するルマサンプルをカバーし、ビデオユニットがクロマコーディングユニットである、条項9に記載の方法。
11.スケーリングプロセスがビデオユニットに適用され、前記デブロッキングフィルタの1つ以上のパラメータが、少なくとも部分的に、前記スケーリングプロセスの量子化/脱量子化パラメータに依存する、条項9に記載の方法。
12.前記スケーリングプロセスの量子化/脱量子化パラメータは、前記クロマQPオフセットを含む、条項11に記載の方法。
13.ビデオユニット内のルマサンプルは、P側またはQ側にある、条項9-12のいずれかに記載の方法。
14.同じルマコーディングユニットに関する情報は、同じルマコーディングユニットに関するコーディングユニットの相対位置に依存する、条項13に記載の方法。
15.ビデオ処理の方法であって、以下を含む方法。
ビデオユニットとビデオユニットのビットストリーム表現との間で変換を実行するステップであり、前記変換の最中に、クロマQPオフセットがデブロッキングフィルタにおいて使用されるように、デブロッキングフィルタが前記ビデオユニットの境界において使用され、クロマQPオフセットの使用をイネーブルにする指示が前記ビットストリーム表現において信号化される、ステップ。
16.前記指示は、1つ以上のフラグを検出することに応答して条件付きで信号化される、条項15に記載の方法。
17.前記1つ以上のフラグが、JCCRイネーブルフラグまたはクロマQPオフセットイネーブルフラグに関連する、条項16に記載の方法。
18.前記指示は、導出に基づいて信号化される、条項15に記載の方法。
19.ビデオ処理の方法であって、以下を含む方法。
ビデオユニットと前記ビデオユニットのビットストリーム表現との間の変換を実行するステップであり、前記変換の最中に、前記ビデオユニットの境界上でデブロッキングフィルタが使用され、前記デブロッキングフィルタにクロマQPオフセットが使用される。ここで、前記デブロッキングフィルタに使用されるクロマQPオフセットは、前記ビデオユニットの境界上でJCCRコーディング方法が適用されるか、または、前記ビデオユニットの境界上でJCCRコーディング方法とは異なる方法が適用されるか、いずれかと同じである、ステップ
20.ビデオ処理の方法であって、以下を含む方法。
ビデオユニットと前記ビデオユニットのビットストリーム表現との間の変換を実行するステップであり、前記変換の最中に、クロマQPオフセットが前記デブロッキングフィルタ内で使用されるように、デブロッキングフィルタが前記ビデオユニットの境界において使用され、前記デブロッキングフィルタの境界強度(BS)が、参照ピクチャ及び/又は前記ビデオユニットに関連する多数の動きベクトル(MV)と、参照ピクチャ及び/又はQ側の前記ビデオユニットに関連する多数の動きベクトル(MV)とをP側境界で比較することなく、計算される、ステップ。
21.前記デブロッキングフィルタは、1つ以上の条件下でディセーブルにされる、条項20に記載の方法。
22.前記1つ以上の条件は、前記動きベクトルの大きさまたは閾値に関連する、条項21に記載の方法。
23.前記閾値は、以下の少なくとも1つに関連付けられる、条項22に記載の方法。i.前記ビデオユニットのコンテンツ、ii.DPS/SPS/VPS/PPS/PPS/APS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/最大コーディングユニット(LCU)/コーディングユニット(CU)/LCU行/LCUグループ/TU/PUブロック/ビデオコーディングユニット、において信号化されるメッセージ、iii.CU/PU/TU/ブロック/ビデオコーディングユニットの位置、iv.境界に沿ったサンプルを有するブロックのコーディングモード、v.境界に沿ったサンプルを有するビデオユニットに適用される変換マトリクス、vi.ビデオユニットの形状または寸法、vii.カラーフォーマットの指示、viii.コーディングツリー構造、ix.スライス/タイルグループタイプ及び/又はピクチャタイプ、x.色成分、xi.時間層ID、または、xii.規格のプロファイル/レベル/階層。
24.異なるQPオフセットが、TSコーディングビデオユニットおよび非TSコーディングビデオユニットに対して使用される、条項20に記載の方法。
25.ルマフィルタリングステップで使用されるQPが、ルマブロックのスケーリングプロセスで使用されるQPに関連する、条項20に記載の方法。
26.条項1-25のうち1つ以上に記載の方法を実装するように構成されたプロセッサを含む、ビデオデコーディング装置。
27.条項1-25のうち1つ以上に記載の方法を実装するように構成されたプロセッサを含む、ビデオコーディング装置。
28.保管されたコンピュータコードを有するコンピュータプログラム製品であって、本コードは、プロセッサによって実行されると、プロセッサに、条項1-25のいずれかに記載の方法を実行させる、コンピュータプログラム製品。
29.本文書に記載された方法、装置、またはシステム。
図14は、ここにおいて開示される様々な技術が実装され得る例示的なビデオ処理システム1400を示しているブロック図である。種々の実装は、システム1400のコンポーネントの一部または全部を含んでよい。システム1400は、ビデオコンテンツを受信するための入力1402を含んでよい。ビデオコンテンツは、生で(raw)または非圧縮フォーマット、例えば、8または10ビットのマルチコンポーネント画素値で受信されてよく、または、圧縮または符号化フォーマットで受信されてもよい。入力1402は、ネットワークインターフェイス、ペリフェラルバスインターフェイス、またはストレージインターフェイスを表すことができる。ネットワークインターフェイスの例は、イーサネット、受動光ネットワーク(PON)といった有線インターフェイス、および、Wi-Fiまたはセルラーインターフェイスといった無線インターフェイスを含む。
システム1400は、本文書において説明される種々のコーディングまたはエンコーディング方法を実装し得るコーディングコンポーネント1404を含んでよい。コーディングコンポーネント1404は、入力1402からコーディングコンポーネント1404の出力までのビデオの平均ビットレートを縮小することができ、ビデオのビットストリーム表現を生成する。従って、コーディング技術は、ときどき、ビデオ圧縮またはビデオトランスコーディング技術と呼ばれる。コーディングコンポーネント1404の出力は、コンポーネント1406によって表されるように、保管されるか、または、接続された通信を介して送信されてよい。入力1402で受信されたビデオに係る保管され、または、通信されたビットストリーム(または、コードされた)表現は、ディスプレイインターフェイス1410に送信される、画素値または表示可能なビデオを生成するために、コンポーネント1408によって使用されてよい。ビットストリーム表現からユーザが閲覧可能な(user-viewable)ビデオを生成するプロセスは、ときどき、ビデオ解凍(decompression)と呼ばれる。さらに、所定のビデオ処理操作は、「コーディング」操作またはツールと称されるが、コーディングツールまたは操作は、エンコーダで使用され、コーディングの結果を反転する、対応するデコーディングツールまたは操作は、デコーダで実行されることが理解されるだろう。
ペリフェラルバスインターフェイスまたはディスプレイインターフェイスの例は、ユニバーサルシリアルバス(USB)または高精細度マルチメディアインターフェイス(HDMI(登録商標))、もしくはディスプレイポート、などを含んでよい。ストレージインターフェイスの例は、SATA(serial advanced technology attachment)、PCI、IDEインターフェイス、などを含んでよい。ここにおいて説明される技術は、移動電話、ラップトップ、スマートフォン、または、デジタルデータ処理及び/又はビデオ表示を実行することができる他の装置といった、種々の電子装置において具体化することができる。
図15は、本技術に従った、ビデオ処理方法1500のフローチャート表現である。方法1500は、オペレーション1510において、ビデオのクロマ成分のブロックと、ビデオのビットストリーム表現との間の変換を実行することを含む。変換の最中に、ブロックのエッジに沿って、少なくともいくつかのサンプルに対してデブロッキングフィルタリングプロセスが適用され、そして、デブロッキングフィルタプロセスのパラメータを決定するために、クロマ量子化パラメータ(QP)オフセットがクロマQPテーブルからのアウトプットに追加される。
いくつかの実施形態において、クロマQPオフセットは、少なくともビットストリーム表現におけるピクチャレベルまたはビデオユニットレベルのシンタックス要素によって示される。いくつかの実施態様において、ビデオユニットは、スライス、タイル、ブリック、サブピクチャ、またはブロックを含む。いくつかの実施態様において、クロマQPオフセットは、少なくともpps_cb_qp_offset及び/又はpps_cr_qp_offsetを含む。いくつかの実施形態においては、クロマQPテーブルのインプットについてQPクリッピングプロセスがディセーブルされる。いくつかの実施態様において、クロマ成分は、ビデオのCr成分を含む。いくつかの実施態様において、クロマ成分は、ビデオのCb成分を含む。
図16は、本技術に従った、ビデオ処理の方法1600のフローチャート表現である。方法1600は、オペレーション1610において、ビデオのクロマ構成要素のブロックとビデオのビットストリーム表現との間の変換のために、ルールに従って、エッジの一方側にサンプルを含む第1ビデオ領域の第1量子化情報及び/又はエッジの他方側にサンプルを含む第2ビデオ領域の第2量子化情報に基づいて、フィルタリングプロセスをブロックのエッジに適用するか否か、または、どのように適用するかを決定することを含む。ルールは、エッジの一方側のサンプルまたは他方側のサンプルをコード化するためのブロックに適用可能なコーディングモードに基づいている。ルールは、異なるビデオユニットレベルで複数のQPオフセットを使用して、第1量子化情報または第2量子化情報を決定することを指定する。また、方法1600は、オペレーション1620において、決定に基づいて変換を実行することを含む。
いくつかの実施形態において、異なるビデオユニットレベルは、少なくともピクチャレベル、スライスレベル、タイルレベル、ブリックレベル、または、サブピクチャレベルを含む。いくつかの実施形態において、複数のQPオフセットは、ビデオのCb成分に対するオフセットを含む。いくつかの実施形態において、複数のQPオフセットは、ビデオのCr成分に対するオフセットを含む。
いくつかの実施形態において、ルールは、複数のQPオフセットの選択が、コーディングモードに基づいていることを明記する。いくつかの実施形態において、コーディングモードは、クロマ残差の結合コーディング(JCCR)モードを含む。いくつかの実施形態において、ブロックがJCCRコーディングモードでコード化される場合、複数QPオフセットは、少なくともピクチャレベルQPオフセットまたはスライスレベルQPオフセットを含む。いくつかの実施形態において、フィルタ処理のための閾値βおよびtCを決定するために使用される複数のQPオフセットは、第1ビデオ領域または第2ビデオ領域のうち少なくとも1つがJCCRコーディングモードを使用してコード化される場合、JCCRコーディングモードに対するQPオフセット値を含む。
いくつかの実施形態においては、ルマ成分の対応するブロックの情報が、第1ビデオ領域の第1量子化情報または第2ビデオ領域の第2量子化情報を決定するために使用される。いくつかの実施態様においては、クロマ成分のブロック内の現在クロマサンプルをフィルタリングするために、現在クロマサンプルに対応するルマサンプルをカバーするルマコージングユニットの情報を使用して、第1ビデオ領域についての第1量子化情報または第2ビデオ領域についての第2量子化情報を決定する。
いくつかの実施形態において、フィルタリングプロセスを適用するか否か、または、適用する方法は、ブロックに適用可能なスケーリングプロセスに基づいている。いくつかの実施態様において、閾値βおよびtCを決定するために使用される第1ビデオ領域の第1量子化情報または第2ビデオ領域の第2量子化情報は、スケーリングプロセスにおいて使用される量子化情報に基づいている。いくつかの実施形態において、1つ以上のコーディングユニットレベルQPオフセットが、スケーリングプロセスで使用される量子化情報を決定するために使用される。
いくつかの実施形態において、本方法の適用可能性は、ブロックがエッジの一方側にあるか、または、エッジの他方側にあるかに基づいている。いくつかの実施形態において、ルマ成分の対応するブロックの情報がフィルタリングプロセスに使用されるか否かは、ブロックの位置に基づいている。いくつかの実施形態において、ブロックがエッジの他方側にある場合、ルマ成分の対応するブロックの情報がフィルタリングプロセスに使用される。いくつかの実施形態において、ブロックがエッジの一方側にある場合、ルマ成分の対応するブロックの情報がフィルタリングプロセスに使用される。
図17は、本技術に従った、ビデオ処理の方法1700のフローチャート表現である。方法1700は、オペレーション1710において、ビデオの現在ブロックとビデオのビットストリーム表現との間の変換のために、ビデオユニットのレベルにおけるシンタックス要素に従って、現在ブロックに対するクロマ量子化パラメータ(QP)オフセットの使用をイネーブルするか否かを決定することを含む。ビデオユニットは、現在ブロックと、ビデオの第2ブロックとを含む。方法1700は、また、オペレーション1720において、決定に基づいて変換を実行することを含む。
いくつかの実施態様において、ビデオユニットは、スライスを含む。いくつかの実施形態において、ビデオユニットは、さらに、タイル、ブリック、またはサブピクチャを含む。
いくつかの実施形態において、シンタックス要素は、ビデオユニットのレベルでのビットストリーム表現に条件付きで(conditionally)含まれる。いくつかの実施形態において、シンタックス要素は、クロマ残差の結合コード化モードがイネーブルされるか否かに基づいて、ビットストリーム表現に条件付きで含まれる。いくつかの実施形態において、ブロックレベルでクロマ量子化パラメータ(QP)オフセットの使用を示すピクチャレベルでの第2シンタックス要素に基づいて、ビデオユニットのレベルでのビットストリーム表現にシンタックス要素が含まれる。いくつかの実施形態において、シンタックス要素は、ビットストリーム表現において省略され、そして、ブロックレベルでクロマ量子化パラメータ(QP)オフセットの使用は、ピクチャレベルでの第2シンタックス要素がブロックレベルでクロマ量子化パラメータ(QP)オフセットの使用がディセーブルされることを示す場合に、ディセーブルされるように決定される。いくつかの実施態様において、現在ブロックに対するクロマ量子化パラメータ(QP)オフセットの使用は、スライスレベルのシンタックス要素およびピクチャレベルの第2シンタックス要素の両方に基づいて決定される。
図18は、本技術に従った、ビデオ処理方法1800のフローチャート表現である。方法1800は、オペレーション1810において、第1クロマ成分および第2クロマ成分を含むビデオと、ビデオのビットストリーム表現との間で変換を実行することを含む。第1クロマ成分の第1クロマブロックおよび第2クロマ成分の第2クロマブロックの残差は、ルールに従って、コーディングモードを使用してビットストリーム表現において結合的にコード化される。このルールは、変換のための量子化パラメータ(QP)を導出する方法がコーディングモードから独立していることを規定する。いくつかの実施形態において、変換のためのQPは、ピクチャレベルまたはビットストリーム表現のスライスレベルで信号化されたQPオフセットに基づいて導出される。
図19は、本技術に従った、ビデオ処理方法1900のフローチャート表現である。方法1900は、オペレーション1910において、ビデオの第1ブロックと、ビデオのビットストリーム表現との間の変換を実行することを含む。ビデオは、複数の色成分のカラーフォーマットを有し、第1ブロックは、ビデオの第1色成分に関連付けられる。変換中に、少なくともいくつかのサンプルに対して、第1ブロックのエッジに沿って、デブロッキングフィルタリングプロセスが適用される。方法1900は、オペレーション1920において、ビデオの残りの色成分に関連するブロックと、ビデオのビットストリーム表現との間の後続の変換を実行することを含む。後続の変換の最中に、デブロッキングフィルタプロセスが、第1ブロックの変換と同じ方法で、各ブロックのエッジに沿って、少なくともいくつかのサンプルに対して適用される。
いくつかの実施態様において、カラーフォーマットは、4:4:4である。いくつかの実施態様において、カラーフォーマットは、赤-緑-青(RGB)色空間において4:4:4である。いくつかの実施態様において、カラーフォーマットは、4:2:2であり、デブロッキングフィルタプロセスは、垂直方向に適用される。いくつかの実施形態において、デブロッキングフィルタプロセスは、決定プロセス及び/又はフィルタリングプロセスを含む。
図20は、本技術に従った、ビデオ処理の方法2000のフローチャート表現である。方法2000は、オペレーション2010において、ビデオとビデオのビットストリーム表現との間の変換のために、ビデオの2つのブロック間の境界の境界強度を決定することを含む。境界強度は、2つのブロックのいずれか1つがクロマ残差の結合コーディング(JCCR)モードでコード化されるか否かに関係なく決定される。方法2000は、オペレーション2020において、決定に基づいて変換を実行することを含む。
いくつかの実施態様において、2つのブロックうちのブロックがJCCRモードでコード化される場合、そのブロックは、境界強度を決定するために、非JCCRモードでコード化されるものとして取り扱われる。いくつかの実施態様において、境界強度は、2つのブロックについてのJCCRの使用から独立して決定される。
図21は、本技術に従った、ビデオ処理の方法2100のフローチャート表現である。方法2100は、オペレーション2110において、ビデオとビデオのビットストリーム表現との間の変換のために、第1ブロックと第2ブロックとの間の境界の境界強度を決定することを含む。決定は、第1ブロックの情報を第2ブロックの対応する情報と比較することなく実行される。この情報は、参照ピクチャ、及び/又は、対応するブロックの動きベクトルの数を含み、境界強度は、デブロッキングフィルタリングプロセスが境界に適用可能か否かを決定するために使用される。方法2100は、また、オペレーション2120において、決定に基づいて変換を実行することも含む。
いくつかの実施態様において、境界強度は、第1ブロックの参照ピクチャが第2ブロックの参照ピクチャと異なる場合に、デブロッキングフィルタリングプロセスがディセーブルされることを示す。いくつかの実施形態において、境界強度は、第1ブロックの動きベクトルの数が第2ブロックの動きベクトルの数と異なる場合、デブロッキングフィルタリングプロセスがディセーブルされることを示す。
いくつかの実施形態において、境界強度は、第1ブロックの1つ以上の動きベクトルと第2ブロックの1つ以上の動きベクトルとの間の差が閾値以上である場合に1に設定され、閾値は整数である。いくつかの実施形態において、第1ブロックの1つ以上の動きベクトルはMVP[0]およびMVP[1]として示され、第2ブロックの1つ以上の動きベクトルはMVQ[0]およびMVQ[1]として示される。差異は、(Abs(MVP[0].x-MVQ[0].x)>Th||Abs(MVP[0].y-MVQ[0].y)>Th||Abs(MVP[1].x-MVQ[1].x)>Th)||Abs(MVP[1].y-MVQ[1].y)>Th)である場合に、閾値Th以上である。いくつかの実施形態において、差異は、(Abs(MVP[0].x-MVQ[0].x)>Th&&Abs(MVP[0].y-MVQ[0].y)>Th&&Abs(MVP[1].x-MVQ[1].x)>Th)&&Abs(MVP[1].y-MVQ[1].y)>Th)である場合に、閾値Th以上である。いくつかの実施形態において、差異は、(Abs(MVP[0].x-MVQ[0].x)>Th||Abs(MVP[0].y-MVQ[0].y)>Th)&&(Abs(MVP[1].x-MVQ[1].x)>Th)||Abs(MVP[1].y-MVQ[1].y)>Th)である場合に、閾値Th以上である。いくつかの実施形態において、差異は、(Abs(MVP[0].x-MVQ[0].x)>Th&&Abs(MVP[0].y-MVQ[0].y)>Th)||(Abs(MVP[1].x-MVQ[1].x)>Th)&&Abs(MVP[1].y-MVQ[1].y)>Th)である場合に、閾値Th以上である。いくつかの実施形態において、境界強度は、第1ブロックの動きベクトルと第2ブロックの動きベクトルとの差が閾値以下である場合に0に設定され、閾値は整数である。いくつかの実施態様において、閾値は4、8、または16である。いくつかの実施態様において、閾値は、ビデオの特性に基づいている。
いくつかの実施形態において、本方法の適用可能性は、条件に基づいて決定される。いくつかの実施形態において、本方法は、第1ブロックおよび第2ブロックが、イントラ予測モードでコード化されない場合に適用可能である。いくつかの実施態様において、本方法は、第1ブロックおよび第2ブロックが、ルマ成分に対して係数ゼロを有する場合に適用可能である。いくつかの実施形態において、本方法は、第1ブロックおよび第2ブロックが、結合されたインター/イントラ予測モードでコード化されない場合に適用可能である。いくつかの実施形態において、本方法は、第1ブロックおよび第2ブロックが、同じ予測モードでコード化され、同じ予測モードが、イントラブロックコピー予測モードまたはインター予測モードである場合に適用可能である。
図22は、本技術に従った、ビデオ処理の方法2200のフローチャート表現である。方法2200は、オペレーション2210において、ビデオのビデオブロックとビデオのビットストリーム表現との間の変換のために、ルールに従って、ビデオブロックにおいてデブロッキングフィルタを適用するために使用される量子化パラメータ(QP)を決定することを含む。本ルールは、変換の適用をスキップすることによってビデオブロックの残差(residue)がビットストリーム表現においてコード化される、変換スキップ(TS)モードを使用してビデオブロックがコード化される場合に、決定のために第1QPが使用されることを規定している。変換を適用した後でビデオブロックの残差がビットストリーム表現でコード化される非変換スキップモードを使用してビデオブロックがコード化される場合に、第1QPとは異なる第2QPが、決定のために使用される。方法2200は、また、オペレーション2220において、決定に基づいて変換を実行することも含む。
いくつかの実施形態において、ルマブロックの変換のために、ルマブロックに適用可能なフィルタリングプロセスは、ルマブロックのスケーリングプロセスに適用されるQPに基づいている。いくつかの実施形態において、フィルタリングプロセスがルマブロックに適用可能か否かを決定するために使用されるQPは、TSモードのクリッピング範囲に基づいて決定される。
図23は、本技術に従った、ビデオ処理の方法2300のフローチャート表現である。方法2300は、オペレーション2310において、ビデオのビデオブロックとビデオのビットストリーム表現との間の変換のために、ルールに従って、ビデオブロックのエッジの少なくとも一部のサンプルに対するデブロッキングフィルタリングプロセスの適用可能性を決定するための勾配(gradient)を決定することを含む。このルールは、勾配が決定される方法がビデオブロックのサイズから独立していることを規定する。方法2300は、また、オペレーション2320において、決定に基づいて変換を実行することも含む。
いくつかの実施形態において、デブロッキングフィルタリングプロセスがイネーブルされるか否かを決定する閾値は、異なる境界サイズを有するブロックに対して調整され、閾値は整数である。いくつかの実施形態において、閾値は、デブロッキングフィルタリングプロセスについて決定された量子化パラメータに基づいている。いくつかの実施態様において、大きい境界を有するブロックの閾値は、小さい境界を有するブロックの第2閾値より小さい。いくつかの実施態様において、大きい境界を有するブロックの閾値は、小さい境界を有するブロックの第2閾値より大きい。いくつかの実施態様において、大きい境界を有するブロックの閾値は、小さい境界を有するブロックの第2閾値に等しい。いくつかの実施態様において、閾値は、ビデオの特性に基づいている。
いくつかの実施形態において、上記の方法の1つ以上の適用可能性は、ビデオの特性に基づいている。いくつかの実施形態において、ビデオの特性は、ビデオのコンテンツを含む。いくつかの実施形態において、ビデオの特性は、デコーダパラメータセット、スライスパラメータセット、ビデオパラメータセット、ピクチャパラメータセット、適応パラメータセット、ピクチャヘッダ、スライスヘッダ、タイルグループヘッダ、最大コーディングユニット(LCU)、コーディングユニット、LCU行、LCUのグループ、変換ユニット、ピクチャユニット、または、ビットストリーム表現におけるビデオコーディングユニット、において信号化される情報を含む。いくつかの実施態様において、ビデオの特性は、ビデオ内の、コーディングユニット、ピクチャユニット、変換ユニット、ブロック、またはビデオコーディングユニットの位置を含む。いくつかの実施態様において、ビデオの特性は、エッジに沿って少なくともいくつかのサンプルを含むブロックのコーディングモードを含む。いくつかの実施形態において、ビデオの特性は、エッジに沿って少なくともいくつかのサンプルを含むブロックに適用される変換マトリクスを含む。いくつかの実施形態において、現在ブロックまたは現在ブロックの隣接ブロックの特性は、現在ブロックのディメンションまたは現在ブロックの隣接ブロックのディメンションを含む。いくつかの実施形態において、現在ブロックまたは現在ブロックの隣接ブロックの特性は、現在ブロックの形状または現在ブロックの隣接ブロックの形状を含む。いくつかの実施形態において、ビデオの特性は、ビデオのカラーフォーマットの表示を含む。いくつかの実施形態において、ビデオの特性は、ビデオに適用可能な符号化ツリー構造を含む。いくつかの実施形態において、ビデオの特性は、ビデオのスライスタイプ、タイルグループタイプ、またはピクチャタイプを含む。いくつかの実施形態において、ビデオの特性は、ビデオの色成分を含む。いくつかの実施形態において、ビデオの特性は、ビデオの時間層識別子(temporal layer identifier)を含む。いくつかの実施形態において、ビデオの特性は、プロファイル、レベル、または、ビデオ規格の階層(tier)を含む。
いくつかの実施形態において、変換は、ビデオをビットストリーム表現へとエンコーディングすることを含む。いくつかの実施形態において、変換は、ビットストリーム表現をビデオへとデコーディングすることを含む。
図24は、本開示の技術を利用することができる例示的なビデオコーディングシステム100を示しているブロック図である。図24に示されるように、ビデオコーディングシステム100は、送信元デバイス(source device)110および宛先デバイス(destination device)120を含んでよい。送信元デバイス110は、エンコーディングされたビデオデータを生成し、ビデオコーディング装置として称されてよい。宛先デバイス120は、送信元デバイス110によって生成されたエンコーディングされたビデオデータを復号することができ、ビデオデコーディング装置として称されてよい。
送信元デバイス110は、ビデオソース112、ビデオエンコーダ114、および入力/出力(I/O)インターフェイス116を含むことができる。
ビデオソース112は、ビデオキャプチャ装置といったソース、ビデオコンテンツ・プロバイダからビデオデータを受信するためのインターフェイス、及び/又は、ビデオデータを生成するためのコンピュータグラフィックスシステム、または、そのようなソースの組み合わせを含んでよい。ビデオデータは、1つ以上の画像を含んでよい。ビデオエンコーダ114は、ビデオソース112からのビデオデータを符号化してビットストリームを生成する。ビットストリームは、ビデオデータのコード化表現を形成するビットのシーケンスを含んでよい。ビットストリームは、コード化された画像および関連するデータを含んでよい。コード化画像は、画像のコード化表現である。関連するデータは、シーケンスパラメータセット、画像パラメータセット、および、他のシンタックス構造を含んでよい。I/Oインターフェイス116は、変調器/復調器(モデム)及び/又は送信器を含んでよい。エンコーディングされたビデオデータは、ネットワーク130aを通じてI/Oインターフェイス116を介して宛先デバイス120に対して直接的に送信され得る。エンコーディングされたビデオデータは、また、宛先デバイス120によるアクセスのためにストレージ媒体/サーバ130b上にも保管され得る。
宛先デバイス120は、I/Oインターフェイス126、ビデオデコーダ124、および、ディスプレイ装置122を含んでよい。
I/Oインターフェイス126は、受信器及び/又はモデムを含んでよい。I/Oインターフェイス126は、送信元デバイス110またはストレージ媒体/サーバ130bからエンコーディングされたビデオデータを取得することができる。ビデオデコーダ124は、エンコーディングされたビデオデータをデコーディングすることができる。ディスプレイ装置122は、デコードされたビデオデータをユーザに表示することができる。ディスプレイ装置122は、宛先デバイス120と一体化されてよく、または、外部ディスプレイ装置とインターフェイスするように構成された宛先デバイス120の外部にあってよい。
ビデオエンコーダ114及びビデオデコーダ124は、高効率ビデオコーディング(HEVC)標準、汎用ビデオコーディング(VVM)標準、および、その他の現在の、かつ/あるいは、さらなる標準といった、ビデオ圧縮標準に従って動作し得る。
図25は、ビデオエンコーダ200の一つの例を示しているブロック図であり、それは、図24に示されるシステム100内のビデオエンコーダ114であってよい。
ビデオエンコーダ200は、本開示の技術のいずれかまたは全てを実行するように構成することができる。図25の例では、ビデオエンコーダ200は、複数の機能コンポーネントを含む。本開示に記載される技術は、ビデオエンコーダ200の種々のコンポーネント間で共有され得る。いくつかの例において、プロセッサは、本開示に記載される技術のいずれかまたは全てを実行するように構成されてもよい。
ビデオエンコーダ200の機能コンポーネントは、パーティション(partition)ユニット201、モード選択ユニット203、動作推定ユニット204、動作補償ユニット205、イントラ予測ユニット206、残差(residual)生成ユニット207、変換ユニット208、量子化ユニット209、逆量子化ユニット210、逆変換ユニット211、再構成ユニット212、バッファ213、および、エントロピー符号化ユニット214を含んでよい。
他の例では、ビデオエンコーダ200は、より多くの、より少ない、または、異なる機能コンポーネントを含み得る。一つの例では、予測ユニット202は、イントラブロックコピー(IBC)ユニットを含み得る。IBCユニットは、IBCモードで予測を実行することができ、そこでは、少なくとも1つの参照画像は、現在ビデオブロックが配置されている画像である。
さらに、動作推定ユニット204や動作補償ユニット205といった、いくつかのコンポーネントは、高度に統合されてもよいが、説明のために図25の例では別々に示されている。
パーティションユニット201は、画像を1つ以上のビデオブロックへと分割することができる。ビデオエンコーダ200およびビデオデコーダ300は、様々なビデオブロックサイズをサポートすることができる。
モード選択ユニット203は、例えば、エラー結果に基づいて、符号化モードのうちの1つ、イントラまたはインター、を選択することができ、そして、結果として生じるイントラまたはインターコード化ブロックを、残留ブロックデータを生成するために残差生成ユニット207に、かつ、参照画像として使用するためにコード化ブロックを再構成するように再構成ユニット212に提供することができる。いくつかの例では、モード選択ユニット203は、結合イントラおよびインター予測(CIIP)モードを選択することができ、そこでは、予測が、インター予測信号およびイントラ予測信号に基づいている。モード選択ユニット203は、また、インター予測の場合に、ブロックに対する運動ベクトルの解像度(例えば、サブピクセルまたは整数ピクセル精度)を選択することもできる。
現在ビデオブロックについてインター予測を実行するために、動作推定ユニット204は、バッファ213から現在ビデオブロックへの1つ以上の参照フレームを比較することによって、現在ビデオブロックの動作情報を生成することができる。動作補償ユニット205は、現在ビデオブロックに関連する画像以外のバッファ213からの画像の動作情報及びデコードされたサンプルに基づいて、現在ビデオブロックについて予測されるビデオブロックを決定することができる。
動作推定ユニット204および動作補償ユニット205は、例えば、現在ビデオブロックがIスライス内にあるか、Pスライス内にあるか、または、Bスライス内にあるかによって、現在ビデオブロックに対して異なる動作を実行することができる。
いくつかの例において、動作推定ユニット204は、現在ビデオブロックに対して単一方向の予測を実行することができ、動作推定ユニット204は、現在ビデオブロックに対する参照ビデオブロックについてリスト0またはリスト1の参照画像を検索することができる。動作推定ユニット204は、次いで、リスト0またはリスト1内の参照ピクチャを示している基準インデックスを生成することができる。参照ビデオブロック、および、現在ビデオブロックと参照ビデオブロックとの間の空間的変位を示す動きベクトルを含むものである。動作推定ユニット204は、現在ビデオブロックの動作情報として、基準インデックス、予測方向インジケータ、及び動きベクトルを出力することができる。動作補償ユニット205は、現在ビデオブロックの動作情報によって示される参照ビデオブロックに基づいて、現在ブロックの予測ビデオブロックを生成することができる。
他の例において、動作推定ユニット204は、現在ビデオブロックについて双方向予測を実行することができ、動作推定ユニット204は、リスト0内の参照ピクチャを現在ビデオブロックについての参照ビデオブロックについて検索することができ、リスト1内の参照ピクチャを現在ビデオブロックについての別の参照ビデオブロックについても検索することができる。動作推定ユニット204は、次いで、リスト0およびリスト1内の参照ピクチャを示す基準インデックスを生成することができる。参照ビデオブロック、および、現在ビデオブロックと参照ビデオブロックとの間の空間的変位を示す動きベクトルを含んでいるものである。動作推定ユニット204は、現在ビデオブロックの動作情報として、現在ビデオブロックの基準インデックス及び動きベクトルを出力することができる。動作補償ユニット205は、現在ビデオブロックの動作情報によって示される参照ビデオブロックに基づいて、現在ビデオブロックの予測ビデオブロックを生成することができる。
いくつかの例において、動作推定ユニット204は、デコーダの復号処理のための動作情報の全セットを出力することができる。
いくつかの例において、動作推定ユニット204は、現在のビデオに対する完全なセットの動作情報を出力しないことがある。むしろ、動作推定ユニット204は、他のビデオブロックの動作情報を参照して現在ビデオブロックの動作情報を信号化することができる。例えば、動作推定ユニット204は、現在ビデオブロックの動作情報が、隣接するビデオブロックの動作情報と十分に類似していると判断することができる。
一つの例において、動作推定ユニット204は、現在ビデオブロックに関連するシンタックス構造において、現在ビデオブロックが別のビデオブロックと同じ動作情報を有することをビデオデコーダ300に対して示す値を示すことができる。
別の例において、動作推定ユニット204は、現在ビデオブロックに関連するシンタックス構造において、別のビデオブロックおよび動きベクトル差(MVD)を識別することができる。動きベクトル差は、現在ビデオブロックの動きベクトルと、示されたビデオブロックの動きベクトルとの間の差を示している。ビデオデコーダ300は、示されたビデオブロックの動きベクトル、および、動きベクトル差を使用して、現在ビデオブロックの動きベクトルを決定することができる。
上述のように、ビデオエンコーダ200は、運動ベクトルを予測的に信号化することができる。ビデオエンコーダ200によって実現され得る予測信号化技術の2つの例は、高度な動きベクトル予測(AMVP)およびマージモード信号化を含む。
イントラ予測ユニット206は、現在ビデオブロックに対してイントラ予測を実行することができる。イントラ予測ユニット206が現在ビデオブロックに対してイントラ予測を行う場合、イントラ予測ユニット206は、同じピクチャ内の他のビデオブロックのデコードされたサンプルに基づいて、現在ビデオブロックに対する予測データを生成することができる。現在ビデオブロックに対する予測データは、予測されるビデオブロックおよび種々のシンタックス要素を含んでよい。
残差生成ユニット207は、現在ビデオブロックから現在ビデオブロックの予測ビデオブロックを差し引くことによって(例えば、マイナス記号によって示される)、現在ビデオブロックの残差データを生成することができる。現在ビデオブロックの残差データは、現在ビデオブロック内のサンプルの異なるサンプル成分に対応する、残差ビデオブロックを含んでよい。
他の例では、例えば、スキップモードにおいて、現在ビデオブロックについて現在ビデオブロックのための残差データが存在しないことがあり、残差生成ユニット207は減算動作を実行しないことがある。
変換処理ユニット208は、現在ビデオブロックに関連する残差ビデオブロックに対して1つ以上の変換を適用することによって、現在ビデオブロックのための1つ以上の変換係数ビデオブロックを生成することができる。
変換処理ユニット208が現在ビデオブロックに関連する変換係数ビデオブロックを生成した後で、量子化ユニット209は、現在ビデオブロックに関連する1つ以上の量子化パラメータ(QP)値に基づいて、現在ビデオブロックに関連する変換係数ビデオブロックを量子化することができる。
逆量子化ユニット210および逆変換ユニット211は、変換係数ビデオブロックから残差ビデオブロックを再構成するために、変換係数ビデオブロックに対して逆量子化および逆変換を、それぞれに、適用することができる。再構成ユニット212は、バッファ213内に保管するための現在ブロックに関連する再構成ビデオブロックを生成するために、予測ユニット202によって生成された1つ以上の予測ビデオブロックからの対応するサンプルに対して、再構成残差ビデオブロックを追加することができる。
再構成ユニット212がビデオブロックを再構成した後で、ループフィルタリング動作を実施して、ビデオブロック内のビデオブロッキングのアーチファクトを削減することができる。
エントロピー符号化ユニット214は、ビデオエンコーダ200の他の機能コンポーネントからデータを受信することができる。エントロピー符号化ユニット214がデータを受信すると、エントロピー符号化ユニット214は、エントロピー符号化データを生成し、かつ、エントロピー符号化データを含むビットストリームを出力するために、1つ以上のエントロピー符号化動作を実行することができる。
図26は、図24に示すシステム100内のビデオデコーダ114であり得る、ビデオデコーダ300の一つの例を示しているブロック図である。
ビデオデコーダ300は、本開示の技術のいずれか又は全てを実行するように構成することができる。図26の例では、ビデオデコーダ300は、複数の機能コンポーネントを含んでいる。本開示で説明される技術は、ビデオデコーダ300の種々のコンポーネント間で共有され得る。いくつかの例において、プロセッサは、本開示で説明される技術のいずれか又は全てを実行するように構成されてよい。
図26の例では、ビデオデコーダ300は、エントロピー復号化ユニット301、動作補償ユニット302、イントラ予測ユニット303、逆量子化ユニット304、逆変換ユニット305、再構成ユニット306、バッファ307を含んでいる。ビデオデコーダ300は、いくつかの例において、ビデオエンコーダ200(図25)に関して説明した符号化パスと概ね相対する(reciprocal)復号パスを実行することができる。
エントロピー復号化ユニット301は、符号化ビットストリームを検索することができる。符号化ビットストリームは、エントロピーエンコーディングされたビデオデータ(例えば、ビデオデータのコード化ブロック)を含み得る。エントロピー復号化ユニット301は、エントロピーエンコーディングされたビデオデータを復号することができ、そして、エントロピー復号化ビデオデータから、動作補償ユニット302は、動きベクトル、動きベクトル精度、参照ピクチャリストインデックス、および、他の動作情報を含んでいる動作情報を決定することができる。動作補償ユニット302は、例えば、AMVP及びマージモードを実行することによって、そうした情報を決定することができる。
動作補償ユニット302は、動作補償ブロックを生成することができ、補償フィルタに基づいて補間をおそらく実行する。サブピクセル精度で使用される補間フィルタのための識別子は、シンタックス要素に含まれてよい。
動作補償ユニット302は、ビデオブロックの符号化の最中にビデオエンコーダ20によって使用される補間フィルタを使用して、参照ブロックのサブ整数ピクセルに対する補間値を計算することができる。動作補償ユニット302は、受信されたシンタックス情報に従って、ビデオエンコーダ200によって使用される補間フィルタを決定し、かつ、予測ブロックを生成するために補間フィルタを使用することができる。
動作補償ユニット302は、エンコーディングされたビデオシーケンスのフレーム及び/又はスライスを符号化するために使用されるブロックのサイズ、エンコーディングされたビデオシーケンスの画像の各マクロブロックがどのように分割されるかを記述する分割情報、各分割がどのように符号化されるかを示しているモード、各相互コード化ブロックに対する1つ以上の参照フレーム(および参照フレームリスト)、および、エンコーディングされたビデオシーケンスをデコーディングするための他の情報を決定するために、シンタックス情報のいくつかを使用することができる。
イントラ予測ユニット303は、例えば、ビットストリームで受信されたイントラ予測モードを使用して、空間的に隣接するブロックから予測ブロックを形成することができる。逆量子化ユニット303は、ビットストリーム内で提供され、エントロピー復号化ユニット301によってデコーディングされる量子化ビデオブロック係数を逆量子化、すなわち、脱量子化(de-quantize)する。逆変換ユニット303は、逆変換を適用する。
再構成ユニット306は、残差ブロックを、動作補償ユニット202またはイントラ予測ユニット303によって生成された対応する予測ブロックと合算して、デコードされたブロックを形成することができる。所望であれば、ブロック性(blockiness)アーチファクトを除去するために、デコードされたブロックをフィルタリングするようにデブロックフィルタも、また、適用されてよい。デコードされたビデオブロックは、次いで、バッファ307に保管され、バッファ307は、後続の動作補償/イントラ予測のための参照ブロックを提供し、そして、ディスプレイ装置上に提示するためのデコードされたビデオも、また、生成する。
開示される技術のいくつかの実施形態は、ビデオ処理ツールまたはモードをイネーブルにする決定または判定を行うことを含む。一つの実施例において、ビデオ処理ツールまたはモードがイネーブルされている場合、エンコーダは、ビデオのブロックの処理においてツールまたはモードを使用または実装するが、ツールまたはモードの使用に基づいて、必ずしも結果として生じるビットストリームを修正しないことがある。すなわち、ビデオのブロックからビデオのビットストリーム表現への変換は、決定または判定に基づいてイネーブルにされたとき、ビデオ処理ツールまたはモードを使用する。別の実施例では、ビデオ処理ツールまたはモードがイネーブルされている場合、デコーダは、ビットストリームが、ビデオ処理ツールまたはモードに基づいて修正されたことを知って、ビットストリームを処理する。すなわち、ビデオのビットストリーム表現からビデオのブロックへの変換は、決定または判定に基づいてイネーブルされたビデオ処理ツールまたはモードを使用して実行される。
開示される技術のいくつかの実施形態は、ビデオ処理ツールまたはモードをディセーブルにする決定または判定を行うことを含む。一つの実施例において、ビデオ処理ツールまたはモードがディセーブルされている場合、エンコーダは、ビデオのブロックをビデオのビットストリーム表現に変換する際に、ツールまたはモードを使用しない。別の実施例では、ビデオ処理ツールまたはモードがディセーブルにされた場合、デコーダは、ビットストリームが、決定または判定に基づいてイネーブルにされたビデオ処理ツールまたはモードを使用して修正されていないことを知って、ビットストリームを処理する。
この特許文献で説明されている技術的事項(subject matter)の実装および機能動作は、ここにおいて開示されている構造およびそれらの構造的等価物を含む、種々のシステム、デジタル電子回路、またはコンピュータソフトウェア、ファームウェア、もしくはハードウェアにおいて、または、それらの1つ以上の組み合わせにおいて実施することができる。ここにおいて説明される技術的事項の実装は、1つ以上のコンピュータプログラム製品、すなわち、データ処理装置による、またはデータ処理装置の動作を制御するための、有形および非一時的なコンピュータ読取り可能な媒体上に符号化されたコンピュータプログラム命令の1つ以上のモジュールとして実装することができる。コンピュータ読取り可能な媒体は、マシンで読取り可能なストレージ装置、マシンで読取り可能なストレージ基板、メモリ装置、マシンで読取り可能な伝搬信号に影響を与える事項の組成、または、それらの1つ以上の組み合わせであり得る。用語「データ処理ユニット(“data processing unit”)」または「データ処理装置(“data processing apparatus”)」は、例えば、プログラマブルプロセッサ、コンピュータ、または、複数のプロセッサまたはコンピュータを含む、データを処理するための全ての装置、デバイス、およびマシンを包含する。装置は、ハードウェアに加えて、問題のコンピュータプログラムの実行環境を生成するコード、例えば、プロセッサファームウェア、プロトコルスタック、データベース管理システム、オペレーティングシステム、または、それらの1つ以上の組み合わせを構成するコードを含み得る。
コンピュータプログラム(プログラム、ソフトウェア、ソフトウェアアプリケーション、スクリプト、またはコードとしても知られるもの)は、コンパイルまたは解釈された言語を含む、任意の形態のプログラミング言語で書くことができる。そして、それは、スタンドアロンプログラムとして、または、コンピューティング環境での使用に適したモジュール、コンポーネント、サブルーチン、または他のユニットとしてを含む、任意の形態で展開することができる。コンピュータプログラムは、必ずしもファイルシステム内のファイルに対応するものではない。プログラムは、他のプログラムまたはデータを保持するファイルの一部分(例えば、マークアップ言語文書に保管される1つ以上のスクリプト)、問題のプログラム専用の単一ファイル、または、複数の調整されたファイル(例えば、1つ以上のモジュール、サブプログラム、またはコードの一部分を保管するファイル)に保管することができる。コンピュータプログラムは、1つのコンピュータまたは1つのサイトに配置されるか、または、複数のサイトに分散され、通信ネットワークによって相互接続される複数のコンピュータ上で実行されるように展開され得る。
ここにおいて説明されるプロセスおよび論理フローは、入力データ上で動作し、出力を生成することによって機能を実行するために、1つ以上のコンピュータプログラムを実行する1つ以上のプログラマブルプロセッサによって実行することができる。プロセスおよび論理フローは、また、FPGA(フィールドプログラマブルゲートアレイ)またはASIC(特定用途向け集積回路)のような特殊目的論理回路によって実行することができ、装置も、また、実行することができる。
コンピュータプログラムの実行に適したプロセッサは、例えば、汎用および専用マイクロプロセッサの両方、および、任意の種類のデジタルコンピュータの任意の1つ以上のプロセッサを含む。一般的に、プロセッサは、読出し専用メモリまたはランダムアクセスメモリ、またはその両方から命令およびデータを受信する。コンピュータの必須要素は、命令を実行するためのプロセッサと、命令およびデータを保管するための1つ以上のメモリデバイスである。一般的に、コンピュータは、また、データを保管するための1つ以上の大容量ストレージ装置、例えば、磁気ディスク、光磁気ディスク、または光ディスクからデータを受信し、または、データを転送するために動作可能に結合される。しかし、コンピュータは、そのような装置を有する必要はない。コンピュータプログラム命令及びデータを保管するのに適したコンピュータ読取り可能な媒体は、あらゆる形態の不揮発性メモリ、媒体、およびメモリデバイスを含む。例として、半導体メモリデバイス、例えば、EPROM、EEPROM、およびフラッシュメモリデバイス、磁気ディスク、例えば、内蔵ハードディスクまたはリムーバブルディスク、光磁気ディスク、例えば、CD ROMおよびDVD-ROM、を含んでいる。プロセッサおよびメモリは、特殊目的論理回路によって補足されるか、または内蔵され得る。
この特許文献には多くの詳細が含まれているが、これらは、いずれかの発明の範囲または特許請求されることができるものを限定するものではなく、特定の発明の特定の実施形態に特有な特徴の説明として解釈されるべきである。別個の実施形態のコンテキストでこの特許文献に記載されている特定の特徴は、単一の実施形態で組み合わせて実施することもできる。逆に、単一の実施形態のコンテキストにおいて説明される種々の特徴は、複数の実施形態において別々に、または、任意の適切なサブコンビネーションで実施することもできる。さらに、特徴は、特定の組み合わせにおいて作用するものとして上述され、最初にそのように請求されてよいが、請求された組み合わせからの1つ以上の特徴は、場合によって、組み合わせから切り出されてよく、請求された組み合わせは、サブコンビネーション又はサブコンビネーションのバリエーションに向けられてよい。
同様に、図面には特定の順序で動作が示されているが、これは、所望の結果を達成するために、このような動作を特定の順序で、または、連続的な順序で実行すること、もしくは、例示された全ての動作を実行することを要求するものとして理解されるべきではない。さらに、この特許文献において説明されている実施形態における種々のシステムコンポーネントの分離は、そうした分離を全ての実施形態において必要とするものとして理解されるべきではない。
少数の実施形態および実施例のみが記載されており、この特許文献に記載され、かつ、説明されている内容に基づいて、他の実施形態、拡張、およびバリエーションが行われ得る。

Claims (9)

  1. ビデオデータを処理する方法であって、
    ビデオのクロマブロックと前記ビデオのビットストリームとの間の変換のために、エッジの一方側におけるサンプルを含む第1ビデオ領域の第1量子化情報、または、前記エッジの他方側におけるサンプルを含む第2ビデオ領域の第2量子化情報のうち少なくとも1つに基づいて、前記クロマブロックのエッジに対してデブロッキングフィルタリングプロセスを適用するか否か、もしくは、適用する方法を、ルールに従って、決定するステップであり、
    前記デブロッキングフィルタリングプロセスで使用される変数βおよびtCは、前記第1量子化情報および前記第2量子化情報に基づいて決定される、
    ステップと、
    前記決定に基づいて、前記変換を実行するステップであり、
    前記ルールは、前記第1量子化情報および前記第2量子化情報が、
    前記第1量子化情報を決定するために使用される、第1の対応するルマブロックの第3量子化情報、および、前記第2量子化情報を決定するために使用される、第2の対応するルマブロックの第4量子化情報を決定するステップであり、
    前記第1ビデオ領域の第1ツリータイプがデュアルツリーである場合、前記第1の対応するルマブロックは、前記第1ビデオ領域の中心位置に対応するルマサンプルをカバーするルマコーディングブロックであり、または、
    前記第2ビデオ領域の第2ツリータイプがデュアルツリーである場合、前記第2の対応するルマブロックは、前記第2ビデオ領域の中心位置に対応するルマサンプルをカバーするルマコーディングブロックである、
    ステップと、
    前記第3量子化情報に基づいて第1変数qPinput1を決定し、かつ、前記第4量子化情報に基づいて第2変数qPinput2を決定するステップと、
    入力として前記第1変数qPinput1を使用して、第1テーブルマッピングオペレーションに基づいて、第3変数qPoutput1を決定し、かつ、入力として前記第2変数qPinput2を使用して、第2テーブルマッピングオペレーションに基づいて、第4変数qPoutput2を決定するステップと、
    前記第3変数qPoutput1に対して異なるビデオユニットレベルでの第1複数のQPオフセットを加算することによって、前記第1ビデオ領域の第1コーディングモードに基づいて、前記第1量子化情報を決定し、かつ、前記第4変数qPoutput2に対して異なるビデオユニットレベルでの第2複数のQPオフセットを加算することによって、前記第2ビデオ領域の第2コーディングモードに基づいて、前記第2量子化情報を決定する、ステップであり、
    前記第1複数のQPオフセットは、前記第1コーディングモードがクロマ残留コーディングモードの結合コーディングであるか否かに基づいており、かつ、
    前記第2複数のQPオフセットは、前記第2コーディングモードがクロマ残留コーディングモードの結合コーディングであるか否かに基づいている、
    ステップと、
    に基づいて決定されることを規定する、ステップと、
    を含む、方法。
  2. 前記異なるビデオユニットのレベルは、少なくともピクチャレベルおよびスライスレベルを含む、
    請求項1に記載の方法。
  3. 前記第1ビデオ領域がクロマ残差コーディングモードの前記結合コーディングにおいてコード化される場合、前記第1複数のQPオフセットは、ルマ量子化パラメータに対するクロマ残差QPオフセットの第1ピクチャレベル結合コーディング、および、前記ルマ量子化パラメータに対するクロマ残差QPオフセットの第1スライスレベル結合コーディングを含み、
    前記第2ビデオ領域がクロマ残差コーディングモードの前記結合コーディングでコード化される場合、前記第2複数のQPオフセットは、ルマ量子化パラメータに対するクロマ残差QPオフセットの第2ピクチャレベル結合コーディング、および、前記ルマ量子化パラメータに対-するクロマ残差QPオフセットの第2スライスレベル結合コーディング、を含む
    請求項に記載の方法。
  4. 前記第1の対応するルマブロックは、前記第1ビデオ領域の脱量子化または量子化プロセスにおいてクロマQPを導出するために使用されるものと同じルマブロックであり、または、
    前記第2の対応するルマブロックは、前記第2ビデオ領域の脱量子化または量子化プロセスにおいてクロマQPを導出するために使用されるものと同じルマブロックである、
    請求項に記載の方法。
  5. 前記変換は、前記ビデオを前記ビットストリームへとエンコーディングすることを含む、
    請求項1乃至いずれか一項に記載の方法。
  6. 前記変換は、前記ビットストリームから前記ビデオをデコーディングすることを含む、
    請求項1乃至いずれか一項に記載の方法。
  7. プロセッサと、命令を有する非一時メモリとを備える、ビデオデータを処理する装置であって、前記プロセッサによって前記命令が実行されると、前記プロセッサに、
    ビデオのクロマブロックと前記ビデオのビットストリームとの間の変換のために、エッジの一方側におけるサンプルを含む第1ビデオ領域の第1量子化情報、または、前記エッジの他方側におけるサンプルを含む第2ビデオ領域の第2量子化情報のうち少なくとも1つに基づいて、前記クロマブロックのエッジに対してデブロッキングフィルタリングプロセスを適用するか否か、もしくは、適用する方法を、ルールに従って、決定させ、
    前記デブロッキングフィルタリングプロセスで使用される変数βおよびtCは、前記第1量子化情報および前記第2量子化情報に基づいて決定され、
    かつ、前記決定に基づいて、前記変換を実行させ
    前記ルールは、前記第1量子化情報および前記第2量子化情報が、
    前記第1量子化情報を決定するために使用される、第1の対応するルマブロックの第3量子化情報、および、前記第2量子化情報を決定するために使用される、第2の対応するルマブロックの第4量子化情報を決定するステップであり、
    前記第1ビデオ領域の第1ツリータイプがデュアルツリーである場合、前記第1の対応するルマブロックは、前記第1ビデオ領域の中心位置に対応するルマサンプルをカバーするルマコーディングブロックであり、または、
    前記第2ビデオ領域の第2ツリータイプがデュアルツリーである場合、前記第2の対応するルマブロックは、前記第2ビデオ領域の中心位置に対応するルマサンプルをカバーするルマコーディングブロックである、
    ステップと、
    前記第3量子化情報に基づいて第1変数qPinput1を決定し、かつ、前記第4量子化情報に基づいて第2変数qPinput2を決定するステップと、
    入力として前記第1変数qPinput1を使用して、第1テーブルマッピングオペレーションに基づいて、第3変数qPoutput1を決定し、かつ、入力として前記第2変数qPinput2を使用して、第2テーブルマッピングオペレーションに基づいて、第4変数qPoutput2を決定するステップと、
    前記第3変数qPoutput1に対して異なるビデオユニットレベルでの第1複数のQPオフセットを加算することによって、前記第1ビデオ領域の第1コーディングモードに基づいて、前記第1量子化情報を決定し、かつ、前記第4変数qPoutput2に対して異なるビデオユニットレベルでの第2複数のQPオフセットを加算することによって、前記第2ビデオ領域の第2コーディングモードに基づいて、前記第2量子化情報を決定する、ステップであり、
    前記第1複数のQPオフセットは、前記第1コーディングモードがクロマ残留コーディングモードの結合コーディングであるか否かに基づいており、かつ、
    前記第2複数のQPオフセットは、前記第2コーディングモードがクロマ残留コーディングモードの結合コーディングであるか否かに基づいている、
    ステップと、
    に基づいて決定されることを規定する、
    装置。
  8. 命令を保管している非一時的なコンピュータで読取り可能な記憶媒体であって、プロセッサに、
    ビデオのクロマブロックと前記ビデオのビットストリームとの間の変換のために、エッジの一方側におけるサンプルを含む第1ビデオ領域の第1量子化情報、または、前記エッジの他方側におけるサンプルを含む第2ビデオ領域の第2量子化情報のうち少なくとも1つに基づいて、前記クロマブロックのエッジに対してデブロッキングフィルタリングプロセスを適用するか否か、もしくは、適用する方法を、ルールに従って、決定させ、
    前記デブロッキングフィルタリングプロセスで使用される変数βおよびtCは、前記第1量子化情報および前記第2量子化情報に基づいて決定され、
    かつ、前記決定に基づいて、前記変換を実行させ、 前記ルールは、前記第1量子化情報および前記第2量子化情報が、
    前記第1量子化情報を決定するために使用される、第1の対応するルマブロックの第3量子化情報、および、前記第2量子化情報を決定するために使用される、第2の対応するルマブロックの第4量子化情報を決定するステップであり、
    前記第1ビデオ領域の第1ツリータイプがデュアルツリーである場合、前記第1の対応するルマブロックは、前記第1ビデオ領域の中心位置に対応するルマサンプルをカバーするルマコーディングブロックであり、または、
    前記第2ビデオ領域の第2ツリータイプがデュアルツリーである場合、前記第2の対応するルマブロックは、前記第2ビデオ領域の中心位置に対応するルマサンプルをカバーするルマコーディングブロックである、
    ステップと、
    前記第3量子化情報に基づいて第1変数qPinput1を決定し、かつ、前記第4量子化情報に基づいて第2変数qPinput2を決定するステップと、
    入力として前記第1変数qPinput1を使用して、第1テーブルマッピングオペレーションに基づいて、第3変数qPoutput1を決定し、かつ、入力として前記第2変数qPinput2を使用して、第2テーブルマッピングオペレーションに基づいて、第4変数qPoutput2を決定するステップと、
    前記第3変数qPoutput1に対して異なるビデオユニットレベルでの第1複数のQPオフセットを加算することによって、前記第1ビデオ領域の第1コーディングモードに基づいて、前記第1量子化情報を決定し、かつ、前記第4変数qPoutput2に対して異なるビデオユニットレベルでの第2複数のQPオフセットを加算することによって、前記第2ビデオ領域の第2コーディングモードに基づいて、前記第2量子化情報を決定する、ステップであり、
    前記第1複数のQPオフセットは、前記第1コーディングモードがクロマ残留コーディングモードの結合コーディングであるか否かに基づいており、かつ、
    前記第2複数のQPオフセットは、前記第2コーディングモードがクロマ残留コーディングモードの結合コーディングであるか否かに基づいている、
    ステップと、
    に基づいて決定されることを規定する、
    コンピュータで読取り可能な記憶媒体。
  9. ビデオのビットストリームを保管する方法であって、前記方法は、
    ビデオのクロマブロックと前記ビデオのビットストリームとの間の変換のために、エッジの一方側におけるサンプルを含む第1ビデオ領域の第1量子化情報、または、前記エッジの他方側におけるサンプルを含む第2ビデオ領域の第2量子化情報のうち少なくとも1つに基づいて、前記クロマブロックのエッジに対してデブロッキングフィルタリングプロセスを適用するか否か、もしくは、適用する方法を、ルールに従って、決定するステップであり、
    前記デブロッキングフィルタリングプロセスで使用される変数βおよびtCは、前記第1量子化情報および前記第2量子化情報に基づいて決定される、
    ステップと、
    前記決定に基づいて、前記変換を実行するステップであり、
    前記ルールは、前記第1量子化情報および前記第2量子化情報が、
    前記第1量子化情報を決定するために使用される、第1の対応するルマブロックの第3量子化情報、および、前記第2量子化情報を決定するために使用される、第2の対応するルマブロックの第4量子化情報を決定するステップであり、
    前記第1ビデオ領域の第1ツリータイプがデュアルツリーである場合、前記第1の対応するルマブロックは、前記第1ビデオ領域の中心位置に対応するルマサンプルをカバーするルマコーディングブロックであり、または、
    前記第2ビデオ領域の第2ツリータイプがデュアルツリーである場合、前記第2の対応するルマブロックは、前記第2ビデオ領域の中心位置に対応するルマサンプルをカバーするルマコーディングブロックである、
    ステップと、
    前記第3量子化情報に基づいて第1変数qPinput1を決定し、かつ、前記第4量子化情報に基づいて第2変数qPinput2を決定するステップと、
    入力として前記第1変数qPinput1を使用して、第1テーブルマッピングオペレーションに基づいて、第3変数qPoutput1を決定し、かつ、入力として前記第2変数qPinput2を使用して、第2テーブルマッピングオペレーションに基づいて、第4変数qPoutput2を決定するステップと、
    前記第3変数qPoutput1に対して異なるビデオユニットレベルでの第1複数のQPオフセットを加算することによって、前記第1ビデオ領域の第1コーディングモードに基づいて、前記第1量子化情報を決定し、かつ、前記第4変数qPoutput2に対して異なるビデオユニットレベルでの第2複数のQPオフセットを加算することによって、前記第2ビデオ領域の第2コーディングモードに基づいて、前記第2量子化情報を決定する、ステップであり、
    前記第1複数のQPオフセットは、前記第1コーディングモードがクロマ残留コーディングモードの結合コーディングであるか否かに基づいており、かつ、
    前記第2複数のQPオフセットは、前記第2コーディングモードがクロマ残留コーディングモードの結合コーディングであるか否かに基づいている、
    ステップと、
    に基づいて決定されることを規定する、ステップと、
    を含む、方法。
JP2022516001A 2019-09-14 2020-09-14 クロマデブロックフィルタリングの量子化パラメータ Active JP7321365B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CNPCT/CN2019/105831 2019-09-14
CN2019105831 2019-09-14
PCT/US2020/050644 WO2021051046A1 (en) 2019-09-14 2020-09-14 Quantization parameter for chroma deblocking filtering

Publications (2)

Publication Number Publication Date
JP2022548008A JP2022548008A (ja) 2022-11-16
JP7321365B2 true JP7321365B2 (ja) 2023-08-04

Family

ID=74866030

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2022515999A Active JP7322285B2 (ja) 2019-09-14 2020-09-14 クロマデブロックフィルタリングのための量子化パラメータオフセット
JP2022516001A Active JP7321365B2 (ja) 2019-09-14 2020-09-14 クロマデブロックフィルタリングの量子化パラメータ
JP2022516000A Active JP7321364B2 (ja) 2019-09-14 2020-09-14 ビデオコーディングにおけるクロマ量子化パラメータ
JP2023121508A Pending JP2023143946A (ja) 2019-09-14 2023-07-26 クロマデブロックフィルタリングのための量子化パラメータオフセット

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2022515999A Active JP7322285B2 (ja) 2019-09-14 2020-09-14 クロマデブロックフィルタリングのための量子化パラメータオフセット

Family Applications After (2)

Application Number Title Priority Date Filing Date
JP2022516000A Active JP7321364B2 (ja) 2019-09-14 2020-09-14 ビデオコーディングにおけるクロマ量子化パラメータ
JP2023121508A Pending JP2023143946A (ja) 2019-09-14 2023-07-26 クロマデブロックフィルタリングのための量子化パラメータオフセット

Country Status (8)

Country Link
US (4) US11985329B2 (ja)
EP (3) EP4014497A4 (ja)
JP (4) JP7322285B2 (ja)
KR (3) KR20220058888A (ja)
CN (4) CN114402609A (ja)
BR (1) BR112022004668A2 (ja)
MX (1) MX2022002815A (ja)
WO (3) WO2021051046A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021051046A1 (en) 2019-09-14 2021-03-18 Bytedance Inc. Quantization parameter for chroma deblocking filtering
CN114651442A (zh) 2019-10-09 2022-06-21 字节跳动有限公司 视频编解码中的跨分量适应性回路滤波
KR20220073745A (ko) * 2019-10-14 2022-06-03 바이트댄스 아이엔씨 비디오 처리에서 크로마 잔차 및 필터링의 공동 코딩
US20220408093A1 (en) * 2019-11-05 2022-12-22 Lg Electronics Inc. Video decoding method and device for coding chroma quantization parameter offset-related information
EP4055827A4 (en) 2019-12-09 2023-01-18 ByteDance Inc. USING QUANTIFICATION GROUPS IN VIDEO CODING
WO2021138293A1 (en) 2019-12-31 2021-07-08 Bytedance Inc. Adaptive color transform in video coding

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014008212A1 (en) 2012-07-02 2014-01-09 Microsoft Corporation Use of chroma quantization parameter offsets in deblocking
JP2015512600A (ja) 2012-04-03 2015-04-27 クゥアルコム・インコーポレイテッドQualcomm Incorporated クロマスライスレベルqpオフセットおよびデブロッキング

Family Cites Families (119)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5512953A (en) 1994-08-09 1996-04-30 At&T Corp. Method and apparatus for conversion of compressed bit stream representation of video signal
US7123655B2 (en) 2001-08-09 2006-10-17 Sharp Laboratories Of America, Inc. Method for reduced bit-depth quantization
US7190723B2 (en) 2002-03-27 2007-03-13 Scientific-Atlanta, Inc. Digital stream transcoder with a hybrid-rate controller
US7227901B2 (en) 2002-11-21 2007-06-05 Ub Video Inc. Low-complexity deblocking filter
US20040146108A1 (en) 2003-01-23 2004-07-29 Shih-Chang Hsia MPEG-II video encoder chip design
US7227585B1 (en) 2003-12-30 2007-06-05 Conexant Systems, Inc. Luminance and chrominance separation system
US8953673B2 (en) 2008-02-29 2015-02-10 Microsoft Corporation Scalable video coding and decoding with sample bit depth and chroma high-pass residual layers
US9185426B2 (en) * 2008-08-19 2015-11-10 Broadcom Corporation Method and system for motion-compensated frame-rate up-conversion for both compressed and decompressed video bitstreams
MX353107B (es) 2010-04-09 2017-12-19 Mitsubishi Electric Corp Dispositivo codificador de imagen en movimiento y dispositivo decodificador de imagen en movimiento.
JP2011259362A (ja) * 2010-06-11 2011-12-22 Sony Corp 画像処理装置および方法
KR20120035096A (ko) 2010-10-04 2012-04-13 한국전자통신연구원 쿼드 트리 변환 구조에서 부가 정보의 시그널링 방법 및 장치
US8891617B2 (en) 2011-01-18 2014-11-18 Google Inc. Method and system for processing video data
US10409892B2 (en) 2011-01-26 2019-09-10 Microsoft Technology Licensing, Llc Formatting data by example
KR101566366B1 (ko) * 2011-03-03 2015-11-16 한국전자통신연구원 색차 성분 양자화 매개 변수 결정 방법 및 이러한 방법을 사용하는 장치
GB2488816A (en) 2011-03-09 2012-09-12 Canon Kk Mapping motion vectors from a plurality of reference frames to a single reference frame
US9143805B2 (en) * 2011-07-14 2015-09-22 Panasonic Intellectual Property Corporation Of America Method of image coding chrominance signal and method of image decoding chrominance signal
US8964833B2 (en) 2011-07-19 2015-02-24 Qualcomm Incorporated Deblocking of non-square blocks for video coding
WO2013042884A1 (ko) * 2011-09-19 2013-03-28 엘지전자 주식회사 영상 부호화/복호화 방법 및 그 장치
US9510020B2 (en) 2011-10-20 2016-11-29 Qualcomm Incorporated Intra pulse code modulation (IPCM) and lossless coding mode deblocking for video coding
US9807403B2 (en) 2011-10-21 2017-10-31 Qualcomm Incorporated Adaptive loop filtering for chroma components
US9161046B2 (en) 2011-10-25 2015-10-13 Qualcomm Incorporated Determining quantization parameters for deblocking filtering for video coding
US20130107973A1 (en) 2011-10-28 2013-05-02 Qualcomm Incorporated Loop filtering control over tile boundaries
US9807401B2 (en) 2011-11-01 2017-10-31 Qualcomm Incorporated Transform unit partitioning for chroma components in video coding
WO2013074365A1 (en) 2011-11-18 2013-05-23 Dolby Laboratories Licensing Corporation Subjective based post-filter optimization
US9538200B2 (en) 2012-01-19 2017-01-03 Qualcomm Incorporated Signaling of deblocking filter parameters in video coding
CN108449602A (zh) 2012-01-19 2018-08-24 寰发股份有限公司 编码块旗标的编码及视频比特流的解码方法与装置
US10009612B2 (en) 2012-04-12 2018-06-26 Hfi Innovation Inc. Method and apparatus for block partition of chroma subsampling formats
US20150043637A1 (en) 2012-04-13 2015-02-12 Sony Corporation Image processing device and method
GB2501535A (en) * 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
US9414054B2 (en) 2012-07-02 2016-08-09 Microsoft Technology Licensing, Llc Control and use of chroma quantization parameter values
US10448032B2 (en) 2012-09-04 2019-10-15 Qualcomm Incorporated Signaling of down-sampling location information in scalable video coding
GB2506852B (en) 2012-09-28 2015-09-30 Canon Kk Method and device for determining the value of a quantization parameter
TWI610574B (zh) 2012-09-29 2018-01-01 微軟技術授權有限責任公司 於解塊中色度量化參數偏移之使用
JP2014116733A (ja) * 2012-12-07 2014-06-26 Canon Inc 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
AU2013200051B2 (en) 2013-01-04 2016-02-11 Canon Kabushiki Kaisha Method, apparatus and system for de-blocking video data
EP2941871A2 (en) 2013-01-07 2015-11-11 VID SCALE, Inc. Enhanced deblocking filters for video coding
US9225991B2 (en) 2013-05-30 2015-12-29 Apple Inc. Adaptive color space transform coding
US11323747B2 (en) 2013-06-05 2022-05-03 Qualcomm Incorporated Residual differential pulse code modulation (DPCM) extensions and harmonization with transform skip, rotation, and scans
US20140376611A1 (en) 2013-06-21 2014-12-25 Qualcomm Incorporated Adaptive color transforms for video coding
US9294766B2 (en) 2013-09-09 2016-03-22 Apple Inc. Chroma quantization in video coding
EP3058736B1 (en) 2013-10-14 2019-02-27 Microsoft Technology Licensing, LLC Encoder-side options for intra block copy prediction mode for video and image coding
WO2015054811A1 (en) 2013-10-14 2015-04-23 Microsoft Corporation Features of intra block copy prediction mode for video and image coding and decoding
BR122022001646B1 (pt) 2014-03-04 2023-03-07 Microsoft Technology Licensing, Llc Dispositivo de memória ou armazenamento legível por computador, método e sistema de computador
KR20200014945A (ko) 2014-03-14 2020-02-11 브이아이디 스케일, 인크. Rgb 비디오 코딩 향상을 위한 시스템 및 방법
US9948933B2 (en) 2014-03-14 2018-04-17 Qualcomm Incorporated Block adaptive color-space conversion coding
AU2014202921B2 (en) 2014-05-29 2017-02-02 Canon Kabushiki Kaisha Method, apparatus and system for de-blocking a block of video samples
US10038919B2 (en) 2014-05-29 2018-07-31 Apple Inc. In loop chroma deblocking filter
US10142642B2 (en) 2014-06-04 2018-11-27 Qualcomm Incorporated Block adaptive color-space conversion coding
US9924175B2 (en) 2014-06-11 2018-03-20 Qualcomm Incorporated Determining application of deblocking filtering to palette coded blocks in video coding
US10136141B2 (en) 2014-06-11 2018-11-20 Qualcomm Incorporated Determining quantization parameter (QP) values and delta QP values for palette coded blocks in video coding
US20150373327A1 (en) * 2014-06-20 2015-12-24 Qualcomm Incorporated Block adaptive color-space conversion coding
CN107079157B (zh) 2014-09-12 2020-12-22 Vid拓展公司 用于视频编码的分量间去相关
JP6194427B2 (ja) * 2014-10-06 2017-09-06 テレフオンアクチーボラゲット エルエム エリクソン(パブル) 量子化パラメータのコーディング及び導出
US9883184B2 (en) 2014-10-07 2018-01-30 Qualcomm Incorporated QP derivation and offset for adaptive color transform in video coding
US20160179521A1 (en) * 2014-12-23 2016-06-23 Intel Corporation Method and apparatus for expanding a mask to a vector of mask values
US9854201B2 (en) 2015-01-16 2017-12-26 Microsoft Technology Licensing, Llc Dynamically updating quality to higher chroma sampling rate
US10057574B2 (en) 2015-02-11 2018-08-21 Qualcomm Incorporated Coding tree unit (CTU) level adaptive loop filter (ALF)
CN107534783B (zh) 2015-02-13 2020-09-08 联发科技股份有限公司 图像中区块的调色板索引图编解码方法
US20160286226A1 (en) * 2015-03-24 2016-09-29 Nokia Technologies Oy Apparatus, a method and a computer program for video coding and decoding
US20180115787A1 (en) 2015-04-12 2018-04-26 Lg Electronics Inc. Method for encoding and decoding video signal, and apparatus therefor
WO2016172314A1 (en) 2015-04-21 2016-10-27 Vid Scale, Inc. Artistic intent based video coding
EP3354019A4 (en) * 2015-09-23 2019-05-22 Telefonaktiebolaget LM Ericsson (publ) DETERMINATION OF QUANTIZATION PARAMETER VALUES
US20170105014A1 (en) 2015-10-08 2017-04-13 Qualcomm Incorporated Luma-driven chroma scaling for high dynamic range and wide color gamut contents
WO2017093189A1 (en) 2015-11-30 2017-06-08 Telefonaktiebolaget Lm Ericsson (Publ) Encoding of pictures in a video
US11064195B2 (en) 2016-02-15 2021-07-13 Qualcomm Incorporated Merging filters for multiple classes of blocks for video coding
US10419755B2 (en) * 2016-05-16 2019-09-17 Qualcomm Incorporated Confusion of multiple filters in adaptive loop filtering in video coding
EP3453172B1 (en) 2016-05-28 2023-08-09 HFI Innovation Inc. Methods and apparatuses of video data processing with conditionally quantization parameter information signaling
US11089323B2 (en) 2016-05-28 2021-08-10 Mediatek Inc. Method and apparatus of current picture referencing for video coding
WO2018018486A1 (en) 2016-07-28 2018-02-01 Mediatek Inc. Methods of reference quantization parameter derivation for signaling of quantization parameter in quad-tree plus binary tree structure
US11095922B2 (en) 2016-08-02 2021-08-17 Qualcomm Incorporated Geometry transformation-based adaptive loop filtering
US10200698B2 (en) 2016-08-09 2019-02-05 Intel Corporation Determining chroma quantization parameters for video coding
US10419757B2 (en) 2016-08-31 2019-09-17 Qualcomm Incorporated Cross-component filter
US20180091812A1 (en) 2016-09-23 2018-03-29 Apple Inc. Video compression system providing selection of deblocking filters parameters based on bit-depth of video data
US10506230B2 (en) 2017-01-04 2019-12-10 Qualcomm Incorporated Modified adaptive loop filter temporal prediction for temporal scalability support
US20180199057A1 (en) 2017-01-12 2018-07-12 Mediatek Inc. Method and Apparatus of Candidate Skipping for Predictor Refinement in Video Coding
US10554974B2 (en) 2017-01-13 2020-02-04 Mediatek Inc. Method and apparatus enabling adaptive multiple transform for chroma transport blocks using control flags
US10708591B2 (en) 2017-03-20 2020-07-07 Qualcomm Incorporated Enhanced deblocking filtering design in video coding
US10212456B2 (en) 2017-06-02 2019-02-19 Apple Inc. Deblocking filter for high dynamic range (HDR) video
JP7406378B2 (ja) * 2017-06-21 2023-12-27 ヴィド スケール インコーポレイテッド 360度ビデオ符号化のための適応的量子化
FR3067918B1 (fr) 2017-06-23 2019-07-19 Laboratoires M&L Capsule deformable a usage unique comprenant une quantite predeterminee d'une phase d'un produit cosmetique
EP3649782A4 (en) 2017-07-05 2021-04-14 Telefonaktiebolaget LM Ericsson (PUBL) DECODING A BLOCK OF VIDEO SAMPLE
US10778974B2 (en) 2017-07-05 2020-09-15 Qualcomm Incorporated Adaptive loop filter with enhanced classification methods
US11019339B2 (en) * 2017-07-12 2021-05-25 Futurewei Technologies, Inc. Fractional quantization parameter offset in video compression
GB2575090A (en) 2018-06-28 2020-01-01 Canon Kk Method and apparatus for deblocking filtering a block of pixels
US10616577B2 (en) 2017-10-16 2020-04-07 Intel Corporation Adaptive video deblocking
US10812798B2 (en) * 2017-10-19 2020-10-20 Qualcomm Incorporated Chroma quantization parameter (QP) offset
EP3704858A1 (en) 2017-11-01 2020-09-09 Vid Scale, Inc. Methods for simplifying adaptive loop filter in video coding
US10972729B2 (en) 2018-01-20 2021-04-06 Qualcomm Incorporated Deblocking filter selection and application in video coding
EP3744092A1 (en) 2018-01-26 2020-12-02 InterDigital VC Holdings, Inc. Method and apparatus for video encoding and decoding based on a linear model responsive to neighboring samples
US20190238845A1 (en) 2018-01-26 2019-08-01 Qualcomm Incorporated Adaptive loop filtering on deblocking filter results in video coding
CN116567230A (zh) 2018-03-30 2023-08-08 夏普株式会社 用于将解块滤波器应用于重构视频数据的方法和设备
US10708592B2 (en) 2018-04-02 2020-07-07 Qualcomm Incorporated Deblocking filter for video coding and processing
US20190306502A1 (en) 2018-04-02 2019-10-03 Qualcomm Incorporated System and method for improved adaptive loop filtering
EP3554074A1 (en) * 2018-04-13 2019-10-16 Thomson Licensing Methods and apparatus for depth encoding and decoding
KR101997681B1 (ko) 2018-06-11 2019-07-08 광운대학교 산학협력단 양자화 파라미터 기반의 잔차 블록 부호화/복호화 방법 및 장치
US11051036B2 (en) * 2018-07-14 2021-06-29 Mediatek Inc. Method and apparatus of constrained overlapped block motion compensation in video coding
US20200213570A1 (en) 2019-01-02 2020-07-02 Mediatek Inc. Method for processing projection-based frame that includes at least one projection face and at least one padding region packed in 360-degree virtual reality projection layout
CN113383554B (zh) 2019-01-13 2022-12-16 北京字节跳动网络技术有限公司 LUT和共享Merge列表之间的交互
EP3931746A4 (en) 2019-02-27 2022-05-11 Huawei Technologies Co., Ltd. CHANNEL ILLUSTRATION WITH COLOR SCALING ADJUSTMENT PARAMETERS IN VIDEO ENCODING
CN113545036B (zh) 2019-03-02 2023-11-28 北京字节跳动网络技术有限公司 对环路内滤波的限制
CN113574889B (zh) 2019-03-14 2024-01-12 北京字节跳动网络技术有限公司 环路整形信息的信令和语法
JP7234406B2 (ja) 2019-03-24 2023-03-07 北京字節跳動網絡技術有限公司 ビデオ処理における非線形適応ループフィルタリング
WO2020192726A1 (en) 2019-03-27 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. History-based motion vector prediction
TWI739386B (zh) 2019-04-11 2021-09-11 聯發科技股份有限公司 具有適應性參數集之適應性迴路濾波器
JP7405865B2 (ja) 2019-04-15 2023-12-26 北京字節跳動網絡技術有限公司 非線形適応ループフィルタにおけるパラメータの時間的予測
WO2020211809A1 (en) 2019-04-16 2020-10-22 Beijing Bytedance Network Technology Co., Ltd. On adaptive loop filtering for video coding
CN114026868A (zh) 2019-04-25 2022-02-08 Op方案有限责任公司 帧间预测中全局运动约束的运动矢量
US11381819B2 (en) * 2019-07-05 2022-07-05 Qualcomm Incorporated Chroma delta quantization parameter (QP) in video coding
EP3868101B1 (en) 2019-08-23 2024-04-10 Huawei Technologies Co., Ltd. An encoder, a decoder and corresponding methods for performing chroma deblocking for blocks which use joint chroma coding
CN113632471B (zh) 2019-08-23 2024-02-27 腾讯美国有限责任公司 视频编解码的方法和装置
WO2021040481A1 (ko) 2019-08-29 2021-03-04 엘지전자 주식회사 크로스 컴포넌트 필터링 기반 영상 코딩 장치 및 방법
US20210076032A1 (en) 2019-09-09 2021-03-11 Qualcomm Incorporated Filter shapes for cross-component adaptive loop filter with different chroma formats in video coding
WO2021051046A1 (en) 2019-09-14 2021-03-18 Bytedance Inc. Quantization parameter for chroma deblocking filtering
BR112022005394A2 (pt) 2019-09-24 2022-06-21 Huawei Tech Co Ltd Simplificação de dependência de mensagem sei em codificação de vídeo
CN114651442A (zh) 2019-10-09 2022-06-21 字节跳动有限公司 视频编解码中的跨分量适应性回路滤波
KR20220073745A (ko) 2019-10-14 2022-06-03 바이트댄스 아이엔씨 비디오 처리에서 크로마 잔차 및 필터링의 공동 코딩
CA3162821A1 (en) 2019-12-23 2021-07-01 Anand Meher Kotra Cross-component adaptive loop filtering for video coding
US11375200B2 (en) 2019-12-24 2022-06-28 Tencent America LLC Video coding method and device for controlling color component processing
WO2021138293A1 (en) 2019-12-31 2021-07-08 Bytedance Inc. Adaptive color transform in video coding

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015512600A (ja) 2012-04-03 2015-04-27 クゥアルコム・インコーポレイテッドQualcomm Incorporated クロマスライスレベルqpオフセットおよびデブロッキング
WO2014008212A1 (en) 2012-07-02 2014-01-09 Microsoft Corporation Use of chroma quantization parameter offsets in deblocking

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Anand Meher Kotra, et al.,Non-CE5: Chroma QP derivation fix for deblocking filter (Combination of JVET-P0105 and JVET-P0539),Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11,JVET-P1001-v1,16th Meeting: Geneva, CH,2019年10月,pp.1-7
Anand Meher Kotra, et al.,Non-CE5: Modified Chroma QP derivation for deblocking filter,Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11,JVET-P0105-v2,16th Meeting: Geneva, CH,2019年10月,pp.1-5
Benjamin Bross, Jianle Chen, and Shan Liu,Versatile Video Coding (Draft 6),Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11,JVET-O2001 (version 14),15th Meeting: Gothenburg, SE,2019年07月31日,pp.40-43,50-54,97-104,120-129

Also Published As

Publication number Publication date
US20220210408A1 (en) 2022-06-30
US11985329B2 (en) 2024-05-14
EP4014497A4 (en) 2022-11-30
US20240073426A1 (en) 2024-02-29
EP4014495A1 (en) 2022-06-22
WO2021051044A1 (en) 2021-03-18
US20220210433A1 (en) 2022-06-30
CN114402609A (zh) 2022-04-26
EP4014495A4 (en) 2022-11-02
CN114402601A (zh) 2022-04-26
US20220210448A1 (en) 2022-06-30
US11973959B2 (en) 2024-04-30
JP2022547571A (ja) 2022-11-14
WO2021051046A1 (en) 2021-03-18
JP2022548008A (ja) 2022-11-16
KR20220058534A (ko) 2022-05-09
JP2022548007A (ja) 2022-11-16
EP4014492A1 (en) 2022-06-22
KR20220058889A (ko) 2022-05-10
EP4014492A4 (en) 2023-01-11
JP7321364B2 (ja) 2023-08-04
CN117294846A (zh) 2023-12-26
JP7322285B2 (ja) 2023-08-07
BR112022004668A2 (pt) 2022-05-31
WO2021051047A1 (en) 2021-03-18
CN114402601B (zh) 2024-02-27
CN114402611A (zh) 2022-04-26
KR20220058888A (ko) 2022-05-10
EP4014497A1 (en) 2022-06-22
MX2022002815A (es) 2022-04-06
JP2023143946A (ja) 2023-10-06

Similar Documents

Publication Publication Date Title
JP7443509B2 (ja) ビデオコーディングにおけるクロマ量子化パラメータの使用
JP7321365B2 (ja) クロマデブロックフィルタリングの量子化パラメータ
WO2021138293A1 (en) Adaptive color transform in video coding
JP2023511023A (ja) ビデオコーディングのためのクロスコンポーネント適応ループフィルタリング
CN114651442A (zh) 视频编解码中的跨分量适应性回路滤波
JP2024023426A (ja) ビデオコーディングにおける量子化グループの使用
CN114503597B (zh) 视频编解码中的色度去方块方法
WO2022213966A1 (en) Neighbor Based Partitioning Constraints
WO2022214055A1 (en) Interaction of multiple partitions

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220324

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220324

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230221

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230519

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230627

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230725

R150 Certificate of patent or registration of utility model

Ref document number: 7321365

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150