JP2022543796A - カラーフォーマットに基づいたサイズ制限 - Google Patents

カラーフォーマットに基づいたサイズ制限 Download PDF

Info

Publication number
JP2022543796A
JP2022543796A JP2022506732A JP2022506732A JP2022543796A JP 2022543796 A JP2022543796 A JP 2022543796A JP 2022506732 A JP2022506732 A JP 2022506732A JP 2022506732 A JP2022506732 A JP 2022506732A JP 2022543796 A JP2022543796 A JP 2022543796A
Authority
JP
Japan
Prior art keywords
mode
video
intra
chroma
block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022506732A
Other languages
English (en)
Inventor
シュイ,ジィジォン
デン,ジピン
ザン,リー
リュウ,ホンビン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
ByteDance Inc
Original Assignee
Beijing ByteDance Network Technology Co Ltd
ByteDance Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd, ByteDance Inc filed Critical Beijing ByteDance Network Technology Co Ltd
Publication of JP2022543796A publication Critical patent/JP2022543796A/ja
Priority to JP2023189742A priority Critical patent/JP2024010175A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/1883Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit relating to sub-band structure, e.g. hierarchical level, directional tree, e.g. low-high [LH], high-low [HL], high-high [HH]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Systems (AREA)
  • Processing Of Color Television Signals (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

ビデオ処理の方法が提供され、方法は、1つ以上のルーマブロック及び1つ以上のクロマブロックを有する1つ以上のビデオ領域を有するビデオと、ビデオの符号化表現との間の変換を、ルールに従って実行するステップを含む。ルールは、サイズM×Nを有している1つ以上のクロマブロックの中のクロマブロックが、イントラモード又はイントラブロックコピーモードを用いて符号化表現で表されることを許可されないことを定め、M及びNは、夫々、クロマブロックの幅及び高さを示す整数である。イントラモードは、前に符号化又は再構成されたビデオブロックに基づきクロマブロックを符号化することを含み、イントラブロックコピーモードは、ビデオ領域を含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いてクロマブロックを符号化することを含む。

Description

[関連出願への相互参照]
適用可能な特許法及び/又はパリ条約に従う規則の下で、本願は、2019年8月6日付けで出願された国際特許出願第PCT/CN2019/099447号に対する優先権及びその利点を適宜主張するようなされたものである。法の下での全ての目的のために、上記の出願の全開示は、本願の開示の部分として参照により組み込まれる。
[技術分野]
本文書は、ビデオ及びイメージの符号化及び復号化技術に関係がある。
デジタルビデオは、インターネット及び他のデジタル通信ネットワーク上での最大のバンド幅使用を占めている。ビデオを受信し表示することができるユーザデバイスの接続数が増えるにつれて、デジタルビデオ利用のためのバンド幅需要は増え続けることが予想される。
開示されている技術は、参照ピクチャがビデオ符号化又は復号化で使用されるビデオ又はイメージデコーダ又はエンコーダ実施形態によって使用され得る。
一例となる態様では、ビデオ処理の方法が開示される。方法は、ルールに従って、ビデオのカラーフォーマットに基づき、前記ビデオのクロマビデオ領域を1つ以上のクロマブロックにパーティション化するパーティショニングスキームを決定するステップと、前記パーティショニングスキームに従って、前記ビデオと前記ビデオの符号化表現との間の変換を実行するステップとを含む。
他の例となる態様では、ビデオ処理の他の方法が開示される。方法は、ビデオのカラーフォーマットに基づき、前記ビデオのコーディングツリーノードのサブブロックのための予測モード又は予測タイプを決定するステップと、前記決定に基づき、前記ビデオと前記ビデオの符号化表現との間の変換を実行するステップとを含み、前記コーディングツリーノードは、前記符号化表現でのコーディングのためにサブブロックにパーティション化される。
他の例となる態様では、ビデオ処理の他の方法が開示される。方法は、ルールに従って、1つ以上のルーマブロック及び1つ以上のクロマブロックを有する1つ以上のビデオ領域を有するビデオと、該ビデオの符号化表現との間の変換を実行するステップを含み、前記ルールは、サイズM×Nを有している前記1つ以上のクロマブロックの中のクロマブロックが、イントラモード又はイントラブロックコピーモードを用いて前記符号化表現で表現されることを許可されないことを定め、M及びNは、夫々、前記クロマブロックの幅及び高さを示す整数であり、前記イントラモードは、前に符号化又は再構成されたビデオブロックに基づき前記クロマブロックを符号化することを含み、前記イントラブロックコピーモードは、ビデオ領域を含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて前記クロマブロックを符号化することを含む。
他の例となる態様では、ビデオ処理の他の方法が開示される。方法は、ビデオのビデオ領域と前記ビデオの符号化表現との間の変換のために、ルールに従って、インター-イントラ複合予測(combined inter and intra prediction,CIIP)モードをイントラモード又はインターモードとして使用すると決定するステップと、前記決定に基づき前記変換を実行するステップとを含み、前記CIIPモードは、加重係数を用いてイントラ予測信号とインター予測信号とを結合することを含む。
他の例となる態様では、ビデオ処理の他の方法が開示される。方法は、ビデオのクロマブロックと前記ビデオの符号化表現との間の変換を実行するステップを含み、前記クロマブロックは、サイズルールに従ったイントラコーディングモードを用いて前記符号化表現で表現され、前記サイズルールは、前記クロマブロックの幅がMに等しいか又は前記クロマブロックの高さがNに等しい場合には、前記イントラコーディングモードがイントラコーディングモードタイプの第1セットからであり、そうではない場合には、前記イントラコーディングモードがイントラコーディングモードタイプの第2セットからであることを定め、M及びNは整数である。
他の例となる態様では、ビデオ処理の他の方法が開示される。方法は、ビデオのクロマブロックと前記ビデオの符号化表現との間の変換を実行するステップを含み、前記クロマブロックは、ルールに従った変換タイプを用いて前記符号化表現で表現され、前記ルールは、前記クロマブロックの幅がMに等しいか又は前記クロマブロックの高さがNに等しい場合には、前記変換タイプが変換タイプの第1セットからであり、そうではない場合には、前記変換タイプが変換タイプの第2セットからであることを定め、M及びNは整数である。
他の例となる態様では、ビデオ処理の他の方法が開示される。方法は、ルールに従って、1つ以上のルーマブロック及び1つ以上のクロマブロックを有するビデオ領域を有するビデオと、該ビデオの符号化表現との間の変換を実行するステップを含み、前記ルールは、M及びNの全ての値について、イントラブロックコピー(intra block copy,IBC)モードの使用が、ブロックサイズM×Nを有している前記1つ以上のルーマブロック及び前記1つ以上のクロマブロックに対して利用可能であることを定め、M及びNは整数であり、前記IBCモードを用いて、ビデオブロックは、該ビデオブロックを含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて符号化される。
他の例となる態様では、ビデオ処理の他の方法が開示される。方法は、ビデオのビデオブロックと該ビデオブロックの符号化表現との間の変換を実行するステップを含み、前記符号化表現はフォーマットルールに従い、該フォーマットルールは、前記ビデオブロックのモードタイプに基づいた、前記符号化表現でのインターブロックコピー(IBC)モードの使用を示すシンタックス要素の選択的包含を定め、前記IBCモードは、前記ビデオブロックを含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて前記ビデオブロックを符号化することを含む。
他の例となる態様では、ビデオ処理の他の方法が開示される。方法は、ビデオのビデオブロックと該ビデオブロックの符号化表現との間の変換を実行するステップを含み、前記符号化表現はフォーマットルールに従い、該フォーマットルールは、パレットモードの使用を示すシンタックス要素が前記ビデオブロックのモードタイプにかかわらず前記符号化表現に含まれることを定め、前記パレットモードは、代表サンプル値のパレットを用いて前記ビデオブロックを符号化することを含む。
他の例となる態様では、ビデオ処理の他の方法が開示される。方法は、ビデオのビデオ領域と前記ビデオの符号化表現との間の変換のために、ルールに基づき、インターブロックコピー(IBC)モードの使用が前記ビデオ領域に許可されることを決定するステップと、前記決定に基づき前記変換を実行するステップとを含み、前記IBCモードは、前記ビデオ領域を含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて前記ビデオ領域を符号化することを含む。
他の例となる態様では、ビデオ処理の他の方法が開示される。方法は、ビデオのビデオ領域と前記ビデオの符号化表現との間の変換のために、ルールに基づき、パレットモードの使用が前記ビデオ領域に許可されるかどうかを決定するステップと、前記決定に基づき前記変換を実行するステップとを含み、前記ルールは、前記ビデオ領域のコーディングモードタイプ又は前記ビデオ領域のカラータイプに基づき、前記パレットモードは、代表サンプル値のパレットを用いて前記ビデオ領域を符号化することを含む。
更なる他の例となる態様では、上記の方法は、プロセッサを有するビデオエンコーダ装置によって実装されてもよい。
更なる他の例となる態様では、上記の方法は、プロセッサを有するビデオデコーダ装置によって実装されてもよい。
更なる他の例となる態様では、これらの方法は、プロセッサ実行可能命令の形で具現化され、コンピュータ可読プログラム媒体に記憶されてもよい。
これら及び他の態様は、本文書で更に記載される。
イントラブロックコピー符号化ツールの例を示す。 パレットモードで符号化されたブロックの例を示す。 パレットエントリを通知するためのパレット予測子の使用の例を示す。 水平及び垂直トラバーススキャンの例を示す。 パレットインデックスの符号化の例を示す。 67個のイントラ予測モードの例を示す。 現在ブロックの左隣及び上隣の例を示す。 ALFフィルタ形状(クロマ:5×5ダイヤモンド、ルーマ:7×7ダイヤモンド)の例を示す。 サブサンプリングされたラプラシアン計算の例を示す。 仮想境界での修正ブロック分類の例を示す。 仮想境界でのルーマ成分に対する修正ALFフィルタリングの実例を示す。 EOでのピクセル分類のための4つの1次元3ピクセルパターンの例を示す。 4つのバンドがグループにまとめられ、その開始バンド位置によって表現されることを示す。 CIIP重み導出で使用される上及び左隣接ブロックを示す。 クロマスケーリングアーキテクチャによるルーママッピングを示す。 SCIPの例を示す。 本文書で記載されている技術を実装するために使用されるハードウェアプラットフォームの例のブロック図である。 本文書で記載されている技術を実装するために使用されるハードウェアプラットフォームの例のブロック図である。 ビデオ処理の方法の例のフローチャートである。 空間マージ候補の位置の例を示す。 空間マージ候補の冗長性検査のために考慮される候補ペアの例を示す。 開示されている技術のいくつかの実施に基づいたビデオ処理の方法の例のフローチャートを示す。 開示されている技術のいくつかの実施に基づいたビデオ処理の方法の例のフローチャートを示す。 開示されている技術のいくつかの実施に基づいたビデオ処理の方法の例のフローチャートを示す。 開示されている技術のいくつかの実施に基づいたビデオ処理の方法の例のフローチャートを示す。 開示されている技術のいくつかの実施に基づいたビデオ処理の方法の例のフローチャートを示す。 開示されている技術のいくつかの実施に基づいたビデオ処理の方法の例のフローチャートを示す。
本文書は、圧縮解除又は復号されたデジタルビデオ又はイメージの品質を改善するためにイメージ又はビデオビットストリームのデコーダによって使用され得る様々な技術を提供する。簡潔さのために、「ビデオ」との用語は、ピクチャの連続(従来は、ビデオと呼ばれる)及び個々のイメージの両方を含むようここでは使用されている。更に、ビデオエンコーダも、更なる符号化のために使用される復号されたフレームを再構成するために符号化のプロセス中にそれらの技術を実装してもよい。
セクション見出しは、理解を簡単にするために本文書で使用されており、実施形態及び技術を対応するセクションに限定するものではない。そのようなものとして、1つのセクション中の実施形態は、他のセクション中の実施形態と組み合わされ得る。
1.概要
この文書は、ビデオコーディング技術に関係がある。具体的に、それは、ビデオコーディングで基本色に基づいた表現を用いるパレットコーディングに関係がある。それは、HEVCのような既存のビデオコーディング標準規格、又は最終決定されることになっている標準規格(Versatile Video Coding)に適用されてもよい。それはまた、将来のビデオコーディング標準規格又はビデオコーデックにも適用可能であり得る。
2.最初の議論
ビデオコーディング標準規格は、よく知られているITU-T及びISO/IEC標準規格の開発を通じて主に発展してきた。ITU-TはH.261及びH.263を作り出し、ISO/IECはMPEG-1及びMPEG-4 Visualを作り出し、2つの組織は共同でH.262/MPEG-2 Video及びH264/MPEG-4 Advanced Video Coding(AVC)及びH.265/HEVC標準規格を作り出した。H.262以降、ビデオコーディング標準規格は、時間予測に変換コーディングをプラスしたものが利用されるハイブリッド型ビデオコーディング構造に基づいている。HEVCを超える将来のビデオコーディング技術を探求するために、Joint Video Exploration Team(JVET)が2015年にVCEG及びMPEGによって共同で設立された。それ以降、多くの新しい手法がJVETによって採用され、Joint Exploration Model(JEM)と呼ばれる参照ソフトウェアに置かれてきた。2018年4月に、VCEG(Q6/16)とISO/IEC JTC1 SC29/WG11(MPEG)との間で、Joint Video Expert Team(JVET)が、HEVCと比較して50%のビットレート低減を目標とするVVC標準規格を検討するために作られた。
VVC草案の最新バージョン、つまり、Versatile Video Coding(Draft 4)は、http://phenix.it-sudparis.eu/jvet/doc_end_user/current_document.php?id=5755で見つけることができる。
VTMと名付けられたVVCの最新の参照ソフトウェアは、https://vcgit.hhi.fraunhofer.de/jvet/VVCSoftware_VTM/tags/VTM-5.0で見つけることができる。
2.1 イントラブロックコピー
イントラブロックコピー(intra block copy,IBC)、別名、現在ピクチャ参照(current picture referencing)は、HEVC Screen Content Coding拡張(HEVC-SCC)及び現在のVVCテストモデル(VTM-4.0)で採用されている。IBCは、動き補償の概念をインターフレームコーディングからイントラフレームコーディングに拡張する。図1で示されるように、現在ブロックは、IBCが適用される場合に、同じピクチャ内の参照ブロックによって予測される。参照ブロック内のサンプルは、現在ブロックが符号化又は復号化される前に既に再構成されている。IBCは、カメラによって捕捉されたシーケンスのほとんどにとってそれほど効率的ではないが、それは、スクリーンコンテンツについてはコーディングの大幅な向上を示す。その理由は、スクリーンコンテンツピクチャにはアイコン及びテキスト文字などの反復パターンが多数存在するからである。IBCは、それらの反復パターンの間の冗長性を有効に除くことができる。HEVC-SCCでは、インターコーディングされたコーディングユニット(coding unit,CU)は、それが現在ピクチャをその参照ピクチャとして選択する場合に、IBCを適用することができる。MVは、この場合にブロックベクトル(block vector,BV)と名称を変更され、BVは常に整数ピクセル精度を有している。メインプロファイルHEVCと互換性を持たせるために、現在ピクチャは、復号化ピクチャバッファ(Decoded Picture Buffer,DPB)で「長期」参照ピクチャとしてマークされる。同様に、マルチビュー/3Dビデオコーディング標準規格では、インタービュー参照ピクチャも「長期」参照ピクチャとしてマークされることが留意されるべきである。
その参照ブロックを見つけるためのBVに続いて、予測が、参照ブロックをコピーすることによって生成され得る。元の信号から参照ピクセルを減じることによって、残差が得られる。次いで、変換及び量子化が他のコーディングモードで見られるように適用され得る。
図1は、イントラブロックコピーの実例である。
しかし、参照ブロックがピクチャの外にあるか、又は現在ブロックと重なり合うか、又は再構成されたエリアの外にあるか、又は何らかの制約によって制限された有効エリアの外にある場合に、一部又は全てのピクセル値は定義されない。基本的に、そのような問題を扱うための2つの解決法がある。1つは、例えば、ビットストリームコンフォーマンス(bitstream conformance)で、そのような状況を認めないことである。もう1つは、それらの未定義のピクセル値に対してパディングを適用することである。以下のサブセッションは、これらの解決法について詳細に記載する。
2.2 HEVC-SCCにおけるIBC
HEVCのスクリーンコンテンツコーディング拡張(Screen Content Coding extensions)では、ブロックが現在ピクチャを参照として使用する場合に、以下のスペックテキストで示されるように、参照ブロック全体が利用可能な再構成されたエリア内にあることを保証すべきである:
Figure 2022543796000002
よって、参照ブロックが現在ブロックと重なり合うか、又は参照ブロックがピクチャの外にある場合は、起こらない。参照又は予測ブロックをパディングする必要はない。
2.3 VVCテストモデルにおけるIBC
現在のVVCテストモデル、つまり、VTM-4.0設計では、参照ブロック全体が現在のコーディングツリーユニット(coding tree unit,CTU)と一致している必要があり、現在ブロックとは重なり合わない。よって、参照又は予測ブロックをパディングする必要はない。IBCフラグは、現在CUの予測モードとしてコーディングされる。よって、各CUについて全部で3つの予測モード、すなわち、MODE_INTRA、MODE_INTER、及びMODE_IBCがある。
2.3.1 IBCマージモード
IBCマージモードでは、IBCマージ候補リスト(merge candidates list)内のエントリを指し示すインデックスが、ビットストリームからパースされる。IBCマージリストの構成は、次の一連のステップに従って手短に述べられ得る:
・ステップ1:空間候補の導出
・ステップ2:HMVP候補の挿入
・ステップ3:ペアワイズ平均候補の挿入
空間マージ候補の導出では、最大4つのマージ候補が、図19に表されている位置にある候補から選択される。導出の順序は、A、B、B、A、及びBである。位置Bは、位置A、B、B、AのいずれかのPU(それが他のスライス又はタイルに属するために)利用可能でないか、あるいは、IBCモードでコーディングされていない場合にのみ考慮される。位置Aでの候補が加えられた後、残りの候補の挿入は冗長性検査を受ける。これは、同じ動き情報を有する候補がリストから外されることを確かにし、それにより、コーディング効率は改善される。計算複雑性を低減するために、上記の冗長性検査において、可能性がある全ての候補ペアが考慮されるわけではない。代わりに、図20において矢印で結ばれているペアが考慮され、候補は、冗長性検査のために使用された対応する候補が同じ動き情報を有していない場合にのみリストに加えられる。
空間候補の挿入の後、IBCマージリストサイズが依然として最大IBCマージリストサイズよりも小さい場合には、HMVPテーブルからのIBC候補が挿入されてもよい。HMVP候補を挿入する場合に、冗長性検査が実行される。
最後に、ペアワイズ平均候補が、IBCマージリストに挿入される。
マージ候補によって識別された参照ブロックがピクチャの外にあるか、又は現在ブロックと重なり合うか、又は再構成されたエリアの外にあるか、又は何らかの制約によって制限された有効エリアの外にある場合に、マージ候補は、無効マージ候補(invalid merge candidate)と呼ばれる。
無効マージ候補はIBCマージリストに挿入されてもよいことが留意される。
2.3.2 IBC AMVPモード
IBC AMVPモードでは、IBC AMVPリスト内のエントリを指し示すインデックスが、ビットストリームからパースされる。IBC AMVPリストの構成は、次の一連のステップに従って手短に述べられ得る:
・ステップ1:空間候補の導出
・利用可能な候補が見つけられるまでA、Aをチェックする
・利用可能な候補が見つけられるまでB、B、Bをチェックする
・ステップ2:HMVP候補の挿入
・ステップ3:ゼロ候補の挿入
空間候補の挿入の後、IBC AMVPリストサイズが依然として最大IBC AMVPリストサイズよりも小さい場合には、HMVPテーブルからのIBC候補が挿入されてもよい。
最後に、ゼロ候補が、IBC AMVPリストに挿入される。
2.4 パレットモード
パレットモードの背後にある基本的な考えは、CU内のサンプルが代表的な色値の小さいセットによって表現されることである。このセットはパレットと呼ばれる。また、エスケープ記号に続いて(場合により量子化された)成分値を通知することによって、パレットの外にあるサンプルを示すことも可能である。この種のサンプルはエスケープサンプルと呼ばれる。パレットモードは図2で表されている。
図2は、パレットモードで符号化されたブロックの例を示す。
HEVC-SCCにおけるパレットモードでは、パレット及びインデックスマップをコーディングするために、予測的な方法が使用される。
2.5.1 パレットエントリのコーディング
パレットエントリのコーディングのために、パレット予測子が維持される。パレットの最大サイズは、パレット予測子とともに、SPSで通知される。HEVC-SCCでは、palette_predictor_initializer_present_flagがPPSで導入される。このフラグが1であるとき、パレット予測子を初期化するためのエントリがビットストリームで通知される。パレット予測子は、各CTU行、各スライス、及び各タイルの開始時に初期化される。palette_predictor_initializer_present_flagの値に応じて、パレット予測子は、0にリセットされるか、又はPPCで通知されたパレット予測子初期化子エントリを用いて初期化される。HEVC-SCCでは、サイズ0のパレット予測子初期化子が、PPSレベルでのパレット予測子初期化の明示的な無効化を可能にするよう有効にされた。
パレット予測子における各エントリについては、それが現在のパレットの部分であるかどうかを示すために、再利用フラグが通知される。これは図3に表されている。再利用フラグは、ゼロのランレングスコーディングを用いて送信される。この後に、新しいパレットエントリの数が、次数0の指数ゴロム符号を用いて通知される。最後に、新しいパレットエントリの成分値が通知される。
図3は、パレットエントリを通知するためのパレット予測子の使用の例を示す。
2.5.2 パレットインデックスのコーディング
パレットインデックスは、図4に示される水平及び垂直トラバーススキャンを用いてコーディングされる。スキャン順序は、palette_transpose_flagを用いてビットストリームで明示的に通知される。サブセクションの残りの部分については、スキャンは水平であると仮定される。
図4は、水平及び垂直トラバーススキャンの例を示す。
パレットインデックスは、2つの主なパレットサンプルモード:「INDEX」及び「COPY_ABOVE」を用いてコーディングされる。上述されたように、エスケープ記号も、「INDEX」モードとして通知され、最大パレットサイズに等しいインデックスを割り当てられる。モードは、一番上の行の場合又は前のモードが「COPY_ABOVE」であった場合を除いて、フラグを用いて通知される。「COPY_ABOVE」モードでは、上の行にあるサンプルのパレットインデックスがコピーされる。「INDEX」モードでは、パレットインデックスは明示的に通知される。「INDEX」及び「COPY_ABOVE」の両方のモードについて、ラン値(run value)が通知され、これは、やはり同じモードを用いてコーディングされる後続サンプルの数を指定する。エスケープ記号が「INDEX」又は「COPY_ABOVE」モードでのランの部分である場合に、エスケープ成分値がエスケープ記号ごとに通知される。パレットインデックスのコーディングは、図5に表されている。
このシンタックス順序は次のように達成される。最初に、CUのインデックス値の数が通知される。その後に、トランケーテッドバイナリコーディング(truncated binary coding)を用いて、CU全体の実際のインデックス値の通知が続く。これは、インデックスに関連したバイパスビンをグループにまとめる。次いで、パレットサンプルモード(必要な場合)及びランが、インターリーブ方式で通知される。最後に、CU全体のエスケープサンプル値に対応する成分エスケープ値がグループにまとめられて、バイパスモードでコーディングされる。
更なるシンタックス要素として、last_run_type_flagが、インデックス値を通知した後に通知される。このシンタックス要素は、インデックスの数と組み合わせて、ブロック内の最後のランに対応するラン値を通知する必要性を排する。
HEVC-SCCでは、パレットモードはまた、4:2:2、4:2:0、及びモノクロクロマフォーマットについても有効にされる。パレットエントリ及びパレットインデックスの通知は、全てのクロマフォーマットについてほぼ同じである。非モノクロフォーマットの場合に、各パレットエントリは3つの成分から成る。モノクロフォーマットについては、各パレットエントリは単一の成分から成る。サブサンプリングされたクロマ方向について、クロマサンプルは、2で除算可能であるルーマサンプルインデックスと関連付けられる。CUのパレットインデックスを再構成した後、サンプルがそれと関連付けられた単一の成分しか有さない場合には、パレットエントリの最初の成分のみが使用される。通知の唯一の相違は、エスケープ成分値に関する。エスケープサンプルごとに、通知されるエスケープ成分値の数は、そのサンプルに関連した成分の数に応じて異なり得る。
VVCでは、二分木コーディング構造がイントラスライスのコーディングで使用されるので、ルーマ成分及び2つのクロマ成分は、異なったパレット及びパレットインデックスを有し得る。更に、2つのクロマ成分は、同じパレット及びパレットインデックスを共有する。
図5は、パレットインデックスの符号化の例を示す。
2.6 VVCにおけるイントラモードコーディング
自然ビデオで提示される任意のエッジ方向を捕捉するために、VTM5での指向性イントラモードの数は、HEVCで使用される33から、65に拡張される。HEVCにはない新しい指向性モードは、図6で赤色破線矢印で表されており、プレーナーモード及びDCモードは同じままである。これらのより密なイントラ予測モードは、全てのブロックサイズについて、ルーマ及びクロマの両方のイントラ予測のために適用される。
VTM5では、いくつかの従来の角度イントラ予測モードが、非正方ブロックについて広角イントラ予測モードで適応的に置き換えられる。
HEVCでは、あらゆるイントラコーディングされたブロックが正方形状を有しており、その各辺の長さは2の累乗である。よって、DCモードを用いてイントラ予測子を生成するために、分割動作は不要である。VTM5では、ブロックは、一般的な場合にブロックごとに分割動作の使用を必要とする長方形状を有する可能性がある。DC予測のための分割動作を回避するために、長い方の辺のみが、非正方ブロックの平均を計算するために使用される。
図6は、67個のイントラ予測モードの例を示す。
最確モード(most probable mode,MPM)リスト生成の複雑性を低く保つために、6つのMPMによるイントラモードコーディング方法が、2つの利用可能な隣接イントラモードを考えることによって使用される。次の3つの態様が、MPMリストを構成するために考えられる:
・デフォルトイントラモード
・隣接イントラモード
・導出イントラモード
統合6-MPMリストが、MRL及びISPコーディングツールが適用されるか否かにかかわらず、イントラブロックに対して使用される。MPMリストは、左及び上隣接ブロックのイントラモードに基づいて構成される。左ブロックのモードはLeftと表され、上ブロックのモードはAboveと表されるとして、統合MPMリストは、次のように構成される(左ブロック及び上ブロックは図7に示される)。
図7は、現在ブロックの左隣及び上隣の例を示す。
・隣接ブロックが利用可能でない場合に、そのイントラモードはデフォルトでプレーナー(Planar)にセットされる。
・両方のモードLeft及びAboveが非角度モードである場合に:
・MPMリスト→{プレーナー,DC,V,H,V-4,V+4}
・モードLeft及びAboveの一方が角度モードであり、他方が非角度モードである場合に:
・モードMaxをLeft及びAboveのうちの大きい方のモードとしてセットする
・MPMリスト→{プレーナー,Max,DC,Max-1,Max+1,Max-2}
・Left及びAboveが両方とも角度モードであり、それらが異なる場合に:
・モードMaxをLeft及びAboveのうちの大きい方のモードとしてセットする
・モードLeft及びAboveの差が2以上62以下の範囲にある場合に:
・MPMリスト→{プレーナー,Left,Above,DC,Max-1,Max+1}
・そうでない場合に:
・MPMリスト→{プレーナー,Left,Above,DC,Max-2,Max+2}
・Left及びAboveが両方とも角度モードであり、それらが同じである場合に:
・MPMリスト→{プレーナー,Left,Left-1,Left+1,DC,Left-2}
その上、mpmインデックスコードワードの最初のビンは、CABACコンテキストコーディングされる。現在のイントラブロックがMRL対応であるか、ISP対応であるか、又は通常のイントラブロックであるかに対応して、全部で3つのコンテキストが使用される。
6-MPMリストの生成プロセス中、一意のモードのみがMPMリストに含まれ得るように、重複したモードを除くためにプルーニングが使用される。61個の非MPMモードのエントロピコーディングについては、トランケーテッドバイナリコーディング(TBC)が使用される。
クロマイントラモードコーディングについては、全部で8つのイントラモードが、クロマイントラモードコーディングのために許されている。それらのモードには、5つの従来のイントラモードと、3つのクロスコンポーネント線形モデルモード(cross-component linear model modes)(CCLM、LM_A、及びLM_L)とが含まれる。クロマモードの通知及び導出のプロセスは、表2-4に示される。クロマモードコーディングは、対応するルーマブロックのイントラ予測モードに直接に依存する。ルーマ成分及びクロマ成分のための別個のブロックパーティショニング構造がIスライスでは可能にされるので、1つのクロマブロックは複数のルーマブロックに対応し得る。そのため、クロマDMモードについては、現在のクロマブロックの中心位置をカバーする対応するルーマブロックのイントラ予測モードが直接に承継される。
Figure 2022543796000003
2.7 QR-BDPCM(Quantized residual Block Differential Pulse-Code Modulation)
JVET-M0413では、QR-BDPCM(Quantized residual Block Differential Pulse-Code Modulation)が、スクリーンコンテンツを効率的にコーディングするために提案されている。
QR-BDPCMで使用される予測方向は、垂直及び水平予測モードであることができる。イントラ予測は、イントラ予測と同様に予測方向(水平及び垂直方向)でのサンプルコピーによって、ブロック全体に対して行われる。残差は量子化され、量子化された残差とその予測子(水平又は垂直)量子化値との間の差(delta)は符号化される。これは、以下によって説明することができる。サイズM(行)×N(列)のブロックについて、ri,j,0≦i≦M-1,0≦j≦N-1を、上又は左ブロック境界サンプルからのフィルタリングされていないサンプルを用いてイントラ予測を水平方向に(予測されたブロックにわたって左隣接ピクセル値をラインごとにコピーする)又は垂直方向に(予測されたブロック内の各ラインに上隣接ラインをコピーする)実行した後の予測残差であるとする。Q(ri,j),0≦i≦M-1,0≦j≦N-1が残差ri,jの量子化されたバージョンを表すとして、このとき、残差は、元のブロック値と予測されたブロック値との間の差である。次いで、ブロックDPCMが、量子化された残差サンプルに適用され、要素
(外1)
Figure 2022543796000004
を有する変更されたM×Nアレイ
(外2)
Figure 2022543796000005
が得られる。垂直BDPCMが通知される場合に:
Figure 2022543796000006
である。
水平予測については、同様のルールが適用され、残差量子化サンプルは、
Figure 2022543796000007
によって求められる。
残差量子化サンプル
(外3)
Figure 2022543796000008
は、デコーダへ送られる。
デコーダ側では、上記の計算は、Q(ri,j),0≦i≦M-1,0≦j≦N-1を取り出すために逆にされる、垂直予測の場合については、
Figure 2022543796000009
であり、水平予測の場合については
Figure 2022543796000010
である。
逆量子化された残差Q-1(Q(ri,j))が、再構成されたサンプル値を生成するようイントラブロック予測値に加えられる。
このスキームの主な利点は、係数がパースされるときに予測子を追加するだけで、係数解析中にオン・ザ・フライで逆DPCMを実行できること、又は解析後に実行できることである。
2.8 適応ループフィルタ
VTM5では、ブロックベースのフィルタ適応による適応ループフィルタ(Adaptive Loop Filter,ALF)が適用される。ルーマ成分については、25個のフィルタのうちの1つが、局所勾配の方向及び活性に基づき、4×4ブロックごとに選択される。
2.8.1.1フィルタ形状
VTM5では、2つのダイヤモンドフィルタ形状(図8に図示あり)が使用される。7×7ダイヤモンド形状はルーマ成分に対して適用され、5×5ダイヤモンド形状はクロマ成分に対して適用される。
図8は、ALFフィルタ形状(クロマ:5×5ダイヤモンド、ルーマ:7×7ダイヤモンド)の例を示す。
2.8.1.2ブロック分類
ルーマ成分については、各4×4ブロックは、25個のクラスの中から1つに分類され得る。分類インデックスCは、次のように、その方向性D及び量子化された活性値A(ハット付き)に基づき導出される:
Figure 2022543796000011
D及びハット付きAを計算するために、水平方向、垂直方向、及び2つの対角方向の勾配が最初に、1-Dラプラシアンを用いて計算される:
Figure 2022543796000012
インデックスi及びjは、4×4ブロック内の左上サンプルの座標を指し、R(i,j)は、座標(i,j)での再構成されたサンプルを示す。
ブロック分類の複雑性を低減するために、サブサンプリングされた1-Dラプラシアン計算が適用される。図9に示されるように、同じサブサンプリングされた位置が、全ての方向の勾配計算のために使用される。
図9は、サブサンプリングされたラプラシアン計算の例を示す。(a)垂直勾配のためのサブサンプリングされた位置、(b)水平勾配のためのサブサンプリングされた位置、(c)対角勾配のためのサブサンプリングされた位置、(d)対角勾配のためのサブサンプリングされた位置。
次いで、水平方向及び垂直方向の勾配のDの最大値及び最小値は:
Figure 2022543796000013
としてセットされる。
2つの対角方向の勾配の最大値及び最小値は:
Figure 2022543796000014
としてセットされる。
方向性Dの値を導出するために、これらの値は、互いに、そして2つの閾値t及びtと比較される:
Figure 2022543796000015
活性値Aは、
Figure 2022543796000016
として計算される。
Aは、0以上4以下の範囲に更に量子化され、量子化された値は、ハット付きAとして表される。
ピクチャ内のクロマ成分については、分類方法は適用されない。すなわち、ひと組のALF係数がクロマ成分ごとに適用される。
2.8.1.3 フィルタ係数及びクリッピング値の幾何変換
各4×4ルーマブロックをフィルタリングする前に、回転又は対角及び垂直フリップなどの幾何変換が、そのブロックについて計算された勾配値に応じて、フィルタ係数f(k,l)及び対応するフィルタクリッピング値c(k、l)に適用される。これは、フィルタサポート領域内のサンプルにこれらの変換を適用することと等価である。アイデアは、ALFが適用される様々なブロックを、それらの方向性を調整することによって、より類似させることである。
対角、垂直フリップ、及び回転を含む3つの幾何変換が導入される:
Figure 2022543796000017
ここで、Kは、フィルタのサイズであり、0≦k,l≦K-1は、位置(0,0)が左上隅にあり、位置(K-1,K-1)が右下隅にあるような、係数座標である。変換は、そのブロックについて計算された勾配値に応じて、フィルタ係数f(k,l)及びクリッピング値c(k、l)に適用される。変換と4つの方向の4つの勾配との間の関係は、次の表で手短に述べられている。
Figure 2022543796000018
2.8.1.4 フィルタパラメータ通知
VTM5では、ALFフィルタパラメータは、適応パラメータセット(Adaptation Parameter Set,APS)で通知される。1つのAPSでは、最大25組のルーマフィルタ係数及びクリッピング値が通知され得る。ビットオーバヘッドを低減するために、異なる分類のフィルタ係数はマージされ得る。スライスヘッダでは、現在スライスに使用されるAPSのインデックスが通知される。
APSから復号されるクリッピング値インデックスは、クリッピング値のルーマテーブル及びクリッピング値のクロマテーブルを用いてクリッピング値を決定することを可能にする。これらのクリッピング値は、内在的なビットデプスに依存する。より厳密は、クリッピング値のルーマテーブル及びクリッピング値のクロマテーブルは、次の式によって取得される:
Figure 2022543796000019
なお、Bは内在的なビットデプスに等しく、Nは4に等しく、VTM5.0での許容クリッピング値の数である。
フィルタリングプロセスは、CTBレベルで制御され得る。フラグは、ALFがルーマCTBに適用されるかどうかを示すために常に通知される。ルーマCTBは、16個の固定フィルタセットと、APSからのフィルタセットとから、フィルタセットを選択することができる。フィルタセットインデックスは、ルーマCTBについて、どのフィルタセットが適用されるかを示すために通知される。16個の固定フィルタセットは予め定義され、エンコーダ及びデコーダの両方でハードコーディングされる。
フィルタ係数は、128に等しいノルムで量子化される。乗算複雑性を制限するために、非中心位置の係数値が-2以上2-1以下の範囲にあるべきであるように、ビットストリームコンフォーマンスが適用される。中心位置係数は、ビットストリームで通知されず、128に等しいと見なされる。
2.8.1.5 フィルタリングプロセス
デコーダ側で、ALFがCTBに対して有効にされる場合に、CU内の各サンプルR(i,j)はフィルタリングされ、以下で示されるサンプル値R’(i,j)が得られる:
Figure 2022543796000020
ここで、f(k、l)は、復号されたフィルタ係数であり、K(x,y)は、クリッピング関数であり、c(k、l)は、復号されたクリッピングパラメータを表す。変数k及びlは、-L/2からL/2の間で変化し、Lは、フィルタ長さを表す。クリッピング関数K(x,y)=min(y,max(-y,x))であり、関数Clip3(-y,y,x)に対応する。
2.8.1.6 ラインバッファ低減のための仮想境界フィルタリングプロセス
VTM5では、ラインバッファ要件を低減するために、変更されたブロック分類及びフィルタリングが、水平CTU境界に近いサンプルのために用いられる。このために、仮想境界は、図10に示されるように、“N”個のサンプルを含む水平CTU境界をシフトすることによってラインとして定義される。Nは、ルーマ成分については4に等しく、クロマ成分については2に等しい。
図10は、仮想境界での修正されたブロック分類の例を示す。
図11に示されるように、修正されたブロック分類がルーマ成分に適用され、それに応じて、活性値Aは、1Dラプラシアン勾配計算で使用されるサンプル数の減少を考慮に入れることによってスケーリングされる。
フィルタリングプロセスについては、仮想境界での対称パディング動作が、ルーマ及びクロマの両方の成分のために使用される。図11に示されるように、フィルタリングされているサンプルが仮想境界の下に位置している場合に、仮想境界の上に位置している隣接サンプルがパディングされる。一方、他方の側にある対応するサンプルも対称的にパディングされる。
図11は、仮想境界でのルーマ成分に対する修正ALFフィルタリングの実例を示す。
2.9 サンプル適応オフセット(SAO)
サンプル適応オフセット(sample adaptive offset,SAO)は、エンコーダによってCTBごとに指定されたオフセットを使用することによって、デブロッキングフィルタ後の再構成された信号に適用される。HMエンコーダは最初に、SAOプロセスが現在スライスに適用されるべきか否かを決定する。SAOがスライスに適用される場合に、各CTBは、表2-6に示されるように、5つのSAOタイプのうちの1つとして分類される。SAOの概念は、ピクセルをカテゴリに分類することであり、各カテゴリのピクセルにオフセットを加えることによって歪みを低減する。SAO動作は、SAOタイプ1~4におけるピクセル分類のためにエッジ特性を使用するエッジオフセット(EO)と、SAOタイプ5におけるピクセル分類のためにピクセル強度を使用するバンドオフセット(BO)とを含む。各適用可能なCTBは、sao_merge_left_flag、sao_merge_up_flag、SAOタイプ、及び4つのオフセットを含むSAOパラメータを有している。sao_merge_left_flagが1に等しい場合に、現在CTBは、左側にあるCTBのSAOタイプ及びオフセットを再利用する。sao_merge_up_flagが1に等しい場合に、現在CTBは、上のCTBのSAOタイプ及びオフセットを再利用する。
Figure 2022543796000021
2.9.1 各SAOタイプの動作
エッジオフセットは、図12に示されるように、エッジ方向情報を考慮して、現在ピクセルpの分類のために4つの1次元3ピクセルパターンを使用する。左から右へ、0度、90度、135度、及び45度がある。
図12は、EOでのピクセル分類のための4つの1次元3ピクセルパターンの例を示す。
各CTBは、表2-7に従って、5つのカテゴリのうちの1つに分類される。
Figure 2022543796000022
バンドオフセット(BO)は、1つのCTB領域内の全てのピクセルを、ピクセル値の5つの最上位ビットをバンドインデックスとして使用することによって、32個の一様なバンドに分類する。すなわち、ピクセル強度範囲は、ゼロから最大強度値(例えば、8ビットピクセルについては255)まで32個の等しいセグメントに分ける。4つの隣接バンドはグループにまとめられ、各グループは、図13に示されるようにその最も左側の位置によって示される。エンコーダは、各バンドのオフセットを補償することによって歪みを最大に低減したグループを取得するよう全ての位置を探索する。
図13は、4つのバンドがグループにまとめられ、その開始バンド位置によって表現される例を示す。
2.10 インター-イントラ複合予測(CIIP)
VTM5では、CUがマージモードで符号化される場合に、CUが少なくとも64個のルーマサンプルを含むならば(つまり、CU幅×CU高さは64以上である)、かつ、CU幅及びCU高さの両方が128個のルーマサンプルに満たないならば、インター/イントラ複合予測(CIIP)モードが現在CUに適用されるかどうかを示すために、追加のフラグが通知される。その名が示すとおり、CIIP予測は、インター予測信号をイントラ予測信号と組み合わせる。CIIPモードでのインター予測信号Pinterは、通常のマージモードに適用されるの同じインター予測プロセスを用いて導出され、イントラ予測信号Pintraは、プレーナーモードによる通常のイントラ予測プロセスに従って導出される。次いで、イントラ予測信号及びインター予測信号は、加重平均を用いて結合される。このとき、重み値は、次のように、上隣接ブロック及び左隣接ブロック(図14に図示あり)のコーディングモードに応じて計算される:
・上隣接ブロックが利用可能であり、イントラコーディングされている場合に、isIntraTopを1にセットし、そうでない場合には、isIntraTopを0にセットする。
・左隣接ブロックが利用可能であり、イントラコーディングされている場合に、isIntraLeftを1にセットし、そうでない場合には、isIntraLeftを0にセットする。
・(isIntraLeft+isIntraTop)が2に等しい場合には、wtは3にセットされる。
・そうではなく、(isIntraLeft+isIntraTop)が1に等しい場合には、wtは2にセットされる。
・上記以外の場合に、wtを1にセットする。
CIIP予測は、次のように形成される:
Figure 2022543796000023
図14は、CIIP重み導出で使用される上及び左隣接ブロックを示す。
2.11 クロマスケーリング付きルーママッピング(LMCS)
VTM5では、LMCS(luma mapping with chroma scaling)と呼ばれるコーディングルールが、ループフィルタ前に新しい処理ブロックとして加えられる。LMCSは、2つの主なコンポーネント:1)適応区分線形モデルに基づいたルーマ成分のインループマッピング、2)クロマ成分のためのルーマ依存クロマ残差スケーリングの適用を有する。図15は、デコーダ始点からのLMCSアーキテクチャを示す。図15のブロックには、逆量子化、逆変換、ルーマイントラ予測、及びルーマ残差とともにルーマ予測の追加が含まれ、処理はマッピング領域で適用される。図15中の影無しブロックは、処理が元の(すなわち、非マッピング)領域で適用される場所を示し、これらには、デブロッキング、ALF、及びSAOなどのループフィルタ、動き補償付き予測、クロマイントラ予測、クロマ残差とともにクロマ予測の追加、並びに参照ピクチャとしても復号されたピクチャの格納が含まれる。図15は、ルーマ信号の順方向及び逆方向マッピングと、ルーマ依存クロマスケーリングプロセスとを含む新しいLMCS機能ブロックを示す。VVCにおける他のほとんどのツールと同様に、LMCSは、SPSフラグを用いてシーケンスレベルで有効/無効にされ得る。
図15は、クロマスケーリングアーキテクチャによるルーママッピングの例を示す。
2.12 二分木パーティショニング
現在のVVC設計では、Iスライスについて、各CTUは、暗黙的な四分木分割を用いて、64×64個のルーマサンプルを有するコーディングユニットに分けられ得る。これらのコーディングユニットは、ルーマ及びクロマについての2つの別個のcoding_treeシンタック構造の根である。
イントラピクチャにおける二分木は、ルーマコーディングツリーとは異なるパーティショニングをクロマコーディングツリーで適用することを可能にするので、二分木は、より長いコーディングパイプラインを導入し、クロマツリーでのQTBT MinQTSizeC値範囲並びにMinBtSizeY及びMinTTSizeYは、2×2、4×2、及び2×4などの小さいクロマブロックを可能にする。それは、実際のデコーダ設計で困難性をもたらす。更に、CCLM、プレーナー、及び角度モードなどのいくつかの予測モードは乗算を必要とする。上記の問題を多少なりとも解決するために、小さいクロマブロックサイズ(2×2/2×4/4×2)は、パーティショニング制限として二分木において制限される。
2.13 JVET-O0050における最小クロマイントラ予測ユニット(SCIPU)
小さいクロマサイズは、ハードウェア実装にとってフレンドリではない。二分木の場合に、小さすぎるサイズのクロマブロックは許されない。しかし、一分木(singletree)の場合に、VVC草案5は、依然として、2×2、2×4、4×2クロマブロックを許す。クロマブロックのサイズを制限するために、単一コーディングツリーでは、クロマブロックサイズがTHクロマサンプルよりも大きいか又はそれと等しく、かつ、4THルーマサンプルよりも小さい少なくとも1つの子ルーマブロックを有しているコーディングツリーノードとして、SCIPUがJVET-O0050で定義されている。なお、THは、この寄稿では16にセットされる。各SCIPUで、全てのCBはインターであるか、あるいは、全てのCBは非インターである、つまり、イントラ又はIBCのどちらかであることが必要とされる。非インターSCIPUの場合には、更に、非インターSCIPUのクロマがこれ以上分割されるべきではないことが必要とされ、また、SCIPUのルーマは、更に分割されることを許される。このようにして、最小クロマイントラCBサイズは、16個のクロマサンプルであり、2×2、2×4、及び4×2クロマCBは削除される。更に,クロマスケーリングは、非インターSCIPUの場合に適用されない。
2つのSCIPUの例が図16に示される。図16(a)では、8×4クロマサンプルの1つのクロマCBと、3つのルーマCB(4×8、8×8、4×8ルーマCB)とが1つのSCIPUを形成する。これは、8×4クロマサンプルから分割された三分木(TT)が、16個のクロマサンプルよりも小さいクロマCBをもたらすからである。図16(b)では、4×4クロマサンプル(8×4クロマサンプルの左側)の1つのクロマCBと、3つのルーマCB(8×4、4×4、4×4ルーマCB)とが1つのSCIPUを形成し、4×4サンプル(8×4クロマサンプルの右側)の1つのクロマCBと、2つのルーマCB(8×4、8×4ルーマCB)とが1つのSCIPUを形成する。これは、4×4クロマサンプルから分割された三分木(TT)が、16個のクロマサンプルよりも小さいクロマCBをもたらすからである。
図16は、SCIPの例を示す。
現在スライスがIスライスであるか、又は現在のSCIPUが、更に1回分割された後にその中に4x4ルーマパーティションを有する場合に、SCIPUのタイプは非インターであると推測される(VVCでは、インター4×4が許可されないため)。それ以外の場合には、SCIPUのタイプ(インター又は非インター)は、SCIPU内のCUをパースする前に1つのシグナルフラグによって示される。
2.14 VVC草案6における小さいクロマブロックの制約
VVC草案6(JVET-O2001-vE.docx)では、小さいクロマブロックに対する制約が、次のように実装される(関連する部分は、太字イタリック体でマークされる)。
Figure 2022543796000024
Figure 2022543796000025
Figure 2022543796000026
Figure 2022543796000027
Figure 2022543796000028
Figure 2022543796000029
Figure 2022543796000030
Figure 2022543796000031
Figure 2022543796000032
Figure 2022543796000033
Figure 2022543796000034
3.課題
(1)現在、IBCはMODE_TYPE_INTRAと見なされているので、小さいクロマブロックは許可されず、不必要なコーディング効率損失が生じている。
(2)現在、パレットはMODE_TYPE_INTRAと見なされているので、小さいクロマブロックは許可されず、不必要なコーディング効率損失が生じている。
(3)現在、小さいクロマブロックの制約は、色サブサンプリングフォーマットを考慮していない。
(4)現在、小さいブロックに対する同じパーティション及び予測モード制約が全てのクロマフォーマットに適用されている。しかし、4:2:0及び4:2:2クロマフォーマットでは、小さいブロックに対する異なった制約メカニズムを設計することが望ましいことがある。
(5)現在、パレットモードフラグ通知は、modeTypeに依存しているが、これは、パレットが小さいブロックの制約を適用しない可能性があるということで望ましくない。
(6)現在、IBCモードフラグは、P/Bスライスについて、cu_skip_fragが1に等しいが、MODE_TYPEがMODE_TYPE_INTRAに等しい場合に、0であると推測されているが、これは、シンタックスパーシングでは不正である。
(7)現在、非4×4ルーマIBCモードは、SCIPUルーマブロックについて許可されていないが、これは望ましくないことがあり、コーディング効率損失を引き起こす可能性がある。
(8)2×Hクロマブロックが依然として許可されているが、これはハードウェア実装にとってフレンドリではない。
(9)CIIPは、MODE_INTERと見なされる一方で、イントラ予測を使用するが、これは、いくつかの場合に制約を破る。
4.技術的解決法及び実施形態の例
以下に挙げられているものは、例と見なされるべきである。これらの技術は、狭い意味で解釈されるべきではない。更に、これらの技術は、如何様にも組み合わされ得る。
本文書中、「M×Nコーディングツリーノード」は、M×Nブロックを示し、M及びNは、夫々、ルーマサンプルの幅及び高さであり、これは、例えば、QT/BT/TTなどによって、更にパーティション化されてもよい。例えば、ブロックはQTノード、又はBTノード、又はTTのーどであってよい。コーディングツリーノードは、コーディングユニット(例えば、一分木については3つの色成分、二分木クロマコーディングについては2つのクロマ色成分、及び二分木ルーマコーディングについてはただ1つのルーマ成分を有する)、又はルーマコーディングブロック、又はクロマコーディングブロックであってもよい。「小さいコーディングツリーノードユニット」は、ルーマサンプルでブロックサイズM×Nが32/64/128に等しいコーディングツリーノードを示し得る。
特に述べられていない場合に、コーディングブロックの幅W及び高さは、ルーマサンプルで測定される。例えば、M×Nコーディングブロックは、M×Nルーマブロック、及び/又は2つの(M/subWidthC)×(N/SubHeightC)クロマブロックを意味し、SubWidthC及びSubHightCは、次のようにクロマフォーマットによって導出される。
Figure 2022543796000035
1.小さいブロックにパーティション化すべきかどうか及び/又はどのようにすべきかは、カラーフォーマットに依存してもよい。
a.一例で、4:4:4カラーフォーマットについては、クロマブロックのサイズに対する制約は、ルーマブロックに対するそのような制約に従い得る。
b.一例で、4:2:2カラーフォーマットについては、クロマブロックのサイズに対する制約は、4:2:0カラーフォーマットに着いてのそのような制約に従い得る。
c.一例で、4:0:0及び/又は4:4:4クロマフォーマットについては、小さいブロックのパーティションに対する制約及び/又は予測モードは適用されなくてもよい。
d.一例で、小さいブロックのパーティションに対する制約及び/又は予測モードは、異なるクロマフォーマットについて異なるように適用されてもよい。
i.一例で、水平BT分割を使用したM×N(例えば、8×8)コーディングツリーノードについては、4:2:2クロマフォーマットで、水平BT分割は、クロマブロック及びルーマブロックの両方について許され得るが、4:2:0クロマフォーマットでは、水平BT分割は、ルーマブロックについては許されるが、クロマブロックについては許されなくてもよい。
ii.一例で、垂直BT分割を使用したM×N(例えば、16×4)コーディングツリーノードについては、4:2:2クロマフォーマットで、垂直BT分割は、クロマブロック及びルーマブロックの両方について許され得るが、4:2:0クロマフォーマットでは、垂直BTは、ルーマブロックについては許されるが、クロマブロックについては許されなくてもよい。
iii.一例で、水平TT分割を使用したM×N(例えば、8×16)コーディングツリーノードについては、4:2:2クロマフォーマットで、水平TT分割は、クロマブロック及びルーマブロックの両方について許され得るが、4:2:0クロマフォーマットでは、水平TT分割は、ルーマブロックについては許されるが、クロマブロックについては許されなくてもよい。
iv.一例で、垂直TT分割を使用したM×N(例えば、32×4)コーディングツリーノードについては、4:2:2クロマフォーマットで、垂直TT分割は、クロマブロック及びルーマブロックの両方について許され得るが、4:2:0クロマフォーマットでは、垂直TTは、ルーマブロックについては許されるが、クロマブロックについては許されなくてもよい。
v.一例で、4:0:0及び/又は4:4:4カラーフォーマットについては、小さいブロックの制約は適用されなくてもよい。
e.一例で、SCIPUを有効にすべきかどうかは、カラーフォーマットに依存する。
i.一例で、SCIPUは、4:2:0及び4:2:2カラーフォーマットに対して有効にされる。
ii.一例で、SCIPUは、4:0:0及び/又は4:4:4カラーフォーマットに対しては無効にされる。
2.コーディングツリーノードの(サブ)モードのための予測モード(及び/又はmodeType)をどのように決定すべきかは、カラーフォーマットに依存してもよい。
a.一例で、次の条件の1つが真である場合に、このコーディングツリーノードによってパーティション化された(サブ)ブロックのmodeTypeは、4:2:2クロマフォーマットについてはMODE_TYPE_ALLに等しくなり、一方、4:2:0クロマフォーマットについては、modeTypeは、MODE_TYPE_INTRA又はMODE_TYPE_INTERのどちらかに等しくなる。
i.水平BT分割を使用したM×N(例えば、8×8)コーディングツリーノード
ii.垂直BT分割を使用したM×N(例えば、16×4)コーディングツリーノード
iii.水平TT分割を使用したM×N(例えば、8×16)コーディングツリーノード
iv.垂直TT分割を使用したM×N(例えば、32×4)コーディングツリーノード
例えば、次の条件:i)水平BTを使用したルーマ8×8ブロック、ii)垂直BTを使用したルーマ16×4ブロック、iii)水平TTを使用したルーマ8×16ブロック、iv)垂直TTを使用したルーマ32×4ブロック、のうちの1つが真である場合に、modeTypeは、4:2:2についてはMODE_TYPE_ALLとしてセットされてもよく、一方、modeTypeは、4:2:0についてはMODE_TYPE_INTRA又はMODE_TYPE_INTERのどちらかでなければならない。
よって、コーディングツリーノードにおいて3つの色成分を有するブロックについては、上記の条件の1つが真である場合に、4:2:0のブロックはMODE_TYPE_ALL(全てのコーディングモードが選択され得る)として分類されない。それは、MODE_TYPE_INTRAブロックはパレット、イントラ又はイントラブロックコピーを選択することができる)又はMODE_TYPE_INTER(インターモードしか選択され得ない)のどちらかである。
3.ブロック幅がM(例えば、M=2)個のクロマサンプルに等しいクロマイントラ(及び/又はIBC)ブロックは許されなくてもよい。
a.一例で、2×N(例えば、N<=64)のクロマイントラブロックは、二分木で許可されなくてもよい。
i.一例で、treeTypeがDUAL_TREE_CHROMAに等しく、ブロック幅が4クロマサンプルに等しい場合に、垂直BT分割は許されなくてもよい。
ii.一例で、treeTypeがDUAL_TREE_CHROMAに等しく、ブロック幅が8クロマサンプルに等しい場合に、垂直TT分割は許されなくてもよい。
b.一例で、2×N(例えば、N<=64)のクロマイントラ(及び/又はIBC)ブロックは、一分木で許可されなくてもよい。
i.一例で、垂直BT分割を使用したM×N(例えば、M=8及びN<=64)コーディングツリーノードについては、次のプロセスの1つが適用され得る。
1.垂直BT分割は、4×N又は4×(N/2)クロマブロックについては許されないが、8×Nルーマブロックについては許され得る。
2.4×N又は4×(N/2)クロマブロックは、垂直BT分割でなくてもよく、それはMODE_INTRA又はMODE_IBCによってコーディングされ得る。
3.垂直BT分割は、8×Nルーマブロック及び4×N又は4×(N/2)クロマブロックの両方について許され得るが、ルーマブロック及びクロマブロックは両方とも、MODE_INTRAによってコーディングされない(例えば、MODE_INTER又はMODE_IBCによってコーディングされ得る)。
ii.一例で、垂直TT分割を使用したM×N(例えば、M=16及びN<=64)コーディングツリーノードについては、次のプロセスの1つが適用され得る。
1.垂直BT分割は、8×N又は8×(N/2)クロマブロックについては許されないが、16×Nルーマブロックについては許され得る。
2.8×N又は8×(N/2)クロマブロックは、垂直TT分割でなくてもよく、それはMODE_INTRA又はMODE_IBCによってコーディングされ得る。
3.垂直TT分割は、16×Nルーマブロック及び8×N又は8×(N/2)クロマブロックの両方について許され得るが、ルーマブロック及びクロマブロックは両方とも、MODE_INTRAによってコーディングされない(例えば、MODE_INTER又はMODE_IBCによってコーディングされ得る)。
4.IBCモードは、ルーマ及び/又はクロマブロックについて、それが小さいブロックサイズであるかどうかにかかわらず許可されてもよい。
a.一例で、IBCモードは、たとえmodeTypeがMODE_TYPE_INTRAに等しいとしても、8×4/8×8/16×4及び4×N(例えば、N<=64)ルーマブロックを含むルーマブロックについて許され得る。
b.一例で、IBCモードは、たとえmodeTypeがMODE_TYPE_INTRAに等しいとしても、クロマブロックについて許され得る。
5.IBC予測モードフラグの通知は、予測モードタイプ(例えば、MODE_TYPE_INTRA)に依存してもよい。
a.一例で、非SKIPブロック(例えば、スキップモードによってコーディングされないコーディングモード)のIBC予測モードフラグは、treeTypeがDUAL_TREE_CHROMAに等しくなく、かつ、modeTypeがMODE_TYPE_INTRAに等しい場合に、ビットストリームで明示的に通知され得る。
6.IBC予測モードフラグは、CU SKIPフラグ及びモードタイプ(例えば、modeType)に応じて推測されてもよい。
a.一例で、現在ブロックがSKIPモードでコーディングされ(例えば、cu_skip_flagが1に等しく)、かつ、modeTypeがMODE_TYPE_INTRAに等しい場合に、IBC予測モードフラグ(例えば、pred_mode_ibc_flag)は、1に等しいと推測され得る。
7.パレットモードフラグの明示的な通知は、modeTypeに依存しなくてもよい。
a.一例で、パレットモードフラグ(例えば、pred_mode_plt_flag)の通知は、スライスタイプ、ブロックサイズ、予測モードなどに依存してもよい。ただし、modeTypeが何であっても。
b.一例で、パレットモードフラグ(例えば。pred_mode_plt_flag)は、modeTypeがMODE_TYPE_INTRA又はMODE_TYPE_INTRAに等しい場合に、0であると推測される。
8.IBCモードは、modeTypeがMODE_TYPE_INTERに等しい場合に使用することを許可されてもよい。
a.一例で、クロマIBCは、modeTypeがMODE_TYPE_INTRAに等しい場合に許可されなくてもよい。
b.一例で、IBCモードは、modeTypeがMODE_TYPE_INTRA又はMODE_TYPE_INTERに等しい場合に使用することを許可され得る。
c.一例で、IBCモードは、modeTypeが何であろうとも使用することを許可され得る。
d.一例で、1つのSCIPU内で、IBC及びインターモードは両方とも許可され得る。
e.一例で、IBCクロマブロックのサイズは常に、対応するルーマブロックのサイズに対応し得る。
f.一例で、modeTypeがMODE_TYPE_INTERに等しく、かつ、コーディングユニットサイズがルーマで4×4である場合に、pred_mode_ibc_flagの通知はスキップされてもよく、pred_mode_ibc_flagは、1に等しいと推測され得る。
9.パレットモードは、modeTypeがMODE_TYPE_INTERである場合に使用することを許可されてもよい。
a.一例で、クロマパレットは、modeTypeがMODE_TYPE_INTRAである場合に許可されなくてもよい。
b.一例で、パレットモードは、modeTypeがMODE_TYPE_INTRA又はMODE_TYPE_INTERに等しい場合に使用することを許可され得る。
c.一例で、パレットモードは、modeTypeが何であろうとも使用することを許可され得る。
d.一例で、1つのSCIPU内で、パレット及びインターモードは両方とも許可され得る。
e.一例で、1つのSCIPU内で、パレット、IBC及びインターモードは全て許可され得る。
f.一例で、パレットクロマブロックのサイズは常に、対応するルーマブロックのサイズに対応する。
g.一例で、modeTypeがMODE_TYPE_INTERに等しく、かつ、コーディングユニットサイズがルーマで4×4である場合に、pred_mode_plt_flagの通知はスキップされてもよく、pred_mode_plt_flagは、1に等しいと推測され得る。
h.一例で、modeTypeがMODE_TYPE_INTRAに等しく、かつ、コーディングユニットサイズがルーマで4×4である場合に、1つのメッセージは、現在の予測モードがIBC又はパレットであるかどうかを示すために送信されてもよい。
10.幅がM(例えば、M=2)に等しくかつ高さがN(例えば、N=2)に等しい小さいクロマブロックについては、許可されているイントラ予測モードは、大きいクロマブロックについて許可されているものとは異なるように制限されてもよい。
a.一例で、利用可能なクロマイントラ予測モードの中のイントラ予測モードのサブセットのみが使用され得る。
b.一例で、INTRA_DCモードのみが使用され得る。
c.一例で、INTRA_PLANARモードのみが使用され得る。
d.一例で、INTRA_ANGULAR18モードのみが使用され得る。
e.一例で、INTRA_ANGULAR50モードのみが使用され得る。
f.一例で、CCLMモードは許可されなくてもよい。
11.幅がM(例えば、M=2)に等しくかつ高さがN(例えば、N=2)に等しい小さいクロマブロックについては、変換タイプは、大きいクロマブロックについて許可されているものとは異なるように制限されてもよい。
a.一例で、変換スキップのみが使用され得る。
b.一例で、1次元変換のみが使用され得る。
c.一例で、複数のタイプの変換をサポートするコーディングツールは許可されない。
i.代替的に、複数のタイプの変換をサポートするコーディングツールの通知は省略される。
12.CIIPは、MODE_TYPE_INTRAと見なされてもよい。
a.一例で、CIIPモードは、二分木パーティショニングが使用される場合に許可され得る。
i.一例で、CIIPモードは、CUタイプがDUAL_TREE_CHROMAである場合に許可され得る。
b.代替的に、CIIPは、MODE_TYPE_INTERと見なされてもよい。
i.一例で、クロマブロック幅がM(例えば、M=2)に等しい場合に、CIIPモードは許可されなくてもよい。
ii.一例で、クロマブロック幅がM(例えば、M=2)に等しい場合に、CIIPでのクロマのためのイントラ予測モードのサブセットは、単純なイントラ予測モードに制限され得る。
1.一例で、INTRA_DCは、クロマブロック幅がM(例えば、M=2)に等しい場合に、クロマイントラ予測のために使用されてもよい。
2.一例で、INTRA_ANGULAR18は、クロマブロック幅がM(例えば、M=2)に等しい場合に、クロマイントラ予測のために使用されてもよい。
3.一例で、INTRA_ANGULAR50は、クロマブロック幅がM(例えば、M=2)に等しい場合に、クロマイントラ予測のために使用されてもよい。
iii.一例で、CIIPでのクロマのためのイントラ予測モードは、単純なイントラ予測モードに制限され得る。
1.一例で、INTRA_DCは、クロマイントラ予測のために使用され得る。
2.一例で、INTRA_ANGULAR18モードは、クロマイントラ予測のために使用され得る。
3.一例で、INTRA_ANGULAR50モードは、クロマイントラ予測のために使用され得る。
13.上記のビュレットについては、変数M及び/又はNは、予め定義されるか、又は通知されてもよい。
a.一例で、M及び/又はNは、カラーフォーマット(例えば、4:2:0、4:2:2、4:4:4)に更に依存してもよい。
5.実施形態、
新たに加えられた部分は、太字イタリック体で強調表示されており、VVC作業草案から削除された部分は、二重括弧でマークされている(例えば、[[a]]は、文字“a”の削除を表す)。変更は、最新のVVC作業草案(JVET=O2001-v11)に基づいている。
5.1 例となる実施形態#1
以下の実施形態は、小さいブロックのパーティションに対する制約及び予測モードが4:2:0及び4:4:4クロマフォーマットにのみ適用される(4:0:0及び4;4;4クロマフォーマットには適用されない)ことに関する。
Figure 2022543796000036
5.2 例となる実施形態#2
以下の実施形態は、パレットモードフラグの通知がmodeTypeに依存しないことに関する。
Figure 2022543796000037
5.3 例となる実施形態#3
以下の実施形態は、IBC予測モードフラグがCU SKIPフラグ及びmodeTypeに応じて推測されることに関する。
Figure 2022543796000038
5.4 例となる実施形態#4
以下の実施形態は、IBC予測モードフラグの通知がMODE_TYPE_INTRAに依存し、及び/又はIBCモードがルーマブロックについて、それが小さいブロックサイズであるかどうかにかかわらず許可されることに関する。
Figure 2022543796000039
5.5 例となる実施形態#5
以下の実施形態は、4:2:0及び4:2:2カラーフォーマットについて異なるイントラブロック制約を適用することに関する。
Figure 2022543796000040
5.6 例となる実施形態#6
以下の実施形態は、一分木で2×Nクロマイントラブロックを許可しないことに関する。
Figure 2022543796000041
5.7 例となる実施形態#7
以下の実施形態は、二分木で2×Nクロマイントラブロックを許可しないことに関する。
Figure 2022543796000042
5.8 例となる実施形態#8
以下の実施形態は、SCIPUクロマブロックに対してMODE_IBCを有効にすることに関する。
Figure 2022543796000043
図17Aは、ビデオ処理装置1700のブロック図である。装置1700は、ここで記載されている方法の1つ以上を実装するために使用され得る。装置1700は、スマートフォン、タブレット、コンピュータ、モノのインターネット(IoT)レシーバ、などで具現化されてもよい。装置1700は、1つ以上のプロセッサ1702,1つ以上のメモリ1704、及びビデオ処理ハードウェア1706を含み得る。プロセッサ1702は、本明細書で記載される1つ以上の方法を実装するよう構成され得る。メモリ(複数のメモリ)1704は、本明細書で記載される方法及び技術を実装するために使用されるデータ及びコードを記憶するために使用され得る。ビデオ処理ハードウェア1706は、ハードウェア回路で、本明細書で記載されるいくつかの技術を実装するために使用され得る。いくつかの実施形態において、ビデオ処理ハードウェア1706は、プロセッサ1702(例えば、グラフィクスコプロセッサ)内に少なくとも部分的に又は完全に含まれてもよい。
図17Bは、開示されている技術が実装され得るビデオ処理システムのブロック図の他の例である。図17Bは、ここで開示されている様々な技術が実装され得る、例となるビデオ処理システム1710を示すブロック図である。様々な実施は、システム1710のコンポーネントの一部又は全部を含んでもよい。システム1710は、ビデオコンテンツを受ける入力部1712を含み得る。ビデオコンテンツは、生の又は圧縮されていないフォーマット、例えば、8又は10ビットのマルチコンポーネントピクセル値で受け取られてもよく、あるいは、圧縮された又はエンコードされたフォーマットであってもよい。入力部1712は、ネットワークインターフェース、ペリフェラルバスインターバス、又はストレージインターフェースに相当してもよい。ネットワークインターフェースの例には、Ethernet(登録商標)、受動光ネットワーク(PON)などのような有線インターフェース、及びWi-Fi又はセルラーネットワークなどの無線インターフェースが含まれる。
システム1710は、本明細書で記載されている様々なコーディング又は符号化方法を実装し得るコーディングコンポーネント1714を含んでもよい。コーディングコンポーネント1714は、ビデオのコーディングされた表現を生成するよう、入力部1712からコーディングコンポーネント1714の出力部へのビデオの平均ビットレートを低減し得る。コーディング技術は、従って、ビデオ圧縮又はビデオトランスコーディング技術と時々呼ばれる。コーディングコンポーネント1714の出力は、コンポーネント1716によって表されるように、保存されても、あるいは、接続された通信を介して伝送されてもよい。入力部1712で受け取られたビデオの保存又は通信されたビットストリーム(又はコーディングされた)表現は、ピクセル値又は表示インターフェース1720へ送られる表示可能なビデオを生成するコンポーネント1718によって使用されてもよい。ユーザが見ることができるビデオをビットストリーム表現から生成するプロセスは、ビデオ圧縮解除と時々呼ばれる。更に、特定のビデオ処理動作が「コーディング」動作又はツールと呼ばれる一方で、そのようなコーディングツール又は動作はエンコーダで使用され、コーディングの結果を入れ替える対応する復号化ツール又は動作は、デコーダによって実行されることになることが理解されるだろう。
ペリフェラルバスインターフェース又は表示インターフェースの例には、ユニバーサルシリアルバス(USB)又は高精細マルチメディアインターフェース(HDMI(登録商標))又はDisplayport(登録商標)などが含まれ得る。ストレージインターフェースの例には、SATA(Serial Advanced Technology Attachment)、PCI、IDEインターフェース、などがある。本明細書で説明されている技術は、携帯電話機、ラップトップ、スマートフォン、又はデジタルデータ処理及び/又はビデオ表示を実行する能力がある他のデバイスなどの様々な電子デバイスで具現化されてもよい。
図18は、ビデオを処理する方法1800のフローチャートである。方法1800は、ビデオのビデオ領域とそのビデオ領域の符号化表現との間の変換のために、ビデオ領域のカラーフォーマット及びクロマブロックサイズの間の関係を定義するシンタックスルールに従って符号化表現をパースするステップ(1802)と、シンタックスルールに従ってパーシングを実行することによって変換を実行するステップ(1804)とを含む。
図21Aは、ビデオを処理する方法2110のフローチャートである。方法2110は、ステップ2112で、ルールに従って、ビデオのカラーフォーマットに基づき、ビデオのクロマビデオ領域を1つ以上のクロマブロックにパーティション化するパーティショニングスキームを決定することを含む。方法2110は更に、ステップ2114で、パーティショニングスキームに従って、ビデオとビデオの符号化表現との間の変換を実行することを含む。
図21Bは、ビデオを処理する方法2120のフローチャートである。方法2120は、ステップ2122で、ビデオのカラーフォーマットに基づき、ビデオのコーディングツリーノードのサブブロックのための予測モード又は予測タイプを決定することを含む。方法2120は、決定に基づき、ビデオとビデオの符号化表現との間の変換を実行することを更に含む。いくつかの実施で、コーディングツリーノードは、符号化表現でのコーディングのためにサブブロックにパーティション化される。
図22Aは、ビデオを処理する方法2210のフローチャートである。方法2210は、ステップ2212で、ビデオとそのビデオの符号化表現との間の変換を実行することを含む。いくつかの実施で、変換は、ルールに従って、1つ以上のルーマブロック及び1つ以上のクロマブロックを有する1つ以上のビデオ領域を有するビデオと、そのビデオの符号化表現との間で実行され、ルールは、サイズM×Nを有している1つ以上のクロマブロックの中のクロマブロックが、イントラモード又はイントラブロックコピーモードを用いて符号化表現で表現されることを許可されないことを定め、M及びNは、夫々、クロマブロックの幅及び高さを示す整数であり、イントラモードは、前に符号化又は再構成されたビデオブロックに基づきクロマブロックを符号化することを含み、イントラブロックコピーモードは、ビデオ領域を含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いてクロマブロックを符号化することを含む。
いくつかの実施で、変換は、ビデオのクロマブロックとビデオの符号化表現との間で実行され、クロマブロックは、サイズルールに従ってイントラコーディングモードを用いて符号化表現で表され、サイズルールは、クロマブロックの幅がMに等しいか又はクロマブロックの高さがNに等しい場合には、イントラコーディングモードがイントラコーディングモードタイプの第1セットからであり、そうではない場合には、イントラコーディングモードがイントラコーディングモードタイプの第2セットからであることを定め、M及びNは整数である。
いくつかの実施で、変換は、ビデオのクロマブロックとビデオの符号化表現との間で実行され、クロマブロックは、ルールに従って変換タイプを用いて符号化表現で表され、ルールは、クロマブロックの幅がMに等しいか又はクロマブロックの高さがNに等しい場合には、変換タイプが変換タイプの第1セットからであり、そうではない場合には、変換タイプが変換タイプの第2セットからであることを定め、M及びNは整数である。
いくつかの実施で、変換は、ルールに従って、1つ以上のルーマブロック及び1つ以上のクロマブロックを有するビデオ領域を有するビデオと、ビデオの符号化表現との間で実行され、ルールは、M及びNの全ての値について、イントラブロックコピー(IBC)モードの使用が、ブロックサイズM×Nを有している1つ以上のルーマブロック及び1つ以上のクロマブロックに対して利用可能であることを定め、M及びNは整数であり、IBCモードを用いて、ビデオブロックは、そのビデオブロックを含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて符号化される。
いくつかの実施で、変換は、ビデオのビデオブロックとそのビデオブロックの符号化表現との間で実行され、符号化表現はフォーマットルールに従い、フォーマットルールは、ビデオブロックのモードタイプに基づいた、符号化表現でのインターブロックコピー(IBC)モードの使用を示すシンタックス要素の選択的包含を定め、IBCモードは、ビデオブロックを含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いてビデオブロックを符号化することを含む。
いくつかの実施で、変換は、ビデオのビデオブロックとそのビデオブロックの符号化表現との間で実行され、符号化表現はフォーマットルールに従い、フォーマットルールは、パレットモードの使用を示すシンタックス要素がビデオブロックのモードタイプにかかわらず符号化表現に含まれることを定め、パレットモードは、代表サンプル値のパレットを用いてビデオブロックを符号化することを含む。
図22Bは、ビデオを処理する方法2220のフローチャートである。方法2220は、ステップ2222で、ビデオのビデオ領域とビデオの符号化表現との間の変換のために、ルールに従って、インター-イントラ複合予測(CIIP)モードをイントラモード又はインターモードとして使用すると決定することを含む。方法2310は、ステップ2314で、決定に基づき変換を実行することを更に含む。CIIPモードは、加重係数を用いてイントラ予測信号とインター予測信号とを結合することを含む。
図23Aは、ビデオを処理する方法2310のフローチャートである。方法2310は、ステップ2312で、ビデオのビデオ領域とビデオの符号化表現との間の変換のために、ルールに基づき、インターブロックコピー(IBC)モードの使用がビデオ領域に許可されることを決定することを含む。方法2310は、ステップ2314で、決定に基づき変換を実行することを更に含む。IBCモードは、ビデオ領域を含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いてビデオ領域を符号化することを含む。
図23Bは、ビデオを処理する方法2320のフローチャートである。方法2320は、ステップ2322で、ビデオのビデオ領域とビデオの符号化表現との間の変換のために、ルールに基づき、パレットモードの使用がビデオ領域に許可されるかどうかを決定することを含む。方法2320は、ステップ2324で、決定に基づき変換を実行することを更に含む。いくつかの実施で、ルールは、ビデオ領域のコーディングモードタイプ又はビデオ領域のカラータイプに基づき、パレットモードは、代表サンプル値のパレットを用いてビデオ領域を符号化することを含む。
開示されている技術のいくつかの実施形態は、ビデオ処理ツール又はモードを有効にするとの決定又は判定を行うことを含む。例において、ビデオ処理ツール又はモードが有効にされる場合に、エンコーダは、ビデオのブロックの処理でツール又はモードを使用又は実装するが、結果として得られるビットストリームを、ツール又はモードの利用に基づいて必ずしも変更し得ない。つまり、ビデオのブロックからビデオのビットストリーム表現への変換は、ビデオ処理ツール又はモードが決定又は判定に基づいて有効にされる場合にそれを使用する。他の例においては、ビデオ処理ツール又はモードが有効にされる場合に、デコーダは、ビットストリームがビデオ処理ツール又はモードに基づいて変更されていると知った上でビットストリームを処理する。つまり、ビデオのビットストリーム表現からビデオのブロックへの変換は、決定又は判定に基づいて有効にされたビデオ処理ツール又はモードを用いて実行される。
開示されている技術のいくつかの実施形態は、ビデオ処理ツール又はモードを無効にするとの決定又は判定を行うことを含む。例において、ビデオ処理ツール又はモードが無効にされる場合に、エンコーダは、ビデオのブロックからビデオのビットストリーム表現への変換でツール又はモードを使用しない。他の例においては、ビデオ処理ツール又はモードが無効にされる場合に、デコーダは、決定又は判定に基づいて有効にされたビデオ処理ツール又はモードを用いてビットストリームが変更されていないと知った上でビットストリームを処理する。
本明細書中、「ビデオ処理」という用語は、ビデオ符号化、ビデオ復号化、ビデオ圧縮又はビデオ圧縮解除を指し得る。例えば、ビデオ圧縮アルゴリズムは、ビデオのピクセル表現から、対応するビットストリーム表現への変換中に、又はその逆も同様に、適用されてもよい。現在のビデオブロックのビットストリーム表現は、例えば、シンタックスによって定義されるような、ビットストリーム内で同一位置にあるか又は異なった場所に広がっているかのどちらかであるビットに対応してもよい。例えば、マクロブロックは、変換及びコーディングされた誤差残余値に関して、更には、ビットストリーム内のヘッダ及び他のフィールドにおけるビットを用いて、符号化されてもよい。
以下の箇条書きは、いくつかの実施形態及び技術について記載している。箇条書きの第1の組は、前のセクションで開示された技術のある特徴及び態様について記載している。
1.ビデオ処理の方法であって、
ビデオのビデオ領域と該ビデオ領域の符号化表現との間の変換のために、前記ビデオ領域のカラーフォーマット及びクロマブロックサイズの間の関係を定義するシンタックスルールに従って、前記符号化表現をパースするステップと、
前記シンタックスルールに従ってパーシングを実行することによって前記変換を実行するステップと
を有する方法。
2.箇条1に記載の方法であって、
前記カラーフォーマットは4:4:4であり、
前記シンタックスルールは、クロマブロックがルーマブロックと同じサイズ制約に従うことを定める、
方法。
3.箇条1に記載の方法であって、
前記カラーフォーマットは4:2:2であり、
前記シンタックスルールは、クロマブロックが4:2:0カラーフォーマットについてと同じサイズ制約に従うことを定める、
方法。
4.箇条1乃至3のうちいずれかに記載の方法であって、
前記シンタックスルールは、予測モード及び小ブロックパーティションがクロマフォーマットに依存して使用されることを定める、
方法。
5.箇条1に記載の方法であって、
前記シンタックスルールは、最小許容サイズが前記ビデオ領域の前記カラーフォーマットに基づき前記ビデオ領域の前記変換のために有効にされることを定める、
方法。
以下の箇条書きは、前のセクションの項目2で記載されている更なる技術とともに実装され得る。
6.ビデオ処理の方法であって、
ビデオの特性及び前記ビデオのクロマフォーマットに基づき、前記ビデオのコーディングツリーノードのコーディングモードを決定するステップと、
前記決定されたコーディングモードを用いて、前記ビデオの符号化表現と前記コーディングツリーノードのビデオブロックとの間の変換を実行するステップと
を有する方法。
7.箇条6に記載の方法であって、
前記特性が:
i.前記コーディングツリーノードが水平二分木分割を用いたM×Nコーディングツリーノードであること、
ii.前記コーディングツリーノードが垂直二分木分割を用いたM×Nコーディングツリーノードであること、
iii.前記コーディングツリーノードが水平三分木分割を用いたM×Nコーディングツリーノードであること、又は
iv.前記コーディングツリーノードが垂直三分木分割を用いたM×Nコーディングツリーノードであること
のいずれかである場合に、前記コーディングモードは、前記クロマフォーマットが4:2:2である場合にMODE_TYPE_ALLであると、前記クロマフォーマットが4:2:0である場合にMODE_TYPE_INTRA又はMODE_TYPE_INTERであると決定される、
方法。
8.箇条7に記載の方法であって、
M=8、又は16、又は32であり、
N=4、又は8、又は16である、
方法。
以下の箇条書きは、前のセクションの項目3で記載されている更なる技術とともに実装され得る。
9.ビデオ処理の方法であって、
ルールに基づいて、クロマブロックのあるサイズがビデオのビデオ領域で許されるかどうかを決定するステップと、
前記決定に基づき、前記ビデオ領域と該ビデオ領域の符号化表現との間の変換を実行するステップと
を有する方法。
10.箇条9に記載の方法であって、
前記ルールは、2×Nのクロマブロックが、前記ビデオ領域が二分木パーティションを含むことにより許可されないことを定める、
方法。
11.箇条9に記載の方法であって、
前記ルールは、2×Nのクロマブロックが、前記ビデオ領域が一分木パーティションを含むことにより許可されないことを定める、
方法。
12.箇条10又は11に記載の方法であって、
N<=64である、
方法。
以下の箇条書きは、前のセクションの項目4、8及び9で記載されている更なる技術とともに実装され得る。
13.ビデオ処理の方法であって、
ビデオ条件に関してコーディングモードの使用を許すルールに基づき、コーディングモードがビデオ領域に対して許されることを決定するステップと、
前記決定に基づき、前記ビデオ領域内のピクセルの符号化表現と前記ビデオ領域のピクセルとの間の変換を実行するステップと
を有する方法。
14.箇条13に記載の方法であって、
前記ビデオ条件はブロックサイズであり、
前記ルールは、小ブロックサイズのルーマブロックに対してイントラブロックコピーモードの使用を認める、
方法。
15.箇条14に記載の方法であって、
前記小ブロックサイズは、8×8、8×8、16×4又は4×Nのルーマブロックサイズを含む、
方法。
16.箇条13に記載の方法であって、
前記ルールは、コーディングのMODE_TYPE_INTERモードを使用する前記ビデオ領域の変換のためにイントラブロックコピーモードの使用を認める、
方法。
17.箇条13に記載の方法であって、
前記ルールは、コーディングのMODE_TYPE_INTERモードを使用する前記ビデオ領域の変換のためにパレットコーディングモードの使用を認める、
方法。
以下の箇条書きは、前のセクションの項目5、6及び7で記載されている更なる技術とともに実装され得る。
18.ビデオ処理の方法であって、
ビデオのビデオブロックと該ビデオブロックの符号化表現との間の変換を、ビデオコーディングモードを用いて実行するステップを有し、
前記コーディングモードを通知するシンタックス要素は、前記ルールに基づき前記符号化表現に選択的に含まれる、
方法。
19.箇条18に記載の方法であって、
前記ビデオコーディングモードは、イントラブロックコーディングモードであり、
前記ルールは、前記符号化表現における前記シンタックス要素の包含を制御するために前記ビデオコーディングモードのタイプを使用することを定める、
方法。
20.箇条19に記載の方法であって、
前記ルールは、非SKIPブロックを明示的に通知することを定める、
方法。
21.箇条18に記載の方法であって、
前記ルールは、前記ビデオブロックのモードタイプ及びスキップフラグに基づきイントラブロックコピーフラグを暗黙的に通知することを定める、
方法。
22.箇条18に記載の方法であって、
前記ビデオコーディングモードは、パレットコーディングモードであり、
前記ルールは、前記ビデオブロックのモードタイプに基づきパレットコーディングインジケータを選択的に含めることを定める、
方法。
以下の箇条書きは、前のセクションの項目11で記載されている更なる技術とともに実装され得る。
23.ビデオ処理の方法であって、
クロマブロックが閾サイズに満たないサイズを有していることにより、前記クロマブロックと該クロマブロックの符号化表現との間の変換中に使用される変換タイプが、対応するルーマブロック変換に使用される変換タイプとは異なることを決定するステップと、
前記決定に基づき前記変換を実行するステップと
を有する方法。
24.箇条23に記載の方法であって、
前記閾サイズはM×Nであり、
Mは2であり、あるいは、Nは2である、
方法。
以下の箇条書きは、前のセクションの項目12で記載されている更なる技術とともに実装され得る。
25.箇条1乃至24のうちいずれかに記載の方法であって、
前記変換は、インター-イントラ複合予測モードをMODE_TYPE_INTRAモードとして使用する、
方法。
26.箇条18乃至22のうちいずれかに記載の方法であって、
前記変換は、インター-イントラ複合予測モードをMODE_TYPE_INTERとして使用する、
方法。
例えば、CIIPをMODE_TYPE_INTERと見なす場合に、前のセクションで項目5+6+7で記載されている方法が適用され得る。あるいは、項目5+6+7で記載されている方法が適用される場合に、CIIPは、MODE_TYPE_INTERと見なされ得る。
27.箇条1乃至26のうちいずれかに記載の方法であって、
前記変換は、前記ビデオを前記符号化表現に符号化することを有する、
方法。
28.箇条1乃至26のうちいずれかに記載の方法であって、
前記変換は、前記ビデオのピクセル値を生成するよう前記符号化表現を復号することを有する、
方法。
29.箇条1乃至28のうちの1つ以上に記載されている方法を実装するよう構成されたプロセッサを有するビデオ復号化装置。
30.箇条1乃至28のうちの1つ以上に記載されている方法を実装するよう構成されたプロセッサを有するビデオ符号化装置。
31.コンピュータコードを記憶しているコンピュータプログラム製品であって、
前記コードは、プロセッサによって実行される場合に、該プロセッサに、箇条1乃至28のうちいずれかに記載の方法を実装させる、
コンピュータプログラム製品。
32.本明細書で記載されている方法、装置、又はシステム。
箇条書きの第2の組は、前のセクション、例えば、例となる実施1、2及び13で開示されている技術のある特徴及び態様について記載している。
1.ビデオ処理の方法であって、
ルールに従って、ビデオのカラーフォーマットに基づき、前記ビデオのクロマビデオ領域を1つ以上のクロマブロックにパーティション化するパーティショニングスキームを決定するステップと、
前記パーティショニングスキームに従って、前記ビデオと前記ビデオの符号化表現との間の変換を実行するステップと
を有する方法。
2.箇条1に記載の方法であって、
前記ルールは、同じコーディングツリーノードで表されている3つの色成分を有するインタースライス又はイントラスライスを指定する、
方法。
3.箇条1又は2に記載の方法であって、
前記ルールは、4:4:4カラーフォーマットについてクロマブロック及びルーマブロックに同じパーティショニングスキームを使用することを定める、
方法。
4.箇条1又は2に記載の方法であって、
前記ルールは、4:2:0カラーフォーマット及び4:2:2カラーフォーマットについて同じパーティショニング制約を使用することを定める、
方法。
5.箇条1又は2に記載の方法であって、
前記ルールは、4:0:0カラーフォーマット又は4:4:4カラーフォーマットについて予測モードに前記パーティショニングスキーム及び/又は制約を適用しないことを定める、
方法。
6.箇条1又は2に記載の方法であって、
前記ルールは、前記ビデオの前記カラーフォーマットに基づき適用される前記パーティショニングスキーム及び/又は予測モードを指定する、
方法。
7.箇条6に記載の方法であって、
水平BT(二分木)分割又は推定TT(三分木)分割を伴ったM×Nコーディングツリーノードについて、4:2:2カラーフォーマットにおいて、前記水平BT分割又は前記水平TT分割は、クロマブロック及びルーマブロックの両方に許可される、
方法。
8.箇条6に記載の方法であって、
水平BT(二分木)分割又は水平TT(三分木)分割を伴ったM×Nコーディングツリーノードについて、4:2:0カラーフォーマットにおいて、前記水平BT分割又は前記水平TT分割は、ルーマブロックには許可されるが、クロマブロックには許可されない、
方法。
9.箇条6に記載の方法であって、
垂直BT(二分木)分割又は垂直TT(三分木)分割を伴ったM×Nコーディングツリーノードについて、4:2:2カラーフォーマットにおいて、前記垂直BT分割又は前記垂直TT分割は、クロマブロック及びルーマブロックの両方に許可される、
方法。
10.箇条6に記載の方法であって、
垂直BT(二分木)分割又は垂直TT(三分木)分割を伴ったM×Nコーディングツリーノードについて、4:2:0カラーフォーマットにおいて、前記垂直BT分割又は前記垂直TT分割は、ルーマブロックには許可されるが、クロマブロックには許可されない、
方法。
11.箇条7乃至10のうちいずれかに記載の方法であって、
M及び/又はNは、予め定義されるか、又は通知される、
方法。
12.箇条11に記載の方法であって、
M及び/又はNは、前記ビデオ領域の前記カラーフォーマットに依存する、
方法。
13.箇条6に記載の方法であって、
前記ルールは、4:0:0カラーフォーマット及び/又は4:4:4カラーフォーマットに前記パーティショニングスキームを適用しないと定める、
方法。
14.箇条1に記載の方法であって、
前記ルールは、クロマブロックのサイズを制限するよう定義された最小クロマイントラ予測ユニット(SCIPU)が前記ビデオの前記カラーフォーマットに基づき前記変換のために有効にされることを定める、
方法。
15.箇条14に記載の方法であって、
前記最小クロマイントラ予測ユニットは、4:2:0カラーフォーマット及び/又は4:2:2カラーフォーマットについて許可される、
方法。
16.箇条14に記載の方法であって、
前記最小クロマイントラ予測ユニットは、4:0:0カラーフォーマット及び/又は4:4:4カラーフォーマットについては無効にされる、
方法。
17.ビデオ処理の方法であって、
ビデオのカラーフォーマットに基づき、前記ビデオのコーディングツリーノードのサブブロックのための予測モード又は予測タイプを決定するステップと、
前記決定に基づき、前記ビデオと前記ビデオの符号化表現との間の変換を実行するステップと
を有し、
前記コーディングツリーノードは、前記符号化表現でのコーディングのためにサブブロックにパーティション化される、
方法。
18.箇条17に記載の方法であって、
サブブロックの予測モードは、前記カラーフォーマットが4:2:2であることにより、インターコーディングモード、イントラモード、パレットモード、及びイントラブロックコピーモードの適用可能性を示すMODE_TYPE_ALLとして決定される、
方法。
19.箇条17に記載の方法であって、
サブブロックの予測モードは、前記カラーフォーマットが4:2:0であることにより、i)インターコーディングモードのみの適用可能性を示すMODE_TYPE_INTER、又はii)イントラモード、パレットモード、及びイントラブロックコピーモードの適用可能性を示すMODE_TYPE_INTRA、のどちらか一方であるよう決定される、
方法。
20.箇条18又は19に記載の方法であって、
前記インターコーディングモードは、時間相関を用いて前記ビデオを表現又は再構成することを含み、
前記イントラモードは、前に処理されたビデオブロックに基づき前記ビデオを表現又は再構成することを含み、
前記パレットモードは、代表サンプル値のパレットを用いて前記ビデオを表現又は再構成することを含み、あるいは、
前記イントラブロックコピーモードは、ビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて前記ビデオを表現又は再構成することを含む、
方法。
21.箇条18乃至20のうちいずれか1つに記載の方法であって、
前記コーディングツリーノードは、次の条件
i)前記コーディングツリーノードが、水平二分木分割を伴った8×8ルーマブロックに対応すること、
ii)前記コーディングツリーノードが、垂直二分木分割を伴った16×4ルーマブロックに対応すること、
iii)前記コーディングツリーノードが、水平三分木分割を伴った8×16ルーマブロックに対応すること、又は
iv)前記コーディングツリーノードが、垂直三分木分割を伴った32×4ルーマブロックに対応すること
のうちの1つを満足する、
方法。
22.箇条17に記載の方法であって、
前記コーディングツリーノードは、M×Nコーディングツリーノードであり、M及び/又はNは、予め定義されるか、又は通知される、
方法。
23.箇条22に記載の方法であって、
M及び/又はNは、前記ビデオの前記カラーフォーマットに依存する、
方法。
24.箇条1乃至23のうちいずれかに記載の方法であって、
前記変換の実行は、前記符号化表現を前記ビデオから生成することを含む、
方法。
25.箇条1乃至23のうちいずれかに記載の方法であって、
前記変換の実行は、前記符号化表現から前記ビデオを生成することを含む、
方法。
26.箇条1乃至25のうちいずれか1つに記載の方法を実装するよう構成されたプロセッサを有するビデオ処理装置。
27.実行される場合に、プロセッサに、箇条1乃至25のうちいずれか1つに記載の方法を実装させるプログラムコードを記憶しているコンピュータ可読媒体。
箇条書きの第3の組は、前のセクション、例えば、例となる実施3及び10~13で開示されている技術のある特徴及び態様について記載している。
1.ビデオ処理の方法であって、
1つ以上のルーマブロック及び1つ以上のクロマブロックを有する1つ以上のビデオ領域を有するビデオと、該ビデオの符号化表現との間の変換を、ルールに従って実行するステップを有し、
前記ルールは、サイズがM×Nである、前記1つ以上のクロマブロックの中のクロマブロックが、イントラモード又はイントラブロックコピーモードを用いて前記符号化表現で表されることを許可されないことを定め、前記M及びNは、夫々、当該クロマブロックの幅及び高さを示す整数であり、前記イントラモードは、前に符号化又は再構成されたビデオブロックに基づき当該クロマブロックを符号化することを含み、前記イントラブロックコピーモードは、ビデオ領域を含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて前記クロマブロックを符号化することを含む、
方法。
2.箇条1に記載の方法であって、
前記ルールは、2×Nのサイズを有しているクロマブロックが、前記ビデオ領域が二分木パーティションとしてパーティション化されることにより許可されないことを定める、
方法。
3.箇条2に記載の方法であって、
前記ルールは、垂直BT(二分木)分割が、i)前記クロマブロックのツリータイプが二分木タイプに等しく、かつ、ii)Mが4クロマサンプルに等しい場合に、前記クロマブロックに対して許可されないことを定める、
方法。
4.箇条2に記載の方法であって、
前記ルールは、垂直TT(三分木)分割が、i)前記クロマブロックのツリータイプが二分木タイプに等しく、かつ、ii)Mが8クロマサンプルに等しい場合に、前記クロマブロックに対して許可されないことを定める、
方法。
5.箇条1に記載の方法であって、
前記ルールは、2×Nのサイズを有しているクロマブロックが、前記ビデオ領域が一分木パーティションとしてパーティション化されることにより許可されないことを定める、
方法。
6.箇条5に記載の方法であって、
垂直BT(二分木)分割を伴ったM×Nコーディングツリーノードについて、前記垂直BT分割は、4×N又は4×(N/2)のサイズを有しているクロマブロックに対しては許可されず、8×Nのサイズを有しているルーマブロックに対しては許可される、
方法。
7.箇条5に記載の方法であって、
垂直BT(二分木)分割を伴ったM×Nコーディングツリーノードについて、前記垂直BT分割は、4×N又は4×(N/2)のサイズを有しているクロマブロックに対して許可されない、
方法。
8.箇条5に記載の方法であって、
垂直BT(二分木)分割を伴ったM×Nコーディングツリーノードについて、前記垂直BT分割は、4×N又は4×(N/2)のサイズを有しているクロマブロック及び8×Nのサイズを有しているルーマブロックに対して許可され、前記クロマブロック及びルーマブロックは、前記イントラモードでコーディングされない、
方法。
9.箇条5に記載の方法であって、
垂直TT(三分木)分割を伴ったM×Nコーディングツリーノードについて、前記垂直TT分割は、8×N又は8×(N/2)のサイズを有しているクロマブロックに対しては許可されず、16×Nのサイズを有しているルーマブロックに対しては許可される、
方法。
10.箇条5に記載の方法であって、
垂直TT(三分木)分割を伴ったM×Nコーディングツリーノードについて、前記垂直TT分割は、8×N又は8×(N/2)のサイズを有しているクロマブロックに対して許可されない、
方法。
11.箇条5に記載の方法であって、
垂直TT(三分木)分割を伴ったM×Nコーディングツリーノードについて、前記垂直TT分割は、8×N又は8×(N/2)のサイズを有しているクロマブロック及び16×Nのサイズを有しているルーマブロックに対して許可され、前記クロマブロック及びルーマブロックは、前記イントラモードでコーディングされない、
方法。
12.ビデオ処理の方法であって、
ビデオのビデオ領域と前記ビデオの符号化表現との間の変換のために、ルールに従って、インター-イントラ複合予測モード(CIIP)モードをイントラモード又はインターモードとして使用すると決定するステップと、
前記決定に基づき前記変換を実行するステップと
を有し、
前記CIIPモードは、加重係数を用いてイントラ予測信号及びインター予測信号を結合することを含む、
方法。
13.箇条12に記載の方法であって、
前記ルールは、前記ビデオ領域で使用される二分木パーティショニングにより、前記CIIPモードを前記イントラモードとして使用することを定める、
方法。
14.箇条12に記載の方法であって、
前記ルールは、前記CIIPを前記インターモードとして使用することを定める、
方法。
15.箇条14に記載の方法であって、
前記ルールは、クロマブロックがMに等しい幅を有していることにより、前記CIIPモードを無効にすると定める、
方法。
16.箇条12に記載の方法であって、
前記ルールは、前記CIIPモードでコーディングされたクロマブロックのためのイントラ予測モードを前記イントラモードに制限すると定める、
方法。
17.箇条16に記載の方法であって、
前記イントラ予測モードは、intra_DC、intra_angular18モード、又はintra_angular50モードを含む、
方法。
18.箇条16に記載の方法であって、
前記クロマブロックの幅は2に等しい、
方法。
19.ビデオ処理の方法であって、
ビデオのクロマブロックと前記ビデオの符号化表現との間の変換を実行するステップを有し、
前記クロマブロックは、サイズルールに従って、イントラコーディングモードを用いて前記符号化表現で表され、
前記サイズルールは、前記クロマブロックの幅がMに等しいか又は前記クロマブロックの高さがNに等しい場合には、前記イントラコーディングモードがイントラコーディングモードタイプの第1セットからであり、そうでない場合には、前記イントラコーディングモードがイントラコーディングモードタイプの第2セットからであると定め、M及びNは整数である、
方法。
20.箇条19に記載の方法であって、
M=2又はN=2である、
方法。
21.箇条19又は20に記載の方法であって、
前記イントラコーディングモードタイプの第1セットは、前記変換における全ての許可されているイントラコーディングモードタイプのサブセットである、
方法。
22.箇条19又は20に記載の方法であって、
前記イントラコーディングモードタイプの第1セットは、INTRA_DCモードに対応する、
方法。
23.箇条19又は20に記載の方法であって、
前記イントラコーディングモードタイプの第1セットは、INTRA_PLANARモードに対応する、
方法。
24.箇条19又は20に記載の方法であって、
前記イントラコーディングモードタイプの第1セットは、INTRA_ANGULAR18モードに対応する、
方法。
25.箇条19又は20に記載の方法であって、
前記イントラコーディングモードタイプの第1セットは、INTRA_ANGULAR50モードに対応する、
方法。
26.箇条19又は20に記載の方法であって、
前記ルールは、クロマ成分の予測値を他の成分から導出するために線形モードを使用するCCLMモードが無効にされることを定める、
方法。
27.ビデオ処理の方法であって、
ビデオのクロマブロックと前記ビデオの符号化表現との間の変換を実行するステップを有し、
前記クロマブロックは、ルールに従って変換タイプを用いて符号化表現で表され、
前記ルールは、前記クロマブロックの幅がMに等しいか又は前記クロマブロックの高さがNに等しい場合には、前記変換タイプが変換タイプの第1セットからであり、そうでない場合には、前記変換タイプが変換タイプの第2セットからであると定め、M及びNは整数である、
方法。
28.箇条27に記載の方法であって、
Mは2であり、あるいは、Nは2である、
方法。
29.箇条1乃至11、15、19乃至28のうちいずれか1つに記載の方法であって、
M及び/又はNは、予め定義されるか、又は通知される、
方法。
30.箇条29に記載の方法であって、
M及び/又はNは、前記ビデオ領域のカラーフォーマットに依存する、
方法。
31.箇条1乃至30のうちいずれかに記載の方法であって、
前記変換は、前記ビデオを前記符号化表現に符号化することを含む、
方法。
32.箇条1乃至30のうちいずれかに記載の方法であって、
前記変換は、前記ビデオを生成するよう前記符号化表現を復号することを含む、
方法。
33.箇条1乃至32のうちいずれか1つ以上に記載されている方法を実装するよう構成されたプロセッサを有するビデオ処理装置。
34.実行される場合に、プロセッサに、箇条1乃至32のうちいずれか1つ以上に記載されている方法を実装させるプログラムコードを記憶しているコンピュータ可読媒体。
箇条書きの第4の組は、前のセクション、例えば、例となる実施4~9及び13で開示されている技術のある特徴及び態様について記載している。
1.ビデオ処理の方法であって、
1つ以上のルーマブロック及び1つ以上のクロマブロックを有しているビデオ領域を有するビデオと、前記ビデオの符号化表現との間の変換を、ルールに従って実行するステップを有し、
前記ルールは、イントラブロックコピー(IBC)モードの使用が、M×Nの全ての値について、ブロックサイズがM×Nである前記1つ以上のルーマブロック及び前記1つ以上のクロマブロックに対して利用可能であることを定め、M及びNは整数であり、
前記IBCモードを用いて、ビデオブロックは、該ビデオブロックを含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いてコーディングされる、
方法。
2.箇条1に記載の方法であって、
前記ルールは、ルーマブロックが8×4、8×8、16×4、又は4×Nのサイズを有することを定める、
方法。
3.箇条2に記載の方法であって、
前記ルーマブロックは、イントラモード、前記IBCモード及びパレットモードの適用可能性を示すMODE_TYPE_INTRAに等しいモードタイプを有する、
方法。
4.箇条1に記載の方法であって、
前記ルールは、クロマブロックが、イントラモード、前記IBCモード及びパレットモードの適用可能性を示すMODE_TYPE_INTRAに等しいモードタイプを有することを定める、
方法。
5.ビデオ処理の方法であって、
ビデオのビデオブロックと該ビデオブロックの符号化表現との間の変換を実行するステップを有し、
前記符号化表現はフォーマットルールに従い、該フォーマットルールは、前記ビデオブロックのモードタイプに基づいた、前記符号化表現でのインターブロックコピー(IBC)モードの使用を示すシンタックス要素の選択的包含を定め、前記IBCモードは、前記ビデオブロックを含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて前記ビデオブロックを符号化することを含む、
方法。
6.箇条5に記載の方法であって、
前記フォーマットルールは、前記ビデオブロックのツリータイプがDUAL_TREE_CHROMAに等しくなく、かつ、前記ビデオブロックの前記モードタイプが、イントラモード、前記IBCモード、及びパレットモードの適用可能性を示すMODE_TYPE_INTRAに等しい場合に、スキップモードでコーディングされていない前記ビデオブロックについて前記シンタックス要素を明示的に通知することを定める、
方法。
7.箇条5に記載の方法であって、
前記フォーマットルールは、前記ビデオブロックのモードタイプ及びスキップフラグに基づき前記シンタックス要素を推測することを定める、
方法。
8.箇条7に記載の方法であって、
前記フォーマットルールは、前記ビデオブロックの前記モードタイプが、イントラモード、前記IBCモード、及びパレットモードの適用可能性を示すMODE_TYPE_INTRAに等しい場合に、前記シンタックス要素が、スキップモードでコーディングされている前記ビデオブロックについて1に等しいと推測されることを定める、
方法。
9.ビデオ処理の方法であって、
ビデオのビデオブロックと該ビデオブロックの符号化表現との間の変換を実行するステップを有し、
前記符号化表現はフォーマットルールに従い、該フォーマットルールは、パレットモードの使用を示すシンタックス要素がビデオブロックのモードタイプにかかわらず前記符号化表現に含まれることを定め、前記パレットモードは、代表サンプル値のパレットを用いて前記ビデオブロックを符号化することを含む、
方法。
10.箇条9に記載の方法であって、
前記フォーマットルールは、前記ビデオブロックの予測モード、ブロックサイズ、またはスライスタイプのうちの少なくとも1つに基づいた明示的な通知を定める、
方法。
11.箇条9に記載の方法であって、
前記フォーマットルールは、前記ビデオブロックの前記モードタイプが、インターコーディングモードのみの適用可能性を示すMODE_TYPE_INTER、又はイントラモード、IBCモード、及びパレットモードの適用可能性を示すMODE_TYPE_INTRAに等しい場合に、前記シンタックス要素が0に等しいと推測されることを定める、
方法。
12.ビデオ処理の方法であって、
ビデオのビデオ領域と前記ビデオの符号化表現との間の変換のために、ルールに基づき、インターブロックコピー(IBC)モードの使用が前記ビデオ領域について許可されることを決定するステップと、
前記決定に基づき前記変換を実行するステップと
を有し、
前記IBCモードは、前記ビデオ領域を含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて前記ビデオ領域を符号化することを含む、
方法。
13.箇条12に記載の方法であって、
前記ルールは、前記ビデオ領域のモードタイプが、インターコーディングモードのみの適用可能性を示すMODE_TYPE_INTERに等しい場合に、前記IBCモードが許可されることを定める、
方法。
14.箇条12に記載の方法であって、
前記ルールは、前記ビデオ領域のモードタイプが、イントラモード、前記IBCモード、及びパレットモードの適用可能性を示すMODE_TYPE_INTRAに等しい場合に、前記IBCモードがクロマブロックに対して許可されないことを定める、
方法。
15.箇条12に記載の方法であって、
前記ルールは、前記ビデオ領域のモードタイプが、インターコーディングモードのみの適用可能性を示すMODE_TYPE_INTER、又はイントラモード、前記IBCモード、及びパレットモードの適用可能性を示すMODE_TYPE_INTRAに等しい場合に、前記IBCモードが許可されることを定める、
方法。
16.箇条12に記載の方法であって、
前記ルールは、前記ビデオ領域のモードタイプとは無関係に前記IBCモードが許可されること定める、
方法。
17.箇条12に記載の方法であって、
クロマブロックのサイズを制限するよう定義された最小クロマイントラ予測ユニット(SCIPU)内で前記IBCモード及びインターモードは許可される、
方法。
18.箇条12に記載の方法であって、
前記IBCモードを用いてコーディングされたクロマブロックは、該クロマブロックに対応するルーマブロックのサイズに対応するサイズを有している、
方法。
19.箇条12に記載の方法であって、
前記IBCモードの使用を示すシンタックス要素の通知はスキップされ、
前記シンタックス要素は、前記ビデオ領域のモードタイプが、インターコーディングモードのみの適用可能性を示すMODE_TYPE_INTERに等しく、かつ、前記ビデオ領域が4×4ルーマブロックに対応する場合に、1に等しいと推測される、
方法。
20.ビデオ処理の方法であって、
ビデオのビデオ領域と前記ビデオの符号化表現との間の変換のために、ルールに基づき、パレットモードの使用が前記ビデオ領域に対して許可されるかどうかを決定するステップと、
前記決定に基づき前記変換を実行するステップと
を有し、
前記ルールは、前記ビデオ領域のコーディングモードタイプ又は前記ビデオの領域のカラータイプに基づき、
前記パレットモードは、代表サンプル値のパレットを用いて前記ビデオ領域を符号化することを含む、
方法。
21.箇条20に記載の方法であって、
前記ルールは、前記ビデオ領域のモードタイプが、インターコーディングモードのみの適用可能性を示すMODE_TYPE_INTERに等しい場合に、前記パレットモードが許可されることを定める、
方法。
22.箇条20に記載の方法であって、
前記ルールは、前記ビデオ領域のモードタイプが、イントラモード、IBCモード、及びパレットモードの適用可能性を示すMODE_TYPE_INTRAに等しい場合に、前記パレットモードがクロマブロックに対して許可されないことを定め、
前記IBCモードは、前記ビデオ領域を含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて前記ビデオ領域を符号化することを含む、
方法。
23.箇条20に記載の方法であって、
前記ルールは、前記ビデオ領域のモードタイプが、インターコーディングモードのみの適用可能性を示すMODE_TYPE_INTER、又はイントラモード、IBCモード、及びパレットモードの適用可能性を示すMODE_TYPE_INTRAに等しい場合に、前記パレットモードが許可されることを定め、
前記IBCモードは、前記ビデオ領域を含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて前記ビデオ領域を符号化することを含む、
方法。
24.箇条20に記載の方法であって、
前記ルールは、前記ビデオ領域のモードタイプとは無関係に前記パレットモードが許可されることを定める、
方法。
25.箇条20に記載の方法であって、
クロマブロックのサイズを制限するよう定義された最小クロマイントラ予測ユニット(SCIPU)内で前記パレットモード及びインターモードは許可される、
方法。
26.箇条20に記載の方法であって、
前記パレットモード、IBCモード、及びインターモードの全ては、クロマブロックのサイズを制限するよう定義された最小クロマイントラ予測ユニット(SCIPU)内で許可され、
前記IBCモードは、前記ビデオ領域を含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて前記ビデオ領域を符号化することを含む、
方法。
27.箇条20に記載の方法であって、
前記パレットモードを用いてコーディングされたクロマブロックは、該クロマブロックに対応するルーマブロックのサイズに対応するサイズを有している、
方法。
28.箇条20に記載の方法であって、
前記パレットモードの使用を示すシンタックス要素の通知はスキップされ、
前記シンタックス要素は、前記ビデオ領域のモードタイプが、インターコーディングモードのみの適用可能性を示すMODE_TYPE_INTERに等しく、かつ、前記ビデオ領域が4×4ルーマブロックに対応する場合に、1に等しいと推測される、
方法。
29.箇条20に記載の方法であって、
前記パレットモード又はIBCモードの使用を示すシンタックス要素は、1)前記ビデオ領域のモードタイプが、インターコーディングモードのみの適用可能性を示すMODE_TYPE_INTERに等しく、2)前記ビデオ領域が4×4ルーマブロックに対応する場合に、前記符号化表現に含まれ、
前記IBCモードは、前記ビデオ領域を含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて前記ビデオ領域を符号化することを含む、
方法。
30.箇条1乃至4のうちいずれか1つに記載の方法であって、
M及び/又はNは、予め定義されるか、又は通知される、
方法。
31.箇条30に記載の方法であって、
M及び/又はNは、前記ビデオ領域のカラーフォーマットに依存する、
方法。
32.箇条1乃至31のうちいずれかに記載の方法であって、
前記変換の実行は、前記ビデオから前記符号化表現を生成することを含む、
方法。
33.箇条1乃至31のうちいずれかに記載の方法であって、
前記変換の実行は、前記符号化表現から前記ビデオを生成することを含む、
方法。
34.箇条1乃至33のうちいずれか1つ以上に記載されている方法を実装するよう構成されたプロセッサを有するビデオ処理装置。
35.実行される場合に、プロセッサに、箇条1乃至33のうちいずれか1つ以上に記載されている方法を実装させるプログラムコードを記憶しているコンピュータ可読媒体。
本明細書で記載されている開示された及び他の解決法、例、実施形態、モジュール及び機能的動作は、デジタル電子回路で、あるいは、本明細書で開示されている構造及びそれらの構造的同等物を含むコンピュータソフトウェア、ファームウェア、又はハードウェアで、あるいは、それらのうちの1つ以上の組み合わせで実装可能である。開示された及び他の実施形態は、1つ以上のコンピュータプログラム製品、つまり、データ処理装置によって実行されるか又はその動作を制御するコンピュータ可読媒体で符号化されたコンピュータプログラム命令の1つ以上のモジュール、として実装可能である。コンピュータ可読媒体は、マシン可読記憶デバイス、マシン可読記憶基板、メモリデバイス、マシン可読な伝播信号に影響を与える物質の組成、又はそれらの1つ以上の組み合わせであることができる。「データ処理装置」との用語は、例として、プログラム可能なプロセッサ、コンピュータ、又は複数のプロセッサ若しくはコンピュータを含む、データを処理するための全ての装置、デバイス、及びマシンを包含する。装置は、ハードウェアに加えて、問題となっているコンピュータプログラムのための実行環境を作り出すコード、例えば、プロセッサファームウェア、プロトコルスタック、データベース管理システム、オペレーティングシステム、又はそれらの1つ以上の組み合わせを構成するコードを含むことができる。伝播信号は、人工的に生成された信号、例えば、適切な受信器装置への伝送のために情報を符号化するよう生成される、マシンにより生成された電気、光、又は電磁気信号である。
コンピュータプログラム(プログラム、ソフトウェア、ソフトウェアアプリケーション、スクリプト、又はコードとしても知られる。)は、コンパイル済み又は解釈済みの言語を含む如何なる形式のプログラミング言語でも記述可能であり、それは、スタンドアロンプログラムとして又はコンピューティング環境における使用に適したモジュール、コンポーネント、サブルーチン、若しくは他のユニットとしてを含め、如何なる形式でもデプロイ可能である。コンピュータプログラムは、必ずしもファイルシステムにおけるファイルに対応しない。プログラムは、問題となっているプログラムに専用の単一のファイルで、又は複数の協調したファイル(例えば、1つ以上のモジュール、サブプログラム、又はコードの部分を保存するファイル)で、他のプログラム又はデータ(例えば、マークアップ言語文書で保存された1つ以上のスクリプト)を保持するファイルの部分において保存可能である。コンピュータプログラムは、1つのコンピュータで、あるいは、1つの場所に位置しているか、又は複数の場所にわたって分布しており、通信ネットワークによって相互接続されている複数のコンピュータで、実行されるようデプロイ可能である。
本明細書で説明されているプロセス及びロジックフローは、入力データに作用して出力を生成することによって機能を実行するよう1つ以上のコンピュータプログラムを実行する1つ以上のプログラム可能なプロセッサによって実行可能である。プロセス及びロジックフローはまた、専用のロジック回路、例えば、フィールド・プログラマブル・ゲート・アレイ(FPGA)又は特定用途向け集積回路(ASIC)によっても実行可能であり、装置は、そのようなものとして実装可能である。
コンピュータプログラムの実行に適したプロセッサは、例として、汎用のマイクロプロセッサ及び専用のマイクロプロセッサの両方、並びにあらゆる種類のデジタルコンピュータのいずれか1つ以上のプロセッサを含む。一般に、プロセッサは、リード・オンリー・メモリ若しくはランダム・アクセス・メモリ又はその両方から命令及びデータを読み出すことになる。コンピュータの必須の要素は、命令を実行するプロセッサと、命令及びデータを保存する1つ以上のメモリデバイスとである。一般に、コンピュータはまた、データを保存する1つ以上の大容量記憶デバイス、例えば、磁気、光学磁気ディスク、又は光ディスクを含むか、あるいは、そのような1つ以上の大容量記憶デバイスからのデータの受信若しくはそれへのデータの転送又はその両方のために動作可能に結合されることになる。しかし、コンピュータは、そのようなデバイスを有する必要はない。コンピュータプログラム命令及びデータを保存するのに適したコンピュータ可読媒体は、例として、半導体メモリデバイス、例えば、EPROM、EEPROM、及びフラッシュメモリデバイス;磁気ディスク、例えば、内蔵ハードディスク又はリムーバブルディスク;光学磁気ディスク;並びにCD ROM及びDVD-ROMディスクを含む全ての形式の不揮発性メモリ、媒体及びメモリデバイスを含む。プロセッサ及びメモリは、専用のロジック回路によって強化されるか、あるいは、それに組み込まれ得る。
本明細書は、多数の詳細を含むが、それらは、あらゆる対象の又は請求される可能性があるものの範囲に対する限定としてではなく、むしろ、特定の技術の特定の実施形態に特有であり得る特徴の説明として解釈されるべきである。別々の実施形態に関連して本明細書で説明されている特定の特徴は、単一の実施形態と組み合わせても実装可能である。逆に、単一の実施形態に関連して説明されている様々な特徴はまた、複数の実施形態で別々に、又は何らかの適切なサブコンビネーションで、実装可能である。更に、特徴は、特定の組み合わせで動作するものとして先に説明され、更には、そのようなものとして最初に請求されることがあるが、請求されている組み合わせからの1つ以上の特徴は、いくつかの場合に、その組み合わせから削除可能であり、請求されている組み合わせは、サブコンビネーション又はサブコンビネーションの変形に向けられてもよい。
同様に、動作は、特定の順序で図面において表されているが、これは、所望の結果を達成するために、そのような動作が示されているその特定の順序で又は順次的な順序で実行されること、あるいは、表されている全ての動作が実行されることを求めている、と理解されるべきではない。更に、本明細書で説明されている実施形態における様々なシステムコンポーネントの分離は、全ての実施形態でそのような分離を求めている、と理解されるべきではない。
ほんのわずかの実施及び例が説明されており、他の実施、強化及び変形は、本特許文献で記載及び例示されているものに基づいて行われ得る。
[関連出願への相互参照]
願は、2019年8月6日付けで出願された国際特許出願第PCT/CN2019/099447号に対する優先権及びその利益を主張して、2020年8月6日付けで出願された国際特許出願第PCT/CN2020/107400号の国内移行である。上記の全ての願はそれらの全文を参照により本願に組み込まれる。

Claims (34)

  1. ビデオ処理の方法であって、
    1つ以上のルーマブロック及び1つ以上のクロマブロックを有する1つ以上のビデオ領域を有するビデオと、該ビデオの符号化表現との間の変換を、ルールに従って実行するステップを有し、
    前記ルールは、サイズM×Nを有している前記1つ以上のクロマブロックの中のクロマブロックが、イントラモード又はイントラブロックコピーモードを用いて前記符号化表現で表されることを許可されないことを定め、前記M及びNは、夫々、当該クロマブロックの幅及び高さを示す整数であり、
    前記イントラモードは、前に符号化又は再構成されたビデオブロックに基づき当該クロマブロックを符号化することを含み、
    前記イントラブロックコピーモードは、ビデオ領域を含むビデオフレームを指し示す少なくとも1つのブロックベクトルを用いて当該クロマブロックを符号化することを含む、
    方法。
  2. 前記ルールは、2×Nのサイズを有している前記クロマブロックが、前記ビデオ領域が二分木パーティションとしてパーティション化されることにより許可されないことを定める、
    請求項1に記載の方法。
  3. 前記ルールは、垂直BT(二分木)分割が、i)前記クロマブロックのツリータイプが二分木タイプに等しく、かつ、ii)Mが4クロマサンプルに等しい場合に、前記クロマブロックに対して許可されないことを定める、
    請求項2に記載の方法。
  4. 前記ルールは、垂直TT(三分木)分割が、i)前記クロマブロックのツリータイプが二分木タイプに等しく、かつ、ii)Mが8クロマサンプルに等しい場合に、前記クロマブロックに対して許可されないことを定める、
    請求項2に記載の方法。
  5. 前記ルールは、2×Nのサイズを有している前記クロマブロックが、前記ビデオ領域が一分木パーティションとしてパーティション化されることにより許可されないことを定める、
    請求項1に記載の方法。
  6. 垂直BT(二分木)分割を伴ったM×Nコーディングツリーノードについて、前記垂直BT分割は、4×N又は4×(N/2)のサイズを有している前記クロマブロックに対しては許可されず、8×Nのサイズを有しているルーマブロックに対しては許可される、
    請求項5に記載の方法。
  7. 垂直BT(二分木)分割を伴ったM×Nコーディングツリーノードについて、前記垂直BT分割は、4×N又は4×(N/2)のサイズを有している前記クロマブロックに対して許可されない、
    請求項5に記載の方法。
  8. 垂直BT(二分木)分割を伴ったM×Nコーディングツリーノードについて、前記垂直BT分割は、4×N又は4×(N/2)のサイズを有している前記クロマブロック及び8×Nのサイズを有しているルーマブロックに対して許可され、前記クロマブロック及びルーマブロックは、前記イントラモードでコーディングされない、
    請求項5に記載の方法。
  9. 垂直TT(三分木)分割を伴ったM×Nコーディングツリーノードについて、前記垂直TT分割は、8×N又は8×(N/2)のサイズを有している前記クロマブロックに対しては許可されず、16×Nのサイズを有しているルーマブロックに対しては許可される、
    請求項5に記載の方法。
  10. 垂直TT(三分木)分割を伴ったM×Nコーディングツリーノードについて、前記垂直TT分割は、8×N又は8×(N/2)のサイズを有している前記クロマブロックに対して許可されない、
    請求項5に記載の方法。
  11. 垂直TT(三分木)分割を伴ったM×Nコーディングツリーノードについて、前記垂直TT分割は、8×N又は8×(N/2)のサイズを有している前記クロマブロック及び16×Nのサイズを有しているルーマブロックに対して許可され、前記クロマブロック及びルーマブロックは、前記イントラモードでコーディングされない、
    請求項5に記載の方法。
  12. ビデオ処理の方法であって、
    ビデオのビデオ領域と前記ビデオの符号化表現との間の変換のために、ルールに従って、インター-イントラ複合予測モード(CIIP)モードをイントラモード又はインターモードとして使用すると決定するステップと、
    前記決定に基づき前記変換を実行するステップと
    を有し、
    前記CIIPモードは、加重係数を用いてイントラ予測信号及びインター予測信号を結合することを含む、
    方法。
  13. 前記ルールは、前記ビデオ領域で使用される二分木パーティショニングにより、前記CIIPモードを前記イントラモードとして使用することを定める、
    請求項12に記載の方法。
  14. 前記ルールは、前記CIIPを前記インターモードとして使用することを定める、
    請求項12に記載の方法。
  15. 前記ルールは、クロマブロックがMに等しい幅を有していることにより、前記CIIPモードを無効にすると定める、
    請求項14に記載の方法。
  16. 前記ルールは、前記CIIPモードでコーディングされたクロマブロックのためのイントラ予測モードを前記イントラモードに制限すると定める、
    請求項12に記載の方法。
  17. 前記イントラ予測モードは、intra_DC、intra_angular18モード、又はintra_angular50モードを含む、
    請求項16に記載の方法。
  18. 前記クロマブロックの幅は2に等しい、
    請求項16に記載の方法。
  19. ビデオ処理の方法であって、
    ビデオのクロマブロックと前記ビデオの符号化表現との間の変換を実行するステップを有し、
    前記クロマブロックは、サイズルールに従って、イントラコーディングモードを用いて前記符号化表現で表され、
    前記サイズルールは、前記クロマブロックの幅がMに等しいか又は前記クロマブロックの高さがNに等しい場合には、前記イントラコーディングモードがイントラコーディングモードタイプの第1セットからであり、そうでない場合には、前記イントラコーディングモードがイントラコーディングモードタイプの第2セットからであると定め、M及びNは整数である、
    方法。
  20. M=2又はN=2である、
    請求項20に記載の方法。
  21. 前記イントラコーディングモードタイプの第1セットは、前記変換における全ての許可されているイントラコーディングモードタイプのサブセットである、
    請求項19又は20に記載の方法。
  22. 前記イントラコーディングモードタイプの第1セットは、INTRA_DCモードに対応する、
    請求項19又は20に記載の方法。
  23. 前記イントラコーディングモードタイプの第1セットは、INTRA_PLANARモードに対応する、
    請求項19又は20に記載の方法。
  24. 前記イントラコーディングモードタイプの第1セットは、INTRA_ANGULAR18モードに対応する、
    請求項19又は20に記載の方法。
  25. 前記イントラコーディングモードタイプの第1セットは、INTRA_ANGULAR50モードに対応する、
    請求項19又は20に記載の方法。
  26. 前記ルールは、クロマ成分の予測値を他の成分から導出するために線形モードを使用するCCLMモードが無効にされることを定める、
    請求項19又は20に記載の方法。
  27. ビデオ処理の方法であって、
    ビデオのクロマブロックと前記ビデオの符号化表現との間の変換を実行するステップを有し、
    前記クロマブロックは、ルールに従って変換タイプを用いて符号化表現で表され、
    前記ルールは、前記クロマブロックの幅がMに等しいか又は前記クロマブロックの高さがNに等しい場合には、前記変換タイプが変換タイプの第1セットからであり、そうでない場合には、前記変換タイプが変換タイプの第2セットからであると定め、M及びNは整数である、
    方法。
  28. Mは2であり、あるいは、Nは2である、
    請求項27に記載の方法。
  29. M及び/又はNは、予め定義されるか、又は通知される、
    請求項1乃至11、15、19乃至28のうちいずれか一項に記載の方法。
  30. M及び/又はNは、前記ビデオ領域のカラーフォーマットに依存する、
    請求項29に記載の方法。
  31. 前記変換は、前記ビデオを前記符号化表現に符号化することを含む、
    請求項1乃至30のうちいずれか一項に記載の方法。
  32. 前記変換は、前記ビデオを生成するよう前記符号化表現を復号することを含む、
    請求項1乃至30のうちいずれか一項に記載の方法。
  33. 請求項1乃至32のうちいずれか一項に記載の方法を実装するよう構成されたプロセッサを有するビデオ処理装置。
  34. 実行される場合に、プロセッサに、請求項1乃至32のうちいずれか一項に記載の方法を実装させるプログラムコードを記憶しているコンピュータ可読媒体。
JP2022506732A 2019-08-06 2020-08-06 カラーフォーマットに基づいたサイズ制限 Pending JP2022543796A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023189742A JP2024010175A (ja) 2019-08-06 2023-11-07 カラーフォーマットに基づいたサイズ制限

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN2019099447 2019-08-06
CNPCT/CN2019/099447 2019-08-06
PCT/CN2020/107400 WO2021023261A1 (en) 2019-08-06 2020-08-06 Size restriction based on color format

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2023189742A Division JP2024010175A (ja) 2019-08-06 2023-11-07 カラーフォーマットに基づいたサイズ制限

Publications (1)

Publication Number Publication Date
JP2022543796A true JP2022543796A (ja) 2022-10-14

Family

ID=74503319

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2022506732A Pending JP2022543796A (ja) 2019-08-06 2020-08-06 カラーフォーマットに基づいたサイズ制限
JP2022506731A Pending JP2022543795A (ja) 2019-08-06 2020-08-06 カラーフォーマットに基づいたビデオ領域パーティション
JP2023189742A Pending JP2024010175A (ja) 2019-08-06 2023-11-07 カラーフォーマットに基づいたサイズ制限

Family Applications After (2)

Application Number Title Priority Date Filing Date
JP2022506731A Pending JP2022543795A (ja) 2019-08-06 2020-08-06 カラーフォーマットに基づいたビデオ領域パーティション
JP2023189742A Pending JP2024010175A (ja) 2019-08-06 2023-11-07 カラーフォーマットに基づいたサイズ制限

Country Status (8)

Country Link
US (4) US20220159255A1 (ja)
EP (2) EP3994886A4 (ja)
JP (3) JP2022543796A (ja)
KR (2) KR20220039721A (ja)
CN (4) CN114208195A (ja)
BR (2) BR112022001981A2 (ja)
MX (2) MX2022001244A (ja)
WO (3) WO2021023261A1 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3994886A4 (en) 2019-08-06 2022-12-28 Beijing Bytedance Network Technology Co., Ltd. VIDEO ZONE PARTITION ACCORDING TO COLOR FORMAT
MX2022001939A (es) * 2019-08-15 2022-03-11 Beijing Dajia Internet Information Tech Co Ltd Restriccion del tama?o de los bloques de crominancia peque?os en la codificacion de video.
US20220224890A1 (en) * 2019-08-23 2022-07-14 Hfi Innovation Inc. Method and Apparatus of Partitioning Small Size Coding Units with Partition Constraints
EP4044592A3 (en) * 2019-08-23 2022-12-21 HFI Innovation Inc. Method and apparatus of partitioning small size coding units with partition constraints
MX2022002247A (es) * 2019-09-02 2022-03-22 Beijing Bytedance Network Tech Co Ltd Particion de region de video basada en formato de color.
CN118055248A (zh) 2019-09-21 2024-05-17 北京字节跳动网络技术有限公司 处理视频数据的方法、装置以及计算机可读记录介质
WO2021244420A1 (en) * 2020-05-31 2021-12-09 Beijing Bytedance Network Technology Co., Ltd. Palette mode with local dual tree modetype definition
US20220301228A1 (en) * 2021-03-19 2022-09-22 Intel Corporation Variable width interleaved coding for graphics processing
WO2023198063A1 (en) * 2022-04-11 2023-10-19 Beijing Bytedance Network Technology Co., Ltd. Method, apparatus, and medium for video processing

Family Cites Families (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4011165B2 (ja) 1997-11-21 2007-11-21 泰和 楊 把手を備えたマウス
US7991237B2 (en) 2007-06-28 2011-08-02 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method and image decoding method
US9049444B2 (en) 2010-12-22 2015-06-02 Qualcomm Incorporated Mode dependent scanning of coefficients of a block of video data
US9167269B2 (en) * 2011-10-25 2015-10-20 Qualcomm Incorporated Determining boundary strength values for deblocking filtering for video coding
KR102169608B1 (ko) 2012-01-19 2020-10-23 삼성전자주식회사 인트라 예측 처리 속도 향상을 위한 비디오의 부호화 방법 및 장치, 비디오의 복호화 방법 및 장치
US9930362B2 (en) 2012-04-20 2018-03-27 Futurewei Technologies, Inc. Intra prediction in lossless coding in HEVC
GB2501535A (en) 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
US20130294524A1 (en) 2012-05-04 2013-11-07 Qualcomm Incorporated Transform skipping and lossless coding unification
US9549182B2 (en) 2012-07-11 2017-01-17 Qualcomm Incorporated Repositioning of prediction residual blocks in video coding
US20140029670A1 (en) * 2012-07-27 2014-01-30 Motorola Mobility Llc Devices and methods for processing of partition mode in high efficiency video coding
US9332257B2 (en) * 2012-10-01 2016-05-03 Qualcomm Incorporated Coded black flag coding for 4:2:2 sample format in video coding
AU2013344305A1 (en) 2012-11-08 2015-03-26 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding the transform units of a coding unit
WO2015005132A1 (ja) 2013-07-08 2015-01-15 ソニー株式会社 画像符号化装置および方法、並びに画像復号装置および方法
CN105379284B (zh) 2013-07-22 2020-02-21 瑞萨电子株式会社 动态图像编码装置及其动作方法
US10397607B2 (en) * 2013-11-01 2019-08-27 Qualcomm Incorporated Color residual prediction for video coding
CA2924501C (en) * 2013-11-27 2021-06-22 Mediatek Singapore Pte. Ltd. Method of video coding using prediction based on intra picture block copy
CA2935559C (en) 2014-01-02 2018-11-20 Vid Scale, Inc. Two-dimensional palette coding for screen content coding
CN105981385B (zh) 2014-01-02 2020-03-13 寰发股份有限公司 帧内预测编码方法及其装置
US9883197B2 (en) * 2014-01-09 2018-01-30 Qualcomm Incorporated Intra prediction of chroma blocks using the same vector
US20150271515A1 (en) * 2014-01-10 2015-09-24 Qualcomm Incorporated Block vector coding for intra block copy in video coding
KR102306336B1 (ko) 2014-03-03 2021-09-30 소니그룹주식회사 범위 확장에서의 강력한 내부 평활화
CN105359531B (zh) 2014-03-17 2019-08-06 微软技术许可有限责任公司 用于针对屏幕内容编码的编码器侧判定的方法和系统
US20150312573A1 (en) * 2014-03-17 2015-10-29 Nokia Technologies Oy Method and technical equipment for video encoding and decoding
US9860559B2 (en) 2014-03-17 2018-01-02 Mediatek Singapore Pte. Ltd. Method of video coding using symmetric intra block copy
WO2015180014A1 (en) * 2014-05-26 2015-12-03 Mediatek Singapore Pte. Ltd. An improved merge candidate list construction method for intra block copy
AU2014202921B2 (en) * 2014-05-29 2017-02-02 Canon Kabushiki Kaisha Method, apparatus and system for de-blocking a block of video samples
US10327001B2 (en) * 2014-06-19 2019-06-18 Qualcomm Incorporated Systems and methods for intra-block copy
US10623747B2 (en) 2014-06-20 2020-04-14 Hfi Innovation Inc. Method of palette predictor signaling for video coding
CN105491379A (zh) * 2014-10-01 2016-04-13 财团法人工业技术研究院 解码器、编码器、解码方法、编码方法与编解码系统
MX2017004467A (es) 2014-10-06 2017-12-14 Vid Scale Inc Codificacion de paleta mejorada para codificacion de contenido de pantalla.
US10057578B2 (en) 2014-10-07 2018-08-21 Qualcomm Incorporated QP derivation and offset for adaptive color transform in video coding
CN107079166A (zh) * 2014-10-28 2017-08-18 联发科技(新加坡)私人有限公司 用于视频编码的引导交叉分量预测的方法
US10051277B2 (en) * 2014-11-06 2018-08-14 Mediatek Inc. Method for sub-block based palette coding
US10382795B2 (en) * 2014-12-10 2019-08-13 Mediatek Singapore Pte. Ltd. Method of video coding using binary tree block partitioning
SG10202002209TA (en) * 2014-12-19 2020-04-29 Hfi Innovation Inc Methods of palette based prediction for non-444 color format in video and image coding
US10321140B2 (en) 2015-01-22 2019-06-11 Mediatek Singapore Pte. Ltd. Method of video coding for chroma components
US20160234494A1 (en) 2015-02-10 2016-08-11 Qualcomm Incorporated Restriction on palette block size in video coding
US10306240B2 (en) 2015-06-08 2019-05-28 Vid Scale, Inc. Intra block copy mode for screen content coding
US10148977B2 (en) * 2015-06-16 2018-12-04 Futurewei Technologies, Inc. Advanced coding techniques for high efficiency video coding (HEVC) screen content coding (SCC) extensions
US11146794B2 (en) * 2015-07-27 2021-10-12 Mediatek Inc. Method of system for video coding using intra block copy mode
EP3357245A4 (en) 2015-11-05 2019-03-13 MediaTek Inc. METHOD AND DEVICE OF INTERPRESSATION USING AN AVERAGE MOTION VECTOR FOR VIDEO CODING
US11032550B2 (en) 2016-02-25 2021-06-08 Mediatek Inc. Method and apparatus of video coding
US11223852B2 (en) 2016-03-21 2022-01-11 Qualcomm Incorporated Coding video data using a two-level multi-type-tree framework
US10567759B2 (en) * 2016-03-21 2020-02-18 Qualcomm Incorporated Using luma information for chroma prediction with separate luma-chroma framework in video coding
WO2017206805A1 (en) * 2016-05-28 2017-12-07 Mediatek Inc. Method and apparatus of palette mode coding for colour video data
CN109076210B (zh) * 2016-05-28 2021-04-09 联发科技股份有限公司 视频编解码方法和装置
US10609423B2 (en) * 2016-09-07 2020-03-31 Qualcomm Incorporated Tree-type coding for video coding
CN114245121A (zh) 2016-10-04 2022-03-25 有限公司B1影像技术研究所 图像数据编码/解码方法、介质和发送比特流的方法
WO2018070554A1 (ko) * 2016-10-10 2018-04-19 삼성전자 주식회사 루마 블록 및 크로마 블록을 부호화 또는 복호화하는 방법 및 장치
KR20180039323A (ko) * 2016-10-10 2018-04-18 디지털인사이트 주식회사 다양한 블록 분할 구조를 결합하여 사용하는 비디오 코딩 방법 및 장치
JP2020031252A (ja) * 2016-12-22 2020-02-27 シャープ株式会社 画像復号装置及び画像符号化装置
US10848788B2 (en) * 2017-01-06 2020-11-24 Qualcomm Incorporated Multi-type-tree framework for video coding
US11025903B2 (en) * 2017-01-13 2021-06-01 Qualcomm Incorporated Coding video data using derived chroma mode
EP3383045A1 (en) * 2017-03-27 2018-10-03 Thomson Licensing Multiple splits prioritizing for fast encoding
CN107071494B (zh) 2017-05-09 2019-10-11 珠海市杰理科技股份有限公司 视频图像帧的二进制语法元素的生成方法和系统
JP2021010046A (ja) 2017-10-06 2021-01-28 シャープ株式会社 画像符号化装置及び画像復号装置
US11689722B2 (en) 2018-04-02 2023-06-27 Sharp Kabushiki Kaisha Systems and methods for deriving quantization parameters for video blocks in video coding
US10834396B2 (en) * 2018-04-12 2020-11-10 Qualcomm Incorporated Bilateral filter for predicted video data
JP7279074B2 (ja) * 2018-04-19 2023-05-22 華為技術有限公司 ルマおよびクロマブロックパーティショニング
US11470346B2 (en) * 2018-05-09 2022-10-11 Sharp Kabushiki Kaisha Systems and methods for performing motion vector prediction using a derived set of motion vectors
US11477474B2 (en) * 2018-06-08 2022-10-18 Mediatek Inc. Methods and apparatus for multi-hypothesis mode reference and constraints
KR20210022617A (ko) 2018-06-21 2021-03-03 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 칼라 컴포넌트 간의 서브 블록 mv 상속
WO2020004987A1 (ko) 2018-06-27 2020-01-02 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
US20210329233A1 (en) 2018-07-14 2021-10-21 Mediatek Inc. Methods and Apparatuses of Processing Video Pictures with Partition Constraints in a Video Coding System
AU2018233042B2 (en) * 2018-09-21 2024-06-13 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding a tree of blocks of video samples
US10939118B2 (en) * 2018-10-26 2021-03-02 Mediatek Inc. Luma-based chroma intra-prediction method that utilizes down-sampled luma samples derived from weighting and associated luma-based chroma intra-prediction apparatus
CN109874011B (zh) * 2018-12-28 2020-06-09 杭州海康威视数字技术股份有限公司 编码方法、解码方法及装置
KR20240000610A (ko) 2019-01-15 2024-01-02 로즈데일 다이나믹스 엘엘씨 변환 스킵 플래그를 이용한 영상 코딩 방법 및 장치
AU2020237237B2 (en) * 2019-03-12 2022-12-22 Tencent America LLC Method and apparatus for color transform in VVC
WO2020219733A1 (en) 2019-04-24 2020-10-29 Bytedance Inc. Quantized residual differential pulse code modulation representation of coded video
CN113785306B (zh) * 2019-05-02 2024-06-14 字节跳动有限公司 基于编解码树结构类型的编解码模式
JP2022120213A (ja) * 2019-06-25 2022-08-18 株式会社Jvcケンウッド 画像復号装置、画像復号方法及び画像復号プログラム
US11330298B2 (en) * 2019-06-25 2022-05-10 Qualcomm Incorporated Simplified intra chroma mode coding in video coding
CN110381311B (zh) 2019-07-01 2023-06-30 腾讯科技(深圳)有限公司 视频帧的编码方法、装置、计算机可读介质及电子设备
US11399199B2 (en) * 2019-08-05 2022-07-26 Qualcomm Incorporated Chroma intra prediction units for video coding
EP3994886A4 (en) 2019-08-06 2022-12-28 Beijing Bytedance Network Technology Co., Ltd. VIDEO ZONE PARTITION ACCORDING TO COLOR FORMAT
MX2022001939A (es) 2019-08-15 2022-03-11 Beijing Dajia Internet Information Tech Co Ltd Restriccion del tama?o de los bloques de crominancia peque?os en la codificacion de video.
EP4044592A3 (en) 2019-08-23 2022-12-21 HFI Innovation Inc. Method and apparatus of partitioning small size coding units with partition constraints
MX2022002247A (es) 2019-09-02 2022-03-22 Beijing Bytedance Network Tech Co Ltd Particion de region de video basada en formato de color.
CN114731401A (zh) 2019-09-25 2022-07-08 Lg电子株式会社 基于颜色格式来确定分割模式的图像编码/解码方法和装置以及发送比特流的方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
JANGWON CHOI, ET AL.: ""Chroma block size restriction in dual tree intra coding"", DOCUMENT: JVET-O0398, [ONLINE], vol. JVET-O0398 (version 1), JPN6023038042, 26 June 2019 (2019-06-26), pages 1 - 4, XP030219454, ISSN: 0005154609 *
ZHI-YI LIN, ET AL.: ""CE3-2.1.1 and CE3-2.1.2: Removing 2x2, 2x4, and 4x2 chroma CBs"", DOCUMENT: JVET-O0050-V2, [ONLINE], vol. JVET-O0050 (version 2), JPN6023038043, 18 June 2019 (2019-06-18), pages 1 - 5, ISSN: 0005154608 *

Also Published As

Publication number Publication date
CN114208191B (zh) 2024-01-12
MX2022001244A (es) 2022-02-22
US11496736B2 (en) 2022-11-08
US11533483B2 (en) 2022-12-20
EP3994886A4 (en) 2022-12-28
WO2021023261A1 (en) 2021-02-11
CN114208189B (zh) 2024-01-16
EP3994889A4 (en) 2023-01-11
CN117241033A (zh) 2023-12-15
US20220159255A1 (en) 2022-05-19
EP3994886A1 (en) 2022-05-11
KR102601022B1 (ko) 2023-11-13
WO2021023262A1 (en) 2021-02-11
BR112022002006A2 (pt) 2022-03-29
CN114208191A (zh) 2022-03-18
EP3994889A1 (en) 2022-05-11
BR112022001981A2 (pt) 2022-05-10
JP2022543795A (ja) 2022-10-14
US20220167011A1 (en) 2022-05-26
MX2022001243A (es) 2022-02-17
US20220159254A1 (en) 2022-05-19
CN114208189A (zh) 2022-03-18
JP2024010175A (ja) 2024-01-23
CN114208195A (zh) 2022-03-18
KR20220038692A (ko) 2022-03-29
KR20220039721A (ko) 2022-03-29
US20240114133A1 (en) 2024-04-04
WO2021023258A1 (en) 2021-02-11

Similar Documents

Publication Publication Date Title
JP2022543796A (ja) カラーフォーマットに基づいたサイズ制限
JP7309046B2 (ja) カラーフォーマットに基づいたビデオ領域のパーティション
WO2021052494A1 (en) Size restriction based for chroma intra mode
JP7359936B2 (ja) パレットモードの使用の指示の条件依存符号化
JP2022531587A (ja) 符号化ツリー構造タイプに基づく符号化モード
WO2021204295A1 (en) Minimum allowed quantization for transform skip blocks in video coding
RU2811644C2 (ru) Разделение видеообласти на основе цветового формата

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220202

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220202

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230314

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230614

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230919

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240117

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20240129

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20240329