JP2022549607A - コーディング・ブロックのスケーリング・プロセス - Google Patents
コーディング・ブロックのスケーリング・プロセス Download PDFInfo
- Publication number
- JP2022549607A JP2022549607A JP2022517726A JP2022517726A JP2022549607A JP 2022549607 A JP2022549607 A JP 2022549607A JP 2022517726 A JP2022517726 A JP 2022517726A JP 2022517726 A JP2022517726 A JP 2022517726A JP 2022549607 A JP2022549607 A JP 2022549607A
- Authority
- JP
- Japan
- Prior art keywords
- chroma
- video
- block
- current block
- transform
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 268
- 230000008569 process Effects 0.000 title claims description 50
- 241000023320 Luma <angiosperm> Species 0.000 claims abstract description 105
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 claims abstract description 105
- 238000012545 processing Methods 0.000 claims abstract description 55
- 238000000638 solvent extraction Methods 0.000 claims description 33
- 230000009466 transformation Effects 0.000 claims description 23
- 238000003672 processing method Methods 0.000 claims description 20
- 238000006243 chemical reaction Methods 0.000 claims description 18
- 238000004590 computer program Methods 0.000 claims description 16
- 230000015654 memory Effects 0.000 claims description 8
- 238000009795 derivation Methods 0.000 claims description 7
- 230000002123 temporal effect Effects 0.000 claims description 5
- 230000003044 adaptive effect Effects 0.000 claims description 4
- 239000011449 brick Substances 0.000 claims description 3
- 238000013507 mapping Methods 0.000 abstract description 25
- 230000033001 locomotion Effects 0.000 description 67
- 238000013139 quantization Methods 0.000 description 20
- 230000006870 function Effects 0.000 description 18
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 17
- 239000013598 vector Substances 0.000 description 17
- 238000005192 partition Methods 0.000 description 16
- 238000010586 diagram Methods 0.000 description 12
- 230000011664 signaling Effects 0.000 description 10
- 230000006835 compression Effects 0.000 description 7
- 238000007906 compression Methods 0.000 description 7
- 230000001419 dependent effect Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 239000011159 matrix material Substances 0.000 description 5
- 230000009977 dual effect Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000001902 propagating effect Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 230000001131 transforming effect Effects 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- 101150114515 CTBS gene Proteins 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013178 mathematical model Methods 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/96—Tree coding, e.g. quad-tree coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Description
[0001] パリ条約の下で適用可能な特許法及び/又は規則に基づき、本願は2019年9月20日付で出願された国際特許出願第PCT/CN2019/106925号の優先権及び利益を適時に主張するように行われている。法に基づく全ての目的に関し、前述の出願の開示全体が本願の開示の一部として参照により援用される。
[0002] 本件明細書はビデオ符号化及び復号化に関連する。
前記決定に基づいて前記変換を実行するステップを含む。
前記決定に基づいて前記変換を実行するステップを含む。
前記決定に基づいて前記変換を実行するステップを含む。
[0037] 本明細書はビデオ・コーディング技術に関連する。具体的には、ビデオ・コーディングにおけるクロマ・スケーリングに関連している。これは、HEVCのような既存のビデオ・コーディング規格、又はファイナライズされる予定の規格(汎用ビデオ・コーディング)に適用される可能性がある。
[0038] ビデオ・コーディング規格は、主に、周知のITU-T及びISO/IEC規格の開発を通じて発展してきた。ITU-TはH.261とH.263を作成し、ISO/IECはMPEG-1とMPEG-4 Visualを作成し、2つの組織は共同してH.262/MPEG-2ビデオとH.264/MPEG-4アドバンスト・ビデオ・コーディング(AVC)とH.265/HEVC規格とを作成した。H.262以来、ビデオ・コーディング規格はハイブリッド・ビデオ・コーディング構造に基づいており、そこでは時間的予測と変換コーディングが使用される。HEVCを越える将来のビデオ・コーディング技術を探求するため、2015年に共同ビデオ探査チーム(Joint Video Exploration Team,JVET)がVCEGとMPEGにより共同で設立された。それ以来、多くの新しい方法がJVETによって採用されており、共同探索モデル(Joint Exploration Model,JEM)と名付けられる参照ソフトウェアに組み込まれている。2018年4月には、VCEG(Q6/16)とISO/IEC JTC1 SC29/WG11(MPEG)の間で共同ビデオ・エキスパート・チーム(JVET)が発足され、HEVCと比較して50%のビットレート低減を目指すVVC規格に取り組んでいる。
[0040]http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/15_Gothenburg/wg11/JVET-O2001-v14.zip
[0041] VVCの最新リファレンス・ソフトウェア、即ちVTMについては以下を参照されたい:
[0042]https://vcgit.hhi.fraunhofer.de/jvet/VVCSoftware_VTM/tags/VTM-2.1
2.1 典型的なビデオ・コーデックのコーディング・フロー
[0043] 図1は、3つのループ内フィルタリング・ブロック:デブロッキング・フィルタ(DF)、サンプル適応オフセット(SAO)、及びALFを含むVVCのエンコーダ・ブロック図の例を示す。予め定義されたフィルタを使用するDFとは異なり、オフセットとフィルタ係数をシグナリングするコーディングされたサイド情報を用いて、SAO及びALFはそれぞれ、オフセットを追加することにより、及び有限インパルス応答(FIR)フィルタを適用することにより、元のサンプルと再構成されたサンプルとの間の平均二乗誤差を減少させるために、現在の画像の元のサンプルを使用する。ALFは、各ピクチャの最終処理ステージに位置し、前のステージで生成されたアーチファクトを捕捉して修復しようとするツールと見なすことができる。
[0044] 色空間は、カラー・モデル(又はカラー・システム)としても知られており、これは単に色の範囲を数字のタプルとして、典型的には3つ又は4つの値又は色成分(例えば、RGB)としてシンプルに記述する抽象的な数学モデルである。基本的には、色空間は座標系とサブ空間の精緻化である。
[0048] 3つのY’CbCr成分はそれぞれ同じサンプル・レートを有するので、クロマ・サブサンプリングは行わない。この方式は、ハイ・エンドのフィルム・スキャナや映画ポスト・プロダクションでしばしば使用される。
[0049] 2つのクロマ成分はルマのサンプル・レートの半分でサンプリングされる:水平クロマ分解能は半分になる。これは、圧縮されていないビデオ信号の帯域幅を3分の1減らし、視覚的な差異はほとんどないか、全くない。
[0050] 4:2:0では、水平サンプリングは4:1:1と比較して2倍にされるが、この方式ではCbとCrチャネルは各々交互のラインでサンプリングされるのみであり、垂直解像度は半分になる。従って、データ・レートは同じである。CbとCrは、それぞれ水平方向と垂直方向の両方の2の因子でサブサンプリングされる。4:2:0方式の3つのバリエーションがあり、異なる水平及び垂直位置を有する。
・ MPEG-2では、CbとCrは水平方向に同じ場所に配置される。CbとCrは垂直方向のピクセル間に位置する(格子状に位置する)。
・ JPEG/JFIF、H.261、MPEG-1では、CbとCrは交互のルマ・サンプルの間で格子状に半分ずつ配置される。
・ 4:2:0 DVでは、CbとCrが水平方向に同じ場所に配置される。垂直方向では、それらは交互のライン上で同じ場所に配置される。
2.3.1. ツリー構造を用いるCTUのパーティショニング
[0051] HEVCでは、様々な局所特性に適応するために、コーディング・ツリーとして示される四分木構造を使用することによって、CTUはCUに分割される。インター・ピクチャ(時間的)又はイントラ・ピクチャ(空間的)予測を使用してピクチャ・エリアをコーディングするかどうかの決定は、リーフCUレベルで行われる。各リーフCUは、PU分割タイプに応じて、1つ、2つ、又は4つのPUに更に分割されることが可能である。1つのPU内では、同じ予測プロセスが適用され、関連情報はPUベースでデコーダへ伝送される。PU分割タイプに基づいて予測プロセスを適用することによって残差ブロックを取得した後に、リーフCUは、CUのコーディング・ツリーに類似する別の四分木構造に従って、変換ユニット(TU)にパーティション化されることが可能である。HEVC構造の重要な特徴の1つは、CU、PU、及びTUを含む複数のパーティション概念を有することである。
- CTU size:四分木のルート・ノード・サイズ
- MinQTSize:最小許容四分木リーフ・ノード・サイズ
- MaxBtSize:最大許容二分木ルート・ノード・サイズ
- MaxTtSize:最大許容三分木ルート・ノード・サイズ
- MaxMttDepth:四分木リーフから分割するマルチ・タイプ・ツリーの最大許容階層深度
- MinBtSize:最小許容二分木リーフ・ノード・サイズ
- MinTtSize:最小許容三分木リーフ・ノード・サイズ
[0058] ネスト化されたマルチ・タイプ・ツリー・コーディングのツリー構造を利用する四分木の一例において、CTUサイズは128×128ルマ・サンプルに設定され、4:2:0のクロマ・サンプルの2つの対応する64×64ブロックを伴い、MinQTSizeは16×16に設定され、MaxBtSizeは128×128に設定され、MaxTtSizeは64×64に設定され、MinBtSizeとMinTtSize(幅と高さの両方に対して)は4×4に設定され、MaxMttDepthは4に設定される。四分木パーティション化が最初にCTUに適用され、四分木リーフ・ノードを生成する。四分木リーフ・ノードは、16×16(即ち、MinQTSize)から128×128(即ち、CTUサイズ)までのサイズを有する可能性がある。リーフQTノードが128×128である場合、サイズがMaxBtSizeとMaxTtSize(即ち、64×64)を超えるので、二分木によって更には分割されない。そうでない場合、リーフ四分木ノードは、マルチ・タイプ・ツリーによって更に分割されることが可能である。従って、四分木リーフ・ノードはマルチ・タイプ・ツリーのルート・ノードでもあり、マルチ・タイプ・ツリー深度(mttDepth)を0として有している。マルチ・タイプ・ツリー深度がMaxMttDepth(即ち、4)に到達した場合、それ以上の分割は考慮されない。マルチ・タイプ・ツリー・ノードが、MinBtSizeに等しく、2*MinTtSize以下の幅を有する場合、更なる水平分割は考慮されない。同様に、マルチ・タイプ・ツリー・ノードが、MinBtSizeに等しく、2*MinTtSize以下の高さを有する場合、更なる垂直分割は考慮されない。
[0061] 仮想パイプライン・データ・ユニット(VPDU)は、ピクチャ内の重複しないユニットとして定義される。ハードウェア・デコーダでは、連続するVPDUは複数のパイプライン・ステージよって同時に処理される。VPDUサイズはほとんどのパイプライン・ステージにおいてバッファ・サイズに概ね比例するので、VPDUサイズを小さく保つことは重要である。ほとんどのハードウェア・デコーダでは、VPDUサイズは最大変換ブロック(TB)サイズに設定することができる。しかしながら、VVCでは、三分木(TT)と二分木 (BT)パーティションが、VPDUサイズを増やすことにつながる可能性がある。
- 幅又は高さの何れか、又は幅と高さの両方が128に等しいCUに対してTT分割は許可されない。
- N≦64である128×NのCUでは(即ち、幅が128であり、高さが128未満である)、水平BTは許可されない。
- N≦64であるN×128のCUでは(即ち、高さが128であり、幅が128未満である)、垂直BTは許可されない。
[0064] VTM6では、クロマ・スケーリングによるルマ・マッピング(LMCS)と呼ばれるコーディング・ツールが、ループ・フィルタの前に新しい処理ブロックとして追加される。LMCSは、1)適応区分線型モデルに基づくルマ成分のループ内マッピング;2)クロマ成分に対して、ルマ依存クロマ残差スケーリングが適用される、という2つの主要な構成要素を有する。
[0066] ルマ成分のループ内マッピングは、圧縮効率を改善するために、ダイナミック・レンジにわたってコードワードを再配分することによって、入力信号のダイナミック・レンジを調整する。ルマ・マッピングは、フォワード・マッピング関数FwdMapと、対応する逆マッピング関数InvMapとを利用する。FwdMap関数は、16個の等しい区間を用いる区分線型モデルを使用してシグナリングされる。InvMap関数は、シグナリングされることを必要とせず、その代わりにFwdMap関数から導出される。
FwdMap(Ypred)=FwdMapLUT[Ypred] 及び
InvMapLUT(Yr)=InvMapLUT[Yr]
のようにシンプルに実装することができる。あるいは、オン・ザ・フライ演算が使用されてもよい。順方向マッピング関数FwdMapを例にとると、ルマ・サンプルが所属する部分を解明するために、サンプル値は6ビットだけ右にシフトされる(これは、16等分に相当する)。次いで、その部分の線型モデル・パラメータが検索され、オン・ザ・フライで適用されて、マッピングされたルマ値を演算する。iをピース・インデックスとし、a1,a2をそれぞれInputPivot[i]及びInputPivot[i+1]とし、b1,b2をそれぞれMappedPivot[i]及び MappedPivot[i+1]とする。FwdMap関数は次のように評価される:
FwdMap(Ypred) = ((b2 - b1)/(a2 - a1))*(Ypred - a1) + b1
[0071] InvMap関数は同様の方法でオン・ザ・フライで計算することが可能であるが、ただし、サンプル値が所属する部分を解明する場合に、単純な右ビット・シフトではなく、条件付きチェックが適用されることを必要とし、なぜならマッピングされたドメインにおけるピースは等しいサイズではないからである。
[0072] クロマ残差スケーリングは、ルマ信号と対応するクロマ信号との間の相互作用を補償するように設計される。クロマ残差スケーリングがイネーブルにされるかどうかは、スライス・レベルでもシグナリングされる。ルマ・マッピングがイネーブルにされ、デュアル・ツリー・パーティション(セパレート・クロマ・ツリーとしても知られている)が現在のスライスに適用されていない場合には、ルマ依存のクロマ残差スケーリングがイネーブルにされているかどうかを示すために、追加のフラグがシグナリングされる。ルマ・マッピングが使用されない場合、又は現在のスライスでデュアル・ツリー・パーティションが使用される場合、ルマ依存クロマ残差スケーリングはディセーブルにされる。更に、ルマ依存クロマ残差スケーリングは、面積が4以下のクロマ・ブロックについては常にディセーブルにされる。
1) avgY’が所属する区分線型モデルのインデックスYIdxを、InvMap関数に基づいて見出す。
[0075] VVCドラフト6は、クロマ残差が一緒にコーディングされるモードをサポートする。ジョイント・クロマ・コーディング・モードの使用(アクティベーション)はTUレベルのフラグtu_joint_cbcr_residual_flagによって指定され、選択されるモードはクロマCBFにより暗黙に指定される。TUに対するクロマCBFの何れか又は双方が1に等しい場合に、フラグtu_joint_cbcr_residual_flagが存在する。正規のクロマ残差コーディング・モードに対してシグナリングされる通常のクロマQPオフセット値と区別するために、PPS及びスライス・ヘッダにおいて、クロマQPオフセット値が、ジョイント・クロマ残差コーディング・モードのためにシグナリングされる。これらのクロマQPオフセット値は、ジョイント・クロマ残差コーディング・モードを用いてコーディングされるこれらのブロックについて、クロマQP値を導出するために使用される。対応するジョイント・クロマ・コーディング・モード(表3のモード2)がTU内でアクティブである場合、このクロマQPオフセットは、そのTUの量子化及び復号化の間に、適用されるルマ導出クロマQPに追加される。他のモードでは(表3表2-2におけるモード1及び3:クロマ残差の再構成.値CSignはスライス・ヘッダで指定される符号値(+1又は-1)であり、resJointC[][]は送信された残差である)、クロマQPは従来のCb又はCrブロックに対するものと同様な方法で導出される。送信された変換ブロックからのクロマ残差(resCb及びresCr)の再構成プロセスは表3に示されている。このモードが起動されると、1つの単独のジョイント・クロマ残差ブロック(表3におけるresJointC[x][y])がシグナリングされ、Cb(resCb)の残差ブロック及びCr(resCr)の残差ブロックは、tu_cbf_cb, tu_cbf_cr,及びCSignのような、スライス・ヘッダで指定される符号値である情報を考慮して導出される。
- モードが2に等しい場合(再構成を利用する単一残差 Cb = C, Cr = CSign * C)、ジョイント残差は、以下に従って決定される:
resJointC[ x ][ y ] = ( resCb[ x ][ y ] + CSign * resCr[ x ][ y ] ) / 2.
- それ以外の場合、モードが1に等しい場合(再構成を利用する単一残差 Cb = C, Cr = (CSign * C) / 2)、ジョイント残差は、以下に従って決定される:
resJointC[ x ][ y ] = ( 4 * resCb[ x ][ y ] + 2 * CSign * resCr[ x ][ y ] ) / 5.
- それ以外の場合(モードは3に等しい。即ち、単独の残差、再構成 Cr = C, Cb = (CSign * C) / 2)、ジョイント残差は、以下に従って決定される:
resJointC[ x ][ y ] = ( 4 * resCr[ x ][ y ] + 2 * CSign * resCb[ x ][ y ] ) / 5.
表2-2:クロマ残差の再構成。値CSignはスライス・ヘッダで指定される符号値(+1又は-1)であり、resJointC[][]は送信された残差である。
tu_joint_cbcr_residual_flag[ x0 ][ y0 ]は、クロマ成分Cb とCr双方の残差サンプルが、単一の変換ブロックとしてコーディングされるかどうかを指定する。配列インデックスx0,y0は、ピクチャの左上ルマ・サンプルに対する、考察対象の変換ブロックの左上ルマ・サンプルの位置(x0,y0)を指定する。
- tu_joint_cbcr_residual_flag[ x0 ][ y0 ]が0に等しい場合、変数TuCResMode[ x0 ][ y0 ]は0に等しく設定される;
- それ以外の場合、tu_cbf_cb[ x0 ][ y0 ]が1に等しく、tu_cbf_cr[ x0 ][ y0 ]が0に等しいならば、変数TuCResMode[ x0 ][ y0 ]は1に等しく設定される;
- それ以外の場合、tu_cbf_cb[ x0 ][ y0 ]が1に等しいならば、変数TuCResMode[ x0 ][ y0 ]は2に等しく設定される;
- それ以外の場合、変数TuCResMode[ x0 ][ y0 ]は3に等しく設定される。
8.7.2. スケーリング&変換プロセス
4. 変換サンプルresSamples[ x ][ y ], x = 0..nTbW - 1, y = 0..nTbH - 1は、次のようにして導出される:
- cIdxがcodedCIdxに等しい場合、以下が適用される:
resSamples[ x ][ y ] = res[ x ][ y ] (8-947)
- それ以外の場合、TuCResMode[ xTbY ][ yTbY ]が2に等しいならば、以下が適用される:
resSamples[ x ][ y ] = cSign * res[ x ][ y ] (8-948)
- それ以外の場合、以下が適用される:
resSamples[ x ][ y ] = ( cSign * res[ x ][ y ] ) >> 1 (8-949)
2.6. 変換
[0077] 一次変換及び二次変換を含む2レベル変換が、1つの変換ブロックに適用される可能性がある。
2.6.1.1 明示的な多重変換セット(MTS)
[0081] VTM4では、64×64までのサイズの大きなブロック・サイズの変換が可能にされており、これは主に高解像度ビデオ、例えば1080p及び4Kシーケンスに有用である。高周波変換係数は、サイズ(幅又は高さ、或いは幅及び高さの両方)が64に等しい変換ブロックに対してゼロ出力化され、その結果、低周波係数のみが維持される。例えば、M×N変換ブロックの場合、Mをブロック幅、Nをブロック高さとして、Mが64に等しい場合、変換係数の左32列のみが維持される。同様に、Nが64に等しい場合、変換係数の上位32行のみが維持される。大きなブロックに対して変換スキップ・モードが使用される場合、如何なる値もゼロ出力化されることなく、ブロック全体が使用される。
- CBFフラグが1に等しいこと
[0085] MTS CUフラグがゼロに等しい場合、DCT2が両方向に適用される。しかしながら、MTS CUフラグが1に等しいならば、2つの他のフラグが水平方向と垂直方向のそれぞれについて変換タイプを示すために追加的にシグナリングされる。変換及びシグナリング・マッピング・テーブルは、表2-4に示されるようなものである。変換行列の精度については、8ビットの一次変換コアが使用される。従って、4点DCT-2及びDST-7、8点DCT-2、16点DCT-2、32点DCT-2を含むHEVCで使用される全ての変換コアは同じに保たれる。また、64点DCT-2、4点DCT-8、8点DCT-8、16点DST-7、32点DCT-8を含む他の変換コアは、8ビット一次変換コアを使用する。
[0088] JEMでは、二次変換は、(エンコーダでは)フォワード一次変換と量子化の間、及び(デコーダでは)量子化解除と逆一次変換の間で適用される。図8に示すように、4×4(又は8×8)の二次変換は、ブロック・サイズに依存して実行される。例えば、4×4二次変換は、小さなブロック(i.e., min (width, height) < 8)に適用され、より大きなブロック(i.e., min (width, height) > 4)については、8×8二次変換が8×8ブロック毎に適用される(widthは幅であり、heightは高さである)。
[0094] 現行のVVCにおける復号化の順序は図10に示されている。
[0095] 現在の設計は次のような問題を含む:
1. 現在の復号順序は2つの欠点を含む:
a. 1つには、クロマ残差スケーリング・プロセスが、2つのクロマ・ブロックの各々に、たとえそれがJCCRコーディングされている場合でさえ適用され、それは演算量の無駄である。
[0096] 以下の詳細な発明は、一般的な概念を説明するための例示として考察されるべきである。これらの発明は狭義に解釈されるべきではない。更に、これらの発明は任意の方法で組み合わせることができる。
Shift(x, s) = (x + off) >> s, ここで、変数offは0には等しくない整数であり、例えば、1<<(s-1)に設定される。
a. 一例では、LMCSにおけるクロマ残差スケーリング・プロセスは、同じ変換ユニット内の2つのクロマ・カラー成分に対応する2つのクロマ・ブロックのうちの1つに適用されるだけである。
ii. 代替的に、更に、必要に応じて、逆量子化及び逆変換が最初に第1カラー成分に適用され;次いで、必要に応じて、クロマ残差スケーリングを第1カラー成分に適用して、第1カラー成分の最終残差を導出し;最後に、JCCRを第1カラー成分の最終残差に適用して、第2カラー成分の残差を導出する。
[0136] 幾つかの例では、動き推定ユニット204は、デコーダの復号化処理のための動き情報の完全なセットを出力することができる。
ルマ・ブロックと、第1クロマ・ブロックと、第2クロマ・ブロックとを含む現在の領域に関し、ビデオの前記現在の領域と前記ビデオのビットストリーム表現との間の変換を、復号化の間に前記第1クロマ・ブロックと前記第2クロマ・ブロックとが前記ルマ・ブロックのマッピングされた値に基づいて処理される順序を規定するルールに従って実行するステップを含む方法。
[ -( 1 << BitDepthC ), ( 1 << BitDepthC ) - 1 ]
のように決定されており、BitDepthCは前記第2クロマ・カラー成分の前記ビット深度である。
Shift(x, t) = (x + off) >> s
のように規定され、xは入力であり、sはスケーリング因子であり、offはゼロでない整数である。
ルマ・ブロックと、第1クロマ・ブロックと、第2クロマ・ブロックとを含む現在の領域に関し、ビデオの前記現在の領域と前記ビデオのビットストリーム表現との間の変換を実行するステップを含み、前記変換はクロマ残差のジョイント・コーディング(JCCR)処理を含み、前記第1クロマ・ブロックと前記第2クロマ・ブロックはそれぞれ前記ビデオの第1クロマ・カラー成分と前記ビデオの第2クロマ・カラー成分に対応し、前記JCCR処理は、前記第1クロマ・カラー成分の値に対応する入力と前記第2クロマ・カラー成分の導出された値に対応する出力とによるシフト演算を使用する、残差又は係数のスケーリング・プロセスを含む。
Shift(x, t) = (x + off) >> s
のように規定され、xは前記入力であり、sは前記スケーリング因子であり、offはゼロでない整数である。
ビデオの現在のブロックと前記ビデオのビットストリーム表現との間の変換に関し、垂直二分木パーティショニングが前記現在のブロックに適用可能であるかどうかを、前記現在のブロックのサイズと、前記現在のブロックに設定された仮想パイプライン・データ・ユニット(VPDU)のサイズ(VpduSizeと記す)と、前記現在のブロックに設定された変換ブロックの最大サイズ(MaxTbSizeと記す)とに基づいて決定するステップ;及び
前記決定に基づいて前記変換を実行するステップ;
を含む方法。
ビデオの現在のブロックと前記ビデオのビットストリーム表現との間の変換に関し、水平二分木パーティショニングが前記現在のブロックに適用可能であるかどうかを、前記現在のブロックのサイズと、前記現在のブロックに設定された仮想パイプライン・データ・ユニット(VPDU)のサイズ(VpduSizeと記す)と、前記現在のブロックに設定された変換ブロックの最大サイズ(MaxTbSizeと記す)とに基づいて決定するステップ;及び
前記決定に基づいて前記変換を実行するステップ;
を含む方法。
ビデオの現在のブロックと前記ビデオのビットストリーム表現との間の変換に関し、垂直三分木パーティショニングが前記現在のブロックに適用可能であるかどうかを、前記現在のブロックのサイズと、前記現在のブロックに設定された仮想パイプライン・データ・ユニット(VPDU)のサイズ(VpduSizeと記す)と、前記現在のブロックに設定された変換ブロックの最大サイズ(MaxTbSizeと記す)と、前記現在のブロックに設定された最大三分木サイズ(maxTtSizeと記す)とに基づいて決定するステップ;及び
前記決定に基づいて前記変換を実行するステップ;
を含む方法。
ビデオの現在のブロックと前記ビデオのビットストリーム表現との間の変換に関し、水平三分木パーティショニングが前記現在のブロックに適用可能であるかどうかを、前記現在のブロックのサイズと、前記現在のブロックに設定された仮想パイプライン・データ・ユニット(VPDU)のサイズ(VpduSizeと記す)と、前記現在のブロックに設定された変換ブロックの最大サイズ(MaxTbSizeと記す)と、前記現在のブロックに設定された最大三分木サイズ(maxTtSizeと記す)とに基づいて決定するステップ;及び
前記決定に基づいて前記変換を実行するステップ;
を含む方法。
ビデオのクロマ・ブロックと前記ビデオのビットストリーム表現との間の変換を実行するステップを含み、前記クロマ・ブロックの残差は、スケーリング因子は特定のルマ領域の情報にアクセスすることなく決定されることを規定しているルールに従って決定されるスケーリング因子によってスケーリングされる、方法。
クロマ・コーディング・ユニット(CU)を含む現在のブロックに関し、ビデオの前記現在のブロックと前記ビデオのビットストリーム表現との間の変換をルールに従って実行するステップを含み、前記ルールは、前記クロマCUの複数のクロマ・サンプルの残差に適用される複数のスケーリング因子の導出方法を規定しており、前記導出方法は、前記変換に関して前記クロマCUが複数の変換ユニット(TU)に更に分割されるかどうかに依存していない。
クロマ・コーディング・ユニット(CU)を含む現在のブロックに関し、ビデオの前記現在のブロックと前記ビデオのビットストリーム表現との間の変換をルールに従って実行するステップを含み、前記ルールは、前記クロマCUが複数の変換ユニット(TU)に分割される場合に、クロマ残差スケーリング処理がイネーブルにされるかどうかを規定している。
[0001] 本願は2020年9月21日付で出願された国際特許出願第PCT/CN2020/116471号に基づいており、同出願は2019年9月20日付で出願された国際特許出願第PCT/CN2019/106925号の優先権及び利益を主張するものである。上記の全ての特許出願は全体的に参照により参照により本件に援用される。
Claims (28)
- ビデオ処理方法であって、
クロマ・コーディング・ユニット(CU)を含む現在のブロックに関し、ビデオの前記現在のブロックと前記ビデオのビットストリーム表現との間の変換をルールに従って実行するステップを含み、前記ルールは、前記クロマCUの複数のクロマ・サンプルの残差に適用される複数のスケーリング因子の導出方法を規定しており、前記導出方法は、前記変換に関して前記クロマCUが複数の変換ユニット(TU)に更に分割されるかどうかに依存していない、方法。 - 請求項1に記載の方法において、前記複数のスケーリング因子は、前記クロマCUが複数の変換ユニット(TU)に分割されるかどうかによらず同じであることを、前記ルールは規定している、方法。
- 請求項1に記載の方法において、前記複数のスケーリング因子各々の導出方法は、前記クロマCUが複数の変換ユニット(TU)に分割されるかどうかによらず、ルマの再構築されたサンプルの同じセットに基づいていることを、前記ルールは規定している、方法。
- 請求項1に記載の方法において、前記複数のスケーリング因子各々の導出方法は、前記クロマCUに対応するルマCUの部分ではないルマの再構築されたサンプルの同じセットに基づいていることを、前記ルールは規定している、方法。
- ビデオ処理方法であって、
クロマ・コーディング・ユニット(CU)を含む現在のブロックに関し、ビデオの前記現在のブロックと前記ビデオのビットストリーム表現との間の変換をルールに従って実行するステップを含み、前記ルールは、前記クロマCUが複数の変換ユニット(TU)に分割される場合に、クロマ残差スケーリング処理がイネーブルにされるかどうかを規定している、方法。 - 請求項5に記載の方法において、前記ルールは、前記クロマ残差スケーリング処理が、複数のTUのサブセットに適用されることを規定している、方法。
- 請求項6に記載の方法において、前記複数のTUのサブセットは、前記クロマCUのトップ・バウンダリにあるTUを含む、方法。
- 請求項5に記載の方法において、前記ルールは、前記クロマ残差スケーリング処理がディセーブルにされることを規定している、方法。
- 請求項1乃至8のうちの何れか一項に記載の方法において、前記ルールは、前記クロマCUのサイズは、最大変換ブロック(TB)のサイズより大きいことを更に規定している、方法。
- 請求項1乃至9のうちの何れか一項に記載の方法において、前記ルールの適法の指示は、前記ビットストリーム表現でシグナリングされる、方法。
- 請求項10に記載の方法において、前記指示は、タイル・レベル、ブリック・レベル、スライス・レベル、ピクチャ・レベル、サブ・ピクチャ・レベル、シーケンス・レベル、又はビュー・レベルでシグナリングされる、方法。
- 請求項10に記載の方法において、前記指示は、シーケンス・パラメータ・セット(SPS)、ビュー・パラメータ・セット、適応パラメータ・セット(APS)、ピクチャ・パラメータ・セット(PPS)、ピクチャ・ヘッダ、又はスライス・ヘッダでシグナリングされる、方法。
- 請求項1乃至9のうちの何れか一項に記載の方法において、前記ルールの適用は、前記ビットストリーム表現における1つ以上のシンタックス要素に基づいている、方法。
- 請求項13に記載の方法において、前記ルールの適用は、クロマ残差のジョイント・コーディング(JCCR)処理がイネーブルにされるかどうかに基づいており、前記1つ以上のシンタックス要素はsps_joint_cbcr_enabled_flagを含む、方法。
- 請求項13に記載の方法において、前記ルールの適用は、前記ビデオの双方のクロマ成分の同等位置の残差サンプルが、反転した符号を有するかどうかに基づいており、前記1つ以上のシンタックス要素はslice_joint_cbcr_sign_flagを含む、方法。
- 請求項13に記載の方法において、前記ルールの適用は、前記現在のブロックがインター・モードでコーディングされるかどうかに基づいている、方法。
- 請求項1乃至9のうちの何れか一項に記載の方法において、前記ルールの適用は、前記現在のブロック又は隣接するブロックのコーディング情報に基づいている、方法。
- 請求項17に記載の方法において、前記コーディング情報は、ブロック寸法、スライス・タイプ、ピクチャ・タイプ、テンポラル・レイヤ・インデックス、ビデオの内容、ビデオのカラー成分、現在のブロックのパーティショニング・ツリー・タイプ、コーディング・モード、又は変換情報のうちの少なくとも1つを含む、方法。
- 請求項17又は18に記載の方法において、前記ルールは、前記現在のブロックの幅がT1以下であるか、又は前記現在のブロックの高さがT2以下である場合に適用され、T1及びT2は整数閾値である、方法。
- 請求項17又は18に記載の方法において、前記ルールは、前記現在のブロックの幅と前記現在のブロックの高さの積がT3以下である場合に適用され、T3は整数閾値である、方法。
- 請求項17又は18に記載の方法において、前記ルールの適用は、前記現在のブロックが、Kに等しいクロマ残差のジョイント・コーディング(JCCR)モードでコーディングされるかどうかに基づいており、Kは整数である、方法。
- 請求項21に記載の方法において、K=2である、方法。
- 請求項21に記載の方法において、K≠2である、方法。
- 請求項1乃至23のうちの何れか一項に記載の方法において、前記変換を実行するステップは、前記ビットストリーム表現を、前記現在のブロックから生成するステップを含む、方法。
- 請求項1乃至23のうちの何れか一項に記載の方法において、前記変換を実行するステップは、前記現在のブロックを、前記ビットストリーム表現から生成するステップを含む、方法。
- プロセッサと命令を有する非一時的なメモリとを含むビデオ・システムにおける装置であって、前記命令は、前記プロセッサにより実行されると、請求項1乃至25のうちの何れか一項に記載されている方法を前記プロセッサに実行させる、装置。
- 非一時的なコンピュータ読み取り可能な媒体に記憶されたコンピュータ・プログラムであって、前記コンピュータ・プログラムは、請求項1乃至25のうちの何れか一項に記載されている方法を実行するためのプログラム・コードを含む、コンピュータ・プログラム。
- 請求項1乃至25のうちの何れか一項に記載されている方法に従って生成されるビットストリーム表現を記憶するコンピュータ読み取り可能な媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023201679A JP2024028787A (ja) | 2019-09-20 | 2023-11-29 | コーディング・ブロックのスケーリング・プロセス |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNPCT/CN2019/106925 | 2019-09-20 | ||
CN2019106925 | 2019-09-20 | ||
PCT/CN2020/116471 WO2021052493A1 (en) | 2019-09-20 | 2020-09-21 | Scaling process for coding block |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023201679A Division JP2024028787A (ja) | 2019-09-20 | 2023-11-29 | コーディング・ブロックのスケーリング・プロセス |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022549607A true JP2022549607A (ja) | 2022-11-28 |
JP7479456B2 JP7479456B2 (ja) | 2024-05-08 |
Family
ID=74883709
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022517727A Active JP7479457B2 (ja) | 2019-09-20 | 2020-09-21 | ビデオ・データを処理する方法、装置及び記憶媒体 |
JP2022517726A Active JP7479456B2 (ja) | 2019-09-20 | 2020-09-21 | ビデオ・データ処理方法及び装置並びに記憶媒体及び方法 |
JP2023201679A Pending JP2024028787A (ja) | 2019-09-20 | 2023-11-29 | コーディング・ブロックのスケーリング・プロセス |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022517727A Active JP7479457B2 (ja) | 2019-09-20 | 2020-09-21 | ビデオ・データを処理する方法、装置及び記憶媒体 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023201679A Pending JP2024028787A (ja) | 2019-09-20 | 2023-11-29 | コーディング・ブロックのスケーリング・プロセス |
Country Status (6)
Country | Link |
---|---|
US (3) | US11716491B2 (ja) |
EP (2) | EP4014502A4 (ja) |
JP (3) | JP7479457B2 (ja) |
KR (2) | KR20220065758A (ja) |
CN (3) | CN117596400A (ja) |
WO (2) | WO2021052493A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7479457B2 (ja) | 2019-09-20 | 2024-05-08 | 北京字節跳動網絡技術有限公司 | ビデオ・データを処理する方法、装置及び記憶媒体 |
US20210314567A1 (en) * | 2020-04-04 | 2021-10-07 | Qualcomm Incorporated | Block partitioning for image and video coding |
WO2023219290A1 (ko) * | 2022-05-13 | 2023-11-16 | 현대자동차주식회사 | 크로마 성분별 인트라 예측모드의 부호화를 위한 방법 및 장치 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019194463A1 (ko) * | 2018-04-01 | 2019-10-10 | 엘지전자 주식회사 | 영상의 처리 방법 및 이를 위한 장치 |
WO2020018267A1 (en) * | 2018-07-17 | 2020-01-23 | Futurewei Technologies, Inc. | Constrained coding tree for video coding |
WO2020197996A1 (en) * | 2019-03-22 | 2020-10-01 | Tencent America LLC | Method and apparatus for video coding |
Family Cites Families (46)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7548853B2 (en) * | 2005-06-17 | 2009-06-16 | Shmunk Dmitry V | Scalable compressed audio bit stream and codec using a hierarchical filterbank and multichannel joint coding |
AU2011201344B2 (en) * | 2011-03-23 | 2013-06-13 | Canon Kabushiki Kaisha | Method, apparatus and system for encoding video data |
KR20140018873A (ko) * | 2011-04-07 | 2014-02-13 | 엘지전자 주식회사 | 영상 정보 부호화 방법 및 복호화 방법 |
US8917336B2 (en) * | 2012-05-31 | 2014-12-23 | Apple Inc. | Image signal processing involving geometric distortion correction |
US9648330B2 (en) * | 2013-07-15 | 2017-05-09 | Qualcomm Incorporated | Inter-color component residual prediction |
US9648332B2 (en) * | 2013-10-28 | 2017-05-09 | Qualcomm Incorporated | Adaptive inter-color component residual prediction |
US10397607B2 (en) * | 2013-11-01 | 2019-08-27 | Qualcomm Incorporated | Color residual prediction for video coding |
US9860540B2 (en) | 2014-01-03 | 2018-01-02 | Qualcomm Incorporated | Inference of nooutputofpriorpicsflag in video coding |
US10200700B2 (en) * | 2014-06-20 | 2019-02-05 | Qualcomm Incorporated | Cross-component prediction in video coding |
WO2016040865A1 (en) * | 2014-09-12 | 2016-03-17 | Vid Scale, Inc. | Inter-component de-correlation for video coding |
GB2531004A (en) * | 2014-10-06 | 2016-04-13 | Canon Kk | Residual colour transform signalled at sequence level for specific coding modes |
US9883184B2 (en) | 2014-10-07 | 2018-01-30 | Qualcomm Incorporated | QP derivation and offset for adaptive color transform in video coding |
US9838662B2 (en) | 2014-10-10 | 2017-12-05 | Qualcomm Incorporated | Harmonization of cross-component prediction and adaptive color transform in video coding |
KR20170103924A (ko) * | 2015-01-14 | 2017-09-13 | 브이아이디 스케일, 인크. | 비-4:4:4 화면 콘텐츠 영상의 팔레트 코딩 |
JP6937695B2 (ja) * | 2015-01-30 | 2021-09-22 | インターデジタル ヴイシー ホールディングス, インコーポレイテッド | カラー・ピクチャを符号化および復号する方法および装置 |
EP3107300A1 (en) * | 2015-06-15 | 2016-12-21 | Thomson Licensing | Method and device for encoding both a high-dynamic range frame and an imposed low-dynamic range frame |
EP3113495A1 (en) * | 2015-06-30 | 2017-01-04 | Thomson Licensing | Methods and devices for encoding and decoding a hdr color picture |
KR102570911B1 (ko) | 2015-07-08 | 2023-08-24 | 인터디지털 매디슨 페턴트 홀딩스 에스에이에스 | 교차 평면 필터링을 이용한 향상된 크로마 코딩 |
US20170150176A1 (en) | 2015-11-25 | 2017-05-25 | Qualcomm Incorporated | Linear-model prediction with non-square prediction units in video coding |
WO2017139937A1 (en) | 2016-02-18 | 2017-08-24 | Mediatek Singapore Pte. Ltd. | Advanced linear model prediction for chroma coding |
US10455228B2 (en) * | 2016-03-21 | 2019-10-22 | Qualcomm Incorporated | Determining prediction parameters for non-square blocks in video coding |
WO2017173593A1 (en) * | 2016-04-06 | 2017-10-12 | Mediatek Singapore Pte. Ltd. | Separate coding secondary transform syntax elements for different color components |
CN114584763A (zh) * | 2016-04-29 | 2022-06-03 | 英迪股份有限公司 | 解码和编码视频的方法以及传送比特流的方法 |
WO2017205648A1 (en) | 2016-05-26 | 2017-11-30 | Vid Scale, Inc. | Geometric conversion for 360-degree video coding |
CN109076214A (zh) * | 2016-05-28 | 2018-12-21 | 联发科技股份有限公司 | 使用仿射运动补偿的视频编码的当前图像参考的方法和装置 |
US10484712B2 (en) | 2016-06-08 | 2019-11-19 | Qualcomm Incorporated | Implicit coding of reference line index used in intra prediction |
WO2018045332A1 (en) * | 2016-09-02 | 2018-03-08 | Vid Scale, Inc. | Methods and apparatus for coded block flag coding in quad-tree plus binary-tree block partitioning |
US10652575B2 (en) | 2016-09-15 | 2020-05-12 | Qualcomm Incorporated | Linear model chroma intra prediction for video coding |
US10728552B2 (en) * | 2016-09-30 | 2020-07-28 | Sony Corporation | Image processing apparatus and method |
EP4075798A1 (en) * | 2016-10-04 | 2022-10-19 | HFI Innovation Inc. | Method and apparatus for intra chroma coding in image and video coding |
US10779004B2 (en) * | 2016-10-12 | 2020-09-15 | Mediatek Inc. | Methods and apparatuses of constrained multi-type-tree block partition for video coding |
US20180109812A1 (en) * | 2016-10-14 | 2018-04-19 | Media Tek Inc. | Block partitioning using tree structures |
CN116389739A (zh) * | 2016-11-21 | 2023-07-04 | 松下电器(美国)知识产权公司 | 图像编码装置及图像解码装置 |
WO2018181448A1 (ja) * | 2017-03-31 | 2018-10-04 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法 |
US11012715B2 (en) | 2018-02-08 | 2021-05-18 | Qualcomm Incorporated | Intra block copy for video coding |
WO2020094066A1 (en) | 2018-11-06 | 2020-05-14 | Beijing Bytedance Network Technology Co., Ltd. | Multi-parameters based intra prediction |
MX2021009788A (es) | 2019-02-22 | 2021-09-08 | Beijing Bytedance Network Tech Co Ltd | Seleccion de muestra colindante para intraprediccion. |
KR102472756B1 (ko) | 2019-02-24 | 2022-12-01 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 인트라 예측을 위한 파라미터 유도 |
SG11202109325VA (en) | 2019-02-27 | 2021-09-29 | Huawei Tech Co Ltd | Adaptation parameter set types in video coding |
CN113545056A (zh) | 2019-02-28 | 2021-10-22 | 交互数字Vc控股公司 | 用于图片编码和解码的方法及设备 |
WO2020177663A1 (en) * | 2019-03-02 | 2020-09-10 | Beijing Bytedance Network Technology Co., Ltd. | Restrictions on partition structures |
CN113545064B (zh) | 2019-03-04 | 2024-05-10 | 阿里巴巴集团控股有限公司 | 用于处理视频内容的方法和装置及计算机可读存储介质 |
WO2020197038A1 (ko) * | 2019-03-22 | 2020-10-01 | 엘지전자 주식회사 | 영상 코딩 시스템에서 인트라 서브 파티션 기반의 인트라 예측 방법 및 장치 |
US11451826B2 (en) * | 2019-04-15 | 2022-09-20 | Tencent America LLC | Lossless coding mode and switchable residual coding |
US11399199B2 (en) * | 2019-08-05 | 2022-07-26 | Qualcomm Incorporated | Chroma intra prediction units for video coding |
JP7479457B2 (ja) | 2019-09-20 | 2024-05-08 | 北京字節跳動網絡技術有限公司 | ビデオ・データを処理する方法、装置及び記憶媒体 |
-
2020
- 2020-09-21 JP JP2022517727A patent/JP7479457B2/ja active Active
- 2020-09-21 CN CN202311559171.3A patent/CN117596400A/zh active Pending
- 2020-09-21 WO PCT/CN2020/116471 patent/WO2021052493A1/en unknown
- 2020-09-21 CN CN202080066256.6A patent/CN114424574A/zh active Pending
- 2020-09-21 CN CN202080066209.1A patent/CN114430901A/zh active Pending
- 2020-09-21 EP EP20864451.8A patent/EP4014502A4/en active Pending
- 2020-09-21 KR KR1020227005816A patent/KR20220065758A/ko not_active Application Discontinuation
- 2020-09-21 JP JP2022517726A patent/JP7479456B2/ja active Active
- 2020-09-21 EP EP20866418.5A patent/EP4014486A4/en active Pending
- 2020-09-21 WO PCT/CN2020/116470 patent/WO2021052492A1/en unknown
- 2020-09-21 KR KR1020227005826A patent/KR20220066041A/ko active IP Right Grant
-
2022
- 2022-03-16 US US17/696,654 patent/US11716491B2/en active Active
- 2022-03-16 US US17/696,681 patent/US11523126B2/en active Active
-
2023
- 2023-06-27 US US18/342,482 patent/US20230345056A1/en active Pending
- 2023-11-29 JP JP2023201679A patent/JP2024028787A/ja active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019194463A1 (ko) * | 2018-04-01 | 2019-10-10 | 엘지전자 주식회사 | 영상의 처리 방법 및 이를 위한 장치 |
WO2020018267A1 (en) * | 2018-07-17 | 2020-01-23 | Futurewei Technologies, Inc. | Constrained coding tree for video coding |
WO2020197996A1 (en) * | 2019-03-22 | 2020-10-01 | Tencent America LLC | Method and apparatus for video coding |
Non-Patent Citations (3)
Title |
---|
BENJAMIN BROSS, JIANLE CHEN, AND SHAN LIU: "Versatile Video Coding (Draft 6)", JOINT VIDEO EXPERTS TEAM (JVET) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, vol. JVET-O2001 (version 14), JPN6023027806, 31 July 2019 (2019-07-31), pages 25 - 28, ISSN: 0005100848 * |
CHIH-WEI HSU, ET AL.: "CE1-related: Constraint for binary and ternary partitions", JOINT VIDEO EXPERTS TEAM (JVET) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, vol. JVET-K0556-v1, JPN6022014212, 16 July 2018 (2018-07-16), pages 1 - 3, XP030199974, ISSN: 0004996820 * |
JIANLE CHEN, YAN YE, AND SEUNG HWAN KIM: "Algorithm description for Versatile Video Coding and Test Model 6 (VTM 6)", JOINT VIDEO EXPERTS TEAM (JVET) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, vol. JVET-O2002-v1, JPN6023006962, August 2019 (2019-08-01), pages 1 - 12, ISSN: 0005100850 * |
Also Published As
Publication number | Publication date |
---|---|
EP4014502A1 (en) | 2022-06-22 |
KR20220065758A (ko) | 2022-05-20 |
JP2022548936A (ja) | 2022-11-22 |
US11523126B2 (en) | 2022-12-06 |
WO2021052493A1 (en) | 2021-03-25 |
JP7479456B2 (ja) | 2024-05-08 |
CN117596400A (zh) | 2024-02-23 |
US20220210453A1 (en) | 2022-06-30 |
EP4014486A4 (en) | 2023-03-01 |
CN114430901A (zh) | 2022-05-03 |
KR20220066041A (ko) | 2022-05-23 |
EP4014502A4 (en) | 2022-11-09 |
EP4014486A1 (en) | 2022-06-22 |
CN114424574A (zh) | 2022-04-29 |
US20220210481A1 (en) | 2022-06-30 |
WO2021052492A1 (en) | 2021-03-25 |
JP2024028787A (ja) | 2024-03-05 |
JP7479457B2 (ja) | 2024-05-08 |
US20230345056A1 (en) | 2023-10-26 |
US11716491B2 (en) | 2023-08-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102630411B1 (ko) | 크로마 잔차 조인트 코딩을 위한 구문 요소의 시그널링 | |
JP7485761B2 (ja) | クロスコンポーネント適応ループフィルタの信号通知 | |
WO2021088835A1 (en) | Cross-component adaptive loop filter | |
JP7479456B2 (ja) | ビデオ・データ処理方法及び装置並びに記憶媒体及び方法 | |
WO2020253861A1 (en) | Adaptive in-loop color-space transform for video coding | |
WO2021027928A1 (en) | Weighting factors for prediction sample filtering in intra mode | |
WO2020216380A1 (en) | Prediction of parameters for in-loop reshaping | |
WO2021088951A1 (en) | Quantization properties of adaptive in-loop color-space transform for video coding | |
KR20220115965A (ko) | 비디오 코딩을 위한 일반적인 제약 정보 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220331 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220331 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230221 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230519 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230704 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231002 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20231031 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240227 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20240307 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240402 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240423 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7479456 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |