JP2022529369A - 符号化映像の量子化残差差分パルス符号変調表現 - Google Patents
符号化映像の量子化残差差分パルス符号変調表現 Download PDFInfo
- Publication number
- JP2022529369A JP2022529369A JP2021562399A JP2021562399A JP2022529369A JP 2022529369 A JP2022529369 A JP 2022529369A JP 2021562399 A JP2021562399 A JP 2021562399A JP 2021562399 A JP2021562399 A JP 2021562399A JP 2022529369 A JP2022529369 A JP 2022529369A
- Authority
- JP
- Japan
- Prior art keywords
- video block
- current video
- prediction
- block
- mode
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 claims abstract description 400
- 238000006243 chemical reaction Methods 0.000 claims abstract description 57
- 229920006395 saturated elastomer Polymers 0.000 claims abstract description 17
- 230000033001 locomotion Effects 0.000 claims description 130
- 239000013598 vector Substances 0.000 claims description 105
- 238000012545 processing Methods 0.000 claims description 57
- 238000013139 quantization Methods 0.000 claims description 53
- 238000013507 mapping Methods 0.000 claims description 41
- 239000011159 matrix material Substances 0.000 claims description 31
- 238000003672 processing method Methods 0.000 claims description 25
- 230000009466 transformation Effects 0.000 claims description 12
- 230000004044 response Effects 0.000 claims description 6
- 238000010586 diagram Methods 0.000 abstract description 12
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 20
- 238000009795 derivation Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 11
- 230000006835 compression Effects 0.000 description 9
- 238000007906 compression Methods 0.000 description 9
- 238000004590 computer program Methods 0.000 description 9
- 230000009467 reduction Effects 0.000 description 8
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 7
- 230000015654 memory Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 238000012935 Averaging Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000002441 reversible effect Effects 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 230000011664 signaling Effects 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 238000000844 transformation Methods 0.000 description 2
- 241000249931 Doronicum maximum Species 0.000 description 1
- 240000007594 Oryza sativa Species 0.000 description 1
- 235000007164 Oryza sativa Nutrition 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 235000009566 rice Nutrition 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/129—Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
Description
パリ条約に基づく適用可能な特許法および/または規則に基づいて、本願は、2019年4月24日出願の国際特許出願PCT/CN2019/084008号の優先権および利益を適時に主張することを目的とする。法に基づくすべての目的のために、上記出願の開示全体は、本明細書の開示の一部として参照により援用される。
本明細書は、映像符号化技術に関する。具体的には、映像符号化におけるDPCM符号化に関する。HEVCのような既存の映像符号化規格に適用してもよいし、規格(Versatile Video Coding)を確定させるために適用してもよい。本発明は、将来の映像符号化規格または映像コーデックにも適用可能である。
映像符号化規格は、主に周知のITU-TおよびISO/IEC規格の開発によって発展してきた。ITU-TはH.261とH.263を作り、ISO/IECはMPEG-1とMPEG-4 Visualを作り、両団体はH.262/MPEG-2 VideoとH.264/MPEG-4 AVC(Advanced Video Coding)とH.265/HEVC[1]規格を共同で作った。H.262以来、映像符号化規格は、時間予測と変換符号化が利用されるハイブリッド映像符号化構造に基づく。HEVCを超えた将来の映像符号化技術を探索するため、2015年には、VCEGとMPEGが共同でJVET(Joint Video Exploration Team)を設立した。それ以来、多くの新しい方法がJVETによって採用され、JEM(Joint Exploration Mode)[3,4]と呼ばれる参照ソフトウェアに組み込まれてきた。2018年4月には、VCEG(Q6/16)とISO/IEC JTC1 SC29/WG11(MPEG)の間にJoint Video Expert Team(JVET)が発足し、HEVCと比較して50%のビットレート削減を目標にVVC規格の策定に取り組んでいる。
phenix.it-sudparis.eu/jvet/doc_end_user/current_document.php?id=5755
VTMと呼ばれるVVCの最新の参照ソフトウェアは、以下で確認することができる。
vcgit.hhi.fraunhofer.de/jvet/VVCSoftware_VTM/tags/VTM-4.0
イントラブロックコピー(IBC)、別名、現在のピクチャの参照(CPR)は、HEVCスクリーンコンテンツ符号化拡張機能(HEVC-SCC)[1]と現在のVVCテストモデル(VTM-4.0)に採用されている。IBCは、動き補償の概念をインターフレーム符号化からイントラフレーム符号化に拡張する。図1に示すように、現在のブロックは、IBCが適用される場合、同じピクチャ内の1つの参照ブロックによって予測される。現在のブロックを符号化または復号化する前に、参照ブロックにおけるサンプルは既に再構成されていなければならない。IBCは、カメラでキャプチャされたほとんどのシーケンスに対してそれほど効率的ではないが、スクリーンコンテンツに対しては、有意な符号化利得を示す。その理由は、スクリーンコンテンツピクチャにおいて、アイコン、文字等の繰り返しパターンが多いためである。IBCは、これらの繰り返しパターン間の冗長性を有効に除去することができる。HEVC-SCCにおいて、インター符号化ユニット(CU)は、現在のピクチャをその参照ピクチャとして選択する場合、IBCを適用することができる。この場合、MVをブロックベクトル(BV)と改称し、BVは常に整数画素精度を有する。メインプロファイルHEVCに適合するように、現在のピクチャは、復号化ピクチャバッファ(DPB)における「長期」参照ピクチャとしてマークされる。なお、同様に、複数のビュー/3D映像符号化規格において、ビュー間の参照ピクチャも「長期」参照ピクチャとしてマークされる。
HEVCのスクリーンコンテンツ符号化拡張機能において、1つのブロックが現在のピクチャを参照として使用する場合、以下の仕様のテキストに示すように、参照ブロック全体が利用可能な再構成された領域内にあることを保証すべきである。
offsetX=(ChromaArrayType==0)?0:(mvCLX[0]&0x7?2:0) (0-1)
offsetY=(ChromaArrayType==0)?0:(mvCLX[1]&0x7?2:0) (0-2)
-6.4.1項で規定されたようなz走査順序ブロックの可用性に対する導出処理が、(xCb,yCb)と等しく設定された(xCurr,yCurr)と、(xPb+(mvLX[0]>>2)-offsetX,yPb+(mvLX[1]>>2)-offsetY)に等しく設定された近傍の輝度位置(xNbY,yNbY)と、が入力として呼び出されると、出力はTRUEとなる。
-6.4.1項で規定されたようなz走査順序ブロックの可用性に対する導出処理が、(xCbr,yCb)と等しく設定された(xCurr,yCurr)、(xPb+(mvLX[0]>>2)+nPbW-1+offsetX,yPb+(mvLX[1]>>2)+nPbH-1+offsetY)に等しく設定された近傍の輝度位置(xNbY,yNbY)を入力として呼び出されると、出力はTRUEとなる。
-以下の条件の一方または両方がTRUEであること。
-(mvLX[0]>>2)+nPbW+xB1+offsetXの値が0以下である。
-(mvLX[1]>>2)の値+nPbH+yB1+offsetYが0以下である。
-以下の条件がTRUEとなること。
(xPb+(mvLX[0]>>2)+nPbSw-1+offsetX)/CtbSizeY-xCurr/CtbSizeY<=
yCurr/CtbSizeY-(yPb+(mvLX[1]>>2)+nPbSh-1+offsetY)/CtbSizeY (0-3)
現在のVVC試験モデル、すなわち、VTM-4.0設計において、参照ブロック全体は現在の符号化ツリーユニット(CTU)を有するべきであり、現在のブロックと重複しない。よって、参照または予測ブロックをパディングする必要がない。IBCフラグは、現在のCUの予測モードとして符号化される。このように、各CUに対して、MODE_INTRA、MODE_INTER、およびMODE_IBCという全部で3つの予測モードが存在する。
IBCマージモードにおいて、IBCマージ候補リストにおけるエントリを指すインデックスをビットストリームから構文解析する。このIBCマージリストの構築は、以下のステップのシーケンスに従ってまとめることができる。
●ステップ1:空間的候補の導出
●ステップ2:HMVP候補の挿入
●ステップ3:対の平均候補の挿入
IBC AMVPモードでは、IBC AMVPリストにおけるエントリを指すAMVPインデックスが、ビットストリームから構文解析される。このIBC AMVPリストの構築は、以下のステップのシーケンスに従ってまとめることができる。
●ステップ1:空間的候補の導出
○利用可能な候補が見つかるまで、A0,A1をチェックする。
○利用可能な候補が見つかるまで、B0、B1、B2をチェックする。
●ステップ2:HMVP候補の挿入
●ステップ3:ゼロ候補の挿入
パレットモードの背景にある基本的な考えは、CUにおけるサンプルを代表的な色値の小さな集合で表現することである。この集合をパレットと呼ぶ。また、エスケープシンボルの後に(場合によっては量子化された)成分値を信号通知することによって、パレットの外側にあるサンプルを示すこともできる。これを図2に示す。
HEVC-SCCにおけるパレットモードでは、パレットおよびインデックスマップを符号化するために予測方式が用いられる。
パレットエントリを符号化するために、パレット予測子が維持される。SPSにおいて、パレットの最大サイズおよびパレット予測子が信号通知される。HEVC-SCCにおいて、palette_predictor_initializer_present_flagがPPSに導入される。このフラグが1である場合、ビットストリームにおいて、パレット予測子を初期化するためのエントリが信号通知される。パレット予測子は、各CTU行、各スライス、および各タイルの始めに初期化される。palette_predictor_initializer_present_flagの値によって、palette_predictorを0にリセットするか、またはPPSに信号通知されたパレット予測子の初期化エントリを使用してパレット予測子を初期化する。HEVC-SCCでは、PPSレベルでパレット予測子の初期化を明確に無効にするために、サイズ0のパレット予測子初期化モジュールを有効化した。
パレットインデックスは、図4に示すように、水平方向および垂直方向の横断走査を使用して符号化される。palette_transpose_flagを使用して、ビットストリームにおける走査順序を明確に信号通知する。以下のサブセクションでは、走査が水平であると仮定する。
JVET-M0464号及びJVET-N0280号において、残差符号化を変換スキップレベルの統計及び信号特性に適応させるために、TS(Transform Skip)モードにおける係数符号化についていくつかの改良が提案されている。
● 量子化のために、前述の有意でないシーケンスは、依然として変換ブロック内でローカルに発生し得る。従って、前に説明したように、最後の重要な走査位置が除去され、全てのサブブロックに対してcoded_sub_block_flagが符号化される。
● DC周波数位置をカバーするサブブロック(左上のサブブロック)のcoded_sub_block_flagは、特殊な場合を提示する。VVC草案3において、このサブブロックのcoded_sub_block_flagは決して信号通知されず、常に1に等しいと推測される。最後の有意な走査位置が別のサブブロックに位置する場合、それは、DCサブブロックの外側に少なくとも1つの有意なレベルがあることを意味する。その結果、DCサブブロックは、このサブブロックのcoded_subblock_flagが1に等しいと推測されるが、ゼロ/非有意レベルのみを含んでもよい。TSに最後の走査位置情報がない場合、各サブブロックのcoded_sub_block_flagが信号通知される。これは、他のcoded_sub_block_flag構文要素が既に0に等しい場合を除き、DCサブブロックのcoded_sub_block_flagをも含む。この場合、DC coded_sub_block_flagは1に等しいと推論される(inferDcSbCbf=1)。このDCサブブロックには少なくとも1つの有意なレベルがなければならないので、このDCサブブロックにおける他のすべてのsig_coeff_flag構文要素が0に等しい場合、(0,0)における第1の位置のsig_coeff_flag構文要素は信号通知されず、1に等しくなるように導出される(inferSbDcSigCoefFlag=1)。
●coded_sub_block_flagのコンテクストモデリングを変更する。コンテクストモデルインデックスは、coded_sub_block_flagの左側への和と、coded_sub_block_flagの現在のサブブロック上への和と、両方の論理和として計算される。
●2値化においてより高いカットオフ値、即ち、sig_coeff_flag、abs_level_gt1_flag、par_level_flag、及びabs_level_gt3_flagを用いた符号化からabs_remainderのRice符号への移行点と、各ビンの位置に専用のコンテクストモデルを用いることで、より高い圧縮効率が得られる。カットオフを大きくすると、より多くの「Xより大きい」フラグがもたらされ、例えば、カットオフに達するまで、abs_level_gt5_flag、abs_level_gt7_flag等を導入していく。カットオフ自体は5に固定される(numGtFlags=5)。
●ライスパラメータ導出のためのテンプレートを修正し、すなわち、現在の走査位置の左側の近傍及び上側の近傍のみを、sig_coeff_flagコンテクストモデリングのためのローカルテンプレートに類似していると見なす。
JVET-M0413において、量子化された残差ブロック差分パルスコード変調(QR-BDPCM)が、スクリーンコンテンツを効率的に符号化するために提案されている。
bdpcm_dir_flag[x0][y0]=0は、bdpcmブロックで使用される予測方向が水平であることを指定し、そうでない場合、垂直である。
行列に基づくイントラ予測は、アフィン線形重み付きイントラ予測(ALWIP)とも呼ばれ、重み付き行列を使用してイントラ予測信号を導出する。
幅Wおよび高さHの矩形ブロックのサンプルを予測するために、アフィン線形重み付きイントラ予測(ALWIP)は、ブロックの左側のH個の再構成された近傍の境界サンプルの1つのラインと、ブロックの上側のW個の再構成された近傍の境界サンプルの1つのラインとを入力とする。再構成されたサンプルが利用不可能な場合、従来のイントラ予測で行われたように生成される。
予測信号の生成は、以下の3つのステップに基づいて行われる。
1. 境界サンプルのうち、W=H=4の場合、4つのサンプルを抽出し、それ以外の場合、8つのサンプルを平均することによって抽出する。
2. 平均化されたサンプルを入力として、行列ベクトル乗算に続いてオフセットの加算を実行する。その結果、元のブロックにおけるサンプルのサブサンプリングされたセットに対して、縮小予測信号が得られる。
3. 残りの位置の予測信号は、各方向への単一ステップの線形補間である線形補間によってサブサンプリングされたセットにおける予測信号から生成される。
まず、インプット境界bdrytop、bdryleftを小さな境界bdrytop red、bdryleft redに縮小する。ここで、bdrytop redおよびbdryleft redは、両方とも、4×4-ブロックの場合、2つのサンプルからなり、他のすべての場合、両方とも4つのサンプルからなる。
縮小されたインプットベクトルbdryredのうち、1つは縮小予測信号predredを生成する。この信号は、ダウンサンプリングされた幅Wredおよび高さHredのブロックにおける信号である。ここで、WredおよびHredは、次のように定義される。
predred=A・bdryred+b.
●W=H=4およびmode≧18
●max(W,H)=8およびmode≧10
●max(W,H)>8およびmode≧6
図6、図7、図8、図9の異なる形状に対して、平均化、行列ベクトル乗算、線形内挿の全体的な処理を示す。なお、残りの形状は、いずれか1つの図示された場合と同様に扱われる。
1. 4×4ブロックを仮定すると、ALWIPは、境界の各軸に沿って2つの平均をとる。結果として得られる4つの入力サンプルは、行列ベクトル乗算に入る。行列はセットS0から取り込まれる。オフセットを加算した後、16個の最終予測サンプルが得られる。予測信号を生成するために線形補間は必要でない。このようにして、1つのサンプル当たり、合計(4・16)/(4・4)=4回の乗算を行う。
2. 8×8ブロックを仮定すると、ALWIPは、境界の各軸に沿って4つの平均をとる。結果として得られる8つの入力サンプルは、行列ベクトル乗算に入る。行列はセットS1から取り込まれる。これにより、予測ブロックの奇数位置に16個のサンプルが得られる。このようにして、1つのサンプル当たり、合計(8・16)/(8・8)=2回の乗算を行う。オフセットを加えた後、これらのサンプルは、縮小された上側境界を使用することによって垂直方向に補間される。元の左側境界を使用して水平補間を行う。
3. 8×4ブロックを仮定すると、ALWIPは、境界の水平軸に沿って4つの平均をとり、左側境界上の4つの元の境界値をとる。結果として得られる8つの入力サンプルは、行列ベクトル乗算に入る。行列はセットS1から取り込まれる。これにより、予測ブロックの水平方向の奇数位置および垂直方向の各位置に16個のサンプルが得られる。このようにして、1つのサンプル当たり、合計(8・16)/(8・4)=4回の乗算を行う。オフセットを加算した後、元の左側境界を使用してこれらのサンプルを水平方向に補間する。
4. 16×16ブロックを仮定すると、ALWIPは、境界の各軸に沿って4つの平均をとる。結果として得られる8つの入力サンプルは、行列ベクトル乗算に入る。行列はセットS2から取り込まれる。これにより、予測ブロックの奇数位置に64個のサンプルが得られる。このようにして、1つのサンプル当たり、合計(8・64)/(16・16)=2回の乗算を行う。オフセットを加算した後、これらのサンプルを、上側境界の8つの平均を使用することによって垂直方向に補間する。元の左側境界を使用して水平補間を行う。
より大きい形状の場合、この手順は本質的に同じであり、1つのサンプル当たりの乗算の数が4未満であることをチェックすることは容易である。
W>8のW×8ブロックの場合、サンプルは奇数個の水平位置および各垂直位置で得られるので、水平補間のみが必要である。ここで、(8・64)/(W・8)=64/W乗算/サンプルごとに演算を行い、縮小予測を算出する。
最後に、W>8であるW×4個のブロックに対して、Akを、ダウンサンプリングされたブロックの横軸に沿った奇数個のエントリに対応するすべての行を取り除くことによって生じる行列とする。このように、出力サイズは32であり、再び、水平補間のみを行うものとする。縮小予測の計算のために、(8・32)/(W・4)=64/W乗算/サンプルごとに乗算を行う。W=16の場合、追加の乗算は必要とされず、一方、W>16の場合、線形補間の場合、1つのサンプル当たり2未満の乗算しか必要とされない。よって、乗算の総数は4以下である。
転置された場合はそれに応じて処理される。
max(W,H)≧8を有するW×Hブロックの場合、予測信号は、線形内挿によってWred×Hredに縮小予測信号predreから生じる。ブロックの形状によっては、垂直、水平または両方向に線形補間を行う。線形補間を両方向に適用する場合、まずW×Hを水平方向に適用し、最初に垂直方向に適用する場合、水平方向に適用し、そうでない場合、線形補間を水平方向に適用する。
イントラモードの各符号化ユニット(CU)ごとに、ALWIPモードを対応する予測ユニット(PU)に適用するかどうかを示すフラグをビットストリームにおいて送信する。ALWIPモードを適用する場合、3つのMPMSを有するMPMリストを使用して、ALWIPモードのインデックスpredmodeを信号通知する。
predmodeAngular=map_angular_to_alwipidx[predmodeAngular].
idx(PU)=idx(W,H)∈{0,1,2}
提案されたALWIPモードは、従来のイントラ予測モードのMPMに基づく符号化と以下のように調和される。従来のイントラ予測モードのための輝度および彩度MPMリスト導出処理は、固定テーブルmap_alwip_to_angularidx,idx∈{0,1,2}を使用し、所与のPUにおけるALWIPモードpremodeALWIPを従来のイントラ予測モードの1つにマッピングする。
彩度イントラモード符号化の場合、彩度イントラモード符号化の場合、合計8つのイントラモードが許可される。これらのモードには、5つの伝統的なイントラモードと6つの構成要素共通の線形モデルモードが含まれる。彩度DMモードは、対応する輝度イントラ予測モードを使用する。Iスライスにおいて、輝度成分と彩度成分に対するブロック分割構造の分離が有効化されているため、1つの彩度ブロックは複数の輝度ブロックに対応してもよい。よって、彩度DMモードの場合、現在の彩度ブロックの中心位置を含む、対応する輝度ブロックのイントラ予測モードは直接継承される。
QR-BDPCMは、スクリーンコンテンツの符号化において符号化の利点を実現することができるが、依然としていくつかの欠点を有する可能性がある。
1. QR-BDPCMモードにおける予測は、水平および垂直イントラ予測にのみ限定され、QR-BDPCMモードにおける予測効率を制限する可能性がある。
2. イントラ予測モードが、QR-BDPCMモードのレートコストを増加させ得るQR-BDPCM符号化ブロックのために信号通知される。
3. QR-BDPCMモードにおいて信号通知されたメッセージを予測モードにマッピングするとき、近傍の情報は考慮されない。
4. QR-BDPCMは、水平DPCMおよび垂直DPCMのみをサポートすることによって残差を表し、複素残差ブロックにおける符号化性能を含む可能性がある。
5. QR-BDPCMにおける残差範囲は、他の非QR-BDPCMモードの最大範囲を超える可能性がある。
6. QR-BDPCMはブロック形状を考慮していない。
7. 輝度ブロックをQR-BDPCMで符号化する場合、彩度をどのように扱うかは不明である。
以下に列記されるものは、一般的な概念を説明するための例であると考えられるべきである。これらの技術的特徴は狭い意味で解釈されるべきではない。さらに、これらの技術的特徴は、任意の方法で組み合わせることができる。
a. 一例において、QR-BDPCMおよびMIPの両方が1つのブロックに対して有効化される場合、MIPにおける許可モードの一部のみがサポートされないように制限される。
i. 一例において、許可モードの一部は、水平および/または垂直通常イントラモードにマッピングされ得る、行列に基づくイントラ予測方法に関連付けられたモードを含んでもよい。
ii. 一例において、許可モードの一部は、水平および/または垂直通常イントラモードにマッピングされ得る、行列に基づくイントラ予測方法に関連付けられたモードのみを含んでもよい。
b. 一例において、1つのブロックに対してQR-BDPCMおよびMIPの両方が有効化される場合、MIPにおけるすべての許可モードがサポートされる。
a. 一例において、QR-BDPCM符号化ブロックにおけるサンプルは、イントラ予測モードKによって予測してもよい。
i. 一例において、Kは、平面モードでもよい。
ii. 一例において、Kは直流モードでもよい。
iii. 一例において、Kは水平モードでもよい。
iv. 一例において、Kは垂直モードでもよい。
v. 一例において、Kは、最大確率モードの一覧における1つの候補でもよい。
vi. 一例において、Kは、ビットストリームにおいて信号通知してもよい。
b. QR-BDPCMのための許可されたイントラ予測モードは、以下に基づいてもよい。
i. SPS/VPS/PPS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/LCU行/LCU群において信号通知されるメッセージ
ii. 現在のブロックおよび/またはその近傍のブロックのブロック寸法
iii. 現在のブロックおよび/またはその近傍のブロックのブロック形状
iv. 現在のブロックの隣接ブロックの予測モード(イントラ/インター)
v. 現在のブロックの隣接ブロックのイントラ予測モード
vi. 現在のブロックの隣接ブロックのQR-BDPCMモードの表示
vii. 現在のブロック及び/又はその隣接ブロックの現在の量子化パラメータ
viii. カラーフォーマットの表示(例えば、4:2:0、4:4:4)
ix. 分離/二重符号化ツリー構造
x. スライス/タイルグループのタイプおよび/またはピクチャのタイプ
a. 一例において、IBCマージモードの場合、QR-BDPCMも有効化してよい。
b. 一例において、IBC AMVPモードの場合、QR-BDPCMもまた有効化してよい。
c. IBCおよびQR-BDPCMで使用されるブロックベクトルは、信号通知しても、導出しても、または予め定義してもよい。
i. 一例において、IBCモードは、動きベクトル(ブロックベクトル)および/またはマージインデックスによって示してもよい。
ii. 一例において、IBCモードは、デフォルトの動きベクトルによって示してもよい。
1. 一例において、デフォルトの動きベクトルは、(-w,0)であってもよく、ここで、wは、正の整数である。
2. 一例において、デフォルトの動きベクトルは、(0,-h)であってもよく、ここで、hは、正の整数である。
3. 一例において、デフォルトの動きベクトルは、(-w,-h)であってもよく、ここで、wおよびhは、2つの正の整数である。
iii. 一例において、IBC符号化ブロックおよびQP-BPDCM符号化ブロックにおいて使用される動きベクトルの指示は、以下に基づいてもよい。
1. SPS/VPS/PPS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/LCU行/LCU群において信号通知されるメッセージ
2. 現在のブロックおよび/またはその近傍のブロックのブロック寸法
3. 現在のブロックおよび/またはその近傍のブロックのブロック形状
4. 現在のブロックの隣接ブロックの予測モード(イントラ/インター)
5. 現在のブロックの隣接ブロックの動きベクトル
6. 現在のブロックの隣接ブロックのQR-BDPCMモードの表示
7. 現在のブロック及び/又はその隣接ブロックの現在の量子化パラメータ
8. カラーフォーマットの表示(例えば、4:2:0、4:4:4)
9. 分離/二重符号化ツリー構造
10. スライス/タイルグループのタイプおよび/またはピクチャのタイプ
d. 一例において、QR-BDPCMモードにおけるサンプル予測は、インター予測ツール(例えば、アフィンモード、マージモード、およびインターモード)によって生成してもよい。
a. 一例において、QR-BDPCMにおける量子化残差予測方向の指示は、現在のイントラ予測モードの指示に基づいて推測してもよい。
i. 一例において、QR-BDPCMにおける量子化残差予測の方向は、イントラ予測モードが垂直である場合、垂直に推測してもよい。
ii. 一例において、QR-BDPCMにおける量子化残差予測の方向は、イントラ予測モードが水平である場合、水平に推測してもよい。
iii. 一例において、QR-BDPCMにおける量子化残差予測の方向は、イントラ予測モードが水平である場合、垂直に推測してもよい。
iv. 一例において、QR-BDPCMにおける量子化残差予測の方向は、イントラ予測モードが垂直である場合、水平に推測してもよい。
b. 一例において、QR-BDPCMにおける量子化残差予測方向の指示は、以下に基づいてもよい。
i. SPS/VPS/PPS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/LCU行/LCU群において信号通知されるメッセージ
ii. 現在のブロックおよび/またはその近傍のブロックのブロック寸法
iii. 現在のブロックおよび/またはその近傍のブロックのブロック形状
iv. 現在のブロック及び/又はその近傍のブロックの最も可能性の高いモード
v. 現在のブロックの隣接ブロックの予測モード(イントラ/インター)
vi. 現在のブロックの隣接ブロックのイントラ予測モード
vii. 現在のブロックの隣接ブロックの動きベクトル
viii. 現在のブロックの隣接ブロックのQR-BDPCMモードの表示
ix. 現在のブロック及び/又はその隣接ブロックの現在の量子化パラメータ
x. カラーフォーマットの表示(例えば、4:2:0、4:4:4)
xi. 分離/二重符号化ツリー構造
xii. 現在のブロックに適用される変換タイプ
xiii. スライス/タイルグループのタイプおよび/またはピクチャのタイプ
a. SPS/VPS/PPS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/LCU行/LCU群において信号通知されるメッセージ
b. 現在のブロックおよび/またはその近傍のブロックのブロック寸法
c. 現在のブロックおよび/またはその近傍のブロックのブロック形状
d. 現在のブロック及び/又はその近傍のブロックの最大確率モード。
e. 現在のブロックの隣接ブロックの予測モード(イントラ/インター)
f. 現在のブロックの隣接ブロックのイントラ予測モード
g. 現在のブロックの隣接ブロックの動きベクトル
h. 現在のブロックの隣接ブロックのQR-BDPCMモードの表示
i. 現在のブロック及び/又はその隣接ブロックの現在の量子化パラメータ
j. カラーフォーマットの表示(例えば、4:2:0、4:4:4)
k. 分離/二重符号化ツリー構造
l. 現在のブロックに適用される変換タイプ
m. スライス/タイルグループのタイプおよび/またはピクチャのタイプ
a. 一例において、45度QR-BDPCMがサポートしてもよい。
i. 一例において、DPCMは、45°に沿って行われてもよく、Q(r(i-1),(j-1))が利用可能である場合、r~ i,jはQ(ri,j)-Q(r(i-1),(j-1))によって導出してもよい。
b. 一例において、135度QR-BDPCMをサポートしてもよい。
i. 一例において、DPCMは、135°に沿って行われてもよく、Q(r(i-1),(j+1))が利用可能である場合、r~ i,jは、Q(ri,j)-Q(r(i-1),(j+1))によって導出してもよい。
c. 一例において、任意の方向をQR-BDPCMにおいてサポートしてもよい。
i. 一例において、Q(r(i-m),(j-n))が利用可能である場合、r~ i,jはQ(ri,j)-Q(r(i-m),(j-n))によって導出してもよい。
1. 一例において、mおよび/またはnは、ビットストリームにおいて信号通知してもよい。
2. 一例において、mおよび/またはnは、整数であってもよく、以下に基づいてもよい。
3. SPS/VPS/PPS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/LCU行/LCU群において信号通知されるメッセージ
4.iおよび/またはj
5. 現在のブロックおよび/またはその近傍のブロックのブロック寸法
6. 現在のブロックおよび/またはその近傍のブロックのブロック形状
7. 現在のブロック及び/又はその近傍のブロックの最大確率モード。
8. 現在のブロックの隣接ブロックの予測モード(イントラ/インター)
9. 現在のブロックの隣接ブロックのイントラ予測モード
10. 現在のブロックの隣接ブロックの動きベクトル
11. 現在のブロックの隣接ブロックのQR-BDPCMモードの表示
12. 現在のブロック及び/又はその隣接ブロックの現在の量子化パラメータ
13. カラーフォーマットの表示(例えば、4:2:0、4:4:4)
14. 分離/二重符号化ツリー構造
15. スライス/タイルグループのタイプおよび/またはピクチャのタイプ
a. 一例において、輝度および彩度QR-BDPCM符号化ブロックのための許容されるイントラ予測方向は、同じであってもよく、例えば、水平および垂直のみであってもよい。
b. 一例において、輝度QR-BDPCM符号化ブロックおよび彩度QR-BDPCM符号化ブロックのための許容される予測方法は、同じであってもよく、例えば、IBC/インター/水平および垂直イントラ予測モードであってもよい。
c. 一例において、輝度QR-BDPCM符号化ブロックおよび彩度QR-BDPCM符号化ブロックのための許容される残差予測方向は、同じであってもよい。
d. 一例において、彩度QR-BDPCMのための残差予測方向は、対応する輝度ブロックのための残差予測方向から導出されてもよい。
i. 一例において、対応する輝度ブロックは、並置された輝度ブロックであってもよい。
ii. 一例において、対応する輝度ブロックは、彩度ブロックの左上隅の並置されたサンプルを含む輝度ブロックであってもよい。
iii. 一例において、対応する輝度ブロックは、彩度ブロックの中心合わせされたサンプルの並置されたサンプルを含む輝度ブロックであってもよい。
e. 一例において、CCLMおよびQR-BDPCMは、同じ彩度ブロックに適用できなかった。
i. 代替的に、CCLMは、QR-BDPCM符号化ブロックにも適用可能である。
f. 一例において、ジョイント彩度残差符号化(例えば、ジョイントcbおよびcr符号化)方法およびQR-BDPCMは、同じ彩度ブロックに適用され得なかった。
a. 一例において、全ての量子化残差(例えば、式2-7-1および式2-7-2におけるr~ i,j)が特定の範囲内にあってもよいという制約を加えることができる。
b. 一例において、再構成された量子化残差(例えば、式2-7-3および式2-7-4におけるQ(ri,j))の全てが特定の範囲内にあってもよいという制約を加えることができる。
c. 一例において、再構成された量子化残差が特定の範囲内にあるように、クリッピング演算を量子化残差の差(例えば、式2-7-1および式2-7-2におけるr~ i,j)に適用してもよい。
d. 一例において、再構成された量子化残差が特定の範囲内にあるように、クリッピング演算を再構成された量子化残差の差(例えば、式2-7-3および式2-7-4におけるQ(ri,j))に適用してもよい。
e. 一例において、クリッピング演算は、(x<min? min:(x>max? max:x))として定義してもよい。
f. 一例において、クリッピング演算は、(x<=min? min:(x>=max? max:x))として定義してもよい。
g. 一例において、クリッピング演算は、(x<min? min:(x>=max? max:x))として定義してもよい。
h. 一例において、クリッピング演算は、(x<=min? min:(x>max? max:x))として定義してもよい。
i. 一例において、minおよび/またはmaxは、負または正であってもよい。
j. 一例において、minは-32768に設定され、maxは32767に設定される。
i. 代替的に、このminおよび/またはmaxは、QR-BDPCMで符号化されていないブロックの逆量子化の範囲に依存してもよい。
ii. 代替的に、この最小値および/または最大値は、入力サンプル/再構成サンプルのビット深度に依存してもよい。
iii. 代替的に、minおよび/またはmaxは、可逆符号化が使用されるかどうかに依存してもよい。
1. 一例において、minおよび/またはmaxは、transquant_bypass_enabled_flagに依存してもよい。
2. 一例において、minおよび/またはmaxは、cu_transquant_bypass_flagに依存してもよい。
k. 一例において、minおよび/またはmaxは、以下に基づいてもよい。
i. SPS/VPS/PPS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/LCU行/LCU群において信号通知されるメッセージ
ii. 現在のブロックおよび/またはその近傍のブロックのブロック寸法
iii. 現在のブロックおよび/またはその近傍のブロックのブロック形状
iv. 現在のブロック及び/又はその近傍のブロックの最大確率モード。
v. 現在のブロックの隣接ブロックの予測モード(イントラ/インター)
vi. 現在のブロックの隣接ブロックのイントラ予測モード
vii. 現在のブロックの隣接ブロックの動きベクトル
viii. 現在のブロックの隣接ブロックのQR-BDPCMモードの表示
ix. 現在のブロック及び/又はその隣接ブロックの現在の量子化パラメータ
x. カラーフォーマットの表示(例えば、4:2:0、4:4:4)
xi. 分離/二重符号化ツリー構造
xii. 現在のブロックに適用される変換タイプ
xiii. スライス/タイルグループのタイプおよび/またはピクチャのタイプ
a. 一例において、残差予測方向が水平である場合、(i+1)番目の列の残差を使用して、i番目の列の残差を予測してもよい。
b. 一例において、残差予測方向が垂直である場合、(i+1)番目の行の残差を使用して、i番目の行の残差を予測してもよい。
a. 一例において、残差予測方向が水平である場合、QR-DPCMは、残差の左端のk個の列には適用されない。
b. 一例において、残差予測方向が垂直である場合、QR-DPCMは、残差の上位k行には適用されない。
c. 一例において、残差予測方向が水平である場合、QR-DPCMは、残差の右端のk個の列には適用されない。
d. 一例において、残差予測方向が垂直である場合、QR-DPCMは、残差の下位k行には適用されない。
e. 上述したkの値は、以下に基づいて予め規定された値であってもよい。
i. SPS/VPS/PPS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/LCU行/LCU群において信号通知されるメッセージ
ii. 現在のブロックおよび/またはその近傍のブロックのブロック寸法
iii. 現在のブロックおよび/またはその近傍のブロックのブロック形状
iv. 現在のブロック及び/又はその近傍のブロックの最大確率モード。
v. 現在のブロックの隣接ブロックの予測モード(イントラ/インター)
vi. 現在のブロックのイントラ予測モード
vii. 現在のブロックの隣接ブロックのイントラ予測モード
viii. 現在のブロックの隣接ブロックの動きベクトル
ix. 現在のブロックの隣接ブロックのQR-BDPCMモードの表示
x. 現在のブロック及び/又はその隣接ブロックの現在の量子化パラメータ
xi. カラーフォーマットの表示(例えば、4:2:0、4:4:4)
xii. 分離/二重符号化ツリー構造
xiii. 現在のブロックに適用される変換タイプ
xiv. スライス/タイルグループのタイプおよび/またはピクチャのタイプ
a. 一例において、残差予測方向が垂直であり、N=nKである場合、残差予測は、以下のように行ってもよい。
a. 一例において、彩度ブロックの場合、QR-DPCMを有効化するかどうかは、並置された輝度ブロック内の1つまたは複数の代表的なブロックに関連付けられたQR-DPCMの使用に依存してもよい。
i. 一例において、代表的なブロックは、DM導出に使用されるものと同様に定義してもよい。
ii. 一例において、並置された輝度ブロック内の代表的なブロックがQR-DPCM符号化され、現在の彩度ブロックがDMモードで符号化される場合、QR-DPCMは、現在の彩度ブロックに対しても有効化されてもよい。
b. 代替的に、QR-DPCMの使用の指示は、彩度成分のために信号通知してもよい。
i. 一例において、2つの彩度成分の使用を示すように、1つのフラグを信号通知してもよい。
ii. 代替的に、2つの彩度成分の使用をそれぞれ示すように、2つのフラグを信号通知してもよい。
iii. 一例において、彩度ブロックが特定のモード(例えば、CCLM)で符号化される場合、QR-DPCMの使用の指示の信号通知はスキップされる。
[1]
ITU-T and ISO/IEC,“高効率映像符号化”,Rec.ITU-T H.265 | ISO/IEC 23008-2 (02/2018).
[2]
B. Bross,J.Chen,S.Liu,汎用映像符号化(草案4),JVET-M1001,Jan.2019
前記差分符号化モードにおいて、前記現在の映像ブロックの画素のイントラ予測からの量子化残差ブロックは、水平または垂直方向とは異なる残差予測方向に行われる差分パルス符号化変調表現を使用して表現される。
本願は、2019年4月24日出願の国際特許出願第PCT/CN2019/084008号の優先権と利益を主張する、2020年4月23日出願の国際特許出願第PCT/US2020/029598号に基づく。上記出願の開示全体は、本明細書の開示の一部として参照により援用される。
Claims (110)
- 適用可能性の規則に基づいて、映像の彩度映像ブロックと前記彩度映像ブロックのビットストリーム表現との変換に差分符号化モードが適用可能であると判定することと、
前記判定に基づいて、前記差分符号化モードを使用して、前記彩度映像ブロックと前記彩度映像ブロックの前記ビットストリーム表現との変換を行うことと、を含み、
前記彩度映像ブロックは、前記差分符号化モードにおいて、前記彩度映像ブロックのイントラ予測の量子化残差と前記量子化残差の予測との差分を使用して、前記ビットストリーム表現で表現され、
前記イントラ予測は第1の方向で行われ、前記量子化残差の前記予測は第2の方向で行われ、
前記差分符号化モードにおいて、前記量子化残差と前記量子化残差の前記予測との前記差分は、差分パルス符号化変調(DPCM)表現を使用して表現される、
映像処理方法。 - 前記第1の方向または前記第2の方向は、垂直方向および水平方向から決定される、
請求項1に記載の方法。 - 前記イントラ予測は、前記彩度映像ブロックに対応する輝度映像ブロックに対して行われる前記イントラ予測に対して使用されるものと同じ第1の方向に行われる、
請求項1に記載の方法。 - 輝度映像ブロックのための許容されるイントラ予測モードは、前記輝度映像ブロックに対応する前記彩度映像ブロックについてイントラ予測を行うために使用されるものと同じである、
請求項1に記載の方法。 - 前記彩度映像ブロックの前記量子化残差に対して許容される前記第2の方向は、前記彩度映像ブロックに対応する輝度映像ブロックの別の量子化残差に対して使用されるものと同じである、
請求項1に記載の方法。 - 前記量子化残差の前記予測に対して使用される前記第2の方向は、前記彩度映像ブロックに対応する輝度映像ブロックに対して追加の量子化残差を予測する前記第2の方向に基づく、
請求項1に記載の方法。 - 前記輝度映像ブロックは、前記彩度映像ブロックと並置される、
請求項6に記載の方法。 - 前記輝度映像ブロックは、前記彩度映像ブロックの左上隅に位置する第2のサンプルと並置された第1のサンプルを含む、
請求項6に記載の方法。 - 前記輝度映像ブロックは、前記彩度映像ブロックの中央に位置する第2のサンプルと並置された第1のサンプルを含む、
請求項6に記載の方法。 - 前記適用可能性の規則は、前記彩度映像ブロックがクロス成分線形モデル(CCLM)符号化モードで符号化された場合、前記差分符号化モードが前記彩度映像ブロックに適用されないことを規定する、
請求項1に記載の方法。 - 前記適用可能性の規則は、前記彩度映像ブロックがクロス成分線形モデル(CCLM)符号化モードで符号化された場合、前記差分符号化モードが前記彩度映像ブロックに適用されることを規定する、
請求項1に記載の方法。 - 前記適用可能性の規則は、前記彩度映像ブロックが結合彩度残差符号化技法で符号化された場合、前記差分符号化モードが前記彩度映像ブロックに適用されないことを規定する、
請求項1に記載の方法。 - 前記彩度映像ブロックは、青色成分または赤色成分に関連付けられる、
請求項1~12のいずれかに記載の方法。 - 差分符号化モードを使用し、且つ共存則に基づくイントラ予測モードを使用して、映像の現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現との変換を行うことを含み、
前記イントラ予測モードにおいて、前記現在の映像ブロックのイントラ予測の量子化残差は、前記現在の映像ブロックに対するサンプルの予測に基づいており、
前記差分符号化モードにおいて、前記現在の映像ブロックは、前記量子化残差と前記量子化残差の予測との差分を使用して表す前記ビットストリームで表現され、
前記量子化残差と前記量子化残差の前記予測との前記差分は、差分パルス符号化変調(DPCM)表現を使用して表現される、
映像処理方法。 - 前記イントラ予測モードは、行列に基づくイントラ予測モード(MIP)であり、前記現在の映像ブロックに対する前記サンプルの前記予測は、前記映像の前回符号化された映像サンプルについて、境界ダウンサンプリング動作と、後続する行列ベクトル乗算動作と、選択的に後続するアップサンプリング動作とを行うことによって決定される、
請求項14に記載の方法。 - 前記共存則は、前記MIPモードを、前記MIPモードのための複数の許可されるモードの一部に限定する、
請求項15に記載の方法。 - 前記複数の許容モードの前記一部は、水平イントラモードおよび/または垂直イントラモードを含む、
請求項16に記載の方法。 - 前記複数の許容モードの前記一部は、水平イントラモードおよび/または垂直イントラモードのみを含む、
請求項16に記載の方法。 - 前記共存則は、前記MIPモードが前記MIPモードのためのすべての許可されたモードをサポートすることを示す、
請求項15に記載の方法。 - 前記イントラ予測モードにおいて、前記現在の映像ブロックに対する前記サンプルの前記予測は、非水平方向または非垂直方向に沿って予測を行うことで決定される、
請求項14に記載の方法。 - 前記イントラ予測モードは、平面予測モードまたはDC予測モードである、
請求項20に記載の方法。 - 前記イントラ予測モードは、垂直予測モードまたは水平予測モードである、
請求項20に記載の方法。 - 前記イントラ予測モードは、最大確率モード(MPM)のリストから選択される、
請求項20に記載の方法。 - 前記イントラ予測モードは、前記ビットストリーム表現における1つのフィールドによって識別される、
請求項20記載の方法。 - 前記イントラ予測モードは、複数の許可されたイントラ予測モードから選択される、
請求項20に記載の方法。 - 前記複数の許可されたイントラ予測モードは、シーケンスパラメータセット(SPS)、映像パラメータセット(VPS)、ピクチャパラメータセット(PPS)、ピクチャヘッダ、スライスヘッダ、タイルグループヘッダ、最大符号化ユニット(LCU)行、またはLCU群において信号通知されるメッセージに示される、
請求項25に記載の方法。 - 前記複数の許可されたイントラ予測モードは、前記現在の映像ブロックか前記現在の映像ブロックの近傍の映像ブロックのどちらかのブロック寸法に基づく、
請求項25に記載の方法。 - 前記複数の許可されたイントラ予測モードは、前記現在の映像ブロックか前記現在の映像ブロックの近傍の映像ブロックのどちらかの形状に基づく、
請求項25に記載の方法。 - 前記複数の許可されたイントラ予測モードは、前記現在の映像ブロックの近傍の映像ブロックのイントラ予測モードに基づく、
請求項25に記載の方法。 - 前記複数の許可されたイントラ予測モードは、前記現在の映像ブロックの近傍の映像ブロックのインター予測モードに基づく、
請求項25に記載の方法。 - 前記複数の許可されたイントラ予測モードは、前記現在の映像ブロックの近傍の映像ブロックが前記差分符号化モードを使用して符号化されているかどうかの指示に基づく、
請求項25に記載の方法。 - 前記複数の許可されたイントラ予測モードは、前記現在の映像ブロックまたは前記現在の映像ブロックの近傍の映像ブロックに対して使用される量子化パラメータの値に基づく、
請求項25に記載の方法。 - 前記複数の許可されたイントラ予測モードは、前記現在の映像ブロックを符号化するために使用されるカラーフォーマットに基づく、
請求項25に記載の方法。 - 前記複数の許可されたイントラ予測モードは、前記現在の映像ブロックを符号化するために別個のまたは二重符号化ツリー構造を使用するかに基づく、
請求項25に記載の方法。 - 前記複数の許可されたイントラ予測モードは、前記現在の映像ブロックに関連付けられたスライスまたはタイルグループタイプまたはピクチャタイプに基づく、
請求項25に記載の方法。 - 前記イントラ予測モードにおいて、前記現在の映像ブロックのための前記サンプルの前記予測は、前記現在の映像ブロックの近傍の映像ブロックにおける非隣接サンプルから決定される、
請求項14に記載の方法。 - 前記イントラ予測モードは、イントラブロックコピーマージモードを含み、前記共存則は、前記IBCマージモードに対して前記差分符号化モードが有効であることを示す、請求項36に記載の方法。
- 前記イントラ予測モードは、イントラブロックコピー高度動きベクトル予測モードを備え、前記共存則は、前記イントラブロックコピー高度動きベクトル予測モードに対して前記差分符号化モードが有効であることを示す、
請求項36に記載の方法。 - 前記イントラ予測モードは、イントラブロックコピーモードを含み、
前記イントラブロックコピーモードおよび前記差分符号化モードで使用される動きベクトルは、前記ビットストリーム表現におけるフィールドによって示されるか、導出されるか、予め定義されるかである、
請求項36に記載の方法。 - 前記イントラブロックコピーモードは、前記動きベクトルおよび/またはマージインデックスによって示される、
請求項39に記載の方法。 - 前記イントラブロックコピーモードは、デフォルトの動きベクトルによって示される、
請求項39に記載の方法。 - 前記デフォルトの動きベクトルは、(-w,0)であり、wは正の整数である、
請求項41に記載の方法。 - 前記デフォルトの動きベクトルは、(0,-h)であり、hは正の整数である、
請求項41に記載の方法。 - 前記デフォルトの動きベクトルは、(-w,-h)であり、wおよびhは2つの正の整数である、
請求項41に記載の方法。 - 前記動きベクトルを示す前記フィールドは、シーケンスパラメータセット(SPS)、映像パラメータセット(VPS)、ピクチャパラメータセット(PPS)、ピクチャヘッダ、スライスヘッダ、タイルグループヘッダ、最大符号化ユニット(LCU)行、またはLCU群において信号通知されるメッセージに含まれる、
請求項39に記載の方法。 - 前記フィールドに示される前記動きベクトルは、前記現在の映像ブロックか前記現在の映像ブロックの近傍の映像ブロックのどちらかのブロック寸法に基づく、
請求項39に記載の方法。 - 前記フィールドに示される前記動きベクトルは、前記現在の映像ブロックか前記現在の映像ブロックの近傍の映像ブロックのどちらかの形状に基づく、
請求項39に記載の方法。 - 前記フィールドに示される前記動きベクトルは、前記現在の映像ブロックの近傍の映像ブロックのインター予測モードまたはイントラ予測モードに基づく、
請求項39に記載の方法。 - 前記フィールドに示される前記動きベクトルは、前記現在の映像ブロックの近傍の映像ブロックの動きベクトルに基づく、
請求項39に記載の方法。 - 前記フィールドに示される前記動きベクトルは、前記現在の映像ブロックの近傍の映像ブロックが前記差分符号化モードを使用して符号化されているかどうかの指示に基づく、
請求項39に記載の方法。 - 前記フィールドに示される前記動きベクトルは、前記現在の映像ブロックまたは前記現在の映像ブロックの近傍の映像ブロックの量子化パラメータの値に基づく、
請求項39に記載の方法。 - 前記フィールドに示される前記動きベクトルは、前記現在の映像ブロックを符号化するために使用されるカラーフォーマットに基づく、
請求項39に記載の方法。 - 前記フィールドに示される前記動きベクトルは、前記現在の映像ブロックを符号化するために別個の符号化ツリー構造を使用するかまたは二重符号化ツリー構造を使用するかに基づく、
請求項39に記載の方法。 - 前記フィールドに示される前記動きベクトルは、前記現在の映像ブロックに関連付けられたスライスまたはタイルグループのタイプまたはピクチャのタイプに基づく、
請求項39に記載の方法。 - 前記イントラ予測モードにおいて、前記現在の映像ブロックに対する前記サンプルの前記予測は、インター予測ツールを使用して、前記現在の映像ブロックの近傍の映像ブロックにおける非隣接サンプルから決定される、
請求項36に記載の方法。 - 前記共存則は、前記差分符号化モードに関連付けられた信号通知されたインデックスから前記イントラ予測モードへのマッピングを規定する、請求項14に記載の方法。
- 前記マッピングは、シーケンスパラメータセット(SPS)、映像パラメータセット(VPS)、ピクチャパラメータセット(PPS)、ピクチャヘッダ、スライスヘッダ、タイルグループヘッダ、最大符号化ユニット(LCU)行、またはLCU群において信号通知されるメッセージに示される、
請求項56に記載の方法。 - 前記マッピングは、前記現在の映像ブロックか前記現在の映像ブロックの近傍の映像ブロックのどちらかのブロック寸法に基づく、
請求項56に記載の方法。 - 前記マッピングは、前記現在の映像ブロックか前記現在の映像ブロックの近傍の映像ブロックのどちらかの形状に基づく、
請求項56に記載の方法。 - 前記マッピングは、前記現在の映像ブロックまたは前記現在の映像ブロックの近傍の映像ブロックの最大確率モード(MPM)に基づく、
請求項56に記載の方法。 - 前記マッピングは、前記現在の映像ブロックの近傍の映像ブロックのインター予測モードまたはイントラ予測モードに基づく、
請求項56に記載の方法。 - 前記マッピングは、前記現在の映像ブロックの近傍の映像ブロックの動きベクトルに基づく、
請求項56に記載の方法。 - 前記マッピングは、前記現在の映像ブロックの近傍の映像ブロックが前記差分符号化モードを使用して符号化されているかどうかの指示に基づく、
請求項56に記載の方法。 - 前記マッピングは、前記現在の映像ブロックまたは前記現在の映像ブロックの近傍の映像ブロックの量子化パラメータの値に基づく、
請求項56に記載の方法。 - 前記マッピングは、前記現在の映像ブロックを符号化するために使用されるカラーフォーマットに基づく請求項56に記載の方法。
- 前記マッピングは、前記現在の映像ブロックを符号化するために別個のまたは二重符号化ツリー構造を使用するかに基づく、
請求項56に記載の方法。 - 前記マッピングは、前記現在の映像ブロックに適用される変換タイプに基づく、
請求項56に記載の方法。 - 前記マッピングは、前記現在の映像ブロックに関連付けられたスライスまたはタイルグループタイプまたはピクチャタイプに基づく、
請求項56に記載の方法。 - 前記量子化残差の前記予測は、水平方向または垂直方向とは異なる残差予測方向に行われる、
請求項14に記載の方法。 - 前記残差予測方向は45度方向である、
請求項69に記載の方法。 - Q(ri,j)は、前記量子化残差を示し、
r~ i,jは、残差量子化サンプルを示し、
r~ i,jは、Q(r(i-1),(j-1))が利用可能であることに呼応してQ(ri,j)-Q(r(i-1),(j-1))によって導出可能である、
請求項70に記載の方法。 - 前記残差予測方向は、135度方向である、
請求項69に記載の方法。 - Q(ri,j)は、前記量子化残差を示し、
r~ i,jは、残差量子化サンプルを示し、
r~ i,jは、Q(r(i-1),(j+1))が利用可能であることに呼応してQ(ri,j)-Q(r(i-1),(j+1))によって導出可能である、
請求項72に記載の方法。 - 前記量子化残差の前記予測は、第1の値および第2の値に基づく残差予測方向に行われる、
請求項14に記載の方法。 - Q(ri,j)は、前記量子化残差を示し、
r~ i,jは、残差量子化サンプルを示し、
r~ i,jは、前記Q(r(i-m),(j-n))が利用可能であることに呼応してQ(ri,j)-Q(r(i-m),(j-n))によって導出可能であり、
mは前記第1の値であり、nは前記第2の値であり、
iは、前記現在の映像ブロックの複数の行に沿った第1の位置を示す第3の値であり、
jは、前記現在の映像ブロックの複数の列に沿った第2の位置を示す第4の値である、
請求項74に記載の方法。 - mおよびnが前記ビットストリーム表現で信号通知される、
請求項75に記載の方法。 - mおよびnが整数である、
請求項75に記載の方法。 - mおよびnは、シーケンスパラメータセット(SPS)、映像パラメータセット(VPS)、ピクチャパラメータセット(PPS)、ピクチャヘッダ、スライスヘッダ、タイルグループヘッダ、最大符号化ユニット(LCU)行、またはLCU群に含まれるメッセージに示される、
請求項75に記載の方法。 - mがiの前記第3の値に基づいており、nがjの前記第4の値に基づいている、
請求項75に記載の方法。 - mの前記第1の値およびnの前記第2の値は、前記現在の映像ブロックか前記現在の映像ブロックの近傍の映像ブロックのどちらかのブロック寸法に基づく、
請求項75に記載の方法。 - mの前記第1の値およびnの前記第2の値は、前記現在の映像ブロックか前記現在の映像ブロックの近傍の映像ブロックのどちらかの形状に基づく、
請求項75に記載の方法。 - mの前記第1の値およびnの前記第2の値は、前記現在の映像ブロックまたは前記現在の映像ブロックの近傍の映像ブロックの最大確率モード(MPM)に基づく、
請求項75に記載の方法。 - mの前記第1の値およびnの前記第2の値は、前記現在の映像ブロックの近傍の映像ブロックのインター予測モードまたはイントラ予測モードに基づく、
請求項75に記載の方法。 - mの前記第1の値およびnの前記第2の値は、前記現在の映像ブロックの近傍の映像ブロックの動きベクトルに基づく、
請求項75に記載の方法。 - mの前記第1の値およびnの前記第2の値は、前記現在の映像ブロックの近傍の映像ブロックが前記差分符号化モードを使用して符号化されているかどうかの指示に基づく、
請求項75に記載の方法。 - mの前記第1の値およびnの前記第2の値は、前記現在の映像ブロックまたは前記現在の映像ブロックの近傍の映像ブロックの量子化パラメータの値に基づく、
請求項75に記載の方法。 - mの前記第1の値およびnの前記第2の値は、前記現在の映像ブロックを符号化するために使用されるカラーフォーマットに基づく、
請求項75に記載の方法。 - mの前記第1の値およびnの前記第2の値は、前記現在の映像ブロックを符号化するために別個のまたは二重符号化ツリー構造を使用するかに基づく、
請求項75に記載の方法。 - mの前記第1の値およびnの前記第2の値は、前記現在の映像ブロックに関連付けられたスライスまたはタイルグループタイプまたはピクチャタイプに基づく、
請求項75に記載の方法。 - 映像の現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現との変換を差分符号化モードを使用して行うことを含み、
前記現在の映像ブロックは、前記現在の映像ブロックのイントラ予測の量子化残差と前記量子化残差の予測との差分を使用して、前記ビットストリーム表現で表現され、
前記量子化残差の前記予測の方向は、前記ビットストリーム表現から推測可能である、
映像処理方法。 - 前記量子化残差の前記予測の前記方向は、前記イントラ予測に対して使用されるイントラ予測モードから暗黙的に推測可能である、
請求項90に記載の方法。 - 前記量子化残差の前記予測の前記方向は、前記イントラ予測モードに対して使用されるのと同じ方向であると推測可能である、
請求項91に記載の方法。 - 前記方向は、垂直または水平である、
請求項92に記載の方法。 - 前記量子化残差の前記予測の前記方向は、前記イントラ予測モードに対して使用される第2の方向とは異なる第1の方向であると推測可能である、
請求項91に記載の方法。 - 前記第1の方向は垂直であり、前記第2の方向は水平である、
請求項94に記載の方法。 - 前記第1の方向は水平であり、前記第2の方向は垂直である、
請求項94に記載の方法。 - 前記量子化残差の前記予測の前記方向は、シーケンスパラメータセット(SPS)、映像パラメータセット(VPS)、ピクチャパラメータセット(PPS)、ピクチャヘッダ、スライスヘッダ、タイルグループヘッダ、最大符号化ユニット(LCU)行、またはLCU群において信号通知されるメッセージに基づいて推測可能である、
請求項90に記載の方法。 - 前記量子化残差の前記予測の前記方向は、前記現在の映像ブロックか前記現在の映像ブロックの近傍の映像ブロックのどちらかのブロック寸法に基づいて推測可能である、
請求項90に記載の方法。 - 前記量子化残差の前記予測の前記方向は、前記現在の映像ブロックか前記現在の映像ブロックの近傍の映像ブロックのどちらかのブロック寸法形状に基づいて推測可能である、
請求項90に記載の方法。 - 前記量子化残差の前記予測の前記方向は、前記現在の映像ブロックまたは前記現在の映像ブロックの近傍の映像ブロックの最大確率モード(MPM)に基づいて推測可能である、
請求項90に記載の方法。 - 前記量子化残差の前記予測の前記方向は、前記現在の映像ブロックの近傍の映像ブロックのインター予測モードまたはイントラ予測モードに基づいて推測可能である、
請求項90に記載の方法。 - 前記量子化残差の前記予測の前記方向は、前記現在の映像ブロックの近傍の映像ブロックの動きベクトルに基づいて推測可能である、
請求項90に記載の方法。 - 前記量子化残差の前記予測の前記方向は、現在の映像ブロックの近傍の映像ブロックが前記差分符号化モードを使用して符号化されているかどうかの指示に基づいて推測可能である、
請求項90に記載の方法。 - 前記量子化残差の前記予測の前記方向は、前記現在の映像ブロックのまたは前記現在の映像ブロックの近傍の映像ブロックの量子化パラメータの値に基づいて推測可能である、
請求項90に記載の方法。 - 前記量子化残差の前記予測の前記方向は、前記現在の映像ブロックを符号化するために使用されるカラーフォーマットに基づいて推測可能である、
請求項90に記載の方法。 - 前記量子化残差の前記予測の前記方向は、前記現在の映像ブロックを符号化するために別個の符号化ツリー構造が使用されるかまたは二重符号化ツリー構造が使用されるかに基づいて推測可能である、
請求項90に記載の方法。 - 前記量子化残差の前記予測の前記方向は、前記現在の映像ブロックに適用される変換タイプに基づいて推測可能である、
請求項90に記載の方法。 - 前記量子化残差の前記予測の前記方向は、前記現在の映像ブロックに関連付けられたスライスまたはタイルグループタイプまたはピクチャタイプに基づいて推測可能である、
請求項90に記載の方法。 - 請求項1~108の1つ以上に実装するように構成された処理装置を備える、
映像処理装置。 - コードが記憶された非一時的なコンピュータ可読媒体であって、
処理装置によって実行されると、前記コードは、前記処理装置に、請求項1~108のいずれか1項に記載の方法を実装させる、
非一時的なコンピュータ可読媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023206900A JP2024026312A (ja) | 2019-04-24 | 2023-12-07 | 符号化映像の量子化残差差分パルス符号変調表現 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2019084008 | 2019-04-24 | ||
CNPCT/CN2019/084008 | 2019-04-24 | ||
PCT/US2020/029598 WO2020219733A1 (en) | 2019-04-24 | 2020-04-23 | Quantized residual differential pulse code modulation representation of coded video |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023206900A Division JP2024026312A (ja) | 2019-04-24 | 2023-12-07 | 符号化映像の量子化残差差分パルス符号変調表現 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022529369A true JP2022529369A (ja) | 2022-06-21 |
JP7414843B2 JP7414843B2 (ja) | 2024-01-16 |
Family
ID=72940605
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021563150A Active JP7311626B2 (ja) | 2019-04-24 | 2020-04-23 | 符号化映像の量子化残差差分パルス符号変調表現の制約 |
JP2021562399A Active JP7414843B2 (ja) | 2019-04-24 | 2020-04-23 | 符号化映像の量子化残差差分パルス符号変調表現 |
JP2023206900A Pending JP2024026312A (ja) | 2019-04-24 | 2023-12-07 | 符号化映像の量子化残差差分パルス符号変調表現 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021563150A Active JP7311626B2 (ja) | 2019-04-24 | 2020-04-23 | 符号化映像の量子化残差差分パルス符号変調表現の制約 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023206900A Pending JP2024026312A (ja) | 2019-04-24 | 2023-12-07 | 符号化映像の量子化残差差分パルス符号変調表現 |
Country Status (11)
Country | Link |
---|---|
US (3) | US11438597B2 (ja) |
EP (2) | EP3942811A4 (ja) |
JP (3) | JP7311626B2 (ja) |
KR (2) | KR102696039B1 (ja) |
CN (3) | CN117255200A (ja) |
AU (1) | AU2020262284B2 (ja) |
CA (1) | CA3137163C (ja) |
MX (1) | MX2021012675A (ja) |
SG (1) | SG11202111530YA (ja) |
WO (2) | WO2020219733A1 (ja) |
ZA (1) | ZA202107948B (ja) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020180102A1 (ko) * | 2019-03-04 | 2020-09-10 | 엘지전자 주식회사 | 영상 코딩 시스템에서 컨텍스트 코딩된 사인 플래그를 사용하는 영상 디코딩 방법 및 그 장치 |
EP3942811A4 (en) | 2019-04-24 | 2022-06-15 | ByteDance Inc. | CONSTRAINTS ON THE REPRESENTATION OF A DIFFERENTIAL MODULATION BY CODED PULSES OF QUANTIFIED RESIDUE FOR A CODED VIDEO |
CN117857783A (zh) | 2019-05-01 | 2024-04-09 | 字节跳动有限公司 | 使用量化残差差分脉冲码调制编解码的帧内编解码视频 |
EP3949387A4 (en) | 2019-05-02 | 2022-05-18 | ByteDance Inc. | SIGNALING IN A TRANSFORM JUMP MODE |
CN117615130A (zh) | 2019-05-02 | 2024-02-27 | 字节跳动有限公司 | 基于编解码树结构类型的编解码模式 |
CN114175660A (zh) * | 2019-05-22 | 2022-03-11 | Lg电子株式会社 | 使用bdpcm的图像解码方法及其装置 |
CN117241014A (zh) * | 2019-06-05 | 2023-12-15 | 华为技术有限公司 | Mpm列表构建方法、色度块的帧内预测模式获取方法及装置 |
FR3098073B1 (fr) | 2019-06-25 | 2021-09-24 | Fond B Com | Procédé de codage et de décodage d’une image d’une séquence vidéo et dispositif associé |
CN117241033A (zh) | 2019-08-06 | 2023-12-15 | 北京字节跳动网络技术有限公司 | 使用屏幕内容编码工具进行视频编码和解码 |
CN114342400B (zh) * | 2019-09-02 | 2024-06-28 | 北京字节跳动网络技术有限公司 | 基于色彩格式的编解码模式确定 |
JP7332795B2 (ja) | 2019-09-21 | 2023-08-23 | 北京字節跳動網絡技術有限公司 | クロマ・イントラモードのベースとなるサイズ制約 |
JP7536484B2 (ja) * | 2020-03-18 | 2024-08-20 | キヤノン株式会社 | 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム |
WO2023198075A1 (en) * | 2022-04-13 | 2023-10-19 | Beijing Bytedance Network Technology Co., Ltd. | Method, apparatus, and medium for video processing |
WO2023239347A1 (en) * | 2022-06-06 | 2023-12-14 | Google Llc | Enhanced multi-stage intra prediction |
WO2023237119A1 (en) * | 2022-06-10 | 2023-12-14 | Beijing Bytedance Network Technology Co., Ltd. | Method, apparatus, and medium for video processing |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011018965A1 (ja) * | 2009-08-12 | 2011-02-17 | ソニー株式会社 | 画像処理装置および方法 |
JP2016524409A (ja) * | 2013-06-05 | 2016-08-12 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | 残差差分パルスコード変調(dpcm)拡張ならびに変換スキップ、回転、および走査との調和 |
Family Cites Families (97)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11275592A (ja) * | 1998-01-22 | 1999-10-08 | Victor Co Of Japan Ltd | 動画像符号列変換装置及びその方法 |
KR100813963B1 (ko) | 2005-09-16 | 2008-03-14 | 세종대학교산학협력단 | 동영상의 무손실 부호화, 복호화 방법 및 장치 |
US8208545B2 (en) * | 2006-06-01 | 2012-06-26 | Electronics And Telecommunications Research Institute | Method and apparatus for video coding on pixel-wise prediction |
TW201028018A (en) | 2009-01-07 | 2010-07-16 | Ind Tech Res Inst | Encoder, decoder, encoding method and decoding method |
KR101379185B1 (ko) * | 2009-04-14 | 2014-03-31 | 에스케이 텔레콤주식회사 | 예측 모드 선택 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치 |
KR101483750B1 (ko) | 2009-07-24 | 2015-01-19 | 삼성전자주식회사 | 영상의 부호화 방법 및 장치, 영상 복호화 방법 및 장치 |
KR20110015356A (ko) | 2009-08-07 | 2011-02-15 | 한국전자통신연구원 | 차분 신호의 특성에 기반한 적응적인 변환 부호화/양자화 영역을 이용한 동영상 부호화/복호화 장치 및 그 방법 |
UA109312C2 (uk) * | 2011-03-04 | 2015-08-10 | Імпульсно-кодова модуляція з квантуванням при кодуванні відеоінформації | |
US8995523B2 (en) | 2011-06-03 | 2015-03-31 | Qualcomm Incorporated | Memory efficient context modeling |
US9253508B2 (en) * | 2011-11-04 | 2016-02-02 | Futurewei Technologies, Inc. | Differential pulse code modulation intra prediction for high efficiency video coding |
KR20130049523A (ko) | 2011-11-04 | 2013-05-14 | 오수미 | 인트라 예측 블록 생성 장치 |
US10390046B2 (en) | 2011-11-07 | 2019-08-20 | Qualcomm Incorporated | Coding significant coefficient information in transform skip mode |
KR101830352B1 (ko) | 2011-11-09 | 2018-02-21 | 에스케이 텔레콤주식회사 | 스킵모드를 이용한 동영상 부호화 및 복호화 방법 및 장치 |
US9621894B2 (en) | 2012-01-13 | 2017-04-11 | Qualcomm Incorporated | Determining contexts for coding transform coefficient data in video coding |
US9332259B2 (en) | 2012-01-18 | 2016-05-03 | Qualcomm Incorporated | Indication of use of wavefront parallel processing in video coding |
US9838684B2 (en) | 2012-04-11 | 2017-12-05 | Qualcomm Incorporated | Wavefront parallel processing for video coding |
US9621921B2 (en) | 2012-04-16 | 2017-04-11 | Qualcomm Incorporated | Coefficient groups and coefficient coding for coefficient scans |
CN104380734B (zh) | 2012-06-07 | 2017-09-15 | 寰发股份有限公司 | 编码以及解码视频数据的方法和装置 |
US9426466B2 (en) | 2012-06-22 | 2016-08-23 | Qualcomm Incorporated | Transform skip mode |
EP2869557B1 (en) | 2012-06-29 | 2023-08-09 | Electronics And Telecommunications Research Institute | Method and device for encoding/decoding images |
US9549182B2 (en) | 2012-07-11 | 2017-01-17 | Qualcomm Incorporated | Repositioning of prediction residual blocks in video coding |
US9264713B2 (en) | 2012-07-11 | 2016-02-16 | Qualcomm Incorporated | Rotation of prediction residual blocks in video coding with transform skipping |
US9407915B2 (en) | 2012-10-08 | 2016-08-02 | Google Inc. | Lossless video coding with sub-frame level optimal quantization values |
US20140286413A1 (en) * | 2013-03-25 | 2014-09-25 | Qualcomm Incorporated | Disabling sign data hiding in video coding |
CN113259683B (zh) | 2013-04-08 | 2024-08-23 | Ge视频压缩有限责任公司 | 分量间预测 |
US9667990B2 (en) | 2013-05-31 | 2017-05-30 | Qualcomm Incorporated | Parallel derived disparity vector for 3D video coding with neighbor-based disparity vector derivation |
US9558567B2 (en) | 2013-07-12 | 2017-01-31 | Qualcomm Incorporated | Palette prediction in palette-based video coding |
US9648335B2 (en) | 2013-07-12 | 2017-05-09 | Qualcomm Incorporated | Bitstream restrictions on picture partitions across layers |
US11470339B2 (en) * | 2013-08-27 | 2022-10-11 | Qualcomm Incorporated | Residual prediction for intra block copying |
WO2015057438A1 (en) | 2013-10-14 | 2015-04-23 | Mediatek Singapore Pte. Ltd. | Method of residue differential pulse-code modulation for hevc range extension |
KR20150055858A (ko) | 2013-11-14 | 2015-05-22 | 삼성전자주식회사 | 차분 레지듀얼 신호를 이용한 비디오의 부호화 방법 및 장치, 그 복호화 방법 및 장치 |
GB201321851D0 (en) | 2013-12-10 | 2014-01-22 | Canon Kk | Run length parameters coding for palette mode |
TWI536811B (zh) * | 2013-12-27 | 2016-06-01 | 財團法人工業技術研究院 | 影像處理方法與系統、解碼方法、編碼器與解碼器 |
US20150189321A1 (en) | 2014-01-02 | 2015-07-02 | Mediatek Inc. | Method of Binarization and Context Adaptive Binary Arithmetic Coding of Depth Coding Syntax |
US9860540B2 (en) | 2014-01-03 | 2018-01-02 | Qualcomm Incorporated | Inference of nooutputofpriorpicsflag in video coding |
CN106105227B (zh) | 2014-03-16 | 2019-12-24 | Vid拓展公司 | 用于无损视频译码的信令的方法和设备 |
US9877035B2 (en) * | 2014-03-17 | 2018-01-23 | Qualcomm Incorporated | Quantization processes for residue differential pulse code modulation |
KR102298599B1 (ko) | 2014-04-29 | 2021-09-03 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 샘플 적응 오프셋 필터링에 대한 인코더측 결정 |
EP3917146A1 (en) | 2014-09-30 | 2021-12-01 | Microsoft Technology Licensing, LLC | Rules for intra-picture prediction modes when wavefront parallel processing is enabled |
GB2531004A (en) * | 2014-10-06 | 2016-04-13 | Canon Kk | Residual colour transform signalled at sequence level for specific coding modes |
US9918105B2 (en) * | 2014-10-07 | 2018-03-13 | Qualcomm Incorporated | Intra BC and inter unification |
WO2016074147A1 (en) | 2014-11-11 | 2016-05-19 | Mediatek Singapore Pte. Ltd. | Separated coding tree for luma and chroma |
EP3032830A1 (en) * | 2014-12-08 | 2016-06-15 | Thomson Licensing | Differential coding of intra modes |
US10321140B2 (en) | 2015-01-22 | 2019-06-11 | Mediatek Singapore Pte. Ltd. | Method of video coding for chroma components |
US10924743B2 (en) | 2015-02-06 | 2021-02-16 | Microsoft Technology Licensing, Llc | Skipping evaluation stages during media encoding |
US10057574B2 (en) | 2015-02-11 | 2018-08-21 | Qualcomm Incorporated | Coding tree unit (CTU) level adaptive loop filter (ALF) |
US10659783B2 (en) | 2015-06-09 | 2020-05-19 | Microsoft Technology Licensing, Llc | Robust encoding/decoding of escape-coded pixels in palette mode |
WO2017041271A1 (en) | 2015-09-10 | 2017-03-16 | Mediatek Singapore Pte. Ltd. | Efficient context modeling for coding a block of data |
WO2017045101A1 (en) | 2015-09-14 | 2017-03-23 | Mediatek Singapore Pte. Ltd. | Advanced deblocking filter in video coding |
CN112565792B (zh) | 2015-10-19 | 2023-07-11 | 寰发股份有限公司 | 管理已解码图像缓存器的方法及装置 |
US10972731B2 (en) | 2015-11-10 | 2021-04-06 | Interdigital Madison Patent Holdings, Sas | Systems and methods for coding in super-block based video coding framework |
US10440399B2 (en) | 2015-11-13 | 2019-10-08 | Qualcomm Incorporated | Coding sign information of video data |
WO2017088093A1 (en) | 2015-11-23 | 2017-06-01 | Mediatek Singapore Pte. Ltd. | On the smallest allowed block size in video coding |
WO2017139937A1 (en) | 2016-02-18 | 2017-08-24 | Mediatek Singapore Pte. Ltd. | Advanced linear model prediction for chroma coding |
US11223852B2 (en) | 2016-03-21 | 2022-01-11 | Qualcomm Incorporated | Coding video data using a two-level multi-type-tree framework |
EP3446480A1 (en) * | 2016-04-22 | 2019-02-27 | VID SCALE, Inc. | Prediction systems and methods for video coding based on filtering nearest neighboring pixels |
EP3453173B1 (en) | 2016-05-05 | 2021-08-25 | InterDigital Madison Patent Holdings, SAS | Control-point based intra direction representation for intra coding |
WO2017194312A2 (en) * | 2016-05-13 | 2017-11-16 | Thomson Licensing | Method and apparatus for video coding with adaptive clipping |
RU2710667C1 (ru) | 2016-05-28 | 2019-12-30 | МедиаТек Инк. | Способ и устройство привязки к текущему изображению для кодирования видео |
CN116708777A (zh) | 2016-07-18 | 2023-09-05 | 韩国电子通信研究院 | 图像编码/解码方法和装置以及存储比特流的记录介质 |
US10390015B2 (en) | 2016-08-26 | 2019-08-20 | Qualcomm Incorporated | Unification of parameters derivation procedures for local illumination compensation and cross-component linear model prediction |
JP2018056685A (ja) * | 2016-09-27 | 2018-04-05 | 株式会社ドワンゴ | 画像符号化装置、画像符号化方法、及び画像符号化プログラム、並びに、画像復号装置、画像復号方法、及び画像復号プログラム |
CN109792516B (zh) * | 2016-10-04 | 2021-05-25 | 联发科技股份有限公司 | 图像和视频编解码中用于帧内色度编解码的方法及装置 |
US11025903B2 (en) * | 2017-01-13 | 2021-06-01 | Qualcomm Incorporated | Coding video data using derived chroma mode |
US10194147B2 (en) | 2017-01-19 | 2019-01-29 | Google Llc | DC coefficient sign coding scheme |
PL3477949T3 (pl) | 2017-02-06 | 2024-02-19 | Huawei Technologies Co., Ltd. | Sposób i urządzenie do dekodowania obrazu z zastosowaniem informacji o podziale jednostki drzewa kodowania |
US10779007B2 (en) | 2017-03-23 | 2020-09-15 | Mediatek Inc. | Transform coding of video data |
EP4415366A2 (en) | 2017-08-03 | 2024-08-14 | Sharp Kabushiki Kaisha | Systems and methods for partitioning video blocks in an inter prediction slice of video data |
WO2019029951A1 (en) | 2017-08-08 | 2019-02-14 | Thomson Licensing | METHOD AND APPARATUS FOR VIDEO ENCODING AND DECODING |
WO2019234669A1 (en) | 2018-06-07 | 2019-12-12 | Beijing Bytedance Network Technology Co., Ltd. | Signaled mv precision |
WO2019244117A1 (en) | 2018-06-21 | 2019-12-26 | Beijing Bytedance Network Technology Co., Ltd. | Unified constrains for the merge affine mode and the non-merge affine mode |
CN110636299B (zh) | 2018-06-21 | 2022-06-14 | 北京字节跳动网络技术有限公司 | 用于处理视频数据的方法、装置及计算机可读记录介质 |
US11973944B2 (en) | 2018-06-27 | 2024-04-30 | Electronics And Telecommunications Research Institute | Image encoding/decoding method and device, and recording medium in which bitstream is stored for block division at picture boundary |
CN115134599A (zh) | 2018-06-29 | 2022-09-30 | 抖音视界有限公司 | 更新查找表(lut)的条件 |
WO2020003261A1 (en) | 2018-06-29 | 2020-01-02 | Beijing Bytedance Network Technology Co., Ltd. | Selection from multiple luts |
JP7181395B2 (ja) | 2018-07-02 | 2022-11-30 | 北京字節跳動網絡技術有限公司 | イントラ予測モードを有するルックアップテーブルおよび非隣接ブロックからのイントラモード予測 |
CN113316931B (zh) | 2018-11-22 | 2024-04-12 | 北京字节跳动网络技术有限公司 | 视频处理中的脉冲编解码调制技术 |
JP2021513755A (ja) * | 2019-01-15 | 2021-05-27 | エルジー エレクトロニクス インコーポレイティド | 変換スキップフラグを利用した映像コーディング方法及び装置 |
US11012701B2 (en) * | 2019-02-22 | 2021-05-18 | Tencent America LLC | Residual coding for transform skip mode and block differential pulse-code modulation |
WO2020172668A1 (en) * | 2019-02-24 | 2020-08-27 | Tencent America LLC | Improved residual coding for transform skip mode and block differential pulse-code modulation |
US11825120B2 (en) | 2019-02-28 | 2023-11-21 | Qualcomm Incorporated | Subblock coding by generalized intra prediction in video coding |
WO2020175938A1 (ko) | 2019-02-28 | 2020-09-03 | 주식회사 엑스리스 | 영상 신호 부호화/복호화 방법 및 이를 위한 장치 |
WO2020180102A1 (ko) | 2019-03-04 | 2020-09-10 | 엘지전자 주식회사 | 영상 코딩 시스템에서 컨텍스트 코딩된 사인 플래그를 사용하는 영상 디코딩 방법 및 그 장치 |
US11202100B2 (en) | 2019-03-11 | 2021-12-14 | Qualcomm Incorporated | Coefficient coding for transform skip mode |
US11128876B2 (en) | 2019-03-12 | 2021-09-21 | Qualcomm Incorporated | Joint coefficient coding of transform skip and BDPCM mode for 4:4:4 color formats |
US11070812B2 (en) | 2019-03-12 | 2021-07-20 | Qualcomm Incorporated | Coefficient domain block differential pulse-code modulation in video coding |
US11451826B2 (en) | 2019-04-15 | 2022-09-20 | Tencent America LLC | Lossless coding mode and switchable residual coding |
WO2020213931A1 (ko) * | 2019-04-16 | 2020-10-22 | 엘지전자 주식회사 | 레지듀얼 계수의 차분 부호화를 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법 |
WO2020214980A1 (en) | 2019-04-19 | 2020-10-22 | Bytedance Inc. | Context coding for transform skip mode |
KR20210145123A (ko) | 2019-04-23 | 2021-12-01 | 주식회사 윌러스표준기술연구소 | 다중 변환 커널을 사용하는 비디오 신호 처리 방법 및 장치 |
CN113728640B (zh) | 2019-04-23 | 2024-08-02 | 北京字节跳动网络技术有限公司 | 帧内预测和残差编解码 |
EP3942811A4 (en) | 2019-04-24 | 2022-06-15 | ByteDance Inc. | CONSTRAINTS ON THE REPRESENTATION OF A DIFFERENTIAL MODULATION BY CODED PULSES OF QUANTIFIED RESIDUE FOR A CODED VIDEO |
US11190758B2 (en) | 2019-04-25 | 2021-11-30 | Qualcomm Incorporated | Block-based quantized residual domain pulse code modulation assignment for intra prediction mode derivation |
US11368721B2 (en) | 2019-04-30 | 2022-06-21 | Tencent America LLC | Method and apparatus for interaction between intra prediction mode and block differential pulse-code modulation mode |
CN117857783A (zh) | 2019-05-01 | 2024-04-09 | 字节跳动有限公司 | 使用量化残差差分脉冲码调制编解码的帧内编解码视频 |
EP3949387A4 (en) | 2019-05-02 | 2022-05-18 | ByteDance Inc. | SIGNALING IN A TRANSFORM JUMP MODE |
CN117615130A (zh) | 2019-05-02 | 2024-02-27 | 字节跳动有限公司 | 基于编解码树结构类型的编解码模式 |
-
2020
- 2020-04-23 EP EP20794622.9A patent/EP3942811A4/en active Pending
- 2020-04-23 MX MX2021012675A patent/MX2021012675A/es unknown
- 2020-04-23 AU AU2020262284A patent/AU2020262284B2/en active Active
- 2020-04-23 JP JP2021563150A patent/JP7311626B2/ja active Active
- 2020-04-23 WO PCT/US2020/029598 patent/WO2020219733A1/en unknown
- 2020-04-23 WO PCT/US2020/029603 patent/WO2020219737A1/en unknown
- 2020-04-23 CN CN202311463066.XA patent/CN117255200A/zh active Pending
- 2020-04-23 SG SG11202111530YA patent/SG11202111530YA/en unknown
- 2020-04-23 EP EP20794015.6A patent/EP3942820A4/en active Pending
- 2020-04-23 KR KR1020217032760A patent/KR102696039B1/ko active IP Right Grant
- 2020-04-23 CN CN202080030903.8A patent/CN113728642B/zh active Active
- 2020-04-23 JP JP2021562399A patent/JP7414843B2/ja active Active
- 2020-04-23 CN CN202080031685.XA patent/CN113906753B/zh active Active
- 2020-04-23 KR KR1020217032761A patent/KR102630415B1/ko active IP Right Grant
- 2020-04-23 CA CA3137163A patent/CA3137163C/en active Active
-
2021
- 2021-08-25 US US17/411,296 patent/US11438597B2/en active Active
- 2021-08-25 US US17/411,333 patent/US11431984B2/en active Active
- 2021-10-18 ZA ZA2021/07948A patent/ZA202107948B/en unknown
-
2022
- 2022-08-04 US US17/881,197 patent/US11985323B2/en active Active
-
2023
- 2023-12-07 JP JP2023206900A patent/JP2024026312A/ja active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011018965A1 (ja) * | 2009-08-12 | 2011-02-17 | ソニー株式会社 | 画像処理装置および方法 |
JP2016524409A (ja) * | 2013-06-05 | 2016-08-12 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | 残差差分パルスコード変調(dpcm)拡張ならびに変換スキップ、回転、および走査との調和 |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7414843B2 (ja) | 符号化映像の量子化残差差分パルス符号変調表現 | |
JP7311627B2 (ja) | 量子化残差差分パルス符号変調符号化を使用したイントラ符号化映像 | |
JP2023169300A (ja) | イントラコーディングモードにおけるマトリクスの導出 | |
JP7288083B2 (ja) | 符号化ツリー構造タイプに基づく符号化モード | |
JP2023120212A (ja) | 変換スキップモードにおける信号通知 | |
US11490089B2 (en) | Transform bypass coded residual blocks in digital video | |
RU2807214C2 (ru) | Ограничение представления дифференциальной импульсно-кодовой модуляции квантового остатка кодированного видео |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211020 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211020 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220608 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221129 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230220 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230606 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230904 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231129 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231228 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7414843 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |