JP2023011862A - 映像処理におけるパルス符号変調技術 - Google Patents
映像処理におけるパルス符号変調技術 Download PDFInfo
- Publication number
- JP2023011862A JP2023011862A JP2022177350A JP2022177350A JP2023011862A JP 2023011862 A JP2023011862 A JP 2023011862A JP 2022177350 A JP2022177350 A JP 2022177350A JP 2022177350 A JP2022177350 A JP 2022177350A JP 2023011862 A JP2023011862 A JP 2023011862A
- Authority
- JP
- Japan
- Prior art keywords
- video
- pcm
- current block
- indication
- mode
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 232
- 238000012545 processing Methods 0.000 title claims description 78
- 238000006243 chemical reaction Methods 0.000 claims abstract description 29
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 claims description 44
- 241000023320 Luma <angiosperm> Species 0.000 claims description 34
- 230000011664 signaling Effects 0.000 claims description 17
- 238000001914 filtration Methods 0.000 claims description 16
- 230000003044 adaptive effect Effects 0.000 claims description 15
- 238000004590 computer program Methods 0.000 claims description 13
- 230000009466 transformation Effects 0.000 claims description 10
- 230000015654 memory Effects 0.000 claims description 9
- 238000005192 partition Methods 0.000 claims description 8
- 230000001131 transforming effect Effects 0.000 claims description 3
- 239000000523 sample Substances 0.000 description 42
- 230000008569 process Effects 0.000 description 20
- 238000003672 processing method Methods 0.000 description 13
- 230000001419 dependent effect Effects 0.000 description 7
- 238000013461 design Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 239000013074 reference sample Substances 0.000 description 4
- 230000002123 temporal effect Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 101100155952 Escherichia coli (strain K12) uvrD gene Proteins 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 235000008733 Citrus aurantifolia Nutrition 0.000 description 1
- 235000011941 Tilia x europaea Nutrition 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 239000004615 ingredient Substances 0.000 description 1
- 239000004571 lime Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 239000013598 vector Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/96—Tree coding, e.g. quad-tree coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Description
パリ条約に基づく適用可能な特許法および/または規則に基づいて、本願は、2018年11月22日出願の国際特許出願第PCT/CN2018/116885号の優先権および利益を適時に主張することを目的とする。米国法に基づくすべての目的のために、上記出願の開示全体は、本明細書の開示の一部として参照により援用される。
本明細書は、映像符号化技術に関する。具体的には、画像/映像符号化におけるイントラ予測、特に多重参照ラインイントラ予測およびPCM(Pulse Code Modulation:パルス符号変調)に関する。本発明は、HEVCのような既存の映像符号化規格またはファイナライズされるべき規格(Versatile Video Coding)に適用されてよい。本発明は、将来の映像符号化規格または映像コーデックにも適用されてよい。
映像符号化規格は、主に周知のITU-TおよびISO/IEC規格の開発によって発展してきた。ITU-TはH.261とH.263を、ISO/IECはMPEG-1とMPEG-4Visualを、両団体はH.262/MPEG-2VideoとH.264/MPEG-4 AVC(Advanced Video Coding)とH.265/HEVC規格を共同で作成した。映像符号化規格、H.262は、時間的予測プラス変換符号化が利用されるハイブリッド映像符号化構造に基づく。HEVCを超えた将来の映像符号化技術を探索するため、2015年には、VCEGとMPEGが共同でJVET(Joint Video Exploration Team)を設立した。それ以来、多くの新しい方法がJVETによって採用され、JEM(Joint Exploration Model)と呼ばれる参照ソフトウェアに組み込まれてきた。2018年4月、VCEG(Q6/16)とISO/IEC JTC1 SC29/WG11(MPEG)の間にJVET(Joint Video Expert Team)が作られ、HEVCと比較してビットレートを50%低減することを目標としたVVC規格に取り組むことになった。
ピクチャにおいて、2つの異なる種類の冗長性を特定することができる。1)空間的または時間的冗長性、2)精神的-視覚的冗長性。空間的冗長性を除去するために、予測処理が使用される。イントラ予測は、ピクチャフレームのピクセルを予測する処理である。イントラピクチャ予測は、ピクチャブロックを予測するために近傍のピクセルを使用する。イントラ予測の前に、フレームを分割しなければならない。
HEVCにおいて、1つのピクチャ/スライス/タイルを複数のCTU(Coding Tree Unit)に分割してもよい。テクスチャの複雑性などのパラメータに基づいて、CTUは、64×64、32×32、または16×16のサイズを有することができる。従って、CTU(Coding Tree Unit)は、符号化論理ユニットであり、この符号化論理ユニットは、HEVCビットストリームに符号化される。これは、3つのブロック、即ち、輝度(Y)、2つの彩度成分(CbおよびCr)からなる。4:2:0のカラーフォーマットを例として、輝度成分はL×L個のサンプルを有し、各彩度成分はL/2×L/2個のサンプルを有する。各ブロックは、CTB(Coding Tree Block)と呼ばれる。各CTBは、CTU(64×64、32×32、または16×16)と同じサイズ(L×L)を有する。各CTBは、CTBと同じサイズから8×8程度の小ささまで、4分木構造に繰り返して分割され得る。このように分割された各ブロックは、CB(Coding Block)と呼ばれ、予測タイプ(インター予測またはイントラ予測)の決定点となる。予測タイプは、他のパラメータとともに、CU(Coding Unit)において符号化される。そのため、CUは、HEVCにおける予測の基本単位であり、その各々は、前述の符号化されたデータから予測される。CUは、3つのCB(Y、Cb、Cr)からなる。CBは依然として大き過ぎて、動きベクトル(インターピクチャ(時間的)予測)またはイントラピクチャ(空間的)予測モードを記憶できない場合がある。そこで、PB(Prediction Block)を導入した。各CBは、時間的および/または空間的予測可能性に基づいて、異なる形でPBに分割されてもよい。CTUは、32×32、16×16、8×8、または4×4のサイズを有していてよい。
I_PCMモードでは、予測、変換、量子化、およびエントロピー符号化がバイパスされる。予測または変換を適用せずにサンプル値を直接表現することによる、1つのブロックのサンプルの符号化。
7.3.2.2.1 一般シーケンスパラメータセットRBSP構文
0に等しいpcm_enabled_flagは、PCM関連の構文(pcm_sample_bit_depth_luma_minus1,pcm_sample_bit_depth_chroma_minus1,log2_min_pcm_luma_coding_block_size_minus3,log2_diff_max_min_pcm_luma_coding_block_size,pcm_loop_filter_disabled_flag,pcm_flag,pcm_alignment_zero_bitの構文要素、およびpcm_sample()の構文構造)がCVSの存在しないことを規定する。
PcmBitDepthY=pcm_sample_bit_depth_luma_minus1+1 (7-xx)
PcmBitDepthC=pcm_sample_bit_depth_chroma_minus1+1 (7-yy)
-pcm_loop_filter_disabled_flagが1に等しい場合、pcm_flagが1に等しい符号化ユニット内の再構築されたサンプルに対する非ブロック化フィルタおよびサンプル適応オフセットフィルタ処理が無効になる。
-それ以外の場合(pcm_loop_filter_disabled_flagの値が0に等しい)、pcm_flagが1に等しい符号化ユニット内の再構成されたサンプルの非ブロック化フィルタおよびサンプル適応オフセットフィルタ処理は無効にならない。
1に等しいpcm_flag[x0][y0]は、pcm_sample()の構文構造が存在し、transform_tree()の構文構造が位置(x0、y0)の輝度符号化ブロックを含む符号化ユニットに存在しないことを規定する。0に等しいpcm_flag[x0][y0]は、pcm_sample()の構文構造が存在しないことを規定する。pcm_flag[x0][y0]が存在しない場合、0に等しいと推測される。
輝度成分に対して、全てのブロックサイズに対して、平面、DC、および33個の角度予測モードを含む35個のモードがある。これらの輝度予測モードをより良好に符号化するために、1つのMPM(Most Probable Mode:最確モード)フラグは、まず、3つのMPMモードのうちの1つが選択されたかどうかを示すための符号である。MPMフラグが偽である場合、32個の休止モードを固定長符号化にて符号化する。
-AまたはBのいずれもが平面モードでない場合、MPM[2]は平面モードに設定される。
-そうではなく、AまたはBのいずれもがDCモードでない場合、MPM[2]はDCモードに設定される。
-そうでない場合(2つの最確モードのうちの1つは平面であり、他方はDCである)、MPM[2]は、角度モード26に等しく(直接垂直に)設定される。
MPM[1]=2+((A-2-1+32)%32)
MPM[2]=2+((A-2+1)%32)
2.2.1 67個のイントラ予測モードを有するイントラモード符号化
VVC参照ソフトウェアVTM3.0.rc1において、図3に示されるように、LEFTおよびABOVEとして表される近傍位置AおよびBのイントラモードのみが、MPMリストの生成に使用される。非MPM符号化の場合、短縮バイナリ符号化が適用される。
1.初期値:MPM[6]={ModeA,!ModeA,50,18,46,54};
2.ModeAがModeBに等しい場合、以下が適用される。
-ModeAが1(非DC/平面)よりも大きい場合、MPM[6]={ModeA,planar,DC,2+((candIntraPredModeA+62)%65),2+((candIntraPredModeA-1)%65,2+((candIntraPredModeA+61)%65))};
3.そうでない場合(ModeAがModeBに等しい)、以下が適用される。
-MPM[0]=ModeA,MPM[1]=ModeB
-変数biggerIdxを以下のように設定する。
biggerIdx=candModeList[0]>candModeList[1]?0:1
-ModeAおよびModeBの両方が1よりも大きい場合、x=2..5のMPM[x]は、以下のように導出される。
MPM[2]=INTRA_PLANAR
MPM[3]=INTRA_DC
-MPM[biggerIdx]-MPM[!biggerIdx]が64にも1にも等しくない場合、以下が適用される。
MPM[4]=2+((MPM[biggerIdx]+62)%65)
MPM[5]=2+((MPM[biggerIdx]-1)%65)
-そうでない場合、以下が適用される。
MPM[4]=2+((MPM[biggerIdx]+61)%65)
MPM[5]=2+(candModeList[biggerIdx]%65)
-そうではなく、ModeAとModeBとの和が2以上である場合、以下が適用される。
MPM[2]=!MPM[!biggerIdx]
MPM[3]=2+((MPM[biggerIdx]+62)%65)
MPM[4]=2+((MPM[biggerIdx]-1)%65)
MPM[5]=2+((MPM[biggerIdx]+61)%65)
ここで、%はモジュロ演算子を表し、すなわち、a%bはaをbで割った剰余を表す。
従来の角度イントラ予測方向は、時計回り方向に45度から-135度で定義される。VTM2において、いくつかの従来の角度イントラ予測モードは、非正方形のブロックのために、広角イントラ予測モードに適応的に置き換えられる。置換されたモードは、元の方法を使用して信号通知され、構文解析後、広角モードのインデックスに再マッピングされる。あるブロックのためのイントラ予測モードの総数は変わらず、即ち、67であり、イントラモード符号化は変わらない。
VTM2において、平面モードのイントラ予測の結果は、PDPC(Position Dependent intra Prediction Combination)法によってさらに修正される。PDPCは、フィルタリングされていない境界参照サンプルと、フィルタリングされた境界参照サンプルを有するHEVCスタイルのイントラ予測との組み合わせを呼び出すイントラ予測方法である。PDPCは、信号通知をせずに、以下のイントラモード、即ち、平面、DC、水平、垂直、左下の角度モードおよびその8つの隣接する角度モード、並びに右上の角度モードおよびその8つの隣接する角度モードに適用される。
pred(x,y)=(wL×R-1,y+wT×Rx,-1-wTL×R-1,-1+(64-wL-wT+wTL)×pred(x,y)+32)>>6
イントラ予測のために、隣接する左の列および上のラインの再構成サンプル(即ち、参照ライン0)を常に使用する代わりに、異なる距離に位置する参照サンプルを使用することを可能にすることが提案される。
-参照ラインインデックス信号通知
-参照ラインインデックス>0の場合、MPMリストに含まれているもののみ、および、残りのモードがない信号のmpmインデックスのみ
-参照ラインインデックス=0の場合、元の設計と同じように、すべての種類のイントラ予測モードが選択されてもよい
-1つの輝度ブロックに対して3つのラインのうち1つを選択してもよく、図7に示すように、参照ライン0、1、3が選択されてもよい。
-CTU規制の最上ライン
-CTU内部の最初のラインのブロックに対してMRLを無効化する
HEVC彩度符号化において、1つの彩度ブロックに対して5つのモード(左上の対応する輝度ブロックからのイントラ予測モードである1つのDM(Direct Mode;直接モード)および4つのデフォルトモードを含む)が許可される。2つの色成分は、同じイントラ予測モードを共有する。
交差成分の冗長性を低減するために、別名LMと呼ばれるCCLM(Cross-Component Linear Model)予測モードは、JEMにおいて使用され、それに対し、彩度サンプルが、線形モデルを使用することによって、次のように同じCUの再構成された輝度サンプルに基づいて予測される。
VTM-2.0には、JEMのようなCCLMが採用されている。しかし、JEMにおけるMM-CCLMはVTM-2.0には採用されていない。
-1つのDM(Direct Mode)を、彩度ブロックの同一位置にある中心位置(図9のCR)を含む輝度CBに関連付けられた1つのイントラ輝度予測モードに設定する。TLで示す同一位置を有する一例を図9に示した。
-1つの交差成分線形モデル(CCLM)モード
-4つのデフォルトモード(図1に示すように、DC、平面、水平、垂直モード)。4つのデフォルトモードのうちの1つがDMモードと同じである場合、それは、すなわち、図10に破線で示される最大のモードインデックスを有するイントラ予測モードに置き換えられる。
VVCにおけるMRLイントラ予測の現在の設計には、次のような問題がある。
1)VTM3.0-rc1において、PCMフラグは、イントラ予測処理に使用される参照ラインのインデックスの後に符号化される。従って、1つのブロックを符号化するためにPCMを使用してよくても、PCM符号化ブロックに対して通常のイントラ予測は許可されないので、依然として参照ラインインデックスが信号通知され、ビットが浪費される。
2)VVCは、ALF(Adaptive Loop Filter:適応型ループフィルタ)を新たに採用している。PCMでどのように取り扱うかは不明である。
3)HEVCにおけるフィルタリング処理の決定において、1つの輝度ブロックの1つのPCMフラグおよび2つの対応する彩度ブロックが使用される。しかしながら、別個のツリーを使用する場合、輝度ブロックのサンプルおよび彩度成分のサンプルは、異なるPCMフラグが選択してもよく、即ち、1つの輝度ブロックをPCMで符号化し、且つ対応するクロマブロックを非PCMで符号化してもよく、従って、フィルタリング決定処理において1つのPCMフラグを使用することは、望ましくない。
4)MRLIPは、輝度成分にのみ適用される。しかしながら、彩度成分の場合、特に4:4:4のカラーフォーマットの場合、これも有効であってもよい。
5)MRLIPは、符号化性能を低下させ得るインターイントラ符号化ブロックに適用できなかった。
6)ゼロでない指数を有する参照ラインは、角度モードに対してより効率的である。参照ラインインデックスが0よりも大きい場合、MPMリストにおけるモードを使用する。しかしながら、MRLIPの効率が低いMPMリストにDC/平面モードを含めてもよい。
7)HEVCにおいて、最小のCUサイズは8×8であり、VVCにおいて、最小のCUサイズは4×4である。従って、4×4、4×8、8×4ブロックは、PCMモードを適用すべきであるが、現在は許可されていない。さらに、PCMの元の設計は、正方形のCUのみを処理し、VVCでは、非正方形のCUが存在する。
以下に列挙される詳細な技術は、一般的な概念を説明するための例と見なされるべきである。これらの技術は狭い意味で解釈されるべきではない。さらに、これらの技術は、任意の方法で組み合わせることができる。
a.一例において、このブロックのためにPCMが無効化された場合、MRLIPにおいて使用される参照ラインインデックスがさらに信号通知される。
b.一例において、このブロックのためにPCMが有効化される場合、MRLIPにおいて使用される参照ラインインデックスの信号通知はスキップされる。
c.あるいは、MRLIPモード情報が0に等しいまたは等しくない場合、PCMフラグは信号通知されない。
a.ALF有効化/無効化フラグの信号通知は、PCM有効化/無効化フラグに依存してもよい。あるいは、PCM有効化/無効化フラグの信号通知は、ALF有効化/無効化フラグに依存してもよい。
b.1つのブロックのサイズがCTUのサイズに等しい場合、ALF有効化/無効化フラグの前に、まずPCMフラグを信号通知してもよい。PCMフラグが真である場合、ALFフラグはもはや信号通知されない。
c.1つのブロックのサイズがCTUのサイズに等しい場合、まず、SAO有効化/無効化フラグの前に、PCMフラグを信号通知してもよい。PCMフラグが真である場合、SAOフラグはもはや信号通知されない。
d.あるいは、さらに、上記の方法は、pcm_loop_filter_disabled_flagが1に等しい場合にのみしてもよい。
a.一例において、PCM有効化/無効化フラグをどのように信号通知/解釈/使用するかは、異なる色成分に対する別個のパーティションツリー構造が使用されるかどうかに依存してもよい。
b.一例において、輝度および彩度成分のための別個のパーティションツリー構造が適用される場合、1つの輝度ブロックのための第1のフラグを信号通知してもよく、1つの彩度ブロックのための第2のフラグを独立して信号通知してもよい。
c.一例において、3つの色成分のための別個のパーティションツリー構造が適用される場合、3つのフラグが独立して信号通知されてもよい。
d.一例において、色成分に応じて、PCM有効化/無効化フラグは、次の映像符号化処理を制御するために、例えば、cm_lumaおよびpcm_chromaの異なる変数として解釈される。
e.フィルタリング処理(例えば、非ブロック化フィルタ、サンプル適応型ループフィルタ、適応型ループフィルタ)において、1つの色成分の1つのブロックをフィルタリングするかどうかは、色成分に関連付けられたPCM有効化/無効化フラグに依存してもよい。
f.あるいは、別個のパーティションツリー構造が有効化されても、PCMフラグは輝度成分のみに信号通知され、一方、彩度ブロックの場合、1つの対応する輝度ブロック内の任意の位置(例えば、対応する輝度ブロックの中心位置)からPCMフラグを継承してもよい。
g.あるいは、さらに、許容されるPCM符号化ブロックのサイズ/寸法の制限は、異なる色成分に対して、または輝度および彩度に対して別個に信号通知されてもよい。例えば、4:2:0を例として、1つの64×64の輝度ブロック(CTUサイズが64×64に等しい)は、2つの32×32の彩度ブロックに対応する。輝度ブロックは、4分木分割によって4つのCUに分割してもよい(4つの32×32の輝度CUが存在する)。元の設計では、別個のツリーがなく、32×32の輝度CUの各々に対して1つのフラグのみが符号化され、それは、輝度および彩度が同じ分割構造を共有するので、対応する16×16のCb/Crブロックに使用される。合計で4つのフラグを符号化してもよい。提案した方法の1つの例示的な実施形態において、別個のツリーを適用する場合、輝度ブロックを2分木で2つのCUに分割してもよい(32×16のCbのCUが2つ、32×16のCrのCUが2つ)。この場合、4つの32×32の輝度ブロックの4つのフラグ、および2つの32×16の彩度ブロックの2つのフラグを信号通知してもよい。同様に、元の設計は、フィルタリング処理において1つの輝度ブロックおよび2つの彩度ブロックに関連付けられたPCMフラグをチェックするが、この提案した方法においては、1つの輝度ブロックのPCMフラグおよび1つの彩度ブロックのPCMフラグをフィルタリング処理の判定のために独立してチェックしてもよい。
a.一例において、構文解析後の信号通知されたモードと広角モードのインデックスとの間のマッピングは、スキップされる。
b.あるいは、信号通知される参照ラインのインデックスにかかわらず、隣接参照ラインに対して広角モードを使用する。
a.一例において、4:4:4のカラーフォーマットでは、MRLは、3つの色成分全てに対して有効にされてもよい。
b.参照ラインインデックスは、1つのブロックのすべての色成分に対して1回符号化されてもよい。
c.あるいは、2つの参照ラインインデックスを符号化してもよく、1つは輝度色成分(例えば、符号化される第1の色成分)のためのものであり、1つは他の2つの色成分のためのものである。
d.あるいは、3つの参照ラインインデックスを符号化してもよく、1つは輝度色成分(例えば、符号化対象の第1の色成分)のためのものであり、他の2つは他の2つの色成分のためのものである。
e.あるいは、多重参照ラインインデックスを符号化する必要がある場合、インデックス差を符号化するために予測符号化を適用してもよい。
f.あるいは、多重参照ラインインデックスを符号化する必要がある場合、まず1つのフラグを信号通知して、それらのすべてが同じであることを知らせてもよい。
g.一例において、異なる色成分は、ラインの異なる候補を選択してもよい。
i.例えば、Cb/Cr成分は、第1および第2の近傍のラインから選択してもよい。
ii.MRL情報は、異なる色成分に対して異なる方法で符号化されてもよい。
a.一例において、現在のブロックが符号化インターイントラモードである場合、参照ラインインデックスをさらに信号通知してもよい。
b.このような方法は、あるブロックの寸法、位置に適用される。
c.このジョイントモードが有効化されるか無効化されるかは、SPS/VPS/PPS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/CTUにおいて信号通知されてもよい。
a.一例において、特定のモード(モードインデックスKを有する)は、DCモード、平面モード、広角モード、または任意の非角度モードとして定義される。
b.代替として使用されるモードは、MPMリストにおける残りのモードから導出されてもよい。
i.一例において、インデックスがKに等しくない第1のモードを使用して、例えば、インデックスが(第1のモード+M)に等しい置換モードを導出してもよく、ここで、Mが、例えば、1に設定される。
ii.一例において、インデックスがKに等しくない最後のモードを使用して、例えば、インデックスが(第1のモード+M)に等しい置換モードを導出してもよく、ここで、Mが、例えば、1に設定される。
a.一例において、固定候補リストは、例えば、水平モードまたは垂直モードを含むように設定されてもよい。
b.一例において、固定候補リストは、予め規定されてもよい。
c.あるいは、固定候補リストは、SPS/VPS/PPS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/CTUにおいて信号通知されてもよい。
d.あるいは、固定候補リストは、ブロックの次元に依存してもよい。
a.一例において、このような方法は、新しいモードとして追加されてもよい。この場合、このモードが有効化されている場合にのみ、別個の信号通知を適用してもよい。
b.一例において、上のラインおよび左の列の参照インデックスの異なる組み合わせに対して、異なる許可されたイントラ予測モードのセットを使用してもよい。
c.この方法で使用される異なるイントラ予測モードのセットは、予め規定されてもよく、またはSPS/VPS/PPS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/CTUで信号通知されてもよい。
a.一例において、4×4、4×8、または8×4は、PCMモードを適用してもよい。
b.一例において、pcm_flagが1に等しい最小ブロックサイズは(符号化されたlog2_min_pcm_luma_coding_block_size_minus2の値+2)に設定される。
a.あるいは、さらに、このような方法は、LCUのサイズが128×128に等しい場合にのみ有効になる。
a.一例において、1つのPCM符号化輝度ブロック内のサンプルの最大数の指示を信号通知する場合、最大値と最小値との間の差の指示を信号通知してもよい。
b.一例において、1つのPCM符号化輝度ブロック内のサンプルの最大/最小数の
log2を信号通知してもよい。
c.一例において、1つのPCM符号化輝度ブロック内のサンプルの最大数を信号通
知する場合、最大値と最小値との間の差のlog2の値を信号通知してもよい。
a.最大許容ブロック幅および/または高さは、別個に信号通知/導出されてもよい。
b.一例において、ブロック幅およびブロック高さの最小許容サイズは信号通知されず、それぞれ最小CUブロックの幅および高さと同じとなるように継承される。
c.一例において、ブロック幅およびブロック高さの最大許容サイズは信号通知されず、それぞれLCUの幅および高さと同じとなるように継承される。
d.ブロックのためにPCM有効化/無効化フラグを信号通知するかどうかは、以下の条件の1つが真であるかどうかに依存してもよい。
i.現在のブロックの幅は最小ブロック幅より小さくなく、かつ、現在のブロックの幅は最大許容ブロック幅より大きくない。
ii.現在のブロックの幅は最小ブロック高さより小さくなく、かつ、現在のブロックの幅は最大許容ブロック高さより大きくない。
e.PCMが1に等しいブロック幅およびブロック高さの最小サイズの指示は、別個に信号通知されてもよい。
f.PCMが1に等しいブロック幅およびブロック高さの最大サイズの指示は、別個に信号通知されてもよい。
a.一例において、異なる色成分に対して許容されるサイズ(例えば、log2_min_pcm_luma_coding_block_size_minus3、0におけるlog2_diff_max_min_pcm_luma_coding_block_size)は、別個に信号通知してもよい。
b.すべての色成分に対して別個に信号を送信するか、または1回だけ信号を送信するかは、カラーサブサンプリングフォーマット(例えば、4:2:0、4:4:4)に依存してもよい。
VTM-3.0rc1の実装と比較した変化は、太い太字で強調されている。削除された部分には、取り消し線が付けられる。
意味論
-pcm_loop_filter_disabled_flagが1に等しい場合、pcm_flagが1に等しい符号化ユニット内の再構成されたサンプルに対する非ブロック化フィルタ、適応型ループフィルタ、およびサンプル適応オフセットフィルタの処理が無効になる。
-それ以外(pcm_loop_filter_disabled_flag値が0に等しい)の場合、pcm_flagが1に等しい符号化ユニット内の再構成されたサンプルの非ブロック化フィルタ、適応型ループフィルタ、およびサンプル適応オフセットフィルタの処理は無効にならない。
MRLIPおよびPCMの両方が1つのシーケンスに対して有効化される場合、以下を適用してもよい。この場合、MRLインデックスを送信する前に、まずPCMフラグを符号化する。
本実施形態において、PCM有効化/無効化フラグは色成分に関連付けられてもよい。
別個のパーティションツリー構造(別名、デュアルツリー)を使用する場合、PCM有効化/無効化フラグの信号通知は、輝度成分と彩度成分とに分けて符号化される。提案された変更点を強調表示しておく。
-デュアルツリーが無効になっている場合(例えば、treeTypeがSINGLE_TREEに等しい場合)、復号化されたpcm_flagは、pcm_flag_lumaとpcm_flag_chromaの両方にコピーされる。
-そうでない場合、
〇現在の構文解析処理が輝度成分用である場合(例えば、treeTypeがDUAL_TREE_LUMAに等しい場合)、復号化されたpcm_flagは、両方のpcm_flag_lumaにコピーされる。
〇それ以外(例えば、treeTypeがDUAL_TREE_LUMAと等しい)の場合、復号化されたpcm_flagは、pcm_flag_chromaにコピーされる。
フィルタリング処理(例えば、非ブロック化、サンプル適応オフセット、ALF)は、色成分に関連付けられた符号化されたpcm有効化/無効化フラグに依存してもよい。
より具体的には、
あるいは、HEVC仕様の上で以下のような変更を行ってもよい。
nDpが0より大きく、且つ、以下の条件の1つ以上が真である場合、nDpは0に等しく設定される。
-pcm_loop_filter_disabled_flagは1に等しく、pcm_flag_luma[xP0][yP0]は1に等しい。
-サンプルp0を含む符号化ブロックを含む符号化ユニットのcu_transquant_bypass_flagは1に等しい。
nDqが0より大きく、且つ、以下の条件の1つ以上が真である場合、nDqを0に等しく設定する。
-pcm_loop_filter_disabled_flagは1に等しく、pcm_flag_luma[xQ0][yQ0]は1に等しい。
-サンプルq0を含む符号化ブロックを含む符号化ユニットのcu_transquant_bypass_flagは1に等しい。
あるいは、HEVC仕様の上で以下のような変更を行ってもよい。
8.7.2.5.8 彩度サンプルのフィルタリング処理
以下の条件の1つ以上が真である場合、フィルタリングされたサンプル値p0’は、対応する入力サンプル値p0が代入される。
-pcm_loop_filter_disabled_flagは1に等しく、pcm_flag_chroma[xP0*SubWidthC][yP0*SubHeightC]は1に等しい。
-サンプルp0を含む符号化ブロックを含む符号化ユニットのcu_transquant_bypass_flagは1に等しい。
-サンプルp0を含む符号化ブロックを含む符号化ユニットのpalte_mode_flagは1に等しい。
以下の条件の1つ以上が真である場合、フィルタリングされたサンプル値q0’は、対応する入力サンプル値q0が代入される。
-pcm_loop_filter_disabled_flagは1に等しく、pcm_flag_chroma[xQ0*SubWidthC][yQ0*SubHeightC]は1に等しい。
-サンプルq0を含む符号化ブロックを含む符号化ユニットのcu_transquant_bypass_flagは1に等しい。
-サンプルq0を含む符号化ブロックを含む符号化ユニットのpalette_mode_flagは1に等しい。
の方法。
本願は、2018年11月22日出願の国際特許出願第PCT/CN2018/116885号の優先権および利益を主張する2019年11月22日出願の国際特許出願PCT/CN2019/120266号の国内段階である2021年5月21日出願の日本国特願2021-529071号の分割出願である。上記出願の開示全体は、本明細書の開示の一部として参照により援用される。
Claims (47)
- 映像の現在のブロックに対して、PCM(Pulse Code Modulation)が使用される第1の符号化モードまたはMRLIP(Multiple Reference Line based Intra Prediction)が使用される第2の符号化モードのうちの少なくとも一方が有効化されていることを判定することと、
前記第1の符号化モードまたは前記第2の符号化モードに基づいて、前記映像の前記現
在のブロックとビットストリーム表現との間の変換を行うことと、
を有し、
前記第1の符号化モードの使用を示す第1の指示および/または前記第2の符号化モードの使用を示す第2の指示が、順序付け規則に従って前記ビットストリーム表現に含まれる、映像処理の方法。 - 前記順序付け規則は、復号化順において、前記第2の指示の前に、前記第1の指示が前記ビットストリーム表現にあることを規定する、請求項1に記載の方法。
- 前記ビットストリーム表現は、前記第1の符号化モードが有効であると判定された場合、前記第2の符号化モードに使用される参照ラインインデックスを省略する、請求項1に記載の方法。
- 前記ビットストリーム表現は、前記第1の符号化モードが無効であると判定された場合、前記第2の符号化モードに使用される参照ラインインデックスをさらに含む、請求項1に記載の方法。
- 前記ビットストリーム表現は、前記ビットストリーム表現が前記第2の指示を含むと判定された場合、前記第1の指示を省略する、請求項1に記載の方法。
- 前記第1の符号化モードが有効であると判定された場合、前記現在のブロックのためのALF(Adaptive Loop Filter)処理を無効化する、請求項1に記載の方法。
- 前記ALF処理の指示が前記ビットストリーム表現に含まれているか否かは、前記第1の指示に基づく、請求項6に記載の方法。
- 前記第1の指示が前記ビットストリーム表現に含まれているか否かは、前記ALF処理の指示に基づく、請求項6に記載の方法。
- 前記現在のブロックのサイズがCTU(Coding Tree Unit)のサイズに等しいと判定された場合、前記ALF処理の指示の前に、前記第1の指示が前記ビットストリーム表現で信号通知される、請求項6に記載の方法。
- 前記現在のブロックのサイズがCTU(Coding Tree Unit)のサイズに等しいと判定された場合、SAO(Sample Adaptive Offset)処理の指示の前に、前記第1の指示が前記ビットストリーム表現で信号通知される、請求項6に記載の方法。
- pcm_loop_filter_disabled_flag=1である、請求項1~10のいずれかに記載の方法。
- 映像の現在のブロックと前記映像のビットストリーム表現との間の変換のために、前記映像の色成分表現に基づいて、前記現在のブロックのパルス符号変調に基づいて、符号化モードに関連付けられた少なくとも1つのフラグを判定することと、
前記判定に基づいて前記変換を行うことと、
を含む、映像処理の方法。 - 前記少なくとも1つのフラグは、前記色成分表現の各成分に対する別個のパーティションツリー構造が使用されるかどうかに基づく、請求項12に記載の方法。
- 前記少なくとも1つのフラグは、前記色成分表現の輝度成分のための第1のフラグを備え、前記少なくとも1つのフラグは、前記色成分表現の彩度成分のための第2のフラグをさらに含む、請求項12に記載の方法。
- 前記色成分表現は3つの色成分を含み、前記少なくとも1つのフラグは前記3つの色成分の各々に対する3つのフラグを含む、請求項12に記載の方法。
- 前記少なくとも1つのフラグは、前記色成分表現の各成分に対する前記パルス符号変調を有効化する指示に対応する、前記パルス符号変調を有効化する指示を備える、請求項12に記載の方法。
- 前記色成分表現の成分に対するフィルタリング処理は、前記色成分表現の対応する成分に対する前記パルス符号変調を有効化にする指示に基づく請求項16に記載の方法。
- 前記少なくとも1つのフラグは、前記色成分表現の輝度成分のために前記パルス符号変調を有効化する指示を備え、前記色成分表現の彩度成分に対する前記パルス符号変調を有効化する指示は、前記輝度成分内の位置から継承される、請求項12に記載の方法。
- 前記位置は、前記輝度成分の中心位置である、請求項18に記載の方法。
- 映像の映像領域の現在のブロックと前記映像のビットストリーム表現との間で変換を行うこと、
を有し、
前記ビットストリーム表現は、前記現在のブロックへのPCM(Pulse Code Modulation)の適用可能性に関する規則に従ってフォーマットされ、
前記規則は、前記PCMを無効にする旨の指示が映像領域レベルに含まれていると判定された場合、現在のブロックレベルでの前記PCMの指示を省略することを規定する、映像処理の方法。 - 前記PCMの前記表示は、VPS(Video Parameter Set)、PPS(Picture Parameter Set)、ピクチャヘッダ、スライスヘッダ、タイルグループヘッダ、タイル、CTU(Coding Tree Set)またはCTU行において信号通知される、請求項20に記載の方法。
- 映像の現在のブロックのサイズに基づいて、前記映像の現在のブロックに対してPCM(Pulse Code Modulation)符号化モードを有効化するかを決定することと、
前記決定に基づいて、前記現在のブロックと前記映像のビットストリーム表現との間で変換を行うことと、
を有する、映像処理の方法。 - 前記現在のブロックが64未満のサンプルを含むと判定された場合、前記PCM符号化モードが有効になる、請求項22に記載の方法。
- 前記現在のブロックのサイズは、4×4、4×8、または8×4である、請求項23に記載の方法。
- pcm_flagが1に等しい前記現在のブロックの最小ブロックサイズは、(log2_min_pcm_luma_coding_block_size_minus2+2)に設定される、請求項23の方法。
- 前記現在のブロックの前記サイズが64×64以上であると判定された場合、PCM符号化モードが有効化される、請求項22に記載の方法。
- LCU(Largest Coding Unit)のサイズが128×128に等しいと判定された場合、前記PCM符号化モードが有効になる、請求項22に記載の方法。
- 前記PCM符号化モードが有効化され、前記現在のブロックにおけるサンプルの最大数または最小数の指示が前記ビットストリーム表現において信号通知される、請求項22に記載の方法。
- 前記指示は、サンプルの最大数とサンプルの最小数との間の差を含む、請求項28に記載の方法。
- 前記指示は、サンプルの前記最大数または前記最小数の底を2とする対数を含む、請求項28に記載の方法。
- 前記指示は、サンプルの前記最大数とサンプルの前記最小数との間の差の底を2とする対数を含む、請求項28に記載の方法。
- 映像の現在のブロックと前記映像のビットストリーム表現との間の変換のために、前記現在のブロックの高さまたは幅の最小許容値を判定することであって、前記高さの最小許容値は、前記幅の最小許容値とは別個に信号通知または導出される、ことと、
前記判定に基づいて前記変換を行うことと、
を含む、映像処理の方法。 - 前記ビットストリーム表現は、前記高さまたは前記幅の最大許容値をさらに含み、前記高さの最大許容値は、前記幅の最大許容値とは別個に信号通知または導出される、請求項32に記載の方法。
- 前記ビットストリーム表現は、前記高さまたは前記幅の最小許容値を省略し、前記最小許容値は、CU(Coding Unit)ブロックの最小サイズから継承される、請求項32に記載の方法。
- 前記ビットストリーム表現は、前記高さまたは前記幅の最大許容値を省略し、前記最大許容値は、CU(Coding Unit)ブロックの最大サイズから継承される、請求項32に記載の方法。
- 前記高さは、前記幅と異なる、請求項32~35のいずれかに記載の方法。
- 前記現在のブロックに対してPCM(Pulse Code Modulation)符号化モードを有効化する指示を含む前記ビットストリーム表現は、
(a)前記現在のブロックの幅が、前記幅に対する前記最小許容値よりも小さくなく、かつ、前記幅に対する最大許容値よりも大きくない、または、
(b)前記現在のブロックの高さが、前記高さに対する最小許容値よりも小さくなく、かつ、前記高さに対する最大許容値よりも大きくないことに基づく、請求項32に記載の方法。 - 前記現在のブロックのためにPCM(Pulse Code Modulation)符号化モードを有効化にする、請求項32または33に記載の方法。
- PCM(Pulse Code Modulation)符号化モードで符号化されている映像の現在のブロックの指示が、前記映像のビットストリーム表現において信号通知されると判定された場合、前記映像の色成分表現を構成することと、
前記構成に基づいて、現在のブロックとビットストリーム表現との間で前記変換を行うことと、
有する、映像処理の方法。 - 前記色成分表現の各成分に対して許可されたサイズを別個に信号通知する、請求項39に記載の方法。
- 前記構成することは、前記色成分表現のカラーサブサンプリングフォーマットに基づく、請求項39に記載の方法。
- 前記カラーサブサンプリングフォーマットは、4:2:0または4:4:4である、請求項41に記載の方法。
- 前記変換は、前記ビットストリーム表現から前記現在のブロックを生成する、請求項1~42のいずれかに記載の方法。
- 前記変換は、前記ビットストリーム表現から前記現在の映像ブロックを生成する、請求項1~42のいずれかに記載の方法。
- 前記変換を行うことは、1つ以上の復号化規則に基づいて前記ビットストリーム表現を構文解析することを含む、請求項1~42のいずれかに記載の方法。
- プロセッサと、命令を搭載した非一時的メモリとを備え、前記プロセッサが実行すると、前記命令は、前記プロセッサに、請求項1~45のいずれかに記載の前記方法を実装させる、映像システムにおける装置。
- 非一時的なコンピュータ可読媒体に記憶されたコンピュータプログラム製品であって、請求項1~45のいずれか1項以上に記載の前記方法を実行するためのプログラムコードを含む、コンピュータプログラム製品。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNPCT/CN2018/116885 | 2018-11-22 | ||
CN2018116885 | 2018-11-22 | ||
JP2021529071A JP7182098B2 (ja) | 2018-11-22 | 2019-11-22 | 映像処理におけるパルス符号変調技術 |
PCT/CN2019/120266 WO2020103931A1 (en) | 2018-11-22 | 2019-11-22 | Pulse code modulation technique in video processing |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021529071A Division JP7182098B2 (ja) | 2018-11-22 | 2019-11-22 | 映像処理におけるパルス符号変調技術 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023011862A true JP2023011862A (ja) | 2023-01-24 |
JP7425158B2 JP7425158B2 (ja) | 2024-01-30 |
Family
ID=70774307
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021529071A Active JP7182098B2 (ja) | 2018-11-22 | 2019-11-22 | 映像処理におけるパルス符号変調技術 |
JP2022177350A Active JP7425158B2 (ja) | 2018-11-22 | 2022-11-04 | 映像処理におけるパルス符号変調技術 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021529071A Active JP7182098B2 (ja) | 2018-11-22 | 2019-11-22 | 映像処理におけるパルス符号変調技術 |
Country Status (12)
Country | Link |
---|---|
US (2) | US11095882B2 (ja) |
EP (1) | EP3868094A4 (ja) |
JP (2) | JP7182098B2 (ja) |
KR (2) | KR102636813B1 (ja) |
CN (2) | CN113170116A (ja) |
AU (1) | AU2019382524B2 (ja) |
BR (1) | BR112021009666A2 (ja) |
CA (1) | CA3120533C (ja) |
MX (1) | MX2021005654A (ja) |
SG (1) | SG11202105187VA (ja) |
WO (2) | WO2020103931A1 (ja) |
ZA (1) | ZA202103316B (ja) |
Families Citing this family (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10432929B2 (en) | 2018-02-12 | 2019-10-01 | Tencent America LLC | Method and apparatus for multiple line intra prediction in video compression |
CN114125450B (zh) | 2018-06-29 | 2023-11-17 | 北京字节跳动网络技术有限公司 | 一种用于处理视频数据的方法、装置和计算机可读介质 |
CN114466197A (zh) | 2018-06-29 | 2022-05-10 | 北京字节跳动网络技术有限公司 | 用于查找表更新的编码的运动信息的选择 |
TWI728390B (zh) | 2018-06-29 | 2021-05-21 | 大陸商北京字節跳動網絡技術有限公司 | 查找表尺寸 |
KR102627814B1 (ko) | 2018-06-29 | 2024-01-23 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 룩업 테이블의 업데이트: fifo, 제약된 fifo |
EP3794824A1 (en) | 2018-06-29 | 2021-03-24 | Beijing Bytedance Network Technology Co. Ltd. | Conditions for updating luts |
TWI752331B (zh) | 2018-06-29 | 2022-01-11 | 大陸商北京字節跳動網絡技術有限公司 | 當向Merge/AMVP添加HMVP候選時的部分/完全修剪 |
KR20240007298A (ko) | 2018-06-29 | 2024-01-16 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | Lut에서의 모션 후보들의 검사 순서 |
US10567752B2 (en) | 2018-07-02 | 2020-02-18 | Tencent America LLC | Method and apparatus for intra prediction for non-square blocks in video compression |
TWI719526B (zh) | 2018-07-02 | 2021-02-21 | 大陸商北京字節跳動網絡技術有限公司 | 查找表的更新 |
TWI820211B (zh) | 2018-09-12 | 2023-11-01 | 大陸商北京字節跳動網絡技術有限公司 | 取決於總數減去k的開始檢查hmvp候選的條件 |
BR112021009149A2 (pt) * | 2018-11-15 | 2021-08-10 | Telefonaktiebolaget Lm Ericsson (Publ) | método e aparelho para desbloquear uma fronteira, programa de computador, e, portadora |
AU2019382524B2 (en) | 2018-11-22 | 2023-02-02 | Beijing Bytedance Network Technology Co., Ltd. | Pulse code modulation technique in video processing |
JP7275286B2 (ja) | 2019-01-10 | 2023-05-17 | 北京字節跳動網絡技術有限公司 | Lut更新の起動 |
CN117201774A (zh) * | 2019-01-13 | 2023-12-08 | Lg 电子株式会社 | 用于执行基于mrl的帧内预测的图像编译方法和装置 |
CN113383554B (zh) | 2019-01-13 | 2022-12-16 | 北京字节跳动网络技术有限公司 | LUT和共享Merge列表之间的交互 |
WO2020147772A1 (en) | 2019-01-16 | 2020-07-23 | Beijing Bytedance Network Technology Co., Ltd. | Motion candidates derivation |
KR20210118951A (ko) * | 2019-03-15 | 2021-10-01 | 엘지전자 주식회사 | 크로마 포맷에 대한 정보를 시그널링 하는 방법 및 장치 |
CN113615193B (zh) | 2019-03-22 | 2024-06-25 | 北京字节跳动网络技术有限公司 | Merge列表构建和其他工具之间的交互 |
WO2020219733A1 (en) | 2019-04-24 | 2020-10-29 | Bytedance Inc. | Quantized residual differential pulse code modulation representation of coded video |
CN113796069B (zh) | 2019-05-01 | 2024-03-08 | 字节跳动有限公司 | 使用量化残差差分脉冲编解码调制编解码的帧内编解码视频 |
CN113785306B (zh) | 2019-05-02 | 2024-06-14 | 字节跳动有限公司 | 基于编解码树结构类型的编解码模式 |
WO2021032112A1 (en) | 2019-08-19 | 2021-02-25 | Beijing Bytedance Network Technology Co., Ltd. | Initialization for counter-based intra prediction mode |
US11553208B2 (en) * | 2019-11-27 | 2023-01-10 | Tencent America LLC | Method and system of video coding using a subset of available intra prediction modes for multiple reference lines |
KR20230015382A (ko) | 2020-05-22 | 2023-01-31 | 바이트댄스 아이엔씨 | 비디오 비트스트림 처리에서 픽처 유형들에 대한 제약들 |
WO2021237123A1 (en) | 2020-05-22 | 2021-11-25 | Bytedance Inc. | Sei message handling in video sub-bitstream extraction process |
JP2023529823A (ja) | 2020-06-09 | 2023-07-12 | バイトダンス インコーポレイテッド | マルチレイヤ映像ビットストリームのサブビットストリーム抽出 |
US20220337875A1 (en) * | 2021-04-16 | 2022-10-20 | Tencent America LLC | Low memory design for multiple reference line selection scheme |
WO2023129918A1 (en) * | 2021-12-28 | 2023-07-06 | Innopeak Technology, Inc. | Intra prediction with multiple reference lines |
WO2023195646A1 (ko) * | 2022-04-05 | 2023-10-12 | 현대자동차주식회사 | 선택적 다중 참조라인을 이용하는 비디오 코딩을 위한 방법 및 장치 |
WO2024007158A1 (zh) * | 2022-07-05 | 2024-01-11 | Oppo广东移动通信有限公司 | 一种候选列表构建方法、视频编解码方法、装置和系统 |
Family Cites Families (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101270167B1 (ko) * | 2006-08-17 | 2013-05-31 | 삼성전자주식회사 | 저복잡도의 이미지 압축 방법 및 장치, 저복잡도의 이미지복원 방법 및 장치 |
HRP20240379T1 (hr) | 2010-05-25 | 2024-06-07 | Lg Electronics Inc. | Novi način planarnog predviđanja |
CN103647974B (zh) | 2010-11-26 | 2017-05-31 | 日本电气株式会社 | 视频解码设备和视频解码方法 |
JP5850214B2 (ja) * | 2011-01-11 | 2016-02-03 | ソニー株式会社 | 画像処理装置および方法、プログラム、並びに記録媒体 |
US9706205B2 (en) | 2011-02-10 | 2017-07-11 | Velos Media, Llc | Image processing device and image processing method |
US9232218B2 (en) * | 2012-03-01 | 2016-01-05 | Connesta | System and method for data insertion in video stream |
TW201701670A (zh) | 2012-07-02 | 2017-01-01 | 三星電子股份有限公司 | 視訊解碼裝置 |
US9491460B2 (en) * | 2013-03-29 | 2016-11-08 | Qualcomm Incorporated | Bandwidth reduction for video coding prediction |
CN103248892A (zh) * | 2013-05-07 | 2013-08-14 | 北京大学 | 一种帧内预测方法及装置 |
US11070810B2 (en) * | 2014-03-14 | 2021-07-20 | Qualcomm Incorporated | Modifying bit depths in color-space transform coding |
US9918105B2 (en) * | 2014-10-07 | 2018-03-13 | Qualcomm Incorporated | Intra BC and inter unification |
US20180091810A1 (en) * | 2015-03-23 | 2018-03-29 | Lg Electronics Inc. | Method for processing video signal and device therefor |
US20160373782A1 (en) * | 2015-06-18 | 2016-12-22 | Qualcomm Incorporated | Intra prediction and intra mode coding |
EP3361726A4 (en) * | 2015-11-24 | 2018-08-15 | Samsung Electronics Co., Ltd. | Method and device for video decoding and method and device for video encoding |
CN108886617B (zh) * | 2016-04-06 | 2021-08-27 | 株式会社Kt | 用于处理视频信号的方法和设备 |
US10750172B2 (en) | 2016-04-22 | 2020-08-18 | Vid Scale, Inc. | Prediction systems and methods for video coding based on filtering nearest neighboring pixels |
EP3453180A4 (en) * | 2016-05-04 | 2020-04-01 | Microsoft Technology Licensing, LLC | INTRA-IMAGE PREDICTION USING NON-ADJACENT REFERENCE LINES OF SAMPLE VALUES |
US9948930B2 (en) * | 2016-05-17 | 2018-04-17 | Arris Enterprises Llc | Template matching for JVET intra prediction |
MX2018014487A (es) * | 2016-05-25 | 2019-08-12 | Arris Entpr Llc | Prediccion angular ponderada para intra codificacion. |
US10944963B2 (en) * | 2016-05-25 | 2021-03-09 | Arris Enterprises Llc | Coding weighted angular prediction for intra coding |
KR102410032B1 (ko) * | 2016-06-24 | 2022-06-16 | 주식회사 케이티 | 비디오 신호 처리 방법 및 장치 |
CN109565591B (zh) * | 2016-08-03 | 2023-07-18 | 株式会社Kt | 用于对视频进行编码和解码的方法和装置 |
TWI683573B (zh) * | 2017-03-10 | 2020-01-21 | 聯發科技股份有限公司 | 用於視訊編解碼中具有畫面內方向預測模式之內含畫面內編解碼工具設定的方法和裝置 |
US10623738B2 (en) * | 2017-04-06 | 2020-04-14 | Futurewei Technologies, Inc. | Noise suppression filter |
US10742975B2 (en) * | 2017-05-09 | 2020-08-11 | Futurewei Technologies, Inc. | Intra-prediction with multiple reference lines |
KR20190043482A (ko) * | 2017-10-18 | 2019-04-26 | 한국전자통신연구원 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
CN108322745B (zh) * | 2018-02-28 | 2019-12-03 | 中南大学 | 一种基于不可分二次变换模式的帧内快速选择方法 |
AU2019382524B2 (en) | 2018-11-22 | 2023-02-02 | Beijing Bytedance Network Technology Co., Ltd. | Pulse code modulation technique in video processing |
-
2019
- 2019-11-22 AU AU2019382524A patent/AU2019382524B2/en active Active
- 2019-11-22 CA CA3120533A patent/CA3120533C/en active Active
- 2019-11-22 MX MX2021005654A patent/MX2021005654A/es unknown
- 2019-11-22 WO PCT/CN2019/120266 patent/WO2020103931A1/en unknown
- 2019-11-22 JP JP2021529071A patent/JP7182098B2/ja active Active
- 2019-11-22 KR KR1020217013776A patent/KR102636813B1/ko active IP Right Grant
- 2019-11-22 BR BR112021009666-3A patent/BR112021009666A2/pt unknown
- 2019-11-22 WO PCT/CN2019/120270 patent/WO2020103932A1/en active Application Filing
- 2019-11-22 SG SG11202105187VA patent/SG11202105187VA/en unknown
- 2019-11-22 CN CN201980076375.7A patent/CN113170116A/zh active Pending
- 2019-11-22 CN CN201980076377.6A patent/CN113316931B/zh active Active
- 2019-11-22 EP EP19888222.7A patent/EP3868094A4/en active Pending
- 2019-11-22 KR KR1020237042210A patent/KR20230170819A/ko active Application Filing
-
2020
- 2020-10-15 US US17/071,590 patent/US11095882B2/en active Active
-
2021
- 2021-05-17 ZA ZA2021/03316A patent/ZA202103316B/en unknown
- 2021-07-14 US US17/376,036 patent/US11743453B2/en active Active
-
2022
- 2022-11-04 JP JP2022177350A patent/JP7425158B2/ja active Active
Non-Patent Citations (2)
Title |
---|
M. ALBRECHT, ET AL.: "Description of SDR, HDR, and 360° video coding technology proposal by Fraunhofer HHI", JOINT VIDEO EXPERTS TEAM (JVET) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, vol. JVET-J0014-v4, JPN6022023399, April 2018 (2018-04-01), pages 6 - 7, ISSN: 0005139519 * |
YU-CHEN SUN, JICHENG AN, AND JIAN LOU: "PCM mode with dual tree partition", JOINT VIDEO EXPERTS TEAM (JVET) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, vol. JVET-L0209-v3, JPN6022023400, October 2018 (2018-10-01), pages 1 - 3, ISSN: 0005139520 * |
Also Published As
Publication number | Publication date |
---|---|
JP7425158B2 (ja) | 2024-01-30 |
AU2019382524A1 (en) | 2021-06-10 |
WO2020103931A1 (en) | 2020-05-28 |
US20210029352A1 (en) | 2021-01-28 |
SG11202105187VA (en) | 2021-06-29 |
CN113316931A (zh) | 2021-08-27 |
JP7182098B2 (ja) | 2022-12-02 |
US11743453B2 (en) | 2023-08-29 |
BR112021009666A2 (pt) | 2021-08-17 |
CN113316931B (zh) | 2024-04-12 |
KR20230170819A (ko) | 2023-12-19 |
CA3120533C (en) | 2024-06-11 |
KR102636813B1 (ko) | 2024-02-15 |
CN113170116A (zh) | 2021-07-23 |
ZA202103316B (en) | 2022-10-26 |
AU2019382524B2 (en) | 2023-02-02 |
US11095882B2 (en) | 2021-08-17 |
JP2022508194A (ja) | 2022-01-19 |
EP3868094A1 (en) | 2021-08-25 |
EP3868094A4 (en) | 2022-02-23 |
CA3120533A1 (en) | 2020-05-28 |
US20210344908A1 (en) | 2021-11-04 |
KR20210090175A (ko) | 2021-07-19 |
WO2020103932A1 (en) | 2020-05-28 |
MX2021005654A (es) | 2021-07-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7182098B2 (ja) | 映像処理におけるパルス符号変調技術 | |
KR102630411B1 (ko) | 크로마 잔차 조인트 코딩을 위한 구문 요소의 시그널링 | |
KR102555673B1 (ko) | 코딩 방법 및 장치 | |
CN113273203B (zh) | 两步交叉分量预测模式 | |
CA3111118A1 (en) | Apparatus and method for inverse quantization | |
AU2016323040A1 (en) | Palette predictor initialization and merge for video coding | |
KR20220006055A (ko) | 다중 인트라 코딩 방법 사이의 상호 작용 | |
KR102648569B1 (ko) | 변환 스킵 모드의 블록 치수 설정들 | |
KR20220038692A (ko) | 색상 포맷에 기초한 비디오 영역 분할 | |
JP2022548008A (ja) | クロマデブロックフィルタリングの量子化パラメータ | |
JP2023153166A (ja) | ビデオコーディングにおける適応ループフィルタの二部分シグナリング | |
CN115004697A (zh) | 来自多个跨分量的预测 | |
KR20220065758A (ko) | 코딩 블록의 스케일링 프로세스 | |
JP7442673B2 (ja) | ビデオコーディングにおけるスキップブロックの変換のための最小許容量子化 | |
RU2806548C2 (ru) | Способ импульсно-кодовой модуляции для обработки видео | |
US11949918B2 (en) | Unified neural network in-loop filter signaling | |
WO2020221213A1 (en) | Intra sub-block partitioning and multiple transform selection | |
KR20240049364A (ko) | 디코더측 인트라 모드 도출을 위한 방법 및 디바이스 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221104 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221104 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230829 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231127 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231219 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240118 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7425158 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |