JP2023059883A - ビデオコーディングの方法および装置、ならびにコンピュータプログラム - Google Patents
ビデオコーディングの方法および装置、ならびにコンピュータプログラム Download PDFInfo
- Publication number
- JP2023059883A JP2023059883A JP2023015476A JP2023015476A JP2023059883A JP 2023059883 A JP2023059883 A JP 2023059883A JP 2023015476 A JP2023015476 A JP 2023015476A JP 2023015476 A JP2023015476 A JP 2023015476A JP 2023059883 A JP2023059883 A JP 2023059883A
- Authority
- JP
- Japan
- Prior art keywords
- block
- encoded
- bins
- video
- context
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 140
- 238000004590 computer program Methods 0.000 title 1
- 238000012545 processing Methods 0.000 claims description 32
- 238000013139 quantization Methods 0.000 claims description 14
- 230000008569 process Effects 0.000 description 62
- 230000033001 locomotion Effects 0.000 description 39
- 239000013598 vector Substances 0.000 description 28
- 230000006835 compression Effects 0.000 description 27
- 238000007906 compression Methods 0.000 description 27
- 239000000872 buffer Substances 0.000 description 17
- 238000010586 diagram Methods 0.000 description 17
- 238000004891 communication Methods 0.000 description 14
- 238000001914 filtration Methods 0.000 description 13
- 230000005540 biological transmission Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 230000002123 temporal effect Effects 0.000 description 8
- 238000009877 rendering Methods 0.000 description 7
- 241000023320 Luma <angiosperm> Species 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 6
- 230000002093 peripheral effect Effects 0.000 description 6
- 238000005192 partition Methods 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000009795 derivation Methods 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 230000002457 bidirectional effect Effects 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 239000012634 fragment Substances 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000010348 incorporation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002427 irreversible effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 239000000779 smoke Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000013403 standard screening design Methods 0.000 description 1
- 230000004936 stimulating effect Effects 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Algebra (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Pure & Applied Mathematics (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Description
本出願は、2018年12月26日出願の米国仮出願第62/785,056号「ブロック差分パルス符号変調におけるコンテキストモデリングおよびデブロックフィルタの制約」に基づく優先権の利益を主張する2019年12月11日出願の米国特許出願第16/710,889号「映像符号化の方法および装置」に基づく優先権の利益を主張する。先行する出願の開示全体は、参照によりその全体が本明細書に組み込まれる。
図2は、本開示の実施形態による通信システム(200)の簡略ブロック図を示す。通信システム(200)は、たとえば、ネットワーク(250)を介して互いに通信可能な複数の端末デバイスを含む。たとえば、通信システム(200)は、ネットワーク(250)を介して相互接続された第1のペアの端末デバイス(210)および(220)を含む。図2の例では、第1のペアの端末デバイス(210)および(220)は、データの単方向送信を行う。たとえば、端末デバイス(210)は、ネットワーク(250)を介して他の端末デバイス(220)に送信するために、ビデオデータ(たとえば、端末デバイス(210)によってキャプチャされたビデオピクチャのストリーム)を符号化しうる。符号化されたビデオデータは、1つまたは複数の符号化されたビデオビットストリームの形で送信されうる。端末デバイス(220)は、ネットワーク(250)から符号化されたビデオデータを受け取り、符号化されたビデオデータをビデオピクチャを回復するために復号し、回復されたビデオデータに従ってビデオピクチャを表示することができる。一方向のデータ送信は、メディア・サービング・アプリケーションなどでは一般的でありうる。
HEVCでは、デブロッキング・フィルタリング・プロセスは、復号プロセスと同じ順序で各CUに対して行われる。最初に垂直エッジがフィルタリングされ(水平フィルタリング)、次に水平エッジがフィルタリングされる(垂直フィルタリング)。8×8のブロック境界がフィルタリングされると決定された場合、フィルタリングは、輝度および色差成分の両方について、8×8のブロック境界に適用され得る。複雑さを軽減するために、4×4のブロック境界は処理されない場合がある。境界強度(Bs)は、境界に使用できるデブロッキング・フィルタリング・プロセスの程度または強度を示すために使用できる。一実施形態では、Bsの値2は強いフィルタリングを示し、1は弱いフィルタリングを示し、0はデブロッキングフィルタリングなしを示す。
ブロック差分パルス符号変調(BDPCM)は、ブロックレベルで差分パルス符号変調(DPCM)アプローチを使用するイントラ符号化ツールである。bdpcm_flagは、CUが各寸法が32以下の輝度イントラ符号化CUである場合は常に、CUレベルで送信できる。このフラグは、通常のイントラ符号化とDPCMのどちらが使用されているか、および単一のコンテキストベースの適応型バイナリ算術符号化(CABAC)コンテキストを使用して符号化されていることを示す。
C≧max(A、B)の場合はP(X)=min(A、B)
C≦min(A、B)の場合はmax(A、B)
それ以外の場合はA+B-C
エントロピー符号化は、ビデオ信号が一連のシンタックス要素に変換された後、映像符号化の最終段階(またはビデオ復号の最初の段階)で行われうる。エントロピー符号化は、データを表すために使用されるビット数がデータの確率に対数的に比例するように、統計プロパティを使用してデータを圧縮する可逆圧縮方式にすることができる。たとえば、シンタックス要素のセットに対してエントロピー符号化を実行することにより、シンタックス要素を表すビット(ビンと呼ばれる)はビットストリーム内のより少ないビット(符号化されたビットと呼ばれる)に変換されうる。CABACは、エントロピー符号化の1つの形式である。CABACでは、確率推定量を提供するコンテキストモデルは、それぞれのビンに関連付けられたコンテキストに基づいて、一連のビン内の各ビンに対して決定できる。続いて、確率推定量を使用してバイナリ算術符号化プロセスを実行して、ビンのシーケンスをビットストリーム内の符号化されたビットに符号化することができる。さらに、コンテキストモデルは、符号化されたビンに基づく新しい確率推定量で更新される。
上記のように、各ピクセルに関連付けられた残差は、その符号(sign)を表すビンとその絶対値を表す一連のビンへとバイナリ化されうる。絶対値は、所与の数(たとえば、31または28)以下になるように量子化されうる。1つ以上のコンテキストモデル、または等確率(EP)モデル(すなわち、バイパスモデル)は、各ビンに関連付けられうる。残差シンボルごとに、最大13個のビンが1つまたは複数のコンテキストモデルに関連付けられうる。多数のコンテキスト符号化されたビン(たとえば、少なくともコンテキストモデルに関連付けられたビン)は、構文符号化中のエントロピーエンコーダまたはデコーダのスループットを低下させる場合があり、いくつかのコーデック実装(たとえば、いくつかのハードウェアコーデック)では負担になる場合がある。したがって、コンテキスト符号化されたビンの最大数を設定すると、たとえば、符号化速度が向上するだけでなく、必要なメモリサイズとそれらのコンテキストモデルを維持するためのコストを削減することもできる。
11010010001111100011101010010101010010101010111000111000101101011010101110でありうる。バイナリ文字列(1120)は、4つのセグメントを含んでもよく、2つのシンタックス要素を表わしてもよい。第1のシンタックス要素のビンは110100100011111000111010100101010であり、第2のシンタックス要素のビンは10010101010111000111000101101011010101110である。図5のエントロピーエンコーダ(545)または図6のエントロピーエンコーダ(625)などのCABACベースのエントロピーエンコーダは、コンテキスト符号化されたビンの最大数に基づいてバイナリ文字列に対してコンテキストモデリングを行うことができる。たとえば、ブロックの幅Wとブロックの高さHのいずれも4に等しく、ブロックが1つの領域のみを含む場合、Aは4×4=16に等しく、Bは2に設定され得る。したがって、ブロック内のコンテキスト符号化されたビンの最大数はB×A=32である。したがって、図11に示されるように、このブロックのコンテキスト符号化されたビンの数(太字および下線のフォントで表示)が32に達しない場合(バイナリ文字列の最初の3つのセグメントに表示)、エントロピーエンコーダはBDPCMアルゴリズムに従ってコンテキストモデリングを使用してビンを符号化するかどうかを自由に選択する。(第4のセグメントに示されているように)コンテキスト符号化されたビンの最大数(たとえば、MaxCcbs)に達すると、残りのビンはコンテキストモデリングで符号化できない。代わりに、ビンはEPモデルで符号化されうる。いくつかの例では、エントロピーエンコーダはカウンタを含んでもよく、カウンタはコンテキスト符号化されたビンの数をカウントする。カウンタ出力は、最初は0に設定されえ、0からコンテキスト符号化されたビンの最大数までカウントしうる。カウンタがコンテキスト符号化されたビンの最大数に達すると、残りのビンはコンテキストモデリングで符号化されてはならない。
上記のように、たとえば、BDPCM符号化ブロックはいずれもブロッキングアーティファクトを引き起こす変換を行わないため、デブロッキングフィルタは2つのBDPCM符号化ブロック間の境界で非アクティブ化されてもよい。ブロックアーティファクトを回避または最小化するために、デブロッキングフィルタは、知覚アーティファクトを回避または最小化するためにブロックの少なくとも1つがBCPCMで符号化される2つのブロックの間に適用されうる。
図13は、本開示のいくつかの実施形態によるエントロピー復号プロセス(1300)を概説するフローチャートを示している。プロセス(1300)は、本明細書に開示されるコンテキスト符号化されたビンの最大数に基づくいくつかのタイプの変換係数シンタックス要素のエントロピー復号において使用され得る。様々な実施形態では、プロセス(1300)は、端末デバイス(210)、(220)、(230)および(240)の処理回路などの処理回路、ビデオデコーダ(310)の機能を行う処理回路、ビデオデコーダ(410)の機能を実行する処理回路などによって実行されうる。いくつかの実施形態では、プロセス(1300)はソフトウェア命令で実装され、したがって、処理回路がソフトウェア命令を実行すると、処理回路はプロセス(1300)を行う。プロセスは(S1301)から始まり、(S1310)に進む。
上記の手法は、コンピュータ読み取り可能な命令を使用してコンピュータソフトウェアとして実装でき、1つまたは複数のコンピュータ読み取り可能な媒体に物理的に格納できる。たとえば、図15は、開示された主題の特定の実施形態を実装するのに適したコンピュータシステム(1500)を示す。
付録A:頭字語
JEM:joint exploration model(共同探査モデル)
VVC:versatile video coding(多用途映像符号化)
BMS:benchmark set(ベンチマークセット)
MV:Motion Vector(動きベクトル)
HEVC:High Efficiency Video Coding(高効率映像符号化)
SEI:Supplementary Enhancement Information(付加拡張情報)
VUI:Video Usability Information(ビデオユーザビリティ情報)
GOP:Groups of Pictures(Group of Pictures)
TU:Transform Units(変換ユニット)
PU:Prediction Units(予測ユニット)
CTU:Coding Tree Units(符号化ツリーユニット)
CTB:Coding Tree Blocks(符号化ツリーブロック)
PB:Prediction Blocks(予測ブロック)
HRD:Hypothetical Reference Decoder(仮想参照デコーダ)
SNR:Signal Noise Ratio(信号ノイズ比)
CPU:Central Processing Units(中央処理装置)
GPU:Graphics Processing Units(グラフィック処理ユニット)
CRT:Cathode Ray Tube(陰極線管)
LCD:Liquid-Crystal Display(液晶ディスプレイ)
OLED:Organic Light-Emitting Diode(有機発光ダイオード)
CD:Compact Disc(コンパクトディスク)
DVD:Digital Video Disc(デジタルビデオディスク
ROM:Read-Only Memory(読み取り専用メモリ
RAM:Random Access Memory(ランダムアクセスメモリ)
ASIC:Application-Specific Integrated Circuit(特定用途向け集積回路
PLD:Programmable Logic Device(プログラマブルロジックデバイス)
LAN:Local Area Network(ローカル・エリア・ネットワーク)
GSM:Global System for Mobile communications(汎ヨーロッパデジタル移動通信システム)
LTE:Long-Term Evolution(ロングタームエボリューション)
CANBus:Controller Area Network Bus(コントローラエリアネットワークバス)
USB:Universal Serial Bus(ユニバーサルシリアルバス)
PCI:Peripheral Component Interconnect(周辺構成要素相互接続)
FPGA:Field Programmable Gate Areas(フィールド・プログラマブル・ゲート領域)
SSD:solid-state drive(ソリッドステートドライブ)
IC:Integrated Circuit(集積回路)
CU:Coding Unit(符号化ユニット)
DPCM:Differential Pulse-code Modulation(差分パルス符号変調)
BDPCM:Block Differential Pulse-code Modulation(ブロック差分パルス符号変調)
SCC:Screen Content Coding(画面コンテンツ符号化)
Bs:Boundary Strength(境界強度)
102 ブロックA0
133 ブロックA1
104 ブロックB0
105 ブロックB1
106 ブロックB2
200 通信システム
210 端末デバイス
220 端末デバイス
230 端末デバイス
240 端末デバイス
250 ネットワーク
301 ビデオソース
302 ビデオピクチャのストリーム
303 ビデオエンコーダ
304 符号化されたビデオデータ
305 ストリーミングサーバ
306 クライアントサブシステム
307 コピー
308 クライアントサブシステム
309 コピー
310 ビデオデコーダ
311 ビデオピクチャの出力ストリーム
312 ディスプレイ
313 キャプチャサブシステム
320 電子デバイス
330 電子デバイス
401 チャネル
410 ビデオデコーダ
412 レンダリングデバイス
415 バッファメモリ
420 パーサ
421 シンボル
430 電子デバイス
431 受信器
451 スケーラ/逆変換ユニット
452 イントラ画像予測ユニット
453 動き補償予測ユニット
455 アグリゲータ
456 ループフィルタユニット
457 参照ピクチャメモリ
458 対象ピクチャバッファ
501 ビデオソース
503 ビデオエンコーダ
520 電子デバイス
530 ソースコーダ
532 符号化エンジン
533 デコーダ
534 参照ピクチャメモリ
535 予測器
540 送信器
543 符号化されたビデオシーケンス
545 エントロピーコーダ
550 コントローラ
560 通信チャネル
603 ビデオエンコーダ
621 汎用コントローラ
622 イントラエンコーダ
623 残差計算器
624 残差エンコーダ
625 エントロピーエンコーダ
626 スイッチ
628 残差デコーダ
630 インターエンコーダ
710 ビデオデコーダ
771 エントロピーデコーダ
772 イントラデコーダ
773 残差デコーダ
774 再構築モジュール
780 インターデコーダ
800 プロセス
1001 メモリ
1002 コンテキストモデルリスト
1003 メモリ
1004 コンテキストモデルリスト
1010 コンテキストモデラ
1020 バイナリ算術エンコーダ
1030 バイナリ算術エンコーダ
1040 コンテキストモデラ
1110 量子化残差
1120 バイナリ文字列
1210 符号化されたビット
1220 バイナリ文字列
1230 量子化残差
1300 プロセス
1400 プロセス
1500 コンピュータシステム、アーキテクチャ
1501 キーボード
1502 マウス
1503 トラックパッド
1505 ジョイスティック
1506 マイク
1507 スキャナ
1508 カメラ
1509 スピーカ
1510 タッチ画面
1520 CD/DVD ROM/RW
1521 CD/DVDなどの媒体
1522 サムドライブ
1523 取り外し可能なハードドライブまたはソリッドステートドライブ
1540 コア
1541 中央処理装置(CPU)
1542 グラフィック処理装置(GPU)
1543 フィールド・プログラマブル・ゲート領域(FPGA)
1544 ハードウェアアクセラレータ
1545 読み取り専用メモリ(ROM)
1546 ランダムアクセスメモリ
1547 内部大容量記憶装置
1548 システムバス
1549 周辺バス
Claims (20)
- ビデオデコーダにおいて行われるビデオ復号の方法であって、前記方法が、
シンタックス要素のビンの符号化されたビットを含むビットストリームを受信するステップであって、前記シンタックス要素は符号化された画像内の変換スキップブロックの領域の残差に対応する、ステップと、
前記領域のシンタックス要素のいくつかの前記ビンのそれぞれについてコンテキストモデルを決定するためにコンテキストモデリングを行うステップであって、コンテキスト符号化されるシンタックス要素の前記ビンの数は、前記領域に設定されたコンテキスト符号化されるビンの最大数を超えない、ステップと、
シンタックス要素の前記いくつかの前記ビンの前記符号化されたビットを、前記決定されたコンテキストモデルに基づいて復号するステップと、
を含む、方法。 - コンテキスト符号化されたシンタックス要素の前記ビンの前記数は、前記変換スキップブロックの前記領域のシンタックス要素の前記ビンの総数以下である、
請求項1に記載の方法。 - 前記変換スキップブロックの前記領域のコンテキスト符号化されたビンの前記最大数はB×Aであり、ここで、Bは正の数であり、Aは前記領域内の量子化残差の数である、
請求項1に記載の方法。 - 前記変換スキップブロックの前記領域に対してコンテキスト符号化されていないシンタックス要素の前記ビンの残りの総数の前記符号化されたビットを、等確率モデルに基づいて復号するステップ
をさらに含む、請求項2に記載の方法。 - Bは整数である、
請求項3に記載の方法。 - Bは分数である、
請求項3に記載の方法。 - BはAに従って設定される、
請求項3に記載の方法。 - 前記変換スキップブロックは前記領域のみを含み、Aは前記変換スキップブロックのW×Hに等しく、ここで、Wは前記変換スキップブロックの幅であり、Hは前記変換スキップブロックの高さである、
請求項3に記載の方法。 - 前記変換スキップブロックは、前記領域を含む複数の領域に分割され、
前記変換スキップブロックの前記複数の領域のそれぞれのコンテキスト符号化されたビンの前記最大数はB×Aであり、ここで、Bは正の数であり、Aは、前記複数の領域の前記それぞれにおける量子化残差の数である、
請求項1に記載の方法。 - ビデオデコーダで行われるビデオ復号の方法であって、前記方法が、
符号化されたビデオビットストリームを受信するステップと、
前記符号化されたビデオビットストリームの対象ブロックおよび近傍ブロックのうちの少なくとも1つがブロック差分パルス符号変調(BDPCM)で符号化されているかどうかを示すインジケータを受信するステップであって、前記対象ブロックは前記近傍ブロックに隣接している、ステップ、と、
前記対象ブロックと前記近傍ブロックのうちの前記少なくとも1つがBDPCMで符号化されていると示される場合、
前記対象ブロック内の対象サブブロックと前記近傍ブロック内の近傍サブブロックとの間の境界に適用する境界強度を決定するステップと、
前記決定された境界強度に従ってデブロッキングフィルタを使用して、前記対象ブロック内の前記対象サブブロックと前記近傍ブロック内の前記近傍サブブロックとの間の前記境界にデブロッキングを行うステップと、
を含む、方法。 - 前記近傍サブブロックはBDPCMで符号化されていない、請求項10に記載の方法。
- 前記近傍サブブロックがBDPCMで符号化されている場合、前記デブロッキングフィルタの前記境界強度は1または2に決定される、
請求項10に記載の方法。 - デブロッキングを行う前記ステップは、
前記対象および近傍サブブロックがBDPCMで符号化されている場合、前記対象サブブロックと前記近傍サブブロックとの間の量子化パラメータの差がしきい値を超えているという決定に基づいて、前記対象ブロック内の前記対象サブブロックと前記近傍ブロック内の前記近傍サブブロックとの間の前記境界に前記デブロッキングを行うステップ
をさらに含む、請求項10に記載の方法。 - デブロッキングを行う前記ステップは、
前記対象および近傍サブブロックがBDPCMで符号化されている場合、前記対象サブブロックおよび前記近傍サブブロックが異なるBDPCM予測モードで符号化されているという決定に基づいて、前記対象ブロック内の前記対象サブブロックと前記近傍ブロック内の前記近傍サブブロックとの間の前記境界に前記デブロッキングを行うステップ
をさらに含む、請求項10に記載の方法。 - デブロッキングを行う前記ステップは、
前記対象および近傍サブブロックがBDPCMで符号化されている場合、前記対象サブブロックおよび前記近傍サブブロックのうちの少なくとも1つが少なくとも1つの非ゼロ係数を有するという決定に基づいて、前記対象ブロック内の前記対象サブブロックと前記近傍ブロック内の前記近傍サブブロックとの間の境界も前記デブロッキングを行うステップ
をさらに含む、請求項10に記載の方法。 - ビデオ復号の装置であって、
シンタックス要素のビンの符号化されたビットを含むビットストリームを受信し、前記シンタックス要素は符号化された画像内の変換スキップブロックの領域の残差に対応し、
前記領域のシンタックス要素のいくつかの前記ビンのそれぞれについてコンテキストモデルを決定するためにコンテキストモデリングを行い、コンテキスト符号化されるシンタックス要素の前記ビンの数は、前記領域に設定されるコンテキスト符号化されるビンの最大数を超えず、
シンタックス要素の前記いくつかの前記ビンの前記符号化されたビットを、前記決定されたコンテキストモデルに基づいて復号する、
ように構成された処理回路を含む、装置。 - コンテキスト符号化されたシンタックス要素の前記ビンの数は、前記変換スキップブロックの前記領域のシンタックス要素の前記ビンの総数以下である、
請求項16に記載の装置。 - 前記変換スキップブロックの前記領域のコンテキスト符号化されたビンの前記最大数はB×Aであり、ここで、Bは正の数であり、Aは前記領域内の量子化残差の数である、
請求項16に記載の装置。 - 前記処理回路は、
前記変換スキップブロックの前記領域に対してコンテキスト符号化されていないシンタックス要素の前記ビンの残りの総数の前記符号化されたビットを、等確率モデルに基づいて復号するようにさらに構成される、請求項16に記載の装置。 - ビデオ符号化の装置であって、
符号化されたビデオビットストリームを受信し、
前記符号化されたビデオビットストリームの対象ブロックおよび近傍ブロックのうちの少なくとも1つがブロック差分パルス符号変調(BDPCM)で符号化されているかどうかを示すインジケータを受信し、前記対象ブロックは前記近傍ブロックに隣接しており、
前記対象ブロックと前記近傍ブロックのうちの前記少なくとも1つがBDPCMで符号化されていると示されている場合、
前記対象ブロック内の対象サブブロックと前記近傍ブロック内の近傍サブブロックとの間の境界に適用される境界強度を決定し、
前記決定された境界強度に従ってデブロッキングフィルタを使用して、前記対象ブロック内の前記対象サブブロックと前記近傍ブロック内の前記近傍サブブロックとの間の前記境界にデブロッキングを行う、
ように構成された処理回路を含む、装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2024017424A JP2024055892A (ja) | 2018-12-26 | 2024-02-07 | 映像符号化の方法および装置 |
Applications Claiming Priority (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201862785056P | 2018-12-26 | 2018-12-26 | |
US62/785,056 | 2018-12-26 | ||
US16/710,899 US11470329B2 (en) | 2018-12-26 | 2019-12-11 | Method and apparatus for video coding |
US16/710,899 | 2019-12-11 | ||
JP2021531592A JP7223138B2 (ja) | 2018-12-26 | 2019-12-20 | ビデオコーディングの方法および装置、ならびにコンピュータプログラム |
PCT/US2019/067992 WO2020139774A1 (en) | 2018-12-26 | 2019-12-20 | Method and apparatus for video coding |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021531592A Division JP7223138B2 (ja) | 2018-12-26 | 2019-12-20 | ビデオコーディングの方法および装置、ならびにコンピュータプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2024017424A Division JP2024055892A (ja) | 2018-12-26 | 2024-02-07 | 映像符号化の方法および装置 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2023059883A true JP2023059883A (ja) | 2023-04-27 |
JP2023059883A5 JP2023059883A5 (ja) | 2023-09-26 |
JP7436715B2 JP7436715B2 (ja) | 2024-02-22 |
Family
ID=71123359
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021531592A Active JP7223138B2 (ja) | 2018-12-26 | 2019-12-20 | ビデオコーディングの方法および装置、ならびにコンピュータプログラム |
JP2023015476A Active JP7436715B2 (ja) | 2018-12-26 | 2023-02-03 | ビデオコーディングの方法および装置、ならびにコンピュータプログラム |
JP2024017424A Pending JP2024055892A (ja) | 2018-12-26 | 2024-02-07 | 映像符号化の方法および装置 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021531592A Active JP7223138B2 (ja) | 2018-12-26 | 2019-12-20 | ビデオコーディングの方法および装置、ならびにコンピュータプログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2024017424A Pending JP2024055892A (ja) | 2018-12-26 | 2024-02-07 | 映像符号化の方法および装置 |
Country Status (6)
Country | Link |
---|---|
US (4) | US11470329B2 (ja) |
EP (1) | EP3906692A4 (ja) |
JP (3) | JP7223138B2 (ja) |
KR (1) | KR20210088700A (ja) |
CN (1) | CN113383553A (ja) |
WO (1) | WO2020139774A1 (ja) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FR3086487A1 (fr) | 2018-09-21 | 2020-03-27 | Orange | Procedes et dispositifs de codage et de decodage d'un flux de donnees representatif d'au moins une image. |
US11595656B2 (en) * | 2019-01-25 | 2023-02-28 | Hfi Innovation Inc. | Method and apparatus of transform coefficient coding with TB-level constraint |
EP3958570A4 (en) * | 2019-04-17 | 2023-01-25 | Lg Electronics Inc. | VIDEO CODING/DECODING DEVICE AND METHOD USING A BDPCM, AND TRANSMISSION BITSTREAM METHOD |
US11190758B2 (en) * | 2019-04-25 | 2021-11-30 | Qualcomm Incorporated | Block-based quantized residual domain pulse code modulation assignment for intra prediction mode derivation |
JP7440544B2 (ja) * | 2019-06-18 | 2024-02-28 | エルジー エレクトロニクス インコーポレイティド | 画像デコード方法及びその装置 |
JP2022540144A (ja) | 2019-07-09 | 2022-09-14 | エルジー エレクトロニクス インコーポレイティド | デブロッキングフィルタリングに基づく映像コーディング方法及びその装置 |
US11388443B2 (en) * | 2019-09-18 | 2022-07-12 | Qualcomm Incorporated | Harmonization of deblocking conditions in video coding |
KR20220110834A (ko) * | 2020-01-10 | 2022-08-09 | 엘지전자 주식회사 | 영상 디코딩 방법 및 그 장치 |
US11516514B2 (en) * | 2020-03-27 | 2022-11-29 | Tencent America LLC | High level control for deblocking operations |
CN117579846A (zh) * | 2023-11-09 | 2024-02-20 | 四川新视创伟超高清科技有限公司 | 一种lcevc的熵编码方法及装置 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5528238A (en) * | 1993-11-24 | 1996-06-18 | Intel Corporation | Process, apparatus and system for decoding variable-length encoded signals |
US5764374A (en) * | 1996-02-05 | 1998-06-09 | Hewlett-Packard Company | System and method for lossless image compression having improved sequential determination of golomb parameter |
KR100678958B1 (ko) * | 2005-07-29 | 2007-02-06 | 삼성전자주식회사 | 인트라 bl 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더 |
JP2008289134A (ja) * | 2007-04-20 | 2008-11-27 | Panasonic Corp | 符号化レート変換装置、集積回路、符号化レート変換方法、及びプログラム |
WO2012011744A2 (ko) * | 2010-07-20 | 2012-01-26 | 에스케이텔레콤 주식회사 | 디블록킹 필터링 방법 및 장치 및 이를 이용한 부호화 및 복호화 방법과 장치 |
WO2012134246A2 (ko) | 2011-04-01 | 2012-10-04 | 엘지전자 주식회사 | 엔트로피 디코딩 방법 및 이를 이용하는 디코딩 장치 |
US10390046B2 (en) * | 2011-11-07 | 2019-08-20 | Qualcomm Incorporated | Coding significant coefficient information in transform skip mode |
US10277915B2 (en) * | 2011-11-07 | 2019-04-30 | Qualcomm Incorporated | Signaling quantization matrices for video coding |
US9191670B2 (en) * | 2012-01-17 | 2015-11-17 | Qualcomm Incorporated | Throughput improvement for CABAC coefficient level coding |
US9584802B2 (en) * | 2012-04-13 | 2017-02-28 | Texas Instruments Incorporated | Reducing context coded and bypass coded bins to improve context adaptive binary arithmetic coding (CABAC) throughput |
US20140029664A1 (en) * | 2012-07-27 | 2014-01-30 | The Hong Kong University Of Science And Technology | Frame-level dependent bit allocation in hybrid video encoding |
AU2014202921B2 (en) * | 2014-05-29 | 2017-02-02 | Canon Kabushiki Kaisha | Method, apparatus and system for de-blocking a block of video samples |
US9521423B2 (en) * | 2014-06-26 | 2016-12-13 | Sony Corporation | Data encoding and decoding apparatus, method and storage medium |
KR20180048736A (ko) * | 2015-09-24 | 2018-05-10 | 엘지전자 주식회사 | 영상 코딩 시스템에서 인터 예측 방법 및 장치 |
US10708164B2 (en) * | 2016-05-03 | 2020-07-07 | Qualcomm Incorporated | Binarizing secondary transform index |
US11483575B2 (en) * | 2018-08-24 | 2022-10-25 | Hfi Innovation Inc. | Coding transform coefficients with throughput constraints |
FR3086485A1 (fr) * | 2018-09-21 | 2020-03-27 | Orange | Procedes et dispositifs de codage et de decodage d'un flux de donnees representatif d'au moins une image. |
US10778977B2 (en) * | 2018-12-05 | 2020-09-15 | Qualcomm Incorporated | Triangle motion information for video coding |
-
2019
- 2019-12-11 US US16/710,899 patent/US11470329B2/en active Active
- 2019-12-20 WO PCT/US2019/067992 patent/WO2020139774A1/en unknown
- 2019-12-20 JP JP2021531592A patent/JP7223138B2/ja active Active
- 2019-12-20 KR KR1020217017969A patent/KR20210088700A/ko not_active Application Discontinuation
- 2019-12-20 EP EP19904605.3A patent/EP3906692A4/en active Pending
- 2019-12-20 CN CN201980064067.2A patent/CN113383553A/zh active Pending
-
2021
- 2021-08-26 US US17/446,097 patent/US11677959B2/en active Active
-
2022
- 2022-08-29 US US17/897,932 patent/US20220417525A1/en active Pending
-
2023
- 2023-02-03 JP JP2023015476A patent/JP7436715B2/ja active Active
- 2023-04-06 US US18/296,791 patent/US20230247207A1/en active Pending
-
2024
- 2024-02-07 JP JP2024017424A patent/JP2024055892A/ja active Pending
Also Published As
Publication number | Publication date |
---|---|
US20230247207A1 (en) | 2023-08-03 |
JP2024055892A (ja) | 2024-04-19 |
KR20210088700A (ko) | 2021-07-14 |
CN113383553A (zh) | 2021-09-10 |
US11677959B2 (en) | 2023-06-13 |
US11470329B2 (en) | 2022-10-11 |
EP3906692A1 (en) | 2021-11-10 |
WO2020139774A1 (en) | 2020-07-02 |
JP7223138B2 (ja) | 2023-02-15 |
JP7436715B2 (ja) | 2024-02-22 |
EP3906692A4 (en) | 2022-11-30 |
US20200213596A1 (en) | 2020-07-02 |
US20220417525A1 (en) | 2022-12-29 |
US20210392338A1 (en) | 2021-12-16 |
JP2022512090A (ja) | 2022-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7201700B2 (ja) | 履歴ベースの動きベクトル予測のための方法並びにその装置及びコンピュータプログラム | |
JP7257535B2 (ja) | 変換スキップモードとブロック差分パルスコード変調の改善された残差コーディング | |
JP7223138B2 (ja) | ビデオコーディングの方法および装置、ならびにコンピュータプログラム | |
JP2022177269A (ja) | 動画を復号する方法、装置、及びコンピュータプログラム | |
JP2023062099A (ja) | ビデオ復号化のための方法、機器、非一時的なコンピュータ可読媒体、及びコンピュータプログラム | |
CN109996079B (zh) | 视频解码方法和装置 | |
JP7185047B2 (ja) | イントラ予測モードとブロック差分パルスコード変調モードとの間の相互作用のための方法および装置 | |
JP7221390B2 (ja) | ビデオ復号及び符号化の方法、装置並びにプログラム | |
CN113424541A (zh) | 用于变换跳过模式和块差分脉冲编码调制的残差编解码 | |
KR20240036717A (ko) | 비디오 코딩을 위한 방법 및 장치 | |
US10735758B2 (en) | Method and apparatus for video coding | |
JP7419506B2 (ja) | 映像コーディングのための方法及び装置 | |
JP7267404B2 (ja) | ビデオを符号化及び復号する方法、並びにその装置及びコンピュータプログラム | |
JP7332718B2 (ja) | ビデオコーディングのための方法および装置 | |
JP2023527662A (ja) | デコーダ側イントラモード導出 | |
JP2023510690A (ja) | ビデオコーディングのための方法及び装置 | |
US10542260B1 (en) | Method and apparatus for video coding | |
AU2020329833B2 (en) | Method and apparatus for video coding | |
JP2023525215A (ja) | イントラ文字列コピーの方法及び機器 | |
JP2023517505A (ja) | ビデオコーディングのための方法及び装置 | |
JP2023525668A (ja) | 多重変換選択を用いた適応スキャン | |
JP2023509592A (ja) | ビデオコーディングのための方法、装置およびコンピュータプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230303 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230303 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230914 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240109 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240208 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7436715 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |