JP7438196B2 - ビデオコーディングのためのメモリ消費を低減した適応ループフィルタパラメータの時間予測 - Google Patents
ビデオコーディングのためのメモリ消費を低減した適応ループフィルタパラメータの時間予測 Download PDFInfo
- Publication number
- JP7438196B2 JP7438196B2 JP2021512762A JP2021512762A JP7438196B2 JP 7438196 B2 JP7438196 B2 JP 7438196B2 JP 2021512762 A JP2021512762 A JP 2021512762A JP 2021512762 A JP2021512762 A JP 2021512762A JP 7438196 B2 JP7438196 B2 JP 7438196B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- alf
- parameters
- blocks
- block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000015654 memory Effects 0.000 title claims description 120
- 230000002123 temporal effect Effects 0.000 title claims description 97
- 230000003044 adaptive effect Effects 0.000 title claims description 29
- 238000000034 method Methods 0.000 claims description 89
- 238000003860 storage Methods 0.000 claims description 28
- 238000001914 filtration Methods 0.000 claims description 27
- 238000012545 processing Methods 0.000 description 38
- 238000013139 quantization Methods 0.000 description 31
- 238000005192 partition Methods 0.000 description 29
- 239000013598 vector Substances 0.000 description 22
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 21
- 241000023320 Luma <angiosperm> Species 0.000 description 19
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 19
- 239000000872 buffer Substances 0.000 description 18
- 238000000638 solvent extraction Methods 0.000 description 18
- 238000004891 communication Methods 0.000 description 17
- 230000006870 function Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 13
- 230000008569 process Effects 0.000 description 13
- 230000011664 signaling Effects 0.000 description 12
- 230000005540 biological transmission Effects 0.000 description 9
- 239000011449 brick Substances 0.000 description 8
- 238000013500 data storage Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 230000009466 transformation Effects 0.000 description 7
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 5
- 230000002457 bidirectional effect Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 4
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000013461 design Methods 0.000 description 4
- 238000012546 transfer Methods 0.000 description 4
- 238000003491 array Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 238000011835 investigation Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000000844 transformation Methods 0.000 description 2
- VBRBNWWNRIMAII-WYMLVPIESA-N 3-[(e)-5-(4-ethylphenoxy)-3-methylpent-3-enyl]-2,2-dimethyloxirane Chemical compound C1=CC(CC)=CC=C1OC\C=C(/C)CCC1C(C)(C)O1 VBRBNWWNRIMAII-WYMLVPIESA-N 0.000 description 1
- 108091000069 Cystinyl Aminopeptidase Proteins 0.000 description 1
- 102100020872 Leucyl-cystinyl aminopeptidase Human genes 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 229910003460 diamond Inorganic materials 0.000 description 1
- 239000010432 diamond Substances 0.000 description 1
- 238000012432 intermediate storage Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
- H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
f(k,l)=round(normFactor・h(k,l))
に従って量子化することができる。
1.ALFパラメータの時間予測において使用されるために、アレイは、BスライスまたはPスライスのいずれかからのパラメータを記憶し得る。
2.アレイにおいて、ALFパラメータのエントリ(entry)は、ある順序で(たとえば、デコーディング順序に従うことによって)記憶され得る。N個のエントリすべてが記憶することに使用されるとき(すなわち、アレイが満杯であるとき)、1つのエントリを除去(remove)し、次いで新しいパラメータをアレイに追加することによって、新しく取得されたパラメータを記憶することができる。
a.一例として、これは、FIFO(先入れ先出し)方式で行うことができ、アレイが満杯になるとき、アレイ中の最後のエントリ(すなわち、パラメータの最も古いセット)が除去され、新しいパラメータがアレイの第1の要素に記憶される。
b.別の例では、ALFパラメータは、同じ時間ID(temporal ID)を有するバッファ中のある記憶されたパラメータを置き換え、たとえば、あるパラメータは、バッファ中の最も古いパラメータであり得るか、あるいは、あまり使用されない、または他の何らかのルールが適用され得る。
3.prevIdxと呼ばれる非負のインデックス値は、ALFパラメータのどのセットがエンコーディング/デコーディングのためにバッファからロード/使用されるかを識別するためにシグナリングされ得る。
a.prevIdxをシグナリングするために、単進符号(unary code)などの可変長コード(variable length code)が使用され得る。ある時間的Idに対するパラメータの利用可能な総数は、記憶されたバッファ中でカウントすることができ、切り捨てられる2値化を使用して、フィルタの利用可能な総数から1を引いた数を有するprevIdxを最大インデックスとしてシグナリングすることができる。しかしながら、切り捨てられるコーディングは、たとえば、いくつかのピクチャが送信中に失われたとき、エンコーダとデコーダとの間に不一致をもたらし得る。
b.prevIdxは、0からN-1までの値をとることができる。コーディングに使用される階層フレーム構造のタイプに応じて、prevIdxの最大値はより小さくなり得る。
c.スライス/ピクチャをコーディングするとき、時間的予測のための可能性のある候補は、アレイ中に含まれたセットをトラバース(traverse)することによって決められ得、および等しいまたはより小さいtIdを有する全てまたはいくつかのパラメータセットが、有効な候補として扱われる。
d.(コーディングのために使用されるALFパラメータを決定する)アレイエントリのシグナリングは、コード化されている現在のフレームの時間レイヤIDに依存し得る。特に、prevIdxは、エンコード/デコードされている現在のフレームの時間レイヤIDに依存して、アレイ中の異なるエントリに対応し得る。
i.以下の表2に図示される例として、prevIdx=1は、コード化されている現在のフレームのtIdに依存して、アレイ中の以下の2つの異なるエントリを指し得る。
1.prevIdx=1は、tId=1でフレームをコーディングするときに、Alf(P4,1)を記憶する、アレイ中の4番目のエントリに対応し、これは、時間スケーラビリティを保持するためにコーディングを可能にする第2の可能なオプションであるからであり、ここで、Alf(P4,1)は、prevIdx=0でシグナリングされる第1の候補である。
2.prevIdx=1は、tId=2でフレームをコーディングするときに、Alf(P2,2)を記憶する、アレイ中の2番目エントリに対応し、これは、コーディングを可能にする第2の可能なオプションであるからであり、ここで、Alf(P1,1)は、prevIdx=0に対応する第1のオプションである。
f.別の例では、より低い時間IDをもつピクチャまたはスライスは、より高い時間IDのALFパラメータについての情報を搬送し得、このケースでは、より高い時間IDをもつピクチャが失われる場合、パラメータは、より低い時間IDをもつピクチャから取得されることができる。それらのパラメータはまた、より高い時間IDピクチャがそのようなALFパラメータを搬送するかどうかを含み得、それらのパラメータまたはダミー(事前構成された)パラメータがバッファに追加され得る。
g.別の例では、デコーダピクチャバッファ管理(DPB)方法は、DPB管理が失われたピクチャの処理を含むので、時間的ALFパラメータ処理に適用されることができる。
4.ALFパラメータの重要度に依存して(たとえば、重要度は、それらが使用される頻度に基づいて、またはそれらの時間レイヤ情報に基づいて測定できる)、それらの重要なALFパラメータのうちのいくつかは固定され、次のIスライスがコード化されるまでバッファ中に保持されることができる。そのような重要度メトリックは、シグナリングprevIdx(たとえば、単項コーディング)のシグナリングオーバーヘッドを低減するためにエントリをランク付けし、並べ替えるために使用されることができる。
5.ALFパラメータのロードおよび記憶(バッファの管理)に関する追加の決定または制限は、(時間レイヤIDに加えて)他の何らかのサイド情報、またはALFパラメータとともに記憶されることができる重要度尺度に基づいて行われることができる。
6.別々のバッファは、ルーマチャネルおよびクロマチャネルを別々にコーディングするために使用されることができる。結果として、各sbufferは、ルーマチャネルおよびクロマチャネルに対して別々に使用されるALFパラメータを決定するために、prevIdxの異なるシグナリングを有し得る。
いくつかの例では、エントロピーエンコーディングユニット220は、シンタックス要素がエントロピーエンコードされないバイパスモードで動作し得る。
以下に本願の出願当初の特許請求の範囲に記載された発明を付記する。
[C1]
ビデオデータをデコードする方法であって、
適応ループフィルタ(ALF)パラメータのセットを、N個のメモリ要素の予め定められたサイズを有する1次元アレイに記憶することと、Nは正の整数値であり、ここで、前記ALFパラメータのセットを記憶することは、アレイのメモリ要素のうちの1つ以上に、対応するALFパラメータと、前記対応するALFパラメータが推定される時間レイヤを示す時間レイヤ識別子(ID)値との両方を記憶することを備え、
ビデオデータの1つ以上のブロックをデコードすることと、
前記1次元アレイの前記ALFパラメータを使用して、前記1つ以上のブロックをフィルタリングすることとを備える、方法。
[C2]
前記ALFパラメータのセットを記憶することは、BスライスまたはPスライスのうちの少なくとも1つから前記ALFパラメータを記憶することを備える、C1に記載の方法。
[C3]
前記ALFパラメータのセットを記憶することは、決定された順序(determined order)で前記ALFパラメータのセットを記憶することを備える、C1に記載の方法。
[C4]
前記決定された順序は、デコーディング順序を備える、C3に記載の方法。
[C5]
ALFパラメータの新しいセットが受信され、前記N個のメモリ要素のすべてが使用されるとき、前記方法は、
前記メモリ要素のうちの1つから1つのエントリを除去することと、
前記ALFパラメータの新しいセットを前記メモリ要素のうちの1つに記憶することとをさらに備える、C3に記載の方法。
[C6]
前記1つのエントリを除去することは、先入れ先出し(FIO)順序に従って、前記メモリ要素のうちの1つを選択することを備える、C5に記載の方法。
[C7]
前記1つのエントリを除去することは、前記メモリ要素のうちの1つが前記ALFパラメータの新しいセットの時間ID値と共通の時間ID値を有するように、前記メモリ要素のうちの1つを選択することを備える、C5に記載の方法。
[C8]
前記ALFパラメータのセットのうちのどれが前記フィルタリングのために使用されるべきかを表す値を有する以前のインデックス変数(index variable)を維持することをさらに備える、C1に記載の方法。
[C9]
前記以前のインデックス変数は、単進符号フォーマット(unary code format)を有する、C8に記載の方法。
[C10]
前記以前のインデックス変数の値は、0からN-1までの範囲である、C8に記載の方法。
[C11]
前記1つ以上のブロックは、現在時間ID(current temporal ID)を有するピクチャに含まれ、フィルタリングすることは、前記現在時間ID以下の時間IDを有する前記アレイに含まれる前記ALFパラメータを使用して、前記1つ以上のブロックをフィルタリングすることを備える、C8に記載の方法。
[C12]
コード化されている現在ピクチャの時間IDに従って、前記アレイのエントリを表す値をコーディングすることをさらに備える、C8に記載の方法。
[C13]
前記ビデオデータを含むビットストリームからピクチャが失われたことを検出することと、
失われた前記ピクチャに対してALFパラメータの事前構成されたセットを追加することとをさらに備える、C1に記載の方法。
[C14]
前記ビデオデータの後続のイントラ予測ピクチャ(Iピクチャ)をコード化した後まで、前記ALFパラメータのセットのうちの1つ以上の除去を防止することをさらに備える、C1に記載の方法。
[C15]
前記1つ以上のブロックをデコードする前に、前記1つ以上のブロックをエンコードすることをさらに備える、C1に記載の方法。
[C16]
ビデオデータをデコードするデバイスであって、
ビデオデータを記憶するように構成されたメモリと、
回路中で実現される1つ以上のプロセッサとを備え、
前記1つ以上のプロセッサは、
適応ループフィルタ(ALF)パラメータのセットを、前記メモリ中の1次元アレイに記憶し、前記1次元アレイはN個のメモリ要素の予め定められたサイズを有し、Nは正の整数値であり、ここで、前記1つ以上のプロセッサは、アレイのメモリ要素のうちの1つ以上に、対応するALFパラメータと、前記対応するALFパラメータが推定される時間レイヤを示す時間レイヤ識別子(ID)値との両方を記憶するように構成され、
前記ビデオデータの1つ以上のブロックをデコードし、
前記1次元アレイの前記ALFパラメータを使用して、前記1つ以上のブロックをフィルタリングするように構成される、デバイス。
[C17]
前記1つ以上のプロセッサは、デコーディング順序で前記ALFパラメータのセットを記憶するように構成される、C16に記載のデバイス。
[C18]
ALFパラメータの新しいセットが受信され、前記N個のメモリ要素のすべてが使用されるとき、前記1つ以上のプロセッサは、
先入れ先出し(FIFO)順序に従って、前記メモリ要素のうちの1つを選択し、
選択された前記メモリ要素のうちの1つを除去し、
前記ALFパラメータの新しいセットを前記選択された前記メモリ要素のうちの1つに記憶するように構成される、C17に記載のデバイス。
[C19]
前記1つ以上のプロセッサは、前記ALFパラメータのセットのうちのどれが前記フィルタリングのために使用されるべきかを表す値を有する以前のインデックス変数を維持するように構成される、C16に記載のデバイス。
[C20]
前記1つ以上のブロックは、現在時間IDを有するピクチャに含まれ、前記1つ以上のプロセッサは、前記現在時間ID以下の時間IDを有する前記アレイに含まれる前記ALFパラメータを使用して、前記1つ以上のブロックをフィルタリングするように構成される、C19に記載のデバイス。
[C21]
前記1つ以上のプロセッサは、コード化されている現在ピクチャの時間IDに従って、前記アレイのエントリを表す値をコード化するようにさらに構成される、C19に記載のデバイス。
[C22]
前記1つ以上のプロセッサは、前記1つ以上のブロックをデコードする前に、前記1つ以上のブロックをエンコードするようにさらに構成される、C16に記載のデバイス。
[C23]
前記ビデオデータを表示するように構成されたディスプレイをさらに備える、C16に記載のデバイス。
[C24]
前記デバイスは、カメラ、コンピュータ、移動体デバイス、ブロードキャスト受信機デバイス、または、セットトップボックスのうちの1つ以上を備える、C16に記載のデバイス。
[C25]
命令を記憶しているコンピュータ読取可能記憶媒体であって、
前記命令が実行されるとき、プロセッサに、
適応ループフィルタ(ALF)パラメータのセットを、N個のメモリ要素の予め定められたサイズを有する1次元アレイに記憶させ、Nは正の整数値であり、ここで、前記ALFパラメータのセットを記憶させることは、アレイのメモリ要素のうちの1つ以上に、対応するALFパラメータと、前記対応するALFパラメータが推定される時間レイヤを示す時間レイヤ識別子(ID)値との両方を記憶させることを備え、
ビデオデータの1つ以上のブロックをデコードさせ、
前記1次元アレイの前記ALFパラメータを使用して、前記1つ以上のブロックをフィルタリングさせる、コンピュータ読取可能記憶媒体。
[C26]
前記プロセッサに、デコーディング順序で前記ALFパラメータのセットを記憶させる命令をさらに備える、C25に記載のコンピュータ読取可能記憶媒体。
[C27]
前記プロセッサに、前記ALFパラメータのセットのうちのどれが前記フィルタリングのために使用されるべきかを表す値を有する以前のインデックス変数を維持させる命令をさらに備える、C25に記載のコンピュータ読取可能記憶媒体。
[C28]
前記プロセッサに、前記1つ以上のブロックをデコードする前に、前記1つ以上のブロックをエンコードさせる命令をさらに備える、C25に記載のコンピュータ読取可能記憶媒体。
[C29]
ビデオデータをデコードするデバイスであって、
適応ループフィルタ(ALF)パラメータのセットを、N個のメモリ要素の予め定められたサイズを有する1次元アレイに記憶する手段と、Nは正の整数値であり、ここで、前記ALFパラメータのセットを記憶することは、アレイのメモリ要素のうちの1つ以上に、対応するALFパラメータと、前記対応するALFパラメータが推定される時間レイヤを示す時間レイヤ識別子(ID)値との両方を記憶することを備え、
ビデオデータの1つ以上のブロックをデコードする手段と、
前記1次元アレイの前記ALFパラメータを使用して、前記1つ以上のブロックをフィルタリングする手段とを備える、デバイス。
[C30]
前記ビデオデータの1つ以上のブロックをデコードする前に、前記ビデオデータの1つ以上のブロックをエンコードする手段をさらに備える、C29に記載のデバイス。
Claims (15)
- ビデオデータをデコードする方法であって、
適応ループフィルタ(ALF)パラメータのセットを、N個のメモリ要素の予め定められたサイズを有する1次元アレイに記憶することと、Nは正の整数値であり、ここで、前記ALFパラメータのセットを記憶することは、アレイのメモリ要素のうちの1つ以上に、対応するALFパラメータと、前記対応するALFパラメータが推定される時間レイヤを示す時間レイヤ識別子(ID)値との両方を記憶することを備え、ここで、前記ALFパラメータのセットを記憶することは、決定された順序(determined order)で前記ALFパラメータのセットを記憶することを備え;ここで、ALFパラメータの新しいセットが受信され、前記N個のメモリ要素のすべてが使用されるとき、前記方法は、
前記メモリ要素のうちの1つから1つのエントリを除去することと、前記1つのエントリを除去することは、前記メモリ要素のうちの1つが前記ALFパラメータの新しいセットの時間レイヤID値と共通の時間レイヤID値を有するように、前記メモリ要素のうちの1つを選択することをさらに備える、
前記ALFパラメータの新しいセットを前記メモリ要素のうちの1つに記憶することと、
ビデオデータの1つ以上のブロックをデコードすることと、
前記1次元アレイの前記ALFパラメータを使用して、前記1つ以上のブロックをフィルタリングすることとを備える、方法。 - 前記ALFパラメータのセットを記憶することは、BスライスまたはPスライスのうちの少なくとも1つから前記ALFパラメータを記憶することを備える、請求項1に記載の方法。
- 前記決定された順序は、デコーディング順序を備える、請求項1に記載の方法。
- 前記ALFパラメータのセットのうちのどれが前記フィルタリングのために使用されるべきかを表す値を有する以前のインデックス変数(index variable)を維持することをさらに備える、請求項1に記載の方法。
- 前記以前のインデックス変数は、単進符号フォーマット(unary code format)を有する、請求項4に記載の方法。
- 前記以前のインデックス変数の値は、0からN-1までの範囲である、請求項4に記載の方法。
- 前記1つ以上のブロックは、現在ピクチャ(current picture)に含まれ、フィルタリングすることは、前記現在ピクチャの時間レイヤID値以下の時間レイヤID値を有する前記アレイに含まれる前記ALFパラメータを使用して、前記1つ以上のブロックをフィルタリングすることを備える、請求項4に記載の方法。
- コード化されている現在ピクチャの時間レイヤID値に従って、前記アレイのエントリを表す値をコーディングすることをさらに備える、請求項4に記載の方法。
- 前記ビデオデータを含むビットストリームからピクチャが失われたことを検出することと、
失われた前記ピクチャに対してALFパラメータの事前構成されたセットを追加することとをさらに備える、請求項1に記載の方法。 - 前記ビデオデータの後続のイントラ予測ピクチャ(Iピクチャ)をコード化した後まで、前記ALFパラメータのセットのうちの1つ以上の除去を防止することをさらに備える、請求項1に記載の方法。
- 前記1つ以上のブロックをデコードする前に、前記1つ以上のブロックをエンコードすることをさらに備える、請求項1に記載の方法。
- ビデオデータをデコードするデバイスであって、
適応ループフィルタ(ALF)パラメータのセットを、N個のメモリ要素の予め定められたサイズを有する1次元アレイに記憶させる手段と、Nは正の整数値であり、ここで、前記ALFパラメータのセットを記憶させることは、アレイのメモリ要素のうちの1つ以上に、対応するALFパラメータと、前記対応するALFパラメータが推定される時間レイヤを示す時間レイヤ識別子(ID)値との両方を記憶させることを備え、ここで、前記ALFパラメータのセットを記憶するための手段は、決定された順序で前記ALFパラメータのセットを記憶するように構成され;前記記憶するための手段は、ALFパラメータの新しいセットが受信され、前記N個のメモリ要素のすべてが使用されるとき、
前記メモリ要素のうちの1つが前記ALFパラメータの新しいセットの時間レイヤID値と共通の時間レイヤID値を有するように、前記メモリ要素のうちの1つを選択することによって、前記メモリ要素のうちの1つから1つのエントリを除去することと、
前記ALFパラメータの新しいセットを前記メモリ要素のうちの1つに記憶することと、を行うようにさらに構成される、
前記ビデオデータの1つ以上のブロックをデコードするための手段と、
前記1次元アレイの前記ALFパラメータを使用して、前記1つ以上のブロックをフィルタリングするための手段と、を備えるデバイス。 - 前記ビデオデータを表示するように構成されたディスプレイをさらに備える、請求項12に記載のデバイス。
- 前記デバイスは、カメラ、コンピュータ、移動体デバイス、ブロードキャスト受信機デバイス、または、セットトップボックスのうちの1つ以上を備える、請求項12に記載のデバイス。
- 命令を記憶しているコンピュータ読取可能記憶媒体であって、
前記命令が実行されるとき、請求項1乃至10のいずれかに記載の方法をプロセッサに実行させる、コンピュータ読取可能記憶媒体。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201862730504P | 2018-09-12 | 2018-09-12 | |
US62/730,504 | 2018-09-12 | ||
US16/567,966 US11284075B2 (en) | 2018-09-12 | 2019-09-11 | Prediction of adaptive loop filter parameters with reduced memory consumption for video coding |
US16/567,966 | 2019-09-11 | ||
PCT/US2019/050836 WO2020056151A1 (en) | 2018-09-12 | 2019-09-12 | Temporal prediction of adaptive loop filter parameters with reduced memory consumption for video coding |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2022500903A JP2022500903A (ja) | 2022-01-04 |
JPWO2020056151A5 JPWO2020056151A5 (ja) | 2022-08-22 |
JP7438196B2 true JP7438196B2 (ja) | 2024-02-26 |
Family
ID=69719828
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021512762A Active JP7438196B2 (ja) | 2018-09-12 | 2019-09-12 | ビデオコーディングのためのメモリ消費を低減した適応ループフィルタパラメータの時間予測 |
Country Status (16)
Country | Link |
---|---|
US (1) | US11284075B2 (ja) |
EP (1) | EP3850854A1 (ja) |
JP (1) | JP7438196B2 (ja) |
KR (1) | KR20210055043A (ja) |
CN (1) | CN112655217B (ja) |
AU (1) | AU2019338456B2 (ja) |
BR (1) | BR112021003869A2 (ja) |
CA (1) | CA3109370A1 (ja) |
CO (1) | CO2021003109A2 (ja) |
IL (1) | IL280716A (ja) |
MX (1) | MX2021002862A (ja) |
PH (1) | PH12021550293A1 (ja) |
SA (1) | SA521421337B1 (ja) |
SG (1) | SG11202101278UA (ja) |
WO (1) | WO2020056151A1 (ja) |
ZA (1) | ZA202102351B (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11451773B2 (en) | 2018-06-01 | 2022-09-20 | Qualcomm Incorporated | Block-based adaptive loop filter (ALF) design and signaling |
US11051017B2 (en) | 2018-12-20 | 2021-06-29 | Qualcomm Incorporated | Adaptive loop filter (ALF) index signaling |
US11683487B2 (en) | 2019-03-26 | 2023-06-20 | Qualcomm Incorporated | Block-based adaptive loop filter (ALF) with adaptive parameter set (APS) in video coding |
US11743459B2 (en) * | 2020-09-29 | 2023-08-29 | Qualcomm Incorporated | Filtering process for video coding |
CN113422966B (zh) * | 2021-05-27 | 2024-05-24 | 绍兴市北大信息技术科创中心 | 一种多模型cnn环路滤波方法 |
US20230179764A1 (en) * | 2021-12-06 | 2023-06-08 | Tencent America LLC | Arrangement of adaptive loop filter coefficients for fast vectorized transpositions |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20180192050A1 (en) | 2017-01-04 | 2018-07-05 | Qualcomm Incorporated | Modified adaptive loop filter temporal prediction for temporal scalability support |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3061278B2 (ja) * | 1988-04-29 | 2000-07-10 | ゼロックスコーポレーション | 可変ビット長コード語のビット長通信方法 |
US9094658B2 (en) * | 2010-05-10 | 2015-07-28 | Mediatek Inc. | Method and apparatus of adaptive loop filtering |
US9277228B2 (en) * | 2011-07-18 | 2016-03-01 | Qualcomm Incorporated | Adaptation parameter sets for video coding |
US20130113880A1 (en) * | 2011-11-08 | 2013-05-09 | Jie Zhao | High Efficiency Video Coding (HEVC) Adaptive Loop Filter |
US9386305B2 (en) * | 2011-11-28 | 2016-07-05 | Qualcomm Incorporated | Largest coding unit (LCU) or partition-based syntax for adaptive loop filter and sample adaptive offset in video coding |
MX346164B (es) * | 2012-09-27 | 2017-03-08 | Dolby Laboratories Licensing Corp | Procesamiento de imagenes con referencia inter-capa por escalabilidad con codificacion estandar. |
US20140092978A1 (en) * | 2012-10-01 | 2014-04-03 | Nokia Corporation | Method and apparatus for video coding |
US9807419B2 (en) * | 2014-06-25 | 2017-10-31 | Qualcomm Incorporated | Recovery point SEI message in multi-layer video codecs |
US10057574B2 (en) * | 2015-02-11 | 2018-08-21 | Qualcomm Incorporated | Coding tree unit (CTU) level adaptive loop filter (ALF) |
EP3453174A1 (en) | 2016-05-06 | 2019-03-13 | VID SCALE, Inc. | Method and system for decoder-side intra mode derivation for block-based video coding |
WO2018122092A1 (en) | 2016-12-30 | 2018-07-05 | Telefonaktiebolaget Lm Ericsson (Publ) | Methods, apparatus, and computer programs for decoding media |
JP2020120141A (ja) * | 2017-05-26 | 2020-08-06 | シャープ株式会社 | 動画像符号化装置及び動画像復号装置、フィルタ装置 |
KR20190028324A (ko) * | 2017-09-08 | 2019-03-18 | 주식회사 케이티 | 비디오 신호 처리 방법 및 장치 |
US10863175B2 (en) * | 2018-03-01 | 2020-12-08 | Panasonic Intellectual Property Corporation Of America | Encoder, and decoder, encoding method, decoding method |
WO2019185821A1 (en) * | 2018-03-29 | 2019-10-03 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Concept for enhancing parallel coding capabilities |
US11451773B2 (en) | 2018-06-01 | 2022-09-20 | Qualcomm Incorporated | Block-based adaptive loop filter (ALF) design and signaling |
US20200029096A1 (en) * | 2018-07-17 | 2020-01-23 | Qualcomm Incorporated | Combined inverse dynamic range adjustment (dra) and loop filter technique |
US11051017B2 (en) | 2018-12-20 | 2021-06-29 | Qualcomm Incorporated | Adaptive loop filter (ALF) index signaling |
-
2019
- 2019-09-11 US US16/567,966 patent/US11284075B2/en active Active
- 2019-09-12 MX MX2021002862A patent/MX2021002862A/es unknown
- 2019-09-12 BR BR112021003869-8A patent/BR112021003869A2/pt unknown
- 2019-09-12 CN CN201980058289.3A patent/CN112655217B/zh active Active
- 2019-09-12 EP EP19779251.8A patent/EP3850854A1/en active Pending
- 2019-09-12 JP JP2021512762A patent/JP7438196B2/ja active Active
- 2019-09-12 KR KR1020217006097A patent/KR20210055043A/ko unknown
- 2019-09-12 SG SG11202101278UA patent/SG11202101278UA/en unknown
- 2019-09-12 WO PCT/US2019/050836 patent/WO2020056151A1/en active Application Filing
- 2019-09-12 CA CA3109370A patent/CA3109370A1/en active Pending
- 2019-09-12 AU AU2019338456A patent/AU2019338456B2/en active Active
-
2021
- 2021-02-05 PH PH12021550293A patent/PH12021550293A1/en unknown
- 2021-02-08 IL IL280716A patent/IL280716A/en unknown
- 2021-02-25 SA SA521421337A patent/SA521421337B1/ar unknown
- 2021-03-10 CO CONC2021/0003109A patent/CO2021003109A2/es unknown
- 2021-04-09 ZA ZA2021/02351A patent/ZA202102351B/en unknown
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20180192050A1 (en) | 2017-01-04 | 2018-07-05 | Qualcomm Incorporated | Modified adaptive loop filter temporal prediction for temporal scalability support |
Also Published As
Publication number | Publication date |
---|---|
MX2021002862A (es) | 2021-05-28 |
KR20210055043A (ko) | 2021-05-14 |
CN112655217A (zh) | 2021-04-13 |
EP3850854A1 (en) | 2021-07-21 |
JP2022500903A (ja) | 2022-01-04 |
IL280716A (en) | 2021-03-25 |
US11284075B2 (en) | 2022-03-22 |
SG11202101278UA (en) | 2021-03-30 |
CA3109370A1 (en) | 2020-03-19 |
CN112655217B (zh) | 2023-09-12 |
WO2020056151A1 (en) | 2020-03-19 |
AU2019338456A1 (en) | 2021-03-11 |
ZA202102351B (en) | 2022-10-26 |
SA521421337B1 (ar) | 2024-02-13 |
BR112021003869A2 (pt) | 2021-05-18 |
CO2021003109A2 (es) | 2021-03-19 |
US20200084444A1 (en) | 2020-03-12 |
PH12021550293A1 (en) | 2021-10-25 |
AU2019338456B2 (en) | 2023-04-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20200366937A1 (en) | Low-frequency non-separable transform signaling based on zero-out patterns for video coding | |
US20200112715A1 (en) | History-based motion vector prediction for inter prediction coding | |
JP7438196B2 (ja) | ビデオコーディングのためのメモリ消費を低減した適応ループフィルタパラメータの時間予測 | |
US11206400B2 (en) | Low-frequency non-separable transform (LFNST) simplifications | |
US11539982B2 (en) | Merge estimation region for multi-type-tree block structure | |
US11677984B2 (en) | Low-frequency non-separable transform (LFNST) signaling | |
US11785223B2 (en) | Shared candidate list and parallel candidate list derivation for video coding | |
JP7423647B2 (ja) | 異なるクロマフォーマットを使用した三角予測ユニットモードでのビデオコーディング | |
US11122264B2 (en) | Adaptive loop filter (ALF) coefficients in video coding | |
CA3131191A1 (en) | Coefficient domain block differential pulse-code modulation in video coding | |
US11722692B2 (en) | History-based motion vector predictor constraint for merge estimation region | |
US20200112717A1 (en) | Intra block copy prediction restrictions in video coding | |
US20200137400A1 (en) | Intra block copy prediction restrictions in video coding | |
US11418787B2 (en) | Chroma delta QP in video coding | |
US11303913B2 (en) | Decoded picture buffer indexing | |
CN114175643B (zh) | 调色板和预测模式信令 | |
WO2021127402A1 (en) | Coefficient group based restriction on multiple transform selection signaling in video coding | |
RU2803195C2 (ru) | Временное предсказание параметров адаптивного контурного фильтра со сниженным потреблением памяти для кодирования видео | |
TWI843809B (zh) | 用於視訊寫碼中具有運動向量差之合併模式之信令傳輸 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220812 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220812 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20230104 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230801 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231025 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240116 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240213 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7438196 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |