JP7241870B2 - 部分的な位置に基づく差分計算 - Google Patents
部分的な位置に基づく差分計算 Download PDFInfo
- Publication number
- JP7241870B2 JP7241870B2 JP2021525770A JP2021525770A JP7241870B2 JP 7241870 B2 JP7241870 B2 JP 7241870B2 JP 2021525770 A JP2021525770 A JP 2021525770A JP 2021525770 A JP2021525770 A JP 2021525770A JP 7241870 B2 JP7241870 B2 JP 7241870B2
- Authority
- JP
- Japan
- Prior art keywords
- tool
- block
- sub
- motion vector
- prediction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004364 calculation method Methods 0.000 title description 4
- 230000033001 locomotion Effects 0.000 claims description 446
- 238000000034 method Methods 0.000 claims description 315
- 239000013598 vector Substances 0.000 claims description 259
- 238000009795 derivation Methods 0.000 claims description 49
- 238000012545 processing Methods 0.000 claims description 36
- 238000006243 chemical reaction Methods 0.000 claims description 23
- 230000003287 optical effect Effects 0.000 claims description 21
- 239000002131 composite material Substances 0.000 claims description 15
- 238000005192 partition Methods 0.000 claims description 9
- 230000002457 bidirectional effect Effects 0.000 claims description 8
- 238000000638 solvent extraction Methods 0.000 claims description 8
- 230000001131 transforming effect Effects 0.000 claims description 7
- 230000009466 transformation Effects 0.000 claims description 5
- 230000008569 process Effects 0.000 description 104
- 230000002123 temporal effect Effects 0.000 description 59
- 241000023320 Luma <angiosperm> Species 0.000 description 43
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical group COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 43
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 37
- 230000002146 bilateral effect Effects 0.000 description 22
- 238000004590 computer program Methods 0.000 description 13
- 238000005516 engineering process Methods 0.000 description 9
- 238000012986 modification Methods 0.000 description 7
- 230000004048 modification Effects 0.000 description 7
- 230000011664 signaling Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 238000003672 processing method Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 230000003044 adaptive effect Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 4
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 239000000872 buffer Substances 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000010276 construction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000006073 displacement reaction Methods 0.000 description 3
- 238000005286 illumination Methods 0.000 description 3
- 238000013507 mapping Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 101100537098 Mus musculus Alyref gene Proteins 0.000 description 2
- 101150095908 apex1 gene Proteins 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 238000013139 quantization Methods 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 229910052799 carbon Inorganic materials 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 229910003460 diamond Inorganic materials 0.000 description 1
- 239000010432 diamond Substances 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/16—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter for a given display mode, e.g. for interlaced or progressive display mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
- H04N19/52—Processing of motion vectors by encoding by predictive encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
本明細書は、ビデオコーディング技術に関係がある。具体的には、それは、ビデオコーディングにおける動き補償に関係がある。開示されている技術は、HEVCのような既存のビデオコーディング標準規格、又は完成されるべき標準規格(Versatile Video Coding(VVC))に適用されてよい。それはまた、将来のビデオコーディング標準規格又はビデオコーデックに適用可能であり得る。
ビデオコーディング標準規格は、主として、よく知られているITU-T及びISO/IEC標準規格の開発を通じて、進化してきた。ITU-Tは、H.261及びH.263を生み出し、ISO/IECは、MPEG-1及びMPEG-4 Visualを作り出し、2つの組織は共同で、H.262/MPEG-2 Video及びH264/MPEG-4 AVC(Advanced Video Coding)並びにH.265/HEVC標準規格を作り出した。H.262以降、ビデオコーディング標準規格は、ハイブリッドビデオコーディング構造に基づいており、時間予測及び変換コーディングが利用される。HEVCを越える将来のビデオコーディング技術を探るために、JVET(Joint Video Exploration Team)が2015年にVCEG及びMPEGによって共同設立された。それ以来、多くの新しい方法がJVETによって導入され、JEM(Joint Exploration Model)と名付けられた参照ソフトウェアに置かれてきた。2018年4月に、VCEG(Q6/16)とISO/IEC JTC1 SC29/WG11(MPEG)との間のJVET(Joint Video Expert Team)が、HEVCと比較してビットレート50%減を目指すVVC標準規格に取り組むために作られた。
各インター予測されたPUは、1つ又は2つの参照ピクチャリストのための動きパラメータを有している。動きパラメータは、動きベクトル及び参照ピクチャインデックスを含む。2つの参照ピクチャリストのうちの一方の利用はまた、inter_red_idcを用いて通知されてもよい。動きベクトルは、予測子に対してデルタとして明示的にコーディングされてよい。
[2.1.1.1 マージモードのための候補の導出]
PUがマージモードを用いて予測される場合に、マージ候補リスト内のエントリを指し示すインデックスは、ビットストリームからパースされ、動き情報を取り出すために使用される。このリストの構成は、HEVC標準規格で定められており、次の一連のステップに従って要約され得る:
●ステップ1:最初の候補の導出
○ステップ1.1:空間的候補導出
○ステップ1.2:空間的候補に対する冗長性検査
○ステップ1.3:時間的候補導出
●ステップ2:追加の候補の挿入
○ステップ2.1:双予測候補の生成
○ステップ2.2:ゼロ動き候補の挿入
空間マージ候補の導出では、図2に表されている位置にある候補の中から、最大4つのマージ候補が選択される。導出の順序は、A1、B1、B0、A0、及びB2である。位置B2は、位置A1、B1、B0、A0のいずれのPUも(例えば、それが他のスライス又はタイルに属するために)利用可能でないか、あるいは、イントラコーディングされている場合にのみ、考慮される。位置A1での候補が加えられた後、残りの候補の追加は、同じ動き情報を有する候補がリストから除かれることを確かにする冗長性検査に従い、それにより、コーディング効率は改善される。計算複雑性を低減するために、全ての可能な候補対が、上記の冗長性検査で考慮されるわけではない。代わりに、図3で矢印によりリンクされた対のみが考慮され、候補は、冗長性検査に使用される対応する候補が同じ動き情報を有していない場合にのみ加えられる。重複動き情報の他の発生源は、2N×2Nとは異なったパーティションと関連付けられた「第2PU」である。一例として、図4は、N×2N及び2N×Nの夫々の場合の第2PUを表す。現在のPUがN×2Nとして分割される場合に、位置A1での候補は、リスト構成のために考慮されない。実際に、これを候補に加えることによって、同じ動き情報を有する2つの予測ユニットが生じる。これは、コーディングユニットにおいてただ1つのPUしか有さないためには冗長である。同様に、位置B1は、現在のPUが2N×Nとして分割される場合に考慮されない。
このステップでは、ただ1つの候補がリストに加えられる。特に、この時間マージ候補の導出では、スケーリングされた動きベクトルは、所与の参照ピクチャリスト内の現在のピクチャとのPOC差が最小であるピクチャに属する同一位置(co-located)PUに基づいて導出される。同一位置PUの導出に使用されるべき参照ピクチャリストは、スライスヘッダで明示的に通知される。時間マージ候補のためのスケーリングされた動きベクトルは、図5の破線によって表されるように取得される。これは、POC距離tb及びtdを用いて同一位置PUの動きベクトルからスケーリングされる。ここで、tbは、現在のピクチャの参照ピクチャと現在のピクチャとの間のPOC距離であると定義され、tdは、同一位置ピクチャの参照ピクチャと同一位置ピクチャとの間のPOC差であると定義される。時間マージ候補の参照ピクチャインデックスは、ゼロに等しくセットされる。スケーリングプロセスの実際の実現は、HEVC規格で記載されている。Bスライスについては、2つの動きベクトル(1つは参照ピクチャリスト0用であり、もう1つは参照ピクチャリスト1用である)が取得され、双予測マージ候補を生成するよう結合される。
空間及び時間マージ候補に加えて、2つの更なるタイプのマージ候補、すなわち、複合双予測マージ候補及びゼロマージ候補が存在する。複合双予測マージ候補は、空間及び時間マージ候補を利用することによって生成される。複合双予測マージ候補は、Bスライスにのみ使用される。複合双予測マージ候補は、最初の候補の第1参照ピクチャリスト動きパラメータを他の第2参照ピクチャリスト動きパラメータと組み合わせることによって生成される。これら2つのタプルが異なった動き仮説(hypotheses)をもたらす場合に、それらは新しい双予測候補を形成することになる。一例として、図7は、mvL0及びrefIdxL0又はmvL1及びrefIdx1を有する原リスト(左側)内の2つの候補が、最終的なリスト(右側)に加えられる複合双予測マージ候補を生成するために使用される場合を表す。これらの追加マージ候補を生成するために考えられる組み合わせに関して多数の規則ある。
エンコーディングプロセスを加速させるために、動き推定は並行して実行され得る。これによって、所与の領域内の全ての予測ユニットの動きベクトルは同時に導出される。空間近傍からのマージ候補の導出は、1つの予測ユニットが隣接PUから、その関連する動き推定が完了するまで、動きパラメータを導出することができないということで、並列処理を妨害する可能性がある。コーディング効率と処理レイテンシとの間のトレードオフを緩和するために、HEVCは、「log2_parallel_merge_level_minus2」シンタックス要素を用いてピクチャパラメータセットにおいてサイズが通知される動き推定領域(Motion Estimation Region,MER)を定義している。MERが定義される場合に、同じ領域内にあるマージ候補は、利用不可能とマークされるので、リスト構成において考慮されない。
AMVPは、動きパラメータの明示的な伝送に使用される隣接PUとの動きベクトルの空間時間相関を利用する。各参照ピクチャリストについて、動きベクトル候補リストは、左及び上にある時間的に隣接したPU位置の利用可能性を最初に確認し、冗長な候補を除いて、候補リストを一定の長さにするようゼロベクトルを加えることによって、構成される。次いで、エンコーダは、候補リストから最良の予測子を選択し、選択された候補を示す対応するインデックスを送信することができる。同様に、マージインデックスシグナリングにより、最良の動きベクトル候補のインデックスは、トランケーテッド・ユーナリーを用いてエンコーディングされる。この場合にエンコーディングされる最大値は2である(図8を参照)。以下のセクションでは、動きベクトル予測候補の導出プロセスに関する詳細が提供される。
動きベクトル予測では、2つのタイプの動きベクトル候補、すなわち、空間動きベクトル候補及び時間動きベクトル候補、が考えられている。空間動きベクトル候補導出については、2つの動きベクトル候補が、図2に表されているように5つの異なった位置にある各PUの動きベクトルに基づいて最終的に導出される。
空間動きベクトル候補の導出では、図2で表される位置(これらの位置は、動きマージのそれらと同じである)にあるPUから導出される5つの潜在的な候補から、最大2つの候補が考えられる。現在のPUの左側の導出順序は、A0、A1及びスケーリングされたA0、スケーリングされたA1と定義される。現在のPUの上側の導出順序は、B0、B1、B2、スケーリングされたB0、スケーリングされたB1、スケーリングされたB2と定義される。夫々の側について、従って、動きベクトル候補として使用され得る4つの場合が存在し、2つの場合は、空間スケーリングを使用することを必要とされず、他の2つの場合には、空間スケーリングが使用される。4つの異なる場合は、次のように簡単に述べられる。
・空間スケーリングなし
-(1)同じ参照ピクチャリスト、かつ同じ参照ピクチャインデックス(同じPOC)
-(2)異なる参照ピクチャリスト、しかし同じ参照ピクチャ(同じPOC)
・空間スケーリング
-(3)同じ参照ピクチャリスト、しかし異なる参照ピクチャ(異なるPOC)
-(4)異なる参照ピクチャリスト、かつ異なる参照ピクチャ(異なるPOC)
参照ピクチャインデックス導出は別として、時間マージ候補の導出のための全てのプロセスは、空間動きベクトル候補の導出(図6を参照)の場合と同じである。参照ピクチャインデックスはデコーダへ通知される。
[2.2.1 サブCUベースの動きベクトル予測]
QTBTによるJEMでは、各CUは、予測方向ごとに多くてもひと組の動きパラメータを有することができる。2つのサブCUレベル動きベクトル予測方法が、大きいCUをサブCUに分割し、大きいCUの全てのサブCUについて動き情報を導出することによって、エンコーダにおいて考えられている。代替時間動きベクトル予測(Alternative Temporal Motion Vector Prediction,ATMVP)方法は、各CUが、同一位置の参照ピクチャにある現在のCUよりも小さい複数のブロックから複数の組の動き情報をフェッチすることを可能にする。空間時間動きベクトル予測(Spatial-Temporal Motion Vector Prediction,STMVP)方法では、サブCUの動きベクトルは、時間動きベクトル予測子及び空間隣接動きベクトルを使用することによって再帰的に導出される。
代替時間動きベクトル予測(ATMVP)方法では、動きベクトルの時間動きベクトル予測(Temporal Motion Vector Prediction,TMVP)は、現在のCUよりも小さいブロックから複数の組の動き情報(動きベクトル及び参照インデックスを含む)をフェッチすることによって、変更される。図10に示されるように、サブCUは、正方N×Nブロックである(Nはデフォルトで4にセットされる)。
この方法では、サブCUの動きベクトルは、ラスタ走査順序に従って、再帰的に導出される。図11は、この概念を表す。4つの4×4サブCU A、B、C及びDを含む8×8CUを考えるとする。現在のフレーム内の隣接する4×4ブロックは、a、b、c及びdと表記される。
サブCUモードは、追加のマージ候補として使用可能であり、モードを通知するために追加のシンタックス要素は必要とされない。2つの追加マージ候補が、ATMVPモード及びSTMVPモードを表すために各CUのマージ候補に加えられる。ATMVP及びSTMVPが使用可能であることをシーケンスパラメータセットが示す場合には、最大7つのマージ候補が使用される。追加マージ候補のエンコーディングロジックは、HMにおけるマージ候補の場合と同じである。これは、P又はBスライス内の各CUについて、2つ以上のRDチェックが2つの追加マージ候補のために必要とされることを意味する。
HEVCでは、動きベクトル差(Motion Vector Difference(s),MVD)(PUの動きベクトルと予測された動きベクトルの間の差)が、スライスヘッダにおいて、user_integer_mv_flagが0に等しい場合に、4分の1ルーマサンプルの単位で通知される。JEMでは、局所適応動きベクトル解像度(Locally Adaptive Motion Vector Resolution,LAMVR)が導入される。JEMでは、MVDは、4分の1ルーマサンプル、整数ルーマサンプル又は4ルーマサンプルの単位でコーディングされ得る。MVD解像度は、コーディングユニット(CU)レベルで制御され、MVD解像度フラグは、少なくとも1つの非ゼロMVD成分を有している各CUについて条件付きで通知される。
・通常の4分の1ルーマサンプルMV解像度によるCUのRDチェック中に、現在のCUの動き情報(整数ルーマサンプル精度)が格納される。格納された動き情報(丸め後)、整数ルーマサンプル及び4ルーマサンプルMVD解像度による同じCUについてのRDチェック中に更なる小範囲動きベクトル精緻化のための開始点として使用され、それにより、時間がかかる動き推定プロセスは3回繰り返されない。
・4ルーマサンプルMVD解像度によるCUのRDチェックは、条件付きで呼び出される。あるCUについて、整数ルーマサンプルMVD解像度のRDコストが4分の1ルーマサンプルMVD解像度のそれよりもずっと大きい場合に、そのCUについての4ルーマサンプルMVD解像度のRDチェックはスキップされる。
HEVCでは、動きベクトル精度は、4分の1ペル(4:2:0ビデオの場合に、4分の1ルーマサンプル及び8分の1クロマサンプル)である。JEMでは、内部動きベクトル格納及びマージ候補の精度は、1/16ペルまで高まる。より高い動きベクトル精度(1/16ペル)は、スキップ/マージモードによりコーディングされたCUの動き補償インター予測で使用される。通常のAMVPモードによりコーディングされたCUについては、整数ペル又は4分の1ペルのどちらかの動きが使用される。
オーバーラップブロック動き補償(Overlapped Block Motion Compensation,OBMC)は、従前、H.263で使用されてきた。JEMでは、H.263とは異なって、OBMCは、CUレベルでのシンタックスを用いてオン及びオフを切り替えられ得る。OBMCがJEMで使用される場合に、OBMCは、CUの右及び下境界を除く全ての動き補償(Motion Compensation,MC)ブロック境界に対して実行される。更に、それは、ルーマ及びクロマの両成分に対して適用される。JEMでは、MCブロックはコーディングブロックに対応する。CUがサブCUモード(サブCUマージ、アフィン及びFRUCモードを含む)によりコーディングされる場合に、CUの各サブブロックはMCブロックである。一様にCU境界を処理するために、OBMCは、全てのMCブロック境界についてサブブロックレベルで実行される。このとき、サブブロックサイズは、図12に表されるように、4×4に等しくセットされる。
局所照射補償(Local Illumination Compensation,LIC)は、スケーリング係数a及びオフセットbを用いて、照射変化のための線形モデルに基づく。そして、それは、各インターモードコーディングされたコーディングユニット(CU)について適応的に有効又は無効にされる。
・現在のピクチャとその参照ピクチャとの間に明らかな照射変化がない場合には、ピクチャ全体に対してLICは無効にされる。この状況を識別するために、現在のピクチャ及び現在のピクチャのあらゆる参照ピクチャのヒストグラムがエンコーダで計算される。現在のピクチャと現在のピクチャのあらゆる参照ピクチャとの間のヒストグラム差が所与の閾値よりも小さい場合に、LICは現在のピクチャに対して無効にされ、そうでない場合には、LICは現在のピクチャに対して有効にされる。
HEVCでは、並進運動モデル(translation motion model)しか動き補償予測(Motion Compensation Prediction,MCP)のために適用されない。一方、現実世界では、多くの種類の動き、例えば、ズームイン/アウト、回転、射影運動、及び他の不規則な動きがある。JEMでは、簡単化されたアフィン変換動き補償予測が適用される。図14に示されるように、ブロックのアフィン運動場は、2つの制御点動きベクトルによって記述される。
パターンマッチングされた動きベクトル導出(Pattern Matched Motion Vector Derivation,PMMVD)モードは、フレームレートアップコンバージョン(Frame-Rate Up Conversion,FRUC)技術に基づく特別なマージモードである。このモードによれば、ブロックの動き情報は通知されず、デコーダ側で導出される。
CUレベルでのMV候補セットは:
(i)現在のCUがAMVPモードにある場合の元のAMVP候補、
(ii)全てのマージ候補、
(iii)セクション2.2.7.3で導入される補間されたMV場におけるいくつかのMV、
(iv)上及び左隣の動きベクトル
から成る。
サブCUレベルでのMV候補セットは:
(i)CUレベル探索から決定されたMV、
(ii)上、左、左上及び右上の隣接MV、
(iii)参照ピクチャからの同一位置MVのスケーリングされたバージョン、
(iv)最大4つのATMVP候補
(v)最大4つのSTMVP候補
から成る。
フレームをコーディングする前に、補間された運動場が、ユニラテラルMEに基づいてピクチャ全体について生成される。次いで、運動場は、後に、CUレベル又はサブCUレベルのMV候補として使用されてよい。
動きベクトルが分数サンプル位置を指し示す場合に、動き補償された補間が必要とされる。複雑性を低減するために、双線形補間が、通常の8タップHEVC補間の代わりに、バイラテラルマッチング及びテンプレートマッチングの両方のために使用される。
C=SAD+w・(|MVx-MVx S|+|MVy-MVyS|)
MV精緻化は、バイラテラルマッチングコスト又はテンプレートマッチングコストの基準によるパターンベースのMV探索である。JEMでは、2つの探索パターン、すなわち、夫々CUレベル及びサブCUレベルでのMV精緻化のためのUnrestricted Center-Biased Diamond Search(UCBDS)及び適応交差探索(adaptive cross search)、がサポートされる。CU及びサブCU両方のレベルのMV精緻化のために、MVは、4分の1ルーマサンプルMV精度で直接探索され、この後に、8分の1ルーマサンプルMV精緻化が続く。CU及びサブCUステップのためのMV精緻化の探索範囲は、8ルーマサンプルに等しくセットされる。
バイラテラルマッチングマージモードでは、CUの動き情報が、2つの異なった参照ピクチャにおける現在のCUの運動軌跡に沿った2つのブロックの間の最も近い一致に基づいて導出されるので、双予測が常に適用される。テンプレートマッチングマージモードにはそのような制限はない。テンプレートマッチングマージモードでは、エンコーダは、CUのためにリスト0からの片予測、リスト1からの片予測、又は双予測から選択することができる。選択は、次のようにテンプレートマッチングコストに基づく:
costBi<=factor×min(cost0,cost1)の場合に、
双予測が使用される;
そうではなく、cost0<=bost1の場合に、
リスト0からの片予測が使用される;
上記以外の場合に、
リスト1からの片予測が使用される。
多重仮説(multi-hypothesis)インター予測モードでは、従来の片/双予測信号に加えて、1つ以上の追加の予測信号が通知される。結果として得られる全体の予測信号は、サンプルごとの重み付けされた重ね合わせによって取得される。片/双予測信号puni/bi及び最初の追加のインター予測信号/仮説h3によれば、結果として得られる予測信号p3は、次のように取得される:
p3=(1-α)puni/bi+αh3
pn+1=(1-αn+1)pn+αn+1hn+1
いくつかの例で、AMVPモードの片予測を改善するために多重仮説予測が適用される場合に、1つのフラグが、1又は2に等しいinter_dirについて多重仮説予測を有効又は無効にするよう通知される。このとき、1、2及び3は、夫々、リスト0,リスト1、及び双予測を表す。更に、フラグが真である場合に、もう1つのマージインデックスが通知される。このようにして、多重仮説予測は片予測を双予測に変える。このとき、1つの動きは、AMVPモードにおける元のシンタックス要素を用いて取得され、一方、他は、マージスキームを用いて取得される。最終的な予測は、双予測で見られるようにこれらの2つの予測を結合するよう1:1重みを使用する。マージ候補リストは、最初に、サブCU候補(例えば、アフィン、代替時間動きベクトル予測(ATMVP))が除外されたマージモードから導出される。次に、それは、2つの個別のリスト(1つは、候補からの全てのL0動きを含むリスト0(L0)用であり、もう1つは、全てのL0動きを含むリスト1(L1)用である)に分けられる。冗長性を排除し、空席を埋めた後、2つのマージリストが夫々L0及びL1のために生成される。AMVPモードを改善するために多重仮説予測を適用する場合に、2つの制約がある。第1に、それは、ルーマコーディングブロック(CB)が64以上であるCUについて有効にされる。第2に、それは、低遅延Bピクチャにある場合にL1にのみ適用される。
例において、多重仮説予測がスキップ又はマージモードに適用される場合に、多重仮説予測を有効にすべきかどうかは明示的に通知される。余分のマージインデキシング予測が、
元の1つに加えて選択される。従って、多重仮説予測の各候補は、1番目のマージインデキシング予測のための1つと、2番目のマージインデキシング予測のためのもう1つとを含むマージ候補の対を暗示する。しかし、各対において、2番目のマージインデキシング予測のためのマージ候補は、如何なる追加のマージインデックスも通知せずに、続いて起こるマージ候補(すなわち、既に通知されたマージインデックスに1プラスしたもの)として暗黙的に導出される。類似したマージ候補を含む対を除くことによって冗長性を排除し、空席を満たした後、多重仮説予測のための候補リストは形成される。次いで、2つのマージ候補の対からの動きが、最終的な予測を生成するために取得される。このとき、5:3の重みが、1番目及び2番目のマージインデキシング予測に夫々適用される。更に、多重仮説予測を有効にされたマージ又はスキップCUは、既存の仮説の動き情報に加えて、続く隣接CUの参照のために追加の仮説の動き情報をセーブすることができる。サブCU候補(例えば、アフィン、ATMVP)は候補リストから除かれ、低遅延Bピクチャについては、多重仮説はスキップモードに適用されない点に留意されたい。更に、多重仮説予測がマージ又はスキップモードに適用される場合に、CU幅又はCU高さが16に満たないCU、あるいは、CU幅及びCU高さの両方が16に等しいCUについては、双線形補間フィルタが多重仮説のための動き補償で使用される。従って、多重仮説予測を有効にされた各マージ又はスキップCUの最悪のバンド幅(サンプルごとに必要なアクセスサンプル)は、表1で計算され、各数値は、多重仮説予測を無効にされた各4×4CUについての最悪のバンド幅の半分未満である。
例において、究極の動きベクトル表現(Ultimate Motion Vector Expression,UMVE)が与えられる。UMVEは、提案されている動きベクトル表現法によりスキップ又はマージどちらかの方法に使用される。MMVD(Merge mode with Motion Vector Difference,MMVD)モードも、究極の動きベクトル表現(UMVE)モードとして知られている。
例において、UMVEは、アフィンマージモードに拡張され、我々は、これを以降UMVEアフィンモードと呼ぶことにする。提案されている方法は、最初の利用可能なアフィンマージ候補を基本予測子として選択する。次いで、それは、基本予測子からの各制御点の動きベクトル値に動きベクトルオフセットを適用する。利用可能なアフィンマージ候補がない場合には、この提案されている方法は使用されない。
MV(vx、vy)=MVP(vpx、vpy)+MV(x-dir-factor×distance-offset,y-dir-factor×distance-offset)
MVL0(v0x、v0y)=MVPL0(v0px、v0py)+MV(x-dir-factor×distance-offset,y-dir-factor×distance-offset)、
MVL1(v0x、v0y)=MVPL1(v1px、v1py)+MV(x-dir-factor×distance-offset,y-dir-factor×distance-offset)
BIOでは、動き補償は最初に、現在のブロックの(各予測方向における)最初の予測を生成するために実行される。最初の予測は、ブロック内の各サブブロック/ピクセルの空間勾配、時間勾配、及びオプティカルフローを導出するために使用され、これらは、次いで、第2の予測、すなわち、サブブロック/ピクセルの最終的な予測を生成するために使用される。詳細は、次のように説明される。
τ0=POC(現在)-POC(Ref0)
τ1=POC(Ref1)-POC(現在)
両方の予測が同じ時間方向から来る(両方が過去から来るか、又は両方が未来から来るかのどちらかである)場合、符号は異なる(すなわち、τ0・τ1<0)。この場合に、BIOは、予測が同じ時点からでなく(すなわち、τ0≠τ1)、両方の参照される領域が非ゼロ運動を有し(MVx0,MVy0,MVx1,Mvy1≠0)、ブロック動きベクトルが時間距離に比例する(MVx0/MVx1=MVy0/Mvy1=-τ0/τ1)場合にのみ適用される。
r=500・4d-8 (10)
m=700・4d-8 (11)
双予測動作では、1つのブロックの領域の予測のために、リスト0の動きベクトル(MV)及びリスト1のMVを用いて夫々形成された2つの予測ブロックが、単一の予測信号を形成するよう結合される。デコーダ側動きベクトル精緻化(DMVR)法では、双予測の2つの動きベクトルは、バイラテラルテンプレートマッチングプロセスによって更に精緻化される。バイラテラルテンプレートマッチングは、精緻化されたMVを追加の動き情報の伝送なしで取得するために、バイラテラルテンプレートと参照ピクチャ内の再構成サンプルとの間でひずみベースの探索を実行するようデコーダで適用される。
ビデオコーディングにおける動き精緻化及びコーディングのために、MV更新方法及び2段階インター予測方法が提案されている。BIOにおける参照ブロック0と参照ブロック1との間の導出されたMVは、スケーリングされ、リスト0及びリスト1の元の動きベクトルに加えられる。一方で、更新されたMVは、動き補償を実行するために使用され、第2のインター予測は、最終的な予測として生成される。
サブブロックベースの予測方法が提案される。第1に、我々は、色成分及びカラーフォーマット(例えば、4:2:0又は4:2:2)に応じて異なる方法で現在のブロックをサブブロックに分けることを提案する。第2に、我々は、1つの色成分のサブブロックのMVが、既に導出されている他の色成分の1つ以上のサブブロックのMVから導出され得ることを提案する。第3に、我々は、マージアフィンモード及び非マージアフィンモードのための制約を統一することを提案する。
2段階インター予測方法が提案されているが、このような方法は、より高いコーディング利得が期待され得るように、より正確な動き情報を得るよう複数回実行され得る。
上記の課題を解決するために、デコーダ側動き精緻化プロセスを実行する必要があるコーディングツール(例えば、DMVR)、及び/又は動き補償のために使用される最終的な動き情報とは異なる何らかの中間動き情報に依存するコーディングツール(例えば、BIO)について、1度よりも多く動き情報(例えば、動きベクトル)を精緻化することが提案される。
a)一例において、(i-1)番目の精緻化されたベクトル(すなわち、(i-1)回目の繰り返しの後の動きベクトルであり、(i-1)が0に等しい場合には、通知された動きベクトルが使用される)は、PU/CU/ブロック/サブブロックのi番目の動き補償された参照ブロックを生成するために使用されてよい。代替的に、更には、i番目の動き補償された参照ブロックは、i番目の時間勾配、空間勾配、及び精緻化された動きベクトルを導出するために更に使用されてよい。例は図28に示される。
b)提案されている方法によりコーディングされないインターコーディングされたブロックに使用されるものとは異なった補間フィルタが、メモリバンド幅を低減するよう、異なる動きベクトル精緻化段階での動き補償のために使用されてよい。例えば、ショートタップフィルタは、1回目から(N-1)回目の段階で使用される。
c)i回目の繰り返しからの中間の精緻化されたMVは、参照ブロックを生成するために使用される前に、最初に変更される。一例において、分数MVは、整数MVに丸められ、それから、いくつかの段階で、例えば、1回目から(N-1)回目の段階で参照ブロックを生成するために使用される。
d)いくつかの又は全ての繰り返しで、1つのブロックは最初にいくつかのサブブロックに分けられ、各サブブロックは、サブブロックサイズに等しいサイズを有する通常のコーディングブロックと同じ方法で扱われる。
i.一例において、ブロックは最初に複数のサブブロックに分けられ、各ブロックの動き情報は複数回精緻化されてよい。
ii.代替的に、ブロックは最初に複数のサブブロックに分けられ、それらのサブブロックの一部についてのみ、それらの動き情報が複数回精緻化されてよい。
iii.代替的に、ブロックは最初に複数のサブブロックに分けられ、異なるサブブロックの動き情報は異なる回数の繰り返しにより精緻化されてよい(例えば、あるブロックについては、精緻化は適用されず、あるブロックについては、動き情報が複数回精緻化されてよい。)。
iv.代替的に、ブロック全体の動き情報は、N-1回精緻化され、その後に、(N-1)番目の精緻化された動き情報に基づいて、ブロックは複数のサブブロックに分けられ、各サブブロックの動き情報について、その動き情報は更に精緻化されてよい。
e)異なる段階では、精緻化されたMVは、異なるサブブロックサイズで導出されてよい。
f)一例において、N回の段階での精緻化された動きベクトルは、動き補償を実行するために使用され、それから、前のセクション2.2.14で説明された方法が、CU/サブブロックの最終的な予測を生成するために使用される。
g)一例において、予測は、各段階(又はいくつかの段階)でブロック/サブブロックに対して生成され、それらは、そのブロック/サブブロックの最終的な予測を生成するよう加重平均される。
h)一例において、各段階で導出されたMVは、更に制約されてよい。
i.例えば、全ての1<=i<=Nについて、|MVLXi_x-MVLX0_x|<=Txかつ|MVLXi_y-MVLX0_y|<=Ty。
ii.例えば、全ての1<=i、j<=Nについて、Max{MVLXi_x-MVLXj_x}<=TxかつMax{MVLXi_y-MVLXj_y}<=Ty。
iii.閾値Tx及びTyは等しくても等しくなくてもよい。それらは、予め定義された数であるか、あるいは、VPS/SPS/PPS/スライスヘッダ/タイルグループヘッダ/タイル/CTU/CUにおいてエンコーダからデコーダへ通知され得る。
i)動きベクトル精緻化プロセスは、K回目の段階後の精緻化されたMV及びK回目の段階での入力されたMVが類似している場合に、ブロック/サブブロックについてのK回目の段階後に終了されてよい。
i.例えば、T=1/4、1/3、1/2、1、2、3、4、・・・などであるとして、(いずれかの予測方向における)精緻化されたMV及び入力されたMVの垂直及び/又は水平成分の間の絶対差がT4分の1ペル距離よりも大きくない場合に、動きベクトル精緻化プロセスは終了される。
ii.例えば、(いずれかの予測方向における)精緻化されたMV及び入力されたMVの垂直及び水平成分の間の絶対差分和がT4分の1ペル距離よりも大きくない場合に、動きベクトル精緻化プロセスは終了される。
j)繰り返し数Nは適応的であってよい。
i.例えば、Nは、現在のブロックのサイズに依存する。
1.例えば、Nは、より大きいブロックについては、より大きく、その逆も同様である。
ii.例えば、Nは、現在のブロックのコーディングモードに依存する。
iii.例えば、Nは、現在のブロックのMVD(Motion Vector Difference)に依存する。
1.例えば、Nは、|MVD|がより大きい場合に、より大きい。
iv.例えば、NはQPに依存する。
1.例えば、Nは、QPがより大きい場合に、より大きい。
v.Nは、VPS/SPS/PPS/スライスヘッダ/タイルグループヘッダ/タイル/CT/CUでエンコーダからデコーダへ通知されてよい。
a)代替的に、予測は、各段階(又はいくつかの段階)でブロック/サブブロックに対して生成され、そのブロック/サブブロックの最終的な予測は、それらの予測によって生成されてよい。一例において、それらは、ブロック/サブブロックの最終的な予測を生成するよう加重平均される。
a)一例において、精緻化された動きベクトルは、各4×4ブロックについて導出され、一方、時間勾配変更プロセスは、各8×8ブロックについて実行される。すなわち、M1=N1=8、M2=N2=4である。
b)一例において、精緻化された動きベクトルは、各8×8ブロックについて導出され、一方、時間勾配変更プロセスは、各4×4ブロックについて実行される。
c)一例において、精緻化された動きベクトルは、各4×4ブロックについて導出され、一方、時間勾配変更プロセスは、各4×4ブロックについて実行される。
d)一例において、精緻化された動きベクトルは、各8×8ブロックについて導出され、一方、時間勾配変更プロセスは、各8×8ブロックについて実行される。
e)M1、N1、M2、N2は、予め定義されるか、あるいは、ブロックサイズ/コーディングされたモードに依存するか、あるいは、VPS/SPS/PPS/ピクチャヘッダ/タイルグループ/などで通知されてよい。
a)一例において、時間及び空間勾配は、N行又は/及び列ごとに計算される。例えば、N=2である。
b)一例において、時間及び空間勾配は、CU/サブブロックの左上/右上/左下/右下4分の1について計算される。
c)一例において、時間及び空間勾配は、CU/サブブロックの左上/右上/左下/右下4分の1のN行又は/及び列ごとに計算される。
d)このような方法は、2段階インター予測及び上記の2.における多段階インター予測のために有効にされてよく、時間/空間勾配は、ブロック/サブブロックの精緻化された動きベクトルを導出するためにのみ使用されればよく、ブロック/サブブロックの予測を精緻化するために直接には使用されない。
a)一例において、(i-1)番目の精緻化された動きベクトル(すなわち、(i-1)回目の繰り返し後の動きベクトルであり、(i-1)が0に等しい場合には、通知された動きベクトルが使用される)は、i回目の動きベクトル精緻化プロセスにおける開始探索点として使用され得る。i=1,・・・,Nであり、Nは非負整数である。
b)提案されている方法によりコーディングされないインターコーディングされたブロックに使用されるものとは異なった補間フィルタは、メモリバンド幅を低減するために、異なる動きベクトル精緻化段階で使用されてよい。例えば、ショートタップフィルタが1回目から(N-1)回目の段階で使用される。
c)一例において、分数MVは、整数MVに丸められ、それから、いくつかの段階で、例えば、1回目から(N-1)回目の段階で、開始探索点として使用される。
a)一例において、精緻化された動きベクトルは、Cb又は/及びCr成分の最終的な動き補償のためにのみ使用される。
b)一例において、精緻化された動きベクトルは、ルーマ成分の最終的な動き補償のためにのみ使用される。
c)一例において、BIOでは、精緻化された動きベクトルは、動き補償を実行し、クロマ成分の最終的な予測を生成するために使用され、セクション2.2.14で説明された方法は、ルーマ成分の最終的な予測を生成するために使用される。
i.例えば、動きベクトルは1度だけ精緻化され、クロマ成分の動き補償のために使用され、セクション2.2.14で説明された方法は、ルーマ成分の最終的な予測を生成するために使用される。
d)一例において、BIOでは、セクション2.2.14で説明された方法は、ルーマ及びクロマの両成分の最終的な予測を生成するために使用される。
e)一例において、BIO及びDMVRでは、精緻化された動きベクトルは、動き補償を実行し、ルーマ及びクロマの両成分の最終的な予測を生成するために使用される。
a)代替的に、更には、ビデオコーディングにおける織り込み予測が、異なる分割パターンについて異なる動きベクトルを導出するために使用可能であり、最終的な予測は、全ての分割パターンの予測値に基づいて生成される。
a)一例において、ブロックサイズが、M×H個のサンプル、例えば、16又は32又は64個のルーマサンプルよりも小さい場合に、上記の方法は許可されない。
b)一例において、ブロックサイズが、M×H個のサンプル、例えば、16又は32又は64個のルーマサンプルよりも大きい場合に、上記の方法は許可されない。
c)代替的に、ブロック幅又は/及び高さの最小サイズがX以下である場合に、上記の方法は許可されない。一例において、Xは8にセットされる。
d)代替的に、ブロック幅>th1若しくは>=th及び/又はブロックの高さ>th2若しくは>=th2である場合に、上記の方法は許可されない。一例において、th1及び/又はth2は64にセットされる。
i.例えば、上記の方法は、M×M(例えば、128×128)ブロックに対しては無効にされる。
ii.例えば、上記の方法は、N×M/M×Nブロックに対しては無効にされる。例えば、N>=64、M=128である。
iii.例えば、上記の方法は、N×M/M×Nブロックに対して無効にされる。例えば、N>=4、M=128である。
e)代替的に、ブロックの幅<th1若しくは<=th1及び/又はブロックの高さ<th2若しくは<=th2である場合に、上記の方法は許可されない。一例において、th1及び/又はth2は8にセットされる。
f)一例において、BIOでは、上記の方法は、AMVPモードでコーディングされたブロックに対して無効にされる。
g)一例において、BIO又はDMVRでは、上記の方法は、スキップモードでコーディングされたブロックに対して無効にされる。
a)一例において、サブブロックの幅はmax(THw,M/K)にセットされる。
b)一例において、サブブロックの高さはmax(THh、N/L)にセットされる。
c)THw及び/又はTHhは予め定義される(例えば、4)か、あるいは、SPS/PPS/ピクチャ/スライス/タイルグループ/タイルレベル/CTUのグループ/CTU行/CTU/CU/PUで通知されてよい。
d)THw及び/又はTHhは、現在のブロックは双予測又は片予測であるかどうかに依存してよい。一例において、THw及び/又はTHhは、片予測について4に、又は双予測については8にセットされてよい。
a)一例において、クロマブロックを分割すべきかどうか及びどのように分割すべきかは、その対応するルーマブロックを分割すべきかどうか及びどのように分割すべきかとは無関係に、クロマ成分の幅及び高さに依存する。
b)一例において、クロマブロックを分割すべきかどうか及びどのように分割すべきかは、その対応するルーマブロックを分割すべきかどうか及びどのように分割すべきかとは無関係に、クロマ成分の幅及び高さに依存する。
c)一例において、クロマブロックを分割すべきかどうか及びどのように分割すべきかは、その対応するルーマブロックを分割すべきかどうか及びどのように分割すべきかに依存する。
a)一例において、上記の1.及び2.におけるBIO及びDMVRのための反復的動きベクトル精緻化は、各サブブロックについて呼び出されてよい。
b)一例において、幅若しくは高さの一方又は幅及び高さの両方が閾値Lよりも大きい(又はそれに等しい)ブロックの場合に、そのブロックは複数のサブブロックに分けられてよい。各サブブロックは、サブブロックサイズに等しいサイズを有している通常のコーディングブロックと同じように扱われる。
i.一例において、Lは64であり、64×128/128×64ブロックは2つの64×64サブブロックに分けられ、128×128ブロックは4つの64×64サブブロックに分けられる。しかし、N×128/128×Nブロック(N<64)サブブロックに分けられない。
ii.一例において、Lは64であり、64×128/128×64ブロックは2つの64×64サブブロックに分けられ、128×128ブロックは4つの64×64サブブロックに分けられる。一方で、N×128/128×Nブロック(N<64)は、2つのN×64/64×Nサブブロックに分けられる。
iii.一例において、幅(又は高さ)がLよりも大きい場合に、それは垂直方向(又は水平方向)で分割され、サブブロックの幅又は/及び高さはLよりも大きくない。
iv.一例において、Lは、垂直方向及び水平方向について異なってよい。例えば、ブロックの幅がLWよりも大きい場合に、ブロックは垂直方向に分割されてよく、ブロックの高さがLHよりも大きい場合に、ブロックは水平方向に分割されてよい。
v.一例において、LWはVPDU(Virtual Pipeline Data Unit)の幅であってよく、LHはVPDUの高さであってよい。
c)一例において、ブロックサイズ(すなわち、幅×高さ)が閾値L1よりも大きい場合に、それは複数のサブブロックに分けられてよい。各サブブロックは、サブブロックサイズに等しいサイズを有している通常のコーディングブロックと同じように扱われる。
i.一例において、ブロックは、L1よりも大きくない同じサイズでサブブロックに分割される。
ii.一例において、ブロックの幅(又は高さ)が閾値L2よりも大きくない場合に、それは垂直方向(又は水平方向)で分割されない。
iii.一例において、L1はVPDUのサイズである。
iv.一例において、L1は1024であり、L2は32である。例えば、16×128ブロックは2つの16×64サブブロックに分けられる。
v.一例において、L2=sqrt(L1)である。
vi.一例において、ブロックサイズ(W及びHによって夫々表される幅及び高さ)がL1よりも大きくない場合に、サブブロックの幅(subWによって表される)及び高さ(subHによって表される)は、次のように導出される:
if W>=L2かつH>=L2
subW=W/L2、
subH=H/L2、
else if W>L2かつH<L2
subH=H、
subW=W×H/L1、
else if W<L2かつH2>L2
subW=W、
subH=W×H/L1
d)一例において、1つのブロックの2段階の分割が適用されてよく、異なった規則が、どのように分割を行うべきかを決定するために適用されてよい。
i.一例において、ブロックは、上記の12.b)の方法を用いて最初にサブブロックに分割されてよく、これらのサブブロックは、上記の12.c)の方法を用いて更に分割されてよい。
ii.一例において、ブロックは、上記の12.c)の方法を用いて最初にサブブロックに分割されてよく、これらのサブブロックは、上記の12.b)の方法を用いて更に分割されてよい。
e)閾値Lは予め定義されるか、あるいは、SPS/PPS/ピクチャ/スライス/タイルグループ/タイルレベルで通知されてよい。
f)代替的に、閾値は、ブロックサイズ、ピクチャタイプ、時間レイヤインデックスなどのような、特定のコーディングされた情報に依存してよい。
g)一例において、デブロッキングが、それらのサブブロックの境界で実行されてよい。
a)代替的に、DMVDは、多重仮説イントラ及びインター予測において有効にされてよい。
a)代替的に、DMVDは、MMVD又はUMVEモードにおいて有効にされてよい。
a)代替的に、DMVRは、三角予測において有効にされてよい。
a)一例において、動き精緻化方法は、参照ピクチャが現在のコーディングピクチャである場合に適用されない。
b)一例において、前の項で請求された多数回の精緻化方法は、参照ピクチャが現在のコーディングピクチャである場合に適用されない。
c)DMVR又は/及びBIO及び/又は他のデコーダ側動き精緻化技術などの動き精緻化方法を適用すべきかどうか及びどのように適用すべきかは、サブブロックをカバーするブロックに対する、及び/又はコーディングツリーユニット(CTU)に対する、及び/又はタイル/ピクチャの左上位置に対するサブブロックの位置に依存する。
a)一例において、偶数行の差のみがブロック又は/及びサブブロックに対して計算される。
b)一例において、1つのブロック/サブブロックの4つのコーナーサンプルの差のみがブロック又は/及びサブブロックに対して計算される。
c)一例において、ビデオコーディングにおけるデコーダ側動きベクトル導出の改善の方法は、代表的な位置を選択するために使用されてよい。
d)一例において、2つの参照ブロック間の差(例えば、SAD/SATD/SSE/MRSAD/MRSATD/MRSSEなど)は、いくつかの代表的なサブブロックに対してのみ計算されてよい。
e)一例において、代表的な位置又はサブブロックに対して計算された差(例えば、SAD/SATD/SSE/MRSAD/MRSATD/MRSSEなど)は、ブロック/サブブロック全体についての差を求めるために合算される。
a)一例において、上記の14.に記載される方法が、2つの参照ブロック間の差を計算するために使用されてよい。
このセクションは、サブブロックレベルDMVDでどのようにブロックをサブブロックに分けるかについての実施形態を示す。
実施形態#1
a)ステップ1:ブロックがサイズ128×128である場合に、それは4つの64×64サブブロックに分けられる。ブロックがサイズN×128又は128×N(N<128)である場合に、それは2つのN×64又は64×Nサブブロックに分けられる。他のブロックについては、それらは分割されない。
b)ステップ2:サイズが128×128又はN×128若しくは128×N(N<128)でないブロックについては、及びステップ1で生成されたサブブロックについては、そのサイズ(すなわち、幅×高さ)が256よりも大きい場合に、それは更に、上記の12.c)で記載された方法(L=256及びL2=16)を用いてサイズ256のサブブロックに分けられる。
実施形態#2
a)ステップ1:ブロックがサイズ128×128である場合に、それは4つの64×64サブブロックに分けられる。ブロックがサイズN×128又は128×Nである場合に、それは2つのN×64又は64×Nサブブロック(N<128)に分けられる。他のブロックについては、それらは分割されない。
b)ステップ2:サイズが128×128又はN×128若しくは128×N(N<128)でないブロックについては、及びステップ1で生成されたサブブロックについては、そのサイズ(すなわち、幅×高さ)が1024よりも大きい場合に、それは更に、上記の12.c)で記載された方法(L1=1024及びL=32)を用いてサイズ1024のサブブロックに分けられる。
実施形態#3
a)ステップ1:ブロックがサイズ128×128である場合に、それは4つの64×64サブブロックに分けられる。ブロックがサイズN×128又は128×Nである場合に、それは2つのN×64又は64×Nサブブロック(N<128)に分けられる。他のブロックについては、それらは分割されない。
実施形態#4
a)ステップ1:ブロックがサイズ256×256である場合に、それは4つの128×128サブブロックに分けられる。ブロックがサイズN×256又は256×Nである場合に、それは2つのN×128又は128×Nサブブロック(N<256)に分けられる。他のブロックについては、それらは分割されない。
b)ステップ2:サイズが256×256又はN×256若しくは256×N(N<256)でないブロックについては、及びステップ1で生成されたサブブロックについては、そのサイズ(すなわち、幅×高さ)が1024よりも大きい場合に、それは更に、上記の12.c)で記載された方法(L1=1024及びL=32)を用いてサイズ1024のサブブロックに分けられる。
実施形態#5
a)ステップ1:ブロックの幅又は高さが64よりも大きい場合に、それは、上記の12.b)で記載された方法(LW=LH=64)を用いてサブブロックに分けられる。
b)ステップ2:幅及び高さがもはや64よりも大きくないブロックについては、及びステップ1で生成されたサブブロックについては、そのサイズ(すなわち、幅×高さ)が1024よりも大きい場合に、それは更に、上記の12.c)で記載された方法(L1=1024及びL2=32)を用いてサイズ1024のサブブロックに分けられる。
現在のブロックと該現在のブロックのビットストリーム表現との間の変換のために、前記現在のブロックのサブブロックのための多段階精緻化プロセスと、前記サブブロックの2つの予測ブロック間の時間勾配変更プロセスとを実行するステップであり、前記多段階精緻化プロセスを用いて、動きベクトル情報の複数の精緻化値が、前記現在のブロックの前記ビットストリーム表現からデコーディングされた動き情報に基づいて生成される、ステップと、
前記現在のブロックと前記ビットストリーム表現との間の前記変換を精緻化値に基づいて実行するステップと
を有する方法。
現在のビデオブロックと現在のビデオブロックのビットストリーム表現との間の変換を、現在のビデオブロックがサブブロックベースのコーディングツールによりコーディングされる場合にコーディングユニット又は予測ユニットが使用するサブブロックの最大数を制限する規則を用いて実行するステップを有し、サブブロックベースのコーディングツールは、アフィンコーディング、ATMVP(Advanced Temporal Motion Vector Predictor)、双方向オプティカルフロー又はデコーダ側動きベクトル精緻化コーディングツールの1つ以上を含む、方法。
現在のビデオブロックと該現在のビデオブロックのビットストリーム表現との間の変換を、前記現在のビデオブロックがサブブロックベースのコーディングツールによりコーディングされる場合に現在のビデオブロックのクロマ成分のために現在のビデオブロックのルーマ成分とは異なったパーティショニングを使用することを定める規則を用いて実行するステップを有し、サブブロックベースのコーディングツールは、アフィンコーディング、ATMVP、双方向オプティカルフロー、又はデコーダ側動きベクトル精緻化コーディングツールの1つ以上を含む、方法。
Claims (19)
- ビデオ処理の方法であって、
現在のブロックとビットストリームとの間の変換のために、第1ツール及び第2ツールが前記現在のブロックによって両方とも使用されないことを指示する規則に基づいて、前記第1ツールを有効にすべきかどうかを決定するステップと、
前記決定に基づいて、前記現在のブロックと前記ビットストリームとの間の変換を実行するステップと
を有し、
前記第1ツール及び前記第2ツールのうちの一方は、前記現在のブロックに関する動き情報の精緻化を導出するためのデコーダ側動きベクトル導出ツールであり、
前記第1ツール及び前記第2ツールのうちの他方は、インター及びイントラ複合予測ツールを有し、重みペアが前記インター及びイントラ複合予測ツールのために決定され、前記重みペアは、ブロックのインター予測信号のための第1重み及び当該ブロックのイントラ予測信号のための第2重みを含み、当該ブロックの予測信号が、前記イントラ予測信号と前記インター予測信号との加重和に少なくとも基づいて生成され、
前記デコーダ側動きベクトル導出ツールは、前記インター及びイントラ複合予測ツールが前記現在のブロックに使用されるとの決定があると無効にされる、
方法。 - 前記第1ツール及び前記第2ツールのうちの前記他方は、動きベクトル差を表す第1パラメータと、基本候補を示す第2パラメータとを含む動きベクトル表現を有するMMVDを更に有し、
前記第1パラメータは、動きの大きさ及び動きの方向を有する、
請求項1に記載の方法。 - 前記デコーダ側動きベクトル導出ツールは、前記現在のブロックがMMVDによりコーディングされているとの決定があると無効にされる、
請求項2に記載の方法。 - 前記第1ツール及び前記第2ツールのうちの前記他方は、ブロックを2つのパーティションに分割し、該2つのパーティションのうちの少なくとも一方が非正方形且つ非長方形である分割スキームを有する幾何学的パーティショニングツールを更に有する、
請求項1乃至3のうちいずれか一項に記載の方法。 - 前記幾何学的パーティショニングツールは三角予測ツールである、
請求項4に記載の方法。 - 前記デコーダ側動きベクトル導出ツールは、デコーダ側動きベクトル精緻化ツールを有する、
請求項1乃至3のうちいずれか一項に記載の方法。 - 前記デコーダ側動きベクトル導出ツールは、双方向オプティカルフローツールを有する、
請求項1乃至3のうちいずれか一項に記載の方法。 - 前記第1ツールは、前記デコーダ側動きベクトル導出ツールであり、前記変換は、
前記現在のブロックを少なくとも1つのサブブロックに分割するステップと、
前記現在のブロック内のサブブロックと関連付けられた2つの参照サブブロック間の差を該参照サブブロックの代表位置に基づいて計算するステップと、
前記差に基づいて前記動き情報の前記精緻化を導出するステップと
を有する、
請求項1乃至7のうちいずれか一項に記載の方法。 - 前記差は、前記第1ツールの早期終了段階で計算され、前記差は、前記第1ツールを終了すべきかどうかを決定するために使用される、
請求項8に記載の方法。 - 前記差を計算するステップは、2つの参照サブブロックの特定の行の差を計算するステップを有する、
請求項8又は9に記載の方法。 - 前記特定の行は、N行ごとの1つの行から成り、Nは1よりも大きい、
請求項10に記載の方法。 - Nは2に等しい、
請求項11に記載の方法。 - 前記代表位置は、所定のストラテジを使用することによって選択される、
請求項8乃至12のうちいずれか一項に記載の方法。 - 前記差に基づいて前記動き情報の前記精緻化を導出するステップは、
前記サブブロックについて前記差を求めるよう前記参照サブブロックの前記代表位置について計算された差を合計するステップと、
前記サブブロックについての前記差を用いて前記動き情報の前記精緻化を導出するステップと
を有し、
前記サブブロックについての前記差は、前記代表位置の絶対差分和(SAD)を含む、
請求項8乃至13のうちいずれか一項に記載の方法。 - 前記変換は、前記現在のブロックを前記ビットストリームにエンコーディングすることを含む、
請求項1乃至14のうちいずれかに記載の方法。 - 前記変換は、前記現在のブロックを前記ビットストリームからデコーディングすることを含む、
請求項1乃至14のうちいずれかに記載の方法。 - ビデオデータを処理する装置であって、
プロセッサと、命令を有する非一時的なメモリとを有し、
前記命令は、前記プロセッサによる実行時に、該プロセッサに、
現在のブロックとビットストリームとの間の変換のために、第1ツール及び第2ツールが前記現在のブロックによって両方とも使用されないことを指示する規則に基づいて、前記第1ツールを有効にすべきかどうかを決定するステップと、
前記決定に基づいて、前記現在のブロックと前記ビットストリームとの間の変換を実行するステップと
を実行させ、
前記第1ツール及び前記第2ツールのうちの一方は、前記現在のブロックに関する動き情報の精緻化を導出するためのデコーダ側動きベクトル導出ツールであり、
前記第1ツール及び前記第2ツールのうちの他方は、インター及びイントラ複合予測ツールを有し、重みペアが前記インター及びイントラ複合予測ツールのために決定され、前記重みペアは、ブロックのインター予測信号のための第1重み及び当該ブロックのイントラ予測信号のための第2重みを含み、当該ブロックの予測信号が、前記イントラ予測信号と前記インター予測信号との加重和に少なくとも基づいて生成され、
前記デコーダ側動きベクトル導出ツールは、前記インター及びイントラ複合予測ツールが前記現在のブロックに使用されるとの決定があると無効にされる、
装置。 - プロセッサに、
現在のブロックとビットストリームとの間の変換のために、第1ツール及び第2ツールが前記現在のブロックによって両方とも使用されないことを指示する規則に基づいて、前記第1ツールを有効にすべきかどうかを決定するステップと、
前記決定に基づいて、前記現在のブロックと前記ビットストリームとの間の変換を実行するステップと
を実行させる命令を記憶しており、
前記第1ツール及び前記第2ツールのうちの一方は、前記現在のブロックに関する動き情報の精緻化を導出するためのデコーダ側動きベクトル導出ツールであり、
前記第1ツール及び前記第2ツールのうちの他方は、インター及びイントラ複合予測ツールを有し、重みペアが前記インター及びイントラ複合予測ツールのために決定され、前記重みペアは、ブロックのインター予測信号のための第1重み及び当該ブロックのイントラ予測信号のための第2重みを含み、当該ブロックの予測信号が、前記イントラ予測信号と前記インター予測信号との加重和に少なくとも基づいて生成され、
前記デコーダ側動きベクトル導出ツールは、前記インター及びイントラ複合予測ツールが前記現在のブロックに使用されるとの決定があると無効にされる、
非一時的なコンピュータ可読記憶媒体。 - ビデオのビットストリームを記憶する方法であって、
前記ビデオの現在のブロックとビットストリームとの間の変換のために、第1ツール及び第2ツールが前記現在のブロックによって両方とも使用されないことを指示する規則に基づいて、前記第1ツールを有効にすべきかどうかを決定するステップと、
前記決定に基づいて前記現在のブロックが前記ビットストリームを生成するステップと、
前記ビットストリームを非一時的なコンピュータ可読記録媒体に記憶するステップと
を有し、
前記第1ツール及び前記第2ツールのうちの一方は、前記現在のブロックに関する動き情報の精緻化を導出するためのデコーダ側動きベクトル導出ツールであり、
前記第1ツール及び前記第2ツールのうちの他方は、インター及びイントラ複合予測ツールを有し、重みペアが前記インター及びイントラ複合予測ツールのために決定され、前記重みペアは、ブロックのインター予測信号のための第1重み及び当該ブロックのイントラ予測信号のための第2重みを含み、当該ブロックの予測信号が、前記イントラ予測信号と前記インター予測信号との加重和に少なくとも基づいて生成され、
前記デコーダ側動きベクトル導出ツールは、前記インター及びイントラ複合予測ツールが前記現在のブロックに使用されるとの決定があると無効にされる、
方法。
Applications Claiming Priority (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2018116371 | 2018-11-20 | ||
CNPCT/CN2018/116371 | 2018-11-20 | ||
CNPCT/CN2019/070062 | 2019-01-02 | ||
CN2019070062 | 2019-01-02 | ||
CNPCT/CN2019/072060 | 2019-01-16 | ||
CN2019072060 | 2019-01-16 | ||
PCT/CN2019/119634 WO2020103852A1 (en) | 2018-11-20 | 2019-11-20 | Difference calculation based on patial position |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022507281A JP2022507281A (ja) | 2022-01-18 |
JP7241870B2 true JP7241870B2 (ja) | 2023-03-17 |
Family
ID=70774606
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021525770A Active JP7241870B2 (ja) | 2018-11-20 | 2019-11-20 | 部分的な位置に基づく差分計算 |
Country Status (6)
Country | Link |
---|---|
US (2) | US20210144400A1 (ja) |
EP (1) | EP3861742A4 (ja) |
JP (1) | JP7241870B2 (ja) |
KR (1) | KR20210091161A (ja) |
CN (2) | CN113056914B (ja) |
WO (1) | WO2020103852A1 (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020084476A1 (en) | 2018-10-22 | 2020-04-30 | Beijing Bytedance Network Technology Co., Ltd. | Sub-block based prediction |
WO2020084474A1 (en) | 2018-10-22 | 2020-04-30 | Beijing Bytedance Network Technology Co., Ltd. | Gradient computation in bi-directional optical flow |
WO2020098647A1 (en) | 2018-11-12 | 2020-05-22 | Beijing Bytedance Network Technology Co., Ltd. | Bandwidth control methods for affine prediction |
CN113056914B (zh) * | 2018-11-20 | 2024-03-01 | 北京字节跳动网络技术有限公司 | 基于部分位置的差计算 |
CN113170097B (zh) | 2018-11-20 | 2024-04-09 | 北京字节跳动网络技术有限公司 | 视频编解码模式的编解码和解码 |
JP2022521554A (ja) | 2019-03-06 | 2022-04-08 | 北京字節跳動網絡技術有限公司 | 変換された片予測候補の利用 |
JP7307192B2 (ja) | 2019-04-02 | 2023-07-11 | 北京字節跳動網絡技術有限公司 | デコーダ側の動きベクトルの導出 |
EP3991432A1 (en) * | 2019-07-01 | 2022-05-04 | InterDigital VC Holdings France, SAS | Bi-directional optical flow refinement of affine motion compensation |
JP6960969B2 (ja) * | 2019-09-20 | 2021-11-05 | Kddi株式会社 | 画像復号装置、画像復号方法及びプログラム |
CN117499626A (zh) * | 2020-03-26 | 2024-02-02 | 阿里巴巴(中国)有限公司 | 用于对视频进行编码或解码的方法和装置 |
US11671616B2 (en) | 2021-03-12 | 2023-06-06 | Lemon Inc. | Motion candidate derivation |
US11936899B2 (en) * | 2021-03-12 | 2024-03-19 | Lemon Inc. | Methods and systems for motion candidate derivation |
WO2022221013A1 (en) * | 2021-04-12 | 2022-10-20 | Qualcomm Incorporated | Template matching refinement in inter-prediction modes |
US11895302B2 (en) * | 2021-06-29 | 2024-02-06 | Qualcomm Incorporated | Adaptive bilateral matching for decoder side motion vector refinement |
US11917165B2 (en) * | 2021-08-16 | 2024-02-27 | Tencent America LLC | MMVD signaling improvement |
CN115190299B (zh) * | 2022-07-11 | 2023-02-28 | 杭州电子科技大学 | Vvc仿射运动估计快速计算方法 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020186119A1 (en) | 2019-03-12 | 2020-09-17 | Beijing Dajia Internet Information Technology Co., Ltd. | Constrained and adjusted applications of combined inter- and intra-prediction mode |
Family Cites Families (273)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6005627A (en) | 1991-05-31 | 1999-12-21 | Kabushiki Kaisha Toshiba | Video coding apparatus |
KR100203281B1 (ko) | 1996-10-29 | 1999-06-15 | 윤종용 | 강제적 한방향 운동보상에 근거한 동화상 복호화장치 |
US6480615B1 (en) | 1999-06-15 | 2002-11-12 | University Of Washington | Motion estimation within a sequence of data frames using optical flow with adaptive gradients |
US6829303B1 (en) | 1999-11-17 | 2004-12-07 | Hitachi America, Ltd. | Methods and apparatus for decoding images using dedicated hardware circuitry and a programmable processor |
ES2745044T3 (es) | 2002-04-19 | 2020-02-27 | Panasonic Ip Corp America | Método de cálculo de vectores de movimiento |
AU2003264804A1 (en) | 2002-10-16 | 2004-05-04 | Koninklijke Philips Electronics N.V. | Fully scalable 3-d overcomplete wavelet video coding using adaptive motion compensated temporal filtering |
BRPI0413647A (pt) | 2003-08-26 | 2006-10-17 | Thomson Licensing | método e aparelho para codificar blocos intra-inter codificados hìbridos |
US7627037B2 (en) | 2004-02-27 | 2009-12-01 | Microsoft Corporation | Barbell lifting for multi-layer wavelet coding |
US20050201468A1 (en) | 2004-03-11 | 2005-09-15 | National Chiao Tung University | Method and apparatus for interframe wavelet video coding |
US8085846B2 (en) | 2004-08-24 | 2011-12-27 | Thomson Licensing | Method and apparatus for decoding hybrid intra-inter coded blocks |
CN1319383C (zh) | 2005-04-07 | 2007-05-30 | 西安交通大学 | 高性能空域可伸缩的运动估计与运动矢量编码实现方法 |
US8023041B2 (en) | 2006-01-30 | 2011-09-20 | Lsi Corporation | Detection of moving interlaced text for film mode decision |
US20080086050A1 (en) | 2006-10-09 | 2008-04-10 | Medrad, Inc. | Mri hyperthermia treatment systems, methods and devices, endorectal coil |
EP2082585A2 (en) | 2006-10-18 | 2009-07-29 | Thomson Licensing | Method and apparatus for video coding using prediction data refinement |
JP5197630B2 (ja) | 2008-01-09 | 2013-05-15 | 三菱電機株式会社 | 画像符号化装置、画像復号装置、画像符号化方法、および画像復号方法 |
KR101596829B1 (ko) | 2008-05-07 | 2016-02-23 | 엘지전자 주식회사 | 비디오 신호의 디코딩 방법 및 장치 |
JP2010016806A (ja) | 2008-06-04 | 2010-01-21 | Panasonic Corp | フレーム符号化とフィールド符号化の判定方法、画像符号化方法、画像符号化装置およびプログラム |
TW201041404A (en) | 2009-03-06 | 2010-11-16 | Sony Corp | Image processing device and method |
CN101877785A (zh) | 2009-04-29 | 2010-11-03 | 祝志怡 | 一种基于混合预测的视频编码方法 |
US8462852B2 (en) | 2009-10-20 | 2013-06-11 | Intel Corporation | Methods and apparatus for adaptively choosing a search range for motion estimation |
US9654792B2 (en) | 2009-07-03 | 2017-05-16 | Intel Corporation | Methods and systems for motion vector derivation at a video decoder |
WO2011003326A1 (en) | 2009-07-06 | 2011-01-13 | Mediatek Singapore Pte. Ltd. | Single pass adaptive interpolation filter |
US9549190B2 (en) | 2009-10-01 | 2017-01-17 | Sk Telecom Co., Ltd. | Method and apparatus for encoding/decoding image using variable-size macroblocks |
WO2011050641A1 (en) | 2009-10-28 | 2011-05-05 | Mediatek Singapore Pte. Ltd. | Video coding methods and video encoders and decoders with localized weighted prediction |
US20110176611A1 (en) | 2010-01-15 | 2011-07-21 | Yu-Wen Huang | Methods for decoder-side motion vector derivation |
KR101682147B1 (ko) | 2010-04-05 | 2016-12-05 | 삼성전자주식회사 | 변환 및 역변환에 기초한 보간 방법 및 장치 |
CN102934444A (zh) | 2010-04-06 | 2013-02-13 | 三星电子株式会社 | 用于对视频进行编码的方法和设备以及用于对视频进行解码的方法和设备 |
US9172968B2 (en) | 2010-07-09 | 2015-10-27 | Qualcomm Incorporated | Video coding using directional transforms |
KR101484281B1 (ko) | 2010-07-09 | 2015-01-21 | 삼성전자주식회사 | 블록 병합을 이용한 비디오 부호화 방법 및 그 장치, 블록 병합을 이용한 비디오 복호화 방법 및 그 장치 |
CN105163118B (zh) | 2010-07-20 | 2019-11-26 | Sk电信有限公司 | 用于解码视频信号的解码方法 |
US10327008B2 (en) | 2010-10-13 | 2019-06-18 | Qualcomm Incorporated | Adaptive motion vector resolution signaling for video coding |
EP2656610A4 (en) | 2010-12-21 | 2015-05-20 | Intel Corp | SYSTEM AND METHOD FOR EXTENDED DMVD PROCESSING |
JP2012142702A (ja) | 2010-12-28 | 2012-07-26 | Sony Corp | 画像処理装置および方法、並びにプログラム |
GB2487200A (en) | 2011-01-12 | 2012-07-18 | Canon Kk | Video encoding and decoding with improved error resilience |
US9049452B2 (en) | 2011-01-25 | 2015-06-02 | Mediatek Singapore Pte. Ltd. | Method and apparatus for compressing coding unit in high efficiency video coding |
JP2012191298A (ja) | 2011-03-09 | 2012-10-04 | Fujitsu Ltd | 動画像復号装置、動画像符号化装置、動画像復号方法、動画像符号化方法、動画像復号プログラム及び動画像符号化プログラム |
US9143795B2 (en) | 2011-04-11 | 2015-09-22 | Texas Instruments Incorporated | Parallel motion estimation in video coding |
CN102811346B (zh) | 2011-05-31 | 2015-09-02 | 富士通株式会社 | 编码模式选择方法和系统 |
JP2013034163A (ja) | 2011-06-03 | 2013-02-14 | Sony Corp | 画像処理装置及び画像処理方法 |
CN102857764B (zh) | 2011-07-01 | 2016-03-09 | 华为技术有限公司 | 帧内预测模式处理的方法和装置 |
US20130051467A1 (en) | 2011-08-31 | 2013-02-28 | Apple Inc. | Hybrid inter/intra prediction in video coding systems |
CN107968945B (zh) | 2011-09-14 | 2021-09-14 | 三星电子株式会社 | 对视频进行解码的方法和对视频进行编码的方法 |
US9699457B2 (en) | 2011-10-11 | 2017-07-04 | Qualcomm Incorporated | Most probable transform for intra prediction coding |
KR102211673B1 (ko) | 2011-12-16 | 2021-02-03 | 벨로스 미디어 인터내셔널 리미티드 | 동화상 부호화 방법, 동화상 부호화 장치, 동화상 복호 방법, 동화상 복호 장치, 및 동화상 부호화 복호장치 |
US9503716B2 (en) | 2011-12-19 | 2016-11-22 | Broadcom Corporation | Block size dependent filter selection for motion compensation |
EP2800368B1 (en) | 2011-12-28 | 2021-07-28 | Sharp Kabushiki Kaisha | Arithmetic decoding device, arithmetic decoding method, and arithmetic coding device |
US20130195188A1 (en) | 2012-01-26 | 2013-08-01 | Panasonic Corporation | Image coding method, image coding apparatus, image decoding method, image decoding apparatus, and image coding and decoding apparatus |
US9451277B2 (en) | 2012-02-08 | 2016-09-20 | Qualcomm Incorporated | Restriction of prediction units in B slices to uni-directional inter prediction |
EP2642755B1 (en) | 2012-03-20 | 2018-01-03 | Dolby Laboratories Licensing Corporation | Complexity scalable multilayer video coding |
JP5987767B2 (ja) | 2012-04-16 | 2016-09-07 | 株式会社Jvcケンウッド | 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム |
US9591312B2 (en) | 2012-04-17 | 2017-03-07 | Texas Instruments Incorporated | Memory bandwidth reduction for motion compensation in video coding |
EP2849441B1 (en) | 2012-05-10 | 2019-08-21 | LG Electronics Inc. | Method and apparatus for processing video signals |
EP3193506A1 (en) | 2012-06-27 | 2017-07-19 | Kabushiki Kaisha Toshiba | Decoding method and decoding device |
US20140002594A1 (en) | 2012-06-29 | 2014-01-02 | Hong Kong Applied Science and Technology Research Institute Company Limited | Hybrid skip mode for depth map coding and decoding |
US9549182B2 (en) | 2012-07-11 | 2017-01-17 | Qualcomm Incorporated | Repositioning of prediction residual blocks in video coding |
EP3588958A1 (en) | 2012-08-29 | 2020-01-01 | Vid Scale, Inc. | Method and apparatus of motion vector prediction for scalable video coding |
US9906786B2 (en) | 2012-09-07 | 2018-02-27 | Qualcomm Incorporated | Weighted prediction mode for scalable video coding |
CN104541506A (zh) | 2012-09-28 | 2015-04-22 | 英特尔公司 | 层间像素样本预测 |
WO2014047877A1 (en) | 2012-09-28 | 2014-04-03 | Intel Corporation | Inter-layer residual prediction |
WO2014082680A1 (en) | 2012-11-30 | 2014-06-05 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Compressed data stream transmission using rate control |
US20140177706A1 (en) | 2012-12-21 | 2014-06-26 | Samsung Electronics Co., Ltd | Method and system for providing super-resolution of quantized images and video |
US9294777B2 (en) | 2012-12-30 | 2016-03-22 | Qualcomm Incorporated | Progressive refinement with temporal scalability support in video coding |
EP2951999A4 (en) | 2013-01-30 | 2016-07-20 | Intel Corp | CONTENT PARAMETRIC TRANSFORMATIONS FOR CODING VIDEOS OF THE NEXT GENERATION |
US9900576B2 (en) | 2013-03-18 | 2018-02-20 | Qualcomm Incorporated | Simplifications on disparity vector derivation and motion vector prediction in 3D video coding |
US9521425B2 (en) | 2013-03-19 | 2016-12-13 | Qualcomm Incorporated | Disparity vector derivation in 3D video coding for skip and direct modes |
US9491460B2 (en) | 2013-03-29 | 2016-11-08 | Qualcomm Incorporated | Bandwidth reduction for video coding prediction |
WO2014165555A1 (en) | 2013-04-02 | 2014-10-09 | Vid Scale, Inc. | Enhanced temporal motion vector prediction for scalable video coding |
WO2014166063A1 (en) | 2013-04-09 | 2014-10-16 | Mediatek Inc. | Default vector for disparity vector derivation for 3d video coding |
US9961347B2 (en) | 2013-04-10 | 2018-05-01 | Hfi Innovation Inc. | Method and apparatus for bi-prediction of illumination compensation |
US9374578B1 (en) | 2013-05-23 | 2016-06-21 | Google Inc. | Video coding using combined inter and intra predictors |
WO2015003383A1 (en) | 2013-07-12 | 2015-01-15 | Mediatek Singapore Pte. Ltd. | Methods for inter-view motion prediction |
US9628795B2 (en) | 2013-07-17 | 2017-04-18 | Qualcomm Incorporated | Block identification using disparity vector in video coding |
US9774879B2 (en) | 2013-08-16 | 2017-09-26 | Sony Corporation | Intra-block copying enhancements for HEVC in-range-extension (RExt) |
US9503715B2 (en) | 2013-08-30 | 2016-11-22 | Qualcomm Incorporated | Constrained intra prediction in video coding |
CN111179946B (zh) | 2013-09-13 | 2023-10-13 | 三星电子株式会社 | 无损编码方法和无损解码方法 |
US10244253B2 (en) | 2013-09-13 | 2019-03-26 | Qualcomm Incorporated | Video coding techniques using asymmetric motion partitioning |
US9554150B2 (en) | 2013-09-20 | 2017-01-24 | Qualcomm Incorporated | Combined bi-predictive merging candidates for 3D video coding |
US9762927B2 (en) | 2013-09-26 | 2017-09-12 | Qualcomm Incorporated | Sub-prediction unit (PU) based temporal motion vector prediction in HEVC and sub-PU design in 3D-HEVC |
US9667996B2 (en) | 2013-09-26 | 2017-05-30 | Qualcomm Incorporated | Sub-prediction unit (PU) based temporal motion vector prediction in HEVC and sub-PU design in 3D-HEVC |
US9906813B2 (en) | 2013-10-08 | 2018-02-27 | Hfi Innovation Inc. | Method of view synthesis prediction in 3D video coding |
CN105519119B (zh) | 2013-10-10 | 2019-12-17 | 夏普株式会社 | 图像解码装置 |
CN105637872B (zh) | 2013-10-16 | 2019-01-01 | 夏普株式会社 | 图像解码装置、图像编码装置 |
WO2015062002A1 (en) | 2013-10-31 | 2015-05-07 | Mediatek Singapore Pte. Ltd. | Methods for sub-pu level prediction |
WO2015085575A1 (en) | 2013-12-13 | 2015-06-18 | Mediatek Singapore Pte. Ltd. | Methods for background residual prediction |
US9774881B2 (en) | 2014-01-08 | 2017-09-26 | Microsoft Technology Licensing, Llc | Representing motion vectors in an encoded bitstream |
US9264728B2 (en) | 2014-01-10 | 2016-02-16 | Sony Corporation | Intra-plane and inter-plane predictive method for Bayer image coding |
US10057590B2 (en) | 2014-01-13 | 2018-08-21 | Mediatek Inc. | Method and apparatus using software engine and hardware engine collaborated with each other to achieve hybrid video encoding |
WO2015109598A1 (en) | 2014-01-27 | 2015-07-30 | Mediatek Singapore Pte. Ltd. | Methods for motion parameter hole filling |
US9906790B2 (en) | 2014-03-14 | 2018-02-27 | Qualcomm Incorporated | Deblock filtering using pixel distance |
US9860559B2 (en) | 2014-03-17 | 2018-01-02 | Mediatek Singapore Pte. Ltd. | Method of video coding using symmetric intra block copy |
EP3139605A4 (en) | 2014-04-28 | 2017-05-17 | Panasonic Intellectual Property Corporation of America | Encoding method, decoding method, encoding apparatus, and decoding apparatus |
WO2015180014A1 (en) | 2014-05-26 | 2015-12-03 | Mediatek Singapore Pte. Ltd. | An improved merge candidate list construction method for intra block copy |
US10327001B2 (en) | 2014-06-19 | 2019-06-18 | Qualcomm Incorporated | Systems and methods for intra-block copy |
CN105493505B (zh) | 2014-06-19 | 2019-08-06 | 微软技术许可有限责任公司 | 统一的帧内块复制和帧间预测模式 |
US9930341B2 (en) | 2014-06-20 | 2018-03-27 | Qualcomm Incorporated | Block vector coding for intra block copying |
GB2531003A (en) | 2014-10-06 | 2016-04-13 | Canon Kk | Method and apparatus for vector encoding in video coding and decoding |
US9918105B2 (en) | 2014-10-07 | 2018-03-13 | Qualcomm Incorporated | Intra BC and inter unification |
WO2016054765A1 (en) | 2014-10-08 | 2016-04-14 | Microsoft Technology Licensing, Llc | Adjustments to encoding and decoding when switching color spaces |
CN104301724B (zh) | 2014-10-17 | 2017-12-01 | 华为技术有限公司 | 视频处理方法、编码设备和解码设备 |
KR20170078682A (ko) | 2014-11-04 | 2017-07-07 | 삼성전자주식회사 | 에지 타입의 오프셋을 적용하는 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치 |
EP3217663A4 (en) | 2014-11-06 | 2018-02-14 | Samsung Electronics Co., Ltd. | Video encoding method and apparatus, and video decoding method and apparatus |
SG11201703454XA (en) | 2014-11-18 | 2017-06-29 | Mediatek Inc | Method of bi-prediction video coding based on motion vectors from uni-prediction and merge candidate |
US10382795B2 (en) | 2014-12-10 | 2019-08-13 | Mediatek Singapore Pte. Ltd. | Method of video coding using binary tree block partitioning |
CN107113443B (zh) | 2014-12-26 | 2020-04-28 | 索尼公司 | 影像处理设备和影像处理方法 |
JP6501532B2 (ja) | 2015-01-23 | 2019-04-17 | キヤノン株式会社 | 画像符号化装置、画像符号化方法及びプログラム |
US10230980B2 (en) | 2015-01-26 | 2019-03-12 | Qualcomm Incorporated | Overlapped motion compensation for video coding |
US11477477B2 (en) | 2015-01-26 | 2022-10-18 | Qualcomm Incorporated | Sub-prediction unit based advanced temporal motion vector prediction |
US10070130B2 (en) | 2015-01-30 | 2018-09-04 | Qualcomm Incorporated | Flexible partitioning of prediction units |
CN104702957B (zh) | 2015-02-28 | 2018-10-16 | 北京大学 | 运动矢量压缩方法和装置 |
US10958927B2 (en) | 2015-03-27 | 2021-03-23 | Qualcomm Incorporated | Motion information derivation mode determination in video coding |
CA2981916C (en) | 2015-04-13 | 2021-08-31 | Mediatek, Inc. | Methods of constrained intra block copy for reducing worst case bandwidth in video coding |
US10200713B2 (en) | 2015-05-11 | 2019-02-05 | Qualcomm Incorporated | Search region determination for inter coding within a particular picture of video data |
CN115086652A (zh) | 2015-06-05 | 2022-09-20 | 杜比实验室特许公司 | 图像编码和解码方法和图像解码设备 |
TWI816224B (zh) | 2015-06-08 | 2023-09-21 | 美商Vid衡器股份有限公司 | 視訊解碼或編碼方法及裝置 |
US20160360205A1 (en) | 2015-06-08 | 2016-12-08 | Industrial Technology Research Institute | Video encoding methods and systems using adaptive color transform |
US10887597B2 (en) | 2015-06-09 | 2021-01-05 | Qualcomm Incorporated | Systems and methods of determining illumination compensation parameters for video coding |
WO2016200100A1 (ko) | 2015-06-10 | 2016-12-15 | 삼성전자 주식회사 | 적응적 가중치 예측을 위한 신택스 시그널링을 이용하여 영상을 부호화 또는 복호화하는 방법 및 장치 |
WO2017008263A1 (en) | 2015-07-15 | 2017-01-19 | Mediatek Singapore Pte. Ltd. | Conditional binary tree block partitioning structure |
US10404992B2 (en) | 2015-07-27 | 2019-09-03 | Qualcomm Incorporated | Methods and systems of restricting bi-prediction in video coding |
AU2016299036B2 (en) | 2015-07-27 | 2019-11-21 | Hfi Innovation Inc. | Method of system for video coding using intra block copy mode |
CN105163116B (zh) | 2015-08-29 | 2018-07-31 | 华为技术有限公司 | 图像预测的方法及设备 |
EP3332551A4 (en) | 2015-09-02 | 2019-01-16 | MediaTek Inc. | METHOD AND APPARATUS FOR MOVEMENT COMPENSATION FOR VIDEO CODING BASED ON TECHNIQUES FOR OPERATIONAL RADIO RADIATION |
WO2017035831A1 (en) | 2015-09-06 | 2017-03-09 | Mediatek Inc. | Adaptive inter prediction |
KR20180041211A (ko) | 2015-09-10 | 2018-04-23 | 엘지전자 주식회사 | 인터-인트라 병합 예측 모드 기반 영상 처리 방법 및 이를 위한 장치 |
US10375413B2 (en) | 2015-09-28 | 2019-08-06 | Qualcomm Incorporated | Bi-directional optical flow for video coding |
WO2017069590A1 (ko) | 2015-10-22 | 2017-04-27 | 엘지전자 주식회사 | 영상 코딩 시스템에서 모델링 기반 영상 디코딩 방법 및 장치 |
US10412407B2 (en) | 2015-11-05 | 2019-09-10 | Mediatek Inc. | Method and apparatus of inter prediction using average motion vector for video coding |
WO2017082670A1 (ko) | 2015-11-12 | 2017-05-18 | 엘지전자 주식회사 | 영상 코딩 시스템에서 계수 유도 인트라 예측 방법 및 장치 |
KR20170058838A (ko) | 2015-11-19 | 2017-05-29 | 한국전자통신연구원 | 화면간 예측 향상을 위한 부호화/복호화 방법 및 장치 |
CN108293131B (zh) | 2015-11-20 | 2021-08-31 | 联发科技股份有限公司 | 基于优先级运动矢量预测子推导的方法及装置 |
WO2017088093A1 (en) | 2015-11-23 | 2017-06-01 | Mediatek Singapore Pte. Ltd. | On the smallest allowed block size in video coding |
US10268901B2 (en) | 2015-12-04 | 2019-04-23 | Texas Instruments Incorporated | Quasi-parametric optical flow estimation |
CN105578198B (zh) | 2015-12-14 | 2019-01-11 | 上海交通大学 | 基于时偏特征的视频同源Copy-Move检测方法 |
US9955186B2 (en) | 2016-01-11 | 2018-04-24 | Qualcomm Incorporated | Block size decision for video coding |
US10887619B2 (en) | 2016-02-03 | 2021-01-05 | Sharp Kabushiki Kaisha | Moving image decoding device, moving image coding device, and prediction image generation device |
CN108781294B (zh) | 2016-02-05 | 2021-08-31 | 联发科技股份有限公司 | 视频数据的运动补偿方法及装置 |
EP3414906A4 (en) | 2016-02-08 | 2019-10-02 | Sharp Kabushiki Kaisha | SYSTEMS AND METHOD FOR INTRAPRADICATION CODING |
US11405611B2 (en) | 2016-02-15 | 2022-08-02 | Qualcomm Incorporated | Predicting filter coefficients from fixed filters for video coding |
WO2017139937A1 (en) | 2016-02-18 | 2017-08-24 | Mediatek Singapore Pte. Ltd. | Advanced linear model prediction for chroma coding |
WO2017143467A1 (en) | 2016-02-22 | 2017-08-31 | Mediatek Singapore Pte. Ltd. | Localized luma mode prediction inheritance for chroma coding |
US11032550B2 (en) | 2016-02-25 | 2021-06-08 | Mediatek Inc. | Method and apparatus of video coding |
WO2017156669A1 (en) | 2016-03-14 | 2017-09-21 | Mediatek Singapore Pte. Ltd. | Methods for motion vector storage in video coding |
EP3456049B1 (en) | 2016-05-13 | 2022-05-04 | VID SCALE, Inc. | Systems and methods for generalized multi-hypothesis prediction for video coding |
US10560718B2 (en) | 2016-05-13 | 2020-02-11 | Qualcomm Incorporated | Merge candidates for motion vector prediction for video coding |
US10560712B2 (en) | 2016-05-16 | 2020-02-11 | Qualcomm Incorporated | Affine motion prediction for video coding |
US20170339405A1 (en) | 2016-05-20 | 2017-11-23 | Arris Enterprises Llc | System and method for intra coding |
KR20180040319A (ko) | 2016-10-12 | 2018-04-20 | 가온미디어 주식회사 | 영상 처리 방법, 그를 이용한 영상 복호화 및 부호화 방법 |
CN106028026B (zh) | 2016-05-27 | 2017-09-05 | 宁波大学 | 一种基于时空域结构的高效视频质量客观评价方法 |
EP3264769A1 (en) | 2016-06-30 | 2018-01-03 | Thomson Licensing | Method and apparatus for video coding with automatic motion information refinement |
EP3264768A1 (en) | 2016-06-30 | 2018-01-03 | Thomson Licensing | Method and apparatus for video coding with adaptive motion information refinement |
US11638027B2 (en) | 2016-08-08 | 2023-04-25 | Hfi Innovation, Inc. | Pattern-based motion vector derivation for video coding |
US10659802B2 (en) | 2016-08-15 | 2020-05-19 | Nokia Technologies Oy | Video encoding and decoding |
US10609423B2 (en) | 2016-09-07 | 2020-03-31 | Qualcomm Incorporated | Tree-type coding for video coding |
US10728572B2 (en) | 2016-09-11 | 2020-07-28 | Lg Electronics Inc. | Method and apparatus for processing video signal by using improved optical flow motion vector |
WO2018062892A1 (ko) | 2016-09-28 | 2018-04-05 | 엘지전자(주) | 가중치 인덱스에 기초하여 최적의 예측을 수행하는 방법 및 장치 |
US11356693B2 (en) | 2016-09-29 | 2022-06-07 | Qualcomm Incorporated | Motion vector coding for video coding |
EP3301920A1 (en) | 2016-09-30 | 2018-04-04 | Thomson Licensing | Method and apparatus for coding/decoding omnidirectional video |
EP3301918A1 (en) | 2016-10-03 | 2018-04-04 | Thomson Licensing | Method and apparatus for encoding and decoding motion information |
US10448010B2 (en) | 2016-10-05 | 2019-10-15 | Qualcomm Incorporated | Motion vector prediction for affine motion models in video coding |
WO2018092869A1 (ja) | 2016-11-21 | 2018-05-24 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 符号化装置、復号装置、符号化方法及び復号方法 |
US10674165B2 (en) | 2016-12-21 | 2020-06-02 | Arris Enterprises Llc | Constrained position dependent intra prediction combination (PDPC) |
US10666937B2 (en) * | 2016-12-21 | 2020-05-26 | Qualcomm Incorporated | Low-complexity sign prediction for video coding |
CN110115032B (zh) | 2016-12-22 | 2021-07-20 | 联发科技股份有限公司 | 用于视频编解码的运动细化的方法以及装置 |
US10911761B2 (en) | 2016-12-27 | 2021-02-02 | Mediatek Inc. | Method and apparatus of bilateral template MV refinement for video coding |
US20190387234A1 (en) | 2016-12-29 | 2019-12-19 | Peking University Shenzhen Graduate School | Encoding method, decoding method, encoder, and decoder |
US10931969B2 (en) | 2017-01-04 | 2021-02-23 | Qualcomm Incorporated | Motion vector reconstructions for bi-directional optical flow (BIO) |
EP3565245A4 (en) | 2017-01-04 | 2019-11-27 | Samsung Electronics Co., Ltd. | VIDEO CODING METHOD AND DEVICE AND VIDEO CODING METHOD AND DEVICE |
US20180199057A1 (en) | 2017-01-12 | 2018-07-12 | Mediatek Inc. | Method and Apparatus of Candidate Skipping for Predictor Refinement in Video Coding |
US10701366B2 (en) | 2017-02-21 | 2020-06-30 | Qualcomm Incorporated | Deriving motion vector information at a video decoder |
US10523964B2 (en) | 2017-03-13 | 2019-12-31 | Qualcomm Incorporated | Inter prediction refinement based on bi-directional optical flow (BIO) |
BR112019018922A8 (pt) | 2017-03-16 | 2023-02-07 | Mediatek Inc | Método e aparelho de refinamento de movimento com base em fluxo óptico bi-direcional para codificação de vídeo |
US11277635B2 (en) | 2017-03-17 | 2022-03-15 | Vid Scale, Inc. | Predictive coding for 360-degree video based on geometry padding |
US10595035B2 (en) | 2017-03-22 | 2020-03-17 | Qualcomm Incorporated | Constraining motion vector information derived by decoder-side motion vector derivation |
US10491917B2 (en) | 2017-03-22 | 2019-11-26 | Qualcomm Incorporated | Decoder-side motion vector derivation |
US11496747B2 (en) | 2017-03-22 | 2022-11-08 | Qualcomm Incorporated | Intra-prediction mode propagation |
CN117255197A (zh) | 2017-03-22 | 2023-12-19 | 韩国电子通信研究院 | 基于块形式的预测方法和装置 |
TW201902223A (zh) | 2017-03-24 | 2019-01-01 | 聯發科技股份有限公司 | 視頻編碼中重疊分塊運動補償的雙向光流的方法和裝置 |
US10805650B2 (en) | 2017-03-27 | 2020-10-13 | Qualcomm Incorporated | Signaling important video information in network video streaming using mime type parameters |
EP3383045A1 (en) | 2017-03-27 | 2018-10-03 | Thomson Licensing | Multiple splits prioritizing for fast encoding |
WO2018193968A1 (ja) | 2017-04-19 | 2018-10-25 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 符号化装置、復号装置、符号化方法及び復号方法 |
US20180310017A1 (en) | 2017-04-21 | 2018-10-25 | Mediatek Inc. | Sub-prediction unit temporal motion vector prediction (sub-pu tmvp) for video coding |
US10711644B2 (en) | 2017-04-24 | 2020-07-14 | Raytheon Technologies Corporation | Method and system to ensure full oil tubes after gas turbine engine shutdown |
KR102409430B1 (ko) | 2017-04-24 | 2022-06-15 | 에스케이텔레콤 주식회사 | 움직임 보상을 위한 옵티컬 플로우 추정 방법 및 장치 |
US10805630B2 (en) | 2017-04-28 | 2020-10-13 | Qualcomm Incorporated | Gradient based matching for motion search and derivation |
US10638126B2 (en) | 2017-05-05 | 2020-04-28 | Qualcomm Incorporated | Intra reference filter for video coding |
CN110574377B (zh) | 2017-05-10 | 2021-12-28 | 联发科技股份有限公司 | 用于视频编解码的重新排序运动向量预测候选集的方法及装置 |
KR102351029B1 (ko) | 2017-05-16 | 2022-01-13 | 엘지전자 주식회사 | 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치 |
CN117241044A (zh) | 2017-05-17 | 2023-12-15 | 株式会社Kt | 解码视频的方法和编码视频的方法 |
WO2018210315A1 (en) | 2017-05-18 | 2018-11-22 | Mediatek Inc. | Method and apparatus of motion vector constraint for video coding |
US10523934B2 (en) | 2017-05-31 | 2019-12-31 | Mediatek Inc. | Split based motion vector operation reduction |
US11190762B2 (en) | 2017-06-21 | 2021-11-30 | Lg Electronics, Inc. | Intra-prediction mode-based image processing method and apparatus therefor |
US20180376148A1 (en) | 2017-06-23 | 2018-12-27 | Qualcomm Incorporated | Combination of inter-prediction and intra-prediction in video coding |
US10904565B2 (en) | 2017-06-23 | 2021-01-26 | Qualcomm Incorporated | Memory-bandwidth-efficient design for bi-directional optical flow (BIO) |
US10477237B2 (en) | 2017-06-28 | 2019-11-12 | Futurewei Technologies, Inc. | Decoder side motion vector refinement in video coding |
CA3068393A1 (en) | 2017-06-30 | 2019-01-03 | Sharp Kabushiki Kaisha | Systems and methods for geometry-adaptive block partitioning of a picture into video blocks for video coding |
WO2019001741A1 (en) | 2017-06-30 | 2019-01-03 | Huawei Technologies Co., Ltd. | MOTION VECTOR REFINEMENT FOR MULTI-REFERENCE PREDICTION |
EP3649780A1 (en) | 2017-07-03 | 2020-05-13 | Vid Scale, Inc. | Motion-compensation prediction based on bi-directional optical flow |
EP3657789A4 (en) | 2017-07-17 | 2020-12-16 | Industry - University Cooperation Foundation Hanyang University | METHOD AND DEVICE FOR CODING / DECODING AN IMAGE |
CN107360419B (zh) | 2017-07-18 | 2019-09-24 | 成都图必优科技有限公司 | 一种基于透视模型的运动前视视频帧间预测编码方法 |
CN117499682A (zh) | 2017-09-20 | 2024-02-02 | 韩国电子通信研究院 | 用于对图像进行编码/解码的方法和装置 |
US10785494B2 (en) | 2017-10-11 | 2020-09-22 | Qualcomm Incorporated | Low-complexity design for FRUC |
US10986360B2 (en) | 2017-10-16 | 2021-04-20 | Qualcomm Incorproated | Various improvements to FRUC template matching |
CN117176958A (zh) | 2017-11-28 | 2023-12-05 | Lx 半导体科技有限公司 | 图像编码/解码方法、图像数据的传输方法和存储介质 |
CN107896330B (zh) | 2017-11-29 | 2019-08-13 | 北京大学深圳研究生院 | 一种用于帧内和帧间预测的滤波方法 |
US11057640B2 (en) | 2017-11-30 | 2021-07-06 | Lg Electronics Inc. | Image decoding method and apparatus based on inter-prediction in image coding system |
CN107995489A (zh) | 2017-12-20 | 2018-05-04 | 北京大学深圳研究生院 | 一种用于p帧或b帧的帧内帧间组合预测方法 |
US11277609B2 (en) | 2017-12-29 | 2022-03-15 | Sharp Kabushiki Kaisha | Systems and methods for partitioning video blocks for video coding |
KR20200096550A (ko) * | 2018-01-02 | 2020-08-12 | 삼성전자주식회사 | 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치 |
US11172229B2 (en) | 2018-01-12 | 2021-11-09 | Qualcomm Incorporated | Affine motion compensation with low bandwidth |
EP3741115A1 (en) | 2018-01-16 | 2020-11-25 | Vid Scale, Inc. | Motion compensated bi-prediction based on local illumination compensation |
US11265551B2 (en) | 2018-01-18 | 2022-03-01 | Qualcomm Incorporated | Decoder-side motion vector derivation |
US11310526B2 (en) | 2018-01-26 | 2022-04-19 | Mediatek Inc. | Hardware friendly constrained motion vector refinement |
WO2019151257A1 (en) | 2018-01-30 | 2019-08-08 | Sharp Kabushiki Kaisha | Systems and methods for deriving quantization parameters for video blocks in video coding |
KR102551363B1 (ko) | 2018-02-28 | 2023-07-04 | 삼성전자주식회사 | 부호화 방법 및 그 장치, 복호화 방법 및 그 장치 |
US20190306502A1 (en) | 2018-04-02 | 2019-10-03 | Qualcomm Incorporated | System and method for improved adaptive loop filtering |
US11381834B2 (en) | 2018-04-02 | 2022-07-05 | Hfi Innovation Inc. | Video processing methods and apparatuses for sub-block motion compensation in video coding systems |
US10779002B2 (en) | 2018-04-17 | 2020-09-15 | Qualcomm Incorporated | Limitation of the MVP derivation based on decoder-side motion vector derivation |
WO2019229683A1 (en) | 2018-05-31 | 2019-12-05 | Beijing Bytedance Network Technology Co., Ltd. | Concept of interweaved prediction |
WO2019234613A1 (en) | 2018-06-05 | 2019-12-12 | Beijing Bytedance Network Technology Co., Ltd. | Partition tree with partition into 3 sub-blocks by horizontal and vertical splits |
WO2019234676A1 (en) | 2018-06-07 | 2019-12-12 | Beijing Bytedance Network Technology Co., Ltd. | Mv precision refine |
TWI725456B (zh) | 2018-06-21 | 2021-04-21 | 大陸商北京字節跳動網絡技術有限公司 | 交錯區塊的自動劃分 |
TWI739120B (zh) | 2018-06-21 | 2021-09-11 | 大陸商北京字節跳動網絡技術有限公司 | 合併仿射模式與非合併仿射模式的統一拘束 |
CN113115046A (zh) | 2018-06-21 | 2021-07-13 | 北京字节跳动网络技术有限公司 | 分量相关的子块分割 |
AU2019295574B2 (en) | 2018-06-27 | 2023-01-12 | Vid Scale, Inc. | Methods and apparatus for reducing the coding latency of decoder-side motion refinement |
KR102648120B1 (ko) | 2018-06-29 | 2024-03-18 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 슬라이스/타일/lcu 행마다의 룩업 테이블 리셋 |
TWI731363B (zh) | 2018-07-01 | 2021-06-21 | 大陸商北京字節跳動網絡技術有限公司 | 高效的仿射Merge運動向量推導 |
TWI719519B (zh) | 2018-07-02 | 2021-02-21 | 大陸商北京字節跳動網絡技術有限公司 | 對於dmvr的塊尺寸限制 |
US10911768B2 (en) | 2018-07-11 | 2021-02-02 | Tencent America LLC | Constraint for template matching in decoder side motion derivation and refinement |
CN117294852A (zh) | 2018-07-15 | 2023-12-26 | 北京字节跳动网络技术有限公司 | 跨分量编解码顺序导出 |
US11516490B2 (en) | 2018-07-16 | 2022-11-29 | Lg Electronics Inc. | Method and device for inter predicting on basis of DMVR |
US10911751B2 (en) | 2018-09-14 | 2021-02-02 | Tencent America LLC | Method and apparatus for video coding |
IL280611B1 (en) * | 2018-09-17 | 2024-04-01 | Samsung Electronics Co Ltd | A method for encoding and decoding traffic information and a device for encoding and decoding traffic information |
CN110944193B (zh) | 2018-09-24 | 2023-08-11 | 北京字节跳动网络技术有限公司 | 视频编码和解码中的加权双向预测 |
WO2020070612A1 (en) | 2018-10-06 | 2020-04-09 | Beijing Bytedance Network Technology Co., Ltd. | Improvement for temporal gradient calculating in bio |
CN112889289A (zh) * | 2018-10-10 | 2021-06-01 | 三星电子株式会社 | 通过使用运动矢量差分值对视频进行编码和解码的方法以及用于对运动信息进行编码和解码的设备 |
US11516507B2 (en) | 2018-10-12 | 2022-11-29 | Intellectual Discovery Co., Ltd. | Image encoding/decoding methods and apparatuses |
WO2020084476A1 (en) | 2018-10-22 | 2020-04-30 | Beijing Bytedance Network Technology Co., Ltd. | Sub-block based prediction |
CN112913240A (zh) | 2018-10-22 | 2021-06-04 | 北京字节跳动网络技术有限公司 | 解码器侧运动矢量推导和其他编解码工具之间的并置 |
WO2020084461A1 (en) | 2018-10-22 | 2020-04-30 | Beijing Bytedance Network Technology Co., Ltd. | Restrictions on decoder side motion vector derivation based on coding information |
WO2020084474A1 (en) | 2018-10-22 | 2020-04-30 | Beijing Bytedance Network Technology Co., Ltd. | Gradient computation in bi-directional optical flow |
CN109191514B (zh) | 2018-10-23 | 2020-11-24 | 北京字节跳动网络技术有限公司 | 用于生成深度检测模型的方法和装置 |
JP7231727B2 (ja) | 2018-11-05 | 2023-03-01 | 北京字節跳動網絡技術有限公司 | 精緻化を伴うインター予測のための補間 |
WO2020094049A1 (en) | 2018-11-06 | 2020-05-14 | Beijing Bytedance Network Technology Co., Ltd. | Extensions of inter prediction with geometric partitioning |
CN113329224B (zh) | 2018-11-08 | 2022-12-16 | Oppo广东移动通信有限公司 | 视频信号编码/解码方法以及用于所述方法的设备 |
EP3881541A1 (en) | 2018-11-12 | 2021-09-22 | InterDigital VC Holdings, Inc. | Virtual pipeline for video encoding and decoding |
WO2020098647A1 (en) * | 2018-11-12 | 2020-05-22 | Beijing Bytedance Network Technology Co., Ltd. | Bandwidth control methods for affine prediction |
KR20210089149A (ko) | 2018-11-16 | 2021-07-15 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 인터 및 인트라 통합 예측 모드 가중치 |
WO2020098810A1 (en) * | 2018-11-17 | 2020-05-22 | Beijing Bytedance Network Technology Co., Ltd. | Merge with motion vector difference in video processing |
CN113170097B (zh) | 2018-11-20 | 2024-04-09 | 北京字节跳动网络技术有限公司 | 视频编解码模式的编解码和解码 |
CN113056914B (zh) * | 2018-11-20 | 2024-03-01 | 北京字节跳动网络技术有限公司 | 基于部分位置的差计算 |
EP3657794A1 (en) * | 2018-11-21 | 2020-05-27 | InterDigital VC Holdings, Inc. | Method and device for picture encoding and decoding |
CN111294590A (zh) | 2018-12-06 | 2020-06-16 | 华为技术有限公司 | 用于多假设编码的加权预测方法及装置 |
EP3871415A4 (en) | 2018-12-07 | 2022-04-13 | Beijing Bytedance Network Technology Co., Ltd. | CONTEXT-BASED INTRAPREDICTION |
CN111010581B (zh) | 2018-12-07 | 2022-08-12 | 北京达佳互联信息技术有限公司 | 运动矢量信息的处理方法、装置、电子设备及存储介质 |
US11546632B2 (en) | 2018-12-19 | 2023-01-03 | Lg Electronics Inc. | Method and device for processing video signal by using intra-prediction |
US10855992B2 (en) | 2018-12-20 | 2020-12-01 | Alibaba Group Holding Limited | On block level bi-prediction with weighted averaging |
JPWO2020137920A1 (ja) | 2018-12-27 | 2021-11-18 | シャープ株式会社 | 予測画像生成装置、動画像復号装置、動画像符号化装置および予測画像生成方法 |
WO2020140874A1 (en) | 2019-01-02 | 2020-07-09 | Huawei Technologies Co., Ltd. | A hardware and software friendly system and method for decoder-side motion vector refinement with decoder-side bi-predictive optical flow based per-pixel correction to bi-predictive motion compensation |
CN113613019B (zh) | 2019-01-06 | 2022-06-07 | 北京达佳互联信息技术有限公司 | 视频解码方法、计算设备和介质 |
MX2021008449A (es) | 2019-01-15 | 2021-11-03 | Rosedale Dynamics Llc | Metodo y dispositivo de codificacion de imagen usando bandera de salto de transformacion. |
CN113302918A (zh) * | 2019-01-15 | 2021-08-24 | 北京字节跳动网络技术有限公司 | 视频编解码中的加权预测 |
US10958904B2 (en) | 2019-02-01 | 2021-03-23 | Tencent America LLC | Method and apparatus for video coding |
WO2020167097A1 (ko) | 2019-02-15 | 2020-08-20 | 엘지전자 주식회사 | 영상 코딩 시스템에서 인터 예측을 위한 인터 예측 타입 도출 |
US11178414B2 (en) * | 2019-02-27 | 2021-11-16 | Mediatek Inc. | Classification for multiple merge tools |
JP2022521554A (ja) | 2019-03-06 | 2022-04-08 | 北京字節跳動網絡技術有限公司 | 変換された片予測候補の利用 |
CN113632484A (zh) | 2019-03-15 | 2021-11-09 | 北京达佳互联信息技术有限公司 | 用于双向光流的比特宽度控制的方法和设备 |
JP7307192B2 (ja) | 2019-04-02 | 2023-07-11 | 北京字節跳動網絡技術有限公司 | デコーダ側の動きベクトルの導出 |
AU2020298425A1 (en) | 2019-06-21 | 2021-12-23 | Panasonic Intellectual Property Corporation Of America | Encoder, decoder, encoding method, and decoding method |
US11330287B2 (en) * | 2019-06-28 | 2022-05-10 | Tencent America LLC | Method and apparatus for video coding |
US11272203B2 (en) * | 2019-07-23 | 2022-03-08 | Tencent America LLC | Method and apparatus for video coding |
CN110267045B (zh) | 2019-08-07 | 2021-09-24 | 杭州微帧信息科技有限公司 | 一种视频处理及编码的方法、装置及可读存储介质 |
WO2021058033A1 (en) | 2019-09-29 | 2021-04-01 | Mediatek Inc. | Method and apparatus of combined inter and intra prediction with different chroma formats for video coding |
US11405628B2 (en) * | 2020-04-06 | 2022-08-02 | Tencent America LLC | Method and apparatus for video coding |
-
2019
- 2019-11-20 CN CN201980075985.5A patent/CN113056914B/zh active Active
- 2019-11-20 KR KR1020217014345A patent/KR20210091161A/ko active Search and Examination
- 2019-11-20 WO PCT/CN2019/119634 patent/WO2020103852A1/en unknown
- 2019-11-20 CN CN202311518864.8A patent/CN117319644A/zh active Pending
- 2019-11-20 EP EP19887639.3A patent/EP3861742A4/en active Pending
- 2019-11-20 JP JP2021525770A patent/JP7241870B2/ja active Active
-
2021
- 2021-01-21 US US17/154,485 patent/US20210144400A1/en not_active Abandoned
- 2021-11-24 US US17/534,968 patent/US11956465B2/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020186119A1 (en) | 2019-03-12 | 2020-09-17 | Beijing Dajia Internet Information Technology Co., Ltd. | Constrained and adjusted applications of combined inter- and intra-prediction mode |
Non-Patent Citations (3)
Title |
---|
Benjamin Bross, Jianle Chen, and Shan Liu,Versatile Video Coding (Draft 7),Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11,JVET-P2001-vE (version 14),16th Meeting: Geneva, CH,2019年11月14日,pp.156-158,209-213,232-238,263-266,283-286 |
Semih Esenlik, et al.,CE9: DMVR with Bilateral Matching (Test2.9),Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11,JVET-K0217_v1,11th Meeting: Ljubljana, SI,2018年07月,pp.1-5 |
Xiaoyu Xiu, et al.,CE10-related: Simplification on combined inter and intra prediction (CIIP),Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11,JVET-N0327_r1,14th Meeting: Geneva, CH,2019年03月,pp.1-5 |
Also Published As
Publication number | Publication date |
---|---|
US20220086481A1 (en) | 2022-03-17 |
CN113056914B (zh) | 2024-03-01 |
CN117319644A (zh) | 2023-12-29 |
US20210144400A1 (en) | 2021-05-13 |
EP3861742A1 (en) | 2021-08-11 |
CN113056914A (zh) | 2021-06-29 |
JP2022507281A (ja) | 2022-01-18 |
EP3861742A4 (en) | 2022-04-13 |
KR20210091161A (ko) | 2021-07-21 |
US11956465B2 (en) | 2024-04-09 |
WO2020103852A1 (en) | 2020-05-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7241870B2 (ja) | 部分的な位置に基づく差分計算 | |
US11889108B2 (en) | Gradient computation in bi-directional optical flow | |
TWI736907B (zh) | 改進的模式匹配的運動向量推導 | |
WO2020147747A1 (en) | Weighted prediction in video coding | |
US11641467B2 (en) | Sub-block based prediction | |
WO2020084507A1 (en) | Harmonized local illumination compensation and modified inter prediction coding | |
WO2020147745A1 (en) | Motion candidate lists that use local illumination compensation | |
WO2020084509A1 (en) | Harmonized local illumination compensation and modified inter coding tools | |
WO2019234578A1 (en) | Asymmetric weighted bi-predictive merges | |
WO2020177684A1 (en) | Enabling dmvr based on the information in the picture header | |
CN113796084B (zh) | 运动矢量和预测样点细化 | |
WO2020233600A1 (en) | Simplified local illumination compensation | |
WO2020049447A1 (en) | Fast encoding methods for interweaved prediction |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210512 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210512 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220510 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220805 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20220830 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221227 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20221227 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20230111 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20230117 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230207 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230307 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7241870 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |