JP7431253B2 - 動き情報精緻化のサブ領域に基づいた決定 - Google Patents
動き情報精緻化のサブ領域に基づいた決定 Download PDFInfo
- Publication number
- JP7431253B2 JP7431253B2 JP2021564118A JP2021564118A JP7431253B2 JP 7431253 B2 JP7431253 B2 JP 7431253B2 JP 2021564118 A JP2021564118 A JP 2021564118A JP 2021564118 A JP2021564118 A JP 2021564118A JP 7431253 B2 JP7431253 B2 JP 7431253B2
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- video
- video block
- mvd
- block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 claims description 659
- 239000013598 vector Substances 0.000 claims description 322
- 238000012545 processing Methods 0.000 claims description 113
- 230000003287 optical effect Effects 0.000 claims description 87
- 230000009466 transformation Effects 0.000 claims description 82
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 claims description 47
- 230000015654 memory Effects 0.000 claims description 14
- 239000000523 sample Substances 0.000 description 88
- 230000006870 function Effects 0.000 description 44
- 230000008569 process Effects 0.000 description 44
- 238000006243 chemical reaction Methods 0.000 description 32
- 238000005516 engineering process Methods 0.000 description 32
- 238000009795 derivation Methods 0.000 description 31
- 230000002457 bidirectional effect Effects 0.000 description 30
- 230000002123 temporal effect Effects 0.000 description 22
- 241000023320 Luma <angiosperm> Species 0.000 description 20
- 230000002146 bilateral effect Effects 0.000 description 20
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 20
- 238000003672 processing method Methods 0.000 description 18
- 238000004590 computer program Methods 0.000 description 15
- 238000004364 calculation method Methods 0.000 description 14
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 13
- 101150052863 THY1 gene Proteins 0.000 description 9
- 230000003044 adaptive effect Effects 0.000 description 7
- 239000013074 reference sample Substances 0.000 description 7
- 238000007670 refining Methods 0.000 description 6
- 101100537098 Mus musculus Alyref gene Proteins 0.000 description 5
- 101150095908 apex1 gene Proteins 0.000 description 5
- 239000011449 brick Substances 0.000 description 5
- 230000008859 change Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 101001036283 Xenopus laevis DNA-binding protein inhibitor ID-3-A Proteins 0.000 description 4
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000012217 deletion Methods 0.000 description 4
- 230000037430 deletion Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- QNRATNLHPGXHMA-XZHTYLCXSA-N (r)-(6-ethoxyquinolin-4-yl)-[(2s,4s,5r)-5-ethyl-1-azabicyclo[2.2.2]octan-2-yl]methanol;hydrochloride Chemical compound Cl.C([C@H]([C@H](C1)CC)C2)CN1[C@@H]2[C@H](O)C1=CC=NC2=CC=C(OCC)C=C21 QNRATNLHPGXHMA-XZHTYLCXSA-N 0.000 description 3
- 238000003491 array Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000006399 behavior Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 230000011664 signaling Effects 0.000 description 2
- 241000723655 Cowpea mosaic virus Species 0.000 description 1
- 101100520660 Drosophila melanogaster Poc1 gene Proteins 0.000 description 1
- 201000010273 Porphyria Cutanea Tarda Diseases 0.000 description 1
- 101100520662 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) PBA1 gene Proteins 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- MKXZASYAUGDDCJ-NJAFHUGGSA-N dextromethorphan Chemical compound C([C@@H]12)CCC[C@]11CCN(C)[C@H]2CC2=CC=C(OC)C=C21 MKXZASYAUGDDCJ-NJAFHUGGSA-N 0.000 description 1
- 229910003460 diamond Inorganic materials 0.000 description 1
- 239000010432 diamond Substances 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- NUSQOFAKCBLANB-UHFFFAOYSA-N phthalocyanine tetrasulfonic acid Chemical compound C12=CC(S(=O)(=O)O)=CC=C2C(N=C2NC(C3=CC=C(C=C32)S(O)(=O)=O)=N2)=NC1=NC([C]1C=CC(=CC1=1)S(O)(=O)=O)=NC=1N=C1[C]3C=CC(S(O)(=O)=O)=CC3=C2N1 NUSQOFAKCBLANB-UHFFFAOYSA-N 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
- H04N19/52—Processing of motion vectors by encoding by predictive encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/537—Motion estimation other than block-based
- H04N19/543—Motion estimation other than block-based using regions
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Image Analysis (AREA)
Description
本願は、2020年5月18日付けで出願された国際特許出願第PCT/CN2020/090802号の国内段階であり、上記の国際特許出願は、2019年5月16日付けで出願された国際特許出願第PCT/CN2019/0871937号、2019年6月4日付けで出願された国際特許出願第PCT/CN2019/090037号、2019年6月12日付けで出願された国際特許出願第PCT/CN2019/090903号、2019年6月28日付けで出願された国際特許出願第PCT/CN2019/093616号、2019年6月29日付けで出願された国際特許出願第PCT/CN2019/093973号、2019年7月1日付けで出願された国際特許出願第PCT/CN2019/094282号、2019年9月5日付けで出願された国際特許出願第PCT/CN2019/104489号、及び2019年11月8日付けで出願された国際特許出願第PCT/CN2019/116757号に対する優先権及びその利益を適時請求するようになされる。上記の出願の全体の開示は、本願の開示の部分として参照により援用される。
本特許文献は、ビデオ処理技術、デバイス、及びシステムに関する。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、少なくとも1つの動きベクトルオフセットが前記現在のビデオブロック内の領域について導出されるオプティカルフローに基づいた方法を用いて前記現在のビデオブロックの動き情報が精緻化されることを決定するステップと、
N及びNが規則に基づいた整数であるとして、前記少なくとも1つの動きベクトルオフセットを範囲[-N,M]にクリップするステップと、
前記少なくとも1つの動きベクトルオフセットに基づき前記変換を実行するステップと
を有する方法を提供するために使用されてよい。
動き情報を精緻化するために使用されるデコーダ側動きベクトル精緻化(DMVR)動作中に、精緻化された動きベクトルとして、ビデオの現在のビデオブロックと関連した1つ以上の動きベクトル差分を用いて類似度一致関数を適用した結果に等しい動き情報を選択するステップと、
前記精緻化された動きベクトルを用いて、前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を有する方法を提供するために使用されてよい。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、前記現在のビデオブロックと関連した動き情報を導出するステップと、
規則に従って、第1サブ領域及び第2サブ領域を含む前記現在のビデオブロックに精緻化動作を適用するステップであり、前記規則は、前記第1サブ領域及び前記第2サブ領域が、前記精緻化動作により互いに異なった動き情報を有することを許す、前記適用するステップと、
前記現在のビデオブロックの精緻化された動き情報を用いて前記変換を実行するステップと
を含む。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、前記現在のビデオブロックと関連した動き情報を導出するステップと、
前記現在のビデオブロックのサブ領域について、前記動き情報を精緻化するために使用されたデコーダ側動きベクトル精緻化(DMVR)の出力に基づき、双方向オプティカルフロー(BIO)を用いた精緻化動作の適用可能性を決定するステップと、
前記決定に基づき前記変換を実行するステップと
を含む。
2つの動き候補間の距離を定める距離テーブルを含む動きベクトル表現を含む動きベクトル差分によるマージモード(MMVD)でコーディングされた現在のビデオブロックと関連した動き情報を導出するステップと、
前記MMVDのために使用された距離をどのように精緻化すべきかを指定する規則に従って前記動き情報を精緻化するよう、デコーダ側動きベクトル精緻化(DMVR)を前記現在のビデオブロックに適用するステップと、
前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を含む。
ビデオの現在のビデオブロックのサンプル又はサブブロックについて、規則に従って、導出された動き情報に基づき、該導出された動き情報が空間及び/又は時間勾配を用いて精緻化される双方向オプティカルフロー(BDOF)の適用可能性を決定するステップと
前記決定に基づき、前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を有含む。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、動きベクトル差分(MVD)を導出するステップと、
クリップされた動きベクトル差分を生成するよう、導出された前記動きベクトル差分にクリッピング動作を適用するステップと、
コスト関数を用いて、前記クリップされた動きベクトル差分のコストを計算するステップと、
規則に従って、前記導出された動きベクトル差分、前記クリップされた動きベクトル差分、又は前記コストのうちの少なくとも1つに基づき、前記導出された動きベクトル差分が空間及び/又は時間勾配を用いて精緻化される双方向オプティカルフロー(BDOF)動作を許されないと決定するステップと、
前記決定に基づき前記変換を実行するステップと
を有含む。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、動きベクトル差分を導出するステップと、
1つ以上の動きベクトル精緻化ツール及び候補動きベクトル差分(MVD)に基づき、導出された前記動きベクトル差分を精緻化するステップと、
精緻化された前記動きベクトル差分を用いて前記変換を実行するステップと
を含む。
ビデオの現在のビデオブロックと関連した導出された動きベクトル差分を候補セットに制限するステップであり、前記導出された動きベクトル差分は、前記現在のビデオブロックと関連した動き情報を精緻化する精緻化動作のために使用される、前記制限するステップと、
前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を、前記制限するステップの結果として前記導出された動きベクトル差分を用いて実行するステップと
を含む。
ビデオのビデオユニットの現在のビデオブロックと関連した動き情報を精緻化するために使用される双方向オプティカルフロー(BDOF)動作の間に、規則に従って前記ビデオユニット及び/又は前記ビデオユニットでのコーディングツールの利用に基づき決定されるクリッピングパラメータの組を用いてクリッピング動作を適用するステップと、
前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を含む。
ビデオの現在のビデオブロックと関連した動き情報を精緻化するために使用される精緻化動作の間に、動きベクトル差分(vx,vy)のx成分及び/又はy成分をクリップするよう規則に従ってクリッピング動作を適用するステップと、
前記動きベクトル差分を用いて前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を含み、
前記規則は、前記クリッピング動作の前又は後に、前記動きベクトル差分をゼロ又はKmの形を取る値に変換することを定め、mは整数である。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、規則に従ってデコーダ側動き導出動作又はデコーダ側動き精緻化動作の間に動き情報を導出又は精緻化するために使用される探索領域を選択するステップと、
導出又は精緻化された前記動き情報に基づき前記変換を実行するステップと
を含む。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、最良一致の整数位置を含む精緻化で使用された探索領域を使用することによって前記現在のビデオブロックと関連した動きベクトル差分を精緻化するようデコーダ側動きベクトル精緻化(DMVR)動作を適用するステップと、
精緻化された前記動きベクトル差分を用いて前記変換を実行するステップと
を含み、
前記DMVR動作の適用は、規則に従ってサブペル動きベクトル差分(MVD)を導出することを含む。
ビデオのビデオユニットの現在のビデオブロックについて、前記現在のビデオブロックと関連した動きベクトル差分を精緻化するようデコーダ側動きベクトル精緻化(DMVR)動作を適用するステップと、
精緻化された前記動きベクトル差分を用いて、前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を含み、
前記DMVR動作の適用は、前記ビデオユニットに対する双方向オプティカルフロー(BDOF)の使用に応じてサブペル動きベクトル差分(MVD)導出を許すか又は許さないと決定することを含む。
オプティカルフローを用いた精緻化動作の間に、ビデオの現在のビデオブロックの第1サンプルの動きベクトル差分を導出するステップと、
前記第1サンプルの導出された前記動きベクトル差分に基づき、第2サンプルの動きベクトル差分を決定するステップと、
前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を前記決定に基づき実行するステップと
を含む。
双方向オプティカルフロー(BDOF)動作を用いた精緻化動作ビデオの現在のビデオブロックに適用することによって、予測精緻化サンプルを導出するステップと、
M及びNが整数であるとして、規則に従って、導出された前記予測精緻化サンプルを所定範囲[-M,N]にクリップするクリッピング動作の適用可能性を決定するステップと、
前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
含む。
第1コーディンググループ及び第2コーディンググループが規則に従って整列されるように、異なる残差コーディングモードを用いてコーディングされている前記第1コーディンググループ及び前記第2コーディンググループを含む、ビデオの現在のビデオブロックについて、コーディンググループサイズを決定するステップと、
前記決定に基づき前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を含む。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、前記現在のビデオブロックと関連したコーディングされた情報及び/又はデコードされた情報に基づき、動き情報がオプティカルフローを用いて精緻化される予測精緻化オプティカルフロー(PROF)ツールの適用可能性を決定するステップと、
前記決定に基づき前記変換を実行するステップと
を含む。
パターンマッチングされた動きベクトル導出(pattern matched motion vector derivation,PMMVD)モードは、フレームレートアップコンバージョン(Frame-Rate Up Conversion,FRUC)技術に基づいた特別なマージモードである。このモードによれば、ブロックの動き情報はシグナリングされないが、デコーダ側で導出される。
CUレベルでのMV候補セットは、
i)現在CUがAMVPモードにある場合に、元のAMVP候補、
ii)全てのマージ候補、
iii)セクション2.1.1.3で紹介されている、補間されたMV場でのいくつかのMV、
iv)上及び左隣の動きベクトル
から成る。
サブCUレベルでのMV候補セットは、
i)CUレベル探索から決定されたMV、
ii)上、左、左上、及び右上の隣接MV、
iii)参照ピクチャからの同一位置MVのスケーリングされたバージョン
iv)最大4つのATMVP候補、
v)最大4つのSTMVP候補
から成る。
フレームをコーディングする前に、補間された動き場が、ユニラテラルMEに基づきピクチャ全体について生成される。次いで、動き場は、CUレベル又はサブCUレベルMV候補として後に使用されてもよい。
動きベクトルが分数サンプル位置を指し示す場合に、動き補償された補間が必要とされる。複雑さを提言するために、正則8タップHEVC補間の代わりに、双線形補間が、バイラテラルマッチング及びテンプレートマッチングの両方のために使用される。
MV精緻化は、バイラテラルマッチングコスト又はテンプレートマッチングコストの基準による、パターンに基づいたMV探索である。JEMでは、2つの探索パターンがサポートされている。夫々CUレベル及びサブCUレベルでのMV精緻化のためのUCBDS(unrestricted center-biased diamond search)及び適応交差探索(adaptive cross search)である。CU及びサブCUの両方のレベルのMV精緻化のために、MVは、4分の1ルーマサンプルMV精度で直接に探索され、この後に、8分の1ルーマサンプルMV精緻化が続く。CU及びサブCUステップのMV精緻化の探索範囲は、8ルーマサンプルに等しくセットされる。
バイラテラルマッチングマージモードでは、2つの異なった参照ピクチャにおける現在CUの運動軌跡に沿った2つのブロック間の最も近い一致に基づきCUの動き情報が導出されるということで、双予測が常に適用される。テンプレートマッチングマージモードにはそのような制限はない。テンプレートマッチングマージモードでは、エンコーダは、CUのためにリスト0からの片予測、リスト1からの片予測、又は双予測から選択することができる。選択は、次のように、テンプレートマッチングコストに基づく:
costBi<=factor×min(cost0,cost1)の場合には、
双予測が使用される;
そうではなく、cost0<=cost1である場合には、
リスト0からの片予測が使用される;
それ以外の場合には、
リスト1からの片予測が使用される。
JVET-L0100では、多重仮説(multi-hypothesis)予測が提案されており、イントラ及びインターの複合予測は、多重仮説を生成するための1つの方法である。
BIOは、BDOF(Bi Directional Optical Flow)としても知られている。BIOでは、最初に、現在のブロックの(各予測方向での)最初の予測を生成するために、動き補償が実行される。最初の予測は、ブロック内の各サブブロック/ピクセルの空間勾配、時間勾配、及びオプティカルフローを導出するために使用され、これらは次いで、第2の予測、すなわち、サブブロック/ピクセルの最終的な予測を生成するために使用される。詳細は、次のように記載される。
τ0=POC(現在)-POC(Ref0)
τ1=POC(Ref1)-POC(現在)
両方の予測が同じ時間方向から来る(両方が過去から来るか、又は両方が未来から来るかのどちらかである)場合、符号は異なる(すなわち、τ0・τ1<0)。この場合に、BIOは、予測が同じ時点からでなく(すなわち、τ0≠τ1)、両方の参照される領域が非ゼロ運動を有し(MVx0,MVy0,MVx1,Mvy1≠0)、ブロック動きベクトルが時間距離に比例する(MVx0/MVx1=MVy0/Mvy1=-τ0/τ1)場合にのみ適用される。
r=500・4d-8 (10)
m=700・4d-8 (11)
ここで、dは、ビデオサンプルのビットデプスである。
(JVET-N1001-v2における)BDOFの仕様は、次の通りである:
8.5.7.4 双方向オプティカルフロー予測プロセス
このプロセスへの入力は:
・現在のコーディングブロックの幅及び高さを指定する2つの変数nCbW及びnCbH、
・2つの(nCbW+2)×(nCbH+2)のルーマ予測サンプルアレイpredSamplesL0及びpredSamplesL1、
・予測リスト利用フラグpredFlagL0及びpredFlagL1、
・参照インデックスrefIdxL0及びrefIdxL1、
・xIdx=0..(nCbW>>2)-1、yIdx=0..(nCbH>>2)-1として、双方向オプティカルフロー利用フラグbdofUtilizationFlag[xIdx][yIdx]
である。
このプロセスの出力は、ルーマ予測サンプルアレイの(nCbW)×(nCbH)アレイpbSamplesである。
変数bitDepth、shift1、shift2、shift3、shift4、offset4、及びmvRefineThresは、次のように導出される:
・変数bitDepthは、BitDepthYに等しくセットされる。
・変数shift1は、Max(2,14-bitDepth)に等しくセットされる。
・変数shift2は、Max(8,bitDepth-4)に等しくセットされる。
・変数shift3は、Max(5,bitDepth-7)に等しくセットされる。
・変数shift4は、Max(3,15-bitDepth)に等しくセットされ、変数offset4は、1<<(shift4-1)に等しくセットされる。
・変数mvRefineThresは、Max(2,1<<(13-bitDepth))に等しくセットされる。
xIdx=0..(nCbW>>2)-1、yIdx=0..(nCbH>>2)-1については、次が当てはまる:
・変数xSbは、(xIdx<<2)+1に等しくセットされ、ySbは、(yIdx<<2)+1に等しくセットされる。
・bdofUtilizationFlag[xSbIdx][yIdx]が偽に等しい場合には、x=xSb-1..xSb+2、y=ySb-1..ySb+2については、現在のブロックの予測サンプル値は、次のように導出される:
・x=xSb-1..xSb+4、y=ySb-1..ySb+4については、次の順序づけられたステップが適用される:
1.予測サンプルアレイ内の対応するサンプル位置(x,y)の夫々についての位置(hx,vy)は、次のように導出される:
hx=Clip3(1,nCbW,x) (8-853)
vy=Clip3(1,nCbH,y) (8-854)
2.変数gradientHL0[x][y]、gradientVL0[x][y]、gradientHL1[x][y]及びgradientVL1[x][y]は、次のように導出される:
双予測動作では、1つのブロックの領域の予測のために、リスト0の動きベクトル(MV)及びリスト1のMVを用いて夫々形成された2つの予測ブロックが、単一の予測信号を形成するよう結合される。JVET-K0217では、デコーダ側動きベクトル精緻化(Decoder-side Motion Vector Refinement,DMVR)法では、双予測の2つの動きベクトルは、バイラテラルマッチングプロセスによって更に精緻化される。
(POC-POC0)×(POC-POC1)<0
ここで、POCは、エンコードされるべき現在のピクチャのピクチャオーダーカウント(picture order count)であり、POC0及びPOC1は、現在のピクチャのための参照のピクチャオーダーカウントである。
如何なるポイントも、次の2つの式に従う:
MV0’=MV0+MVdiff
MV1’=MV1-MVdiff
ここで、MVdiffは、参照ピクチャの1つにおける探索空間内のポイントを表す。
参照サンプルパディングは、初期動きベクトルによって指し示される参照サンプルブロックを広げるために適用される。コーディングブロックのサイズが“w”及び“h”によって与えられる場合に、サイズw+7及びh+7のブロックが参照ピクチャバッファから読み出されると仮定される。読み出されたバッファは、次いで、最も近いサンプルを用いて反復的なサンプルパディングによって各方向で2サンプルずつ広げられる。その後に、広げられた参照サンプルブロックは、精緻化された動きベクトルが取得されると(初期動きベクトルからかく方向で2サンプル変位することできる)、最終的な予測を生成するために使用される。
提案に従って、双線形補間がDMVR探索プロセス中に適用される。つまり、MRSAD計算で使用される予測は、双線形補間を用いて生成される。最終的な精緻化された動きベクトルが取得されると、正則8タップDCTIF補間フィルタが、最終的な予測を生成するために適用される。
DMVRは、ブロック4×4、4×8、及び8×4に対して無効にされる。
追加条件が、MV精緻化プロセスを制限するようDMVRに課される。それにより、DMVRは、次の条件が満足される場合に、条件付きで無効にされる。
現在CUの初期動きベクトルを使用した2つの予測信号(L0及びL1予測)の間の絶対差分和(SAD)が計算される。SADがもはや予め定義された閾値、すなわち、サンプルごとに2(BDepth-9)、よりも大きくない場合には、DMVRはスキップされ、そうでない場合には、DMVRは依然として、現在のブロックの2つの動きベクトルを精緻化するために適用される。
DMVR適用条件は、それがBMS2.1で実装されているということで(POC-POC1)×(POC-POC2)<0であり、新しい条件(POC-POC1)==(POC2-POC)で置換される。これは、参照ピクチャが反対の時間方向にあり、現在のピクチャと等距離にある場合にのみ、DMVRが適用されることを意味する。
MRSADコストは、ブロックの奇数番目の行についてのみ計算され、偶数番目のサンプル行は考慮されない。従って、MRSAD計算のための演算の数は半分である。
JVET-K0041では、非常に最小限の計算複雑性で16分の1ペル精度のサブピクセルオフセットを決定するために整数距離位置評価コスト(integer distance position evaluated costs)を使用して適合されたパラメトリックエラーサーフェス(parametric error surface)が提案された。
1.整数MVDの最小マッチングコストが0に等しくなく、かつ、ゼロMVDのマッチングコストが閾値よりも大きい場合にのみ、パラメトリックエラーサーフェスフィットは計算される。
2.最良の整数位置は中心位置と見なされ、中心位置のコストと、中心位置に対する(整数ピクセルの単位での)位置(-1,0)、(0,-1)、(1,0)及び(0,1)のコストとは、式:
E(x,y)=A(x-x0)2+B(y-y0)2+C
の2次元パラメトリックエラーサーフェス式に適合するために使用される。ここで、(x0,y0)は、最小コストを有する位置に対応し、Cは、最小コスト値に対応する。5つの未知数の5つの式を解くことによって、(x0,y0)は:
x0=(E(-1,0)-E(1,0))/(2(E(-1,0)+E(1,0)-2E(0,0)))
y0=(E(0,-1)-E(0,1))/(2(E(0,-1)+E(0,1)-2E(0,0)))
として計算される。(x0,y0)は、除算が実行される精度(すなわち、何ビットの商が計算されるか)を調整することによって、如何なる必要なサブピクセル精度でも計算され得る。16分の1ペル精度については、商の絶対値のわずか4ビットしか計算される必要がなく、これは、CUごとに必要な2回の除算の高速シフト減算ベースの実装に役立つ。
3.計算された(x0,y0)は、サブピクセル精度精緻化デルタMVを得るよう整数距離精緻化MVに加えられる。
この寄与は、オプティカルフローによりサブブロックベースのアフィン動き補償された予測を精緻化する方法を提案する。サブブロックベースのアフィン動き補償が実行された後、予測サンプルは、オプティカルフロー式によって導出された差を加えることによって精緻化される。これは、オプティカルフローによる予測精緻化(PROF)と呼ばれる。この提案されている方法は、メモリアクセスバンド幅を増大させずに、ピクセルレベル粒度でのインター予測を達成することができる。
gx(i,j)=I(i+1,j)-I(i-1,j)
gy(i,j)=I(i,j+1)-I(i,j-1)
ΔI(i,j)=gx(i,j)×Δvx(i,j)+gy(i,j)×Δvy(i,j)
ここで、デルタMV(Δv(i,j)と表される)は、図10に示されるように、v(i,j)によって表される、サンプル位置(i,j)について計算されたピクセルMVと、ピクセル(i,j)が属するサブブロックのサブブロックMVとの間の差である。
6パラメータアフィンモデルについては、
I’(i,j)=I(i,j)+ΔI(i,j)
a)PROFの勾配導出方法
JVET-N0263では、勾配は、各参照リストのサブブロック(VTM-4.0の4×4サブブロック)ごとに計算される。サブブロックごとに、参照ブロックの最も近い整数サンプルは、サンプルの4つの辺の外側のラインをパディングするためにフェッチされる(前の図を参照されたい)。
現在のサブブロックのMVは(MVx,MVy)であるとする。次いで、分数部分は(FracX,FracY)=(MVx&15,MVy&15)として計算される。整数部分は、(IntX,IntY)=(MVx>>4,MVy>>4)として計算される。オフセット(OffsetX,OffsetY)は:
OffsetX=FracX>7?1:0;
OffsetY=FracY>7?1:0;
として導出される。現在のサブブロックの左上座標は(xCur,yCur)であり、現在のサブブロックの寸法はW×Hであるとする。
その場合に、(xXor0,yCor0)、(xCor1,yCor1)、(xCor2,yCor2)及び(xCor3,yCor3)は:
(xXor0,yCor0)=(xCur+IntX+OffsetX-1,yCur+IntY+OffsetY-1);
(xCor1,yCor1)=(xCur+IntX+OffsetX-1,yCur+IntY+OffsetY+H-1);
(xCor2,yCor2)=(xCur+IntX+OffsetX-1,yCur+IntY+OffsetY);
(xCor3,yCor3)=(xCur+IntX+OffsetX+W,yCur+IntY+OffsetY);
として計算される。PredSample[x][y](x=0..W-1、y=0..H-1である)は、サブブロックの予測サンプルを保持する。次いで、パディングサンプルは:
PredSample[x][-1]=(Ref(xCor0+x,yCor0)<<Shift0)-Rounding(x=-1..Wの場合);
PredSample[x][H]=(Ref(xCor1+x,yCor1)<<Shift0)-Rounding(x=-1..Wの場合);
PredSample[-1][y]=(Ref(xCor2,yCor2+y)<<Shift0)-Rounding(y=0..H-1の場合);
PredSample[W][y]=(Ref(xCor3,yCor3+y)<<Shift0)-Rounding(y=0..H-1の場合);
として導出される。ここで、Recは、参照ピクチャを表す。Roundingは、例示的なPROF実装で213に等しい整数である。Shift0=Max(2,(14-BitDepth))である。
PROFは、勾配が入力ルーマサンプルと同じ制度で出力されるVTM-4.0のBIOとは異なり、勾配の精度を増大させようと試みる。PROFの勾配は、次の:
Shift1=Shfit0-4
gradientH[x][y]=(predSample[x+1][y]-predSample[x-1][y])>>Shift1
gradientV[x][y]=(predSample[x][y+1]-predSample[x][y-1])>>Shift1
のように計算される。predSample[x][y]は補間後に精度を保つことが留意されるべきである。
Δv(dMvH[posX][posY]及びdMvV[posX][posY]と表される)(posX=0..W-1、posY=0..H-1である)の導出は、次のように記載され得る。
現在のブロックの寸法はcbWidth×cbHeightであり、制御点動きベクトルの数はnumCpMvであり、制御点動きベクトルはcpMvLX[cpIdx]であるとする。ここで、cpIdx=0..numCpMv-1であり、Xは、2つの参照リストを表す0又は1である。
変数log2CbW及びlog2CbHは、次のように導出される:
log2CbW=Log2(cbWidth)
log2CbH=Log2(cbHeight)
変数mvScaleHor、mvScaleVer、dHorX及びdVerXは、次のように導出される:
mvScaleHor=cpMvLX[0][0]<<7
mvScaleVer=cpMvLX[0][1]<<7
dHorX=(cpMvLX[1][0]-cpMvLX[0][0])<<(7-log2CbW)
dVerX=(cpMvLX[1][1]-cpMvLX[0][1])<<(7-log2CbW)
変数dHorY及びdVerYは、次のように導出される:
・numCpMvが3に等しい場合に、次が適用される:
dHorY=(cpMvLX[2][0]-cpMvLX[0][0])<<(7-log2CbH)
dVerY=(cpMvLX[2][1]-cpMvLX[0][1])<<(7-log2CbH)
・そうでない(numCpMvが2に等しい)場合に、次が適用される:
dHorY=―dVerX
dVerY=dHorX
変数qHorX、qVerX、qHorY、及びqVerYは:
qHorX=dHorX<<2;
qVerX=dVerX<<2;
qHorY=dHorY<<2;
qVerY=dVerY<<2;
として導出される。
dMvH[0][0]及びdMvV[0][0]は:
dMvH[0][0]=((dHorX+dHorY)<<1)-((qHorX+qHorY)<<1);
dMvV[0][0]=((dVerX+dVerY)<<1)-((qVerX+qVerY)<<1);
として計算される。
1からW-1までのxPosについてのdMvH[xPos][0]及びdMvV[xPos][0]は:
dMvH[xPos][0]=dMvH[xPos-1][0]+qHorX;
dMvV[xPos][0]=dMvV[xPos-1][0]+qVerX;
として導出される。
1からH-1までのyPosについては、次が適用される:
dMvH[xPos][yPos]=dMvH[xPos][yPos-1]+qHorY(xPos=0..W-1である)
dMvV[xPos][yPos]=dMvV[xPos][yPos-1]+qVerY(xPos=0..W-1である)
最後に、dMvH[xPos][yPos]及びdMvV[xPos][yPos](posX=0..W-1、posY=0..H-1である)は:
dMvH[xPos][yPos]=SatShift(dMvH[xPos][yPos],7+2-1);
dMvV[xPos][yPos]=SatShift(dMvV[xPos][yPos],7+2-1);
として右シフトされる。ここで、SatShift(x,n)及びShift(x,n)は:
サブブロック内の位置(posX,posY)について、その対応するΔv(i,j)は(dMvH[posX][posY],dMvV[posX][posY])と表される。その対応する勾配は、(gradientH[posX][posY],gradientV[posX][posY])と表される。
次いで、ΔI(posX,posY)は、次のように導出される。
(dMvH[posX][posY],dMvV[posX][posY])は:
dMvH[posX][posY]=Clip3(-32768,32767,dMvH[posX][posY]);
dMvV[posX][posY]=Clip3(-32768,32767,dMvV[posX][posY]);
としてクリップされる。
ΔI(posX,posY)=dMvH[posX][posY]×gradientH[posX][posY]+dMvV[posX][posY]×gradientV[posX][posY];
ΔI(posX,posY)=Shift(ΔI(posX,posY),1+1+4);
ΔI(posX,posY)=Clip3(-(213-1),213-1,ΔI(posX,posY)); (PROF-eq2)
現在のブロックが双予測又は重み付き予測としてコーディングされない場合に:
I’(posX,posY)=Shift((I(posX,posY)+ΔI(posX,posY)),Shift0)、
I’(posX,posY)=ClipSample(I’(posX,posY))
ここで、ClipSampleは、サンプル値を有効な出力サンプル値にクリップする。
次いで、I’(posX,posY)は、インター予測値として出力される。
そうでない(現在のブロックが双予測又は重み付き予測としてコーディングされる)場合には、I’(posX,posY)は、他の予測値及び/又は重み値に従ってインター予測値を生成するために記憶及び使用される。
先願であるPCT出願第PCT/CN2018/096384、PCT/CN2018/098691、PCT/CN2018/104301、PCT/CN2018/106920、PCT/CN2018/109250、及びPCT/CN2018/109425号では、MV更新方法及び2ステップインター予測法が提案されている。BIOにおける参照ブロック0と参照ブロック1との間の導出されたMVは、すけーりんぐさr得て、リスト0及びリスト1の元の動きベクトルに加えられる。一方、更新されたMVは、動き補償を行うために使用され、第2のインター予測が最終的な予測として生成される。
JVET-M1001_v7(VVC作業ドラフト4、バージョン7)でのDMVRの利用は、次のように定義されている:
・次の条件の全てが当てはまる場合に、dmvrFlagは1にセットされる:
・sps_dmvr_enabled_flagは1に等しい
・現在のブロックは、三角予測モード(triangular prediction mode)、AMVRアフィンモード、サブブロックモード(マージアフィンモード及びATMVPモードを含む)でコーディングされていない
・merge_flag[xCb][yCb]は1に等しい
・predFlagL0[0][0]及びpredFlagL1[0][0]の両方ともが1に等しい
・mmvd_flag[xCb][yCb]は0に等しい
・DiffPicOrderCnt(currPic,RefPicList[0][refIdxL0])はDiffPicOrderCnt(RefPicList[1][refIdxL1],currPic)に等しい
・cbHeightは8以上である
・cbHeight×cbWidthは64以上である
DMVR/BIOの現在の設計には、次の問題がある:
1)DMVRがDMVRを処理するための1つのブロック又は1つのユニット(例えば、16×16)に適用される場合に、ユニット/ブロック全体は、同じ精緻化動き情報を共有する。しかし、精緻化された動き情報は、ユニット/ブロック全体の中のサンプルの一部に対して有益でない可能性がある。
1)変換スキップモード(transform skip mode)及び正則残差コーディングモード(regular residual coding mode)(例えば、変換モード)で使用されるコーディンググループ(Coding Group,CG)サイズは、ずれている。正則残差コーディングでは、2×2のCGサイズが、2×2、2×4及び4×2の残差ブロックのために使用され、2×8及び8×2のCGサイズが、2×N及びN×の残差ブロック(N>=8)のために夫々使用される。他方で、変換スキップモードでは、2×2のCGサイズが常に、2×N及びN×2(N>=2)の残差ブロックのために使用される。
開示されている技術の実施形態は、既存の実施の欠点を解消する。以下で与えられている開示されている技術の例は、開示されている技術の理解を助けるために議論されており、開示されている技術を限定するように解釈されるべきではない。明示的に反対の指示がない場合には、これらの例で記載されている様々な特徴は組み合わされ得る。
a.一例で、結果は、スケーリング係数を乗じられることで変更され得る。
i.代替的に、結果は、スケーリング係数で除されることで変更されてもよい。
ii.代替的に、結果は、スケーリング係数で加算/減算されることで変更されてもよい。
iii.一例で、スケーリング係数は、MVDの値に依存し得る。
1.一例で、スケーリング係数は、より大きいMVD(例えば、MVDの水平及び/又は垂直成分の大きい方の絶対値)について増大され得る。
2.一例で、スケーリング係数は、初期化されたMVに試験されたMVDをプラスしたもの有する候補MVのサブペル位置に依存し得る。
iv.一例で、スケーリング係数は、許可されたMVDセットに依存し得る(例えば、許可されたMVDセット内の候補の水平又は垂直成分は、M及びNが非負値であるとして、範囲[-M,N]内にある)。
a.一例で、コーディング情報は、参照ピクチャの動きベクトル及びPOC値を含んでもよい。
i.一例で、コーディング情報は、ブロックがAMVPモード又はマージモードでコーディングされているかどうかを含んでもよい。
1.一例で、AMVPコーディングされているブロックについては、BIOは無効にされてもよい。
ii.一例で、DMVR/BIOを有効にすべきかどうかは、2つの動きベクトル(MV0及びMV1に依存し、MV0’及びMV1’によって表される)の和又はMV成分の絶対値に依存してもよい。
1.一例で、abs(MV0’[0]+MV1’[0])>T1又はabs(MV0’[1]+MV1’[1])>T1である場合に、DMVR及び/又はBIOは無効にされ得る。例えば、T1=10整数ピクセルである。
2.一例で、abs(MV0’[0]+MV1’[0])>T1及びabs(MV0’[1]+MV1’[1])>T1である場合に、DMVR及び/又はBIOは無効にされ得る。
3.一例で、abs(MV0’[0]+MV1’[0])+abs(MV0’[1]+MV1’[1])>T2である場合に、DMVR及び/又はBIOは無効にされ得る。例えば、T2=15整数ピクセルである。
4.一例で、abs(MV0’[0]+MV1’[0])<T1又はabs(MV0’[1]+MV1’[1])<T1である場合に、DMVR及び/又はBIOは無効にされ得る。例えば、T1=10整数ピクセルである。
5.一例で、abs(MV0’[0]+MV1’[0])>T1及びabs(MV0’[1]+MV1’[1])>T1である場合に、DMVR及び/又はBIOは無効にされ得る。
6.一例で、abs(MV0’[0]+MV1’[0])+abs(MV0’[1]+MV1’[1])<T2である場合に、DMVR及び/又はBIOは無効にされ得る。例えば、T1=15整数ピクセルである。
7.一例で、MV0’はMV0に等しくセットされ、MV1’はMV1に等しくセットされる。
8.一例で、MV0’はMV0に等しくセットされ、MV1は、MV1’を生成するようスケーリングされ得る。
a.一例で、MV1’=MV1×PocDist0/PocDist1。
b.一例で、MV1’=MV1。
9.一例で、MV1’はMV1に等しくセットされ、MV0は、MV0’を生成するようスケーリングされ得る。
a.一例で、MV0’=MV0×PocDist1/PocDist0。
b.一例で、MV0’=MV0。
10.一例で、MV0’はMV0×(POCRef1-POCcur)に等しくセットされ得、MV1’はMV1×(POCcur-POCRef0)に等しくセットされる。POCcur、POCRef0及びPOCRef1は、夫々、現在のピクチャ、MV0の参照ピクチャ、及びMV1の参照ピクチャのPOC値を表し得る。
b.一例で、コーディング情報は、マージインデックス又は/及びMVPインデックスを含んでもよい。
i.例えば、DMVR又は/及びBDOFは、特定のマージインデックスについてのみ許可され得る。
1.例えば、DMVR又は/及びBDOFは、偶数マージインデックスについてのみ許可され得る。
2.例えば、DMVR又は/及びBDOFは、奇数マージインデックスについてのみ許可され得る。
3.例えば、DMVR又は/及びBDOFは、閾値T1よりも小さいマージインデックスについてのみ許可され得る。
4.例えば、DMVR又は/及びBDOFは、閾値T1よりも大きいマージインデックスについてのみ許可され得る。
ii.例えば、BDOFは、特定のMVPインデックス、例えば、偶数又は奇数MVPインデックスについてのみ許可され得る。
c.一例で、コーディング情報は、SBTモードがブロックによって用いられているか否かを含んでもよい。
i.一例で、DMVR又は/及びBDOFは、SBTモードが用いられている場合に許可され得ない。
ii.一例で、DMVR又は/及びBDOFは、SBTモードで非ゼロ残差を有するサブパーティションについてのみ許可され得る。
iii.一例で、DMVR又は/及びBDOFは、SBTモードで非ゼロ残差を有するサブパーティションについてのみ許可され得ない。
a.一例で、MV0及びMV1がブロックにおいて対称である場合には、DMVR及び/又はBIOは無効にされ得る。
i.例えば、ブロックが対称な動きベクトル(例えば、(MV0+MV1)がゼロ成分しか有さない)場合には、BIOは無効にされ得る。一例で、ブロックはAMVPモードでコーディングされ得る。代替例では、ブロックはマージモードでコーディングされ得る。
ii.MV0及びMV1が対称であるかどうかは、POCに依存してもよい。
1.例えば、MV0及びMV1は、MV1×(POCcur-POC0)+MV0×(POC1-POCcur)がゼロ動きベクトルに等しい場合に対称である。POCcur、POCRef0及びPOCRef1は、夫々、現在のピクチャ、MV0の参照ピクチャ、及びMV1の参照ピクチャのPOC値を表し得る。
b.一例で、MV0及びMV1がブロックにおいてほぼ対称である場合には、DMVR又は/及びBIOは無効にされ得る。
i.例えば、MV0及びMV1は、abs(MV0+MV1)<Th1である場合にほぼ対称である。Th1は、1整数ピクセルなどの数である。
ii.MV0及びMV1が対称であるかどうかは、POCに依存してもよい。
1.例えば、MV0及びMV1は、abs(MV1×(POCcur-POC0)+MV0×(POC1-POCcur))<Th2である場合にほぼ対称である。Th2は、POCに依存し得る数である。
c.一例で、MV0及びMV1がブロックにおいて対称とはほど遠い場合に、DMVR又は/及びBIOは無効にされ得る。
i.例えば、MV0及びMV1は、abs(MV0+MV1)>Ths1である場合に対称でない。Th1は、16整数ピクセルなどの数である。
ii.MV0及びMV1が対称であるかどうかは、POCに依存してもよい。
1.例えば、MV0及びMV1は、abs(MV1×(POCcur-POC0)+MV0×(POC1-POCcur))>Th2である場合にほぼ対称ではない。Th2は、POCに依存し得る数である。
a.一例で、k番目のステップは、1つ又は複数のMk×Nkのユニットを精緻化すべきであり、j番目のステップは、1つ又は複数のMj×Njのユニットを精緻化すべきである。ここで、k>jであり、Mk×NkはMj×Njと等しくなく、2つの条件Mk<=Mj、Nk<-Mjのうちの少なくとも一方が当てはまる。
a.一例で、第1のK×Lサブ領域は、デコードされた動き情報を使用してもよく、第2のK×Lサブ領域は、第2のサブ領域をカバーするユニットに適用されたDMVRで導出される精緻化された動き情報を使用してもよい。
a.一例で、DMVRが適用されるブロック/ユニット内のサブ領域について、動き情報がDMVRプロセス後に変化しない場合には、BIOはそのサブ領域について無効にされ得る。
a.一例で、N=2であり、DMVRプロセスでの選択されたMVD対と、全ゼロMVD対とを含む。
b.一例で、N=2である。DMVRプロセスでの裁量の2対のMVD(例えば、最小コストを有する2つのMVD)が使用され得る。
c.一例で、ブロック内の各K×Lサブ領域は、それ自体のMVD対を決定してもよい。
d.一例で、MVDの各対により、2つの参照ブロックが識別可能である。2つの参照ブロック内の各サンプル又はブロック(例えば、2×2ブロック又は4×4ブロックなど)の間のコスト(例えば、SAD/SSE)が計算され得る。次いで、最終的な予測サンプルが、コスト値に従って全ての参照ブロック対の組み合わせとして生成され得る。predKLX(K=1,2,...,N)を、MVDのK番目の対によって識別されたリストX(X=0又は1)内の参照サンプルとして表し、costKを、MVDのK番目の対のコストとして表す。predKLX及びcostKは両方とも、(x,y)(例えば、サンプルの位置)の関数であることができる。
e.一例で、各サンプルの重み付けは、コストに反比例し得る。
i.一例で、
a.一例で、DMVRによって精緻化されたMMVD距離は、MMVD距離テーブルに含まれるべきではない。
i.代替的に、更に、DMVRによって精緻化されたMMVD距離は、MMVD距離テーブルに含まれる場合に、DMVRは許可されず、元のMMVD距離(例えば、シグナリングされたMMVD距離)が使用される。
b.一例で、DMVRで最良の整数MVDを生成した後に、それは元のMMVD距離に加えられて、粗く精緻化されたMMVD距離が生成される。DMVRは、粗く精緻化されたMMVD距離がMMVD距離テーブルに含まれる場合には許可され得ない。
c.一例でdMVrは、上記の制約を有する全てのMMVD距離について許可され得る。
i.例えば、DMVRは、2ペルMMVD距離について許可され得る。
a.一例で、BDOFは、導出された部分が、参照リスト0内の予測サンプルと参照リスト1内の予測サンプルとの間の距離を広げる場合に、サンプルについて許可され得ない。
i.例えば、
ii.例えば、
iii.例えば、
iv.例えば、
v.代替的に、導出されたオフセットは、導出された部分が、参照リスト0内の予測サンプルと参照リスト1内の予測サンプルとの間の距離を広げる場合に、fbdof(fbdof<1.0)と表される係数によってスケーリングされてもよい。
1.例えば、
i.例えば、BDOFは、Δ1>Δ2である場合に許可され得ない。ここで、
ii.一例で、BDOFは、Δ1≧Δ2である場合に許可され得ない。
iii.一例で、差分はSSE(Sum of Squared Error)又は平均除去SSE若しくはSATD(Sum of Absolute Transformed Difference)によって測定され得る。例えば、
1.例えば、差分は、サブブロックの偶数又は奇数行に対して計算され得る。
v.代替的に、導出されたオフセット又は/及びvx又は/及びvyは、導出された部分が、参照リスト0内の予測サンプルと参照リスト1内の予測サンプルとの間の距離を広げる場合に、fbdof(fbdof<1.0)と表される係数によってスケーリングされてもよい。
c.一例で、導出されたオフセット(例えば、
a.一例で、costClipMvd>Th×costZeroMvdである場合に、BDOFは許可され得ない。
b.一例で、costClipMvd>Th×costDerivedMvdである場合に、BDOFは許可され得ない。
c.一例で、costClipMvd>ThcostZeroMvd又はcostClipMvd>Th×costDerivedMvdである場合に、導出されたオフセット(例えば、
d.代替的に、vx及びvyの両方がクリッピング動作の後に変化する場合には、BDOFは許可され得ない。
e.代替的に、vx又はvyのどちらか一方がクリッピング動作の後に変化する場合には、BDOFは許可され得ない。
f.代替的に、vxとクリップされたvxとの間の絶対差が閾値Tよりも大きい場合には、BDOFは許可され得ない。
g.代替的に、vyとクリップされたvyとの間の絶対差が閾値Tよりも大きい場合には、BDOFは許可され得ない。
h.代替的に、vxとクリップされたvxとの間の絶対差が閾値T1よりも大きく、vyとクリップされたvyとの間の絶対差が閾値T2よりも大きい場合には、BDOFは許可され得ない。
i.一例で、T/T1/T2は1又は2又は3又は4整数ピクセルであってよい。
j.一例で、vxがclipVxに等しくない場合に、コストは、いくつかの特定のMVD、例えば、(0,0)、(clipVx/2,0)、(clipVx×2,0)について計算され得る。最小コストを達成するMVDが最終的なMVDとして選択され得る。
k.一例で、vyがclipVyに等しくない場合に、コストは、いくつかの特定のMVD、例えば、(clipVx,0)、(clipVx,clipVy/2)、(clipVx,clipVy×2)について計算され得る。最小コストを達成するMVDが最終的なMVDとして選択され得る。
l.一例で、vxがclipVxに等しくなく、かつ、vyがclipVyに等しくない場合に、コストは、いくつかの特定のMVD、例えば、(0,0)、(clipVx/2,0)、(clipVx×2,0)、(0,clipVy)、(clipVx/2,clipVy)、(clipVx×2,clipVy)、(0,2×clipVy)、(clipVx/2,2×clipVy)、(clipVx×2,2×clipVy)について計算され得る。最小コストを達成するMVDが最終的なMVDとして選択され得る。
m.一例で、vxがclipVxに等しくなく、かつ、vyがclipVyに等しくない場合に、水平MVD及び垂直MVDが順次に決定され得る。
i.例えば、水平MVDは、最初に、垂直MVDが特定の値(例えば、0)に等しいと仮定して決定され得る。次いで、垂直MVDが、決定された水平MVDに基づき決定され得る。
1.一例で、コストは、最初に、垂直MVDがゼロに等しいと仮定するいくつかの特定の水平MVD、例えば、MVD(0,0)、(clipVx/2,0)、(clipVx×2,0)について計算され得、最小コストを達成する水平MVDが、finalVxと表される最終的な水平MVDとして選択され得る。次いで、コストは、いくつかの特定の垂直MVD、例えば、MVD(finalVx,0)、(finalVx,clipVy/2)、(finalVx,clipVy×2)について計算され得、最小コストを達成する垂直MVDが、最終的な垂直MVDとして選択され得る。
ii.例えば、垂直MVDは、最初に、水平MVDが特定の値(例えば、0)に等しいと仮定して決定され得る。次いで、水平MVDが、決定された垂直MVDに基づき決定され得る。
1.一例で、コストは、最初に、水平MVDがゼロに等しいと仮定するいくつかの特定の水平MVD、例えば、MVD(0,0)、(0,clipVy/2)、(0,clipVy×2)について計算され得、最小コストを達成する垂直MVDが、finalVyと表される最終的な垂直MVDとして選択され得る。次いで、コストは、いくつかの特定の水平MVD、例えば、MVD(0,finalVy)、(clipVx/2,finalVy)、(clipVx×2,finalVy)について計算され得、最小コストを達成する水平MVDが、最終的な水平MVDとして選択され得る。
n.一例で、異なるMVDが、コスト関数においていくつかの共通の部分を有することがあり、これらの共通の部分は、比較において計算されなくてもよい。
i.代替的に、共通の部分は、全てのMVDについてコスト関数から削除される。
a.一例で、2ステップ精緻化が適用されてもよく、第1のステップで使用される第1の組の候補MVDは、変更されていないvy及び変更されているvxに基づき、第2の組の候補MVDは、変更されていないvy及び変更されているvyに基づき、あるいは、逆も同様である。
b.一例で、候補MVDの組は、(vx+offsetX,vy)を含むよう定義され、offsetXは範囲[-ThX1,ThX2]の中にあり、ThX1及びThX2は非負整数値である。一例で、ThX1=ThX2=ThXであり、ThXは非負整数である。他の例では、ThX1=ThX2+1=ThXであり、ThXは非負整数である。
i.一例で、ThX=2である。一例で、(vx-2,vy)、(vx-1,vy)、(vx,vy)、(vx+1,vy)、及び(vx+2,vy)を含むMVDが、vxを導出した後にチェックされ得る。
ii.代替的に、ThX=1である。一例で、(vx-1,vy)、(vx,vy)、及び(vx+1,vy)を含むMVDが、vxを導出した後にチェックされ得る。
iii.一例で、範囲[-ThX1,ThX2]内の値の一部(例えば、offsetX)のみが許可され得る。
iv.代替的に、vyは、0に等しくセットされる。
v.代替的に、vxは、refinedVyに等しくセットされる。
c.一例で、候補MVDの組は、(vx,vy+offsetY)を含むよう定義され、offsetYは範囲[-ThY1,ThY2]の中にあり、ThY1及びThY2は非負整数値である。一例で、ThY1=ThY2=ThYであり、ThYは非負整数である。他の例では、ThY1=ThY2+1=ThYであり、ThYは非負整数である。
i.一例で、ThY=2である。一例で、(vx,vy-2)、(vx,vy-1)、(vx,vy)、(vx,vy+1)、及び(vx,vy+2)を含むMVDが、vyを導出した後にチェックされ得る。
ii.一例で、ThY=1である。一例で、(vx,vy-1)、(vx,vy)、及び(vx,vy+1)を含むMVDが、vyを導出した後にチェックされ得る。
iii.一例で、範囲[-ThY1,ThY2]内の値の一部(例えば、offsetY)のみが許可され得る。
iv.代替的に、vxは、refinedVyに等しくセットされる。
v.代替的に、vxは、0に等しくセットされる。
d.一例で、vx及びvyは、順に精緻化されてもよい。
i.例えば、vxは、例えば、ビュレット10.bに従って、最初に精緻化される。
1.代替的に、更に、vyは、0に等しいと仮定される。
ii.例えば、vyは、例えば、ビュレット10.cに従って、最初に精緻化される。
1.代替的に、更に、vxは、0に等しいと仮定される。
e.一例で、vx及びvyは、一緒に精緻化されてもよい。例えば、候補MVDの組は、(vx+offsetX,vy+offsetY)を含むよう定義され、offsetXは範囲[-ThX1,ThX2]内にあり、offsetYは範囲[-ThY1.ThY2]内にある。
i.例えば、ThX1=ThX2=2かつThY1=ThY2=2である。
ii.例えば、ThX1=ThX2=1かつThY1=ThY2=1である。
iii.一例で、(vx+offsetX,vy+offsetY)の一部の値しか、候補MVDセットに含まれなくてもよい。
f.一例で、vx及びvyから導出される候補MVDの数は同じであってよく、例えば、ThX1=ThY1及びThX2=ThY2である。
i.代替的に、vx及びvyから導出される候補MVDの数は異なってもよく、例えば、ThX1!=ThY1又はThX2!=ThY2である。
g.代替的に、更に、最小コスト(例えば、ビュレット9で定義されるコスト)を達成するMVDは、精緻化されたMVDとして選択されてもよい。
a.水平MVDの最大及び最小値は、夫々、MVDmaxX及びMVDminXによって表され、垂直MVDの最大及び最小値は、夫々、MVDmaxY及びMVDminYによって表されるとする。所与の候補セット内で許される水平MVD候補の数は、(1+MVDmaxX-MVDminX)よりも小さくなければならず、かつ/あるいは、所与の候補セット内で許される垂直MVD候補の数は、(1+MVDmaxY-MVDminY)よりも小さくなければならない。
b.一例で、所与の候補セットは、vx及び/又はvyがKmの形を取る候補しか有さなくてもなく、mは整数である。例えば、K=2である。
i.代替的に、更に、所与の候補セットは、vx及び/又はvyが0に等しい候補も含んでもよい。
ii.代替的に、Δvx(x,y)又は/及びΔvy(x,y)についての所与の候補セットは、Δvx(x,y)又は/及びΔvy(x,y)がゼロであるか又はKmの形を取る候補しか有さなくてもなく、mは整数である。例えば、K=2である。
c.一例で、所与の候補セットは、絶対値がゼロであるか又はKmの形を取るvx及び/又はvy又は/及びΔvx(x,y)又は/及びΔvy(x,y)を有する候補しか有さなくてもなく、mは整数である。例えば、K=2である。
d.一例で、所与の候補セットは、vx及び/又はvy又は/及びΔvx(x,y)又は/及びΔvy(x,y)がゼロであるか又はKmの形を取る候補しか有さなくてもなく、mは整数である。例えば、K=2である。
e.一例で、MVDは、最初に、先行技術(例えば、BDOFにおいて8.5.7.4の式8-867及び式8-868で導出されたvx及びvy)を用いて導出されてよく、次いで、所与の候補セット内で許されている候補のうちの1つであるよう変更されてよい。
i.一例で、Xは、abs(vx)又はabs(vy)に等しくセットされ、X’は、Xから導出され、vx又はvyは、sign(vx)×X’又はsign(vy)×X’に変更される。
1.例えば、X’は、K^ceil(logK(X))に等しくセットされ得る。
2.例えば、X’は、K^floor(logK(X))に等しくセットされ得る。
3.例えば、X’は、Xが閾値Tよりも小さい場合に、0に等しくセットされ得る。
4.例えば、X’は、ceil(logK(X))-X<=X-floor(logK(X))である場合に、K^ceil(logK(X))に等しくセットされ得る。
a.代替的に、更に、X’は、そうでない場合には、K^floor(logK(X))に等しくセットされ得る。
5.例えば、X’は、Kceil(logK(X))-X<=X-Kfloor(logK(X))である場合に、Kceil(logK(X))に等しくセットされ得る。
a.代替的に、更に、
X’は、Kceil(logK(X))-X>X-Kfloor(logK(X))である場合に、Kfloor(logK(X))に等しくセットされ得る。
6.例えば、X’は、Kceil(logK(X))-X<X-Kfloor(logK(X))である場合に、Kceil(logK(X))に等しくセットされ得る。
a.代替的に、更に、X’は、Kceil(logK(X))-X>=X-Kfloor(logK(X))である場合に、Kfloor(logK(X))に等しくセットされ得る。
7.一例で、Kは2にセットされる。
8.一例で、X’は、Kceil(logK(X+offset))に等しくセットされてもよく、offsetは整数である。例えば、offsetは、X-1又はX>>1に等しくてよい。
a.一例で、offsetはXに依存してもよい。例えば、offsetは、Kceil(logK(X))/2+Pに等しくてよい。Pは、0、1、-1といった整数である。
9.一例で、X’は、Kfloor(logK(X+offset))に等しくセットされてもよく、offsetは整数である。例えば、offsetは、X-1又はX>>1に等しくてよい。
a.一例で、offsetはXに依存してもよい。例えば、offsetは、Kfloor(logK(X))/2+Pに等しくてよい。Pは、0、1、-1といった整数である。
10.一例で、XからX’への変換は、予め定義されたルックアップテーブルによって実装されてもよい。
a.一例で、ルックアップテーブルは、上記の方法から導出されてもよい。
b.一例で、ルックアップテーブルは、上記の方法から導出されなくてもよい。
c.一例で、XからX’へ変換するときに、Xは、ルックアップテーブルにアクセスするためのインデックスとして使用されてもよい。
d.一例で、XからX’へ変換するときに、Xの最初のN個(N=3)の最上位ビットが、ルックアップテーブルにアクセスするためのインデックスとして使用されてもよい。
e.一例で、XからX’へ変換するときに、Xの最初のN個(N=3)の最下位ビットが、ルックアップテーブルにアクセスするためのインデックスとして使用されてもよい。
f.一例で、XからX’へ変換するときに、Xの特定のN個(N=3)の連続ビットが、ルックアップテーブルにアクセスするためのインデックスとして使用されてもよい。
11.上記の方法は、vxをΔvx(x,y)で置換することによってΔvx(x,y)にも適用可能であることができる。
12.上記の方法は、vyをΔvy(x,y)で置換することによってΔvy(x,y)にも適用可能であることができる。
ii.一例で、Kの累乗である候補値の組が、コスト(例えば、ビュレット9で定義されるコスト)を計算するためにvx又はvyに応じて選択されてもよい。最小コストを達成する値が最終的なvx又はvyとして選択される。lgKZ=floor(logJ(abs(vz)))を表し、Z=x又はyである。
1.例えば、値の組は、sign(vz)×{K^lgKZ,K^(lgKZ+1)}であってよい。
2.例えば、値の組は、sign(vz)×{K^lgKZ,K^(lgKZ+1),0}であってよい。
3.例えば、値の組は、sign(vz)×{K^lgKZ,0}であってよい。
4.例えば、値の組は、sign(vz)×{K^(lgKZ-1),K^lgKZ,K^(lgKZ+1)}であってよい。
5.例えば、値の組は、sign(vz)×{K^(lgKZ-1),K^lgKZ,K^(lgKZ+1),0}であってよい。
6.例えば、値の組は、sign(vz)×{K^(lgKZ-2),K^(lgKZ-1),K^lgKZ,K^(lgKZ+1),K^(lgKZ+2),0}であってよい。
7.例えば、値の組は、sign(vz)×{K^(lgKZ-1),K^lgKZ,K^(lgKZ+1)}であってよい。
iii.一例で、vx及びvyは、順に変更されてもよい。
1.一例で、vxは、vyがゼロに等しいと仮定して最初に変更されてもよい。
a.代替的に、更に、vyは、変更されたvxに基づき導出される。
2.一例で、vyは、vxがゼロに等しいと仮定して最初に変更されてもよい。
a.代替的に、更に、vxは、変更されたvyに基づき導出される。
f.代替的に、所与の候補セット内の許されている候補しか、MVDを導出するようチェックされなくてもよい。
i.一例で、BDOFにおいて、式(7)及び式(8)から明示的にMVD(例えば、8.5.7.4の式8-867及び式8-868で導出されたvx及びvy)を導出する代わりに、vx及びvyは、候補MVD値の組から直接に選択されてもよい。
ii.一例で、vx及びvyは、順に決定されてもよい。
1.一例で、vxは、vyがゼロに等しいと仮定して最初に決定されてもよい。
a.代替的に、更に、vyは、決定されたvxに基づき導出される。
2.一例で、vyは、vxがゼロに等しいと仮定して最初に決定されてもよい。
a.代替的に、更に、vxは、決定されたvyに基づき導出される。
iii.一例で、vx及びvyは一緒に決定される。
iv.一例で、候補MVD値セットは、K^N若しくは-K^Nの形を取る値又はゼロしか含まなくてもよく、Nは整数であり、K>0であり、例えば、K=2である。
1.一例で、候補MVD値セットは、M/(K^N)の形を取る値を含んでもよく、Mは整数であり、N>=0、K>0であり、例えば、k=2である。
2.一例で、候補MVD値セットは、M/(K^N)の形を取る値を含んでもよく、M及びNは整数であり、K>0であり、例えば、k=2である。
3.一例で、候補MVD値セットは、値ゼロ又は(K^M)/(K^N)の形を取る値を含んでもよく、M及びNは整数であり、K>0であり、例えば、k=2である。
g.代替的に、許可されたMVD値しか、vx及びvyについて導出されなくてもよい。
i.一例で、vxは、次のように導出される。ここで、関数F1()及びF2()はfloor()又はceil()であることができる。
cost(x,y)=Abs(abs(x)×2M-y)
1.代替的に、cost(x,y,M)=Abs(abs(x)×2M-abs(y))。
2.代替的に、cost(x,y,M)=Abs(abs(x)×2M-y)。
iii.一例で、vyは次のように導出される。ここで、関数F1()及びF2()はfloor()又はceil()であることができる。
1.一例で、vxは、sign(numX×denoX)×esp2(M)として導出され得、Mは、cost(numX,denoX,M)の最小値を達成する整数である。
2.一例で、vxは、ゼロ又はsign(numX×denoX)×KF1(logK(abs(numX)+offset1))-F2(logK(abs(denoX)+offset2))に等しくセットされてよく、offset1及びoffset2は整数である。
a.例えば、vxは、abs(numX)<abs(denoX)×T1+T2である場合にゼロに等しくセットされ得る。例えば、T1=1/2、T2=0である。
b.例えば、vxは、abs(numX)<=abs(denoX)×T1+T2である場合にゼロに等しくセットされ得る。例えば、T1=1/2、T2=0である。
c.例えば、vxは、abs(numX)<(abs(denoX)>>T1)+T2である場合にゼロに等しくセットされ得る。例えば、T1=1、T2=0である。
d.例えば、vxは、abs(numX)<=(abs(denoX)>>T1)+T2である場合にゼロに等しくセットされ得る。例えば、T1=1、T2=0である。
e.例えば、vxは、denoXがゼロに等しい場合にゼロに等しくセットされ得る。
f.例えば、vxは、numXがゼロに等しい場合にゼロに等しくセットされ得る。
g.例えば、vxは、numXがゼロに等しいか又はdenoXがゼロに等しい場合にゼロに等しくセットされ得る。
h.例えば、vxは、denoXがT1よりも小さい場合にゼロに等しくセットされ得る。
i.例えば、vxは、numXがT1よりも小さい場合にゼロに等しくセットされ得る。
j.例えば、vxは、numxがT1よりも小さいか又はdenoXがT2よりも小さい場合にゼロに等しくセットされ得る。
k.例えば、offset1は、numX-1又はnumX>>1若しくは0に等しくセットされてもよい。
l.例えば、offset2は、denoX-1又はdenoX>>1若しくは0に等しくセットされてもよい。
m.例えば、offset1はnumXに依存してもよい。例えば、offset1は、Kceil(logK(numX))/2+Pに等しくてよい。ここで、Pは、0、1、-1といった整数である。
n.例えば、offset1はnumXに依存してもよい。例えば、offset1は、Kceil(logK(abs(numX)))/2+Pに等しくてよい。ここで、Pは、0、1、-1といった整数である。
o.例えば、offset1は、Kfloor(logK(numX))/2+Pに等しくてよい。ここで、Pは、0、1、-1といった整数である。
p.例えば、offset1は、Kfloor(logK(abs(numX)))/2+Pに等しくてよい。ここで、Pは、0、1、-1といった整数である。
q.例えば、offset2はdenoXに依存してもよい。例えば、offset2は、Kceil(logK(denoX))/2+Pに等しくてよい。ここで、Pは、0、1、-1といった整数である。
r.例えば、offset2はdenoXに依存してもよい。例えば、offset2は、Kceil(logK(abs(denoX)))/2+Pに等しくてよい。ここで、Pは、0、1、-1といった整数である。
s.例えば、offset2は、Kfloor(logK(denoX))/2+Pに等しくてよい。ここで、Pは、0、1、-1といった整数である。
t.例えば、offset2は、Kfloor(logK(abs(denoX)))/2+Pに等しくてよい。ここで、Pは、0、1、-1といった整数である。
u.例えば、F1()及びF2()は、関数floor()又はceil()でることができる。
3.一例で、delta=floor(log2(abs(numX)))-floor(log2(abs(denoX)))であり、vxは次のように導出され得る。
a.例えば、vx=abs(numX)<(T1×abs(denoX)+T2)?T3:sign(numX×denoX)×(1<<delta)。
i.一例で、T1=1、T2=0、T3=0である。
ii.一例で、T1=1/2、T2=0、T3=0である。
iii.一例で、T3=numXである。
b.例えば、vx=abs(numX)<=(T1×abs(denoX)+T2)?T3:sign(numX×denox)×(1<<delta)。
i.一例で、T1=1、T2=0、T3=0である。
ii.一例で、T1=1/2、T2=0、T3=0である。
iii.一例で、T3=numXである。
c.例えば、vx=((denoX==0)||(abs(numX)<(T1×abs(denoX)+T2)))?T3:sign(numX×denoX)×(1<<delta)。
d.例えば、vx=((denoX==0)||(abs(numX)<=(T1×abs(denoX)+T2)))?T3:sign(numX×denoX)×(1<<delta)。
e.例えば、vx=((numX==0)||(abs(numX)<(T1×abs(denoX)+T2)))?T3:sign(numX×denoX)×(1<<delta)。
f.例えば、vx=((numX==0)||(abs(numX)<=(T1×abs(denoX)+T2)))?T3:sign(numX×denoX)×(1<<delta)。
g.例えば、vx=((numX==0)||(denoX==0)||(abs(numX)<(T1×abs(denoX)+T2)))?T3:sign(numX×denoX)×(1<<delta)。
h.例えば、vx=((numX==0)||(denoX==0)||(abs(numX)<=(T1×abs(denoX)+T2)))?T3:sign(numX×denoX)×(1<<delta)。
i.例えば、vx=(delta<T1)?T3:sign(numX×denoX)×(1<<delta)。
j.例えば、vx=(delta<=T1)?T3:sign(numX×denoX)×(1<<delta)。
k.例えば、vx=((delta<T1)||(denoX==0))?T3:sign(numX×denoX)×(1<<delta)。
l.例えば、vx=((delta<=T1)||(denoX==0))?T3:sign(numX×denoX)×(1<<delta)。
m.例えば、vx=((delta<T1)||(numX==0))?T3:sign(numX×denoX)×(1<<delta)。
n.例えば、vx=((delta<=T1)||(numX==0))?T3:sign(numX×denoX)×(1<<delta)。
o.例えば、vx=((delta<=T1)||(numX==0)||(denoX==0))?T3:sign(numX×denoX)×(1<<delta)。
p.例えば、vx=((delta<T1)||(numX==0)||(denoX==0))?T3:sign(numX×denoX)×(1<<delta)。
q.一例で、deltaは、次のように更に変更されてもよい。
i.例えば、floor(log2(abs(numX)))が0よりも大きく、かつ、abs(numX)&(1<<(floor(log2(abs(numX)))-1))がゼロに等しくない場合には、deltaは1だけ増やされ得る。
ii.例えば、floor(log2(abs(denoX)))が0よりも大きく、かつ、abs(denoX)&(1<<(floor(log2(abs(denoX)))-1))がゼロに等しくない場合には、deltaは1だけ増やされ得る。
r.代替的に、更に、deltaが0よりも小さい場合に、vxは0にセットされる。
4.かような方法は、numX及びdenoXをnumY及びdenoYで夫々置換することによって、vyに適用可能である(上記の方法のvxをvyで置換する)。numY及びdenoYは、vyを導出するために使用される分子及び分母である。
5.上記の例で、vxは、BDOFでbdofOffsetを導出するために使用される「vx」、又はPROFで(例えば、PROF-eq2で)ΔIを導出するために使用される「Δvx(x,y)」を指すことができる。
a.例えば、numX及び/又はdenoXは、vxがBDOFでbdofOffsetを導出するために使用される「vx」、又はPROFでΔIを導出するために使用される「Δvx(x,y)」を指すかどうかに応じて、セットされてもよい。
b.例えば、PROFでΔIを導出するために使用される「Δvx(x,y)」である場合に、numXは、PROFで(例えば、PROF-eq1で)アフィンパラメータから導出されたΔvx(x,y)に等しくセットされ得る。
c.例えば、PROFでΔIを導出するために使用される「Δvx(x,y)」である場合に、denoXは、1などの固定数に等しくセットされ得る。
6.上記の例で、vyは、BDOFでbdofOffsetを導出するために使用される「vy」、又はPROFで(例えば、PROF-eq2で)ΔIを導出するために使用される「Δvy(x,y)」を指すことができる。
a.例えば、numY及び/又はdenoYは、vyがBDOFでbdofOffsetを導出するために使用される「vy」、又はPROFでΔIを導出するために使用される「Δvy(x,y)」を指すかどうかに応じて、セットされてもよい。
b.例えば、PROFでΔIを導出するために使用される「Δvy(x,y)」である場合に、numYは、PROFで(例えば、PROF-eq1で)アフィンパラメータから導出されたΔvy(x,y)に等しくセットされ得る。
c.例えば、PROFでΔIを導出するために使用される「Δvy(x,y)」である場合に、denoYは、1などの固定数に等しくセットされ得る。
h.一例で、異なるツール(例えば、BDOF及びPROF)で使用されるMVDの水平及び/又は垂直成分は、最初に先行技術を用いて導出され、次いで、ツールに関連した所与の候補セットに属しているように更に変更されてもよい。変更プロセスは統合されてもよい。
i.代替的に、異なるツールで使用されるMVDの導出プロセスは、直接に統合されてもよい。
ii.一例で、BDOF及びPROFで使用されるMVDの水平及び/又は垂直成分は、最初に先行技術を用いて導出され、ツールに関連した所与の候補セットに属しているように更に変更されてもよい。
1.代替的に、更に、異なる入力が、統合された変更プロセスを呼び出すために使用されてもよい。
2.例えば、これらの値は、ビュレット12.g.vで記載されているように導出されてもよい。入力は、分子及び分母であり、出力は、ゼロ又はKm若しくは-Kmの形を取る値(K及びmは整数であり、例えば、K=2である)のどちらか一方である導出されたMVD値である。
3.一例で、PROFで動きベクトル差分を導出するときに、分子は、夫々変更される前の元のΔvx(x,y)又はΔvy(x,y)(例えば、セクション2.6で導出される値)であり、分母は1である。
4.一例で、BDOFで動きベクトル差分を導出するときに、分子は、夫々変更される前の元のvx又はvy(例えば、BDOFにおいて8.5.7.4の式8-867及び式8-868で導出される値)であり、分母は1である。
5.一例で、元のΔvx(x,y)又はΔvy(x,y)は、分子として使用される前に数Nだけ左シフトされてもよく、分母は1<<Nである。この場合に、出力されたMVDは、使用される前にNだけ右シフトされるべきである。
6.一例で、元のvx又はvy(例えば、BDOFにおいて8.5.7.4の式8-867及び式8-868で導出される値)分子として使用される前に数Nだけ左シフトされてもよく、分母は1<<Nである。この場合に、出力されたMVDは、使用される前にNだけ右シフトされるべきである。
i.一例で、ビュレット11.b又は/及び11.cでvx又はvyを決定するときに、コストは、候補値ごとに計算され、最小コストを達成する値が、vx又はvyとして選択される。
i.例えば、コスト
j.所与の候補セットは、予め定義されてもよい。
i.一例で、vx及び/又はvyは、-2^x/2^Xからのみであってよく、xは範囲[-(X-1),(X-1)]に含まれる。
1.代替的に、更に、所与の候補セットは、vx及び/又はvyが0に等しい候補も含んでもよい。
2.代替的に、更に、所与の候補セットは、2^x/2^Xの形を取る値も含んでもよい。
ii.一例で、所与のMVD候補セット内の候補の水平及び/又は垂直成分(例えば、BDOFで使用されるvx及び/又はvyの値や、PROFでのΔvx(x,y)又はΔvy(x,y))は、S×(2m/2N)の形しか取ることができず、Sは1又は-1である。
1.一例で、N=6である。他の例では、Nは0、2又は4であってもよい。
2.一例で、mは範囲[a,b]内にあり、例えば、a=0及びb=N、あるいは、a=0及びb=N-1である。
3.代替的に、更に、所与のMVD候補セットは、S×(2m/2N)に加えて0も含んでもよい。
4.代替的に、更に、所与のMVD候補セットは、S×(2m/2N)及び/又は0に加えて、(-S)×(2n/2Q)の形を取る値を含んでもよい。
a.一例で、Q=6である。
b.一例で、nは範囲[a,b]内にあり、例えば、a=0及びb=Q、あるいは、a=0及びb=Q-1である。
5.一例で、所与のMVD候補セット内の候補の水平及び/又は垂直成分(例えば、BDOFで使用されるvx及び/又はvyの値や、PROFでのΔvx(x,y)又はΔvy(x,y))は、{32/64,16/64,8/64,4/64,2/64,1/64,0,1/64,2/64,4/64,8/64,16/64,32/64}からのみであってよい。
iii.一例で、vx及びvyは、{-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32}/64からのみであってよい。
iv.一例で、vx又は/及びvy又は/及びΔvx(x,y)又は/及びΔvy(x,y)は、{-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32}からのみであってよい。
v.一例で、vx又は/及びvy又は/及びΔvx(x,y)又は/及びΔvy(x,y)は、{-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32}/32からのみであってよい。
vi.一例で、Δvx(x,y)又は/及びΔvy(x,y)は、{-64,-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32,64}からのみであってよい。
vii.一例で、vx又は/及びvy又は/及びΔvx(x,y)又は/及びΔvy(x,y)は、{-64,-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32、64}/64からのみであってよい。
viii.一例で、vx又は/及びvy又は/及びΔvx(x,y)又は/及びΔvy(x,y)は、{-128,-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32,128}/128からのみであってよい。
ix.一例で、vx又は/及びvy又は/及びΔvx(x,y)又は/及びΔvy(x,y)は、{-128,-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32,128}からのみであってよい。
k.所与の候補セットは、コーディングされた情報(例えば、ブロック寸法、モード)に依存してもよい。
i.それは、ブロックがBDOF又はPROFを有効にしてコーディングされているかどうかに依存してもよい。
l.所与の候補セットは、シーケンス/ピクチャ/スライス/ブリック/他のビデオユニットレベルでシグナリングされてもよい。
m.一例で、BDOF又はPROFでのサンプルに対する精緻化プロセスは、乗算演算を含む。
i.例えば、S’は、S’=S+((Gx+OffsetX)<<Bx)+((Gy+OffsetY)<<By)+OffsetSとして導出され、S及びS’は、精緻化の前及び後のサンプル値である。OffsetX、OffsetY、及びOffsetSは、0などの整数である。
1.一例で、S’はクリップされてもよい。
2.一例で、S’は右シフトされてもよい。
a.代替的に、BDOFでのvx又は/及びvy又は/及びPROFでのΔvx(x,y)又は/及びΔvy(x,y)は、最初に提案されている方法によって、ゼロ又はKm若しくは-Kmの形を取る値に変換され、それから、予め定義された範囲(vx又は/及びvy又は/及びΔvx(x,y)又は/及びΔvy(x,y)について異なった範囲が使用されてもよい)にクリップされてもよい。
i.代替的に、更に、範囲は、[-Km1,Kn]又は[Km2,Kn]の形を取るべきである。
b.一例で、上記の方法での分子又は/及び分母は、使用される前に、予め定義された範囲にクリップされてもよい。
a.一例で、異なるthBIOが、水平MVD及び垂直MVDをクリップする場合に使用されてもよい。
b.一例で、thBIOは、ピクチャの寸法に依存してもよい。例えば、より大きいthBIOは、より大きい寸法を有しているピクチャに対して使用され得る。
c.一例で、thBIOは、ブロックのデコードされた動き情報に依存してもよい。
i.例えば、より大きいthBIOは、より大きい絶対MV、例えば、MV[0]の「絶対MV」又はMV[1]の「絶対MV」又はsumAbsHorMv又はsumAbsVerMv又はsumAbsHorMv+sumAbsVerMvを有するブロックに対して使用されてもよい。
ii.例えば、より大きいthBIOは、より大きい絶対水平MV、例えば、MV[0]の「絶対水平MV」又はMV[1]の「絶対水平MV」又はsumAbsHorMv又はmaxHorVerMvを有するブロックに対して水平MVDをクリップするために使用されてもよい。
iii.例えば、より大きいthBIOは、より大きい絶対垂直MV、例えば、MV[0]の「絶対垂直MV」又はMV[1]の「絶対垂直MV」又はsumAbsVerMv又はmaxAbsVerMvを有するブロックに対して水平MVDをクリップするために使用されてもよい。
d.クリッピングパラメータは、エンコーダで決定されて、シーケンスパラメータセット(SPS)又は/及びビデオパラメータセット(VPS)又は/及び適応パラメータセット(APS)又は/及びピクチャパラメータセット(PPS)又は/及びスライスヘッダ又は/及びタイルグループヘッダでデコーダへシグナリングされてもよい。
a.一例で、XはDMVRである。
b.一例で、Xはアフィンインターモードである。
c.一例で、より大きいクリッピングパラメータ、例えば、式(7)及び式(8)の閾値thBIOは、Xがシーケンス/ビデオ/ピクチャ/スライス/タイルグループ/タイル/ブリック/コーディングユニット/CTB/CU/ブロックに対して無効にされる場合に用いられ得る。
i.代替的に、更に、より小さいクリッピングパラメータは、Xがシーケンス/ビデオ/ピクチャ/スライス/タイルグループ/タイル/ブリック/コーディングユニット/CTB/CU/ブロックに対して有効にされる場合に用いられ得る。
d.一例で、N=M=31である。
e.一例で、N=M=63である。
f.一例で、N=M=15である。
g.一例で、N=M=7である。
h.一例で、N=M=3である。
i.一例で、N=M=127である。
j.一例で、N=M=255である。
k.一例で、M=Nであり、2×Mは2Kの値に等しくない(Kは整数である)。
l.一例で、MはNに等しくなく、(M+N)は2Kの値に等しくない(Kは整数である)。
m.代替的に、BDOF及びPROFで導出されたMVDは、異なる範囲にクリップされてもよい。
i.例えば、BDOFで導出されたMVDは[-31,31]にクリップされ得る。
ii.例えば、BDOFで導出されたMVDは[-15,15]にクリップされ得る。
iii.例えば、BDOFで導出されたMVDは[-63,63]にクリップされ得る。
iv.例えば、BDOFで導出されたMVDは[-127,127]にクリップされ得る。
v.例えば、PROFで導出されたMVDは[-63,63]にクリップされ得る。
vi.例えば、PROFで導出されたMVDは[-31,31]にクリップされ得る。
vii.例えば、PROFで導出されたMVDは[-15,15]にクリップされ得る。
viii.例えば、PROFで導出されたMVDは[-127,127]にクリップされ得る。
n.一例で、PROFでのMVDは、特定の位置についてのみ(例えば、セクション2.6でのPROF-eq1に従って)アフィンモデルを用いて導出され得、そのようなMVDは、他の位置のMVDを導出するために使用されてもよい。MVDはPROFにおいてサイズW×Hで導出されるとする。
o.一例で、MVDは、上側のW×H/2部分についてのみアフィンモデルを用いて導出され得、下側のW×H/2部分のMVDは、上側のW×H/2部分のMVDから導出され得る。例は図11に示されている。
p.一例で、MVDは、下側のW×H/2部分についてのみアフィンモデルを用いて導出され得、上側のW×H/2部分のMVDは、下側のW×H/2部分のMVDから導出され得る。
q.一例で、MVDは、左側のW×H/2部分についてのみアフィンモデルを用いて導出され得、右側のW×H/2部分のMVDは、左側のW×H/2部分のMVDから導出され得る。
r.一例で、MVDは、右側のW×H/2部分についてのみアフィンモデルを用いて導出され得、左側のW×H/2部分のMVDは、右側のW×H/2部分のMVDから導出され得る。例は図11に示されている。
s.一例で、更に、アフィンモデルを用いて導出されたMVDは、他の位置のMVDを導出するために使用される前に、予め定義された精度に丸められかつ/あるいは予め定義された範囲にクリップされてもよい。
i.例えば、上側のW×H/2部分のMVDがアフィンモデルを用いて導出される場合に、かようなMVDは、下側のW×H/2部分のMVDを導出するために使用される前に、予め定義された精度に丸められかつ/あるいは予め定義された範囲にクリップされ得る。
t.一例で、x=0,...,W-1、y=H/2,...,H-1について、位置(x,y)のMVDは、次のように導出される。MVDh及びMVDvは、夫々、水平及び垂直MVDである。
i.MVDh(x,y)=-MVDh(W-1-x,H-1-y)
ii.MVDv(x,y)=-MVDv(W-1-x,H-1-y)
a.一例で、NはM-1に等しくてよい。
i.一例で、Mは2Kに等しい。例えば、Kは11、12、13、14又は15に等しくてよい。
ii.代替的に、NはMに等しくてもよい。
b.一例で、予め定義された範囲は、現在の色成分のビットデプスに依存してもよい。
i.一例で、Mは2Kに等しく、K=Max(K1,BitDepth+K2)であり、BitDepthは、現在の色成分(例えば、ルーマ、Cb若しくはCr、又はR、G若しくはB)のビットデプスである。Max(X,Y)は、X及びYのうちの大きい方を返す。
ii.一例で、Mは2Kに等しく、K=Min(K1,BitDepth+K2)であり、BitDepthは、現在の色成分(例えば、ルーマ、Cb若しくはCr、又はR、G若しくはB)のビットデプスである。Min(X,Y)は、X及びYのうちの小さい方を返す。
iii.例えば、K1は11、12、13、14又は15に等しくてよい。
iv.例えば、K2は-2、-1、0、1、2又は3に等しくてよい。
v.一例で、3つの色成分が同じビットデプスを共有するので、範囲は、ブロック内のサンプルの内部ビットデプス又は入力ビットデプスに完全に依存する。
c.一例で、予め定義された範囲は、PROFで使用されている範囲と同じである。
d.代替的に、更に、BDOFでの精緻化されたサンプル(例えば、精緻化される前のサンプルにオフセットをプラスしたもの)は、更にクリップされなくてもよい。
a.一例で、変換スキップコーディングされたブロックについて(変換はバイパスされるか、あるいは、恒等変換が適用される)、CGサイズは、ブロックが(2×M)(例えば、M=8)よりも多いサンプルを含むかどうか及び/又は残差ブロックサイズに依存してもよい。
i.一例で、ブロックサイズがA×N(N>=M)である場合に、CGサイズはA×Mにセットされる。
ii.一例で、ブロックサイズがN×A(N>=M)である場合に、CGサイズはM×Aにセットされる。
iii.一例で、ブロックサイズがA×N(N<M)である場合に、CGサイズはA×Aにセットされる。
iv.一例で、ブロックサイズがN×A(N<M)である場合に、CGサイズはA×Aにセットされる。
v.一例で、A=2である。
b.一例で、非TSコーディングされたブロックについて、CGサイズは、ブロックの幅又は高さのどちらかがKに等しいかどうかに依存してもよい。
i.一例で、幅又は高さのどちらかがKに等しい場合に、CGサイズはK×Kにセットされる(例えば、K=2)。
ii.一例で、幅及び高さのうちの最小値がKに等しい場合に、CGサイズはK×Kにセットされる(例えば、K=2)。
c.一例で、2×2のCGサイズは、変換スキップモード及び正則残差コーディングの両方で2×N又は/及びN×2の残差ブロックに対して使用され得る。
d.一例で、2×8のCGサイズは、変換スキップモード及び正則残差コーディングの両方で2×N(N>=8)の残差ブロックに対して使用され得る。
i.代替的に、2×4のCGサイズは、変換スキップモード及び正則残差コーディングの両方で2×N(N>=8)の残差ブロックに対して使用され得る。
ii.代替的に、2×4のCGサイズは、変換スキップモード及び正則残差コーディングの両方で2×N(N>=4)の残差ブロックに対して使用され得る。
e.一例で、8×2のCGサイズは、変換スキップモード及び正則残差コーディングの両方で2×N(N>=8)の残差ブロックに対して使用され得る。
i.4×2のCGサイズは、変換スキップモード及び正則残差コーディングの両方で2×N(N>=8)の残差ブロックに対して使用され得る。
ii.4×2のCGサイズは、変換スキップモード及び正則残差コーディングの両方で2×N(N>=4)の残差ブロックに対して使用され得る。
a.一例で、PROFは、1つの参照ピクチャが現在のピクチャとは異なる分解能(幅又は高さ)と関連付けられる場合に、無効にされてもよい。
b.一例で、現在のブロックが片予測コーディングであるならば、PROFは、参照ピクチャが現在のピクチャとは異なる分解能(幅又は高さ)と関連付けられる場合に、無効にされてもよい。
c.一例で、現在のブロックが双予測コーディングであるならば、PROFは、少なくとも1つの参照ピクチャが現在のピクチャとは異なる分解能(幅又は高さ)と関連付けられる場合に、無効にされてもよい。
d.一例で、現在のブロックが双予測コーディングであるならば、PROFは、全ての参照ピクチャが現在のピクチャとは異なる分解能(幅又は高さ)と関連付けられる場合に、無効にされてもよい。
e.一例で、現在のブロックが双予測コーディングであるならば、PROFは、全ての参照ピクチャが現在のピクチャとは異なっていても同じ分解能(幅又は高さ)と関連付けられる場合に、有効にされてもよい。
f.上記の方法を有効にすべきかどうかは、現在のブロックのCPMVや、参照ピクチャと現在のピクチャとの間の分解能比などの、現在のピクチャのコーディングされた情報に依存してもよい。
a.一般化された双予測(generalized bi-prediction,GBi、別名BCW)が有効にされている。
b.重み付き予測が有効にされている。
c.代替の半ピクセル補間フィルタが適用されている。
a.例えば、次の5×5菱形MVD領域が探索されてもよく、例えば、以下に挙げられているMVD値は、整数ピクセルの単位にある。
a.一例で、W>=H+TH(TH>=0)である場合に、水平MVD探索範囲(例えば、MVD_Hor_TH1+MVD_Hor_TH2+1)は、垂直MVD探索範囲(例えば、MVD_Ver_TH1+MVD_Ver_TH2+1)以上であってよい。
i.代替的に、W+TH<=Hである場合に、水平MVD探索範囲は、垂直MVD探索範囲よりも大きくてもよい。
ii.例えば、MVD_Hor_TH1及びMVD_Hor_TH2は2に等しくセットされ、MVD_Ver_TH1及びMVD_Ver_TH2は1に等しくセットされる。
iii.例えば、次の5×3MVD領域が探索されてもよく、MVD値は整数ピクセルの単位にある。
i.代替的に、W>=H+TH(TH>=0)である場合に、水平MVD探索範囲は、垂直MVD探索範囲よりも小さくてもよい。
ii.例えば、MVD_Hor_TH1及びMVD_Hor_TH2は1に等しくセットされ、MVD_Ver_TH1及びMVD_Ver_TH2は2に等しくセットされる。
iii.例えば、次の3×5MVD領域が探索されてもよく、MVD値は整数ピクセルの単位にある。
i.例えば、次の5×5MVD領域が探索されてもよく、MVD値は整数ピクセルの単位にある。
a.一例で、sumAbsHorMv>=sumAbsVerMv+TH(TH>=0)である場合に、水平MVD探索範囲は、垂直MVD探索範囲よりも大きくてもよい。
i.代替的に、sumAbsHorMv+TH<=sumAbsVerMvである場合に、水平MVD探索範囲は垂直MVD探索範囲よりも大きくてもよい。
ii.例えば、MVD_Hor_TH1及びMVD_Hor_TH2は2に等しくセットされ、MVD_Ver_TH1及びMVD_Ver_TH2は1に等しくセットされる。
iii.例えば、次の5×3MVD領域が探索されてもよく、MVD値は整数ピクセルの単位にある。
i.代替的に、sumAbsVerMv+TH<=sumAbsHorMvである場合に、水平MVD探索範囲は垂直MVD探索範囲よりも小さくてもよい。
ii.例えば、MVD_Hor_TH1及びMVD_Hor_TH2は1に等しくセットされ、MVD_Ver_TH1及びMVD_Ver_TH2は2に等しくセットされる。
iii.例えば、次の3×5MVD領域が探索されてもよく、MVD値は整数ピクセルの単位にある。
i.例えば、次の5×5MVD領域が探索されてもよく、MVD値は整数ピクセルの単位にある。
i.一例で、参照ピクチャが現在のピクチャから遠く離れている場合には、より大きい探索範囲が利用され得る。
ii.一例で、第1参照ピクチャが第2参照ピクチャよりも低いQPを有している場合には、より大きい探索範囲が第1参照ピクチャについては利用され得る。
e.一例で、水平及び/又は垂直探索範囲は、動きベクトルに依存してもよい。
i.一例で、動きベクトルの絶対値が大きい場合には、より大きい探索範囲が利用され得る。
a.一例で、最良の整数位置の左右の位置が両方とも探索範囲に含まれる場合に、水平サブペルMVDが、例えば、パラメトリックエラーサーフェスフィット法を用いて、導出され得る。例は図9に表されている。
b.一例で、最良の整数位置の上下の位置が両方とも探索範囲に含まれる場合に、垂直サブペルMVDが、例えば、パラメトリックエラーサーフェスフィット法を用いて、導出され得る。例は図9に表されている。
c.一例で、サブペルMVDは如何なる位置についても導出されてもよい。
i.例えば、最良の整数位置及びそのN(例えば、N=4)個の最も近い隣接した位置のコストが、水平及び垂直サブペルMVDを導出するために使用され得る。
ii.例えば、最良の整数位置及びそのN(例えば、N=4)個の最も近い隣接した位置のコストが、水平サブペルMVDを導出するために使用され得る。
iii.例えば、最良の整数位置及びそのN(例えば、N=4)個の最も近い隣接した位置のコストが、垂直サブペルMVDを導出するために使用され得る。
iv.パラメトリックエラーサーフェスフィットは、サブペルMVDを導出するために使用されてもよい。
d.代替的に、更に、サブペルMVDが特定の方向(例えば、水平又は/及び垂直方向)で導出されない場合には、それはゼロに等しくセットされる。
a.代替的に、サブペルMVD導出は、BDOFがピクチャ/スライス/タイルグループ/タイル/CTU/CUについて許可されない場合に、DMVRでは許可され得る。
削除されたテキストは、二重括弧によりマークされ(例えば、[[a]]は、文字「a」の削除を表す)、新たに加えられた部分は、太字イタリック体で強調表示される。
BDOF及びPROFでの動きベクトル精緻化をゼロであるか又はKm若しくは-Kmの形を取るよう制限する例。
BDOF及びPROFでのMVDの[-31,31]へのクリッピングの例が記載される。
PROFにおいて上側のW×H/2部分のMVDから下側のW×H/2部分のMVDを導出する例。
ビデオ処理ユニットと該ビデオ処理ユニットのビットストリーム表現との間の変換中に、前記ビデオ処理ユニットと関連した動き情報を導出するステップと、
精緻化動作が適用される前記ビデオ処理ユニットのサブ領域について、前記動き情報を精緻化すべきかどうかを決定するステップと、
前記決定に基づき、前記精緻化動作を前記ビデオ処理ユニットに適用して、前記動き情報を精緻化するステップと
を有する方法。
前記精緻化動作は、デコーダ側動きベクトル導出動作、デコーダ側動きベクトル精緻化(DMVR)動作、サンプル精緻化動作、又はオプティカルフローに基づいた予測精緻化動作を含む、
方法。
前記決定するステップは、前記ビデオ処理ユニットと関連したコーディング情報に基づく、
方法。
前記ビデオ処理ユニットと関連した前記コーディング情報は、動きベクトル、参照ピクチャのピクチャオーダーカウント(POC)値、マージインデックス、動きベクトル予測子(MVP)インデックス、又はSBTモードが前記ビデオ処理ユニットによって用いられるかどうか、のうちの少なくとも1つを含む、
方法。
前記決定するステップは、第1参照リストを参照する第1動きベクトルと、第2参照リストを参照する第2動きベクトルとの間の関係に基づき、
前記第1動きベクトル及び前記第2動きベクトルは、前記精緻化動作の適用前に取得される、
方法。
前記精緻化動作の適用は複数の段階で実行され、精緻化された領域は、前記複数の段階のステップの数に基づいて決定されたサイズを有する、
方法。
前記精緻化動作の適用は、
前記精緻化動作を第1サブ領域に適用するステップと、
前記精緻化動作を、前記第1サブ領域とは異なる第2サブ領域に適用するステップと
を含み、
前記ビデオ処理ユニット内の精緻化された動き情報は、前記第1サブ領域及び前記第2サブ領域において互いに異なる、
方法。
前記精緻化動作の結果に基づき、双方向オプティカルフロー(BIO)を適用すべきかどうかを決定するステップを更に含む、
方法。
前記精緻化動作の適用は、最終的な予測サンプルを生成するようN対のMVD(Motion Vector Differences)を選択するステップを含み、
Nは1よりも大きい自然数であり、各対は、異なるリストの2つの動きベクトル差分を含む、
方法。
前記精緻化動作は、MMVD(merge with MVD)とともに使用され、
MMVD距離が、前記精緻化動作中に特定の値として保持される、
方法。
導出されたMVD、空間勾配、又は時間勾配のうちの少なくとも1つに基づき、前記ビデオ処理ユニットのサンプル又はサブ領域についてBDOFを無効にするステップを更に有する、
方法。
BDOFにおける導出されたMVDがクリッピング動作の後に変化する場合に、クリップされたMVDについてコストを計算するステップを更に有する、
方法。
前記変換は、前記現在のビデオ処理ユニットから前記ビットストリーム表現を生成すること又は前記ビットストリーム表現から前記現在のビデオ処理ユニットを生成することを含む、
方法。
ビデオ処理ユニットと関連した動き情報を取得するステップと、
前記ビデオ処理ユニットのサブ領域について、前記ビデオ処理ユニットの前記動き情報を精緻化すべきかどうかを決定するステップであり、前記ビデオ処理ユニットは、精緻化動作を適用するユニットである、前記決定するステップと、
前記決定に基づき、前記ビデオ処理ユニットに前記精緻化動作を適用せずに前記動き情報を使用するステップと
を有する方法。
前記精緻化動作は、デコーダ側動きベクトル導出動作、デコーダ側動きベクトル精緻化(DMVR)動作、サンプル精緻化動作、又はオプティカルフローに基づいた予測精緻化動作を含む、
方法。
前記決定するステップは、前記ビデオ処理ユニットと関連したコーディング情報に基づき、
前記コーディング情報は、動きベクトル、参照ピクチャのピクチャオーダーカウント(POC)値、マージインデックス、動きベクトル予測子(MVP)インデックス、又はSBTモードが前記ビデオ処理ユニットによって用いられるかどうか、のうちの少なくとも1つを含む、
方法。
双方向オプティカルフロー(BIO)を含む前記精緻化動作は、前記ビデオ処理ユニットがアドバンスド動きベクトル予測(AMVP)モードでコーディングされている場合に省略される、
方法。
前記精緻化動作は、2つの動きベクトルの和又はMV成分の絶対値に基づき省略される、
方法。
前記精緻化動作は、SBTが前記ビデオ処理ユニットによって用いられる場合に省略される、
方法。
前記決定するステップは、第1参照リストを参照する第1動きベクトルと、第2参照リストを参照する第2動きベクトルとの間の関係に基づき、
前記第1動きベクトル及び前記第2動きベクトルは、前記精緻化動作の適用前に取得される、
方法。
導出されたMVD、空間勾配、又は時間勾配のうちの少なくとも1つに基づき、前記ビデオ処理ユニットのサンプル又はサブ領域についてBDOFを無効にするステップを更に有する、
方法。
BDOFにおける導出されたMVDがクリッピング動作の後に変化する場合に、クリップされたMVDについてコストを計算するステップを更に有する、
方法。
現在のビデオブロックと該現在のビデオブロックのビットストリーム表現との間の変換中に、1つ以上のベクトル精緻化ツール及び候補動きベクトル差分(MVD)に基づき、導出された動きベクトル差分を精緻化するステップと、
前記導出された動きベクトル差分と、前記ビットストリーム表現でシグナリングされる動きベクトルとを用いて、前記変換を実行するステップと
を有する方法。
前記精緻化するステップは、y成分が変更されておりx成分が変更されていないMVDが使用される第1ステップと、x成分が変更されておりy成分が変更されていないMVDが使用される第2ステップとを有する2ステッププロセスを有する、
方法。
前記候補MVDは、(vx+offsetX,vy)を含み、
offsetXは範囲[-ThX1,ThX2]内にあり、ThX1及びThX2は非負整数値であり、前記導出されたMVDは(vx、vy)である、
方法。
前記候補MVDは、(vx,vy+offsetY)を含み、
offsetYは範囲[-ThY1,ThY2]内にあり、ThY1及びThY2は非負整数値であり、前記導出されたMVDは(vx、vy)である、
方法。
前記変換は、双方向オプティカルフローコーディングツールを使用する、
方法。
現在のビデオブロックと該現在のビデオブロックのビットストリーム表現との間の変換中に、導出された動きベクトル差分(DMVD)を候補セットに制限するステップと、
前記DMVDを前記候補セットに制限した結果を用いて前記変換を実行するステップと
を有する方法。
前記候補セットは候補(vx,vy)を含み、
vx及び/又はvyはKmの形を取り、mは整数である、
方法。
ビデオの現在のビデオブロックのビットストリーム表現と前記現在のビデオブロックとの間の変換のために、動きベクトル差分が範囲[-N,M]にクリップされることを決定するステップを有する方法。クリップすることの決定は、本明細書で更に記載されるように、規則に基づいて実行される。方法は、決定に基づき前記変換を実行するステップを更に含み、規則は、予測精緻化オプティカルフロー(PROF)及び双方向オプティカルフローツールを用いた変換のために同じ範囲を使用することを定める。
N=M=31である、
方法。
N=M=255である、
方法。
ビデオの現在のビデオブロックのビットストリーム表現と前記現在のビデオブロックとの間の変換のために、前記現在のビデオブロックの第2サンプルの動きベクトル差分に基づき第1サンプルの動きベクトル差分を決定するステップと、
前記決定に基づき前記変換を実行するステップと
を有し、
前記変換は、オプティカルフローコーディング又は復号化ツールに基づく、
方法。
前記第1サンプル及び前記第2サンプルは、異なるオプティカルフローコーディングツールを使用する、
方法。
現在のビデオブロックのビットストリーム表現と前記現在のビデオブロックとの間の変換のために予測精緻化オプティカルフロー(PROF)ツールの使用を有効にすべきかどうかを決定するステップであり、前記変換はオプティカルフローコーディングツールを使用する、前記決定するステップと、
前記決定に基づき前記変換を実行するステップと
を有する方法。
前記決定するステップは、前記変換で使用される参照ピクチャが、前記現在のビデオブロックを含む現在のピクチャの寸法とは異なる寸法を有していることにより、前記PROFツールの使用を無効にする、
方法。
前記決定するステップは、前記変換が双予測的予測を使用し、両方の参照ピクチャが同じ寸法を有していることにより、前記PROFツールを有効にする、
方法。
前記変換は、前記現在のビデオブロックをエンコードすることによって前記ビットストリーム表現を生成することを有する、
方法。
前記変換は、前記ビットストリーム表現をデコードすることによって前記現在のビデオブロックを生成することを有する、
方法。
プロセッサと、命令を有する非一時的なメモリとを有し、
前記命令は、前記プロセッサによって実行されると、前記プロセッサに、箇条1乃至39のうちいずれか1つに記載の方法を実施させる、
装置。
箇条1乃至39のうちいずれか1つに記載の方法を実行するためのプログラムコードを含む、コンピュータプログラム製品。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、少なくとも1つの動きベクトルオフセットが前記現在のビデオブロック内の領域について導出されるオプティカルフローに基づいた方法を用いて前記現在のビデオブロックの動き情報が精緻化されることを決定するステップと、
N及びNが規則に基づいた整数であるとして、前記少なくとも1つの動きベクトルオフセットを範囲[-N,M]にクリップするステップと、
前記少なくとも1つの動きベクトルオフセットに基づき前記変換を実行するステップと
を有する方法。
前記動きベクトルオフセットは、前記現在のビデオブロック内の前記領域について参照サンプルを精緻化するために使用される、
方法。
前記オプティカルフローに基づいた方法は、アフィン動きモデルによりブロックに適用される予測精緻化オプティカルフロー(PROF)方法、又は双方向オプティカルフロー(BDOF)方法、のうちの少なくとも1つを有する、
方法。
前記現在のビデオブロック内の前記領域は、前記現在のビデオブロックの全体又は前記現在のビデオブロック内のサブブロックである、
方法。
前記規則は、前記少なくとも1つの動きベクトルオフセットがオプティカルフロー計算を用いて導出されるPROF方法と、前記少なくとも1つの動きベクトルオフセットが空間勾配及び/又は時間勾配を用いて導出されるBDOF方法とを用いた前記変換のために同じ範囲又は異なる範囲を使用することを定める、
方法。
前記動きベクトルオフセットは、水平成分及び垂直成分を有し、
前記少なくとも1つの動きベクトルオフセットのクリッピングは、垂直成分及び/又は水平成分を前記範囲にクリップすることを有する、
方法。
N及びMは、2Kに等しくない同じ値を有し、Kは整数である、
方法。
前記同じ値は、(2K-1)に等しく、Kは整数である、
方法。
前記同じ値は、31、63、15、7、3、127、又は255、のうちの1つである、
方法。
MはNに等しく、2×Mは2Kの値に等しくなく、Kは整数である、
方法。
前記規則は、前記動きベクトルオフセットが、前記BDOFを用いた前記変換のために、[-31,31]、[-15,15]、[-63,63]、又は[-127,127]、のうちの1つにクリップされる、ことを定める、
方法。
前記規則は、前記動きベクトルオフセットが、前記PROFを用いた前記変換のために、[-63,63]又は[-31,31]のうちの1つにクリップされる、ことを定める、
方法。
MはNに等しくなく、MとNとの合計は2Kの値に等しくなく、Kは整数である、
方法。
動き情報を精緻化するために使用されるデコーダ側動きベクトル精緻化(DMVR)動作中に、精緻化された動きベクトルとして、ビデオの現在のビデオブロックと関連した1つ以上の動きベクトル差分を用いて類似度一致関数を適用した結果に等しい動き情報を選択するステップと、
前記精緻化された動きベクトルを用いて、前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を有する方法。
前記類似度一致関数は、平均除去絶対差分和(MRSAD)、絶対差分和(SAD)、又は絶対変換差分和(SATD)を含む、
方法。
前記動き情報は、スケーリング係数を用いて乗算、除算、加算、又は減算のうちの1つを実行することによって、変更される、
方法。
前記スケーリング係数は、規則に従って範囲[-M,N]内で許される動きベクトル差分(MVD)に依存し、M及びNは0よりも大きい整数である、
方法。
ビデオの現在のビデオブロックの特性に基づき動き情報を精緻化する精緻化動作の適用に関する決定を行うステップと、
前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を、前記決定に基づき実行するステップと
を有する方法。
前記精緻化動作は、デコーダ側動きベクトル導出動作、デコーダ側動きベクトル精緻化(DMVR)動作、サンプル精緻化動作、又はオプティカルフローに基づいた予測精緻化動作、のうちの少なくとも1つを含む、
方法。
前記現在のビデオブロックの前記特性は、前記現在のビデオブロックのコーディング情報に対応する、
方法。
前記現在のビデオブロックの前記コーディング情報は、動きベクトル、参照ピクチャのピクチャオーダーカウント(POC)値、マージインデックス、動きベクトル予測子(MVP)インデックス、又はサブブロック変換(SBT)モードが前記現在のビデオブロックによって用いられるかどうか、のうちの少なくとも1つを含む、
方法。
前記現在のビデオブロックの前記コーディング情報は、前記現在のビデオブロックがアドバンスド動きベクトル予測(AMVP)モード又はマージモードでコーディングされているかどうかを含む、
方法。
前記精緻化動作は、デコーダ側動きベクトル精緻化(DMVR)動作及び/又は双方向オプティカルフロー(BDOF)動作に対応し、
前記精緻化動作は、2つの動きベクトルの和又は動きベクトルの絶対値に依存して有効にされる、
方法。
前記精緻化動作は、デコーダ側動きベクトル精緻化(DMVR)動作及び/又は双方向オプティカルフロー(BDOF)動作に対応し、
前記精緻化動作は、マージインデックス又は動きベクトル予測子(MVP)インデックスを指定する規則に従って許可される、
方法。
前記精緻化動作は、デコーダ側動きベクトル精緻化(DMVR)動作及び/又は双方向オプティカルフロー(BDOF)動作に対応し、
前記精緻化動作は、サブブロック変換(SBT)モードが前記現在のビデオブロックによって用いられている場合に許可されない、
方法。
前記精緻化動作は、デコーダ側動きベクトル精緻化(DMVR)動作及び/又は双方向オプティカルフロー(BDOF)動作に対応し、
前記精緻化動作は、サブブロック変換(SBT)モードで非ゼロ残差を含むサブパーティションについて許可されるか又は許可されないかである、
方法。
前記現在のビデオブロックの前記特性は、第1参照リストを参照する第1動きベクトルと、第2参照リストを参照する第2動きベクトルとの間の関係に対応し、
前記第1動きベクトル及び前記第2動きベクトルは、前記精緻化動作の適用前に取得される、
方法。
前記精緻化動作は、前記第1動きベクトル及び前記第2動きベクトルが対称であるそれらの間の対称性の程度に応じて、規則に従って無効にされる、
方法。
前記対称性の程度は、
i)MV0とMV1との和がゼロ成分のみを有する場合に、対称であると、
ii)abs(MV0+MV1)<Th1である場合に、ほぼ対称であると、あるいは、
iii)abs(MV0+MV1)>Th2である場合に、対称でないと
決定され、
MV0及びMV1は、夫々、前記第1動きベクトル及び前記第2動きベクトルに対応し、
Th1及びTh2は整数である、
方法。
前記対称性の程度は、前記現在のビデオブロックの参照ピクチャのピクチャオーダーカウント(POC)値に基づき決定される、
方法。
Nが0よりも大きい整数であるとして、前記決定するステップは、Nの値が大きくなるにつれてN番目の精緻化ステップの精緻化領域のサイズが小さくなるように、複数のステップで前記精緻化動作を適用することを決定する、
方法。
Nが1よりも大きい整数であるとして、前記決定は、最終的な予測サンプルを生成するようN対の動きベクトル差分を選択することによって前記精緻化動作を適用することを含み、
前記動きベクトル差分の各対は、異なるリストごとの2つの動きベクトル差分を含む、
方法。
Nは2である、
方法。
前記動きベクトル差分の対は、前記現在のビデオブロックのサブ領域ごとに選択される、
方法。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、前記現在のビデオブロックと関連した動き情報を導出するステップと、
規則に従って、第1サブ領域及び第2サブ領域を含む前記現在のビデオブロックに精緻化動作を適用するステップであり、前記規則は、前記第1サブ領域及び前記第2サブ領域が、前記精緻化動作により互いに異なった動き情報を有することを許す、前記適用するステップと、
前記現在のビデオブロックの精緻化された動き情報を用いて前記変換を実行するステップと
を有する方法。
前記第1サブ領域は、デコードされた動き情報を有し、
前記第2サブ領域は、該第2サブ領域をカバーするビデオ領域に適用された前記精緻化動作の間に導出された精緻化された動きベクトルを有する、
方法。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、前記現在のビデオブロックと関連した動き情報を導出するステップと、
前記現在のビデオブロックのサブ領域について、前記動き情報を精緻化するために使用されたデコーダ側動きベクトル精緻化(DMVR)の出力に基づき、双方向オプティカルフロー(BIO)を用いた精緻化動作の適用可能性を決定するステップと、
前記決定に基づき前記変換を実行するステップと
を有する方法。
前記決定するステップは、前記DMVRによって精緻化された前記動き情報が前記サブ領域について変更されないままである場合に、前記BIOを用いた前記精緻化動作を無効にすると決定する、
方法。
2つの動き候補間の距離を定める距離テーブルを含む動きベクトル表現を含む動きベクトル差分によるマージモード(MMVD)でコーディングされた現在のビデオブロックと関連した動き情報を導出するステップと、
前記MMVDのために使用された距離をどのように精緻化すべきかを指定する規則に従って前記動き情報を精緻化するよう、デコーダ側動きベクトル精緻化(DMVR)を前記現在のビデオブロックに適用するステップと、
前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を有する方法。
前記規則は、前記DMVRによって精緻化された距離が前記距離テーブルに含まれない、ことを定める、
方法。
前記規則は、前記DMVRによって精緻化された距離又は粗く精緻化された距離が前記距離テーブルに含まれる場合に、前記DMVRを許されないことを定め、
前記粗く精緻化された距離は、最良の整数の動きベクトル差分を前記距離に加えることによって生成される、
方法。
前記規則は、特定の条件下にある全ての距離について前記DMVRを許すことを定める、
方法。
ビデオの現在のビデオブロックのサンプル又はサブブロックについて、規則に従って、導出された動き情報に基づき、該導出された動き情報が空間及び/又は時間勾配を用いて精緻化される双方向オプティカルフロー(BDOF)の適用可能性を決定するステップと
前記決定に基づき、前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を有する方法。
前記導出された動き情報は、動きベクトル差分、空間勾配、又は時間勾配、のうちの少なくとも1つを含む、
方法。
前記規則は、第1参照リスト内の予測サンプルと第2参照リスト内の予測サンプルとの間の差を増大させる前記導出された動き情報により、前記サンプルについて、前記BDOFを許されないことを定める、
方法。
前記規則は、第1参照リスト内の予測サブブロックと第2参照リスト内の予測サブブロックとの間の差を増大させる前記導出された動き情報により、前記サンプル又は前記サブブロックについて、前記BDOFを許されないことを定める、
方法。
前記導出された動き情報は、導出されたオフセットに対応し、該導出されたオフセットは、前記決定するステップのために使用される係数によってスケーリングされる、
方法。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、動きベクトル差分(MVD)を導出するステップと、
クリップされた動きベクトル差分を生成するよう、導出された前記動きベクトル差分にクリッピング動作を適用するステップと、
コスト関数を用いて、前記クリップされた動きベクトル差分のコストを計算するステップと、
規則に従って、前記導出された動きベクトル差分、前記クリップされた動きベクトル差分、又は前記コストのうちの少なくとも1つに基づき、前記導出された動きベクトル差分が空間及び/又は時間勾配を用いて精緻化される双方向オプティカルフロー(BDOF)動作を許されないと決定するステップと、
前記決定に基づき前記変換を実行するステップと
を有する方法。
前記計算するステップは、前記導出された動きベクトル差分(vx,vy)が前記クリッピング動作の後に(clipVx,clipVy)に変更される場合に、実行され、
(clipVx,clipVy)は、(vx,vy)とは異なる、
方法。
前記規則は、
1)costClipMvd>Th×costZeroMvd、又は
2)costClipMvd>Th×costDerivedMvd
である場合に、前記BDOFを許されないことを定め、
costDerivedMvd及びcostClipMvdは、夫々、前記導出された動きベクトル差分及び前記クリップされた動きベクトル差分のコストに対応する、
方法。
前記規則は、vx及びvyのうちの少なくとも一方が前記クリッピング動作の後に変更される場合に、前記BDOFを許されないことを定め、
(vx,vy)は、前記導出された動きベクトル差分である、
方法。
前記規則は、前記導出された動きベクトル差分(vx,vy)のx成分及びy成分のうちの少なくとも一方の絶対差、及び前記クリップされた動きベクトル差分(clipVx,clipVy)に基づき、前記BDOFを許されないことを定める、
方法。
前記コストを計算するステップは、特定の動きベクトル差分について実行され、
最終的な動きベクトル差分は、最小コスト値を有しているものとして決定される、
方法。
水平動きベクトル差分及び垂直動きベクトル差分は、前記動きベクトル差分が前記クリッピング動作の後に変化する場合に決定される、
方法。
コスト関数において共通の部分を有している複数の動きベクトル差分については、前記計算するステップは、前記共通の部分を繰り返さないよう実行される、
方法。
コスト関数において共通の部分を有している複数の動きベクトル差分については、前記共通の部分は、前記計算するステップの前に前記コスト関数から除かれる、
方法。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、動きベクトル差分を導出するステップと、
1つ以上の動きベクトル精緻化ツール及び候補動きベクトル差分(MVD)に基づき、導出された前記動きベクトル差分を精緻化するステップと、
精緻化された前記動きベクトル差分を用いて前記変換を実行するステップと
を有する方法。
前記精緻化するステップは、y成分が変更されx成分が変更されていないMVDが使用される第1ステップと、x成分が変更されy成分が変更されていないMVDが使用される第2ステップとを含むよう実行される、
方法。
前記候補MVDは、(vx+offsetX,vy)を含み、
offsetXは、範囲[-ThX1,ThX2]内にあり、
ThX1及びThX2は、非負整数値であり、
前記導出された動きベクトル差分は(vx,vy)である、
方法。
前記候補MVDは、(vx,vy+offsetY)を含み、
offsetYは、範囲[-ThY1,ThY2]内にあり、
ThY1及びThY2は、非負整数値であり、
前記導出された動きベクトル差分は(vx,vy)である、
方法。
前記導出された動きベクトル差分は(vx,vy)であり、
vx又はvyのどちらか一方が最初に精緻化される、
方法。
前記導出された動きベクトル差分は(vx,vy)であり、
vx及びvyは一緒に精緻化される、
方法。
前記導出された動きベクトル差分は(vx,vy)であり、
同数の候補MVDがvx及びvyから導出される、
方法。
前記精緻化された動きベクトル差分は、コスト関数を用いて取得された最小コスト値をもたらす、
方法。
ビデオの現在のビデオブロックと関連した導出された動きベクトル差分を候補セットに制限するステップであり、前記導出された動きベクトル差分は、前記現在のビデオブロックと関連した動き情報を精緻化する精緻化動作のために使用される、前記制限するステップと、
前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を、前記制限するステップの結果として前記導出された動きベクトル差分を用いて実行するステップと
を有する方法。
前記候補セットは、(1+MVDmaxX-MVDminX)の値よりも小さい許可された水平MVD候補の数、及び/又は(1+MVDmaxY-MVDminY)の値よりも小さい許可された垂直MVD候補の数を含み、
水平MVDの最大及び最小値は、MVDmaxX及びMVDminXで夫々表され、
垂直MVDの最大及び最小値は、MVDmaxY及びMVDminYで夫々表される、
方法。
前記候補セットは、前記精緻化動作の間に式を用いて取得される候補(vx,vy)を含み、
前記候補は、
1)mが整数であるとして、vx及びvyのうちの少なくとも一方がKmの形を取ること、又は
2)vx及びvyのうちの少なくとも一方がゼロであること
を満足する、
方法。
前記候補セットは、前記精緻化動作の間に式を用いて取得される候補(Δvx(,y),Δvy(x,y))を含み、
前記候補は、
1)mが整数であるとして、Δvx(x,y)及びΔvy(x,y)のうちの少なくとも一方がKmの形を取ること、又は
2)Δvx(x,y)及びΔvy(x,y)のうちの少なくとも一方がゼロであること
を満足する、
方法。
前記候補セットは、前記精緻化動作の間に式を用いて取得される候補(vx,vy)又は(Δvx(x,y),Δvy(x,y))を含み、
前記候補は、
1)vx、vy、Δvx(x,y)及びΔvy(x,y)のうちの少なくとも1つの絶対値がゼロであること、又は
2)mが整数であるとして、vx、vy、Δvx(x,y)及びΔvy(x,y)のうちの少なくとも1つがKmの形を取ること
を満足する、
方法。
前記候補セットは、前記精緻化動作の間に式を用いて取得される候補(vx,vy)又は(Δvx(x,y),Δvy(x,y))を含み、
前記候補は、
1)vx、vy、Δvx(x,y)及びΔvy(x,y)のうちの少なくとも1つがゼロであること、又は
2)mが整数であるとして、vx、vy、Δvx(x,y)及びΔvy(x,y)のうちの少なくとも1つがKm又は-Kmの形を取ること
を満足する、
方法。
前記導出された動きベクトル差分は、最初に、前記候補セットに制限されずに、最初に導出された動きベクトル差分として導出され、次いで、前記候補セットに制限される、
方法。
前記最初に導出された動きベクトル差分及び前記変更された動きベクトル差分は、X及びX’によって表され、
Xは,abs(vx)又はabs(vy)に等しく、X’は、sign(vx)又はsign(vy)から取得され、
abs(t)は、tの絶対値に帰る絶対値関数に対応し、sign(t)は、tの符号に応じて値を返す符号関数に対応する、
方法。
前記候補セットは、Kの累乗であり、vx及びvyのうちの少なくとも1つに依存する値を有し、
前記導出された動きベクトル差分は(vx,vy)である、
方法。
前記導出された動きベクトル差分は(vx,vy)であり、
vx及びvyのうちの少なくとも一方は最初に変更される、
方法。
前記最初に導出された動きベクトル差分は、logK(x)関数及びceil(y))関数を使用することによって変更され、
logK(x)は、底をKとするxの対数を返し、ceil(y)は、y以上の最小整数を返す、
方法。
前記最初に導出された動きベクトル差分は、floor(y)関数を使用することによって変更され、
floor(y)は、y以下の最大整数を返す、
方法。
前記最初に導出された動きベクトル差分は、予め定義されたルックアップテーブルを使用することによって変更される、
方法。
前記候補セット内の候補のみが、動きベクトル差分を導出するためにチェックされる、
方法。
前記候補セットは、KN、-KN、又はゼロの形をとる候補動きベクトル差分(MVD)を含み、
Kは0よりも大きい整数であり、Nは整数である、
方法。
前記候補セットは、M/KNの形を取る候補MVDを含み、
Mは整数である、
方法。
前記候補セットは、KM/KNの形を取るか又はゼロである候補MVDを含み、
M及びNは整数である、
方法。
前記導出された動きベクトル差分は、規則に従って許される値を有しているx成分及び/又はy成分を有するよう導出される、
方法。
前記規則は、前記導出された動きベクトル差分(vx,vy)が床関数、天井関数、又は符号関数を用いて取得された値を有し、
前記床関数floor(t)は、t以下の最大整数を返し、前記天井関数ceil(t)は、t以上の最小整数を返し、符号関数sign(t)は、tの符号に応じて値を返す、
方法。
前記規則は、
i)vxが分子(numX)及び分母(denoX)のうちの少なくとも一方を使用することによって導出され、かつ/あるいは、
ii)vyが分子(numY)及び分母(denoY)のうちの少なくとも一方を用いて導出される
ように、前記導出された動きベクトル差分(vx,vy)を取得することを定める、
方法。
前記規則は、床関数、天井関数、又は符号関数で使用された変数として前記分子及び/又は前記分母を使用することを定め、
前記床関数floor(t)は、t以下の最大整数を返し、前記天井関数ceil(t)は、t以上の最小整数を返し、符号関数sign(t)は、tの符号に応じて値を返す、
方法。
前記規則は、vxがsign(numX×denoX)×esp2(M)として導出される、ことを定め、
Mは、cost(numX,denoX,M)の最小値を実現する整数であり、
sign(t)は、tの符号に応じて値を返す、
方法。
前記規則は、vxがゼロに等しいか、又は式:
sign(numX×denoX)×KF1(logK(abs(numX)+offset1))-F2(logK(abs(denoX)+offset2))2
を使用するものとして取得される、ことを定め、
offset1及びoffset2は、整数であり、
sign(t)は、tの符号に応じて値を返す、
方法。
前記規則は、
i)denoXがゼロに等しい、
ii)numXがゼロに等しい、
iii)numXがゼロに等しいか、又はdenoXがゼロに等しい、
iv)denoXがT1よりも小さい、
v)numXがT1よりも小さい、あるいは、
vi)numXがT1よりも小さいか、又はdenoXがT2よりも小さい
場合に、vxが0に等しい、ことを定め、
T1及びT2は整数である、
方法。
前記offset1は、numXに依存する、
方法。
前記offset1は、Kfloor(logK(abs(numX)))/2+Pに等しく、
Pは整数であり、floor(t)は、t以下の最大整数を返し、logK(x)は、Kを底とするxの対数を返し、abs(t)は、tの絶対値に帰る、
方法。
前記offset2は、denoXに依存する、
方法。
前記offset1は、Kfloor(logK(abs(denoX)))/2+Pに等しく、
Pは整数であり、floor(t)は、t以下の最大整数を返し、logK(x)は、Kを底とするxの対数を返し、abs(t)は、tの絶対値に帰る、
方法。
前記規則は、vxが、式
delta=floor(log2(abs(numX)))-floor(log2(abs(denoX)))
として取得されるデルタの値に依存する、ことを定め、
floor(t)は、t以下の最大整数を返し、logK(x)は、Kを底とするxの対数を返し、abs(t)は、tの絶対値に帰る、
方法。
前記デルタは、
1)floor(log(abs(numX)))が0よりも大きくかつabs(numX)&(1<<(floor(log2(abs(numX)))-1))がゼロに等しくない、あるいは、
2)floor(log2(abs2(nodeX)))が0よりも大きくかつabs(denoX)&(1<<(floor(log2(abs(numX)))-1))がゼロに等しくない
場合に、変更される、
方法。
vxは、デルタが0よりも小さい場合に、0にセットされる、
方法。
vx及びvyのうちの少なくとも一方は、BDOFで使用される予測サンプル値を示すパラメータ、又はPROFで使用されるルーマ予測精緻化を示すパラメータを導出するために使用される、
方法。
前記BDOFで使用される予測サンプル値を示す前記パラメータは、式
bdofOffset=Round((vx×(gradientHL1[x+1][y+1]-gradientHL0[x+1][y+1]))>>1)+Round((vy×(gradientVL1[x+1][y+1]-gradientVL0[x+1][y+1]))>>1)
を用いて導出されるbdofOffsetである、
方法。
前記PROFで使用されるルーマ予測精緻化を示す前記パラメータは、式
ΔI(posX,posY)=dMvH[posX][posY]×gradientH[posX][posY]+dMvV[posX][posY]×gradientV[posX][posY]を用いて導出されるΔIであり、
dMvH[posX][posY]及びdMvV[posX][posY]は、vx及びvyに対応する、
方法。
前記導出された動きベクトル差分の水平成分及び垂直成分のうちの少なくとも一方は、前記精緻化動作のために使用されたツールに応じて導出され、該ツールと関連した前記候補セット内であるよう変更される、
方法。
前記導出された動きベクトル差分の前記水平成分及び前記垂直成分のうちの少なくとも一方は、前記ツールにかかわらず統一されている変更プロセスによって変更される、
方法。
コストが、候補値ごとにコスト関数を用いて計算され、
最小コスト値に対応する候補値が、最終的な動きベクトル差分(vx,vy)として選択される、
方法。
前記候補セットは、予め定義される、
方法。
前記候補セットは、vx及びvyのうちの少なくとも一方が-2x/2Xの形を取るように候補(vx,vy)を含み、
xは、範囲[-(X-1),(X-1)]内にある、
方法。
前記候補セットは、vx及びvyが、
i){-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32}/64、
ii){-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32}、
iii){-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32}/32、
iv){-64,-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32,64}、
v){-64,-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32,64}/64、
vi){-128,-64,-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32,64,128}/128、又は
vii){-128,-64,-32,-16,-8,-4,-2,-1,0,1,2,4,8,16,32,64,128}
を含むセットのうちの1つからのみであるように、候補(vx,vy)を含む、
方法。
前記候補セットは、前記候補の水平及び/又は垂直成分がS×(2m/2n)の形を取るように候補(vx,vy)を含み、
Sは1又は-1であり、m及びnは整数である、
方法。
前記候補セットは、前記現在のビデオブロックのコーディングされた情報に依存する、
方法。
前記候補セットは、シーケンス、ピクチャ、スライス、タイル、ブリック、又は他のビデオ領域を含むビデオユニットレベルでシグナリングされる、
方法。
双方向オプティカルフロー(BDOF)又は予測精緻化オプティカルフロー(PROF)の間のサンプルに対する前記精緻化動作は、乗算演算を除外する、
方法。
ビデオのビデオユニットの現在のビデオブロックと関連した動き情報を精緻化するために使用される双方向オプティカルフロー(BDOF)動作の間に、規則に従って前記ビデオユニット及び/又は前記ビデオユニットでのコーディングツールの利用に基づき決定されるクリッピングパラメータの組を用いてクリッピング動作を適用するステップと、
前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を有する方法。
前記規則は、前記ビデオの異なるビデオユニットごとにクリッピングパラメータに異なる組を使用することを定める、
方法。
前記ビデオユニットは、シーケンス、ピクチャ、スライス、タイルグループ、タイル、コーディングツリーユニット、又はコーディングユニットに対応する、
方法。
水平動きベクトル差分及び垂直動きベクトル差分は、互いに異なった閾値にクリップされる、
方法。
前記クリッピング動作で使用される閾値は、前記現在のビデオブロックを含むピクチャの寸法及び/又は前記現在のビデオブロックのデコードされた動き情報に依存する、
方法。
前記クリッピング動作で使用される閾値は、シーケンスパラメータセット(SPS)、ビデオパラメータセット(VPS)、適応パラメータセット(APS)、ピクチャパラメータセット(PPS)、スライスヘッダ、及び/又はタイルグループヘッダでシグナリングされる、
の方法。
前記規則は、デコーダ側動きベクトル差分(DMVR)又はアフィンインターモードの利用に基づき前記クリッピングパラメータの組を決定することを定める、
方法。
前記クリッピングパラメータの値は、前記コーディングツールが前記ビデオユニットに対して無効にされるか否かに応じて増大又は低下する、
方法。
ビデオの現在のビデオブロックと関連した動き情報を精緻化するために使用される精緻化動作の間に、動きベクトル差分(vx,vy)のx成分及び/又はy成分をクリップするよう規則に従ってクリッピング動作を適用するステップと、
前記動きベクトル差分を用いて前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を有し、
前記規則は、前記クリッピング動作の前又は後に、前記動きベクトル差分をゼロ又はKmの形を取る値に変換することを定め、mは整数である、
方法。
前記動きベクトル差分(vx,vy)は、式
bdofOffset=Round((vx×(gradientHL1[x+1][y+1]-gradientHL0[x+1][y+1]))>>1)+Round((vy×(gradientVL1[x+1][y+1]-gradientVL0[x+1][y+1]))>>1)
に従ってbdofOffsetを導出するためにBDOFで使用されるvx及びvyに対応する値を有する、
方法。
前記動きベクトル差分(vx,vy)は、式
ΔI(posX,posY)=dMvH[posX][posY]×gradientH[posX][posY]+dMvV[posX][posY]×gradientV[posX][posY]
に従ってΔIを導出するためにPROFで使用されるdMvH[posX][posY]及びdMvV[posX][posY]に対応する値を有する、
方法。
前記規則は、前記精緻化動作のタイプに応じて前記x成分及び前記y成分について異なった範囲を使用する、
請求項117に記載の方法。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、規則に従ってデコーダ側動き導出動作又はデコーダ側動き精緻化動作の間に動き情報を導出又は精緻化するために使用される探索領域を選択するステップと、
導出又は精緻化された前記動き情報に基づき前記変換を実行するステップと
を有する方法。
前記規則は、非正方動きベクトル差分(MVD)領域を選択することを定める、
方法。
前記非正方MVD領域は、5×5菱形領域、5×5八角形領域、又は3×3菱形領域に対応する、
方法。
前記探索領域は、水平方向及び垂直方向で異なった探索範囲を有する、
方法。
前記規則は、前記現在のビデオブロックの寸法及び/又は形状に基づき前記探索領域を選択することを定め、
前記寸法は、前記現在のビデオブロックの高さ(H)及び幅(W)のうちの少なくとも一方に対応する、
方法。
前記規則は、前記現在のビデオブロックの前記寸法に応じて、垂直MVD探索範囲よりも小さいよう又は菱形MVD空間を探索するよう水平MVD探索範囲を定める、
方法。
前記規則は、精緻化される前である前記現在のビデオブロックの動き情報に基づき前記探索領域を選択することを定める、
請求項121に記載の方法。
前記規則は、sumAbsHorMv及び/又はsumAbsVerMvを含む前記動き情報に応じて、垂直MVD探索範囲よりも小さいよう又は菱形MVD空間を探索するよう水平MVD探索範囲を定め、
sumAbsHorMv=abs(MV0[0])+abs(MV1[0])であり、sumAbsVerMv=abs(MV0[0])+abs(MV1[1])であり、abs(MVx)はMVxの絶対値を指す、
方法。
前記規則は、参照ピクチャに基づき水平探索範囲及び/又は垂直探索範囲を選択することを定める、
方法。
前記規則は、動きベクトルの大きさに基づき水平探索範囲及び/又は垂直探索範囲を選択することを定める、
方法。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、最良一致の整数位置を含む精緻化で使用された探索領域を使用することによって前記現在のビデオブロックと関連した動きベクトル差分を精緻化するようデコーダ側動きベクトル精緻化(DMVR)動作を適用するステップと、
精緻化された前記動きベクトル差分を用いて前記変換を実行するステップと
を有し、
前記DMVR動作の適用は、規則に従ってサブペル動きベクトル差分(MVD)を導出することを含む、
方法。
前記規則は、前記最良一致の整数位置の左右の位置が両方とも前記探索領域に含まれる場合に、水平サブペルMVDを導出することを定める、
方法。
前記規則は、前記最良一致の整数位置の上下の位置が両方とも前記探索領域に含まれる場合に、垂直サブペルMVDを導出することを定める、
方法。
前記規則は、特定の位置について前記サブペルMVDを導出することを定める、
方法。
ビデオのビデオユニットの現在のビデオブロックについて、前記現在のビデオブロックと関連した動きベクトル差分を精緻化するようデコーダ側動きベクトル精緻化(DMVR)動作を適用するステップと、
精緻化された前記動きベクトル差分を用いて、前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を有し、
前記DMVR動作の適用は、前記ビデオユニットに対する双方向オプティカルフロー(BDOF)の使用に応じてサブペル動きベクトル差分(MVD)導出を許すか又は許さないと決定することを含む、
方法。
前記ビデオユニットは、ピクチャ、スライス、タイルグループ、タイル、コーディングツリーユニット、又はコーディングユニットに対応する、
方法。
前記サブペルMVD導出は、前記ビデオユニットに対する前記BDOFの使用により許されない、
方法。
前記サブペルMVD導出は、前記ビデオユニットに対する前記BDOFの不使用により許される、
方法。
オプティカルフローを用いた精緻化動作の間に、ビデオの現在のビデオブロックの第1サンプルの動きベクトル差分を導出するステップと、
前記第1サンプルの導出された前記動きベクトル差分に基づき、第2サンプルの動きベクトル差分を決定するステップと、
前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を前記決定に基づき実行するステップと
を有する方法。
前記精緻化動作は、オプティカルフローによる予測精緻化(PROF)を用いて実行され、
前記第1サンプルの動きベクトル差分は、前記現在のビデオブロック内の位置についてアフィンモデルを用いて導出され、異なる位置について前記第2サンプルの動きベクトル差分を決定するために使用される、
方法。
上部に位置する前記第1サンプルの動きベクトル差分は、アフィンモデルを用いて導出され、下部に位置する前記第2サンプルの動きベクトル差分を決定するために使用され、
前記現在のビデオブロックは、幅(W)及び高さ(H)を有し、
前記上部及び前記株は、W×H/2のサイズを有する、
方法。
下部に位置する前記第1サンプルの動きベクトル差分は、アフィンモデルを用いて導出され、上部に位置する前記第2サンプルの動きベクトル差分を決定するために使用され、
前記現在のビデオブロックは、幅(W)及び高さ(H)を有し、
前記上部及び前記下部は、W×H/2のサイズを有する、
方法。
左部に位置する前記第1サンプルの動きベクトル差分は、アフィンモデルを用いて導出され、右部に位置する前記第2サンプルの動きベクトル差分を決定するために使用され、
前記現在のビデオブロックは、幅(W)及び高さ(H)を有し、
前記左部及び前記右下部は、(W/2)×Hのサイズを有する、
方法。
右部に位置する前記第1サンプルの動きベクトル差分は、アフィンモデルを用いて導出され、左部に位置する前記第2サンプルの動きベクトル差分を決定するために使用され、
前記現在のビデオブロックは、幅(W)及び高さ(H)を有し、
前記左部及び前記右下部は、(W/2)×Hのサイズを有する、
方法。
前記第1サンプルの動きベクトル差分は、アフィンモデルを用いて導出され、前記第2サンプルの動きベクトル差分を決定するために使用される前に、予め定義された精度に丸められ及び/又は予め定義された範囲にクリップされる、
方法。
位置(x,y)にある前記第1サンプル又は前記第2サンプルについて、MVDh及びMVDvは、夫々、水平及び垂直動きベクトル差分であり、式
MVDh(x,y)=-MVDh(W-1-x,H-1-y)、及び
MVDv(x,y)=-MVDv(W-1-x,H-1-y)
を使用することによって取得され、
W及びHは、前記現在のビデオブロックの幅及び高さである、
方法。
双方向オプティカルフロー(BDOF)動作を用いた精緻化動作ビデオの現在のビデオブロックに適用することによって、予測精緻化サンプルを導出するステップと、
M及びNが整数であるとして、規則に従って、導出された前記予測精緻化サンプルを所定範囲[-M,N]にクリップするクリッピング動作の適用可能性を決定するステップと、
前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を有する方法。
前記規則は、前記クリッピング動作を適用することを決定する、
方法。
NはM-1の値に等しい、
方法。
前記所定範囲は、前記現在のビデオブロックの色成分のビットデプスに依存する、
方法。
Mは2Kに等しく、K=Max(K1,BitDepth+K2)であり、
BitDepthは、前記現在のビデオブロックの色成分のビットデプスであり、
K1及びK2は整数である、
方法。
Mは2Kに等しく、K=Min(K1,BitDepth+K2)であり、
BitDepthは、前記現在のビデオブロックの色成分のビットデプスであり、
K1及びK2は整数である、
方法。
前記所定範囲は、予測精緻化オプティカルフロー(PROF)を用いて他のビデオブロックに適用される、
方法。
前記規則は、前記クリッピング動作を適用しないと決定する、
方法。
第1コーディンググループ及び第2コーディンググループが規則に従って整列されるように、異なる残差コーディングモードを用いてコーディングされている前記第1コーディンググループ及び前記第2コーディンググループを含む、ビデオの現在のビデオブロックについて、コーディンググループサイズを決定するステップと、
前記決定に基づき前記現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換を実行するステップと
を有する方法。
前記第1コーディンググループは、変換がバイパスされるか又は恒等変換が適用される変換スキップモードを用いてコーディングされ、
前記規則は、前記現在のビデオブロックが2×M個よりも多いサンプルを含むかどうか及び/又は残差ブロックサイズに基づき前記第1コーディンググループのサイズが決定されることを定める、
方法。
前記第1コーディンググループは、変換がバイパスされるか又は恒等変換が適用される変換スキップモードを用いずにコーディングされ、
前記規則は、前記現在のビデオブロックの幅(W)又は高さ(H)がKに等しいかどうかに基づき前記第1コーディンググループのサイズが決定されることを定め、Kは整数である、
方法。
前記第1コーディンググループ及び前記第2コーディンググループは、夫々、変換スキップモード及び正則残差コーディングモードを用いてコーディングされ、
前記規則は、前記第1コーディンググループ及び前記第2コーディンググループが2×2、2×8、2×4、8×2、又は4×2のサイズを有することを定める、
方法。
前記サイズは、N×2又は2×Nの残差ブロックに対して使用され、
Nは整数である、
方法。
ビデオの現在のビデオブロックと前記ビデオのコーディングされた表現との間の変換のために、前記現在のビデオブロックと関連したコーディングされた情報及び/又はデコードされた情報に基づき、動き情報がオプティカルフローを用いて精緻化される予測精緻化オプティカルフロー(PROF)ツールの適用可能性を決定するステップと、
前記決定に基づき前記変換を実行するステップと
を有する方法。
前記現在のビデオブロックは、アフィンモードを用いてコーディングされている、
方法。
前記決定するステップは、前記変換で使用される参照ピクチャが前記現在のビデオブロックを含む現在のピクチャの寸法とは異なった寸法を有していることにより、前記PROFツールを適用しないと決定する、
方法。
前記決定するステップは、前記変換が双予測的予測を使用し、両方の参照ピクチャが同じ寸法を有していることにより、前記PROFツールを適用することを決定する、
方法。
前記PROFツールの適用可能性は、参照ピクチャと前記現在のビデオブロックを含む現在のピクチャとの間の解像度比に応じて決定される、
方法。
前記決定するステップは、特定の条件を定めている規則に従って、前記PROFツールを適用しないと決定する、
方法。
前記特定の条件は、
i)一般化された双予測が有効にされること、
ii)重み予測が有効にされること、又は
iii)半ピクセル補間フィルタが適用されること
を含む、
方法。
前記精緻化動作に関する情報は、シーケンス、ピクチャ、スライス、タイル、ブリック、又は他のビデオ領域を含むビデオユニットレベルでシグナリングされる、
方法。
前記精緻化動作は、双方向オプティカルフロー(BDOF)又は予測精緻化オプティカルフロー(PROF)が前記現在のビデオブロックに適用されるかどうかに応じて、前記現在のビデオブロックのコーディングされた情報に基づき規則に従って実行される、
方法。
前記変換は、前記ビデオから前記コーディングされた表現を生成すること、又は前記コーディングされた表現から前記ビデオを生成することを有する、
方法。
プロセッサと、命令を有する非一時的なメモリとを有し、
前記命令は、前記プロセッサによって実行されると、前記プロセッサに、箇条1乃至169のうちいずれか1つに記載の方法を実施させる、
装置。
箇条1乃至169のうちいずれか1つに記載の方法を実行するためのプログラムコードを含む、コンピュータプログラム製品。
Claims (13)
- ビデオデータを処理する方法であって、
ビデオの第1の双予測されたビデオブロックと前記ビデオのビットストリームとの間の第1変換のために、少なくとも1つの第1動きベクトルオフセットが前記第1の双予測されたビデオブロック内の領域の予測サンプルを精緻化するよう導出される第1のオプティカルフローに基づいた方法を用いて前記第1の双予測されたビデオブロックの動き情報が精緻化されることを決定するステップと、
前記少なくとも1つの第1動きベクトルオフセットを第1範囲にクリップするステップと、
クリップされた前記少なくとも1つの第1動きベクトルオフセットに基づき前記第1変換を実行するステップと、
前記ビデオの第2のアフィンビデオブロックと前記ビットストリームとの間の第2変換のために、少なくとも1つの第2動きベクトルオフセットが前記第2のアフィンビデオブロック内の領域の予測サンプルを精緻化するよう導出される第2のオプティカルフローに基づいた方法を用いて前記第2のアフィンビデオブロックの動き情報が精緻化されることを決定するステップと、
前記少なくとも1つの第2動きベクトルオフセットを第2範囲にクリップするステップと、
クリップされた前記少なくとも1つの第2動きベクトルオフセットに基づき前記第2変換を実行するステップと
を有し、
前記第1範囲は前記第2範囲とは異なる、方法。 - 前記第1範囲は[-N0,M0]であり、第2範囲は[-N1,M1]であり、N0、M0、N1、及びM1は整数である、
請求項1に記載の方法。 - [-N0,M0]は[-15,15]である、
請求項2に記載の方法。 - [-N1,M1]は[-31,31]である、
請求項2に記載の方法。 - N0及びM0は、2K0に等しくない同じ値を有し、N1及びM1は、2K1に等しくない同じ値を有し、K0及びK1は整数である、
請求項2に記載の方法。 - N0及びM0は、2K0-1に等しい同じ値を有し、N1及びM1は、2K1-1に等しい同じ値を有し、K0及びK1は整数である、
請求項2に記載の方法。 - 前記第1の双予測されたビデオブロック内の領域は、前記第1の双予測されたビデオブロックの全体、又は前記第1の双予測されたビデオブロック内のサブブロックであり、
前記第2のアフィンビデオブロック内の領域は、前記第2のアフィンビデオブロックの全体、又は前記第2のアフィンビデオブロック内のサブブロックである、
請求項1乃至6のうちいずれか一項に記載の方法。 - 前記第1動きベクトルオフセットは、水平成分及び垂直成分を有し、
前記第1動きベクトルオフセットをクリップするステップは、前記第1動きベクトルオフセットの水平成分及び/又は垂直成分を前記第1範囲にクリップすることを有し、
前記第2動きベクトルオフセットは、水平成分及び垂直成分を有し、
前記第2動きベクトルオフセットをクリップするステップは、前記第2動きベクトルオフセットの水平成分及び/又は垂直成分を前記第2範囲にクリップすることを有する、
請求項1乃至7のうちいずれか一項に記載の方法。 - 前記第1変換は、前記第1の双予測されたビデオブロックを前記ビットストリームにエンコードすることを有し、前記第2変換は、前記第2のアフィンビデオブロックを前記ビットストリームにエンコードすることを有する、
請求項1乃至8のうちいずれか一項に記載の方法。 - 前記第1変換は、前記第1の双予測されたビデオブロックを前記ビットストリームからデコードすることを有し、前記第2変換は、前記第2のアフィンビデオブロックを前記ビットストリームからデコードすることを有する、
請求項1乃至8のうちいずれか一項に記載の方法。 - ビデオデータを処理する装置であって、
プロセッサと、命令を有する非一時的なメモリとを有し、
前記命令は、前記プロセッサによって実行されると、前記プロセッサに、
ビデオの第1の双予測されたビデオブロックと前記ビデオのビットストリームとの間の第1変換のために、少なくとも1つの第1動きベクトルオフセットが前記第1の双予測されたビデオブロック内の領域の予測サンプルを精緻化するよう導出される第1のオプティカルフローに基づいた方法を用いて前記第1の双予測されたビデオブロックの動き情報が精緻化されることを決定させ、
前記少なくとも1つの第1動きベクトルオフセットを第1範囲にクリップさせ、
クリップされた前記少なくとも1つの第1動きベクトルオフセットに基づき前記第1変換を実行させ、
前記ビデオの第2のアフィンビデオブロックと前記ビットストリームとの間の第2変換のために、少なくとも1つの第2動きベクトルオフセットが前記第2のアフィンビデオブロック内の領域の予測サンプルを精緻化するよう導出される第2のオプティカルフローに基づいた方法を用いて前記第2のアフィンビデオブロックの動き情報が精緻化されることを決定させ、
前記少なくとも1つの第2動きベクトルオフセットを第2範囲にクリップさせ、
クリップされた前記少なくとも1つの第2動きベクトルオフセットに基づき前記第2変換を実行させ、
前記第1範囲は前記第2範囲とは異なる、
装置。 - 命令を記憶している非一時的なコンピュータ可読記憶媒体であって、
前記命令は、プロセッサに、
ビデオの第1の双予測されたビデオブロックと前記ビデオのビットストリームとの間の第1変換のために、少なくとも1つの第1動きベクトルオフセットが前記第1の双予測されたビデオブロック内の領域の予測サンプルを精緻化するよう導出される第1のオプティカルフローに基づいた方法を用いて前記第1の双予測されたビデオブロックの動き情報が精緻化されることを決定させ、
前記少なくとも1つの第1動きベクトルオフセットを第1範囲にクリップさせ、
クリップされた前記少なくとも1つの第1動きベクトルオフセットに基づき前記第1変換を実行させ、
前記ビデオの第2のアフィンビデオブロックと前記ビットストリームとの間の第2変換のために、少なくとも1つの第2動きベクトルオフセットが前記第2のアフィンビデオブロック内の領域の予測サンプルを精緻化するよう導出される第2のオプティカルフローに基づいた方法を用いて前記第2のアフィンビデオブロックの動き情報が精緻化されることを決定させ、
前記少なくとも1つの第2動きベクトルオフセットを第2範囲にクリップさせ、
クリップされた前記少なくとも1つの第2動きベクトルオフセットに基づき前記第2変換を実行させ、
前記第1範囲は前記第2範囲とは異なる、
非一時的なコンピュータ可読記憶媒体。 - ビデオのビットストリームを記憶する方法であって、
前記ビデオの第1の双予測されたビデオブロックについて、少なくとも1つの第1動きベクトルオフセットが前記第1の双予測されたビデオブロック内の領域の予測サンプルを精緻化するよう導出される第1のオプティカルフローに基づいた方法を用いて前記第1の双予測されたビデオブロックの動き情報が精緻化されることを決定するステップと、
前記少なくとも1つの第1動きベクトルオフセットを第1範囲にクリップするステップと、
クリップされた前記少なくとも1つの第1動きベクトルオフセットに基づき前記ビットストリームを生成するステップと、
前記ビデオの第2のアフィンビデオブロックについて、少なくとも1つの第2動きベクトルオフセットが前記第2のアフィンビデオブロック内の領域の予測サンプルを精緻化するよう導出される第2のオプティカルフローに基づいた方法を用いて前記第2のアフィンビデオブロックの動き情報が精緻化されることを決定するステップと、
前記少なくとも1つの第2動きベクトルオフセットを第2範囲にクリップするステップと、
クリップされた前記少なくとも1つの第2動きベクトルオフセットに基づき前記ビットストリームを生成するステップと、
前記ビットストリームを非一時的なコンピュータ可読記録媒体に記憶するステップと
を有し、
前記第1範囲は前記第2範囲とは異なる、
方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2024010643A JP2024032872A (ja) | 2019-05-16 | 2024-01-29 | 動き情報精緻化のサブ領域に基づいた決定 |
Applications Claiming Priority (17)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNPCT/CN2019/087193 | 2019-05-16 | ||
CN2019087193 | 2019-05-16 | ||
CNPCT/CN2019/090037 | 2019-06-04 | ||
CN2019090037 | 2019-06-04 | ||
CNPCT/CN2019/090903 | 2019-06-12 | ||
CN2019090903 | 2019-06-12 | ||
CN2019093616 | 2019-06-28 | ||
CNPCT/CN2019/093616 | 2019-06-28 | ||
CN2019093973 | 2019-06-29 | ||
CNPCT/CN2019/093973 | 2019-06-29 | ||
CNPCT/CN2019/094282 | 2019-07-01 | ||
CN2019094282 | 2019-07-01 | ||
CN2019104489 | 2019-09-05 | ||
CNPCT/CN2019/104489 | 2019-09-05 | ||
CNPCT/CN2019/116757 | 2019-11-08 | ||
CN2019116757 | 2019-11-08 | ||
PCT/CN2020/090802 WO2020228836A1 (en) | 2019-05-16 | 2020-05-18 | Sub-region based determination of motion information refinement |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2024010643A Division JP2024032872A (ja) | 2019-05-16 | 2024-01-29 | 動き情報精緻化のサブ領域に基づいた決定 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022530516A JP2022530516A (ja) | 2022-06-29 |
JP7431253B2 true JP7431253B2 (ja) | 2024-02-14 |
Family
ID=73289816
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021564118A Active JP7431253B2 (ja) | 2019-05-16 | 2020-05-18 | 動き情報精緻化のサブ領域に基づいた決定 |
JP2024010643A Pending JP2024032872A (ja) | 2019-05-16 | 2024-01-29 | 動き情報精緻化のサブ領域に基づいた決定 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2024010643A Pending JP2024032872A (ja) | 2019-05-16 | 2024-01-29 | 動き情報精緻化のサブ領域に基づいた決定 |
Country Status (8)
Country | Link |
---|---|
US (2) | US11736698B2 (ja) |
EP (1) | EP3949415A4 (ja) |
JP (2) | JP7431253B2 (ja) |
KR (1) | KR102647582B1 (ja) |
CN (2) | CN113728644B (ja) |
BR (1) | BR112021021669A2 (ja) |
SG (1) | SG11202111843XA (ja) |
WO (1) | WO2020228836A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020190853A1 (en) * | 2019-03-16 | 2020-09-24 | Vid Scale, Inc. | Inter prediction memory access bandwidth reduction method with optical flow compensation |
US11330287B2 (en) * | 2019-06-28 | 2022-05-10 | Tencent America LLC | Method and apparatus for video coding |
US20220264146A1 (en) * | 2019-07-01 | 2022-08-18 | Interdigital Vc Holdings France, Sas | Bi-prediction refinement in affine with optical flow |
WO2022257954A1 (en) * | 2021-06-10 | 2022-12-15 | Beijing Bytedance Network Technology Co., Ltd. | Method, device, and medium for video processing |
WO2023072287A1 (en) * | 2021-10-29 | 2023-05-04 | Beijing Bytedance Network Technology Co., Ltd. | Method, apparatus, and medium for video processing |
US11616970B1 (en) | 2022-01-25 | 2023-03-28 | Mediatek Inc. | Motion vector refinement apparatus having motion vector predictor derivation circuit that is allowed to start new task without waiting for motion vector difference computation and associated motion vector refinement method |
EP4258666A1 (en) * | 2022-04-07 | 2023-10-11 | Beijing Xiaomi Mobile Software Co., Ltd. | Encoding/decoding video picture data |
US20230336773A1 (en) * | 2022-04-18 | 2023-10-19 | Tencent America LLC | On motion compensated picture boundary padding |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20180278949A1 (en) | 2017-03-22 | 2018-09-27 | Qualcomm Incorporated | Constraining motion vector information derived by decoder-side motion vector derivation |
US20200314443A1 (en) | 2019-04-01 | 2020-10-01 | Qualcomm Incorporated | Gradient-based prediction refinement for video coding |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7627037B2 (en) | 2004-02-27 | 2009-12-01 | Microsoft Corporation | Barbell lifting for multi-layer wavelet coding |
CN104584553A (zh) | 2012-09-28 | 2015-04-29 | 英特尔公司 | 层间残差预测 |
SG11201500311XA (en) | 2012-09-28 | 2015-02-27 | Intel Corp | Inter-layer pixel sample prediction |
US9294777B2 (en) | 2012-12-30 | 2016-03-22 | Qualcomm Incorporated | Progressive refinement with temporal scalability support in video coding |
US9521425B2 (en) | 2013-03-19 | 2016-12-13 | Qualcomm Incorporated | Disparity vector derivation in 3D video coding for skip and direct modes |
WO2014166063A1 (en) | 2013-04-09 | 2014-10-16 | Mediatek Inc. | Default vector for disparity vector derivation for 3d video coding |
US9667996B2 (en) | 2013-09-26 | 2017-05-30 | Qualcomm Incorporated | Sub-prediction unit (PU) based temporal motion vector prediction in HEVC and sub-PU design in 3D-HEVC |
US9762927B2 (en) | 2013-09-26 | 2017-09-12 | Qualcomm Incorporated | Sub-prediction unit (PU) based temporal motion vector prediction in HEVC and sub-PU design in 3D-HEVC |
CN115278229A (zh) * | 2015-11-11 | 2022-11-01 | 三星电子株式会社 | 对视频进行解码的设备和对视频进行编码的设备 |
GB2561507B (en) * | 2016-01-07 | 2021-12-22 | Mediatek Inc | Method and apparatus for affine merge mode prediction for video coding system |
US20180199057A1 (en) * | 2017-01-12 | 2018-07-12 | Mediatek Inc. | Method and Apparatus of Candidate Skipping for Predictor Refinement in Video Coding |
US10701366B2 (en) | 2017-02-21 | 2020-06-30 | Qualcomm Incorporated | Deriving motion vector information at a video decoder |
US10523964B2 (en) | 2017-03-13 | 2019-12-31 | Qualcomm Incorporated | Inter prediction refinement based on bi-directional optical flow (BIO) |
US10805630B2 (en) | 2017-04-28 | 2020-10-13 | Qualcomm Incorporated | Gradient based matching for motion search and derivation |
US10904565B2 (en) | 2017-06-23 | 2021-01-26 | Qualcomm Incorporated | Memory-bandwidth-efficient design for bi-directional optical flow (BIO) |
US10785494B2 (en) | 2017-10-11 | 2020-09-22 | Qualcomm Incorporated | Low-complexity design for FRUC |
US10986360B2 (en) * | 2017-10-16 | 2021-04-20 | Qualcomm Incorproated | Various improvements to FRUC template matching |
US20190306502A1 (en) | 2018-04-02 | 2019-10-03 | Qualcomm Incorporated | System and method for improved adaptive loop filtering |
US10779002B2 (en) | 2018-04-17 | 2020-09-15 | Qualcomm Incorporated | Limitation of the MVP derivation based on decoder-side motion vector derivation |
TWI719519B (zh) | 2018-07-02 | 2021-02-21 | 大陸商北京字節跳動網絡技術有限公司 | 對於dmvr的塊尺寸限制 |
WO2020084461A1 (en) | 2018-10-22 | 2020-04-30 | Beijing Bytedance Network Technology Co., Ltd. | Restrictions on decoder side motion vector derivation based on coding information |
CN112913240A (zh) | 2018-10-22 | 2021-06-04 | 北京字节跳动网络技术有限公司 | 解码器侧运动矢量推导和其他编解码工具之间的并置 |
EP3861731A4 (en) | 2018-11-05 | 2021-11-24 | Beijing Bytedance Network Technology Co. Ltd. | INTERPOLATION TO INTERPRDICTION WITH REFINEMENT |
EP3949419A4 (en) * | 2019-04-12 | 2023-01-04 | HFI Innovation Inc. | METHOD AND APPARATUS FOR SIMPLIFIED AFFINE SUB-BLOCK PROCESS FOR VIDEO CODING SYSTEM |
MX2022002254A (es) * | 2019-08-23 | 2022-03-22 | Beijing Dajia Internet Information Tech Co Ltd | Metodo y aparato en refinamiento de prediccion con flujo optico. |
-
2020
- 2020-05-18 CN CN202080030922.0A patent/CN113728644B/zh active Active
- 2020-05-18 BR BR112021021669A patent/BR112021021669A2/pt unknown
- 2020-05-18 JP JP2021564118A patent/JP7431253B2/ja active Active
- 2020-05-18 CN CN202311610467.3A patent/CN117395419A/zh active Pending
- 2020-05-18 KR KR1020217036613A patent/KR102647582B1/ko active IP Right Grant
- 2020-05-18 SG SG11202111843XA patent/SG11202111843XA/en unknown
- 2020-05-18 WO PCT/CN2020/090802 patent/WO2020228836A1/en unknown
- 2020-05-18 EP EP20806602.7A patent/EP3949415A4/en active Pending
-
2021
- 2021-10-20 US US17/506,578 patent/US11736698B2/en active Active
-
2023
- 2023-08-11 US US18/448,591 patent/US20230403398A1/en active Pending
-
2024
- 2024-01-29 JP JP2024010643A patent/JP2024032872A/ja active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20180278949A1 (en) | 2017-03-22 | 2018-09-27 | Qualcomm Incorporated | Constraining motion vector information derived by decoder-side motion vector derivation |
US20200314443A1 (en) | 2019-04-01 | 2020-10-01 | Qualcomm Incorporated | Gradient-based prediction refinement for video coding |
Non-Patent Citations (3)
Title |
---|
LI, Xiang et al.,CE2-4.4: Affine Block Memory Bandwidth Reduction by MV Clip,JVET-N0398 (version 1),ITU,2019年03月13日,pp.1-4,JVET-N0398.docx |
LI, Xiang et al.,Non-CE2: Combination of Affine MV Clip and Prediction Refinement with Optical Flow,JVET-N0737 (version 2),ITU,2019年03月21日,pp.1-3,JVET-N0737_r1.docx |
LUO, Jiancong Daniel et al.,CE2-related: Prediction Refinement with Optical Flow for Affine Mode,JVET-N0236 (version 7),ITU,2019年03月26日,pp.1-7,JVET-N0236-r5.docx |
Also Published As
Publication number | Publication date |
---|---|
JP2022530516A (ja) | 2022-06-29 |
US11736698B2 (en) | 2023-08-22 |
KR20220009947A (ko) | 2022-01-25 |
JP2024032872A (ja) | 2024-03-12 |
CN117395419A (zh) | 2024-01-12 |
WO2020228836A1 (en) | 2020-11-19 |
EP3949415A4 (en) | 2022-08-03 |
EP3949415A1 (en) | 2022-02-09 |
BR112021021669A2 (pt) | 2021-12-21 |
SG11202111843XA (en) | 2021-11-29 |
US20220103827A1 (en) | 2022-03-31 |
CN113728644B (zh) | 2024-01-26 |
CN113728644A (zh) | 2021-11-30 |
US20230403398A1 (en) | 2023-12-14 |
KR102647582B1 (ko) | 2024-03-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7431253B2 (ja) | 動き情報精緻化のサブ領域に基づいた決定 | |
US11889108B2 (en) | Gradient computation in bi-directional optical flow | |
JP7241870B2 (ja) | 部分的な位置に基づく差分計算 | |
KR102610709B1 (ko) | 디코더 측 움직임 벡터 유도 | |
CN112868239B (zh) | 并置的局部照明补偿和帧内块复制编解码 | |
WO2020147747A1 (en) | Weighted prediction in video coding | |
WO2020103872A1 (en) | Prediction refinement for combined inter intra prediction mode | |
WO2020147804A1 (en) | Use of virtual candidate prediction and weighted prediction in video processing | |
JP2021530154A (ja) | 効率的なアフィンマージ動きベクトル導出 | |
KR20210089155A (ko) | 페어와이즈 평균 후보 계산에서 라운딩 | |
WO2020147745A1 (en) | Motion candidate lists that use local illumination compensation | |
JP2023145563A (ja) | 異なる動きベクトル微調整における勾配計算 | |
WO2019229683A1 (en) | Concept of interweaved prediction | |
CN111083484A (zh) | 基于子块的预测 | |
WO2020049540A1 (en) | Affine mode in video coding and decoding | |
JP7322277B2 (ja) | 参照ピクチャタイプに従ったツールの使用制限 | |
CN113796084B (zh) | 运动矢量和预测样点细化 | |
CN110740327A (zh) | 重叠块的运动补偿的改进 | |
CN110876063A (zh) | 交织预测的快速编码方法 | |
WO2020224613A1 (en) | Unified calculation method for inter prediction with refinement |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211027 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211027 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230104 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230331 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230718 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231016 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240109 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240201 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7431253 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |