JP6593934B2 - 映像動き補償のための装置および方法 - Google Patents
映像動き補償のための装置および方法 Download PDFInfo
- Publication number
- JP6593934B2 JP6593934B2 JP2017560297A JP2017560297A JP6593934B2 JP 6593934 B2 JP6593934 B2 JP 6593934B2 JP 2017560297 A JP2017560297 A JP 2017560297A JP 2017560297 A JP2017560297 A JP 2017560297A JP 6593934 B2 JP6593934 B2 JP 6593934B2
- Authority
- JP
- Japan
- Prior art keywords
- block
- motion
- frame
- motion vector
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000033001 locomotion Effects 0.000 title claims description 316
- 238000000034 method Methods 0.000 title claims description 36
- 239000013598 vector Substances 0.000 claims description 142
- 238000001914 filtration Methods 0.000 claims description 19
- 238000013139 quantization Methods 0.000 claims description 12
- 238000004590 computer program Methods 0.000 claims description 7
- 239000002356 single layer Substances 0.000 claims description 6
- 230000004044 response Effects 0.000 claims description 3
- 238000005192 partition Methods 0.000 description 16
- 238000010200 validation analysis Methods 0.000 description 10
- 230000011664 signaling Effects 0.000 description 8
- 238000005457 optimization Methods 0.000 description 7
- 230000002123 temporal effect Effects 0.000 description 4
- 230000006835 compression Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 230000007423 decrease Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
- H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/43—Hardware specially adapted for motion estimation or compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/533—Motion estimation using multistep search, e.g. 2D-log search or one-at-a-time search [OTS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/567—Motion estimation based on rate distortion criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/129—Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Television Systems (AREA)
Description
本願によれば、以下の各項目もまた開示される。
(項目1)
動き補償に従って、後のフレームの映像ストリームを符号化された映像ビットストリームに予測符号化するためのビデオコーダであって、
前記映像ストリームの少なくとも1つの参照フレームを記憶するように適合されるフレームバッファであって、前記参照フレームは、前記映像ストリームの現在のフレームと異なる、フレームバッファと、
前記参照フレームの参照ブロックと前記現在のフレームの現在のブロックとの間の動きを推定することによって動きベクトルを生成するように適合される動き推定ユニットと、
前記動きベクトルの向きに応じて、複数のフィルタのうちの1つのフィルタを選択するように適合されるフィルタ選択ユニットと、
選択された前記フィルタを前記参照ブロックに適用することによって、フィルタリングされた参照ブロックを生成するように適合されるフィルタリングユニットと、
前記現在のブロックおよび前記フィルタリングされた参照ブロックに基づいて、前記現在のブロックのフィルタリングされた予測ブロックを生成するように適合される動き補償ユニットと
を備えるビデオコーダ。
(項目2)
前記動き補償ユニットは、
前記現在のブロックおよび前記参照ブロックに基づいて、前記現在のブロックのフィルタリングされていない予測ブロックをさらに生成し、
前記フィルタリングされた予測ブロックおよび前記フィルタリングされていない予測ブロックの中から、予測誤差を最小化する予測ブロックを出力し、前記予測誤差は、前記現在のブロックと、それぞれの前記予測ブロックとの間の差である、
ように適合される、項目1に記載のビデオコーダ。
(項目3)
前記動き推定ユニットは、
前記フィルタリングされた参照ブロックと前記現在のブロックとの間の動きを推定することによって、第2動きベクトルを生成するように適合され、
前記第2動きベクトル、および、前記参照ブロックと前記現在のブロックとの間の動きベクトルの比較に応じて、前記符号化された映像ビットストリームを生成するために、前記フィルタリングされた参照ブロックが考慮されるか、または、破棄される、
項目1または2に記載のビデオコーダ。
(項目4)
前記動き補償ユニットによって出力される前記予測ブロックに対応する前記予測誤差に基づいて前記符号化された映像ビットストリームを生成するように適合される符号化手段を備える、項目2に記載のビデオコーダ。
(項目5)
前記符号化された映像ビットストリームを生成するように適合される符号化手段を備え、これにより、前記符号化された映像ビットストリームは、動き情報およびフィルタ情報を含み、前記動き情報は、前記動きベクトルを含み、
前記フィルタ情報は、前記符号化された映像ビットストリームが、前記現在のブロックと前記フィルタリングされた予測ブロックとの間の予測誤差に基づいているか、または、前記現在のブロックと前記フィルタリングされていない予測ブロックとの間の予測誤差に基づいているかを指定する、
前述の項目1から4のいずれか一項に記載のビデオコーダ。
(項目6)
前記符号化手段は、予測符号化された現在のブロックの各々についてのブロックレベル、フレームレベル、GOP(ピクチャのグループ)レベル、PPS(ピクチャパラメータセット)レベル、またはSPS(シーケンスパラメータセット)レベルで、前記フィルタ情報を前記符号化された映像ビットストリームに追加するように適合される、項目5に記載のビデオコーダ。
(項目7)
変換係数を生成するべく、線形空間変換を用いて予測誤差を変換し、前記変換係数を量子化するように適合される変換および量子化ユニットと、
前記符号化された映像ビットストリームを生成するべく、量子化された前記変換係数を、それぞれ走査およびエントロピー符号化するように適合される走査ユニットおよびエントロピーエンコーダと
を備える、項目4から6のいずれか一項に記載のビデオコーダ。
(項目8)
前記フィルタ選択ユニットは、例えば、正の横軸に対する、前記動きベクトルの角度を導出し、前記角度に応じて、複数のフィルタのうちの1つの前記フィルタを選択するように適合される、項目1から7のいずれか一項に記載のビデオコーダ。
(項目9)
前記映像ストリームを単層符号化するための、項目1から8のいずれか一項に記載のビデオコーダ。
(項目10)
前記フィルタ選択ユニットは、前記動きベクトルの向きに応じて、複数のブラーおよびブラー除去フィルタのうち少なくとも1つを選択するように適合される、項目1から9のいずれか一項に記載のビデオコーダ。
(項目11)
項目1から10のいずれか一項に記載のビデオコーダを備える、フレーム内およびフレーム間予測のためのハイブリッドビデオエンコーダ。
(項目12)
動き補償に従って後のフレームの映像ストリームを符号化された映像ビットストリームに予測符号化するための方法であって、
前記映像ストリームのうちの少なくとも1つの参照フレームを記憶する段階であって、前記参照フレームは、前記映像ストリームの現在のフレームと異なる、段階と、
前記参照フレームの参照ブロックと、前記現在のフレームの現在のブロックとの間の動きを推定することによって、動きベクトルを生成することを含む、動き推定の段階と、
前記動きベクトルの向きに応じて、複数のフィルタのうちの1つのフィルタを選択する段階と、
選択された前記フィルタを前記参照ブロックに適用することによって、フィルタリングされた参照ブロックを生成する段階と、
前記現在のブロックおよび前記フィルタリングされた参照ブロックに基づいて、前記現在のブロックのフィルタリングされた予測ブロックを生成することを含む動き補償の段階と
を備える方法。
(項目13)
動き補償に従って後のフレームの映像ストリームを予測符号化することによって取得される符号化された映像ビットストリームを復号化するためのビデオデコーダであって、
前記符号化された映像ビットストリームは、予測符号化された現在のフレーム、および、参照フレームの参照ブロックと、前記現在のフレームの現在のブロックとの間の動きを反映する符号化された動きベクトルを含み、前記参照フレームは、前記現在のフレームと異なり、
前記ビデオデコーダは、
前記符号化された参照フレームおよび前記符号化された動きベクトルを復号化するように適合され、これにより、参照フレームおよび動きベクトルを生成する、デコーダと、
前記参照フレームを記憶するように適合されるフレームバッファと、
前記動きベクトルの向きに応じて、複数のフィルタのうちの1つのフィルタを選択するように適合されるフィルタ選択ユニットと、
選択された前記フィルタを前記参照ブロックに適用することによって、フィルタリングされた参照ブロックを生成するように適合されるフィルタリングユニットと、
前記動きベクトルおよび前記フィルタリングされた参照ブロックに基づいて、前記予測符号化された現在のフレームの前記現在のブロックを生成するように適合される動き補償ユニットと
を備える、ビデオデコーダ。
(項目14)
前記符号化された映像ビットストリームは、前記現在のブロックに関連するフィルタ情報を含み、
前記デコーダは、前記フィルタ情報を復号化するように適合され、
前記動き補償ユニットは、前記フィルタ情報の値に応じて、前記動きベクトルおよび前記フィルタリングされた参照ブロックに基づいて、または、前記動きベクトルおよび前記参照ブロックに基づいて、前記予測符号化された現在のフレームの前記現在のブロックを生成するように適合される、
項目13に記載のビデオデコーダ。
(項目15)
前記フィルタ選択ユニットは、例えば正の横軸に対する、前記動きベクトルの角度を導出し、前記角度に応じて複数のフィルタのうちの1つの前記フィルタを選択するように適合される、項目13または14に記載のビデオデコーダ。
(項目16)
前記映像ストリームを単層符号化するための、項目13から15のいずれか一項に記載のビデオデコーダ。
(項目17)
前記フィルタ選択ユニットは、前記動きベクトルの向きに応じて、複数のブラーおよびブラー除去フィルタのうち少なくとも1つを選択するように適合される、項目13から16のいずれか一項に記載のビデオデコーダ。
(項目18)
項目13から17のいずれか一項に記載のビデオデコーダを備える、フレーム内およびフレーム間予測のためのハイブリッドビデオデコーダ。
(項目19)
動き補償に従って、後のフレームの映像ストリームを予測符号化することによって取得される符号化された映像ビットストリームを復号化するための方法であって、
前記符号化された映像ビットストリームは、少なくとも1つの符号化された参照フレーム、予測符号化された現在のフレーム、および、前記参照フレームの参照ブロックと前記現在のフレームの現在のブロックとの間の動きを反映する符号化された動きベクトルを含み、前記参照フレームは前記現在のフレームと異なり、
前記方法は、
前記符号化された参照フレームおよび前記符号化された動きベクトルを復号化し、これにより、参照フレームおよび動きベクトルを生成する段階と、
前記参照フレームを記憶する段階と、
前記動きベクトルの向きに応じて複数のフィルタのうちの1つのフィルタを選択する段階と、
選択された前記フィルタを前記参照ブロックに適用することによって、フィルタリングされた参照ブロックを生成する段階と、
前記動きベクトルおよび前記フィルタリングされた参照ブロックに基づいて、前記予測符号化された現在のフレームの前記現在のブロックを生成することを含む動き補償を行う段階と
を備える、方法。
(項目20)
前記符号化された映像ビットストリームは、前記現在のブロックに関するフィルタ情報を含み、
前記方法は、
前記フィルタ情報を復号化する段階と、
前記フィルタ情報の値に応じて、前記動きベクトルおよび前記フィルタリングされた参照ブロックに基づいて、または、前記動きベクトルおよび前記参照ブロックに基づいて、前記予測符号化された現在のフレームの前記現在のブロックを生成する段階と
を備える、
項目19に記載の方法。
(項目21)
例えば、正の横軸に対する前記動きベクトルの角度を導出する段階と、
前記角度に応じて、複数のフィルタのうちの1つの前記フィルタを選択する段階と
を備える、項目19または20に記載の方法。
(項目22)
前記映像ストリームを単層符号化するための、項目19から21のいずれか一項に記載の方法。
(項目23)
複数のフィルタのうちの1つのフィルタを選択する前記段階は、前記動きベクトルの向きに応じて、複数のブラーおよびブラー除去フィルタのうちの少なくとも1つを選択する段階を含む、項目19から22のいずれか一項に記載の方法。
(項目24)
フレーム内およびフレーム間予測のための、項目19から23のいずれか一項に記載の方法。
(項目25)
コンピュータプログラムがコンピュータデバイス上で動作するときに、項目12または19から24のいずれか一項に記載の方法を実行するためのプログラムコードを含む、コンピュータプログラム。
Claims (12)
- 動き補償に従って、後のフレームの映像ストリームを符号化された映像ビットストリームに予測符号化するためのビデオコーダであって、
前記映像ストリームの少なくとも1つの参照フレームを記憶するように適合されるフレームバッファであって、前記参照フレームは、前記映像ストリームの現在のフレームと異なる、フレームバッファと、
前記参照フレームの参照ブロックと前記現在のフレームの現在のブロックとの間の動きを推定することによって動きベクトルを生成するように適合される動き推定ユニットと、
前記動きベクトルの向きに応じて、複数のフィルタのうちの1つのフィルタを選択するように適合されるフィルタ選択ユニットと、
選択された前記フィルタを前記参照ブロックに適用することによって、フィルタリングされた参照ブロックを生成するように適合されるフィルタリングユニットと、
前記現在のブロックおよび前記フィルタリングされた参照ブロックに基づいて、前記現在のブロックのフィルタリングされた予測ブロックを生成するように適合される動き補償ユニットと
を備え、
前記動き推定ユニットは、
前記フィルタリングされた参照ブロックと前記現在のブロックとの間の動きを推定することによって、第2動きベクトルを生成するように適合され、
前記第2動きベクトル、および、前記参照ブロックと前記現在のブロックとの間の動きベクトルの比較に応じて、前記符号化された映像ビットストリームを生成するために、前記フィルタリングされた参照ブロックが考慮されるか、または、破棄される、
ビデオコーダ。 - 前記動き補償ユニットは、
前記現在のブロックおよび前記参照ブロックに基づいて、前記現在のブロックのフィルタリングされていない予測ブロックをさらに生成し、
前記フィルタリングされた予測ブロックおよび前記フィルタリングされていない予測ブロックの中から、予測誤差を最小化する予測ブロックを出力し、前記予測誤差は、前記現在のブロックと、それぞれの前記予測ブロックとの間の差である、
ように適合される、請求項1に記載のビデオコーダ。 - 前記動き補償ユニットによって出力される前記予測ブロックに対応する予測誤差に基づいて前記符号化された映像ビットストリームを生成するように適合される符号化手段を備える、請求項1または2に記載のビデオコーダ。
- 前記符号化された映像ビットストリームを生成するように適合される符号化手段を備え、これにより、前記符号化された映像ビットストリームは、動き情報およびフィルタ情報を含み、前記動き情報は、前記動きベクトルを含み、
前記フィルタ情報は、前記符号化された映像ビットストリームが、前記現在のブロックと前記フィルタリングされた予測ブロックとの間の予測誤差に基づいているか、または、前記現在のブロックと前記フィルタリングされていない予測ブロックとの間の予測誤差に基づいているかを指定する、
前述の請求項1から3のいずれか一項に記載のビデオコーダ。 - 前記符号化手段は、予測符号化された現在のブロックの各々についてのブロックレベル、フレームレベル、GOP(ピクチャのグループ)レベル、PPS(ピクチャパラメータセット)レベル、またはSPS(シーケンスパラメータセット)レベルで、前記フィルタ情報を前記符号化された映像ビットストリームに追加するように適合される、請求項4に記載のビデオコーダ。
- 変換係数を生成するべく、線形空間変換を用いて予測誤差を変換し、前記変換係数を量子化するように適合される変換および量子化ユニットと、
前記符号化された映像ビットストリームを生成するべく、量子化された前記変換係数を、それぞれ走査およびエントロピー符号化するように適合される走査ユニットおよびエントロピーエンコーダと
を備える、請求項3から5のいずれか一項に記載のビデオコーダ。 - 前記フィルタ選択ユニットは、例えば、正の横軸に対する、前記動きベクトルの角度を導出し、前記角度に応じて、複数のフィルタのうちの1つの前記フィルタを選択するように適合される、請求項1から6のいずれか一項に記載のビデオコーダ。
- 前記映像ストリームを単層符号化するための、請求項1から7のいずれか一項に記載のビデオコーダ。
- 前記フィルタ選択ユニットは、前記動きベクトルの向きに応じて、複数のブラーおよびブラー除去フィルタのうち少なくとも1つを選択するように適合される、請求項1から8のいずれか一項に記載のビデオコーダ。
- 請求項1から9のいずれか一項に記載のビデオコーダを備える、フレーム内およびフレーム間予測のためのハイブリッドビデオエンコーダ。
- 動き補償に従って後のフレームの映像ストリームを符号化された映像ビットストリームに予測符号化するための方法であって、
前記映像ストリームのうちの少なくとも1つの参照フレームを記憶する段階であって、前記参照フレームは、前記映像ストリームの現在のフレームと異なる、段階と、
前記参照フレームの参照ブロックと、前記現在のフレームの現在のブロックとの間の動きを推定することによって、動きベクトルを生成することを含む、動き推定の段階と、
前記動きベクトルの向きに応じて、複数のフィルタのうちの1つのフィルタを選択する段階と、
選択された前記フィルタを前記参照ブロックに適用することによって、フィルタリングされた参照ブロックを生成する段階と、
前記現在のブロックおよび前記フィルタリングされた参照ブロックに基づいて、前記現在のブロックのフィルタリングされた予測ブロックを生成することを含む動き補償の段階と
を備え、
前記動き推定の段階は、前記フィルタリングされた参照ブロックと前記現在のブロックとの間の動きを推定することによって、第2動きベクトルを生成し、
前記第2動きベクトル、および、前記参照ブロックと前記現在のブロックとの間の動きベクトルの比較に応じて、前記符号化された映像ビットストリームを生成するために、前記フィルタリングされた参照ブロックが考慮されるか、または、破棄される、
方法。 - コンピュータプログラムがコンピュータデバイス上で動作するときに、請求項11に記載の方法を実行するためのプログラムコードを含む、コンピュータプログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/EP2015/061278 WO2016184527A1 (en) | 2015-05-21 | 2015-05-21 | Apparatus and method for video motion compensation |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018520565A JP2018520565A (ja) | 2018-07-26 |
JP6593934B2 true JP6593934B2 (ja) | 2019-10-23 |
Family
ID=53276093
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017560297A Active JP6593934B2 (ja) | 2015-05-21 | 2015-05-21 | 映像動き補償のための装置および方法 |
Country Status (12)
Country | Link |
---|---|
US (1) | US10536716B2 (ja) |
EP (1) | EP3286917A1 (ja) |
JP (1) | JP6593934B2 (ja) |
KR (1) | KR102162856B1 (ja) |
CN (1) | CN107646194B (ja) |
AU (1) | AU2015395514B2 (ja) |
CA (1) | CA2986613C (ja) |
HK (1) | HK1244136A1 (ja) |
MX (1) | MX2017014914A (ja) |
MY (1) | MY190056A (ja) |
RU (1) | RU2684193C1 (ja) |
WO (1) | WO2016184527A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10694181B2 (en) * | 2017-01-27 | 2020-06-23 | Qualcomm Incorporated | Bilateral filters in video coding with reduced complexity |
EP3468198A1 (en) | 2017-10-05 | 2019-04-10 | Thomson Licensing | Method and apparatus for video encoding and decoding based on illumination compensation |
EP3629427A4 (en) | 2018-01-19 | 2020-07-22 | Lg Chem, Ltd. | DETACHABLE HIGH VOLTAGE CONNECTOR ASSEMBLY AND PRODUCTION METHOD THEREFOR |
CN109348222B (zh) * | 2018-11-22 | 2020-08-07 | 随锐科技集团股份有限公司 | 一种参考帧的选取方法 |
EP3888368A4 (en) * | 2018-11-27 | 2022-03-02 | OP Solutions, LLC | ADAPTIVE TIME REFERENCE IMAGE CROSS-REFERENCE FILTER NOT AVAILABLE TO RELATED APPLICATIONS |
US20220312004A1 (en) * | 2021-03-23 | 2022-09-29 | Tencent America LLC | Method and apparatus for video coding |
CN113259669B (zh) * | 2021-03-25 | 2023-07-07 | 浙江大华技术股份有限公司 | 编码方法、装置、电子设备及计算机可读存储介质 |
CN117795974A (zh) * | 2021-08-05 | 2024-03-29 | 三星电子株式会社 | 支持图像数据去模糊的电子装置和方法 |
Family Cites Families (42)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2286740B (en) * | 1994-02-21 | 1998-04-01 | Sony Uk Ltd | Coding and decoding of video signals |
US7412002B2 (en) * | 2000-04-28 | 2008-08-12 | Texas Instruments Incorporated | Image preprocessing with selective lowpass filtering from motion compensation |
US7450641B2 (en) * | 2001-09-14 | 2008-11-11 | Sharp Laboratories Of America, Inc. | Adaptive filtering based upon boundary strength |
US7266150B2 (en) * | 2001-07-11 | 2007-09-04 | Dolby Laboratories, Inc. | Interpolation of video compression frames |
US6965645B2 (en) * | 2001-09-25 | 2005-11-15 | Microsoft Corporation | Content-based characterization of video frame sequences |
EP1702457B1 (en) * | 2003-12-01 | 2009-08-26 | Koninklijke Philips Electronics N.V. | Motion-compensated inverse filtering with band-pass-filters for motion blur reduction |
EP1578137A2 (en) * | 2004-03-17 | 2005-09-21 | Matsushita Electric Industrial Co., Ltd. | Moving picture coding apparatus with multistep interpolation process |
US7337358B2 (en) * | 2004-12-20 | 2008-02-26 | Microsoft Corporation | Method and computer-readable medium for verifying and saving an electronic document |
US20060171569A1 (en) | 2005-01-10 | 2006-08-03 | Madhukar Budagavi | Video compression with blur compensation |
EP1886502A2 (en) * | 2005-04-13 | 2008-02-13 | Universität Hannover | Method and apparatus for enhanced video coding |
EP1915860A2 (en) * | 2005-08-12 | 2008-04-30 | Nxp B.V. | Method and system for digital image stabilization |
CN101491099B (zh) | 2006-07-11 | 2011-09-21 | 汤姆森特许公司 | 使用虚拟参考画面的方法及装置 |
JP5185266B2 (ja) * | 2007-07-02 | 2013-04-17 | 日本電信電話株式会社 | 動画像スケーラブル符号化方法及び復号方法、それらの装置、それらのプログラム並びにプログラムを記録した記録媒体 |
KR101392482B1 (ko) * | 2007-08-30 | 2014-05-07 | 삼성전자주식회사 | 블록킹 효과 제거 시스템 및 방법 |
US8625672B2 (en) * | 2008-01-07 | 2014-01-07 | Thomson Licensing | Methods and apparatus for video encoding and decoding using parametric filtering |
WO2009131508A2 (en) * | 2008-04-23 | 2009-10-29 | Telefonaktiebolaget Lm Ericsson (Publ) | Template-based pixel block processing |
JP4613990B2 (ja) * | 2008-07-31 | 2011-01-19 | ソニー株式会社 | 画像処理装置、画像処理方法、プログラム |
KR101703362B1 (ko) * | 2008-09-04 | 2017-02-06 | 톰슨 라이센싱 | 암시적 모션 예측을 이용한 예측 리파인먼트를 위한 방법들 및 장치들 |
CN101527847B (zh) * | 2009-01-04 | 2012-01-04 | 炬力集成电路设计有限公司 | 运动补偿插值装置和方法 |
FR2952497B1 (fr) * | 2009-11-09 | 2012-11-16 | Canon Kk | Procede de codage et de decodage d'un flux d'images; dispositifs associes |
JP5047344B2 (ja) * | 2009-12-28 | 2012-10-10 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
JP2011139208A (ja) * | 2009-12-28 | 2011-07-14 | Sony Corp | 画像処理装置および方法 |
JP5805991B2 (ja) * | 2010-05-07 | 2015-11-10 | トムソン ライセンシングThomson Licensing | ピクチャ・シーケンスを符号化する方法、それに対応する再構築方法、および当該シーケンスを表す符号化データのストリーム |
CN102907099A (zh) * | 2010-05-20 | 2013-01-30 | 星河通信株式会社 | 适用利用选择性运动检索区域的运动补偿方法的视频压缩编码装置及解码装置和用于运动补偿的选择性运动检索区域的决定方法 |
KR101373814B1 (ko) * | 2010-07-31 | 2014-03-18 | 엠앤케이홀딩스 주식회사 | 예측 블록 생성 장치 |
US20130235274A1 (en) * | 2010-11-17 | 2013-09-12 | Mitsubishi Electric Corporation | Motion vector detection device, motion vector detection method, frame interpolation device, and frame interpolation method |
US9560372B2 (en) * | 2010-12-27 | 2017-01-31 | Stmicroelectronics, Inc. | Directional motion vector filtering |
CN102547272B (zh) * | 2010-12-30 | 2015-03-11 | 中国移动通信集团公司 | 一种解码方法、装置及终端 |
US9319716B2 (en) * | 2011-01-27 | 2016-04-19 | Qualcomm Incorporated | Performing motion vector prediction for video coding |
US8964853B2 (en) * | 2011-02-23 | 2015-02-24 | Qualcomm Incorporated | Multi-metric filtering |
WO2012147622A1 (ja) * | 2011-04-28 | 2012-11-01 | ソニー株式会社 | 画像処理装置、及び、画像処理方法 |
US10034018B2 (en) * | 2011-09-23 | 2018-07-24 | Velos Media, Llc | Decoded picture buffer management |
KR20130050149A (ko) * | 2011-11-07 | 2013-05-15 | 오수미 | 인터 모드에서의 예측 블록 생성 방법 |
GB2501535A (en) * | 2012-04-26 | 2013-10-30 | Sony Corp | Chrominance Processing in High Efficiency Video Codecs |
US9270993B2 (en) * | 2012-09-10 | 2016-02-23 | Apple Inc. | Video deblocking filter strength derivation |
WO2015051011A1 (en) * | 2013-10-02 | 2015-04-09 | Arris Enterprises, Inc. | Modified hevc transform tree syntax |
TWI549489B (zh) * | 2014-04-16 | 2016-09-11 | 智原科技股份有限公司 | 移動偵測電路與方法 |
FR3022724A1 (fr) * | 2014-06-19 | 2015-12-25 | Orange | Procede de codage et de decodage d'images, dispositif de codage et de decodage d'images et programmes d'ordinateur correspondants |
WO2017122997A1 (ko) * | 2016-01-11 | 2017-07-20 | 삼성전자 주식회사 | 영상 부호화 방법 및 장치와 영상 복호화 방법 및 장치 |
US20190068967A1 (en) * | 2016-02-03 | 2019-02-28 | Sharp Kabushiki Kaisha | Predicted-image generation device, video decoding device, and video coding device |
EP3296950A1 (en) * | 2016-09-15 | 2018-03-21 | Thomson Licensing | Method and device for blurring a virtual object in a video |
IT201600094414A1 (it) * | 2016-09-20 | 2018-03-20 | St Microelectronics Srl | Un procedimento per rilevare un veicolo in sorpasso, relativo sistema di elaborazione, sistema di rilevazione di un veicolo in sorpasso e veicolo |
-
2015
- 2015-05-21 JP JP2017560297A patent/JP6593934B2/ja active Active
- 2015-05-21 MY MYPI2017704418A patent/MY190056A/en unknown
- 2015-05-21 WO PCT/EP2015/061278 patent/WO2016184527A1/en active Application Filing
- 2015-05-21 AU AU2015395514A patent/AU2015395514B2/en active Active
- 2015-05-21 CN CN201580080207.7A patent/CN107646194B/zh active Active
- 2015-05-21 MX MX2017014914A patent/MX2017014914A/es unknown
- 2015-05-21 CA CA2986613A patent/CA2986613C/en active Active
- 2015-05-21 RU RU2017144790A patent/RU2684193C1/ru active
- 2015-05-21 KR KR1020177036075A patent/KR102162856B1/ko active IP Right Grant
- 2015-05-21 EP EP15726057.1A patent/EP3286917A1/en not_active Ceased
-
2017
- 2017-11-21 US US15/819,801 patent/US10536716B2/en active Active
-
2018
- 2018-03-12 HK HK18103404.4A patent/HK1244136A1/zh unknown
Also Published As
Publication number | Publication date |
---|---|
AU2015395514A1 (en) | 2017-12-21 |
BR112017024902A2 (pt) | 2018-07-31 |
US20180160142A1 (en) | 2018-06-07 |
RU2684193C1 (ru) | 2019-04-04 |
EP3286917A1 (en) | 2018-02-28 |
HK1244136A1 (zh) | 2018-07-27 |
CN107646194A (zh) | 2018-01-30 |
US10536716B2 (en) | 2020-01-14 |
JP2018520565A (ja) | 2018-07-26 |
KR20180006972A (ko) | 2018-01-19 |
KR102162856B1 (ko) | 2020-10-07 |
WO2016184527A1 (en) | 2016-11-24 |
CN107646194B (zh) | 2020-08-07 |
AU2015395514B2 (en) | 2019-10-10 |
CA2986613C (en) | 2020-04-28 |
MX2017014914A (es) | 2018-06-13 |
CA2986613A1 (en) | 2016-11-24 |
MY190056A (en) | 2022-03-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6593934B2 (ja) | 映像動き補償のための装置および方法 | |
KR101863082B1 (ko) | 영상 부호화 및 복호화 장치 및 그 방법 | |
JP4565010B2 (ja) | 画像復号装置および画像復号方法 | |
JP5330647B2 (ja) | 適応参照画像の発生 | |
JP6677804B2 (ja) | ビデオ動き補償のための装置及び方法 | |
JP2006054857A (ja) | 3d分解を用いてフレームシーケンスを符号化および復号する方法、使用方法、装置、およびコンピュータプログラム | |
JP2008311824A (ja) | 画像符号化装置および画像符号化プログラム | |
JP4406887B2 (ja) | 動画像符号化装置及び動画像符号化方法 | |
BR112017024902B1 (pt) | Dispositivo codificador de vídeo, método para codificação preditiva, dispositivo decodificador de vídeo, método para decodificar um fluxo de bits de vídeo, e meio não transitório legível por computador |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171227 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171227 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20181219 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190115 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190412 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190827 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190920 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6593934 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |