JP2007526704A - 階層化時間解析による画像系列の符号化及び復号化の方法 - Google Patents
階層化時間解析による画像系列の符号化及び復号化の方法 Download PDFInfo
- Publication number
- JP2007526704A JP2007526704A JP2007501324A JP2007501324A JP2007526704A JP 2007526704 A JP2007526704 A JP 2007526704A JP 2007501324 A JP2007501324 A JP 2007501324A JP 2007501324 A JP2007501324 A JP 2007501324A JP 2007526704 A JP2007526704 A JP 2007526704A
- Authority
- JP
- Japan
- Prior art keywords
- picture
- pictures
- frequency
- temporal
- filtering
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 61
- 238000004458 analytical method Methods 0.000 title claims abstract description 14
- 230000002123 temporal effect Effects 0.000 claims abstract description 77
- 238000001914 filtration Methods 0.000 claims abstract description 74
- 230000002441 reversible effect Effects 0.000 claims abstract description 7
- 238000000354 decomposition reaction Methods 0.000 claims description 30
- 239000013598 vector Substances 0.000 claims description 22
- 230000015572 biosynthetic process Effects 0.000 claims description 10
- 238000003786 synthesis reaction Methods 0.000 claims description 10
- 238000012731 temporal analysis Methods 0.000 claims description 8
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000012732 spatial analysis Methods 0.000 claims description 4
- 230000006835 compression Effects 0.000 abstract description 4
- 238000007906 compression Methods 0.000 abstract description 4
- 230000006978 adaptation Effects 0.000 abstract 1
- 102100037812 Medium-wave-sensitive opsin 1 Human genes 0.000 description 27
- 238000012545 processing Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 230000003044 adaptive effect Effects 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000013138 pruning Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
- H04N19/615—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding using motion compensated temporal filtering [MCTF]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/1883—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit relating to sub-band structure, e.g. hierarchical level, directional tree, e.g. low-high [LH], high-low [HL], high-high [HH]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
- H04N19/64—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets characterised by ordering of coefficients or of bits for transmission
- H04N19/647—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets characterised by ordering of coefficients or of bits for transmission using significance based coding, e.g. Embedded Zerotrees of Wavelets [EZW] or Set Partitioning in Hierarchical Trees [SPIHT]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Description
このピクチャ自体がイントラ符号化から得られるという、高周波ピクチャに対する更なる条件で、低分解レベルでのピクチャのイントラ符号化によって得られるピクチャを選択し、
スケーリング工程の少なくとも1つの逆工程を行うことによって選択されるピクチャをキャリブレートする。
MCTFフィルタリングによって得られる最後のピクチャの場合、値ゼロに相当し、
イントラ符号化によって得られる最終低周波ピクチャの場合、同じ番号のピクチャに対して実現されるイントラ符号化処理の数(1、増やされる)に相当し、
イントラ符号化によって得られる高周波ピクチャの場合、同じ番号のピクチャに対して実現される連続イントラ符号化処理の数(この高周波ピクチャをもたらす)に相当し、
後続ピクチャによる時間フィルタリングから得られる高周波ピクチャの場合、同じ番号のピクチャに対して実現される連続イントラ符号化処理の数(1、増やされる、この時間フィルタリングの目的であるピクチャをもたらす)に相当する。
Claims (12)
- 別々の時間分解レベルで低時間周波数ピクチャ及び高時間周波数ピクチャを供給するよう連続したピクチャ対(11)の動き補償時間フィルタリングを行う、ピクチャ群の階層化時間解析(1)を備える、ピクチャ系列を符号化する方法であって、前記解析は、特定の時間分解レベルについて、かつ、低時間周波数ピクチャ対について、動きベクトルを供給するための、先行参照ピクチャAへの現行ピクチャBの動き推定工程(8)、次いで、更に大きな分解レベルで低時間周波数ピクチャ(L)及び高時間周波数ピクチャ(H)を供給するための、前記ピクチャの動き補償時間フィルタリング(11)を実現し、前記時間フィルタリングは、前記現行ピクチャが、閾値(10、15)よりも低い、先行ピクチャとの相関レベルを有する場合に少なくとも1つの低周波(L)ピクチャ又は高周波(H)ピクチャを得るようイントラ・モード(16、17)符号化によって置き換えられ、得られる低周波(L)ピクチャはよって、前記動き補償時間フィルタリングによって得られるピクチャにエネルギ・レベルで適応させるようスケーリングされ、前記低周波ピクチャと、解析の最後に得られる最終高周波分解ピクチャとのうちで、
低分解レベルでのピクチャのイントラ符号化によって得られるピクチャを、ピクチャ自体がイントラ符号化から得られるという、前記高周波ピクチャに対する更なる条件で選択し、
少なくとも1つの、前記スケーリングする工程の逆工程を行うことによって、前記選択されるピクチャをキャリブレートすることを特徴とする方法。 - 請求項1記載の方法であって、行われる逆工程の数は、高周波選択ピクチャを伴う場合に、選択されるピクチャに達するよう、低周波ピクチャ(L)の連続したイントラ符号化処理の数に相当し、該数を、低周波選択ピクチャ(L)を伴う場合に1増加させることを特徴とする方法。
- 請求項2記載の方法であって、低L周波画像又は高H周波画像の計算のための、前記現行ピクチャと後続ピクチャ対の後続ピクチャ(16)との間の、前記現行ピクチャと先行ピクチャとの間の相関が閾値(10)よりも低い場合の時間フィルタリングを備え、前記現行ピクチャと、前記後続ピクチャとの間の相関が閾値(15)よりも大きい場合に、他方のHピクチャ又はLピクチャはイントラ符号化(16)によって得られ、選択工程の場合、前記フィルタリング処理を前記イントラ符号化と一致させるが、前記時間フィルタリングと一致させないことを特徴とする方法。
- 請求項3記載の方法であって、ピクチャ番号を前記ピクチャ群の各ピクチャに割り当て、番号を付した前記ピクチャを、番号毎にカウンタを帰することによって分解中に監視し、前記カウンタは各工程で更新され、
低周波ピクチャ(L)がイントラ・モードで得られる都度、前記カウンタが増やされ、
高周波ピクチャ(H)がイントラ・モードで得られる都度、又は後続ピクチャによる時間フィルタリング中に、前記カウンタは変わらない状態に留まり、
先行ピクチャによる動き補償時間フィルタリングによってピクチャが得られる都度、前記カウンタがリセットされることを特徴とする方法。 - 請求項1記載の方法であって、時間解析(1)によって得られる、前記キャリブレートされたピクチャは次いで空間解析(3)によって処理されることを特徴とする方法。
- 請求項1記載の方法であって、前記相関レベルは、接続された、すなわち、動きベクトルによって接続された接続画素数を考慮に入れることによって計算されることを特徴とする方法。
- 請求項1記載の方法による、符号化画像系列の復号化方法であって、復号化対象の選択ピクチャの逆キャリブレーション工程(21)を実施し、前記ピクチャの前記選択及び逆工程数は、復号化対象の前記ピクチャに関連した情報の要素によって変わってくることを特徴とする復号化方法。
- 請求項4記載の方法による、符号化画像系列の復号化方法であって、復号化対象の選択ピクチャの逆キャリブレーション工程(21)を実施し、前記選択及び逆工程数は、前記符号化中に前記ピクチャに割り当てられたカウンタの値の関数であることを特徴とする方法。
- 前記動き補償時間フィルタリング及び前記イントラ符号化を用いた時間解析回路(1)を備えた、請求項3記載の方法の実施のための符号器であって、前記回路は、前記低周波ピクチャと、解析の最後に得られる最終高周波分解ピクチャとのうちで、低分解レベルでのピクチャのイントラ符号化によって、又は、ピクチャ対のピクチャと、前記低分解レベルでの後続ピクチャ対の後続ピクチャとの間の時間フィルタリングによって得られるピクチャを、前記高周波ピクチャの場合、ピクチャ自体がイントラ符号化から得られ、選択ピクチャについて前記スケーリング工程の少なくとも1つの逆工程を行うという更なる条件で選択することを特徴とする符号器。
- 時間合成回路(21)を備える、請求項1記載の方法による、画像系列の復号化のための復号器であって、前記回路は、復号化対象のピクチャの逆キャリブレーションを行う手段を備え、画像の選択及び逆キャリブレーション数は、復号化対象のピクチャに関連し、復号器によって受信される情報要素によって変わってくることを特徴とする復号器。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR0450420A FR2867329A1 (fr) | 2004-03-02 | 2004-03-02 | Procede de codage d'une sequence d'images par analyse temporelle hierarchique. |
PCT/FR2005/050109 WO2005086489A1 (fr) | 2004-03-02 | 2005-02-21 | Procede de codage et de decodage d'une sequence d'images par analyse temporelle hierarchique |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2007526704A true JP2007526704A (ja) | 2007-09-13 |
Family
ID=34855194
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007501324A Pending JP2007526704A (ja) | 2004-03-02 | 2005-02-21 | 階層化時間解析による画像系列の符号化及び復号化の方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US8175153B2 (ja) |
EP (1) | EP1721470B1 (ja) |
JP (1) | JP2007526704A (ja) |
CN (1) | CN1934867B (ja) |
FR (1) | FR2867329A1 (ja) |
WO (1) | WO2005086489A1 (ja) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2005004479A1 (en) * | 2003-07-08 | 2005-01-13 | Koninklijke Philips Electronics N.V. | Motion-compensated image signal interpolation |
CN103404145B (zh) * | 2011-03-09 | 2017-03-22 | 西门子公司 | 一种用于对数字化图像的序列进行编码的方法 |
WO2013049412A2 (en) | 2011-09-29 | 2013-04-04 | Dolby Laboratories Licensing Corporation | Reduced complexity motion compensated temporal processing |
WO2016138265A1 (en) * | 2015-02-25 | 2016-09-01 | Global Ionics LLC | Ionic devices |
US10068138B2 (en) | 2015-09-17 | 2018-09-04 | Canon Kabushiki Kaisha | Devices, systems, and methods for generating a temporal-adaptive representation for video-event classification |
US10319573B2 (en) | 2017-01-26 | 2019-06-11 | Protein Metrics Inc. | Methods and apparatuses for determining the intact mass of large molecules from mass spectrographic data |
US11626274B2 (en) | 2017-08-01 | 2023-04-11 | Protein Metrics, Llc | Interactive analysis of mass spectrometry data including peak selection and dynamic labeling |
US10510521B2 (en) | 2017-09-29 | 2019-12-17 | Protein Metrics Inc. | Interactive analysis of mass spectrometry data |
US11640901B2 (en) | 2018-09-05 | 2023-05-02 | Protein Metrics, Llc | Methods and apparatuses for deconvolution of mass spectrometry data |
US11346844B2 (en) | 2019-04-26 | 2022-05-31 | Protein Metrics Inc. | Intact mass reconstruction from peptide level data and facilitated comparison with experimental intact observation |
WO2022047368A1 (en) * | 2020-08-31 | 2022-03-03 | Protein Metrics Inc. | Data compression for multidimensional time series data |
US20240214565A1 (en) * | 2021-04-01 | 2024-06-27 | Beijing Bytedance Network Technology Co., Ltd. | Method, device, and medium for video processing |
CN114302137B (zh) * | 2021-12-23 | 2023-12-19 | 北京达佳互联信息技术有限公司 | 用于视频的时域滤波方法、装置、存储介质及电子设备 |
CN115002482B (zh) * | 2022-04-27 | 2024-04-16 | 电子科技大学 | 使用结构性保持运动估计的端到端视频压缩方法及系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030202597A1 (en) * | 2002-04-29 | 2003-10-30 | Koninklijke Philips Electronics N.V. | Wavelet based coding using motion compensated filtering based on both single and multiple reference frames |
US20040008785A1 (en) * | 2002-07-15 | 2004-01-15 | Koninklijke Philips Electronics N.V. | L-frames with both filtered and unfilterd regions for motion comensated temporal filtering in wavelet based coding |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5235420A (en) * | 1991-03-22 | 1993-08-10 | Bell Communications Research, Inc. | Multilayer universal video coder |
US6873734B1 (en) * | 1994-09-21 | 2005-03-29 | Ricoh Company Ltd | Method and apparatus for compression using reversible wavelet transforms and an embedded codestream |
WO2001006794A1 (en) * | 1999-07-20 | 2001-01-25 | Koninklijke Philips Electronics N.V. | Encoding method for the compression of a video sequence |
US7321625B2 (en) * | 2002-12-13 | 2008-01-22 | Ntt Docomo, Inc. | Wavelet based multiresolution video representation with spatially scalable motion vectors |
-
2004
- 2004-03-02 FR FR0450420A patent/FR2867329A1/fr active Pending
-
2005
- 2005-02-21 EP EP05728099.2A patent/EP1721470B1/fr active Active
- 2005-02-21 WO PCT/FR2005/050109 patent/WO2005086489A1/fr active Application Filing
- 2005-02-21 US US10/590,307 patent/US8175153B2/en active Active
- 2005-02-21 JP JP2007501324A patent/JP2007526704A/ja active Pending
- 2005-02-21 CN CN200580006545.2A patent/CN1934867B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030202597A1 (en) * | 2002-04-29 | 2003-10-30 | Koninklijke Philips Electronics N.V. | Wavelet based coding using motion compensated filtering based on both single and multiple reference frames |
US20040008785A1 (en) * | 2002-07-15 | 2004-01-15 | Koninklijke Philips Electronics N.V. | L-frames with both filtered and unfilterd regions for motion comensated temporal filtering in wavelet based coding |
Also Published As
Publication number | Publication date |
---|---|
EP1721470B1 (fr) | 2015-01-14 |
FR2867329A1 (fr) | 2005-09-09 |
CN1934867A (zh) | 2007-03-21 |
EP1721470A1 (fr) | 2006-11-15 |
US20080025394A1 (en) | 2008-01-31 |
CN1934867B (zh) | 2010-10-27 |
US8175153B2 (en) | 2012-05-08 |
WO2005086489A1 (fr) | 2005-09-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2007526704A (ja) | 階層化時間解析による画像系列の符号化及び復号化の方法 | |
US8873622B2 (en) | Apparatus and method for generating a coded video sequence by using an intermediate layer motion data prediction | |
JP4334533B2 (ja) | 動画像符号化/復号化方法および装置 | |
EP1843593A1 (en) | Method for coding video data of a sequence of pictures | |
JP5300921B2 (ja) | 符号化および復号のための方法および装置 | |
US20070047644A1 (en) | Method for enhancing performance of residual prediction and video encoder and decoder using the same | |
JP4986842B2 (ja) | 空間的及び時間的スケーラビリティを以て符号化された画像シーケンスの符号化及び復号化の方法 | |
JPWO2010137323A1 (ja) | 映像符号化装置、映像復号装置、映像符号化方法、および映像復号方法 | |
KR20070039552A (ko) | 그리드 움직임 추정 및 보상을 갖는 스캘러블 비디오 코딩 | |
JP4794147B2 (ja) | フレームシーケンスを符号化する方法、フレームシーケンスを復号する方法、その方法を実施する装置、その方法を実行するコンピュータプログラム、およびそのコンピュータプログラムを格納する記憶媒体 | |
JP2005530423A (ja) | 画像鮮鋭度を符号化中に最適化する方法及びシステム | |
KR101529903B1 (ko) | 블록기반 깊이정보 맵의 코딩 방법과 장치, 및 이를 이용한 3차원 비디오 코딩 방법 | |
MXPA05009483A (es) | Metodo para codificar una imagen de video considerando la parte relativa a un componente de un vector de movimiento. | |
WO2007024106A1 (en) | Method for enhancing performance of residual prediction and video encoder and decoder using the same | |
Wang et al. | Lagrangian method based rate-distortion optimization revisited for dependent video coding | |
Cheung et al. | Retinex based motion estimation for sequences with brightness variations and its application to H. 264 | |
Fradj et al. | Scalable video coding using motion-compensated temporal filtering | |
Khan et al. | Wavelet-based video coding with early-predicted zerotrees | |
Chen et al. | Quality-fluctuation-constrained rate allocation for MCTF-based video coding | |
Wien | Hierarchical wavelet video coding using warping prediction | |
Maturana-Espinosa et al. | Rate Allocation for Motion Compensated JPEG2000 | |
JP2003116140A (ja) | 動画像可逆符号化方法とその復号化方法、及びそれらの装置 | |
KR101307469B1 (ko) | 비디오 인코더, 비디오 디코더, 비디오 인코딩 방법 및 비디오 디코딩 방법 | |
Atta et al. | Motion-compensated DCT temporal filters for efficient spatio-temporal scalable video coding | |
WO2006006796A1 (en) | Temporal decomposition and inverse temporal decomposition methods for video encoding and decoding and video encoder and decoder |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080125 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100803 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20101029 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20101108 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110203 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20110301 |