JP5418710B2 - 動画像の復号化方法 - Google Patents
動画像の復号化方法 Download PDFInfo
- Publication number
- JP5418710B2 JP5418710B2 JP2013083479A JP2013083479A JP5418710B2 JP 5418710 B2 JP5418710 B2 JP 5418710B2 JP 2013083479 A JP2013083479 A JP 2013083479A JP 2013083479 A JP2013083479 A JP 2013083479A JP 5418710 B2 JP5418710 B2 JP 5418710B2
- Authority
- JP
- Japan
- Prior art keywords
- frame
- image
- rounding
- information
- encoding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/223—Analysis of motion using block-matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/262—Analysis of motion using transform domain methods, e.g. Fourier domain methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
- G06T9/004—Predictors, e.g. intraframe, interframe coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/114—Adapting the group of pictures [GOP] structure, e.g. number of B-frames between two anchor frames
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/115—Selection of the code volume for a coding unit prior to coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
- H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/127—Prioritisation of hardware or computational resources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
- H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/16—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter for a given display mode, e.g. for interlaced or progressive display mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/19—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding using optimisation based on Lagrange multipliers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
- H04N19/45—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder performing compensation of the inverse transform mismatch, e.g. Inverse Discrete Cosine Transform [IDCT] mismatch
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
- H04N19/52—Processing of motion vectors by encoding by predictive encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/521—Processing of motion vectors for estimating the reliability of the determined motion vectors or motion vector field, e.g. for smoothing the motion vector field or for correcting motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/547—Motion estimation performed in a transform domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/625—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/94—Vector quantisation
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Discrete Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Mathematical Physics (AREA)
- Computing Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Studio Devices (AREA)
Description
本発明は、フレーム間予測を行い、輝度または色の強度が量子化された数値として表される動画像符号化および復号化方法、ならびに動画像の符号化装置および復号化装置に関するものである。
動画像の高能率符号化において、時間的に近接するフレーム間の類似性を活用するフレーム間予測(動き補償)は情報圧縮に大きな効果を示すことが知られている。現在の画像符号化技術の主流となっている動き補償方式は、動画像符号化方式の国際標準であるH.263、MPEG1、MPEG2に採用されている半画素精度のブロックマッチングである。この方式では、符号化しようとする画像を多数のブロックに分割し、ブロックごとにその動きベクトルを水平・垂直方向に隣接画素間距離の半分の長さを最小単位として求める。
この処理を数式を用いて表現すると以下のようになる。符号化しようとするフレーム(現フレーム )の予測画像Pの座標(x, y)におけるサンプル値(輝度または色差の強度のサンプル値)をP(x, y)、参照画像R(Pと時間的に近接しており、既に符号化が完了しているフレームの復号画像)の座標(x, y)におけるサンプル値をR(x, y)とする。また、xとyは整数であるとして、PとRでは座標値が整数である点に画素が存在すると仮定する。また、画素のサンプル値は負ではない整数として量子化されているとする。このとき、PとRの関係は、
で表される。ただし、画像はN個のブロックに分割されるとして、Biは画像のi番目のブロックに含まれる画素、(ui, vi)はi番目のブロックの動きベクトルを表している。
uiとviの値が整数ではないときには、参照画像において実際には画素が存在しない点の強度値を求めることが必要となる。この際の処理としては、周辺4画素を用いた共1次内挿が使われることが多い。この内挿方式を数式で記述すると、dを正の整数、0≦p,q<dとして、R(x+p/d, y+q/d)は、
で表される。ただし「//」は除算の一種で、通常の除算(実数演算による除算)の結果を近隣の整数に丸め込むことを特徴としている。
図1にH.263の符号化器の構成例100を示す。H.263は、符号化方式として、ブロックマッチングとDCT(離散コサイン変換)を組み合わせたハイブリッド符号化方式(フレーム間/フレーム内適応符号化方式)を採用している。
減算器102は入力画像(現フレームの原画像)101とフレーム間/フレーム内符号化切り換えスイッチ119の出力画像113(後述)との差を計算し、誤差画像103を出力する。この誤差画像は、DCT変換器104でDCT係数に変換された後に量子化器105で量子化され、量子化DCT係数106となる。この量子化DCT計数は伝送情報として通信路に出力されると同時に、符号化器内でもフレーム間予測画像を合成するために使用される。
以下に予測画像合成の手順を説明する。上述の量子化DCT係数106は、逆量子化器108と逆DCT変換器109を経て復号誤差画像110(受信側で再生される誤差画像と同じ画像)となる。これに、加算器111においてフレーム間/フレーム内符号化切り換えスイッチ119の出力画像113(後述)が加えられ、現フレームの復号画像112(受信側で再生される現フレームの復号画像と同じ画像)を得る。この画像は一旦フレームメモリ114に蓄えられ、1フレーム分の時間だけ遅延される。したがって、現時点では、フレームメモリ114は前フレームの復号画像115を出力している。この前フレームの復号画像と現フレームの入力画像101がブロックマッチング部116に入力され、ブロックマッチングの処理が行われる。
ブロックマッチングでは、画像を複数のブロックに分割し、各ブロックごとに現フレームの原画像に最も似た部分を前フレームの復号画像から取り出すことにより、現フレームの予測画像117が合成される。このときに、各ブロックが前フレームと現フレームの間でどれだけ移動したかを検出する処理(動き推定処理)を行う必要がある。動き推定処理によって検出された各ブロックごとの動きベクトルは、動きベクトル情報120として受信側へ伝送される。
受信側は、この動きベクトル情報と前フレームの復号画像から、独自に送信側で得られるものと同じ予測画像を合成することができる。予測画像117は、「0」信号118と共にフレーム間/フレーム内符号化切り換えスイッチ119に入力される。このスイッチは、両入力のいずれかを選択することにより、フレーム間符号化とフレーム内符号化を切り換える。予測画像117が選択された場合(図2はこの場合を表している)には、フレーム間符号化が行われる。一方、「0」信号が選択された場合には、入力画像がそのままDCT符号化されて通信路に出力されるため、フレーム内符号化が行われることになる。受信側が正しく復号化画像を得るためには、送信側でフレーム間符号化が行われたかフレーム内符号化が行われたかを知る必要がある。このため、識別フラグ121が通信路へ出力される。最終的なH.263符号化ビットストリーム123は多重化器122で量子化DCT係数、動きベクトル、フレーム内/フレーム間識別フラグの情報を多重化することによって得られる。
図2に図1の符号化器が出力した符号化ビットストリームを受信する復号化器200の構成例を示す。受信したH.263ビットストリーム217は、分離器216で量子化DCT係数201、動きベクトル情報202、フレーム内/フレーム間識別フラグ203に分離される。量子化DCT係数201は逆量子化器204と逆DCT変換器205を経て復号化された誤差画像206となる。この誤差画像は加算器207でフレーム間/フレーム内符号化切り換えスイッチ214の出力画像215を加算され、復号化画像208として出力される。フレーム間/フレーム内符号化切り換えスイッチはフレーム間/フレーム内符号化識別フラグ203に従って、出力を切り換える。フレーム間符号化を行う場合に用いる予測画像212は、予測画像合成部211において合成される。ここでは、フレームメモリ209に蓄えられている前フレームの復号画像210に対して、受信した動きベクトル情報202に従ってブロックごとに位置を移動させる処理が行われる。一方フレーム内符号化の場合、フレーム間/フレーム内符号化切り換えスイッチは、「0」信号213をそのまま出力する。
H.263が符号化する画像は、輝度情報を持つ1枚の輝度プレーン(Yプレーン)と色情報(色差情報とも言う)を持つ2枚の色差プレーン(UプレーンとVプレーン)で構成されている。このとき、画像が水平方向に2m画素、垂直方向に2n画素持っている場合に(mとnは正の整数とする)、Yプレーンは水平方向に2m、垂直方向に2n個の画素を持ち、UおよびVプレーンは水平方向にm、素直方向にn個の画素を持つことを特徴としている。このように色差プレーンの解像度が低いのは、人間の視覚が色差の空間的な変化に比較的鈍感であるという特徴を持つためである。このような画像を入力として、H.263ではマクロブロックと呼ばれるブロックを単位として符号化・復号化の処理が行われる。
図3にマクロブロックの構成を示す。マクロブロックはYブロック、Uブロック、Vブロックの3個のブロックで構成され、輝度値情報を持つYブロック301の大きさは16×16画素、色差情報をもつUブロック302およびVブロック303の大きさは8×8画素となっている。
H.263では、各マクロブロックに対して半画素精度のブロックマッチングが適用される。したがって、推定された動きベクトルを(u, v)とすると、uとvはそれぞれ画素間距離の半分、つまり1/2を最小単位として求められることになる。このときの強度値(以下では、「輝度値」と色差の強度値を総称して「強度値」と呼ぶ)の内挿処理の様子を図4に示す。H.263では、数2の内挿を行う際に、除算の結果は最も近い整数に丸め込まれ、かつ除算の結果が整数に0.5を加えた値となるときには、これを0から遠ざける方向に切り上げる処理が行われる。
つまり、図4において、画素401、402、403、404の強度値をそれぞれLa、Lb、Lc、Ldとすると(La、Lb、Lc、Ldは負ではない整数)、内挿により強度値を求めたい位置405、406、407、408の強度値Ia、Ib、Ic、Idは(Ia、Ib、Ic、Idは負ではない整数)、以下の式によって表される。
ただし、「[ ]」は小数部分を切り捨てる処理を表している。
このとき、除算の結果を整数値に丸め込む処理によって発生する誤差の期待値を計算することを考える。内挿により強度値を求めたい位置が、図4の位置405、406、407、408となる確率をそれぞれ1/4とする。このとき、位置405の強度値Iaを求める際の誤差は明らかに0である。また、位置406の強度値Ibを求める際の誤差は、La+Lbが偶数の場合は0、奇数の場合は切り上げが行われるので1/2となる。La+Lbが偶数になる確率と奇数になる確率は共に1/2であるとすれば、誤差の期待値は、0・1/2+1/2・1/2=1/4となる。位置407の強度値Icを求める際も誤差の期待値はIbの場合と同様に1/4となる。位置408の強度値Icを求める際には、La+Lb+Lc+Ldを4で割った際のあまりが0、1、2、3である場合の誤差はそれぞれ0、−1/4、1/2、1/4となり、あまりが0から3になる確率をそれぞれ等確率とすれば、誤差の期待値は0・1/4−1/4・1/4+1/2・1/4+1/4・1/4=1/8となる。上で述べた通り、位置405〜408における強度値が計算される確率は等確率であるとすれば、最終的な誤差の期待値は、0・1/4+1/4・1/4+1/4・1/4+1/8・1/4=5/32となる。これは、一回ブロックマッチングによる動き補償を行う度に、画素の強度値に5/32の誤差が発生することを意味している。
一般的に低レート符号化の場合には、フレーム間予測誤差を符号化するためのビット数を十分に確保することができないため、DCT係数の量子化ステップサイズを大きくする傾向がある。したがって、動き補償で発生した誤差を誤差符号化によって修正しにくくなる。このようなときにフレーム内符号化を行わずにフレーム間符号化をずっと続けた場合には、上記誤差が蓄積し、再生画像が赤色化するなどの悪い影響を与える場合がある。
上で説明した通り、色差プレーンの画素数は縦方向、横方向共に画素数が半分となっている。したがって、UブロックとVブロックに対しては、Yブロックの動きベクトルの水平・垂直成分をそれぞれ2で割った値が使用される。このとき、もとのYブロックの動きベクトルの水平・垂直成分であるuとvが1/2の整数倍の値であるため、通常の割り算を実行した場合には、動きベクトルは1/4の整数倍の値が出現することになる。しかし、座標値が1/4の整数倍をとるときの強度値の内挿演算が複雑となるため、H.263ではUブロックとVブロックの動きベクトルも半画素精度に丸め込まれる。このときの丸め込みの方法は以下の通りである。
いま、u/2=r+s/4であるとする。このとき、rとsは整数であり、さらにsは0以上3以下の値をとるとする。sが0または2のときはu/2は1/2の整数倍であるため、丸め込みを行う必要がない。しかし、sが1または3のときは、これを2に丸め込む操作が行われる。これは、sが2となる確率を高くすることにより、強度値の内挿が行われる回数を増やし、動き補償処理にフィルタリングの作用を持たせるためである。
丸め込みが行われる前のsの値が0〜3の値をとる確率をそれぞれ1/4とした場合、丸め込みが終わったあとにsが0、2となる確率はそれぞれ1/4と3/4となる。以上は動きベクトルの水平成分uに関する議論であったが、垂直成分であるvに関しても全く同じ議論が適用できる。
したがって、UブロックおよびVブロックにおいて、401の位置の強度値が求められる確率は1/4・1/4=1/16、402および403の位置の強度値が求められる確率は共に1/4・3/4=3/16、404の位置の強度値が求められる確率は3/4・3/4=9/16となる。これを用いて上と同様の手法により、強度値の誤差の期待値を求めると、0・1/16+1/4・3/16+1/4・3/16+1/8・9/16=21/128となり、上で説明したYブロックの場合と同様にフレーム内符号化を続けた場合の誤差の蓄積の問題が発生する。
フレーム間予測を行い、輝度または色の強度が量子化された数値として表される動画像符号化および復号化方法では、フレーム間予測において輝度または色の強度を量子化する際の誤差が蓄積する場合がある。本発明の目的は、上記誤差の蓄積を防ぐことにより、再生画像の画質を向上させることにある。
誤差の発生を抑えるか、発生した誤差を打ち消す操作を行うことにより、誤差の蓄積を防ぐ。
本発明により、フレーム間予測画像における丸め込み誤差の蓄積を抑えることが可能となり、再生画像の画質を向上させることが可能となる。
まず、「従来の技術」で述べた丸め込み誤差の蓄積がどのような場合に発生するかについて考える。
図5にMPEG1、MPEG2、H.263などの双方向予測と片方向予測の両方を実行することができる符号化方法により符号化された動画像の例を示す。画像501はフレーム内符号化によって符号化されたフレームであり、Iフレームと呼ばれる。これに対し、画像503、505、507、509はPフレームと呼ばれ、直前のIまたはPフレームを参照画像とする片方向のフレーム間符号化により符号化される。したがって、例えば画像505を符号化する際には画像503を参照画像とするフレーム間予測が行われる。画像502、504、506、508はBフレームと呼ばれ、直前と直後のIまたはPフレームを用いた双方向のフレーム間予測が行われる。Bフレームは、他のフレームがフレーム間予測を行う際に参照画像として利用されないという特徴も持っている。
まず、Iフレームでは動き補償が行われないため、動き補償が原因となる丸め込み誤差は発生しない。これに対し、Pフレームでは動き補償が行われる上に、他のPまたはBフレームの参照画像としても使用されるため、丸め込み誤差の蓄積を引き起こす原因となる。一方、Bフレームは動き補償は行われるために丸め込み誤差の蓄積の影響は現れるが、参照画像としては使用されないために丸め込み誤差の蓄積の原因とはならない。このことから、Pフレームにおける丸め込み誤差の蓄積を防げば、動画像全体で丸め込み誤差の悪影響を緩和することができる。なお、H.263ではPフレームとBフレームをまとめて符号化するPBフレームと呼ばれるフレームが存在するが(例えばフレーム503と504をPBフレームとしてまとめて符号化することができる)、組み合わされた2枚のフレームを別々の物として考えれば、上と同じ議論を適用することができる。つまり、PBフレームの中でPフレームに相当する部分に対して丸め込み誤差への対策を施せば、誤差の蓄積を防ぐことができる。
丸め込み誤差は、強度値の内挿を行う際に、通常の除算(演算結果が実数になる除算)の結果として整数値に0.5を加えた値が出るような場合に、これを0から遠ざける方向に切り上げているために発生している。例えば内挿された強度値を求めるために4で割る操作を行うような場合、あまりが1である場合と3である場合は発生する誤差の絶対値が等しくかつ符号が逆になるため、誤差の期待値を計算する際に互いに打ち消し合う働きをする(より一般的には、正の整数d’で割る場合には、あまりがtである場合とd’−tである場合が打ち消し合う)。しかし、あまりが2である場合、つまり通常の除算の結果が整数に0.5を加えた値が出る場合には、これを打ち消すことができず、誤差の蓄積につながる。
そこで、このように通常の除算の結果、整数に0.5を加えた値が出た際にに切り上げを行う丸め込み方法と切り捨てを行う丸め込み方法の両者を選択可能とし、これらをうまく組み合わせることより、発生した誤差を打ち消すことを考える。以下では、通常の除算の結果を最も近い整数に丸め込み、かつ整数に0.5を加えた値は0から遠ざける方向に切り上げる丸め込み方法を「プラスの丸め込み」と呼ぶ。また、通常の除算の結果を最も近い整数に丸め込み、かつ整数に0.5を加えた値は0に近づける方向に切り捨てる丸め込み方法を「マイナスの丸め込み」と呼ぶこととする。数3は、半画素精度のブロックマッチングにおいてプラスの丸め込みを行う場合の処理を示しているが、マイナスの丸め込みを行う場合には、これは以下のように書き換えることができる。
いま、予測画像の合成における強度値の内挿の際ににプラスの丸め込みを行う動き補償を、プラスの丸め込みを用いる動き補償、マイナスの丸め込みを行う動き補償をマイナスの丸め込みを用いる動き補償とする。また、半画素精度のブロックマッチングを行い、かつプラスの丸め込みを用いる動き補償が適用されるPフレームをP+フレーム、逆にマイナスの丸め込みを用いる動き補償が適用されるPフレームをP−フレームと呼ぶことする(この場合、H.263のPフレームはすべてP+フレームということになる)。P−フレームにおける丸め込み誤差の期待値は、P+フレームのそれと絶対値が等しく、符号が逆となる。したがって、時間軸に対し、P+フレームとP−フレームが交互に現れるようにすれば、丸め込み誤差の蓄積を防ぐことができる。
図5の例では、フレーム503、507をP+フレーム、フレーム505、509をP−フレームとすれば、この処理を実現することができる。また、P+フレームとP−フレームが交互に発生することは、Bフレームにおいて双方向の予測を行う際にP+フレームとP−フレームが一枚ずつ参照画像として使用されることを意味している。一般的にBフレームにおいては順方向の予測画像(例えば図5のフレーム504を符号化する際に、フレーム503を参照画像として合成される予測画像)と逆方向の予測画像(例えば図5のフレーム504を符号化する際に、フレーム505を参照画像として合成される予測画像)の平均が予測画像として使用できる場合が多い。したがって、ここでP+フレームとP−フレームから合成した画像を平均化することは、誤差の影響を打ち消す意味で有効である。
なお、上で述べた通り、Bフレームにおける丸め込み処理は誤差の蓄積の原因とはならない。したがって、すべてのBフレームに対して同じ丸め込み方法を適用しても問題は発生しない。例えば、図5のBフレーム502、504、506、508のすべてが正の丸め込みに基づく動き補償を行ったとしても、特に画質の劣化の原因とはならない。Bフレームの復号化処理を簡略化する意味では、Bフレームに関しては1種類の丸め込み方法のみを用いることが望ましい。
図16に、上で述べた複数の丸め込み方法に対応した画像符号化器のブロックマッチング部1600の例を示す。他の図と同じ番号は、同じものを指している。図1のブロックマッチング部116を1600に入れ換えることにより、複数の丸め込み方法に対応することができる。動き推定器1601において、入力画像101と前フレームの復号画像112との間で動き推定の処理が行われる。この結果、動き情報120が出力される。この動き情報は、予測画像合成器1603において予測画像を合成する際に利用される。
丸め込み方法決定器1602は、現在符号化を行っているフレームにおいて使用する丸め込み方法を正の丸め込みとするか、負の丸め込みとするかを判定する。決定した丸め込み方法に関する情報1604は、予測画像合成器1603に入力される。この予測画像合成器では、1604によって指定された丸め込み方法に基づいて予測画像117が合成、出力される。なお、図1のブロックマッチング部116には、図16の1602、1604に相当する部分が無く、予測画像は、正の丸め込みによってのみ合成される。また、ブロックマッチング部から決定した丸め込み方法1605を出力し、この情報をさらに多重化して伝送ビットストリームに組み込んで伝送しても良い。
図17に、複数の丸め込み方法に対応した画像復号化器の予測画像合成部1700の例を示す。他の図と同じ番号は、同じものを指している。図2の予測画像合成部211を1700に入れ換えることにより、複数の丸め込み方法に対応することが可能となる。丸め込み方法決定器1701では、復号化を行う際の予測画像合成処理に適用される丸め込み方法が決定される。
なお、正しい復号化を行うためには、ここで決定される丸め込み方法は、符号化の際に適用された丸め込み方法と同じものでなければならない。例えば、最後に符号化されたIフレームから数えて奇数番目のPフレームには正の丸め込み、偶数番目のPフレームに対しては負の丸め込みが適用されることを原則とし、符号化側の丸め込み方法決定器(例えば、図16の1602)と復号化側の丸め込み方法決定器1701の両者がこの原則に従えば、正しい復号化を行うことが可能となる。このようにして決定された丸め込み方法に関する情報1702と、前フレームの復号画像210、動き情報202から、予測画像合成器1703では、予測画像が合成される。この予測画像212は出力され、復号画像の合成に活用される。
なお、ビットストリーム内に丸め込み方法に関する情報が組み込まれる場合(図16の符号化器で、丸め込み方法に関する情報1605が出力されるような場合)も考えることができる。この場合、丸め込み方法決定器1701は使用されず、符号化ビットストリームから抽出された丸め込み方法に関する情報1704が予測画像合成器1703に入力される。
本発明は、図1、2に示されている従来型の専用回路・専用チップを用いる画像符号化装置、画像復号化装置の他に、汎用プロセッサを用いるソフトウェア画像符号化装置、ソフトウェア画像復号化装置にも適用することができる。図6と7にこのソフトウェア画像符号化装置600とソフトウェア画像復号化装置700の例を示す。ソフトウェア符号化器600では、まず入力画像601は入力フレームメモリ602に蓄えられ、汎用プロセッサ603はここから情報を読み込んで符号化の処理を行う。この汎用プロセッサを駆動するためのプログラムはハードディスクやフロッピー(登録商標)ディスクなどによる蓄積デバイス608から読み出されてプログラム用メモリ604に蓄えられる。また、汎用プロセッサは処理用メモリ605を活用して符号化の処理を行う。汎用プロセッサが出力する符号化情報は一旦出力バッファ606に蓄えられた後に符号化ビットストリーム607として出力される。
図6に示したソフトウェア符号化器上で動作する符号化ソフトウェア(コンピュータ読み取り可能な記録媒体)のフローチャートの例を図8に示す。まず801で処理が開始され、802で変数Nに0が代入される。続いて803、804でNの値が100である場合には、0が代入される。Nはフレーム数のカウンタであり、1枚のフレームの処理が終了する度に1が加算され、符号化を行う際には0〜99の値をとることが許される。Nの値が0であるときには符号化中のフレームはIフレームであり、奇数のときにはP+フレーム、0以外の偶数のときにはP−フレームとなる。Nの値の上限が99であることは、Pフレーム(P+またはP−フレーム)が99枚符号化された後にIフレームが1枚符号化されることを意味している。
このように、何枚かのフレームの中に必ず1枚Iフレームを入れることにより、(a)符号化器と復号化器の処理の不一致(例えば、DCTの演算結果の不一致)による誤差の蓄積を防止する、(b)符号化データから任意のフレームの再生画像を得る処理(ランダムアクセス)の処理量を減少させる、などの効果を得ることができる。Nの最適な値は符号化器の性能や符号化器が使用される環境により変化する。この例では100という値を使用したが、これはNの値が必ず100でなければならいことを意味しているわけではない。
フレームごとの符号化モード、丸め込み方法を決定する処理は805で行われるが、その処理の詳細を表すフローチャートの例を図9に示す。まず、901でNは0であるか否かが判定され、0である場合には902で予測モードの識別情報として’I’が出力バッファに出力され、これから符号化処理を行うフレームはIフレームとなる。なお、ここで「出力バッファに出力される」とは、出力バッファに蓄えられた後に符号化ビットストリームの一部として符号化装置から外部に出力されることを意味している。Nが0ではない場合には、903で予測モードの識別情報として’P’が出力される。Nが0ではない場合には、さらに904でNが奇数か偶数であるかが判定される。Nが奇数の場合には905で丸め込み方法の識別情報として’+’が出力され、これから符号化処理を行うフレームはP+フレームとなる。一方、Nが偶数の場合には906で丸め込み方法の識別情報として’−’が出力され、これから符号化処理を行うフレームはP−フレームとなる。
再び図8に戻る。805で符号化モードを決定した後、806で入力画像はフレームメモリAに蓄えられる。なお、ここで述べたフレームメモリAとは、ソフトウェア符号化器のメモリ領域(例えば、図6の605のメモリ内にこのメモリ領域が確保される)の一部を意味している。807では、現在符号化中のフレームがIフレームであるか否かが判定される。そして、Iフレームではない場合には808で動き推定・動き補償処理が行われる。
この808における処理の詳細を表すフローチャートの例を図10に示す。まず、1001でフレームメモリAとB(本段落の最後に書かれている通り、フレームメモリBには前フレームの復号画像が格納されている)に蓄えられた画像の間でブロックごとに動き推定の処理が行われ、各ブロックの動きベクトルが求められ、その動きベクトルは出力バッファに出力される。続いて1002で現フレームがP+フレームであるか否かが判定され、P+フレームである場合には1003で正の丸め込みを用いて予測画像が合成され、この予測画像はフレームメモリCに蓄えられる。一方、現フレームがP−フレームである場合には1004で負の丸め込みを用いて予測画像が合成され、この予測画像がフレームメモリCに蓄えられる。そして1005ではフレームメモリAとCの差分画像が求められ、これがフレームメモリAに蓄えられる。
ここで再び図8に戻る。809における処理が開始される直前、フレームメモリAには、現フレームがIフレームである場合には入力画像が、現フレームがPフレーム(P+またはP−フレーム)である場合には入力画像と予測画像の差分画像が蓄えられている。809では、このフレームメモリAに蓄えられた画像に対してDCTが適用され、ここで計算されたDCT係数は量子化された後に出力バッファに出力される。そしてさらに810で、この量子化DCT係数には逆量子化され、逆DCTが適用され、この結果得られた画像はフレームメモリBに格納される。続いて811では、再び現フレームがIフレームであるか否かが判定され、Iフレームではない場合には812でフレームメモリBとCの画像が加算され、この結果がフレームメモリBに格納される。ここで、1フレーム分の符号化処理が終了することになる。
そして、813の処理が行われる直前にフレームメモリBに格納されている画像は、符号化処理が終了したばかりのフレームの再生画像(復号側で得られるものと同じ)である。813では、符号化が終了したフレームが最後のフレームであるか否かが判定され、最後のフレームであれば、符号化処理が終了する。最後のフレームではない場合には、814でNに1が加算され、再び803に戻って次のフレームの符号化処理が開始される。
図7にソフトウェア復号化器700の例を示す。入力された符号化ビットストリーム701は一旦入力バッファ702に蓄えられた後に汎用プロセッサ703に読み込まれる。汎用プロセッサはハードディスクやフロッピー(登録商標)ディスクなどによる蓄積デバイス708から読み出されたプログラムを蓄えるプログラム用メモリ704、および処理用メモリ705を活用して復号化処理を行う。この結果得られた復号化画像は一旦出力フレームメモリ706に蓄えられた後に出力画像707として出力される。
図7に示したソフトウェア復号化器上で動作する復号化ソフトウェアのフローチャートの例を図11に示す。1101で処理が開始され、まず1102で入力情報があるか否かが判定される。ここで入力情報が無ければ1103で復号化の処理を終了する。入力情報がある場合には、まず、1104で符号化識別情報が入力される。なお、この「入力される」とは、入力バッファ(例えば、図7の702)に蓄えられた情報を読み込むことを意味している。1105では、読み込んだ符号化モード識別情報が’I’であるか否かが判定される。そして、’I’ではない場合には、1106で丸め込み方法の識別情報が入力され、続いて1107で動き補償処理が行われる。
この1107で行われる処理の詳細を表したフローチャートの例を図12に示す。まず、1201でブロックごとの動きベクトル情報が入力される。そして、1202で1106で読み込まれた丸め込み方法の識別情報が’+’であるか否かが判定される。これが’+’である場合には、現在復号化中のフレームがP+フレームである。このとき1203で正の丸め込みにより予測画像が合成され、この予測画像はフレームメモリDに格納される。
なお、ここで述べたフレームメモリDとは、ソフトウェア復号化器のメモリ領域(例えば、図7の705のメモリ内にこのメモリ領域が確保される)の一部を意味している。一方、丸め込み方法の識別情報が’+’ではない場合には、現在復号化中のフレームがP−フレームであり、1204で負の丸め込みにより予測画像が合成され、この予測画像はフレームメモリDに格納される。このとき、もし何らかの誤りにより、P+フレームがP−フレームとして復号化されたり、逆にP−フレームがP+フレームとして復号化された場合には、符号化器が意図したものとは異なる予測画像が復号化器において合成されることになり、正しい復号化が行われずに画質が劣化する。
ここで図11に戻る。1108では量子化DCT係数が入力され、これに逆量子化、逆DCTを適用して得られた画像がフレームメモリEに格納される。1109では、再び現在復号化中のフレームがIフレームであるか否かが判定される。そして、Iフレームではない場合には、1110でフレームメモリDとEに格納された画像が加算され、この結果の画像がフレームメモリEに格納される。1111の処理を行う直前にフレームメモリEに格納されている画像が、再生画像となる。1111では、このフレームメモリEに格納された画像が出力フレームメモリ(例えば、図7の706)に出力され、そのまま出力画像として復号化器から出力される。こうして1フレーム分の復号化処理が終了し、処理は再び1102に戻る。
図6と7に示したソフトウェア画像符号化器、ソフトウェア画像復号化器に図8〜12に示したフローチャートに基づくプログラムを実行させると、専用回路・専用チップを用いる装置を使用した場合と同様の効果を得ることができる。
図6のソフトウェア符号化器601が図8〜10のフローチャートに示した処理を行うことにより生成されたビットストリームを記録した蓄積メディア(記録媒体)の例を図13に示す。ディジタル情報を記録することができる記録ディスク(例えば磁気、光ディスクなど)1301には、同心円上にディジタル情報が記録されている。このディスクに記録されているディジタル情報の一部1302を取り出すと、符号化されたフレームの符号化モード識別情報1303、1305、1308、1311、1314、丸め込み方法の識別情報1306、1309、1312、1315、動きベクトルやDCT係数等の情報1304、1307、1310、1313、1316が記録されている。図8〜10に示した方法に従えば、1303には’I’、1305、1308、1311、1314には’P’、1306、1312には’+’、1309、1315には’−’を意味する情報が記録されることとなる。この場合、例えば’I’と’+’は1ビットの0、’P’と’−’は1ビットの1で表せば、復号化器は正しく記録された情報を解釈し、再生画像を得ることが可能となる。このようにして蓄積メディアに符号化ビットストリームを蓄積することにより、このビットストリームを読み出して復号化した場合に丸め込み誤差の蓄積が発生することを防ぐことができる。
図5に示したP+フレーム、P−フレーム、Bフレームが存在する画像系列に関する符号化ビットストリームを記録した蓄積メディアの例を図15に示す。図13の1301と同様に、ディジタル情報を記録することができる記録ディスク(例えば磁気、光ディスクなど)1501には、同心円上にディジタル情報が記録されている。このディスクに記録されているディジタル情報の一部1502を取り出すと、符号化されたフレームの符号化モード識別情報1503、1505、1508、1510、1513、丸め込み方法の識別情報1506、1512、動きベクトルやDCT係数等の情報1504、1507、1509、1511、1514が記録されている。
このとき、1503には’I’、1505、1510には’P’、1508、1513には’B’、1505には’+’、1511には’−’を意味する情報が記録されている。例えば’I’、’P’、’B’をそれぞれ2ビットの00、01、10、’+’と’−’はそれぞれ1ビットの0と1で表せば、復号化器は正しく記録された情報を解釈し、再生画像を得ることが可能となる。
このとき図5の501(Iフレーム)に関する情報が1503と1504、502(Bフレーム)に関する情報が1508と1509、フレーム503(P+フレーム)に関する情報が1505〜1507、フレーム504(Bフレーム)に関する情報が1513と1514、フレーム505(P−フレーム)に関する情報が1510〜1512である。このように動画像をBフレームを含む形で符号化場合、一般的にフレームに関する情報を伝送する順番と、再生する順番は異なる。これは、あるBフレームを復号化する前に、このBフレームが予測画像を合成する際に使用する前後の参照画像を復号化しておかなければならないためである。このため、フレーム502はフレーム503の前に再生されるにもかかわらず、フレーム502が参照画像として使用するフレーム503に関する情報がフレーム502に関する情報の前に伝送されるのである。
上述の通り、Bフレームは丸め込み誤差の蓄積を引き起こす要員とはならないため、Pフレームのように複数の丸め込み方法を適用する必要はない。このため、ここに示した例では、Bフレームに関してはは丸め込み方法を指定する’+’や’−’のような情報は伝送されていない。こうすることにより、例えばBフレームに関しては常に正の丸め込みのみが適用されるようにしたとしても、誤差の蓄積の問題は発生しない。このようにして、蓄積メディアにBフレームに関する情報を含む符号化ビットストリームを蓄積することにより、このビットストリームを読み出して復号化した場合に丸め込み誤差の蓄積が発生することを防ぐことができる。
図14に、本明細書で示したP+フレームとP−フレームが混在する符号化方法に基づく符号化・復号化装置の具体例を示す。パソコン1401に画像符号化・復号化用のソフトウェアを組み込むことにより、画像符号化・復号化装置として活用することが可能である。このソフトウェアはコンピュータ読み取り可能な記録媒体である何らかの蓄積メディア(CD−ROM、フロッピー(登録商標)ディスク、ハードディスクなど)1412に記録されており、これをパソコンが読み込んで使用する。また、さらに何らかの通信回線にこのパソコンを接続することにより、映像通信端末として活用することも可能となる。
記録媒体である蓄積メディア1402に記録した符号化ビットストリームを読み取り、復号化する再生装置1403にも本明細書に示した復号化方法を実装することが可能である。この場合、再生された映像信号はテレビモニタ1404に表示される。また、1403の装置は符号化ビットストリームを読み取るだけであり、テレビモニタ1404内に復号化装置が組み込まれている場合も考えられる。
最近は衛星、地上波によるディジタル放送が話題となっているが、ディジタル放送用のテレビ受信機1405にも復号化装置を組み込むことができる。
また、ケーブルテレビ用のケーブル1408または衛星/地上波放送のアンテナに接続されたセットトップボックス1409内に復号化装置を実装し、これをテレビモニタ1410で再生する構成も考えられる。このときも1404の場合と同様に、セットトップボックスではなく、テレビモニタ内に符号化装置を組み込んでも良い。
1413、1414、1415は、ディジタル衛星放送システムの構成例を示したものである。放送局1413では映像情報の符号化ビットストリームが電波を介して通信または放送衛星1414に伝送される。これを受けた衛星は、放送用の電波を発信し、この電波を衛星放送受信設備をもつ家庭1415が受信し、テレビ受信機またはセットトップボックスなどの装置により符号化ビットストリームを復号化してこれを再生する。
低い伝送レートでの符号化が可能となったことにより、最近はディジタル携帯端末1406によるディジタル動画像通信も注目されるようになっている。ディジタル携帯端末の場合、符号器・復号化器を両方持つ送受信型の端末の他に、符号化器のみの送信端末、復号化器のみの受信端末の3通りの実装形式が考えられる。
動画像撮影用のカメラ1407の中に符号化装置を組み込むことも可能である。この場合撮影用カメラは符号化装置と該符号化装置からの出力を記録媒体に記録する記録装置とを持ち、符号化装置から出力された符号化ビットストリームを記録媒体に記録する。また、カメラは映像信号を取り込むのみであり、これを専用の符号化装置1411に組み込む構成も考えられる。
この図に示したいずれの装置・システムに関しても、本明細書に示した方法を実装することにより、従来の技術を活用した場合と比較して、より画質の高い画像情報を扱うことが可能となる。
なお、以下の変形も本発明に含まれることは明らかである。
(1)上の議論では、動き補償方式としてブロックマッチングが使用されることが前提となっていた。しかし、本発明は動きベクトルの水平・垂直成分が水平・垂直方向の画素のサンプリング間隔の整数倍以外値をとることができ、サンプル値の存在しない位置における強度値を共1次内挿によって求める動き補償方式を採用する画像符号化方式および画像復号化方式すべてに対して適用することができる。たとえば特願平08-060572に記載されているグローバル動き補償や、特願平08-249601に記載されているワーピング予測に対しても、本発明は適用可能である。
(2)これまでの議論では、動きベクトルの水平・垂直成分が1/2の整数倍の値をとる場合のみについて議論してきた。しかし、議論を一般化すれば、本発明は動きベクトルの水平・垂直成分が1/dの整数倍(dは正の整数、かつ偶数)をとる方式に対して適用可能である。しかし、dが大きくなった場合には、共1次内挿の除算の除数(dの2乗、数2参照)が大きくなるため、相対的に通常の除算の結果が整数に0.5を足した値となる確率が低くなる。したがって、プラスの丸め込みのみを行った場合の、丸め込み誤算の期待値の絶対値が小さくなり、誤差の蓄積による悪影響が目立ちにくくなる。そこで、例えばdの値が可変である動き補償方式などにおいては、dがある一定値より小さい場合にはプラスの丸め込みとマイナスの丸め込みの両方を使用し、dが上記一定値以上の場合にはプラスまたはマイナスの丸め込みのみを用いるという方法も有効である。
(3)従来の技術で述べた通り、DCTを誤差符号化方式として利用した場合、丸め込み誤差の蓄積による悪影響はDCT係数の量子化ステップサイズが大きい場合に現れやすい。そこで、DCT係数の量子化ステップサイズがある一定値より大きい場合にはプラスの丸め込みとマイナスの丸め込みの両方を使用し、DCT係数の量子化ステップサイズが上記一定値以下の場合にはプラスまたはマイナスの丸め込みのみを用いるという方法も有効である。
(4)輝度プレーンで丸め込み誤差の蓄積が起こった場合と色差プレーンで丸め込み誤差の蓄積が起こった場合では、一般的に色差プレーンで発生した場合の方が再生画像に与える影響が深刻である。これは、画像が全体的にわずかに明るくなったり暗くなったりすることよりも、画像の色が全体的に変化した場合の方が目立ちやすいためである。そこで、色差信号に対してはプラスの丸め込みとマイナスの丸め込みの両方を使用し、輝度信号に対してはプラスまたはマイナスの丸め込みのみを用いるという方法も有効である。
(1)上の議論では、動き補償方式としてブロックマッチングが使用されることが前提となっていた。しかし、本発明は動きベクトルの水平・垂直成分が水平・垂直方向の画素のサンプリング間隔の整数倍以外値をとることができ、サンプル値の存在しない位置における強度値を共1次内挿によって求める動き補償方式を採用する画像符号化方式および画像復号化方式すべてに対して適用することができる。たとえば特願平08-060572に記載されているグローバル動き補償や、特願平08-249601に記載されているワーピング予測に対しても、本発明は適用可能である。
(2)これまでの議論では、動きベクトルの水平・垂直成分が1/2の整数倍の値をとる場合のみについて議論してきた。しかし、議論を一般化すれば、本発明は動きベクトルの水平・垂直成分が1/dの整数倍(dは正の整数、かつ偶数)をとる方式に対して適用可能である。しかし、dが大きくなった場合には、共1次内挿の除算の除数(dの2乗、数2参照)が大きくなるため、相対的に通常の除算の結果が整数に0.5を足した値となる確率が低くなる。したがって、プラスの丸め込みのみを行った場合の、丸め込み誤算の期待値の絶対値が小さくなり、誤差の蓄積による悪影響が目立ちにくくなる。そこで、例えばdの値が可変である動き補償方式などにおいては、dがある一定値より小さい場合にはプラスの丸め込みとマイナスの丸め込みの両方を使用し、dが上記一定値以上の場合にはプラスまたはマイナスの丸め込みのみを用いるという方法も有効である。
(3)従来の技術で述べた通り、DCTを誤差符号化方式として利用した場合、丸め込み誤差の蓄積による悪影響はDCT係数の量子化ステップサイズが大きい場合に現れやすい。そこで、DCT係数の量子化ステップサイズがある一定値より大きい場合にはプラスの丸め込みとマイナスの丸め込みの両方を使用し、DCT係数の量子化ステップサイズが上記一定値以下の場合にはプラスまたはマイナスの丸め込みのみを用いるという方法も有効である。
(4)輝度プレーンで丸め込み誤差の蓄積が起こった場合と色差プレーンで丸め込み誤差の蓄積が起こった場合では、一般的に色差プレーンで発生した場合の方が再生画像に与える影響が深刻である。これは、画像が全体的にわずかに明るくなったり暗くなったりすることよりも、画像の色が全体的に変化した場合の方が目立ちやすいためである。そこで、色差信号に対してはプラスの丸め込みとマイナスの丸め込みの両方を使用し、輝度信号に対してはプラスまたはマイナスの丸め込みのみを用いるという方法も有効である。
また、従来の技術でH.263における1/4画素精度の動きベクトルの1/2画素精度の動きベクトルへの丸め込み方法に関して述べたが、この方法に多少の変更を加えることにより、丸め込み誤差の期待値の絶対値を小さくすることが可能である。従来の技術でとりあげたH.263では、輝度プレーンの動きベクトルの水平成分または垂直成分を半分にした値がr+s/4(rは整数、sは0以上4未満の整数)で表されるとして、sが1または3であるときに、これを2に丸め込む操作がおこなわれる。これをsが1のときにはこれを0とし、sが3であるときにはrに1を加えてsを0とする丸め込みを行うように変更すればよい。こうすることにより、図4の406〜408の位置の強度値を計算する回数が相対的に減少する(動きベクトルの水平・垂直成分が整数となる確率が高くなる)ため、丸め込み誤差の期待値の絶対値が小さくなる。しかし、この方法では発生する誤差の大きさを抑えることはできても、誤差が蓄積することを防ぐことはできない。
(5)Pフレームに対して、2種類の動き補償方式によるフレーム間予測画像の平均を最終的なフレーム間予測画像とする方式がある。例えば特願平8-3616では、縦横16画素のブロックに対して一個の動きベクトルを割り当てるブロックマッチングと、縦横16画素のブロックを4個の縦横8画素のブロックに分割して、それぞれに対して動きベクトルを割り当てるブロックマッチングの2種類の方法によって得た2種類のフレーム間予測画像を用意し、これらのフレーム間予測画像の強度値の平均を求めたものを最終的なフレーム間予測画像とする方法が述べられている。この方法において2種類の画像の平均値を求める際にも丸め込みが行われる。この平均化の操作でプラスの丸め込みのみを行い続けると、新たな丸め込み誤差の蓄積の原因を作ることになる。この方式では、ブロックマッチングにおいてプラスの丸め込みを行うP+フレームに対しては、平均化の操作ではマイナスの丸め込みを行い、P−フレームに対しては平均化の操作ではプラスの丸め込みを行うようにすれば、同一フレーム内でブロックマッチングによる丸め込み誤差と平均化による丸め込み誤差が打ち消し合う効果を得ることができる。(6)P+フレームとP−フレームを交互に配置する方法を用いた場合、符号化装置と復号化装置は現在符号化しているPフレームがP+フレームであるP−フレームであるかを判定するために、例えば以下の処理を行なうことが考えられる。現在符号化または復号化しているPフレームが、最も最近に符号化または復号化されたIフレームの後の何番目のPフレームであるかを数え、これが奇数であるときにはP+フレーム、偶数であるときはP−フレームとすれば良い(これを暗示的方法と呼ぶ)。また、符号化装置側が現在符号化しているPフレームがP+フレームであるか、P−フレームであるかを識別する情報を、例えばフレーム情報のヘッダ部分に書き込むという方法もある(これを明示的方法と呼ぶ)。この方法の方が、伝送誤りに対する耐性は強い。
(5)Pフレームに対して、2種類の動き補償方式によるフレーム間予測画像の平均を最終的なフレーム間予測画像とする方式がある。例えば特願平8-3616では、縦横16画素のブロックに対して一個の動きベクトルを割り当てるブロックマッチングと、縦横16画素のブロックを4個の縦横8画素のブロックに分割して、それぞれに対して動きベクトルを割り当てるブロックマッチングの2種類の方法によって得た2種類のフレーム間予測画像を用意し、これらのフレーム間予測画像の強度値の平均を求めたものを最終的なフレーム間予測画像とする方法が述べられている。この方法において2種類の画像の平均値を求める際にも丸め込みが行われる。この平均化の操作でプラスの丸め込みのみを行い続けると、新たな丸め込み誤差の蓄積の原因を作ることになる。この方式では、ブロックマッチングにおいてプラスの丸め込みを行うP+フレームに対しては、平均化の操作ではマイナスの丸め込みを行い、P−フレームに対しては平均化の操作ではプラスの丸め込みを行うようにすれば、同一フレーム内でブロックマッチングによる丸め込み誤差と平均化による丸め込み誤差が打ち消し合う効果を得ることができる。(6)P+フレームとP−フレームを交互に配置する方法を用いた場合、符号化装置と復号化装置は現在符号化しているPフレームがP+フレームであるP−フレームであるかを判定するために、例えば以下の処理を行なうことが考えられる。現在符号化または復号化しているPフレームが、最も最近に符号化または復号化されたIフレームの後の何番目のPフレームであるかを数え、これが奇数であるときにはP+フレーム、偶数であるときはP−フレームとすれば良い(これを暗示的方法と呼ぶ)。また、符号化装置側が現在符号化しているPフレームがP+フレームであるか、P−フレームであるかを識別する情報を、例えばフレーム情報のヘッダ部分に書き込むという方法もある(これを明示的方法と呼ぶ)。この方法の方が、伝送誤りに対する耐性は強い。
また、P+フレームと、P−フレームを識別する情報をフレーム情報のヘッダ部分に書き込む方法には、以下の長所がある。「従来の技術」で述べた通り、過去の符号化標準(例えばMPEG−1やMPEG−2)では、Pフレームにおいて正の丸め込みのみが行われる。したがって、例えば既に市場に存在しているMPEG−1/2用の動き推定・動き補償装置(例えば、図1の106に相当する部分)は、P+フレームとP−フレームが混在する符号化には対応できないことになる。いま、P+フレームとP−フレームが混在する符号化に対応した復号化器があるとする。この場合に、もしこの復号化器が上記暗示的方法に基づくものであれば、MPEG−1/2用の動き推定・動き補償装置を用いて、この暗示的方法に基づく復号化器が正しく復号化できるようなビットストリームを生成する符号化器を作ることは困難である。
しかし、復号化器が上記明示的方法に基づくものである場合には、この問題を解決することができる。MPEG−1/2用の動き推定・動き補償装置を使用した符号化器は、常にP+フレームを送り続け、これを示す識別情報をフレーム情報のヘッダに書き込み続ければ良い。こうすれば、明示的方法に基づく復号化器は、この符号化器が生成したビットストリームを正しく再生することができる。
もちろん、この場合にはP+フレームのみが存在するため、丸め込み誤差の蓄積は発生しやすくなる。しかし、この符号化器がDCT係数の量子化ステップサイズとして小さい値のみを用いるもの(高レート符号化専用の符号化器)であるような場合には、誤差の蓄積は大きな問題とはならない。
この過去の方式との互換性の問題以外にも、明示的方法にはさらに、(a)高レート符号化専用の符号化器や、頻繁にIフレームを挿入することにより丸め込み誤差が発生しにくい符号化器は、正か負のどちらかの丸め込み方法のみを実装すれば良く、装置のコストを抑えることができる、(b)上記の丸め込み誤差が発生しにくい符号化器は、P+またはP−フレームのどちらか一方のみを送り続ければ良いため、現在符号化を行っているフレームをP+フレームとするか、P−フレームとするかの判定を行う必要がなく、処理を簡略化できる、といった長所がある。
(7)本発明は、フレーム間予測画像に対し、丸め込み処理を伴うフィルタリングを行う場合にも適用することができる。例えば、動画像符号化の国際標準であるH.261では、フレーム間予測画像において動きベクトルが0ではなかったブロック内の信号に対しては、低域通過型フィルタ(これをループフィルタと呼ぶ)が適用される。また、H.263では、ブロックの境界部に発生する不連続(いわゆるブロック歪み)を平滑化するためのフィルタを使用することができる。これらのフィルタでは、画素の強度値に対して重み付け平均化の処理が行われ、フィルタリング後の強度値に対して整数への丸め込みの操作が行われる。ここでもプラスの丸め込みとマイナスの丸め込みを使い分けることにより、誤差の蓄積を防ぐことが可能である。
(8)IP+P−P+P−…の他に、IP+P+P−P−P+P+…や、IP+P−P−P+P+…など、P+フレームとP−フレームの混在の仕方には様々な方法が考えられる。例えば、それぞれ1/2の確率で0と1が発生する乱数発生器を使用し、0が出ればP+、1が出ればP−としても良い。いずれにせよ、一般的にP+とP−フレームが混在し、かつ一定時間内のそれぞれの存在確率の差が小さいほど、丸め混み誤差の蓄積は発生しにくくなる。また、符号化器に対し、任意のP+フレームとP−フレームの混在の仕方を許すような場合、符号化器と復号化器は(6)で示した暗示的方法に基づくものではなく、明示的方法に基づくものでなければならない。したがって、符号化器と復号化器に関してより柔軟な実装形態を許すという観点からは、明示的方法の方が有利となる。
(9)本発明は、画素の存在しない点の強度値を求める方法を共1次内挿に限定するものではない。強度値の内挿方法は一般化すると、以下の式のように表すことができる。
(7)本発明は、フレーム間予測画像に対し、丸め込み処理を伴うフィルタリングを行う場合にも適用することができる。例えば、動画像符号化の国際標準であるH.261では、フレーム間予測画像において動きベクトルが0ではなかったブロック内の信号に対しては、低域通過型フィルタ(これをループフィルタと呼ぶ)が適用される。また、H.263では、ブロックの境界部に発生する不連続(いわゆるブロック歪み)を平滑化するためのフィルタを使用することができる。これらのフィルタでは、画素の強度値に対して重み付け平均化の処理が行われ、フィルタリング後の強度値に対して整数への丸め込みの操作が行われる。ここでもプラスの丸め込みとマイナスの丸め込みを使い分けることにより、誤差の蓄積を防ぐことが可能である。
(8)IP+P−P+P−…の他に、IP+P+P−P−P+P+…や、IP+P−P−P+P+…など、P+フレームとP−フレームの混在の仕方には様々な方法が考えられる。例えば、それぞれ1/2の確率で0と1が発生する乱数発生器を使用し、0が出ればP+、1が出ればP−としても良い。いずれにせよ、一般的にP+とP−フレームが混在し、かつ一定時間内のそれぞれの存在確率の差が小さいほど、丸め混み誤差の蓄積は発生しにくくなる。また、符号化器に対し、任意のP+フレームとP−フレームの混在の仕方を許すような場合、符号化器と復号化器は(6)で示した暗示的方法に基づくものではなく、明示的方法に基づくものでなければならない。したがって、符号化器と復号化器に関してより柔軟な実装形態を許すという観点からは、明示的方法の方が有利となる。
(9)本発明は、画素の存在しない点の強度値を求める方法を共1次内挿に限定するものではない。強度値の内挿方法は一般化すると、以下の式のように表すことができる。
ここで、r、sは実数、h(r,s)は内挿のための実数の関数、T(z)は実数zを整数に丸め込む関数であり、R(x,y)、x、yの定義は数4と同じである。T(z)が、プラスの丸め込みを表す関数である場合にはプラスの丸め込みを用いる動き補償、マイナスの丸め込みを表す関数である場合にはマイナスの丸め込みを用いる動き補償が行われる。この数5の形式で表すことのできる内挿方法に対しては、本発明を適用することが可能である。例えばh(r,s)を、
のように定義すれば共1次内挿が行われる。しかし、例えばh(r,s)を
のように定義すれば、共1次内挿とは異なる内挿方法が実施されるが、この場合も本発明を適用することは可能である。
(10)本発明は、誤差画像の符号化方法をDCTに限定するものではない、例えば、DCTではなく、ウェーブレット変換(例えば、M. Antonioni, et. al, "Image Coding Using Wavelet Transform", IEEE Trans. Image Processing, vol. 1, no.2, April 1992)や、ウォルシューアダマール変換(Walsh-Hadamard Transform)(例えば、A. N. Netravalli and B. G. Haskell, "Digital Pictures", Plenum Press, 1998)を使用した場合でも本発明は適用可能である。
(10)本発明は、誤差画像の符号化方法をDCTに限定するものではない、例えば、DCTではなく、ウェーブレット変換(例えば、M. Antonioni, et. al, "Image Coding Using Wavelet Transform", IEEE Trans. Image Processing, vol. 1, no.2, April 1992)や、ウォルシューアダマール変換(Walsh-Hadamard Transform)(例えば、A. N. Netravalli and B. G. Haskell, "Digital Pictures", Plenum Press, 1998)を使用した場合でも本発明は適用可能である。
100…画像符号化器、101…入力画像、102…減算器、103…誤差画像、104…DCT変換器、105…DCT係数量子化器、106、201…量子化DCT係数、108、204…DCT係数逆量子化器、109、205…逆DCT変換器、110、206…復号誤差画像、111、207…加算器、112…現フレームの復号画像、113、215…フレーム間/フレーム内符号化切り換えスイッチの出力画像、114、209…フレームメモリ、115、210…前フレームの復号画像、116、1600…ブロックマッチング部、117、212…現フレームの予測画像、118、213…「0」信号、119、214…フレーム間/フレーム内符号化切り換えスイッチ、120、202…動きベクトル情報、121、203…フレーム間/フレーム内識別フラグ、122…多重化器、123…伝送ビットストリーム、200…画像復号化器、208…出力画像、211、1700…予測画像合成部、216…分離器、301…Yブロック、302…Uブロック、303…Vブロック、401〜404…画素、405〜408…共1次内挿により強度値を求める位置、501…Iフレーム、503、505、507、509…Pフレーム、502、504、506、508…Bフレーム、600…ソフトウェア画像符号化器、602…入力画像用フレームメモリ、603、703…汎用プロセッサ、604、704…プログラム用メモリ、605、705…処理用メモリ、606…出力バッファ、607、701…符号化ビットストリーム、608、708…蓄積デバイス、700…ソフトウェア画像復号化器、702…入力バッファ、706…出力画像用フレームメモリ。801〜815、901〜906、1001〜1005、1101〜1111、1201〜1204…フローチャートの処理項目、1301、1402、1501…蓄積メディア、1302、1502…ディジタル情報を記録したトラック、1303〜1316、1503〜1514…ディジタル情報、1401…パソコン、1403…蓄積メディアの再生装置、1404、1410…テレビモニタ、1405…テレビ放送受信機、1406…無線携帯端末、1407…テレビカメラ、1408…ケーブルテレビ用のケーブル、1409…セットトップボックス、1411…画像符号化装置、1412…ソフトウェア情報を記録した蓄積メディア、1413…放送局、1414…通信または放送衛星、1415…衛星放送受信設備を持つ家庭、1601…動き推定器、1602、1701…丸め込み方法決定器、1604、1605、1702、1704…丸め込み方法に関する情報、1603、1703…予測画像合成器。
Claims (1)
- 入力されたビットストリームから、動きベクトルに関する情報と、フレーム識別フラグと、を分離する第1ステップと、
前記フレーム識別フラグが、フレーム間予測を示すものであった場合に、前記動きベクトルに関する情報と既に復号化済の参照画像とをもとに動き補償を行い、復号対象画像の予測画像を合成する第2ステップと、
前記予測画像を用いて前記復号対象画像を復号化する第3ステップとを有し、
前記第2ステップにおける処理状態には、
前記フレーム間予測が双方向予測であるとき、プラスの丸め込みを用いた動き補償により合成された第1の参照画像と、マイナスの丸め込みを用いた動き補償により合成された第2の参照画像とを平均化した画像を、前記復号対象画像の予測画像として用いる状態を含む
ことを特徴とする動画像の復号化方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013083479A JP5418710B2 (ja) | 1997-06-09 | 2013-04-12 | 動画像の復号化方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP15065697 | 1997-06-09 | ||
JP1997150656 | 1997-06-09 | ||
JP2013083479A JP5418710B2 (ja) | 1997-06-09 | 2013-04-12 | 動画像の復号化方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012231312A Division JP2013051712A (ja) | 1997-06-09 | 2012-10-19 | 動画像の符号化方法および復号化方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013203000A Division JP5545403B2 (ja) | 1997-06-09 | 2013-09-30 | 動画像の復号化方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013158048A JP2013158048A (ja) | 2013-08-15 |
JP5418710B2 true JP5418710B2 (ja) | 2014-02-19 |
Family
ID=15501626
Family Applications (17)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP3096599A Expired - Lifetime JP3092610B2 (ja) | 1997-06-09 | 1999-02-09 | 動画像の復号化方法、該方法が記録されたコンピュータ読みとり可能な記録媒体、及び、動画像の復号化装置 |
JP2008022271A Expired - Fee Related JP4849076B2 (ja) | 1997-06-09 | 2008-02-01 | 動画像の符号化方法および復号化方法 |
JP2011066956A Expired - Lifetime JP4918946B2 (ja) | 1997-06-09 | 2011-03-25 | 動画像の復号化方法 |
JP2011252210A Pending JP2012065348A (ja) | 1997-06-09 | 2011-11-18 | 動画像の符号化方法および復号化方法 |
JP2012110176A Pending JP2012178865A (ja) | 1997-06-09 | 2012-05-14 | 動画像の符号化方法および復号化方法 |
JP2012231309A Expired - Lifetime JP5257543B2 (ja) | 1997-06-09 | 2012-10-19 | 動画像の復号化方法 |
JP2012231310A Expired - Lifetime JP5257544B2 (ja) | 1997-06-09 | 2012-10-19 | 動画像の予測画像生成方法 |
JP2012231312A Pending JP2013051712A (ja) | 1997-06-09 | 2012-10-19 | 動画像の符号化方法および復号化方法 |
JP2012231311A Expired - Lifetime JP5257545B2 (ja) | 1997-06-09 | 2012-10-19 | 動画像の予測画像生成方法 |
JP2013083481A Expired - Lifetime JP5376083B2 (ja) | 1997-06-09 | 2013-04-12 | 動画像の予測画像生成方法 |
JP2013083479A Expired - Lifetime JP5418710B2 (ja) | 1997-06-09 | 2013-04-12 | 動画像の復号化方法 |
JP2013162866A Expired - Lifetime JP5392434B2 (ja) | 1997-06-09 | 2013-08-06 | 動画像の予測画像生成方法 |
JP2013203000A Expired - Lifetime JP5545403B2 (ja) | 1997-06-09 | 2013-09-30 | 動画像の復号化方法 |
JP2014055771A Expired - Lifetime JP5672400B2 (ja) | 1997-06-09 | 2014-03-19 | 動画像の復号化方法 |
JP2014170048A Expired - Lifetime JP5713137B2 (ja) | 1997-06-09 | 2014-08-25 | 動画像の予測画像生成法 |
JP2015009063A Expired - Lifetime JP5880743B2 (ja) | 1997-06-09 | 2015-01-21 | 動画像の予測画像生成方法 |
JP2015139316A Pending JP2015228670A (ja) | 1997-06-09 | 2015-07-13 | 動画像の予測画像生成方法および復号化方法 |
Family Applications Before (10)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP3096599A Expired - Lifetime JP3092610B2 (ja) | 1997-06-09 | 1999-02-09 | 動画像の復号化方法、該方法が記録されたコンピュータ読みとり可能な記録媒体、及び、動画像の復号化装置 |
JP2008022271A Expired - Fee Related JP4849076B2 (ja) | 1997-06-09 | 2008-02-01 | 動画像の符号化方法および復号化方法 |
JP2011066956A Expired - Lifetime JP4918946B2 (ja) | 1997-06-09 | 2011-03-25 | 動画像の復号化方法 |
JP2011252210A Pending JP2012065348A (ja) | 1997-06-09 | 2011-11-18 | 動画像の符号化方法および復号化方法 |
JP2012110176A Pending JP2012178865A (ja) | 1997-06-09 | 2012-05-14 | 動画像の符号化方法および復号化方法 |
JP2012231309A Expired - Lifetime JP5257543B2 (ja) | 1997-06-09 | 2012-10-19 | 動画像の復号化方法 |
JP2012231310A Expired - Lifetime JP5257544B2 (ja) | 1997-06-09 | 2012-10-19 | 動画像の予測画像生成方法 |
JP2012231312A Pending JP2013051712A (ja) | 1997-06-09 | 2012-10-19 | 動画像の符号化方法および復号化方法 |
JP2012231311A Expired - Lifetime JP5257545B2 (ja) | 1997-06-09 | 2012-10-19 | 動画像の予測画像生成方法 |
JP2013083481A Expired - Lifetime JP5376083B2 (ja) | 1997-06-09 | 2013-04-12 | 動画像の予測画像生成方法 |
Family Applications After (6)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013162866A Expired - Lifetime JP5392434B2 (ja) | 1997-06-09 | 2013-08-06 | 動画像の予測画像生成方法 |
JP2013203000A Expired - Lifetime JP5545403B2 (ja) | 1997-06-09 | 2013-09-30 | 動画像の復号化方法 |
JP2014055771A Expired - Lifetime JP5672400B2 (ja) | 1997-06-09 | 2014-03-19 | 動画像の復号化方法 |
JP2014170048A Expired - Lifetime JP5713137B2 (ja) | 1997-06-09 | 2014-08-25 | 動画像の予測画像生成法 |
JP2015009063A Expired - Lifetime JP5880743B2 (ja) | 1997-06-09 | 2015-01-21 | 動画像の予測画像生成方法 |
JP2015139316A Pending JP2015228670A (ja) | 1997-06-09 | 2015-07-13 | 動画像の予測画像生成方法および復号化方法 |
Country Status (10)
Country | Link |
---|---|
US (92) | US6295376B1 (ja) |
EP (11) | EP0884912B1 (ja) |
JP (17) | JP3092610B2 (ja) |
KR (4) | KR100393123B1 (ja) |
CN (8) | CN1156167C (ja) |
CA (1) | CA2240118C (ja) |
DE (2) | DE69808519T2 (ja) |
ES (10) | ES2431802T3 (ja) |
HK (8) | HK1017795A1 (ja) |
TW (2) | TW465227B (ja) |
Families Citing this family (145)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1998042134A1 (en) * | 1997-03-17 | 1998-09-24 | Mitsubishi Denki Kabushiki Kaisha | Image encoder, image decoder, image encoding method, image decoding method and image encoding/decoding system |
US7801380B2 (en) * | 1997-06-09 | 2010-09-21 | Hitachi, Ltd. | Recording medium having recorded thereon coded information using plus and/or minus rounding of images |
ES2431802T3 (es) * | 1997-06-09 | 2013-11-28 | Hitachi, Ltd. | Procedimiento de decodificación de imágenes y decodificador de imágenes |
US6574371B2 (en) * | 1997-06-09 | 2003-06-03 | Hitachi, Ltd. | Image decoding method |
KR100282147B1 (ko) * | 1998-11-13 | 2001-02-15 | 구자홍 | 압축 영상 복원 방법 |
WO2000046695A1 (en) * | 1999-02-01 | 2000-08-10 | Koninklijke Philips Electronics N.V. | Descriptor for a video sequence and image retrieval system using said descriptor |
JP2000270330A (ja) * | 1999-03-18 | 2000-09-29 | Fujitsu Ltd | 映像配信システム及び映像配信方法 |
US6567557B1 (en) * | 1999-12-10 | 2003-05-20 | Stmicroelectronics, Inc. | Method for preventing dual-step half-pixel motion compensation accumulation errors in prediction-rich MPEG-2 sequences |
EP1090502B1 (en) * | 1999-04-26 | 2005-11-30 | Koninklijke Philips Electronics N.V. | Sub-pixel accurate motion vector estimation and motion-compensated interpolation |
US7170941B2 (en) * | 1999-08-13 | 2007-01-30 | Patapsco Designs Inc. | Temporal compression |
JP4129664B2 (ja) * | 1999-10-05 | 2008-08-06 | ソニー株式会社 | データ処理装置およびデータ処理方法 |
US6683986B1 (en) * | 1999-10-28 | 2004-01-27 | Sharp Laboratories Of America, Inc. | Efficient transmission of quarter-VGA images using DVC codecs |
WO2001058169A1 (en) * | 2000-02-04 | 2001-08-09 | Koninklijke Philips Electronics N.V. | Method of reducing blocking artifacts |
US6512523B1 (en) * | 2000-03-27 | 2003-01-28 | Intel Corporation | Accurate averaging of elements using integer averaging |
CN1214644C (zh) * | 2000-05-19 | 2005-08-10 | 皇家菲利浦电子有限公司 | 方法、系统和装置 |
US7168069B1 (en) | 2000-07-12 | 2007-01-23 | Stmicroelectronics, Inc. | Dynamic generation of multimedia code for image processing |
DE60144176D1 (de) * | 2000-11-10 | 2011-04-21 | Ricoh Co Ltd | Bilddekompression von Transformkoeffizienten |
KR100386639B1 (ko) * | 2000-12-04 | 2003-06-02 | 주식회사 오픈비주얼 | 정규화된 역양자화기를 이용한 영상 및 동영상의 복원 방법 |
US7054500B1 (en) * | 2000-12-06 | 2006-05-30 | Realnetworks, Inc. | Video compression and decompression system with postfilter to filter coding artifacts |
US7170997B2 (en) | 2000-12-07 | 2007-01-30 | Cryptico A/S | Method of generating pseudo-random numbers in an electronic device, and a method of encrypting and decrypting electronic data |
US6898245B2 (en) * | 2001-03-26 | 2005-05-24 | Telefonaktiebolaget Lm Ericsson (Publ) | Low complexity video decoding |
US7266150B2 (en) * | 2001-07-11 | 2007-09-04 | Dolby Laboratories, Inc. | Interpolation of video compression frames |
US7643559B2 (en) * | 2001-09-14 | 2010-01-05 | Ntt Docomo, Inc. | Coding method, decoding method, coding apparatus, decoding apparatus, image processing system, coding program, and decoding program |
EP1432249A4 (en) * | 2001-09-18 | 2007-12-05 | Matsushita Electric Ind Co Ltd | Image Coding Methods and Image Decoding Methods |
JP3932379B2 (ja) * | 2001-10-02 | 2007-06-20 | 株式会社日立製作所 | 画像処理装置と撮像素子 |
CN101448162B (zh) * | 2001-12-17 | 2013-01-02 | 微软公司 | 处理视频图像的方法 |
EP1827026A1 (en) * | 2002-01-18 | 2007-08-29 | Kabushiki Kaisha Toshiba | Video decoding method and apparatus |
JP3861698B2 (ja) | 2002-01-23 | 2006-12-20 | ソニー株式会社 | 画像情報符号化装置及び方法、画像情報復号装置及び方法、並びにプログラム |
US7003035B2 (en) | 2002-01-25 | 2006-02-21 | Microsoft Corporation | Video coding methods and apparatuses |
US7266254B2 (en) | 2002-02-13 | 2007-09-04 | Canon Kabushiki Kaisha | Data processing apparatus, image processing apparatus, and method therefor |
US8284844B2 (en) | 2002-04-01 | 2012-10-09 | Broadcom Corporation | Video decoding system supporting multiple standards |
US7116831B2 (en) * | 2002-04-10 | 2006-10-03 | Microsoft Corporation | Chrominance motion vector rounding |
US7110459B2 (en) * | 2002-04-10 | 2006-09-19 | Microsoft Corporation | Approximate bicubic filter |
US7305034B2 (en) | 2002-04-10 | 2007-12-04 | Microsoft Corporation | Rounding control for multi-stage interpolation |
US7620109B2 (en) * | 2002-04-10 | 2009-11-17 | Microsoft Corporation | Sub-pixel interpolation in motion estimation and compensation |
US20040001546A1 (en) | 2002-06-03 | 2004-01-01 | Alexandros Tourapis | Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation |
US20040086117A1 (en) * | 2002-06-06 | 2004-05-06 | Petersen Mette Vesterager | Methods for improving unpredictability of output of pseudo-random number generators |
US7224731B2 (en) | 2002-06-28 | 2007-05-29 | Microsoft Corporation | Motion estimation/compensation for screen capture video |
US7280700B2 (en) | 2002-07-05 | 2007-10-09 | Microsoft Corporation | Optimization techniques for data compression |
JP4724351B2 (ja) * | 2002-07-15 | 2011-07-13 | 三菱電機株式会社 | 画像符号化装置、画像符号化方法、画像復号装置、画像復号方法、および通信装置 |
JP4078906B2 (ja) * | 2002-07-19 | 2008-04-23 | ソニー株式会社 | 画像信号の処理装置および処理方法、画像表示装置、それに使用される係数データの生成装置および生成方法、並びに各方法を実行するためのプログラムおよびそのプログラムを記録したコンピュータ読み取り可能な媒体 |
US7154952B2 (en) | 2002-07-19 | 2006-12-26 | Microsoft Corporation | Timestamp-independent motion vector prediction for predictive (P) and bidirectionally predictive (B) pictures |
KR100472476B1 (ko) * | 2002-08-31 | 2005-03-10 | 삼성전자주식회사 | 움직임 보상을 위한 보간 방법 및 그 장치 |
BR0306987A (pt) | 2002-11-20 | 2004-12-14 | Matsushita Electric Ind Co Ltd | Método de prognóstico de imagem em movimento, método e aparelho de codificação de imagem em movimento e método e aparelho de decodificação de imagem em movimento |
US7403660B2 (en) * | 2003-04-30 | 2008-07-22 | Nokia Corporation | Encoding picture arrangement parameter in picture bitstream |
US20040252762A1 (en) * | 2003-06-16 | 2004-12-16 | Pai R. Lakshmikanth | System, method, and apparatus for reducing memory and bandwidth requirements in decoder system |
US7426308B2 (en) * | 2003-07-18 | 2008-09-16 | Microsoft Corporation | Intraframe and interframe interlace coding and decoding |
US7609763B2 (en) * | 2003-07-18 | 2009-10-27 | Microsoft Corporation | Advanced bi-directional predictive coding of video frames |
US10554985B2 (en) | 2003-07-18 | 2020-02-04 | Microsoft Technology Licensing, Llc | DC coefficient signaling at small quantization step sizes |
US7499495B2 (en) * | 2003-07-18 | 2009-03-03 | Microsoft Corporation | Extended range motion vectors |
US7738554B2 (en) | 2003-07-18 | 2010-06-15 | Microsoft Corporation | DC coefficient signaling at small quantization step sizes |
US20050013498A1 (en) | 2003-07-18 | 2005-01-20 | Microsoft Corporation | Coding of motion vector information |
US8064520B2 (en) * | 2003-09-07 | 2011-11-22 | Microsoft Corporation | Advanced bi-directional predictive coding of interlaced video |
US7567617B2 (en) * | 2003-09-07 | 2009-07-28 | Microsoft Corporation | Predicting motion vectors for fields of forward-predicted interlaced video frames |
US7599438B2 (en) * | 2003-09-07 | 2009-10-06 | Microsoft Corporation | Motion vector block pattern coding and decoding |
US7317839B2 (en) * | 2003-09-07 | 2008-01-08 | Microsoft Corporation | Chroma motion vector derivation for interlaced forward-predicted fields |
US7724827B2 (en) | 2003-09-07 | 2010-05-25 | Microsoft Corporation | Multi-layer run level encoding and decoding |
US20050105621A1 (en) | 2003-11-04 | 2005-05-19 | Ju Chi-Cheng | Apparatus capable of performing both block-matching motion compensation and global motion compensation and method thereof |
NO319629B1 (no) * | 2003-11-28 | 2005-09-05 | Tandberg Telecom As | Fremgangsmate for korrigering av interpolerte pikselverdier |
KR100601935B1 (ko) * | 2003-12-02 | 2006-07-14 | 삼성전자주식회사 | 디지탈 동영상 처리 방법 및 장치 |
FI20035235A0 (fi) * | 2003-12-12 | 2003-12-12 | Nokia Corp | Järjestely tiedostojen käsittelemiseksi päätelaitteen yhteydessä |
US7643182B2 (en) * | 2003-12-16 | 2010-01-05 | Seiko Epson Corporation | System and method for processing image data |
JP2005184632A (ja) * | 2003-12-22 | 2005-07-07 | Nec Access Technica Ltd | 通信端末における消費電力削減方法及び通信端末 |
CN100542289C (zh) * | 2004-07-13 | 2009-09-16 | 杜比实验室特许公司 | 视频压缩的无偏舍入 |
US7548259B2 (en) * | 2004-08-12 | 2009-06-16 | Microsoft Corporation | System and method for producing a higher resolution still image from video information |
WO2006028088A1 (ja) | 2004-09-08 | 2006-03-16 | Matsushita Electric Industrial Co., Ltd. | 動画像符号化方法および動画像復号化方法 |
US7941177B2 (en) | 2004-09-15 | 2011-05-10 | Samsung Electronics Co., Ltd | Wireless terminal apparatus for automatically changing WLAN standard and method thereof |
JP2006190259A (ja) * | 2004-12-06 | 2006-07-20 | Canon Inc | 手ぶれ判定装置及び画像処理装置及びその制御方法及びプログラム |
KR100634531B1 (ko) * | 2004-12-29 | 2006-10-16 | 삼성전자주식회사 | 액정 표시장치의 동적 캐패시턴스 보상장치 및 방법 |
US7634148B2 (en) * | 2005-01-07 | 2009-12-15 | Ntt Docomo, Inc. | Image signal transforming and inverse-transforming method and computer program product with pre-encoding filtering features |
WO2006080261A2 (en) * | 2005-01-27 | 2006-08-03 | Matsushita Electric Industrial Co., Ltd. | Portable image transmission/reception terminal having power consumption influences encoding/decoding modes |
JP2006217406A (ja) * | 2005-02-04 | 2006-08-17 | Sony Corp | 符号化装置および方法、復号装置および方法、記録媒体、並びにプログラム、画像処理システムおよび方法 |
JP2008544598A (ja) * | 2005-06-10 | 2008-12-04 | エヌエックスピー ビー ヴィ | 交互の上向き及び下向き動きベクトル |
WO2007029878A1 (en) * | 2005-09-09 | 2007-03-15 | Yamaha Corporation | Capacitor microphone |
US8208553B2 (en) * | 2006-05-04 | 2012-06-26 | Altera Corporation | Methods and apparatus for quarter-pel refinement in a SIMD array processor |
US8194760B2 (en) * | 2006-06-01 | 2012-06-05 | Ntt Docomo, Inc. | Method and apparatus for distributed space-time coding in wireless radio networks |
KR100885693B1 (ko) * | 2006-06-14 | 2009-02-26 | 한국전자통신연구원 | 독립성분분석 기반의 신호분리 알고리즘을 이용한 비디오인코딩 장치 및 그 방법과 이를 이용한 비디오 디코딩 장치및 그 방법 |
US20080039166A1 (en) * | 2006-08-03 | 2008-02-14 | Seven Lights, Llc | Systems and methods for multi-character online gaming |
US20080039169A1 (en) * | 2006-08-03 | 2008-02-14 | Seven Lights, Llc | Systems and methods for character development in online gaming |
US20080039165A1 (en) * | 2006-08-03 | 2008-02-14 | Seven Lights, Llc | Systems and methods for a scouting report in online gaming |
US8194744B2 (en) * | 2006-09-20 | 2012-06-05 | Lsi Corporation | Method and/or apparatus for implementing reduced bandwidth high performance VC1 intensity compensation |
US20100134631A1 (en) * | 2006-10-30 | 2010-06-03 | Wesleyan University | Apparatus and method for real time image compression for particle tracking |
US8861356B2 (en) * | 2007-03-13 | 2014-10-14 | Ntt Docomo, Inc. | Method and apparatus for prioritized information delivery with network coding over time-varying network topologies |
US8275041B2 (en) * | 2007-04-09 | 2012-09-25 | Nokia Corporation | High accuracy motion vectors for video coding with low encoder and decoder complexity |
US8254455B2 (en) | 2007-06-30 | 2012-08-28 | Microsoft Corporation | Computing collocated macroblock information for direct mode macroblocks |
JP2009077382A (ja) * | 2007-08-27 | 2009-04-09 | Sony Corp | 画像処理装置および方法、並びにプログラム |
WO2009032255A2 (en) * | 2007-09-04 | 2009-03-12 | The Regents Of The University Of California | Hierarchical motion vector processing method, software and devices |
US20090075686A1 (en) * | 2007-09-19 | 2009-03-19 | Gomadam Krishna S | Method and apparatus for wideband transmission based on multi-user mimo and two-way training |
US8325840B2 (en) * | 2008-02-25 | 2012-12-04 | Ntt Docomo, Inc. | Tree position adaptive soft output M-algorithm receiver structures |
US8279954B2 (en) * | 2008-03-06 | 2012-10-02 | Ntt Docomo, Inc. | Adaptive forward-backward soft output M-algorithm receiver structures |
US20090262249A1 (en) * | 2008-04-22 | 2009-10-22 | Himax Media Solutions, Inc. | Interpolated frame generating method |
CN101345872B (zh) * | 2008-05-23 | 2010-06-09 | 清华大学 | 视频编解码中实现双线性插值的方法 |
US8565329B2 (en) * | 2008-06-03 | 2013-10-22 | Ntt Docomo, Inc. | Soft output M-algorithm receiver structures with generalized survivor selection criteria for MIMO systems |
AU2009264603A1 (en) * | 2008-06-30 | 2010-01-07 | Kabushiki Kaisha Toshiba | Dynamic image prediction/encoding device and dynamic image prediction/decoding device |
WO2010010942A1 (ja) * | 2008-07-25 | 2010-01-28 | ソニー株式会社 | 画像処理装置および方法 |
JP4444354B2 (ja) * | 2008-08-04 | 2010-03-31 | 株式会社東芝 | 画像処理装置、および画像処理方法 |
US8229443B2 (en) * | 2008-08-13 | 2012-07-24 | Ntt Docomo, Inc. | Method of combined user and coordination pattern scheduling over varying antenna and base-station coordination patterns in a multi-cell environment |
US8451951B2 (en) * | 2008-08-15 | 2013-05-28 | Ntt Docomo, Inc. | Channel classification and rate adaptation for SU-MIMO systems |
US8705484B2 (en) * | 2008-08-15 | 2014-04-22 | Ntt Docomo, Inc. | Method for varying transmit power patterns in a multi-cell environment |
US8542640B2 (en) * | 2008-08-28 | 2013-09-24 | Ntt Docomo, Inc. | Inter-cell approach to operating wireless beam-forming and user selection/scheduling in multi-cell environments based on limited signaling between patterns of subsets of cells |
US8855221B2 (en) * | 2008-09-15 | 2014-10-07 | Ntt Docomo, Inc. | Method and apparatus for iterative receiver structures for OFDM/MIMO systems with bit interleaved coded modulation |
JP5143038B2 (ja) * | 2009-02-02 | 2013-02-13 | オリンパス株式会社 | 画像処理装置及び画像処理方法 |
US8189666B2 (en) | 2009-02-02 | 2012-05-29 | Microsoft Corporation | Local picture identifier and computation of co-located information |
JP2010258739A (ja) * | 2009-04-24 | 2010-11-11 | Sony Corp | 画像処理装置および方法、並びにプログラム |
US9048977B2 (en) * | 2009-05-05 | 2015-06-02 | Ntt Docomo, Inc. | Receiver terminal driven joint encoder and decoder mode adaptation for SU-MIMO systems |
US8824825B2 (en) * | 2009-11-17 | 2014-09-02 | Sharp Kabushiki Kaisha | Decoding device with nonlinear process section, control method for the decoding device, transmission system, and computer-readable recording medium having a control program recorded thereon |
WO2011061957A1 (ja) | 2009-11-17 | 2011-05-26 | シャープ株式会社 | 符号化装置、復号化装置、符号化装置の制御方法、復号化装置の制御方法、伝送システム、および制御プログラムを記録したコンピュータ読み取り可能な記録媒体 |
US20110200108A1 (en) * | 2010-02-18 | 2011-08-18 | Qualcomm Incorporated | Chrominance high precision motion filtering for motion interpolation |
KR101420957B1 (ko) * | 2010-03-31 | 2014-07-30 | 미쓰비시덴키 가부시키가이샤 | 화상 부호화 장치, 화상 복호 장치, 화상 부호화 방법 및 화상 복호 방법 |
JP5390458B2 (ja) * | 2010-04-08 | 2014-01-15 | 株式会社Nttドコモ | 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法、及び動画像予測復号プログラム |
EP3540059A1 (en) | 2010-04-16 | 2019-09-18 | Nuevolution A/S | Bi-functional complexes and methods for making and using such complexes |
CN101917624B (zh) * | 2010-07-26 | 2013-04-03 | 清华大学 | 一种高分辨率视频图像重建方法 |
US8968080B1 (en) * | 2010-11-05 | 2015-03-03 | Wms Gaming, Inc. | Display of third party content on a wagering game machine |
JP5768491B2 (ja) * | 2011-05-17 | 2015-08-26 | ソニー株式会社 | 画像処理装置および方法、プログラム、並びに記録媒体 |
KR101572737B1 (ko) | 2011-05-27 | 2015-11-27 | 엠파이어 테크놀로지 디벨롭먼트 엘엘씨 | 메타데이터를 사용한 무결절성 애플리케이션 백업 및 리커버리 |
US8805099B2 (en) | 2011-06-22 | 2014-08-12 | Panasonic Intellectual Property Corporation Of America | Image decoding method and image coding method |
JP5871628B2 (ja) * | 2011-11-07 | 2016-03-01 | キヤノン株式会社 | 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム |
JP2013102297A (ja) | 2011-11-07 | 2013-05-23 | Canon Inc | 画像符号化方法、画像符号化装置及びプログラム、画像復号方法、画像復号装置及びプログラム |
US10410020B2 (en) * | 2011-12-23 | 2019-09-10 | Knauf Gips Kg | Method and system for checking the presence and/or readability of an item of product information |
EP3406433A1 (en) | 2012-01-23 | 2018-11-28 | Apio, Inc. | Atmosphere control around respiring biological materials |
WO2013186802A1 (ja) * | 2012-06-11 | 2013-12-19 | 日本放送協会 | 符号化装置、復号装置及びプログラム |
JP6182719B2 (ja) * | 2012-06-29 | 2017-08-23 | ヴェロス メディア インターナショナル リミテッドVelos Media International Limited | 符号化装置および符号化方法 |
WO2014049667A1 (ja) * | 2012-09-28 | 2014-04-03 | 株式会社島津製作所 | デジタル画像処理方法および撮影装置 |
CN104104960B (zh) | 2013-04-03 | 2017-06-27 | 华为技术有限公司 | 多级双向运动估计方法及设备 |
US10303658B2 (en) * | 2013-11-25 | 2019-05-28 | Dropbox, Inc. | Generating and sharing metadata for indexing synchronized content items |
JP6551850B2 (ja) * | 2013-12-19 | 2019-07-31 | ビザ インターナショナル サービス アソシエーション | クラウド・ベース・トランザクションの方法及びシステム |
US9304657B2 (en) * | 2013-12-31 | 2016-04-05 | Abbyy Development Llc | Audio tagging |
US9942560B2 (en) | 2014-01-08 | 2018-04-10 | Microsoft Technology Licensing, Llc | Encoding screen capture data |
US9774881B2 (en) | 2014-01-08 | 2017-09-26 | Microsoft Technology Licensing, Llc | Representing motion vectors in an encoded bitstream |
US9749642B2 (en) | 2014-01-08 | 2017-08-29 | Microsoft Technology Licensing, Llc | Selection of motion vector precision |
US20150200156A1 (en) * | 2014-01-13 | 2015-07-16 | Altera Corporation | Module having mirror-symmetric terminals and methods of forming the same |
US9147262B1 (en) | 2014-08-25 | 2015-09-29 | Xerox Corporation | Methods and systems for image processing |
US10387596B2 (en) * | 2014-08-26 | 2019-08-20 | International Business Machines Corporation | Multi-dimension variable predictive modeling for yield analysis acceleration |
CN107113431B (zh) * | 2014-10-03 | 2020-12-01 | 日本电气株式会社 | 视频编码设备、视频解码设备、视频编码方法、视频解码方法和程序 |
CN105611182B (zh) * | 2014-11-25 | 2020-05-22 | 中兴通讯股份有限公司 | 亮度补偿方法及装置 |
KR102349788B1 (ko) * | 2015-01-13 | 2022-01-11 | 인텔렉추얼디스커버리 주식회사 | 영상의 부호화/복호화 방법 및 장치 |
WO2016147836A1 (ja) * | 2015-03-13 | 2016-09-22 | ソニー株式会社 | 画像処理装置および方法 |
JP6636615B2 (ja) * | 2015-08-24 | 2020-01-29 | ホアウェイ・テクノロジーズ・カンパニー・リミテッド | 動きベクトル場の符号化方法、復号方法、符号化装置、および復号装置 |
US10509601B2 (en) * | 2016-12-28 | 2019-12-17 | Amazon Technologies, Inc. | Data storage system with multi-tier control plane |
RU2759052C2 (ru) * | 2016-12-28 | 2021-11-09 | Сони Корпорейшн | Устройство и способ обработки изображений |
US10570759B2 (en) * | 2017-07-10 | 2020-02-25 | GM Global Technology Operations LLC | Variable-geometry turbine housing intake channel for an exhaust driven turbocharger |
WO2020191034A1 (en) * | 2019-03-18 | 2020-09-24 | Tencent America LLC | Method and apparatus for video coding |
CN112583878B (zh) * | 2019-09-30 | 2023-03-14 | 阿波罗智能技术(北京)有限公司 | 车辆信息校验方法、装置、设备和介质 |
CN112203094B (zh) * | 2020-11-16 | 2024-05-14 | 北京世纪好未来教育科技有限公司 | 编码方法、装置、电子设备及存储介质 |
CN116760988B (zh) * | 2023-08-18 | 2023-11-10 | 瀚博半导体(上海)有限公司 | 基于人类视觉系统的视频编码方法和装置 |
Family Cites Families (44)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB1341375A (en) | 1969-11-19 | 1973-12-19 | Smith Kline French Lab | Aminoalkylimidazoles and process for their production |
JPS6214754A (ja) | 1985-07-13 | 1987-01-23 | Junichi Sugawara | 米飯類の保存処理法とその製品 |
JPS62147654A (ja) | 1985-12-23 | 1987-07-01 | Showa Denko Kk | リチウム−アルミニウム合金電極の製造方法 |
FR2620502B1 (fr) | 1987-09-10 | 1989-12-08 | Valeo | Dispositif amortisseur de torsion |
US5054103A (en) * | 1987-09-24 | 1991-10-01 | Matsushita Electric Works, Ltd. | Picture encoding system |
US5379351A (en) * | 1992-02-19 | 1995-01-03 | Integrated Information Technology, Inc. | Video compression/decompression processing and processors |
JP2749700B2 (ja) | 1990-04-18 | 1998-05-13 | 三菱電機株式会社 | リニアイメージセンサ |
JP2827461B2 (ja) | 1990-06-18 | 1998-11-25 | 株式会社デンソー | 電子冷凍装置 |
JPH06214754A (ja) | 1993-01-14 | 1994-08-05 | Toshiba Corp | 四捨五入演算回路及びこれを有する画像処理装置 |
US5737022A (en) * | 1993-02-26 | 1998-04-07 | Kabushiki Kaisha Toshiba | Motion picture error concealment using simplified motion compensation |
TW224553B (en) * | 1993-03-01 | 1994-06-01 | Sony Co Ltd | Method and apparatus for inverse discrete consine transform and coding/decoding of moving picture |
US5486876A (en) | 1993-04-27 | 1996-01-23 | Array Microsystems, Inc. | Video interface unit for mapping physical image data to logical tiles |
EP0671816B1 (en) * | 1993-09-28 | 2000-03-29 | Sony Corporation | Encoding/decoding device with all odd or all even value rounding |
JPH07153195A (ja) * | 1993-11-30 | 1995-06-16 | Sony Corp | ディジタル記録装置 |
GB9402807D0 (en) | 1994-02-14 | 1994-04-06 | Xenova Ltd | Pharmaceutical compounds |
US5685963A (en) * | 1994-10-31 | 1997-11-11 | Saes Pure Gas, Inc. | In situ getter pump system and method |
US5638128A (en) | 1994-11-08 | 1997-06-10 | General Instrument Corporation Of Delaware | Pixel interpolation filters for video decompression processor |
JP3191583B2 (ja) * | 1994-12-12 | 2001-07-23 | ソニー株式会社 | 情報復号化装置 |
US5949484A (en) * | 1995-03-08 | 1999-09-07 | Hitachi, Ltd. | Portable terminal apparatus for multimedia communication |
US5650823A (en) | 1995-03-27 | 1997-07-22 | International Business Machines Corporation | Half pel motion estimation method for B pictures |
GB2301972B (en) * | 1995-06-06 | 1999-10-20 | Sony Uk Ltd | Video compression |
JP3081507B2 (ja) | 1995-06-15 | 2000-08-28 | 三菱電機ビルテクノサービス株式会社 | かご内養生シート収納装置 |
US5740283A (en) * | 1995-07-06 | 1998-04-14 | Rubin, Bednarek & Associates, Inc. | Digital video compression utilizing mixed vector and scalar outputs |
JP3700230B2 (ja) | 1996-01-12 | 2005-09-28 | 株式会社日立製作所 | 動画像符号化における動き補償方法 |
JP3183155B2 (ja) | 1996-03-18 | 2001-07-03 | 株式会社日立製作所 | 画像復号化装置、及び、画像復号化方法 |
JPH1098729A (ja) | 1996-09-20 | 1998-04-14 | Hitachi Ltd | フレーム間予測画像の合成方法 |
US6205178B1 (en) * | 1996-09-20 | 2001-03-20 | Hitachi, Ltd. | Method and synthesizing a predicted image, video coding device and video coding method |
US5740263A (en) * | 1996-10-23 | 1998-04-14 | Liao; Lu-Lee | Multi-media microphone seat |
US6058410A (en) | 1996-12-02 | 2000-05-02 | Intel Corporation | Method and apparatus for selecting a rounding mode for a numeric operation |
US5905542A (en) * | 1996-12-04 | 1999-05-18 | C-Cube Microsystems, Inc. | Simplified dual prime video motion estimation |
US6056410A (en) * | 1997-04-02 | 2000-05-02 | Donnelly Corporation | Digital electrochromic mirror system |
US5837022A (en) * | 1997-05-19 | 1998-11-17 | Chapman; Rick L. | High efficiency air filter system |
ES2431802T3 (es) * | 1997-06-09 | 2013-11-28 | Hitachi, Ltd. | Procedimiento de decodificación de imágenes y decodificador de imágenes |
JP3410037B2 (ja) * | 1997-06-09 | 2003-05-26 | 株式会社日立製作所 | 復号化方法、復号化装置、および、コンピュータ読み取り可能な記録媒体 |
JP3407726B2 (ja) * | 1997-06-09 | 2003-05-19 | 株式会社日立製作所 | 符号化方法、符号化装置、および、コンピュータ読み取り可能な記録媒体 |
JP3407727B2 (ja) * | 1997-06-09 | 2003-05-19 | 株式会社日立製作所 | 記録媒体 |
JP2998741B2 (ja) * | 1997-06-09 | 2000-01-11 | 株式会社日立製作所 | 動画像の符号化方法、該方法が記録されたコンピュータ読みとり可能な記録媒体、及び動画像の符号化装置 |
US6574371B2 (en) * | 1997-06-09 | 2003-06-03 | Hitachi, Ltd. | Image decoding method |
JPH1169345A (ja) | 1997-06-11 | 1999-03-09 | Fujitsu Ltd | フレーム間予測動画像符号化装置及び復号装置並びにフレーム間予測動画像符号化方法及び復号方法 |
DE19730305A1 (de) * | 1997-07-15 | 1999-01-21 | Bosch Gmbh Robert | Verfahren zur Erzeugung eines verbesserten Bildsignals bei der Bewegungsschätzung von Bildsequenzen, insbesondere eines Prädiktionssignals für Bewegtbilder mit bewegungskompensierender Prädiktion |
KR100831400B1 (ko) | 2000-01-18 | 2008-05-21 | 니리어스 파마슈티컬즈, 인크. | 세포분열 저해제 및 그의 제조방법 |
US7027654B1 (en) * | 2001-08-16 | 2006-04-11 | On2 Technologies | Video compression system |
US7190724B2 (en) * | 2002-04-12 | 2007-03-13 | Seiko Epson Corporation | Method and apparatus for transform domain video processing |
US8644391B2 (en) * | 2011-05-12 | 2014-02-04 | National Cheng Kung University | Space exploration method of reconfigurable motion compensation architecture |
-
1998
- 1998-06-08 ES ES10012310T patent/ES2431802T3/es not_active Expired - Lifetime
- 1998-06-08 EP EP98110471A patent/EP0884912B1/en not_active Expired - Lifetime
- 1998-06-08 ES ES98110471T patent/ES2205323T3/es not_active Expired - Lifetime
- 1998-06-08 EP EP10012307.4A patent/EP2288165B1/en not_active Expired - Lifetime
- 1998-06-08 ES ES10012305T patent/ES2434736T3/es not_active Expired - Lifetime
- 1998-06-08 ES ES10012308.2T patent/ES2545109T3/es not_active Expired - Lifetime
- 1998-06-08 ES ES10012306T patent/ES2433641T3/es not_active Expired - Lifetime
- 1998-06-08 ES ES10012307.4T patent/ES2561212T3/es not_active Expired - Lifetime
- 1998-06-08 EP EP20100012305 patent/EP2271116B1/en not_active Expired - Lifetime
- 1998-06-08 DE DE69808519T patent/DE69808519T2/de not_active Expired - Lifetime
- 1998-06-08 ES ES10012309.0T patent/ES2545089T3/es not_active Expired - Lifetime
- 1998-06-08 EP EP20100012306 patent/EP2288164B1/en not_active Expired - Lifetime
- 1998-06-08 EP EP10012308.2A patent/EP2285119B1/en not_active Expired - Lifetime
- 1998-06-08 EP EP10012309.0A patent/EP2288166B1/en not_active Expired - Lifetime
- 1998-06-08 EP EP02007745.9A patent/EP1237376B1/en not_active Expired - Lifetime
- 1998-06-08 ES ES02007745.9T patent/ES2545066T3/es not_active Expired - Lifetime
- 1998-06-08 US US09/093,194 patent/US6295376B1/en not_active Expired - Lifetime
- 1998-06-08 CA CA 2240118 patent/CA2240118C/en not_active Expired - Fee Related
- 1998-06-08 ES ES02007746T patent/ES2405318T3/es not_active Expired - Lifetime
- 1998-06-08 EP EP20020007746 patent/EP1237377B1/en not_active Expired - Lifetime
- 1998-06-08 ES ES01129134T patent/ES2204797T3/es not_active Expired - Lifetime
- 1998-06-08 EP EP01129134A patent/EP1193977B1/en not_active Expired - Lifetime
- 1998-06-08 EP EP00117806A patent/EP1056294B1/en not_active Expired - Lifetime
- 1998-06-08 DE DE1998617460 patent/DE69817460T2/de not_active Expired - Lifetime
- 1998-06-08 KR KR10-1998-0021034A patent/KR100393123B1/ko not_active IP Right Cessation
- 1998-06-08 EP EP20100012310 patent/EP2271117B1/en not_active Expired - Lifetime
- 1998-06-09 CN CNB981029817A patent/CN1156167C/zh not_active Expired - Lifetime
- 1998-06-09 CN CNB2003101138237A patent/CN100417032C/zh not_active Expired - Lifetime
- 1998-06-09 CN CNB2005100558818A patent/CN100355291C/zh not_active Expired - Lifetime
- 1998-06-09 CN CNB001202081A patent/CN1237809C/zh not_active Expired - Lifetime
- 1998-06-09 CN CNB2005100594617A patent/CN100415000C/zh not_active Expired - Lifetime
- 1998-06-09 CN CNB2003101138256A patent/CN1274157C/zh not_active Expired - Lifetime
- 1998-06-09 CN CNB2003101138241A patent/CN1284375C/zh not_active Expired - Lifetime
- 1998-06-09 CN CNB2005100558803A patent/CN100539694C/zh not_active Expired - Lifetime
- 1998-07-04 TW TW89112481A patent/TW465227B/zh not_active IP Right Cessation
- 1998-07-04 TW TW87107737A patent/TW411698B/zh not_active IP Right Cessation
-
1999
- 1999-02-09 JP JP3096599A patent/JP3092610B2/ja not_active Expired - Lifetime
- 1999-06-23 HK HK99102704A patent/HK1017795A1/xx not_active IP Right Cessation
-
2000
- 2000-02-25 US US09/513,688 patent/US6631214B1/en not_active Expired - Lifetime
- 2000-02-28 US US09/514,287 patent/US6560367B1/en not_active Expired - Lifetime
- 2000-02-29 US US09/516,207 patent/US6529632B1/en not_active Expired - Lifetime
- 2000-03-01 US US09/516,245 patent/US6643409B1/en not_active Expired - Lifetime
-
2001
- 2001-01-08 KR KR1020010000904A patent/KR100393125B1/ko not_active IP Right Cessation
- 2001-06-08 US US09/875,929 patent/US6584227B2/en not_active Expired - Lifetime
- 2001-06-08 US US09/875,928 patent/US6606419B2/en not_active Expired - Lifetime
- 2001-06-08 US US09/875,872 patent/US6567558B2/en not_active Expired - Lifetime
- 2001-06-08 US US09/875,930 patent/US6650781B2/en not_active Expired - Lifetime
- 2001-08-06 HK HK01105431A patent/HK1034841A1/xx not_active IP Right Cessation
-
2002
- 2002-11-26 KR KR1020020073739A patent/KR100400537B1/ko not_active IP Right Cessation
- 2002-11-26 KR KR1020020073744A patent/KR100400538B1/ko not_active IP Right Cessation
-
2003
- 2003-07-22 US US10/623,589 patent/US7251369B2/en not_active Expired - Fee Related
- 2003-07-22 US US10/623,669 patent/US6909809B2/en not_active Expired - Lifetime
- 2003-07-22 US US10/623,668 patent/US6868185B2/en not_active Expired - Lifetime
- 2003-07-22 US US10/623,506 patent/US6876769B2/en not_active Expired - Lifetime
- 2003-07-22 US US10/623,531 patent/US6915013B2/en not_active Expired - Lifetime
-
2004
- 2004-07-30 US US10/902,040 patent/US7233704B2/en not_active Expired - Fee Related
- 2004-07-30 US US10/901,964 patent/US7072518B2/en not_active Expired - Fee Related
- 2004-07-30 US US10/902,042 patent/US7184601B2/en not_active Expired - Fee Related
- 2004-07-30 US US10/902,041 patent/US7236635B2/en not_active Expired - Fee Related
- 2004-07-30 US US10/901,960 patent/US7248742B2/en not_active Expired - Fee Related
- 2004-07-30 US US10/901,959 patent/US7200274B2/en not_active Expired - Fee Related
-
2005
- 2005-01-20 HK HK05100512A patent/HK1068484A1/xx not_active IP Right Cessation
- 2005-01-20 HK HK05100511A patent/HK1068466A1/xx not_active IP Right Cessation
- 2005-03-11 HK HK05102113A patent/HK1069699A1/xx not_active IP Right Cessation
- 2005-10-06 HK HK05108840A patent/HK1076962A1/xx not_active IP Right Cessation
-
2006
- 2006-01-13 HK HK06100585A patent/HK1081029A1/xx not_active IP Right Cessation
-
2007
- 2007-02-02 HK HK07101281A patent/HK1096804A1/xx not_active IP Right Cessation
- 2007-06-29 US US11/770,953 patent/US7426307B2/en not_active Expired - Fee Related
- 2007-06-29 US US11/770,932 patent/US7421133B2/en not_active Expired - Fee Related
- 2007-06-29 US US11/770,923 patent/US7466864B2/en not_active Expired - Fee Related
- 2007-06-29 US US11/770,912 patent/US7471837B2/en not_active Expired - Fee Related
- 2007-06-29 US US11/770,937 patent/US7424161B2/en not_active Expired - Fee Related
- 2007-06-29 US US11/770,900 patent/US7471836B2/en not_active Expired - Fee Related
-
2008
- 2008-02-01 JP JP2008022271A patent/JP4849076B2/ja not_active Expired - Fee Related
- 2008-12-23 US US12/342,808 patent/US7676100B2/en not_active Expired - Fee Related
- 2008-12-23 US US12/342,787 patent/US7702166B2/en not_active Expired - Fee Related
- 2008-12-23 US US12/342,884 patent/US7724966B2/en not_active Expired - Fee Related
- 2008-12-29 US US12/344,617 patent/US7668384B2/en not_active Expired - Fee Related
- 2008-12-29 US US12/344,619 patent/US7724967B2/en not_active Expired - Fee Related
- 2008-12-29 US US12/344,626 patent/US7702167B2/en not_active Expired - Fee Related
- 2008-12-29 US US12/344,621 patent/US7724968B2/en not_active Expired - Fee Related
- 2008-12-29 US US12/344,625 patent/US7724969B2/en not_active Expired - Fee Related
-
2010
- 2010-01-29 US US12/696,181 patent/US7801373B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,164 patent/US7801369B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,217 patent/US7801378B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,221 patent/US7801379B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,207 patent/US7801377B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,188 patent/US7801374B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,195 patent/US7801375B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,167 patent/US7801370B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,204 patent/US7801376B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,143 patent/US7801366B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,230 patent/US7801381B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,172 patent/US7801371B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,150 patent/US7801367B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,157 patent/US7801368B2/en not_active Expired - Fee Related
- 2010-01-29 US US12/696,177 patent/US7801372B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/885,980 patent/US7929779B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/885,930 patent/US7929782B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/885,920 patent/US7929781B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/886,032 patent/US7929787B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/886,011 patent/US7936935B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/886,059 patent/US7929789B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/886,015 patent/US7929786B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/886,002 patent/US7936934B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/886,046 patent/US7929788B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/885,873 patent/US7933457B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/885,987 patent/US7929785B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/885,947 patent/US7929784B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/885,937 patent/US7929783B2/en not_active Expired - Fee Related
- 2010-09-20 US US12/885,878 patent/US7929780B2/en not_active Expired - Fee Related
-
2011
- 2011-03-25 JP JP2011066956A patent/JP4918946B2/ja not_active Expired - Lifetime
- 2011-04-20 US US13/090,566 patent/US8160373B2/en not_active Expired - Fee Related
- 2011-11-18 JP JP2011252210A patent/JP2012065348A/ja active Pending
-
2012
- 2012-04-16 US US13/447,581 patent/US8406544B2/en not_active Expired - Fee Related
- 2012-05-14 JP JP2012110176A patent/JP2012178865A/ja active Pending
- 2012-10-19 JP JP2012231309A patent/JP5257543B2/ja not_active Expired - Lifetime
- 2012-10-19 JP JP2012231310A patent/JP5257544B2/ja not_active Expired - Lifetime
- 2012-10-19 JP JP2012231312A patent/JP2013051712A/ja active Pending
- 2012-10-19 JP JP2012231311A patent/JP5257545B2/ja not_active Expired - Lifetime
-
2013
- 2013-03-13 US US13/799,710 patent/US8611682B2/en not_active Expired - Fee Related
- 2013-03-14 US US13/802,958 patent/US8615139B2/en not_active Expired - Fee Related
- 2013-03-14 US US13/802,937 patent/US8611683B2/en not_active Expired - Fee Related
- 2013-03-14 US US13/803,013 patent/US8611685B2/en not_active Expired - Fee Related
- 2013-03-14 US US13/802,977 patent/US8625915B2/en not_active Expired - Fee Related
- 2013-03-14 US US13/802,944 patent/US8675977B2/en not_active Expired - Fee Related
- 2013-03-14 US US13/802,998 patent/US8649618B2/en not_active Expired - Fee Related
- 2013-03-14 US US13/803,024 patent/US8649619B2/en not_active Expired - Fee Related
- 2013-03-14 US US13/802,966 patent/US8611684B2/en not_active Expired - Fee Related
- 2013-04-12 JP JP2013083481A patent/JP5376083B2/ja not_active Expired - Lifetime
- 2013-04-12 JP JP2013083479A patent/JP5418710B2/ja not_active Expired - Lifetime
- 2013-08-06 JP JP2013162866A patent/JP5392434B2/ja not_active Expired - Lifetime
- 2013-09-30 JP JP2013203000A patent/JP5545403B2/ja not_active Expired - Lifetime
- 2013-12-02 US US14/094,218 patent/US8891890B2/en not_active Expired - Fee Related
-
2014
- 2014-03-19 JP JP2014055771A patent/JP5672400B2/ja not_active Expired - Lifetime
- 2014-04-04 US US14/245,002 patent/US8942501B2/en not_active Expired - Fee Related
- 2014-04-04 US US14/244,974 patent/US8942497B2/en not_active Expired - Fee Related
- 2014-04-04 US US14/245,006 patent/US8948527B2/en not_active Expired - Fee Related
- 2014-04-04 US US14/244,982 patent/US8942504B2/en not_active Expired - Fee Related
- 2014-04-04 US US14/244,987 patent/US8942499B2/en not_active Expired - Fee Related
- 2014-04-04 US US14/244,977 patent/US8942498B2/en not_active Expired - Fee Related
- 2014-04-04 US US14/244,996 patent/US8942500B2/en not_active Expired - Fee Related
- 2014-04-04 US US14/244,993 patent/US8942492B2/en not_active Expired - Fee Related
- 2014-08-25 JP JP2014170048A patent/JP5713137B2/ja not_active Expired - Lifetime
- 2014-10-27 US US14/523,968 patent/US9167265B2/en not_active Expired - Fee Related
-
2015
- 2015-01-21 JP JP2015009063A patent/JP5880743B2/ja not_active Expired - Lifetime
- 2015-04-28 US US14/698,068 patent/US9161055B2/en not_active Expired - Fee Related
- 2015-04-28 US US14/698,228 patent/US9161045B2/en not_active Expired - Fee Related
- 2015-04-28 US US14/697,881 patent/US9161051B2/en not_active Expired - Fee Related
- 2015-04-28 US US14/697,890 patent/US9161053B2/en not_active Expired - Fee Related
- 2015-04-28 US US14/697,886 patent/US9161052B2/en not_active Expired - Fee Related
- 2015-04-28 US US14/698,251 patent/US9167262B2/en not_active Expired - Fee Related
- 2015-04-28 US US14/697,883 patent/US9161044B2/en not_active Expired - Fee Related
- 2015-04-28 US US14/698,057 patent/US9161054B2/en not_active Expired - Fee Related
- 2015-07-13 JP JP2015139316A patent/JP2015228670A/ja active Pending
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5880743B2 (ja) | 動画像の予測画像生成方法 | |
JP2998741B2 (ja) | 動画像の符号化方法、該方法が記録されたコンピュータ読みとり可能な記録媒体、及び動画像の符号化装置 | |
JP4066817B2 (ja) | 動画像の符号化方法および復号化方法 | |
JP3407727B2 (ja) | 記録媒体 | |
JP4095762B2 (ja) | 動画像の復号化方法、復号化装置、及び、該復号方法が記録されたコンピュータ読み取り可能な記録媒体 | |
JP4078212B2 (ja) | 動画像の符号化方法、該符号化方法が記録されたコンピュータ読みとり可能な記録媒体、及び、符号化装置 | |
JP3407726B2 (ja) | 符号化方法、符号化装置、および、コンピュータ読み取り可能な記録媒体 | |
JP3092614B2 (ja) | ディジタル携帯端末 | |
JP3410037B2 (ja) | 復号化方法、復号化装置、および、コンピュータ読み取り可能な記録媒体 | |
JP3092612B2 (ja) | 動画像の復号化方法、及び、動画像の復号化装置 | |
JP3092613B2 (ja) | 記録媒体 | |
JP3092611B2 (ja) | 動画像の符号化方法、及び、動画像の符号化装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A132 Effective date: 20130730 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130930 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20131022 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20131104 |
|
EXPY | Cancellation because of completion of term |