JP2000059793A - 画像復号装置及び画像復号方法 - Google Patents
画像復号装置及び画像復号方法Info
- Publication number
- JP2000059793A JP2000059793A JP22488598A JP22488598A JP2000059793A JP 2000059793 A JP2000059793 A JP 2000059793A JP 22488598 A JP22488598 A JP 22488598A JP 22488598 A JP22488598 A JP 22488598A JP 2000059793 A JP2000059793 A JP 2000059793A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- orthogonal transform
- pixel
- block
- inverse orthogonal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 93
- 230000009466 transformation Effects 0.000 claims abstract description 105
- 230000000750 progressive effect Effects 0.000 claims abstract description 46
- 238000012937 correction Methods 0.000 claims description 90
- 230000006835 compression Effects 0.000 claims description 8
- 238000007906 compression Methods 0.000 claims description 8
- 238000011426 transformation method Methods 0.000 claims 4
- 230000009191 jumping Effects 0.000 abstract 2
- 230000008602 contraction Effects 0.000 abstract 1
- 238000012545 processing Methods 0.000 description 91
- 239000011159 matrix material Substances 0.000 description 71
- 238000010586 diagram Methods 0.000 description 40
- 230000010363 phase shift Effects 0.000 description 30
- 238000001914 filtration Methods 0.000 description 21
- 238000006243 chemical reaction Methods 0.000 description 18
- 230000008569 process Effects 0.000 description 17
- 238000013139 quantization Methods 0.000 description 12
- 238000004364 calculation method Methods 0.000 description 10
- 230000004044 response Effects 0.000 description 10
- 238000005070 sampling Methods 0.000 description 7
- 238000000354 decomposition reaction Methods 0.000 description 6
- 238000000926 separation method Methods 0.000 description 4
- 238000013461 design Methods 0.000 description 3
- 230000002457 bidirectional effect Effects 0.000 description 2
- 238000012938 design process Methods 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- ZVQOOHYFBIDMTQ-UHFFFAOYSA-N [methyl(oxido){1-[6-(trifluoromethyl)pyridin-3-yl]ethyl}-lambda(6)-sulfanylidene]cyanamide Chemical compound N#CN=S(C)(=O)C(C)C1=CC=C(C(F)(F)F)N=C1 ZVQOOHYFBIDMTQ-UHFFFAOYSA-N 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000002542 deteriorative effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/112—Selection of coding mode or of prediction mode according to a given display mode, e.g. for interlaced or progressive display mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
- H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/16—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter for a given display mode, e.g. for interlaced or progressive display mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/48—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
損なうことなく動画像データの画素の位相ずれをなくす
MPEGダウンデコーダを提供する。 【解決手段】 インターレース画像対応画像復号部3
は、インターレース画像が入力され、DCTモードがフ
ィールドモードの場合、4×4の縮小IDCTを行う。
また、DCTモードがフレームモードの場合、DCTブ
ロックの全係数に対してIDCTをして飛び越し走査に
対応した2つの画素ブロックに分離し、分離した2つの
画素ブロックに対してそれぞれDCTをする。そして、
この2つの画素ブロックの低周波係数に対してIDCT
をし、2つの画素ブロックを合成する。プログレッシブ
画像対応画像復号部2は、プログレッシブ画像が入力さ
れ、DCTブロックの各係数のうち低周波成分の係数に
対して逆直交変換をする。
Description
ク(マクロブロック)単位で動き予測をすることによる
予測符号化、及び、所定の画素ブロック(直交変換ブロ
ック)単位で直交変換することによる圧縮符号化をした
第1の解像度の圧縮画像データを、復号する画像復号装
置及び画像復号方法に関し、特に、第1の解像度の圧縮
画像データを復号して、この第1の解像度よりも低い第
2の解像度の動画像データに縮小する画像復号装置及び
画像復号方法に関するものである。
roup phase2)等の画像圧縮方式を用いたデジタルテレ
ビジョン放送の規格化が進められている。デジタルテレ
ビジョン放送の規格には、標準解像度画像(例えば垂直
方向の有効ライン数が576本)に対応した規格、高解
像度画像(例えば垂直方向の有効ライン数が1152
本)に対応した規格等がある。そのため、近年、高解像
度画像の圧縮画像データを復号するとともにこの圧縮画
像データを1/2の解像度に縮小することにより、標準
解像度画像の画像データを生成して、この画像データを
標準解像度に対応したテレビジョンモニタに表示するダ
ウンデコーダが求められている。
符号化及び離散コサイン変換による圧縮符号化をしたM
PEG2等のビットストリームを、復号するとともに標
準解像度画像にダウンサンプリングするダウンデコーダ
が、文献「低域ドリフトのないスケーラブル・デコー
ダ」(岩橋・神林・貴家:信学技報 CS94-186,DSP94-10
8,1995-01)に提案されている(以下、この文献を文献
1と呼ぶ。)。この文献1には、以下の第1から第3の
ダウンデコーダが示されている。
うに、高解像度画像のビットストリームに対して8(水
平方向のDC成分から数えた係数の数)×8(垂直方向
のDC成分から数えた係数の数)の逆離散コサイン変換
をする逆離散コサイン変換装置1001と、離散コサイ
ン変換がされた高解像度画像と動き補償がされた参照画
像とを加算する加算装置1002と、参照画像を一時記
憶するフレームメモリ1003と、フレームメモリ10
03が記憶した参照画像に1/2画素精度で動き補償を
する動き補償装置1004と、フレームメモリ1003
が記憶した参照画像を標準解像度の画像に変換するダウ
ンサンプリング装置1005とを備えている。
サイン変換を行い高解像度画像として復号した出力画像
を、ダウンサンプリング装置1005で縮小して標準解
像度の画像データを出力する。
うに、高解像度画像のビットストリームのDCT(Disc
rete Cosine Transform)ブロックの高周波成分の係数
を0に置き換えて8×8の逆離散コサイン変換をする逆
離散コサイン変換装置1011と、離散コサイン変換が
された高解像度画像と動き補償がされた参照画像とを加
算する加算装置1012と、参照画像を一時記憶するフ
レームメモリ1013と、フレームメモリ1013が記
憶した参照画像に1/2画素精度で動き補償をする動き
補償装置1014と、フレームメモリ1013が記憶し
た参照画像を標準解像度の画像に変換するダウンサンプ
リング装置1015とを備えている。
ロックの全ての係数のうち高周波成分の係数を0に置き
換えて逆離散コサイン変換を行い高解像度画像として復
号した出力画像を、ダウンサンプリング装置1005で
縮小して標準解像度の画像データを出力する。
うに、高解像度画像のビットストリームのDCTブロッ
クの低周波成分の係数のみを用いて例えば4×4の逆離
散コサイン変換をして標準解像度画像に復号する縮小逆
離散コサイン変換装置1021と、縮小逆離散コサイン
変換がされた標準解像度画像と動き補償がされた参照画
像とを加算する加算装置1022と、参照画像を一時記
憶するフレームメモリ1023と、フレームメモリ10
23が記憶した参照画像に1/4画素精度で動き補償を
する動き補償装置1024とを備えている。
ロックの全ての係数のうち低周波成分の係数のみを用い
て逆離散コサイン変換を行い、高解像度画像から標準解
像度画像として復号する。
DCTブロック内の全ての係数に対して逆離散コサイン
変換を行い高解像度画像を復号しているため、高い演算
処理能力の逆離散コサイン変換装置1001と高容量の
フレームメモリ1003とが必要となる。また、上記第
2のダウンデコーダでは、DCTブロック内の係数のう
ち高周波成分を0として離散コサイン変換を行い高解像
度画像を復号しているため、逆離散コサイン変換装置1
011の演算処理能力は低くて良いが、やはり高容量の
フレームメモリ1013が必要となる。これら第1及び
第2のダウンデコーダに対し、第3のダウンデコーダで
は、DCTブロック内の全ての係数うち低周波成分の係
数のみを用いて逆離散コサイン変換をしているため逆離
散コサイン変換装置1021の演算処理能力が低くてよ
く、さらに、標準解像度画像の参照画像を復号している
のでフレームメモリ1023の容量も少なくすることが
できる。
表示方式には、順次走査方式と飛び越し走査方式とがあ
る。順次走査方式は、フレーム内の全ての画素を同じタ
イミングでサンプリングした画像を、順次表示する表示
方式である。飛び越し走査方式は、フレーム内の画素を
水平方向の1ライン毎に異なるタイミングでサンプリン
グした画像を、交互に表示する表示方式である。
画素を1ライン毎に異なるタイミングでサンプリングし
た画像のうちの一方を、トップフィールド(第1フィー
ルドともいう。)といい、他方をボトムフィールド(第
2のフィールドともいう。)という。フレームの水平方
向の先頭ラインが含まれる画像がトップフィールドとな
り、フレームの水平方向の2番目のラインが含まれる画
像がボトムフィールドとなる。従って、飛び越し走査方
式では、1つのフレームが2つのフィールドから構成さ
れることとなる。
した動画像信号を効率良く圧縮するため、画面の圧縮単
位であるピクチャにフレームを割り当てて符号化するだ
けでなく、ピクチャにフィールドを割り当てて符号化す
ることもできる。
割り当てられた場合には、そのビットストリームの構造
をフィールド構造と呼び、ピクチャにフレームが割り当
てられた場合には、そのビットストリームの構造をフレ
ーム構造と呼ぶ。また、フィールド構造では、フィール
ド内の画素からDCTブロックが形成され、フィールド
単位で離散コサイン変換がされる。このフィールド単位
で離散コサイン変換を行う処理モードのことをフィール
ドDCTモードと呼ぶ。また、フレーム構造では、フレ
ーム内の画素からDCTブロックが形成され、フレーム
単位で離散コサイン変換がされる。このフレーム単位で
離散コサイン変換を行う処理モードのことをフレームD
CTモードと呼ぶ。さらに、フィールド構造では、フィ
ールド内の画素からマクロブロックが形成され、フィー
ルド単位で動き予測がされる。このフィールド単位で動
き予測を行う処理モードのことをフィールド動き予測モ
ードと呼ぶ。また、フレーム構造では、フレーム内の画
素からマクロブロックが形成され、フレーム単位で動き
予測がされる。フレーム単位で動き予測を行う処理モー
ドのことをフレーム動き予測モードと呼ぶ。
に示された第3のダウンデコーダを利用して、飛び越し
走査方式に対応した圧縮画像データを復号する画像復号
装置が、例えば文献「ACompensation Method of Drift
Errors in Scalability」(N.OBIKANE,K.TAHARAand J.Y
ONEMITSU,HDTV Work Shop'93)に提案されている(以
下、この文献を文献2と呼ぶ)。
は、図32に示すように、高解像度画像をMPEG2で
圧縮したビットストリームが供給され、このビットスト
リームを解析するビットストリーム解析装置1031
と、データの発生頻度に応じた符号長を割り当てる可変
長符号化がされたビットストリームを復号する可変長符
号復号装置1032と、DCTブロックの各係数に量子
化ステップを掛ける逆量子化装置1033と、DCTブ
ロックの全ての係数のうち低周波成分の係数のみを用い
て例えば4×4の逆離散コサイン変換をして標準解像度
画像を復号する縮小逆離散コサイン変換装置1034
と、縮小逆離散コサイン変換がされた標準解像度画像と
動き補償がされた参照画像とを加算する加算装置103
5と、参照画像を一時記憶するフレームメモリ1036
と、フレームメモリ1036が記憶した参照画像に1/
4画素精度で動き補償をする動き補償装置1037とを
備えている。
の縮小逆離散コサイン変換装置1034は、DCTブロ
ック内の全ての係数のうち低周波成分の係数のみを用い
て逆離散コサイン変換をするが、フレームDCTモード
とフィールドDCTモードとで、逆離散コサイン変換を
行う係数の位置が異なっている。
1034は、フィールドDCTモードの場合には、図3
3に示すように、DCTブロック内の8×8個のうち、
低域の4×4個の係数のみに逆離散コサイン変換を行
う。それに対し、縮小逆離散コサイン変換装置1034
は、フレームDCTモードの場合には、図34に示すよ
うに、DCTブロック内の8×8個の係数のうち、4×
2個+4×2個の係数のみに逆離散コサイン変換を行
う。
号装置の動き補償装置1037は、高解像度画像に対し
て行われた動き予測の情報(動きベクトル)に基づき、
フィールド動き予測モード及びフレーム動き予測モード
のそれぞれに対応した1/4画素精度の動き補償を行
う。すなわち、通常MPEG2では1/2画素精度で動
き補償が行われることが定められているが、高解像度画
像から標準解像度画像を復号する場合には、ピクチャ内
の画素数が1/2に間引かれるため、動き補償装置10
37では動き補償の画素精度を1/4画素精度として動
き補償を行っている。
像度画像に対応した動き補償を行うため、標準解像度の
画像としてフレームメモリ1036に格納された参照画
像の画素に対して線形補間して、1/4画素精度の画素
を生成している。
フレーム動き予測モードの場合の垂直方向の画素の線形
補間処理を、図35及び図36を用いて説明する。な
お、図面中には、縦方向に垂直方向の画素の位相を示
し、表示画像の各画素が位置する位相を整数で示してい
る。
測がされた画像の補間処理について、図35を用いて説
明する。高解像度画像(上位レイヤー)に対しては、図
35(a)に示すように、各フィールドそれぞれ独立
に、1/2画素精度で動き補償がされる。これに対し、
標準解像度画像(下位レイヤー)に対しては、図35
(b)に示すように、整数精度の画素に基づきフィール
ド内で線形補間をして、垂直方向に1/4画素、1/2
画素、3/4画素分の位相がずれた画素を生成し、動き
補償がされる。すなわち、標準解像度画像(下位レイヤ
ー)では、トップフィールドの整数精度の各画素に基づ
きトップフィールドの1/4画素精度の各画素が線形補
間により生成され、ボトムフィールドの整数精度の各画
素に基づきボトムフィールドの1/4画素精度の各画素
が線形補間により生成される。例えば、垂直方向の位相
が0の位置にあるトップフィールドの画素の値をa、垂
直方向の位相が1の位置にあるトップフィールドの画素
の値をbとする。この場合、垂直方向の位相が1/4の
位置にあるトップフィールドの画素は(3a+b)/4
となり、垂直方向の位相が1/2の位置にあるトップフ
ィールドの画素は(a+b)/2となり、垂直方向の位
相が3/4の位置にあるトップフィールドの画素は(a
+3b)/4となる。
測がされた画像の補間処理について、図36を用いて説
明する。高解像度画像(上位レイヤー)に対しては、図
36(a)に示すように、各フィールド間で補間処理が
され、すなわち、ボトムフィールドとトップフィールド
との間で補間処理がされ、1/2画素精度で動き補償が
される。標準解像度画像(下位レイヤー)に対しては、
図36(b)に示すように、トップフィールド及びボト
ムフィールドの2つのフィールドの整数精度の各画素に
基づき、垂直方向に1/4画素、1/2画素、3/4画
素分の位相がずれた画素が線形補間により生成され、動
き補償がされる。例えば、垂直方向の位相が−1の位置
にあるボトムフィールドの画素の値をa、垂直方向の位
相が0の位置にあるトップフィールドの画素の値をb、
垂直方向の位相が1の位置にあるボトムフィールドの画
素の値をc、垂直方向の位相が2の位置にあるトップフ
ィールドの画素の値をd、垂直方向の位相が3の位置に
あるボトムフィールドの画素の値をeとする。この場
合、垂直方向の位相が0〜2の間にある1/4画素精度
の各画素は、以下のように求められる。
は(a+4b+3c)/8となる。垂直方向の位相が1
/2の位置にある画素は(a+3c)/4となる。垂直
方向の位相が3/4の位置にある画素は(a+2b+3
c+2d)/8となる。垂直方向の位相が5/4の位置
にある画素は(2b+3c+2d+e)/8となる。垂
直方向の位相が3/2の位置にある画素は(3c+e)
/4となる。垂直方向の位相が7/4の位置にある画素
は(3c+4d+e)/8となる。
画像復号装置は、飛び越し走査方式に対応した高解像度
画像の圧縮画像データを、標準解像度画像データに復号
することができる。
の画像復号装置では、フィールドDCTモードで得られ
る標準解像度画像の各画素と、フレームDCTモードで
得られる標準解像度の各画素との位相がずれる。具体的
には、フィールドDCTモードでは、図37に示すよう
に、下位レイヤーのトップフィールドの各画素の垂直方
向の位相が1/2、5/2・・・となり、下位レイヤー
のボトムフィールドの各画素の垂直方向の位相が1、3
・・・となる。それに対して、フレームDCTモードで
は、図38に示すように、下位レイヤーのトップフィー
ルドの各画素の垂直方向の位相が0、2・・・となり、
下位レイヤーのボトムフィールドの各画素の垂直方向の
位相が1、3・・・となる。そのため、位相が異なる画
像がフレームメモリ1036に混在し、出力する画像の
画質が劣化する。
号装置では、フィールド動き予測モードとフレーム動き
予測モードとで位相ずれの補正がされていない。そのた
め、出力する画像の画質が劣化する。
たものであり、飛び越し走査画像が有するインタレース
性を損なうことなく出力する動画像データの画素の位相
ずれをなくすことが可能な、高解像度画像の圧縮画像デ
ータから標準解像度の画像データを復号する画像復号装
置及び画像復号方法を提供することを目的とする。
置は、所定の画素ブロック(マクロブロック)単位で動
き予測をすることによる予測符号化、及び、所定の画素
ブロック(直交変換ブロック)単位で直交変換をするこ
とによる圧縮符号化をした第1の解像度の圧縮画像デー
タから、上記第1の解像度より低い第2の解像度の動画
像データを復号する画像復号装置であって、飛び越し走
査に対応した直交変換方式(フィールド直交変換モー
ド)により直交変換がされた上記圧縮画像データの直交
変換ブロックに対して、逆直交変換をする第1の逆直交
変換手段と、順次走査に対応した直交変換方式(フレー
ム直交変換モード)により直交変換がされた上記圧縮画
像データの直交変換ブロックに対して、逆直交変換をす
る第2の逆直交変換手段と、上記第1の逆直交変換手段
又は上記第2の逆直交変換手段により逆直交変換がされ
た圧縮画像データと動き補償がされた参照画像データと
を加算して、第2の解像度の動画像データを出力する加
算手段と、上記加算手段から出力される動画像データを
参照画像データとして記憶する記憶手段と、上記記憶手
段が記憶している参照画像データのマクロブロックに対
して動き補償をする動き補償手段とを備え、上記第1の
逆直交変換手段は、上記直交変換ブロックの各係数のう
ち低周波成分の係数に対して逆直交変換をし、上記第2
の逆直交変換手段は、上記直交変換ブロックの全周波数
成分の係数に対して逆直交変換をし、逆直交変換をした
直交変換ブロックの各画素を飛び越し走査に対応した2
つの画素ブロックに分離し、分離した2つの画素ブロッ
クに対してそれぞれ直交変換をし、直交変換をした2つ
の画素ブロックの各係数のうち低周波成分の係数に対し
て逆直交変換をし、逆直交変換をした2つの画素ブロッ
クを合成して直交変換ブロックを生成する第1の画像復
号部と、フレーム直交変換モードにより直交変換がされ
た上記圧縮画像データの直交変換ブロックに対して、逆
直交変換をする第3の逆直交変換手段と、上記第3の逆
直交変換手段により逆直交変換がされた圧縮画像データ
と動き補償がされた参照画像データとを加算して、第2
の解像度の動画像データを出力する加算手段と、上記加
算手段から出力される動画像データを参照画像データと
して記憶する記憶手段と、上記記憶手段が記憶している
参照画像データのマクロブロックに対して動き補償をす
る動き補償手段とを備え、上記第1の逆直交変換手段
は、上記直交変換ブロックの各係数のうち低周波成分の
係数に対して逆直交変換をする第2の画像復号部とを有
し、飛び越し走査方式の動画像信号が符号化された第1
の解像度の圧縮画像データが入力された場合には、上記
第1の画像復号部により第2の解像度の動画像データを
復号し、順次走査方式の動画像信号が符号化された第1
の解像度の圧縮画像データが入力された場合には、上記
第2の画像復号部により第2の解像度の動画像データを
復号することを特徴とする。
の動画像信号が符号化された第1の解像度の圧縮画像デ
ータが入力された場合に、フレーム直交変換モードによ
り直交変換がされた直交変換ブロックの全周波数成分の
係数に対して逆直交変換をして飛び越し走査に対応した
2つの画素ブロックに分離し、分離した2つの画素ブロ
ックに対してそれぞれ直交変換をして低周波成分の係数
に対して逆直交変換をし、逆直交変換をした2つの画素
ブロックを合成する。また、この画像復号装置では、順
次走査方式の動画像信号が符号化された第1の解像度の
圧縮画像データが入力された場合に、上記直交変換ブロ
ックの各係数のうち低周波成分の係数に対して逆直交変
換をする。そして、この画像復号装置では、第1の解像
度より低い第2の解像度の動画像データを出力する。
の画素ブロック(マクロブロック)単位で動き予測をす
ることによる予測符号化、及び、所定の画素ブロック
(直交変換ブロック)単位で直交変換をすることによる
圧縮符号化をした第1の解像度の圧縮画像データから、
上記第1の解像度より低い第2の解像度の動画像データ
を復号する画像復号装置であって、飛び越し走査に対応
した直交変換方式(フィールド直交変換モード)により
直交変換がされた上記圧縮画像データの直交変換ブロッ
クに対して、逆直交変換をする第1の逆直交変換手段
と、順次走査に対応した直交変換方式(フレーム直交変
換モード)により直交変換がされた上記圧縮画像データ
の直交変換ブロックに対して、逆直交変換をする第2の
逆直交変換手段と、上記第1の逆直交変換手段又は上記
第2の逆直交変換手段により逆直交変換がされた圧縮画
像データと動き補償がされた参照画像データとを加算し
て、第2の解像度の動画像データを出力する加算手段
と、上記加算手段から出力される動画像データを参照画
像データとして記憶する記憶手段と、上記記憶手段が記
憶している参照画像データのマクロブロックに対して動
き補償をする動き補償手段とを備え、上記第1の逆直交
変換手段は、上記直交変換ブロックの各係数のうち低周
波成分の係数に対して逆直交変換をし、逆直交変換をし
て得られたトップフィールドの各画素の垂直方向に対し
て1/4画素分の位相補正をし、逆直交変換をして得ら
れたボトムフィールドの各画素の垂直方向に対して3/
4画素分の位相補正をし、上記第2の逆直交変換手段
は、上記直交変換ブロックの全周波数成分の係数に対し
て逆直交変換をし、逆直交変換をした直交変換ブロック
を飛び越し走査に対応した2つの画素ブロックに分離
し、分離した2つの画素ブロックに対してそれぞれ直交
変換をし、直交変換をした2つの画素ブロックの各係数
のうち低周波成分の係数に対して逆直交変換をし、逆直
交変換をして得られたトップフィールドの各画素の垂直
方向に対して1/4画素分の位相補正をし、逆直交変換
をして得られたボトムフィールドの各画素の垂直方向に
対して3/4画素分の位相補正をし、位相補正をしたト
ップフィールドとボトムフィールドとを合成する第1の
画像復号部と、フレーム直交変換モードにより直交変換
がされた上記圧縮画像データの直交変換ブロックに対し
て、逆直交変換をする第3の逆直交変換手段と、上記第
3の逆直交変換手段により逆直交変換がされた圧縮画像
データと動き補償がされた参照画像データとを加算し
て、第2の解像度の動画像データを出力する加算手段
と、上記加算手段から出力される動画像データを参照画
像データとして記憶する記憶手段と、上記記憶手段が記
憶している参照画像データのマクロブロックに対して動
き補償をする動き補償手段とを備え、上記第1の逆直交
変換手段は、上記直交変換ブロックの各係数のうち低周
波成分の係数に対して逆直交変換をする第2の画像復号
部とを有し、飛び越し走査方式の動画像信号が符号化さ
れた第1の解像度の圧縮画像データが入力された場合に
は、上記第1の画像復号部により第2の解像度の動画像
データを復号し、順次走査方式の動画像信号が符号化さ
れた第1の解像度の圧縮画像データが入力された場合に
は、上記第2の画像復号部により第2の解像度の動画像
データを復号することを特徴とする。
の動画像信号が符号化された第1の解像度の圧縮画像デ
ータが入力された場合に、フィールド直交変換モードに
より直交変換がされた直交変換ブロックの各係数のうち
低周波成分の係数に対して逆直交変換をし、逆直交変換
をして得られたトップフィールドの各画素の垂直方向に
対して1/4画素分の位相補正をし、逆直交変換をして
得られたボトムフィールドの各画素の垂直方向に対して
3/4画素分の位相補正をし、フレーム直交変換モード
により直交変換がされた直交変換ブロックの全周波数成
分の係数に対して逆直交変換をし、逆直交変換をした直
交変換ブロックを飛び越し走査に対応した2つの画素ブ
ロックに分離し、分離した2つの画素ブロックに対して
それぞれ直交変換をし、直交変換をした2つの画素ブロ
ックの各係数のうち低周波成分の係数に対して逆直交変
換をし、逆直交変換をして得られたトップフィールドの
各画素の垂直方向に対して1/4画素分の位相補正を
し、逆直交変換をして得られたボトムフィールドの各画
素の垂直方向に対して3/4画素分の位相補正をし、位
相補正をしたトップフィールドとボトムフィールドとを
合成する。また、この画像復号装置では、順次走査方式
の動画像信号が符号化された第1の解像度の圧縮画像デ
ータが入力された場合に、上記直交変換ブロックの各係
数のうち低周波成分の係数に対して逆直交変換をする。
そして、この画像復号装置では、第1の解像度より低い
第2の解像度の動画像データを出力する。
ブロック(マクロブロック)単位で動き予測をすること
による予測符号化、及び、所定の画素ブロック(直交変
換ブロック)単位で直交変換をすることによる圧縮符号
化をした第1の解像度の圧縮画像データから、上記第1
の解像度より低い第2の解像度の動画像データを復号す
る画像復号方法であって、飛び越し走査方式の動画像信
号が符号化された第1の解像度の圧縮画像データが入力
された場合には、飛び越し走査に対応した直交変換方式
(フィールド直交変換モード)により直交変換がされた
上記圧縮画像データの直交変換ブロックに対して、逆直
交変換をし、順次走査に対応した直交変換方式(フレー
ム直交変換モード)により直交変換がされた上記圧縮画
像データの直交変換ブロックに対して、逆直交変換を
し、逆直交変換がされた圧縮画像データと動き補償がさ
れた参照画像データとを加算し、加算して得られた動画
像データを参照画像データとして記憶し、記憶している
参照画像データのマクロブロックに対して動き補償を
し、フィールド直交変換モードにより直交変換がされた
上記直交変換ブロックの各係数のうち低周波成分の係数
に対して逆直交変換をし、フレーム直交変換モードによ
り直交変換がされた上記直交変換ブロックの全周波数成
分の係数に対して逆直交変換をし、逆直交変換をした直
交変換ブロックの各画素を飛び越し走査に対応した2つ
の画素ブロックに分離し、分離した2つの画素ブロック
に対してそれぞれ直交変換をし、直交変換をした2つの
画素ブロックの各係数のうち低周波成分の係数に対して
逆直交変換をし、逆直交変換をした2つの画素ブロック
を合成して直交変換ブロックを生成し、順次走査方式の
動画像信号が符号化された第1の解像度の圧縮画像デー
タが入力された場合には、フレーム直交変換モードによ
り直交変換がされた上記圧縮画像データの直交変換ブロ
ックに対して、逆直交変換をし、逆直交変換がされた圧
縮画像データと動き補償がされた参照画像データとを加
算し、加算して得られた動画像データを参照画像データ
として記憶し、記憶している参照画像データのマクロブ
ロックに対して動き補償をし、上記直交変換ブロックの
各係数のうち低周波成分の係数に対して逆直交変換をす
ることを特徴とする。
の動画像信号が符号化された第1の解像度の圧縮画像デ
ータが入力された場合に、フレーム直交変換モードによ
り直交変換がされた直交変換ブロックの全周波数成分の
係数に対して逆直交変換をして飛び越し走査に対応した
2つの画素ブロックに分離し、分離した2つの画素ブロ
ックに対してそれぞれ直交変換をして低周波成分の係数
に対して逆直交変換をし、逆直交変換をした2つの画素
ブロックを合成する。また、この画像復号方法では、順
次走査方式の動画像信号が符号化された第1の解像度の
圧縮画像データが入力された場合に、上記直交変換ブロ
ックの各係数のうち低周波成分の係数に対して逆直交変
換をする。そして、この画像復号方法では、第1の解像
度より低い第2の解像度の動画像データを出力する。
の画素ブロック(マクロブロック)単位で動き予測をす
ることによる予測符号化、及び、所定の画素ブロック
(直交変換ブロック)単位で直交変換をすることによる
圧縮符号化をした第1の解像度の圧縮画像データから、
上記第1の解像度より低い第2の解像度の動画像データ
を復号する画像復号方法であって、飛び越し走査方式の
動画像信号が符号化された第1の解像度の圧縮画像デー
タが入力された場合には、飛び越し走査に対応した直交
変換方式(フィールド直交変換モード)により直交変換
がされた上記圧縮画像データの直交変換ブロックに対し
て、逆直交変換をし、順次走査に対応した直交変換方式
(フレーム直交変換モード)により直交変換がされた上
記圧縮画像データの直交変換ブロックに対して、逆直交
変換をし、逆直交変換がされた圧縮画像データと動き補
償がされた参照画像データとを加算し、加算して得られ
た動画像データを参照画像データとして記憶し、記憶し
ている参照画像データのマクロブロックに対して動き補
償をし、フィールド直交変換モードにより直交変換がさ
れた直交変換ブロックの各係数のうち低周波成分の係数
に対して逆直交変換をし、逆直交変換をして得られたト
ップフィールドの各画素の垂直方向に対して1/4画素
分の位相補正をし、逆直交変換をして得られたボトムフ
ィールドの各画素の垂直方向に対して3/4画素分の位
相補正をし、フレーム直交変換モードにより直交変換ブ
ロックの全周波数成分の係数に対して逆直交変換をし、
逆直交変換をした直交変換ブロックを飛び越し走査に対
応した2つの画素ブロックに分離し、分離した2つの画
素ブロックに対してそれぞれ直交変換をし、直交変換を
した2つの画素ブロックの各係数のうち低周波成分の係
数に対して逆直交変換をし、逆直交変換をして得られた
トップフィールドの各画素の垂直方向に対して1/4画
素分の位相補正をし、逆直交変換をして得られたボトム
フィールドの各画素の垂直方向に対して3/4画素分の
位相補正をし、位相補正をしたトップフィールドとボト
ムフィールドとを合成し、順次走査方式の動画像信号が
符号化された第1の解像度の圧縮画像データが入力され
た場合には、フレーム直交変換モードにより直交変換が
された上記圧縮画像データの直交変換ブロックに対し
て、逆直交変換をし、逆直交変換がされた圧縮画像デー
タと動き補償がされた参照画像データとを加算し、加算
して得られた動画像データを参照画像データとして記憶
し、記憶している参照画像データのマクロブロックに対
して動き補償をし、上記直交変換ブロックの各係数のう
ち低周波成分の係数に対して逆直交変換をすることを特
徴とする。
の動画像信号が符号化された第1の解像度の圧縮画像デ
ータが入力された場合に、フィールド直交変換モードに
より直交変換がされた直交変換ブロックの各係数のうち
低周波成分の係数に対して逆直交変換をし、逆直交変換
をして得られたトップフィールドの各画素の垂直方向に
対して1/4画素分の位相補正をし、逆直交変換をして
得られたボトムフィールドの各画素の垂直方向に対して
3/4画素分の位相補正をし、フレーム直交変換モード
により直交変換がされた直交変換ブロックの全周波数成
分の係数に対して逆直交変換をし、逆直交変換をした直
交変換ブロックを飛び越し走査に対応した2つの画素ブ
ロックに分離し、分離した2つの画素ブロックに対して
それぞれ直交変換をし、直交変換をした2つの画素ブロ
ックの各係数のうち低周波成分の係数に対して逆直交変
換をし、逆直交変換をして得られたトップフィールドの
各画素の垂直方向に対して1/4画素分の位相補正を
し、逆直交変換をして得られたボトムフィールドの各画
素の垂直方向に対して3/4画素分の位相補正をし、位
相補正をしたトップフィールドとボトムフィールドとを
合成する。また、この画像復号方法では、順次走査方式
の動画像信号が符号化された第1の解像度の圧縮画像デ
ータが入力された場合に、上記直交変換ブロックの各係
数のうち低周波成分の係数に対して逆直交変換をする。
そして、この画像復号方法では、第1の解像度より低い
第2の解像度の動画像データを出力する。
て、本発明を適用した画像復号装置について、図面を参
照しながら説明する。
の実施の形態の画像復号装置について説明する。
形態の画像復号装置1は、垂直方向の有効ライン数が例
えば1152本の高解像度画像をMPEG2で画像圧縮
したビットストリームが入力され、この入力されたビッ
トストリームを復号するとともに1/2の解像度に縮小
して、垂直方向の有効ライン数が例えば576本の標準
解像度画像を出力する装置である。
するにあたり、高解像度画像のことを上位レイヤーとも
呼び、標準解像度画像のことを下位レイヤーとも呼ぶも
のとする。また、通常、8×8の離散コサイン係数を有
するDCTブロックを逆離散コサイン変換した場合8×
8の画素から構成される復号データを得ることができる
が、例えば、8×8の離散コサイン係数を復号して4×
4の画素から構成される復号データを得るような、逆離
散コサイン変換をするとともに解像度を縮小する処理
を、縮小逆離散コサイン変換という。
1は、圧縮された高解像度画像のビットストリームが供
給され、このビットストリームを解析するビットストリ
ーム解析装置11と、プログレッシブ画像すなわち順次
走査方式の動画像信号であるビットストリームを復号す
るプログレッシブ画像対応画像復号部2と、インタレー
ス画像すなわち飛び越し走査方式の動画像信号であるビ
ットストリームを復号するインターレース画像対応画像
復号部3とから構成される。
れたビットストリームのシンタックスを検出し、この入
力されたビットストリームがプログレッシブ画像である
かインタレース画像であるかを判断する。プログレッシ
ブ画像である場合には、入力されたビットストリームを
プログレッシブ画像対応画像復号部2に供給する。ま
た、インタレース画像である場合には、入力されたビッ
トストリームをインターレース画像対応画像復号部3に
供給する。
図2に示すように、データの発生頻度に応じた符号長を
割り当てる可変長符号化がされた上記ビットストリーム
を復号する可変長符号復号装置3と、DCTブロックの
各係数に量子化ステップを掛ける逆量子化装置4と、D
CTブロックに対して縮小逆離散コサイン変換をして標
準解像度画像を生成する縮小逆離散コサイン変換装置5
と、縮小逆離散コサイン変換がされた標準解像度画像と
動き補償がされた参照画像とを加算する加算装置6と、
参照画像を一時記憶するフレームメモリ7と、フレーム
メモリ7が記憶した参照画像に動き補償をする動き補償
装置8と、フレームメモリ7が記憶した画像に対してポ
ストフィルタリングをすることにより、画枠変換をする
画枠変換装置9とを備えている。
サイン変換がされたマクロブロック内の8×8個の係数
が示されたDCTブロックに対して、図33で示したよ
うな、低域の4×4の係数のみに逆離散コサイン変換を
行う。すなわち、水平方向及び垂直方向の低域の4点の
離散コサイン係数に基づき縮小逆離散コサイン変換を行
う。この縮小逆離散コサイン変換装置5では、以上のよ
うな縮小逆離散コサイン変換を行うことにより、1つの
DCTブロックが4×4の画素から構成される標準解像
度画像を復号することができる。
ックは、全てフレームDCTモードにより離散コサイン
変換がされている。そのため、この復号された画像デー
タの各画素は、図3に示すように、各画素の垂直方向の
位相が1/4、5/4、9/4、13/4となる。すな
わち、下位レイヤーの先頭画素(位相が1/4の画素)
の位相が上位レイヤーの先頭から1番目と2番目の画素
(位相が0と1の画素)の中間位相となり、下位レイヤ
ーの先頭から2番目の画素(位相が5/4の画素)の位
相が上位レイヤーの先頭から3番目と4番目の画素(位
相が2と3の画素)の中間位相となり、下位レイヤーの
先頭から3番目の画素(位相が9/4の画素)の位相が
上位レイヤーの先頭から5番目と6番目の画素(位相が
4と5の画素)の中間位相となり、下位レイヤーの先頭
から4番目の画素(位相が13/4の画素)の位相が上
位レイヤーの先頭から7番目と8番目の画素(位相が6
と7の画素)の中間位相となる。
置5により縮小逆離散コサイン変換されたマクロブロッ
クがイントラ画像の場合には、そのイントラ画像をその
ままフレームメモリ7に格納する。また、加算装置6
は、縮小逆離散コサイン変換装置5により縮小逆離散コ
サイン変換されたマクロブロックがインター画像である
場合には、そのインター画像に、動き補償装置8により
動き補償がされた参照画像を合成して、フレームメモリ
7に格納する。
憶されている標準解像度画像の参照画像に対して、1/
4画素精度で補間処理を行い、動き補償をする。この動
き補償装置8により動き補償がされた参照画像は、加算
装置6に供給され、インター画像に合成される。
明するように、高解像度画像の1/2画素精度の動き補
償に対応するように、フレームメモリ7に記憶されてい
る標準解像度画像の画素を補間して、1/4画素精度の
画素を生成する。
間フィルタを用いて、フレームメモリ7に記憶された整
数精度の画素から1/2画素精度の画素を生成する。動
き補償装置8は、例えば、ハーフバンドフィルタを用い
て、1/2画素精度の画素を生成する。続いて、線形補
間フィルタを用いて、2倍補間フィルタを用いて生成し
た1/2画素精度の画素から1/4画素精度の画素を生
成する。動き補償装置8では、ハーフバンドフィルタの
ような2倍補間フィルタを用いることで、タップ数に応
じた積和演算を行うことなく、フレームメモリ7に記憶
した標準解像度画像の画素と同位相の画素を高解像度画
像に対応した参照画像として出力することができる。そ
のため、この動き補償装置8では、高速な処理を行うこ
とができる。また、この動き補償装置8では、以上の処
理を1つの行列を用いて演算してもよく、また、4倍補
間フィルタを用いて整数精度の画素から1/4精度の画
素を生成しても良い。
(a)に示すように、各画素の垂直方向の位相が1/
4、5/4、9/4、13/4となるような標準解像度
画像の整数精度の画素を、フレームメモリ7から取り出
す。
(b)に示すように、ハーフバンドフィルタのような2
倍補間フィルタを用いて、フレームメモリ7から取り出
した整数精度の画素から1/2画素精度の画素を生成す
る。例えば、この図4(b)に示すように、垂直方向の
位相が11/4の位置にある画素は、・・・5/4,9
/4,13/4,17/4・・・の位置にある画素から
2倍補間をされて生成される。
(c)に示すように、線形補間フィルタを用いて、2倍
補間フィルタを用いて生成した1/2画素精度の画素か
ら1/4画素精度の画素を生成する。例えば、この図4
(c)に示すように、垂直方向の位相が4の位置にある
画素は、7/2,9/2の位置にある画素から線形補間
をされて生成される。また、垂直方向の位相が5の位置
にある画素は、9/2,11/2の位置にある画素から
線形補間をされて生成される。
り動き補償装置8では、ハーフバンドフィルタのような
2倍補間フィルタを用いることで、タップ数に応じた積
和演算を行うことなく、フレームメモリ7に記憶した標
準解像度画像の画素と同位相の画素を高解像度画像に対
応した参照画像として出力することができる。そのた
め、この動き補償装置8では、高速な処理を行うことが
できる。また、動き補償装置8では、以上の処理を1つ
の行列を用いて演算してもよく、また、4倍補間フィル
タを用いて整数精度の画素から1/4精度の画素を生成
しても良い。
置を内部に設けて、フィルタリングのタップ数を決定し
てもよい。
画像のビットストリームの中のマクロブロックに関する
情報に基づき、動き補償装置8がフィルタリングをする
際のタップ数を決定する。
に縮小する場合、出力する標準解像度画像の画質と、フ
ィルタリングを行う際のタップ数とは、トレードオフの
関係が成り立つ。すなわち、フィルタリングのタップ数
を増やすことにより出力する標準解像度画像の画質は向
上するが、フィルタリングのタップ数を増やすことによ
り演算量が増加する。つまり、演算能力の低い動き補償
装置8を用いている場合には、フィルタリングのタップ
数を増やして画質を向上させると、リアルタイムに動作
しなくなる可能性が生じる。反対に、フィルタリングの
タップ数を減らしてリアルタイム性を確保している場合
には、画質が劣化する。
クに関する情報に基づき動き補償装置8のタップ数を切
り換え、出力する標準解像度画像の画質を向上させると
ともにリアルタイム性も確保している。
のタップ数の決定処理について説明する。フィルタ決定
装置は、例えば、ビットストリーム解析装置11により
解析された入力されたビットストリーム中の情報を基
に、フィルタのタップ数を決定する。
は、例えば、次の6通りの情報及びこれらの組み合わせ
となる。
るか、色差信号であるかによりフィルタのタップ数を決
定する。この理由は、以下の通りである。
きく影響する。また、デジタルテレビジョン放送で用い
られる420フォーマットにおいては、輝度信号は色差
信号の4倍の情報を持つ。さらに、MPEG2では、輝
度信号を用いて検出された動きベクトルが、色差信号に
も用いられる。このため、輝度信号のための動き補償に
は多くのタップ数を用いたフィルタリングを施し、色差
信号のための動き補償には線形補間、若しくはそれに近
い少ないタップ数によるフィルタリングを施すことで、
見た目の画質を落とすことなく演算量を減らすことが可
能である。
に属するものであるか、Bピクチャに属するものである
かによりフィルタのタップ数を決定する。この理由は、
以下の通りである。
数の低域のみを復号する装置においては、動き補償に起
因する誤差の蓄積による画質の劣化が生じる。Pピクチ
ャにおける誤差は、次のPピクチャ及びBピクチャに影
響を及ぼす。しかしながら、Bピクチャにおける誤差
は、伝搬しない。このため、Pピクチャに属する画素の
動き補償には多くのタップ数を用いたフィルタリングを
施し、Bピクチャに属する画素の動き補償には線形補
間、若しくはそれに近い、少ないタップ数によるフィル
タリングを施すことで、画質を落とすことなく演算量を
減らすことが可能である。
ドが、前方向予測モード/後方向予測モードであるか、
或いは、双方向予測モードであるかによりフィルタのタ
ップ数を決定する。この理由は、以下の通りである。
測モード若しくは後方向予測モードの場合の動き補償に
は多くのタップ数を用いたフィルタリングを施し、双方
向予測モードの場合の動き補償には線形補間、若しく
は、それに近い、少ないタップ数によるフィルタリング
を施すことで、画質を落とすことなく演算量を減らすこ
とが可能である。
ロックの動きベクトルの値がどのような値であるかによ
りフィルタのタップ数を決定する。この理由は、以下の
通りである。
値により1/2画素精度の位相に相当する画素値を出力
する場合に比べて、1/4画素精度の位相に相当する画
素値を出力する場合の方が、少ないタップ数で補間を行
っても画質劣化が目立ちにくい。そのため、動きベクト
ルの値に応じてフィルタのタップ数を切り換えること
で、画質を落とすことなく演算量を減らすことが可能で
ある。
直方向の補間処理であるかによりフィルタのタップ数を
決定する。この理由は、以下の通りである。
タップ数の減少による画質の劣化は、水平方向よりも垂
直方向により顕著である。そのため、垂直方向に対する
動き補償には多くのタップ数を用いたフィルタリングを
施し、水平方向に対する動き補償には線形補間、若しく
はそれに近い、少ないタップ数によるフィルタリングを
施すことで、画質を落とすことなく演算量を減らすこと
が可能である。
動き補償モードであるか、フレーム動き補償モードであ
るかによりフィルタのタップ数を決定する。この理由
は、以下の通りである。
ールド間の差分の大きいマクロブロックに対してはフィ
ールド動き補償モードで処理が施され、小さいマクロブ
ロックに対してはフレーム動き補償モードで処理が施さ
れる。そのため、フィールド動き補償モードに多くのタ
ップ数を割り当て、フレーム動き補償モードに少ないタ
ップ数を割り当てることで画質を落とすことなく演算量
を減らすことが可能である。
憶した標準解像度の参照画像或いは加算装置6が合成し
た画像が供給され、この画像をポストフィルタリングに
より、画枠を標準解像度のテレビジョンの規格に合致す
るように変換する。すなわち、画枠変換装置9は、高解
像度のテレビジョン規格の画枠を、1/4に縮小して標
準解像度のテレビジョン規格の画枠に変換する。
は、以上のような構成を有することにより、高解像度画
像をMPEG2で画像圧縮したプログレッシブ画像のビ
ットストリームを、復号するとともに解像度を1/2に
縮小して、標準解像度画像を出力することができる。
部3について説明する。
は、図5に示すように、ビットストリーム解析装置11
からのインタレース画像のビットストリームが供給さ
れ、データの発生頻度に応じた符号長を割り当てる可変
長符号化がされた上記ビットストリームを復号する可変
長符号復号装置12と、DCTブロックの各係数に量子
化ステップを掛ける逆量子化装置13と、フィールドD
CTモードで離散コサイン変換がされたDCTブロック
に対して縮小逆離散コサイン変換をして標準解像度画像
を生成するフィールドモード用縮小逆離散コサイン変換
装置14と、フレームDCTモードで離散コサイン変換
がされたDCTブロックに対して縮小逆離散コサイン変
換をして標準解像度画像を生成するフレームモード用縮
小逆離散コサイン変換装置15と、縮小逆離散コサイン
変換がされた標準解像度画像と動き補償がされた参照画
像とを加算する加算装置16と、参照画像を一時記憶す
るフレームメモリ17と、フレームメモリ17が記憶し
た参照画像にフィールド動き予測モードに対応した動き
補償をするフィールドモード用動き補償装置18と、フ
レームメモリ17が記憶した参照画像にフレーム動き予
測モードに対応した動き補償をするフレームモード用動
き補償装置19と、フレームメモリ17が記憶した画像
に対してポストフィルタリングをすることにより、画枠
変換をするとともに画素の位相ずれを補正してテレビジ
ョンモニタ等に表示するための標準解像度の画像データ
を出力する画枠変換・位相ずれ補正装置20とを備えて
いる。
換装置14は、入力されたビットストリームのマクロブ
ロックが、フィールドDCTモードで離散コサイン変換
されている場合に用いられる。フィールドモード用縮小
逆離散コサイン変換装置14は、フィールドDCTモー
ドで離散コサイン変換がされたマクロブロック内の8×
8個の係数が示されたDCTブロックに対して、図33
で示したような、低域の4×4の係数のみに逆離散コサ
イン変換を行う。すなわち、水平方向及び垂直方向の低
域の4点の離散コサイン係数に基づき縮小逆離散コサイ
ン変換を行う。このフィールドモード用縮小逆離散コサ
イン変換装置14では、以上のような縮小逆離散コサイ
ン変換を行うことにより、1つのDCTブロックが4×
4の画素から構成される標準解像度画像を復号すること
ができる。この復号された画像データの各画素の位相
は、図3に示すように、トップフィールドの各画素の垂
直方向の位相が1/2、5/2・・・となり、ボトムフ
ィールドの各画素の垂直方向の位相が1、3・・・とな
る。すなわち、復号された下位レイヤーのトップフィー
ルドでは、先頭画素(位相が1/2の画素)の位相が上
位レイヤーのトップフィールドの先頭から1番目と2番
目の画素(位相が0と2の画素)の中間位相となり、先
頭から2番目の画素(位相が5/2の画素)の位相が上
位レイヤーのトップフィールドの先頭から3番目と4番
目の画素(位相が4と6の画素)の中間位相となる。ま
た、復号された下位レイヤーのボトムフィールドでは、
先頭画素(位相が1の画素)の位相が上位レイヤーのボ
トムフィールドの先頭から1番目と2番目の画素(位相
が1と3の画素)の中間位相となり、先頭から2番目の
画素(位相が3の画素)の位相が上位レイヤーのボトム
フィールドの先頭から3番目と4番目の画素(位相が5
と7の画素)の中間位相となる。
装置15は、入力されたビットストリームのマクロブロ
ックが、フレームDCTモードで離散コサイン変換され
ている場合に用いられる。フレームモード用縮小逆離散
コサイン変換装置15は、フレームDCTモードで離散
コサイン変換がされたマクロブロック内の8×8個の係
数が示されたDCTブロックに対して、縮小逆離散コサ
イン変換を行う。そして、フレームモード用縮小逆離散
コサイン変換装置15では、1つのDCTブロックが4
×4の画素から構成される解像度画像を復号するととも
に、フィールドモード用縮小逆離散コサイン変換装置1
4で生成した標準解像度画像の画素の位相と同位相の画
像を生成する。すなわち、フレームモード用縮小逆離散
コサイン変換装置15で復号された画像データの各画素
の位相は、図6に示すように、トップフィールドの各画
素の垂直方向の位相が1/2、5/2・・・となり、ボ
トムフィールドの各画素の垂直方向の位相が1、3・・
・となる。
サイン変換装置15の処理については、その詳細を後述
する。
逆離散コサイン変換装置14又はフレームモード用縮小
逆離散コサイン変換装置15により縮小逆離散コサイン
変換されたマクロブロックがイントラ画像の場合には、
そのイントラ画像をそのままフレームメモリ17に格納
する。また、加算装置16は、フィールドモード用縮小
逆離散コサイン変換装置14又はフレームモード用縮小
逆離散コサイン変換装置15により縮小逆離散コサイン
変換されたマクロブロックがインター画像である場合に
は、そのインター画像に、フィールドモード用動き補償
装置18或いはフレームモード用動き補償装置19によ
り動き補償がされた参照画像を合成して、フレームメモ
リ17に格納する。
マクロブロックの動き予測モードがフィールド動き予測
モードの場合に用いられる。フィールドモード用動き補
償装置18は、フレームメモリ17に記憶されている標
準解像度画像の参照画像に対して、トップフィールドと
ボトムフィールドとの間の位相ずれ成分を考慮した形で
1/4画素精度で補間処理を行い、フィールド動き予測
モードに対応した動き補償をする。このフィールドモー
ド用動き補償装置18により動き補償がされた参照画像
は、加算装置16に供給され、インター画像に合成され
る。
クロブロックの動き予測モードがフレーム動き予測モー
ドの場合に用いられる。フレームモード用動き補償装置
19は、フレームメモリ17に記憶されている標準解像
度画像の参照画像に対して、トップフィールドとボトム
フィールドとの間の位相ずれ成分を考慮した形で1/4
画素精度で補間処理を行い、フレーム動き予測モードに
対応した動き補償をする。このフレームモード用動き補
償装置19により動き補償がされた参照画像は、加算装
置16に供給され、インター画像に合成される。
ームメモリ17が記憶した標準解像度の参照画像或いは
加算装置16が合成した画像が供給され、この画像をポ
ストフィルタリングにより、トップフィールドとボトム
フィールドとの間の位相ずれ成分を補正するとともに画
枠を標準解像度のテレビジョンの規格に合致するように
変換する。すなわち、画枠変換・位相ずれ補正装置20
は、トップフィールドの各画素の垂直方向の位相が1/
2、5/2・・・となり、ボトムフィールドの各画素の
垂直方向の位相が1、3・・・となる標準解像度画像
を、例えば、トップフィールドの各画素の垂直方向の位
相が0、2、4・・・となり、ボトムフィールドの各画
素の垂直方向の位相が1、3、5・・・となるように補
正する。また、画枠変換・位相ずれ補正装置20は、高
解像度のテレビジョン規格の画枠を、1/4に縮小して
標準解像度のテレビジョン規格の画枠に変換する。
は、以上のような構成を有することにより、高解像度画
像をMPEG2で画像圧縮したビットストリームを、復
号するとともに解像度を1/2に縮小して、標準解像度
画像を出力することができる。
コサイン変換装置15の処理内容について、さらに詳細
に説明する。
サイン変換装置15では、以下に説明する1ブロック処
理及び2ブロック処理のいずれか或いは両者の処理を行
うことができる。フレームモード用縮小逆離散コサイン
変換装置15は、必要に応じて、1ブロック処理又は2
ブロック処理を切り換えて用いても良いし、或いは、い
ずれか一方の処理のみを行っても良い。
図7に、1ブロック処理の内容を説明するための図を示
す。
装置15には、図7に示すように、高解像度画像を圧縮
符号化したビットストリームが、1つのDCTブロック
単位で入力される。
DCTブロックの離散コサイン係数y(DCTブロック
の全ての離散コサイン係数のうち垂直方向の係数をy1
〜y8として図中に示す。)に対して、8×8の逆離散
コサイン変換(IDCT8×8)を行う。逆離散コサイ
ン変換をすることにより、8×8の復号された画素デー
タx(DCTブロックの全ての画素データのうち垂直方
向の画素データをx1〜x8として図中に示す。)を得る
ことができる。
8の画素データxを、垂直方向に1ライン毎交互に取り
出して、飛び越し走査に対応した4×4のトップフィー
ルドの画素ブロックと、飛び越し走査に対応した4×4
のボトムフィールドの画素ブロックの2つの画素ブロッ
クに分離する。すなわち、垂直方向に1ライン目の画素
データx1と、3ライン目の画素データx3と、5ライン
目の画素データx5と、7ライン目の画素データx7とを
取り出して、トップフィールドに対応した画素ブロック
を生成する。また、垂直方向に2ライン目の画素データ
x2と、4ライン目の画素データx4と、6ライン目の画
素データx6と、8ライン目の画素データx8とを取り出
して、ボトムフィールドに対応した画素ブロックを生成
する。なお、DCTブロックの各画素を飛び越し走査に
対応した2つの画素ブロックに分離する処理を、以下フ
ィールド分離という。
ド分離した2つの画素ブロックそれぞれに対して4×4
の離散コサイン変換(DCT4×4)をする。
離散コサイン変換をして得られたトップフィールドに対
応する画素ブロックの離散コサイン係数z(トップフィ
ールドに対応する画素ブロックの全ての係数のうち垂直
方向の離散コサイン係数をz1,z3,z5,z7として図
中に示す。)の高域成分を間引き、2×2の離散コサイ
ン係数から構成される画素ブロックとする。また、4×
4の離散コサイン変換をして得られたボトムフィールド
に対応する画素ブロックの離散コサイン係数z(ボトム
フィールドに対応する画素ブロックの全ての係数のうち
垂直方向の離散コサイン係数をz2,z4,z6,z8とし
て図中に示す。)の高域成分を間引き、2×2の離散コ
サイン係数から構成される画素ブロックとする。
の離散コサイン係数を間引いた画素ブロックに対して、
2×2の逆離散コサイン変換(IDCT2×2)を行
う。2×2の逆離散コサイン変換をすることにより、2
×2の復号された画素データx′(トップフィールドの
画素ブロックの全ての画素データのうち垂直方向の画素
データをx′1,x′3として図中に示し、また、ボトム
フィールドに対応する画素ブロックの全ての画素データ
のうち垂直方向の画素データをx′2,x′4として図中
に示す。)を得ることができる。
ィールドに対応する画素ブロックの画素データと、ボト
ムフィールドに対応する画素ブロックの画素データと
を、垂直方向に1ラインずつ交互に合成して、4×4の
画素データから構成される縮小逆離散コサイン変換をし
たDCTブロックを生成する。なお、トップフィールド
とボトムフィールドに対応した2つの画素ブロックの各
画素を垂直方向に交互に合成する処理を、以下フレーム
合成という。
た1ブロック処理を行うことにより、フレームモード用
縮小逆離散コサイン変換装15では、図6で示したよう
な、フィールドモード用縮小逆離散コサイン変換装置1
4で生成した標準解像度画像の画素の位相と同位相の画
素から構成される4×4のDCTブロックを生成するこ
とができる。
ン変換装置15では、以上のステップS1からステップ
S6までの1ブロック処理を1つの行列を用いて演算す
る。具体的には、フレームモード用縮小逆離散コサイン
変換装置15では、以上の処理を加法定理を用いて展開
計算することにより得られる以下の式1に示す行列[F
S′]と、1つのDCTブロックの離散コサイン係数y
(y1〜y8)とを行列演算することにより、縮小逆離散
コサイン変換したDCTブロックの画素データx′
(x′1〜x′4)を得ることができる。
下の通りである。
る。図8に、2ブロック処理の内容を説明するための図
を示す。
装置15には、図8に示すように、高解像度画像を圧縮
符号化したビットストリームが、2つのDCTブロック
単位で入力される。例えば、マクロブロックが4つの輝
度成分のDCTブロックと2つの色差成分のDCTブロ
ックとから構成されるいわゆる420フォーマットから
なる場合には、垂直方向に隣接した2つの輝度成分
(Y)のDCTブロックが入力される。マクロブロック
が図9に示すように構成されている場合には、輝度成分
(Y)のDCTブロック0とDCTブロック2とが対と
なって入力され、また、DCTブロック1とDCTブロ
ック3とが対となって入力される。
CTブロックの離散コサイン係数y(時間的に前のDC
Tブロックの全ての離散コサイン係数のうち垂直方向の
係数をy1〜y8として図中に示し、時間的に後のDCT
ブロックの全ての離散コサイン係数のうち垂直方向の係
数をy9〜y16として図中に示す。)に対して、それぞ
れ独立に8×8の逆離散コサイン変換(IDCT8×
8)を行う。逆離散コサイン変換をすることにより、8
×8の復号された画素データx(時間的に前のDCTブ
ロックの全ての画素データのうち垂直方向の画素データ
をx1〜x8として図中に示し、時間的に後のDCTブロ
ックの全ての画素データのうち垂直方向の画素データを
x9〜x16として図中に示す。)を得ることができる。
DCTブロックの8×8の画素データxを、垂直方向に
1ライン毎交互に取り出して、飛び越し走査に対応した
トップフィールドの8×8の画素ブロックと、飛び越し
走査に対応したボトムフィールドの8×8の画素ブロッ
クの2つの画素ブロックにフィールド分離する。すなわ
ち、時間的に前のDCTブロックから、垂直方向に1ラ
イン目の画素データx1と、3ライン目の画素データx3
と、5ライン目の画素データx5と、7ライン目の画素
データx7とを取り出し、時間的に後のDCTブロック
から、垂直方向に1ライン目の画素データx9と、3ラ
イン目の画素データx11と、5ライン目の画素データx
13と、7ライン目の画素データx15とを取り出して、ト
ップフィールドに対応した8×8の画素ブロックを生成
する。また、時間的に前のDCTブロックから、垂直方
向に2ライン目の画素データx2と、4ライン目の画素
データx4と、6ライン目の画素データx6と、8ライン
目の画素データx8とを取り出し、時間的に後のDCT
ブロックから、垂直方向に2ライン目の画素データx10
と、4ライン目の画素データx12と、6ライン目の画素
データx14と、8ライン目の画素データx16とを取り出
して、ボトムフィールドに対応した画素ブロックを生成
する。
ルド分離した2つの8×8の画素ブロックそれぞれに対
して8×8の離散コサイン変換(DCT8×8)をす
る。
の離散コサイン変換をして得られたトップフィールドに
対応する画素ブロックの離散コサイン係数z(トップフ
ィールドに対応する画素ブロックの全ての係数のうち垂
直方向の離散コサイン係数をz1,z3,z5,z7,
z9,z11,z13,z15として図中に示す。)の高域成
分を間引いて、4×4の離散コサイン係数から構成され
る画素ブロックとする。また、8×8の離散コサイン変
換をして得られたボトムフィールドに対応する画素ブロ
ックの離散コサイン係数z(ボトムフィールドに対応す
る画素ブロックの全ての係数のうち垂直方向の離散コサ
イン係数をz2,z4,z6,z8,z10,z12,z14,z
16として図中に示す。)の高域成分を間引き、4×4の
離散コサイン係数から構成される画素ブロックとする。
分の離散コサイン係数を間引いた4×4の画素ブロック
それぞれに対して、4×4の逆離散コサイン変換(ID
CT4×4)を行う。4×4の逆離散コサイン変換をす
ることにより、4×4の復号された画素データx′(ト
ップフィールドに対応する画素ブロックの全ての画素デ
ータのうち垂直方向の画素データをx′1,x′3,x′
5,x′7として図中に示し、また、ボトムフィールドに
対応する画素ブロックの全ての画素データのうち垂直方
向の画素データをx′2,x′4,x′6,x′8として図
中に示す。)を得ることができる。
フィールドに対応する画素ブロックの画素データと、ボ
トムフィールドに対応する画素ブロックの画素データと
を、垂直方向に1ラインずつ交互にフレーム合成して、
8×8の画素データから構成される縮小逆離散コサイン
変換をしたDCTブロックを生成する。
示した2ブロック処理を行うことにより、フレームモー
ド用縮小逆離散コサイン変換装15では、図6で示した
ような、フィールドモード用縮小逆離散コサイン変換装
置14で生成した標準解像度画像の画素の位相と同位相
の画素から構成されるDCTブロックを生成することが
できる。
ン変換装置15では、以上のステップS11〜ステップ
S16までの2ブロック処理を1つの行列を用いて演算
する。具体的には、フレームモード用縮小逆離散コサイ
ン変換装置15では、以上の処理を加法定理を用いて展
開計算することにより得られる以下の式(2)に示す行
列[FS′′]と、2つのDCTブロックの離散コサイ
ン係数y(y1〜y16)とを行列演算して、縮小逆離散
コサイン変換したDCTブロックの画素データx′
(x′1〜x′8)を得ることができる。
以下の通りである。
以下の通りである。
サイン変換装置15では、図9で示したいわゆる420
フォーマットのマクロブロックが入力された場合には、
輝度成分に対しては上記ステップS11〜ステップS1
6に示した2ブロック処理を行って縮小逆離散コサイン
変換を行い、色差成分に対しては、上記ステップS1〜
ステップS6に示した1ブロック処理を行って縮小逆離
散コサイン変換を行っても良い。
復号部3では、フィールドDCTモードでは、トップフ
ィールドとボトムフィールドとのそれぞれに4×4の縮
小逆離散コサイン変換を行い標準解像度画像を復号し、
フレームDCTモードでは、フレーム分離をして縮小逆
離散コサイン変換を行い標準解像度画像を復号する。こ
のインターレース画像対応画像復号部3では、このよう
にフィールドDCTモードとフレームDCTモードとで
異なる処理を行うため、飛び越し走査画像が有するイン
タレース性を損なうことなく、かつ、フィールドDCT
モードとフレームDCTモードとで復号した画像の位相
を同一とすることができ、出力する画像の画質を劣化さ
せない。
号部3では、フィールドモード用縮小逆離散コサイン変
換装置14の4×4の縮小逆離散コサイン変換処理、及
び、フレームモード用縮小逆離散コサイン変換装置15
の上記ステップS1〜ステップS6による1ブロック処
理による縮小逆離散コサイン変換処理を、高速アルゴリ
ズムを用いて処理してもよい。
献:Zhong DE Wang.,"Fast Algorithms for the Discre
te W Transform and for the Discrete Fourier Transf
orm",IEEE Tr.ASSP-32,NO.4,pp.803-816, Aug.1984)を
用いることにより、処理を高速化することができる。
換装置14が演算をする行列を、Wangのアルゴリズ
ムを用いて分解すると、以下の式(3)に示すように分
解される。
離散コサイン変換装置14の処理にWangのアルゴリ
ズムを適用した場合の処理フローを示す。この処理フロ
ーに示すように、第1から第5の乗算器14a〜14e
及び第1から第9の加算器14f〜14nを用いて、高
速化を実現することができる。
装置15が演算をする行列[FS′]を、Wangのア
ルゴリズムを用いて分解すると、以下の式(4)に示す
ように分解される。
以下の通りである。
散コサイン変換装置15の処理にWangのアルゴリズ
ムを適用した場合の処理フローを示す。この処理フロー
に示すように、第1から第10の乗算器15a〜15j
及び第1から第13の加算器15k〜15wを用いて、
高速化を実現することができる。
の形態の画像復号装置1では、インタレース画像が入力
された場合にはインターレース画像対応画像復号部3に
より、フレームDCTモードにより離散コサイン変換が
されたDCTブロックの全周波数成分の係数に対して逆
離散コサイン変換をして飛び越し走査に対応した2つの
画素ブロックに分離し、分離した2つの画素ブロックに
対してそれぞれ離散コサイン変換をして低周波成分の係
数に対して逆離散コサイン変換をし、逆離散コサイン変
換をした2つの画素ブロックを合成する。また、本発明
を適用した第1の実施の形態の画像復号装置1では、プ
ログレッシブ画像が入力された場合にはプログレッシブ
画像対応画像復号部2により、離散コサイン変換ブロッ
クの各係数のうち低周波成分の係数に対して逆離散コサ
イン変換をする。
実施の形態の画像復号装置1では、飛び越し走査画像が
有するインタレース性を損なうことなくフィールドDC
TモードとフレームDCTモードとによる画素の位相ず
れをなくすことができるとともに、順次走査画像の画質
を向上させることができる。
像対応画像復号部2とインターレース画像対応画像復号
部3は、互いに処理内容が同一の構成要素を有する。例
えば、可変長復号装置3と可変長復号装置12、逆量子
化装置4と逆量子化装置13、加算装置6と加算装置1
6、フレームメモリ7とフレームメモリ17は、その処
理内容が同一である。そのため、これらをプログレッシ
ブ画像対応画像復号部2とインターレース画像対応画像
復号部3とで共用する構成としても良い。
2の実施の形態の画像復号装置について説明する。な
お、この第2の実施の形態の画像復号装置の説明にあた
り、上記第1の実施の形態の画像復号装置1と同一の構
成要素については図面中に同一の符号を付け、その詳細
な説明を省略する。また、この第2の実施の形態の画像
復号装置は、上記第1の実施の形態の画像復号装置1の
インターレース画像対応画像復号部3を変形した構成で
あるため、この変形したインターレース画像対応画像復
号部のみ詳細に説明する。
の形態の画像復号装置30は、ビットストリーム解析装
置11と、プログレッシブ画像対応画像復号部2と、イ
ンターレース画像対応画像復号部3aとを備え、垂直方
向の有効ライン数が例えば1152本の高解像度画像を
MPEG2で画像圧縮したビットストリームが入力さ
れ、この入力されたビットストリームを復号するととも
に1/2の解像度に縮小して、垂直方向の有効ライン数
が例えば576本の標準解像度画像を出力する装置であ
る。
応画像復号部3aは、ビットストリーム解析装置11か
ら入力されたビットストリームが供給され、データの発
生頻度に応じた符号長を割り当てる可変長符号化がされ
た上記ビットストリームを復号する可変長符号復号装置
12と、DCTブロックの各係数に量子化ステップを掛
ける逆量子化装置13と、フィールドDCTモードで離
散コサイン変換がされたDCTブロックに対して縮小逆
離散コサイン変換をして標準解像度画像を生成するフィ
ールドモード用位相補正縮小逆離散コサイン変換装置3
1と、フレームDCTモードで離散コサイン変換がされ
たDCTブロックに対して縮小逆離散コサイン変換をし
て標準解像度画像を生成するフレームモード用位相補正
縮小逆離散コサイン変換装置32と、縮小逆離散コサイ
ン変換がされた標準解像度画像と動き補償がされた参照
画像とを加算する加算装置16と、参照画像を一時記憶
するフレームメモリ17と、フレームメモリ17が記憶
した参照画像にフィールド動き予測モードに対応した動
き補償をするフィールドモード用動き補償装置18と、
フレームメモリ17が記憶した参照画像にフレーム動き
予測モードに対応した動き補償をするフレームモード用
動き補償装置19と、フレームメモリ17に記憶した画
像に対して、画枠変換をしてモニタ等に表示するための
標準解像度の画像データを出力する画枠変換装置33と
を備えている。
サイン変換装置31は、入力されたビットストリームの
マクロブロックが、フィールドDCTモードで離散コサ
イン変換されている場合に用いられる。フィールドモー
ド用位相補正縮小逆離散コサイン変換装置31は、フィ
ールドDCTモードで離散コサイン変換がされたマクロ
ブロック内の8×8個の係数が示されたDCTブロック
の全ての係数のうち4×8の係数のみに対して、トップ
フィールドとボトムフィールドの垂直方向の画素の位相
ずれを補正した逆離散コサイン変換を行う。すなわち、
水平方向に対して低域の4点の離散コサイン係数に基づ
き逆離散コサイン変換を行い、垂直方向に対して8点の
離散コサイン係数に基づき位相ずれを補正した逆離散コ
サイン変換を行う。具体的には、トップフィールドの垂
直方向の各画素に対しては、1/4画素分の位相補正を
行い、ボトムフィールドの垂直方向の各画素に対して
は、3/4画素分の位相補正を行う。そして、以上のよ
うな縮小逆離散コサイン変換を行うことにより、図13
に示すような、トップフィールドの各画素の垂直方向の
位相が1/4、9/4・・・となり、ボトムフィールド
の各画素の垂直方向の位相が5/4、13/4・・・と
なる標準解像度画像(下位レイヤー)を生成する。
イン変換装置32は、入力されたビットストリームのマ
クロブロックが、フレームDCTモードで離散コサイン
変換されている場合に用いられる。フレームモード用位
相補正縮小逆離散コサイン変換装置32は、フレームD
CTモードで離散コサイン変換がされたマクロブロック
内の8×8個の係数が示されたDCTブロックに対し
て、詳細を後述する1ブロック処理或いは2ブロック処
理により、トップフィールドとボトムフィールドの垂直
方向の画素の位相ずれを補正した縮小逆離散コサイン変
換を行う。そして、フィールドモード用位相補正縮小逆
離散コサイン変換装置31で生成した標準解像度画像の
画素の位相と同位相の画像を生成する。すなわち、1ブ
ロック処理或いは2ブロック処理で縮小逆離散コサイン
変換を行うことにより、図13に示すような、トップフ
ィールドの各画素の垂直方向の位相が1/4、9/4・
・・となり、ボトムフィールドの各画素の垂直方向の位
相が5/4、13/4・・・となる標準解像度画像(下
位レイヤー)を生成する。
マクロブロックの動き予測モードがフィールド動き予測
モードの場合に用いられる。フィールドモード用動き補
償装置18は、フレームメモリ17に記憶されている標
準解像度画像の参照画像に対して、1/4画素精度で補
間処理を行い、フィールド動き予測モードに対応した動
き補償をする。このフィールドモード用動き補償装置1
8により動き補償がされた参照画像は、加算装置16に
供給され、インター画像に合成される。
クロブロックの動き予測モードがフレーム動き予測モー
ドの場合に用いられる。フレームモード用動き補償装置
19は、フレームメモリ17に記憶されている標準解像
度画像の参照画像に対して、1/4画素精度で補間処理
を行い、フレーム動き予測モードに対応した動き補償を
する。このフレームモード用動き補償装置19により動
き補償がされた参照画像は、加算装置16に供給され、
インター画像に合成される。
が記憶した標準解像度の参照画像が供給され、この参照
画像をポストフィルタリングにより、画枠を標準解像度
のテレビジョンの規格に合致するように変換する。すな
わち、画枠変換装置33は、高解像度のテレビジョン規
格の画枠を、1/4に縮小した標準解像度のテレビジョ
ン規格の画枠に変換する。なお、この画枠変換装置33
は、フレームメモリ17に格納されている画像がトップ
フィールドとボトムフィールドとの間に位相ずれが生じ
ていないので、上述した第1の実施の形態の画枠変換・
位相ずれ補正装置20と異なり、画素の位相ずれの補正
は行わなくて良い。
は、以上のような構成を有することにより、高解像度画
像をMPEG2で画像圧縮したビットストリームを、復
号するとともに1/2の解像度に縮小して、標準解像度
画像を出力することができる。
縮小逆離散コサイン変換装置31の処理内容について、
さらに詳細に説明する。
サイン変換装置31には、図14に示すように、高解像
度画像を圧縮符号化したビットストリームが、1つのD
CTブロック単位で入力される。
のDCTブロックの離散コサイン係数y(DCTブロッ
クの全ての離散コサイン係数のうち垂直方向の係数をy
1〜y8として図中に示す。)に対して、8×8の逆離散
コサイン変換(IDCT8×8)を行う。逆離散コサイ
ン変換をすることにより、8×8の復号された画素デー
タx(DCTブロックの全ての画素データのうち垂直方
向の画素データをx1〜x8として図中に示す。)を得る
ことができる。
×8の画素データを、4×8の位相補正フィルタ行列に
よりDCTブロック内で閉じた変換を行い、位相補正し
た画素データx′(全ての画素データのうち垂直方向の
画素データをx′1,x′2,x′3,x′4として図中に
示す。)を得る。
処理を行うことにより、フィールドモード用位相補正縮
小逆離散コサイン変換装置31では、トップフィールド
とボトムフィールドとの間で、画素の位相ずれがない画
像を生成することができる。
離散コサイン変換装置31では、図15に示すように、
以上の処理を1つの行列(4×8位相補正IDCT行
列)を用いて演算してもよい。
縮小逆離散コサイン変換装置31により演算が行われる
4×8位相補正IDCT行列の設計手順を図16に示
し、この4×8位相補正IDCT行列について説明す
る。この4×8位相補正IDCT行列は、プロトタイプ
フィルタをポリフェーズ分解して作成される。
(a)に示すような周波数特性の高解像度画像を、図1
7(b)に示すような信号帯域がローパスフィルタによ
り半分とされた周波数特性の1/2の解像度の標準解像
度画像に、ダウンデコードする。そのため、プロトタイ
プフィルタに求められる周波数特性は、標準解像度画像
の1/4位相の画素値を得ることができるように、図1
7(c)に示すような4倍のオーバーサンプリングを行
った周波数特性となる。
ト周波数以下を等間隔に{(N−1)/2}分割し、そ
の周波数サンプルからゲインリストを作成する。例え
ば、図18に示すように、ナイキスト周波数以下の周波
数を等間隔に(57−1)/2=28分割して、29個
のゲインリストを作成する。
サンプリング法により、57個のインパルス応答を作成
する。すなわち、29個のゲインリストを逆離散フーリ
エ変換して、57個のFIRフィルタのインパルス応答
を作成する。この57個のインパルス応答を図19に示
す。
ンパルス応答に窓関数をかけて、57タップのフィルタ
係数c1〜c57を作成する。
がプロトタイプフィルタとなる。
のフィルタ係数c1〜c57を有するプロトタイプフィ
ルタをポリフェーズ分解して、1/4位相補正特性を有
する14個のフィルタ係数c′1〜c′14のみを取り
出し、ポリフェーズフィルタを作成する。
0に示すように、入力信号をN倍にオーバーサンプリン
グし、オーバーサンプリングして得られた信号からN画
素間隔で画素を抜き出すポリフェーズ分解を行い、入力
信号と1/N位相のずれをもった信号を出力するフィル
タである。例えば、入力信号に対して1/4位相ずれた
信号を得るためには、図21に示すように、入力信号を
4倍にオーバサンプリングして、この信号から1/4位
相ずれた信号を取り出せばよい。
イプフィルタc1〜c57から作成された14個のフィ
ルタ係数c′1〜c′14は、例えば、以下の式(5)
で示すような係数となる。
た後、トップフィールド用の4×8位相補正IDCT行
列と、ボトムフィールド用の4×8位相補正IDCT行
列とで、設計処理が分割する。
正IDCT行列を作成する場合には、ステップS35に
おいて、フィルタ係数が1/4位相補正特性となるよう
に、ポリフェーズ分解された14個のフィルタ係数c′
1〜c′14から、群遅延が1/4、9/4、17/
4、25/4位相となる8個の係数を取り出し、4×8
位相補正フィルタ行列を作成する。このように作成され
た4×8位相補正フィルタを、図22に示す。
係数c′1〜c′14から、以下の式(6)で示すよう
な係数が取り出される。
タ行列を求めると、以下の式(7)で示すような行列と
なる。
ルタ行列を正規化すると、以下の式(8)に示すような
行列となる。
のIDCT行列と、この4×8位相補正フィルタ行列と
を掛け合わせ、トップフィールド用の4×8位相補正I
DCT行列を作成する。
す4×8の位相補正フィルタとを掛け合わせた4×8位
相補正IDCT行列は、以下の式(9)に示すような行
列となる。
正IDCT行列を作成する場合には、ステップS37に
おいて、フィルタ係数が3/4位相補正特性となるよう
に、ポリフェイズ分解された14個のフィルタ係数c′
1〜c′14を、左右反転させる。
転させた14個のフィルタ係数c′1〜c′14から、
群遅延が3/4、11/4、19/4、27/4位相と
なる8個の係数を取り出し、4×8位相補正フィルタ行
列を作成する。
のIDCT行列と、この4×8位相補正フィルタ行列と
を掛け合わせ、ボトムフィールド用の4×8位相補正I
DCT行列を作成する。
9の各処理を行うことによって、フィールドモード用位
相補正縮小逆離散コサイン変換装置31が演算を行う4
×8位相補正IDCT行列を作成することができる。
正縮小逆離散コサイン変換装置31では、この4×8位
相補正IDCT行列と、入力されたフィールドDCTモ
ードで離散コサイン変換がされたDCTブロックの係数
とを行列演算することにより、トップフィールドとボト
ムフィールドとの間の位相ずれがない、標準解像度の画
像を復号することができる。すなわち、このフィールド
モード用位相補正縮小逆離散コサイン変換装置31で
は、図13に示すような、トップフィールドの各画素の
垂直方向の位相が1/4、9/4・・・となり、ボトム
フィールドの各画素の垂直方向の位相が5/4、13/
4・・・となる標準解像度画像(下位レイヤー)を生成
することができる。
小逆離散コサイン変換装置32の処理内容について、さ
らに詳細に説明する。
散コサイン変換装置32では、以下に説明する1ブロッ
ク処理及び2ブロック処理のいずれか或いは両者の処理
を行うことができる。必要に応じて、1ブロック処理又
は2ブロック処理を切り換えて用いても良いし、或い
は、いずれか一方の処理のみを行っても良い。
図23に、1ブロック処理の内容を説明するための図を
示す。
イン変換装置32には、図23に示すように、高解像度
画像を圧縮符号化したビットストリームが、1つのDC
Tブロック単位で入力される。
のDCTブロックの離散コサイン係数yに対して、8×
8の逆離散コサイン変換を行う。続いて、ステップS4
2において、この8×8の画素データをフィールド分離
する。続いて、ステップS43において、フィールド分
離した2つの画素ブロックそれぞれに対して4×4の離
散コサイン変換をする。続いて、ステップS44におい
て、各画素ブロックの離散コサイン係数zの高域成分を
間引き、2×2の離散コサイン係数から構成される画素
ブロックとする。以上のステップS41からステップS
44までの処理は、図7に示す1ブロック処理における
ステップS1からステップS4までの処理と同一であ
る。
フィールドに対応する画素ブロックに対しては、1/4
画素分の位相補正をする2×4位相補正IDCT行列を
用いて、垂直方向の画素の位相ずれを補正した逆離散コ
サイン変換を行う。また、ボトムフィールドに対応する
画素ブロックに対しては、3/4画素分の位相補正をす
る2×4位相補正IDCT行列を用いて、垂直方向の画
素の位相ずれを補正した逆離散コサイン変換を行う。以
上のような縮小逆離散コサイン変換を行うことにより、
2×2の画素データx′(トップフィールドに対応する
画素ブロックの全ての画素データのうち垂直方向の画素
データをx′1,x′3として図中に示し、また、ボトム
フィールドに対応する画素ブロックの全ての画素データ
のうち垂直方向の画素データをx′2,x′4として図中
に示す。)を得ることができる。この画素データx′
は、トップフィールドの各画素の垂直方向の位相が1/
4、9/4となり、ボトムフィールドの各画素の垂直方
向の位相が5/4、13/4となる標準解像度画像(下
位レイヤー)を生成する。なお、この2×4位相補正I
DCT行列の設計方法については詳細を後述する。
フィールドに対応する画素ブロックの画素データとボト
ムフィールドの画像ブロックの画素データとをフレーム
合成する。このステップS46の処理は、図7に示す1
ブロック処理におけるステップS6の処理と同一であ
る。
処理を行うことにより、フレームモード用位相補正縮小
逆離散コサイン変換装置32では、画素間の位相ずれが
ない画像を生成することができる。また、上記フィール
ドモード用位相補正縮小逆離散コサイン変換装置31で
復号した画像と位相ずれが生じない画像を生成すること
ができる。
散コサイン変換装置32では、以上のステップS41か
らステップS46までの処理を1つの行列を用いて演算
してもよい。
離散コサイン変換装置32のステップS45で演算が行
われる2×4位相補正IDCT行列の設計手順を図24
に示し、この2×8位相補正IDCT行列について説明
する。
ト周波数以下を等間隔に{(N−1)/2}分割し、そ
の周波数サンプルからゲインリストを作成する。例え
ば、図25に示すように、ナイキスト周波数以下の周波
数を等間隔に(25−1)/2=12分割して、13個
のゲインリストを作成する。
サンプリング法により、25個のインパルス応答を作成
する。すなわち、13個のゲインリストを逆離散フーリ
エ変換して、25個のFIRフィルタのインパルス応答
を作成する。この25個のインパルス応答を図26に示
す。
ンパルス応答に窓関数をかけて、25タップのフィルタ
係数c1〜c25を作成する。
がプロトタイプフィルタとなる。
のフィルタ係数c1〜c25を有するプロトタイプフィ
ルタをポリフェーズ分解して、1/4位相補正特性を有
する6個のフィルタ係数c′1〜c′6のみを取り出
し、ポリフェーズフィルタを作成する。
イプフィルタc1〜c25から作成された14個のフィ
ルタ係数c′1〜c′6は、例えば、以下の式(10)
で示すような係数となる。
た後、トップフィールド用の2×4位相補正IDCT行
列と、ボトムフィールド用の2×4位相補正IDCT行
列とで、設計処理が分割する。
正IDCT行列を作成する場合には、ステップS55に
おいて、ポリフェーズ分解された6個のフィルタ係数
c′1〜c′6から、群遅延が1/4、9/4位相とな
るように、それぞれ2個の係数を取り出し、2×4位相
補正フィルタ行列を作成する。このように作成された2
×4位相補正フィルタを、図27に示す。
係数c′1〜c′6から、以下の式(11)で示すよう
な係数が取り出される。
ルタ行列を求めると、以下の式(12)で示すような行
列となる。
ィルタ行列を正規化すると、以下の式(13)に示すよ
うな行列となる。
のIDCT行列と、この2×4位相補正フィルタ行列と
を掛け合わせ、トップフィールド用の2×4位相補正I
DCT行列を作成する。
示す2×4の位相補正フィルタとを掛け合わせた2×4
位相補正IDCT行列は、以下の式(14)に示すよう
な行列となる。
正IDCT行列を作成する場合には、ステップS57に
おいて、フィルタ係数が3/4位相補正特性となるよう
に、ポリフェイズ分解された6個のフィルタ係数c′1
〜c′6を、左右反転させる。
転させた6個のフィルタ係数c′1〜c′6から、群遅
延が3/4、11/4位相となるように、それぞれ2個
の係数を取り出し、2×4位相補正フィルタ行列を作成
する。
のIDCT行列と、この2×4位相補正フィルタ行列と
を掛け合わせ、ボトムフィールド用の2×4位相補正I
DCT行列を作成する。
59の各処理を行うことによって、フレームモード用位
相補正縮小逆離散コサイン変換装置32が上記ステップ
S45で演算を行う2×4位相補正IDCT行列を作成
することができる。
る。図28に、2ブロック処理の内容を説明するための
図を示す。
イン変換装置32には、図28に示すように、高解像度
画像を圧縮符号化したビットストリームが、2つのDC
Tブロック単位で入力される。例えば、マクロブロック
が4つの輝度成分のDCTブロックと2つの色差成分の
DCTブロックとから構成される場合には、垂直方向に
隣接した2つのDCTブロックが入力される。例えば、
マクロブロックが上述した図9に示すように構成されて
いる場合には、輝度成分(Y)のDCTブロック0とD
CTブロック2とが対となって入力され、また、DCT
ブロック1とDCTブロック3とが対となって入力され
る。
CTブロックの離散コサイン係数yに対して、それぞれ
独立に8×8の逆離散コサイン変換を行う。逆離散コサ
イン変換をすることにより、8×8の復号された画素デ
ータxを得ることができる。続いて、ステップS62に
おいて、2つの8×8の画素データをフィールド分離す
る。続いて、ステップS63において、フィールド分離
した2つの8×8の画素ブロックそれぞれに対して8×
8の離散コサイン変換をする。続いて、ステップS64
において、8×8の離散コサイン変換をして得られたト
ップフィールドに対応する画素ブロックの離散コサイン
係数zの高域成分を間引いて、4×4の離散コサイン係
数から構成される画素ブロックとする。また、8×8の
離散コサイン変換をして得られたボトムフィールドに対
応する画素ブロックの離散コサイン係数zの高域成分を
間引き、4×4の離散コサイン係数から構成される画素
ブロックとする。
までの処理は、図8に示す2ブロック処理におけるステ
ップS11からステップS14までの処理と同一であ
る。
フィールドの画素ブロックに対しては、1/4画素分の
位相補正をする4×8位相補正IDCT行列を用いて、
垂直方向の画素の位相ずれを補正した逆離散コサイン変
換を行う。また、ボトムフィールドの画素ブロックに対
しては、3/4画素分の位相補正をする4×8位相補正
IDCT行列を用いて、垂直方向の画素の位相ずれを補
正した逆離散コサイン変換を行う。以上のような縮小逆
離散コサイン変換を行うことにより、4×4の画素デー
タx′(トップフィールドに対応する画素ブロックの全
ての画素データのうち垂直方向の画素データをx′1,
x′3,x′5,x′7として図中に示し、また、ボトム
フィールドに対応する画素ブロックの全ての画素データ
のうち垂直方向の画素データをx′2,x′4,x′6,
x′8として図中に示す。)を得ることができる。この
画素データx′は、トップフィールドの各画素の垂直方
向の位相が1/4、9/4・・・となり、ボトムフィー
ルドの各画素の垂直方向の位相が5/4、13/4・・
・となる標準解像度画像(下位レイヤー)を生成する。
なお、この4×8位相補正IDCT行列の設計方法は、
上述したフィールドモード用位相補正縮小逆離散コサイ
ン変換装置31で演算される行列と同一である。
フィールドに対応する画素ブロックの画素データと、ボ
トムフィールドに対応する画素ブロックの画素データと
を、垂直方向に1ラインずつ交互にフレーム合成して、
8×8の画素データから構成される縮小逆離散コサイン
変換をしたDCTブロックを生成する。
2ブロック処理を行うことにより、フレームモード用位
相補正縮小逆離散コサイン変換装置32では、画素間の
位相ずれがない画像を生成することができる。また、上
記フィールドモード用位相補正縮小逆離散コサイン変換
装置31で復号した画像と位相ずれが生じない画像を生
成することができる。
散コサイン変換装置32では、以上のステップS61か
らステップS66までの処理を1つの行列を用いて演算
してもよい。
画像復号装置30では、インタレース画像が入力された
場合には、フィールドDCTモードで、トップフィール
ドとボトムフィールドとのそれぞれに4×4の縮小逆離
散コサイン変換を行うとともに位相補正をして標準解像
度画像を復号し、フレームDCTモードで、フレーム分
離をして縮小逆離散コサイン変換を行うとともに位相補
正をして標準解像度画像を復号する。また、本発明を適
用した第2の実施の形態の画像復号装置30では、プロ
グレッシブ画像が入力された場合にはプログレッシブ画
像対応画像復号部2により、離散コサイン変換ブロック
の各係数のうち低周波成分の係数に対して逆離散コサイ
ン変換をする。
実施の形態の画像復号装置1では、飛び越し走査画像が
有するインタレース性を損なうことなくフィールドDC
TモードとフレームDCTモードとによる画素の位相ず
れをなくすことができるとともに、順次走査画像の画質
を向上させることができる。
画像対応画像復号部2とインターレース画像対応画像復
号部3aは、互いに処理内容が同一の構成要素を有す
る。例えば、可変長復号装置3と可変長復号装置12、
逆量子化装置4と逆量子化装置13、加算装置6と加算
装置16、フレームメモリ7とフレームメモリ17、画
枠変換装置9と画枠変換装置33は、その処理内容が同
一である。そのため、これらをプログレッシブ画像対応
画像復号部2とインターレース画像対応画像復号部3a
とで共用する構成としても良い。
画像復号装置について説明したが、本発明で処理される
データは、MPEG2方式の画像データに限られない。
すなわち、所定の画素ブロック単位で動き予測をするこ
とによる予測符号化、及び、所定の画素ブロック単位で
直交変換することによる圧縮符号化をした第1の解像度
の圧縮画像データであればどのようなデータであっても
よい。例えば、ウェーブレット方式等を用いた圧縮画像
データであってもよい。
信号が符号化された第1の解像度の圧縮画像データが入
力された場合に、フレーム直交変換モードにより直交変
換がされた直交変換ブロックの全周波数成分の係数に対
して逆直交変換をして飛び越し走査に対応した2つの画
素ブロックに分離し、分離した2つの画素ブロックに対
してそれぞれ直交変換をして低周波成分の係数に対して
逆直交変換をし、逆直交変換をした2つの画素ブロック
を合成する。また、本発明では、順次走査方式の動画像
信号が符号化された第1の解像度の圧縮画像データが入
力された場合に、上記直交変換ブロックの各係数のうち
低周波成分の係数に対して逆直交変換をする。そして、
本発明では、第1の解像度より低い第2の解像度の動画
像データを出力する。
査画像が有するインタレース性を損なうことなくフィー
ルド直交変換モードとフレーム直交変換モードとによる
画素の位相ずれをなくすことができるとともに、順次走
査画像の画質を向上させることができる。
画像信号が符号化された第1の解像度の圧縮画像データ
が入力された場合に、フィールド直交変換モードにより
直交変換がされた直交変換ブロックの各係数のうち低周
波成分の係数に対して逆直交変換をし、逆直交変換をし
て得られたトップフィールドの各画素の垂直方向に対し
て1/4画素分の位相補正をし、逆直交変換をして得ら
れたボトムフィールドの各画素の垂直方向に対して3/
4画素分の位相補正をし、フレーム直交変換モードによ
り直交変換がされた直交変換ブロックの全周波数成分の
係数に対して逆直交変換をし、逆直交変換をした直交変
換ブロックを飛び越し走査に対応した2つの画素ブロッ
クに分離し、分離した2つの画素ブロックに対してそれ
ぞれ直交変換をし、直交変換をした2つの画素ブロック
の各係数のうち低周波成分の係数に対して逆直交変換を
し、逆直交変換をして得られたトップフィールドの各画
素の垂直方向に対して1/4画素分の位相補正をし、逆
直交変換をして得られたボトムフィールドの各画素の垂
直方向に対して3/4画素分の位相補正をし、位相補正
をしたトップフィールドとボトムフィールドとを合成す
る。また、本発明では、順次走査方式の動画像信号が符
号化された第1の解像度の圧縮画像データが入力された
場合に、上記直交変換ブロックの各係数のうち低周波成
分の係数に対して逆直交変換をする。そして、本発明で
は、第1の解像度より低い第2の解像度の動画像データ
を出力する。
な演算量及び記憶容量を少なくすることができるととも
に、飛び越し走査画像が有するインタレース性を損なう
ことなく、出力する第2の解像度の動画像データの画素
の位相ずれをなくすことができる。すなわち、出力した
動画像データをフィルタ処理することなく、表示するこ
とができる。また、第2の解像度の動画像データの画質
を向上させることができる。
ロック図である。
像復号部のブロック図である。
ームメモリに格納される参照画像の垂直方向の位相を説
明する為の図である。
装置における補間処理を説明するための図である。
像復号部のブロック図である。
ームメモリに格納される参照画像の垂直方向の画素の位
相を説明するための図である。
ームモード用縮小逆離散コサイン変換装置の1ブロック
処理の内容を説明するための図である。
ームモード用縮小逆離散コサイン変換装置の2ブロック
処理の内容を説明するための図である。
成分及び色差成分のDCTブロックについて説明をする
図である。
ス画像対応画像復号部のフィールドモード用縮小逆離散
コサイン変換装置の処理に適用した場合の演算フローを
示す図である。
ス画像対応画像復号部のフレームモード用縮小逆離散コ
サイン変換装置の1ブロック処理に適用した場合の演算
フローを示す図である。
ブロック図である。
ターレース画像対応画像復号部のフレームメモリに格納
される参照画像の垂直方向の画素の位相を説明するため
の図である。
ィールドモード用位相補正縮小逆離散コサイン変換装置
の処理内容を説明するための図である。
ールドモード用位相補正縮小逆離散コサイン変換装置の
処理内容を説明するための図である。
コサイン変換装置により演算が行われる4×8位相補正
IDCT行列の設計手順を説明するためのフローチャー
トである。
要となるプロトタイプフィルタの周波数特性を説明する
ための図である。
1)/2}分割し、その周波数サンプルから作成された
ゲインのリストを説明するための図である。
作成されたインパルス応答を説明するための図である。
ある。
力するポリフェイズフィルタを説明するための図であ
る。
コサイン変換装置により演算が行われる4×8位相補正
IDCT行列を説明するための図である。
レームモード用位相補正縮小逆離散コサイン変換装置の
1ブロック処理の内容を説明するための図である。
ン変換装置により演算が行われる2×4位相補正IDC
T行列の設計手順を説明するためのフローチャートであ
る。
1)/2}分割し、その周波数サンプルから作成された
ゲインのリストを説明するための図である。
作成されたインパルス応答を説明するための図である。
サイン変換装置により演算が行われる2×4位相補正I
DCT行列を説明するための図である。
レームモード用位相補正縮小逆離散コサイン変換装置の
2ブロック処理の内容を説明するための図である。
図である。
図である。
図である。
モードにおける縮小逆離散コサイン変換処理を説明する
ための図である。
モードにおける縮小逆離散コサイン変換処理を説明する
ための図である。
測モードにおける線形補間処理を説明するための図であ
る。
モードにおける線形補間処理を説明するための図であ
る。
モードの結果得られる画素の位相を説明するための図で
ある。
ードの結果得られる画素の位相を説明するための図であ
る。
画像復号部、3 インターレース画像対応画像復号部
Claims (4)
- 【請求項1】 所定の画素ブロック(マクロブロック)
単位で動き予測をすることによる予測符号化、及び、所
定の画素ブロック(直交変換ブロック)単位で直交変換
をすることによる圧縮符号化をした第1の解像度の圧縮
画像データから、上記第1の解像度より低い第2の解像
度の動画像データを復号する画像復号装置において、 飛び越し走査に対応した直交変換方式(フィールド直交
変換モード)により直交変換がされた上記圧縮画像デー
タの直交変換ブロックに対して、逆直交変換をする第1
の逆直交変換手段と、順次走査に対応した直交変換方式
(フレーム直交変換モード)により直交変換がされた上
記圧縮画像データの直交変換ブロックに対して、逆直交
変換をする第2の逆直交変換手段と、上記第1の逆直交
変換手段又は上記第2の逆直交変換手段により逆直交変
換がされた圧縮画像データと動き補償がされた参照画像
データとを加算して、第2の解像度の動画像データを出
力する加算手段と、上記加算手段から出力される動画像
データを参照画像データとして記憶する記憶手段と、上
記記憶手段が記憶している参照画像データのマクロブロ
ックに対して動き補償をする動き補償手段とを備え、上
記第1の逆直交変換手段は、上記直交変換ブロックの各
係数のうち低周波成分の係数に対して逆直交変換をし、
上記第2の逆直交変換手段は、上記直交変換ブロックの
全周波数成分の係数に対して逆直交変換をし、逆直交変
換をした直交変換ブロックの各画素を飛び越し走査に対
応した2つの画素ブロックに分離し、分離した2つの画
素ブロックに対してそれぞれ直交変換をし、直交変換を
した2つの画素ブロックの各係数のうち低周波成分の係
数に対して逆直交変換をし、逆直交変換をした2つの画
素ブロックを合成して直交変換ブロックを生成する第1
の画像復号部と、 フレーム直交変換モードにより直交変換がされた上記圧
縮画像データの直交変換ブロックに対して、逆直交変換
をする第3の逆直交変換手段と、上記第3の逆直交変換
手段により逆直交変換がされた圧縮画像データと動き補
償がされた参照画像データとを加算して、第2の解像度
の動画像データを出力する加算手段と、上記加算手段か
ら出力される動画像データを参照画像データとして記憶
する記憶手段と、上記記憶手段が記憶している参照画像
データのマクロブロックに対して動き補償をする動き補
償手段とを備え、上記第1の逆直交変換手段は、上記直
交変換ブロックの各係数のうち低周波成分の係数に対し
て逆直交変換をする第2の画像復号部とを有し、 飛び越し走査方式の動画像信号が符号化された第1の解
像度の圧縮画像データが入力された場合には、上記第1
の画像復号部により第2の解像度の動画像データを復号
し、順次走査方式の動画像信号が符号化された第1の解
像度の圧縮画像データが入力された場合には、上記第2
の画像復号部により第2の解像度の動画像データを復号
することを特徴とする画像復号装置。 - 【請求項2】 所定の画素ブロック(マクロブロック)
単位で動き予測をすることによる予測符号化、及び、所
定の画素ブロック(直交変換ブロック)単位で直交変換
をすることによる圧縮符号化をした第1の解像度の圧縮
画像データから、上記第1の解像度より低い第2の解像
度の動画像データを復号する画像復号装置において、 飛び越し走査に対応した直交変換方式(フィールド直交
変換モード)により直交変換がされた上記圧縮画像デー
タの直交変換ブロックに対して、逆直交変換をする第1
の逆直交変換手段と、順次走査に対応した直交変換方式
(フレーム直交変換モード)により直交変換がされた上
記圧縮画像データの直交変換ブロックに対して、逆直交
変換をする第2の逆直交変換手段と、上記第1の逆直交
変換手段又は上記第2の逆直交変換手段により逆直交変
換がされた圧縮画像データと動き補償がされた参照画像
データとを加算して、第2の解像度の動画像データを出
力する加算手段と、上記加算手段から出力される動画像
データを参照画像データとして記憶する記憶手段と、上
記記憶手段が記憶している参照画像データのマクロブロ
ックに対して動き補償をする動き補償手段とを備え、上
記第1の逆直交変換手段は、上記直交変換ブロックの各
係数のうち低周波成分の係数に対して逆直交変換をし、
逆直交変換をして得られたトップフィールドの各画素の
垂直方向に対して1/4画素分の位相補正をし、逆直交
変換をして得られたボトムフィールドの各画素の垂直方
向に対して3/4画素分の位相補正をし、上記第2の逆
直交変換手段は、上記直交変換ブロックの全周波数成分
の係数に対して逆直交変換をし、逆直交変換をした直交
変換ブロックを飛び越し走査に対応した2つの画素ブロ
ックに分離し、分離した2つの画素ブロックに対してそ
れぞれ直交変換をし、直交変換をした2つの画素ブロッ
クの各係数のうち低周波成分の係数に対して逆直交変換
をし、逆直交変換をして得られたトップフィールドの各
画素の垂直方向に対して1/4画素分の位相補正をし、
逆直交変換をして得られたボトムフィールドの各画素の
垂直方向に対して3/4画素分の位相補正をし、位相補
正をしたトップフィールドとボトムフィールドとを合成
する第1の画像復号部と、 フレーム直交変換モードにより直交変換がされた上記圧
縮画像データの直交変換ブロックに対して、逆直交変換
をする第3の逆直交変換手段と、上記第3の逆直交変換
手段により逆直交変換がされた圧縮画像データと動き補
償がされた参照画像データとを加算して、第2の解像度
の動画像データを出力する加算手段と、上記加算手段か
ら出力される動画像データを参照画像データとして記憶
する記憶手段と、上記記憶手段が記憶している参照画像
データのマクロブロックに対して動き補償をする動き補
償手段とを備え、上記第1の逆直交変換手段は、上記直
交変換ブロックの各係数のうち低周波成分の係数に対し
て逆直交変換をする第2の画像復号部とを有し、 飛び越し走査方式の動画像信号が符号化された第1の解
像度の圧縮画像データが入力された場合には、上記第1
の画像復号部により第2の解像度の動画像データを復号
し、順次走査方式の動画像信号が符号化された第1の解
像度の圧縮画像データが入力された場合には、上記第2
の画像復号部により第2の解像度の動画像データを復号
することを特徴とする画像復号装置。 - 【請求項3】 所定の画素ブロック(マクロブロック)
単位で動き予測をすることによる予測符号化、及び、所
定の画素ブロック(直交変換ブロック)単位で直交変換
をすることによる圧縮符号化をした第1の解像度の圧縮
画像データから、上記第1の解像度より低い第2の解像
度の動画像データを復号する画像復号方法において、 飛び越し走査方式の動画像信号が符号化された第1の解
像度の圧縮画像データが入力された場合には、 飛び越し走査に対応した直交変換方式(フィールド直交
変換モード)により直交変換がされた上記圧縮画像デー
タの直交変換ブロックに対して、逆直交変換をし、 順次走査に対応した直交変換方式(フレーム直交変換モ
ード)により直交変換がされた上記圧縮画像データの直
交変換ブロックに対して、逆直交変換をし、 逆直交変換がされた圧縮画像データと動き補償がされた
参照画像データとを加算し、 加算して得られた動画像データを参照画像データとして
記憶し、 記憶している参照画像データのマクロブロックに対して
動き補償をし、 フィールド直交変換モードにより直交変換がされた上記
直交変換ブロックの各係数のうち低周波成分の係数に対
して逆直交変換をし、 フレーム直交変換モードにより直交変換がされた上記直
交変換ブロックの全周波数成分の係数に対して逆直交変
換をし、逆直交変換をした直交変換ブロックの各画素を
飛び越し走査に対応した2つの画素ブロックに分離し、
分離した2つの画素ブロックに対してそれぞれ直交変換
をし、直交変換をした2つの画素ブロックの各係数のう
ち低周波成分の係数に対して逆直交変換をし、逆直交変
換をした2つの画素ブロックを合成して直交変換ブロッ
クを生成し、 順次走査方式の動画像信号が符号化された第1の解像度
の圧縮画像データが入力された場合には、 フレーム直交変換モードにより直交変換がされた上記圧
縮画像データの直交変換ブロックに対して、逆直交変換
をし、 逆直交変換がされた圧縮画像データと動き補償がされた
参照画像データとを加算し、 加算して得られた動画像データを参照画像データとして
記憶し、 記憶している参照画像データのマクロブロックに対して
動き補償をし、 上記直交変換ブロックの各係数のうち低周波成分の係数
に対して逆直交変換をすることを特徴とする画像復号方
法。 - 【請求項4】 所定の画素ブロック(マクロブロック)
単位で動き予測をすることによる予測符号化、及び、所
定の画素ブロック(直交変換ブロック)単位で直交変換
をすることによる圧縮符号化をした第1の解像度の圧縮
画像データから、上記第1の解像度より低い第2の解像
度の動画像データを復号する画像復号方法において、 飛び越し走査方式の動画像信号が符号化された第1の解
像度の圧縮画像データが入力された場合には、 飛び越し走査に対応した直交変換方式(フィールド直交
変換モード)により直交変換がされた上記圧縮画像デー
タの直交変換ブロックに対して、逆直交変換をし、 順次走査に対応した直交変換方式(フレーム直交変換モ
ード)により直交変換がされた上記圧縮画像データの直
交変換ブロックに対して、逆直交変換をし、 逆直交変換がされた圧縮画像データと動き補償がされた
参照画像データとを加算し、 加算して得られた動画像データを参照画像データとして
記憶し、 記憶している参照画像データのマクロブロックに対して
動き補償をし、 フィールド直交変換モードにより直交変換がされた直交
変換ブロックの各係数のうち低周波成分の係数に対して
逆直交変換をし、逆直交変換をして得られたトップフィ
ールドの各画素の垂直方向に対して1/4画素分の位相
補正をし、逆直交変換をして得られたボトムフィールド
の各画素の垂直方向に対して3/4画素分の位相補正を
し、 フレーム直交変換モードにより直交変換ブロックの全周
波数成分の係数に対して逆直交変換をし、逆直交変換を
した直交変換ブロックを飛び越し走査に対応した2つの
画素ブロックに分離し、分離した2つの画素ブロックに
対してそれぞれ直交変換をし、直交変換をした2つの画
素ブロックの各係数のうち低周波成分の係数に対して逆
直交変換をし、逆直交変換をして得られたトップフィー
ルドの各画素の垂直方向に対して1/4画素分の位相補
正をし、逆直交変換をして得られたボトムフィールドの
各画素の垂直方向に対して3/4画素分の位相補正を
し、位相補正をしたトップフィールドとボトムフィール
ドとを合成し、 順次走査方式の動画像信号が符号化された第1の解像度
の圧縮画像データが入力された場合には、 フレーム直交変換モードにより直交変換がされた上記圧
縮画像データの直交変換ブロックに対して、逆直交変換
をし、 逆直交変換がされた圧縮画像データと動き補償がされた
参照画像データとを加算し、 加算して得られた動画像データを参照画像データとして
記憶し、 記憶している参照画像データのマクロブロックに対して
動き補償をし、 上記直交変換ブロックの各係数のうち低周波成分の係数
に対して逆直交変換をすることを特徴とする画像復号方
法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP22488598A JP2000059793A (ja) | 1998-08-07 | 1998-08-07 | 画像復号装置及び画像復号方法 |
US09/369,001 US6748018B2 (en) | 1998-08-07 | 1999-08-05 | Picture decoding method and apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP22488598A JP2000059793A (ja) | 1998-08-07 | 1998-08-07 | 画像復号装置及び画像復号方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2000059793A true JP2000059793A (ja) | 2000-02-25 |
JP2000059793A5 JP2000059793A5 (ja) | 2005-09-08 |
Family
ID=16820699
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP22488598A Pending JP2000059793A (ja) | 1998-08-07 | 1998-08-07 | 画像復号装置及び画像復号方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US6748018B2 (ja) |
JP (1) | JP2000059793A (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004147335A (ja) * | 2002-10-25 | 2004-05-20 | Humax Co Ltd | 映像イメージサイズ変換方法及び映像イメージサイズ変換装置 |
US6839384B2 (en) | 2000-11-13 | 2005-01-04 | Nec Corporation | Method and apparatus for decoding compressed video signals |
US6907077B2 (en) | 2000-09-28 | 2005-06-14 | Nec Corporation | Variable resolution decoder |
US7180948B2 (en) | 2001-04-05 | 2007-02-20 | Nec Corporation | Image decoder and image decoding method having a frame mode basis and a field mode basis |
Families Citing this family (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001204026A (ja) * | 2000-01-21 | 2001-07-27 | Sony Corp | 画像情報変換装置及び方法 |
JP2001285863A (ja) * | 2000-03-30 | 2001-10-12 | Sony Corp | 画像情報変換装置及び方法 |
US7471834B2 (en) * | 2000-07-24 | 2008-12-30 | Vmark, Inc. | Rapid production of reduced-size images from compressed video streams |
US6847656B1 (en) * | 2000-09-25 | 2005-01-25 | General Instrument Corporation | Statistical remultiplexing with bandwidth allocation among different transcoding channels |
EP1246469A3 (fr) * | 2001-03-27 | 2005-04-13 | Koninklijke Philips Electronics N.V. | Procédé de réduction de format et de décodage similtanés de signaux vidéo codés |
US6931062B2 (en) * | 2001-04-11 | 2005-08-16 | Koninklijke Philips Electronics N.V. | Decoding system and method for proper interpolation for motion compensation |
US20030202575A1 (en) * | 2002-04-03 | 2003-10-30 | Williams Billy Dennis | System and method for digital video frame scanning and streaming |
US7006572B2 (en) * | 2002-05-09 | 2006-02-28 | Mitsubishi Electric Research Labs, Inc. | Method and apparatus for decoding video bitstreams to reduced spatial resolutions |
US7469067B2 (en) * | 2004-07-06 | 2008-12-23 | Magnum Semiconductor, Inc. | Sequential decoding of progressive coded JPEGs |
FR2894422A1 (fr) * | 2005-12-01 | 2007-06-08 | Thomson Licensing Sas | Procede de prediction de donnees mouvement et de texture |
FR2894424A1 (fr) * | 2005-12-05 | 2007-06-08 | Thomson Licensing Sas | Procede de prediction de donnees mouvement et de texture |
FR2894423A1 (fr) * | 2005-12-05 | 2007-06-08 | Thomson Licensing Sas | Procede de prediction de donnees mouvement et de texture |
WO2007081139A1 (en) * | 2006-01-09 | 2007-07-19 | Lg Electronics Inc. | Inter-layer prediction method for video signal |
US9602819B2 (en) * | 2011-01-31 | 2017-03-21 | Apple Inc. | Display quality in a variable resolution video coder/decoder system |
WO2013104713A1 (en) * | 2012-01-13 | 2013-07-18 | Thomson Licensing | Method and device for coding an image block, corresponding method and decoding device |
EP2804375A1 (en) | 2013-02-22 | 2014-11-19 | Thomson Licensing | Coding and decoding methods of a picture block, corresponding devices and data stream |
US9286696B2 (en) * | 2013-04-08 | 2016-03-15 | Broadcom Corporation | Compression within a set of images |
US10554713B2 (en) | 2015-06-19 | 2020-02-04 | Microsoft Technology Licensing, Llc | Low latency application streaming using temporal frame transformation |
US11006095B2 (en) | 2015-07-15 | 2021-05-11 | Fyusion, Inc. | Drone based capture of a multi-view interactive digital media |
US11095869B2 (en) | 2015-09-22 | 2021-08-17 | Fyusion, Inc. | System and method for generating combined embedded multi-view interactive digital media representations |
US10222932B2 (en) | 2015-07-15 | 2019-03-05 | Fyusion, Inc. | Virtual reality environment based manipulation of multilayered multi-view interactive digital media representations |
US10147211B2 (en) * | 2015-07-15 | 2018-12-04 | Fyusion, Inc. | Artificially rendering images using viewpoint interpolation and extrapolation |
US10242474B2 (en) | 2015-07-15 | 2019-03-26 | Fyusion, Inc. | Artificially rendering images using viewpoint interpolation and extrapolation |
US11783864B2 (en) | 2015-09-22 | 2023-10-10 | Fyusion, Inc. | Integration of audio into a multi-view interactive digital media representation |
US11202017B2 (en) | 2016-10-06 | 2021-12-14 | Fyusion, Inc. | Live style transfer on a mobile device |
US10437879B2 (en) | 2017-01-18 | 2019-10-08 | Fyusion, Inc. | Visual search using multi-view interactive digital media representations |
US10313651B2 (en) | 2017-05-22 | 2019-06-04 | Fyusion, Inc. | Snapshots at predefined intervals or angles |
US11069147B2 (en) | 2017-06-26 | 2021-07-20 | Fyusion, Inc. | Modification of multi-view interactive digital media representation |
US10592747B2 (en) | 2018-04-26 | 2020-03-17 | Fyusion, Inc. | Method and apparatus for 3-D auto tagging |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5528299A (en) * | 1990-10-09 | 1996-06-18 | U.S. Philips Corporation | Coding system for digital signals corresponding to television pictures and corresponding decoding system |
US5614952A (en) * | 1994-10-11 | 1997-03-25 | Hitachi America, Ltd. | Digital video decoder for decoding digital high definition and/or digital standard definition television signals |
KR0153671B1 (ko) * | 1995-06-30 | 1998-11-16 | 배순훈 | 고선명 텔레비젼 엔코더의 레이트 콘트롤러 |
US5790686A (en) * | 1995-09-19 | 1998-08-04 | University Of Maryland At College Park | DCT-based motion estimation method |
US5825927A (en) * | 1996-01-16 | 1998-10-20 | Hitachi America, Ltd. | Methods and apparatus for encoding video data in a manner that is well suited for decoding by regular or downconverting decoders |
US6041079A (en) * | 1998-06-30 | 2000-03-21 | Thomson Consumer Electronics, Inc, | Field/frame conversion of DCT domain mixed field/frame mode macroblocks using 1-dimensional DCT/IDCT |
-
1998
- 1998-08-07 JP JP22488598A patent/JP2000059793A/ja active Pending
-
1999
- 1999-08-05 US US09/369,001 patent/US6748018B2/en not_active Expired - Fee Related
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6907077B2 (en) | 2000-09-28 | 2005-06-14 | Nec Corporation | Variable resolution decoder |
US6839384B2 (en) | 2000-11-13 | 2005-01-04 | Nec Corporation | Method and apparatus for decoding compressed video signals |
US7180948B2 (en) | 2001-04-05 | 2007-02-20 | Nec Corporation | Image decoder and image decoding method having a frame mode basis and a field mode basis |
JP2004147335A (ja) * | 2002-10-25 | 2004-05-20 | Humax Co Ltd | 映像イメージサイズ変換方法及び映像イメージサイズ変換装置 |
Also Published As
Publication number | Publication date |
---|---|
US20030185456A1 (en) | 2003-10-02 |
US6748018B2 (en) | 2004-06-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4026238B2 (ja) | 画像復号装置及び画像復号方法 | |
JP2000059793A (ja) | 画像復号装置及び画像復号方法 | |
JP3975629B2 (ja) | 画像復号装置及び画像復号方法 | |
KR100192270B1 (ko) | 에이치디티브이 비데오 디코더 회로 | |
US20030058949A1 (en) | Method and apparatus for improved estimation and compensation in digital video compression and decompression | |
JP2001285863A (ja) | 画像情報変換装置及び方法 | |
JP3937599B2 (ja) | 画像復号装置及び画像復号方法 | |
JPH11243547A (ja) | 動き補償符号化装置及び動き補償符号化方法 | |
JP4051772B2 (ja) | 画像復号装置及び画像復号方法 | |
JP2000041248A (ja) | 画像復号装置及び画像復号方法 | |
JP2000175194A (ja) | 画像復号装置及び画像復号方法 | |
JP4016166B2 (ja) | 画像復号装置及び画像復号方法 | |
JP4051799B2 (ja) | 画像復号装置及び画像復号方法 | |
JP2000059777A (ja) | 画像復号装置及び画像復号方法 | |
JP2000041253A (ja) | 画像復号装置及び画像復号方法 | |
JP2001086508A (ja) | 動画像復号方法及び動画像復号装置 | |
JP4556286B2 (ja) | 動きベクトル変換装置及び方法 | |
JP3937632B2 (ja) | 画像復号装置及び画像復号方法 | |
JP2000041254A (ja) | 画像復号装置及び画像復号方法 | |
JP2001285875A (ja) | 画像情報変換装置及び方法 | |
KR0129214B1 (ko) | 고화질 티브이의 디코더 | |
JP2001016590A (ja) | 画像情報変換装置、画像情報伝達システム及び画像情報変換方法 | |
JP4513856B2 (ja) | ディジタル信号変換方法およびディジタル信号変換装置 | |
JP4605212B2 (ja) | ディジタル信号変換方法およびディジタル信号変換装置 | |
JP2002034041A (ja) | 画像情報変換装置及び方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050315 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050315 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070216 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A132 Effective date: 20070306 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070626 |