JP3443867B2 - 画像信号符号化、復号化方法及び画像信号記録媒体 - Google Patents

画像信号符号化、復号化方法及び画像信号記録媒体

Info

Publication number
JP3443867B2
JP3443867B2 JP08503893A JP8503893A JP3443867B2 JP 3443867 B2 JP3443867 B2 JP 3443867B2 JP 08503893 A JP08503893 A JP 08503893A JP 8503893 A JP8503893 A JP 8503893A JP 3443867 B2 JP3443867 B2 JP 3443867B2
Authority
JP
Japan
Prior art keywords
field
data
prediction
image
circuit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP08503893A
Other languages
English (en)
Other versions
JPH0698314A (ja
Inventor
陽一 矢ヶ崎
潤 米満
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP08503893A priority Critical patent/JP3443867B2/ja
Priority to KR1019930011239A priority patent/KR940000891A/ko
Priority to KR1019930011238A priority patent/KR940006412A/ko
Priority to CA 2097780 priority patent/CA2097780A1/en
Priority to EP19930304967 priority patent/EP0576289A3/en
Priority to CN93109427A priority patent/CN1086070A/zh
Publication of JPH0698314A publication Critical patent/JPH0698314A/ja
Priority to US08/517,992 priority patent/US5574504A/en
Application granted granted Critical
Publication of JP3443867B2 publication Critical patent/JP3443867B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H04N9/8047Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/112Selection of coding mode or of prediction mode according to a given display mode, e.g. for interlaced or progressive display mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/577Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/92Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、光ディスクや磁気テー
プなどの蓄積系動画像メディアを用いた情報記録装置お
よび情報再生装置や、例えば、いわゆるテレビ会議シス
テム、動画電話システム、放送用機器等における情報伝
送装置/受信装置に適用して好適な映像信号の符号化、
復号化方法及び記録媒体に関する。
【0002】
【従来の技術】従来、例えばテレビ会議システム、テレ
ビ電話システムなどのように動画映像でなる映像信号を
遠隔地に伝送するいわゆる映像信号伝送システムにおい
ては、伝送路を効率良く利用するため、映像信号のライ
ン相関やフレーム間相関を利用して映像信号を符号化
し、これにより有意情報の伝送効率を高めるようになさ
れている。
【0003】例えばフレーム内符号化処理では、映像信
号のライン相関を利用して、図14に示すように、時刻
t=t1,t2,t3,・・・おいて動画を構成する各
画像PC1,PC2,PC3,・・・を伝送しようとす
る場合、伝送処理すべき画像データに対し、例えばDC
T処理などの直交変換処理を施して圧縮し、伝送するも
のである。
【0004】またフレーム間符号化処理は、映像信号の
フレーム間相関を利用して順次隣合う画像PC1及びP
C2,PC2及びPC3,・・・間の画素データの差分
でなる画像データPC12,PC23,・・・を求める
ことにより圧縮率を向上させるものである。
【0005】これにより映像信号伝送システムは、画像
PC1,PC2,PC3,・・・をその全ての画像デー
タを伝送する場合と比較して格段的にデータ量が少ない
ディジタルデータに高能率符号化して伝送路に送出し得
るようになされている。
【0006】図15は、画像シーケンスがどのようにフ
レーム内/間符号化をするのかを示した図である。この
図15は、15枚のフレームの周期で符号化の1つの単
位(GOP)となっている。
【0007】ここで、フレーム2は、フレーム内符号化
されるので、Intra−picture(フレーム内
符号化フレーム)(以下、Iピクチャという)と呼ばれ
る。
【0008】また、フレーム5,8,11,14は、基
本的には、前方向からのみ予測可能とされて、フレーム
間符号化されるので、Predicted−pictu
re(前方予測符号化フレーム)(以下、Pピクチャと
いう)と呼ばれる。実際には、時間的に先行する画像
(既に符号化され、ローカルデコードされた画像)が動
き補償された予測画像(差分をとる基準となる画像)と
の差分を符号化する(前方予測符号化)のと、差をとら
ずにそのまま符号化する(イントラ符号化)のと何れか
効率の良い方をマクロブロック単位で選択する。
【0009】また、フレーム0,1,3,4,6,7,
9,10,12,13は、基本的には、前方向と後方向
との両方向から予測可能とされて、フレーム間符号化さ
れるので、Bidirectional−pictur
e(両方向予測符号化フレーム)(以下、Bピクチャと
いう)と呼ばれる。実際には、時間的に先行する画像、
後行する画像、あるいはその両方の画像の動き補償後の
予測画像との差分を符号化するのと、差をとらずにその
まま符号化するのとで、最も効率の良いものをマクロブ
ロック単位に選択する。
【0010】この時の入力順序、符号化する順序、復号
化する順序、および出力(表示)する順序を図16に示
す。
【0011】以上の例は、対象とする画像信号がプログ
レッシブスキャン画像の場合である。
【0012】図17は、以上のようにして、画像信号を
符号化し、さらにこの符号化データを復号するシステム
の全体構成を示している。動画像符号化装置は、入力映
像信号VDを前処理回路51を介して輝度信号及び色差
信号に変換した後、アナログディジタル変換回路52で
8ビツトのディジタル信号に変換し、フレームメモリ群
53に記憶する。フレームメモリ群53から読みだされ
たディジタル輝度信号及び色差信号は、フォーマット変
換回路54に入力される。ここでエンコーダ55への入
力画像データとして順次送出される画像データは、フレ
ーム画像データからブロックフォーマットに変換され
る。
【0013】このブロックフォーマットの画像データは
エンコーダ55に入力され、エンコーダは、画像の高能
率圧縮符号化を行ないビットストリームを生成する。
【0014】このビットストリームは、通信や記録メデ
ィア56を介して、デコーダ57に伝送される。デコー
ダ57は、ビットストリームからブロックフォーマット
データを出力し、フォーマット変換回路58はこのデー
タをフレームフォーマットに変換する。変換されたフレ
ームフォーマットのデータは、一旦、フレームメモリ群
59に記憶された後、ディジタルアナログ変換回路60
を介して、後処理回路61に入力され、最終的に出力画
像となる。
【0015】一枚のフレーム画像データは、図18
(A)に示すようにN個のスライスに分割され、各スラ
イスが図18(B)に示すようにM個のマクロブロツク
を含むようになされ、各マクロブロツクは図18(C)
に示すように8×8画素分の輝度信号データY1 〜Y4
の全画素データに対応する色差信号データでなる色差信
号データCb 及びCrを含んでなる。このときスライス
内の画像データの配列は、マクロブロツク単位で画像デ
ータが連続するようになされており、このマクロブロツ
ク内ではラスタ走査の順で微小ブロツク単位で画像デー
タが連続するようになされている。
【0016】なおここでマクロブロツクは、輝度信号に
対して、水平及び垂直走査方向に連続する16×16画素の
画像データ(Y1乃至Y4)を1つの単位とするのに対
し、これに対応する2つの色差信号においては、データ
量が低減処理された後時間軸多重化処理され、それぞれ
1つの微小ブロツクCr,Cbに16×16画素分のデータが
割り当てられる。
【0017】エンコーダ55では、処理をマクロブロッ
ク単位で行なっている。図19にエンコーダ55の詳細
なブロックダイヤグラムを示す。
【0018】符号化されるべき画像データは、マクロブ
ロック単位で動きベクトル検出回路101を介してフレ
ームメモリ群102に入力されて記憶される。
【0019】動きベクトル検出回路101は、フレーム
メモリ群102に記憶された前方原画像及び/又は後方
原画像を用いて、現在の参照画像との間の動きベクトル
の検出を行なう。ここで、動きベクトルの検出は、ブロ
ック単位でのフレーム間差分の絶対値和が最小になるも
のを、その動きベクトルとする。
【0020】なお、動きベクトル検出回路101は、予
め設定されている所定のシーケンスに従って、各フレー
ムの画像データを、Iピクチャ、Pピクチャ、またはB
ピクチャとして処理する。また、シーケンシャルに入力
される各フレームの画像を、I,P,Bのいずれのピク
チャとして処理するかは、予め定められている(例え
ば、図15に示したように、15のフレームから構成さ
れるグループオブピクチャ(GOP)が、B,B,I,
B,B,P,B,B,P,・・・,B,Pとして処理さ
れる)。
【0021】即ち、動きベクトル検出回路101は、ま
ず次のようにして、予測判定回路103において、画像
内予測、前方予測、後方予測、または両方向予測のいず
れの予測を行なうかを決定するための予測誤差の、例え
ば絶対値和を生成する。
【0022】例えば、画像内予測の予測誤差の絶対値和
として、参照画像のマクロブロックの信号Aijの和ΣA
ijの絶対値|ΣAij|と、マクロブロックの信号Aijの絶
対値|Aij|の和Σ|Aij|の差を求める。また、前方予測
の予測誤差の絶対値和として、参照画像のマクロブロッ
クの信号Aijと、予測画像のマクロブロックの信号Bij
の差Aij−Bijの絶対値|Aij−Bij|の和Σ|Aij−Bi
j|を求める。また、後方予測と両方向予測の予測誤差の
絶対値和も、前方予測における場合と同様に(その予測
画像を前方予測における場合と異なる予測画像に変更し
て)求める。
【0023】これらの絶対値和は、予測判定回路103
に供給される。予測判定回路103は、前方予測、後方
予測および両方向予測の予測誤差の絶対値和のうち、最
も小さいものを、インター予測の予測誤差の絶対値和と
して選択する。さらに、このインター予測の予測誤差の
絶対値和と、画像内予測の予測誤差の絶対値和とを比較
し、その小さい方を選択し、この選択した絶対値和に対
応するモードを予測モードとして選択する。即ち、画像
内予測の予測誤差の絶対値和の方が小さければ、画像内
予測モードが設定される。インター予測の予測誤差の絶
対値和の方が小さければ、前方予測、後方予測または両
方向予測モードのうち、対応する絶対値和が最も小さか
ったモードが設定される。
【0024】このように、動きベクトル検出回路101
は、参照画像のマクロブロックの信号を、4つの予測モ
ードのうち、予測判定回路103により選択された予測
モードに対応する予測画像と参照画像の間の動きベクト
ルを検出し、可変長符号化回路107と動き補償回路1
11に出力する。
【0025】一方、切換回路104は、予測判定回路1
03で選択された予測モードを基に、ブロック単位でス
イッチ104dの切り換えを行う。
【0026】即ち、フレーム内符号化モードの場合、ス
イッチ104dは、接点a側に切り換えられ、入力画像
そのものがデイスクリートコサイン変換(DCT(disc
retecosine transform ))回路105に出力される。
【0027】また、前方/後方/両方向予測モードの場
合、スイッチ104dは、接点b/c/d側に切り換え
られ、符号化する画像から、前方/後方/両方向予測画
像を減算した差分データが、演算器104a/104b
/104cでそれぞれ発生される。そして、この差分デ
ータがDCT回路105に出力されるようになされてい
る。
【0028】DCT回路105は映像信号の2次元相関
を利用して、入力画像データ又は差分データをブロツク
単位でデイスクリートコサイン変換し、その結果得られ
る変換データを量子化回路106に出力するようになさ
れている。
【0029】量子化回路106は、マクロブロックおよ
びスライス毎に定まる量子化ステツプサイズでDCT変
換データを量子化し、その結果出力端に得られる量子化
データを可変長符号化(VLC(variable length cod
e))回路107及び逆量子化回路108に供給する。
量子化に用いる量子化スケールは送信バッファメモリ1
09のバッファ残量をフィードバックすることによっ
て、送信バッファメモリ109が破綻しない値に決定す
る。この量子化スケールも、可変長符号化回路107及
び逆量子化回路108に、量子化データとともに供給さ
れる。
【0030】ここでVLC回路107は、量子化データ
を、量子化スケール、予測モード、動きベクトルと共に
可変長符号化処理し、伝送データとして送信バツフアメ
モリ109に供給する。
【0031】送信バツフアメモリ109は、伝送データ
を一旦メモリに格納した後、所定のタイミングでビット
ストリームとして出力すると共に、メモリに残留してい
る残留データ量に応じてマクロブロック単位の量子化制
御信号を量子化回路106にフイードバツクして量子化
スケールを制御するようになされている。これにより送
信バツフアメモリ109は、ビットストリームとして発
生されるデータ量を調整し、メモリ内に適正な残量(オ
ーバーフロー又はアンダーフローを生じさせないような
データ量)のデータを維持するようになされている。
【0032】因に送信バツフアメモリ109のデータ残
量が許容上限にまで増量すると、送信バツフアメモリ1
09は量子化制御信号によつて量子化回路106の量子
化スケールを大きくすることにより、量子化データのデ
ータ量を低下させる。
【0033】またこれとは逆に送信バツフアメモリ10
9のデータ残量が許容下限値まで減量すると、送信バツ
フアメモリ109は量子化制御信号によつて量子化回路
106の量子化スケールを小さくすることにより、量子
化データのデータ量を増大させる。
【0034】逆量子化回路108は、量子化回路106
から送出される量子化データを代表値に逆量子化して逆
量子化データに変換し、出力データの量子化回路106
における変換前の変換データを復号し、逆量子化データ
をデイスクリートコサイン逆変換IDCT(inverse di
screte cosine trasform)回路110に供給するように
なされている。
【0035】IDCT回路110は、逆量子化回路10
8で復号された逆量子化データをDCT回路105とは
逆の変換処理で画像データに変換し、演算器111aに
出力する。演算器111aでは、IDCT回路110か
らの画像データに、予測モードに基づいて動き補償回路
111から出力される予測画像が加算され、元の画像デ
ータと同様の画像データに復号される。この局所復号さ
れた画像データは、前方予測または後方予測に用いる画
像としてフレームメモリ群112に書き込まれる。フレ
ームメモリ群112では、バンク切り替えが行われ、こ
れにより、符号化する画像に応じて、単一のフレーム
が、後方予測に用いる画像として出力されたり、前方予
測に用いる画像として読み出される。
【0036】動き補償回路111は、フレームメモリ群
112に記憶された、局所復号された画像に対して、予
測モード、動きベクトルをもとに動き補償を施し、予測
画像を生成して切換回路104および演算器111aに
出力する。すなわち、動き補償回路111は、前方/後
方/両方向予測モードのときのみ、フレームメモリ群1
12の読み出しアドレスを、動きベクトル検出回路10
1がいま出力しているマクロブロックの位置に対応する
位置から動きベクトルに対応する分だけずらして、前方
予測または後方予測に用いる画像のデータを読み出し、
予測画像データを生成する。
【0037】前方/後方/両方向予測の場合は、予測画
像からの差分がIDCT回路110の出力として送られ
てくるので、演算器111aは、この差分を、動き補償
回路111からの予測画像に対して足し込むことで、局
所復号を行なっている。この予測画像は、デコーダで復
号される画像と全く同一の画像であり、上述したよう
に、次の処理画像に対して、前方/後方/両方向予測を
行うときに用いる画像としてフレームメモリ群112に
記憶される。
【0038】また画像内予測モードの場合は、画像デー
タそのものがIDCT回路110の出力として送られて
くるので、演算器111aは、この画像データをそのま
まフィールドメモリ群112に出力して記憶させる。
【0039】なお、量子化回路106から逆量子化回路
108には、IおよびPピクチャのデータだけ出力さ
れ、Bピクチャのデータは出力されない。従って、フレ
ームメモリ群112には、IおよびPピクチャのデータ
だけ記憶され、Bピクチャのデータは記憶されない。こ
れは、Bピクチャのデータが、前方/後方/両方向予測
に用いられないからである。
【0040】次に、図20にデコーダ57のブロックダ
イヤグラムを示す。
【0041】デコーダ57には伝送メディアを介してビ
ットストリームが入力される。このビットストリームは
受信バッファ201を介して可変長復号化(IVLC)回路
202に入力される。可変長復号化回路202は、ビッ
トストリームから量子化データと、動きベクトル、予測
モード、量子化スケールを可変長復号する。この量子化
データと量子化スケールは次の逆量子化回路203に入
力される。
【0042】逆量子化回路203は、可変長復号化回路
202からの量子化データを、同じく可変長復号化回路
202からの量子化スケールに基づいて逆量子化し、逆
量子化データ、即ちDCTデータを出力する。IDCT
回路204は、逆量子化回路203からのDCTデータ
に対し、IDCT処理を施して出力する。
【0043】一方、動き補償回路205は、フレームメ
モリ群206に記憶された、既に復号された画像に対し
て、予測モード、動きベクトルをもとに動き補償を施
し、予測画像を生成して演算器205aに出力する。す
なわち、動き補償回路205は、可変長復号化回路20
2からの予測モードが、前方/後方/両方向予測モード
のときのみ、フレームメモリ群206の読み出しアドレ
スを、復号しようとしている画像のブロックの位置に対
応するアドレスから、可変長復号化回路202からの動
きベクトルに対応する分だけずらして、前方予測または
後方予測に用いる画像のデータを読み出し、予測画像デ
ータを生成する(予測画像データとして出力する)。
【0044】前方/後方/両方向予測モードの場合は、
予測画像からの差分がIDCT回路204の出力として
送られてくるので、演算器205aは、この差分を、動
き補償回路205からの予測画像に対して足し込むこと
で復号を行う。この復号された画像データは、以降に、
前方/後方/両方向予測で符号化された画像を復号する
ために用いる画像データとしてフレームメモリ群206
に記憶される。
【0045】また画像内予測モードの場合は、画像デー
タそのものがIDCT回路204の出力として送られて
くるので、演算器205aは、この画像データをそのま
まフィールドメモリ群205に出力し、以降に、前方/
後方/両方向予測で符号化された画像を復号するために
用いる画像データとして記憶させる。
【0046】フレームメモリ群206では、バンク切り
替えが行われ、復号化する画像に応じて、単一のフレー
ムが、後方予測に用いる画像として読み出されたり、前
方予測に用いる画像として読み出されたりする。
【0047】この予測画像は、エンコーダで局所復号さ
れる画像と全く同一の画像であり、次の復号画像はこの
予測画像をもとに、前方/後方/両方向での復号が行な
われる。
【0048】なお、フレームメモリ群206には、Iお
よびPピクチャのデータだけ記憶され、Bピクチャのデ
ータは記憶されない。これは、Bピクチャのデータが、
前方/後方/両方向予測に用いられないからである。
【0049】
【発明が解決しようとする課題】上記した符号化方式
は、プログレッシブスキャン画像についての符号化方式
である。このため、この方式をそのままインターレース
スキャン画像に適用すると、インターレーススキャン構
造に適した予測方式がないので、予測の効率が低く、高
い画質は望めない。
【0050】
【課題を解決するための手段】
【0051】
【0052】
【0053】
【0054】
【0055】
【0056】また、本発明においては、偶数及び奇数の
2つのフィールドで構成された1フレームのインターレ
ーススキャン画像を符号化する画像符号化方法におい
て、所定の偶数フィールドをフィールド内符号化もしく
は前方予測符号化により符号化し、次に所定の偶数フィ
ールドより時間的に前に存在するフレームの偶数フィー
ルドを両方向予測符号化により符号化し、次に所定の偶
数フィールドより時間的に後に存在する所定の奇数フィ
ールドをフィールド内符号化もしくは前方予測符号化に
より符号化し、次に所定の偶数フィールドより時間的に
前に存在するフレームの奇数フィールドを両方向予測符
号化により符号化するようにする。
【0057】
【0058】また本発明においては、偶数及び奇数の2
つのフィールドで構成された1フレームのインターレー
ススキャン画像を符号化する際に、所定の偶数フィール
ドをフィールド内符号化もしくは前方予測符号化により
符号化し、次に所定の偶数フィールドより時間的に前に
存在するフレームの偶数フィールドを両方向予測符号化
により符号化し、次に所定の偶数フィールドより時間的
に後に存在する所定の奇数フィールドをフィールド内符
号化もしくは前方予測符号化により符号化し、所定の偶
数フィールドより時間的に前に存在するフレームの奇数
フィールドを両方向予測符号化により符号化することに
より生成されたデータを復号化する画像信号復号化方法
において、所定の偶数フィールドをフィールド内符号化
もしくは前方予測符号化して生成したデータを復号化
し、次に所定の偶数フィールドより時間的に前に存在す
るフレームの偶数フィールドを両方向予測符号化して生
成したデータを復号化し、次に所定の偶数フィールドよ
り時間的に後に存在する所定の奇数フィールドをフィー
ルド内符号化もしくは前方予測符号化して生成したデー
タを復号化し、次に所定の偶数フィールドより時間的に
前に存在するフレームの奇数フィールドを両方向予測符
号化して生成したデータを復号化するようにする。
【0059】
【作用】従来の符号化方式では、画像の単位がフレーム
であるのを、本発明の符号化方式では、符号化(予測)
を行なう単位が、フィールドとなるためインターレース
画像信号を有効に扱うことができる。
【0060】
【0061】本発明の符号化方式で、符号化器、復号化
器の入力、符号化、復号化、出力の順序を変更すること
により、符号化器、復号化器の予測に用いるメモリを削
減することができる。
【0062】
【実施例】以下、図面を参照し、本発明の実施例につい
て詳細に説明する。
【0063】〔第1実施例〕エンコーダでは、処理をマ
クロブロック単位で行なっている。図1にエンコーダの
ブロックダイヤグラムを示す。
【0064】符号化されるべき画像データは、マクロブ
ロック単位で動きベクトル検出回路1を介してフィール
ドメモリ群2に入力されて記憶される。
【0065】動きベクトル検出回路1は、フィールドメ
モリ群2に記憶された前方原画像及び/又は後方原画像
を用いて、現在の参照画像との間の動きベクトルの検出
を行なう。ここで、動きベクトルの検出は、ブロック単
位でのフィールド間差分の絶対値和が最小になるもの
を、その動きベクトルとする。
【0066】なお、動きベクトル検出回路1は、予め設
定されている所定のシーケンスに従って、各フィールド
の画像データを、Iピクチャ、Pピクチャ、またはBピ
クチャとして処理する。また、シーケンシャルに入力さ
れる各フィールドの画像を、I,P,Bのいずれのピク
チャとして処理するかは、予め定められている(例え
ば、後述する図3に示すように、16のフィールド(8
フレーム)から構成されるグループオブピクチャ(GO
P)が、B,B,I,P,B,B,P,P,B,B,・
・・,P,Pとして処理される)。
【0067】即ち、動きベクトル検出回路1は、まず次
のようにして、予測判定回路3において、画像内予測、
前方予測、後方予測、または両方向予測のいずれの予測
を行なうかを決定するための予測誤差の絶対値和を生成
する。
【0068】例えば、画像内予測の予測誤差の絶対値和
として、参照画像のマクロブロックの信号Aijの和ΣA
ijの絶対値|ΣAij|と、マクロブロックの信号Aijの絶
対値|Aij|の和Σ|Aij|の差を求める。また、前方予測
の予測誤差の絶対値和として、参照画像のマクロブロッ
クの信号Aijと、前方原画像のマクロブロックの信号B
ijの差Aij−Bijの絶対値|Aij−Bij|の和Σ|Aij−
Bij|を求める。また、後方予測と両方向予測の予測誤
差の絶対値和も、前方予測における場合と同様に(但
し、前方原画像を、後方原画像、前方原画像と後方原画
像の、例えば平均値にそれぞれ変更して)求める。
【0069】これらの絶対値和は、予測判定回路3に供
給される。予測判定回路3は、前方予測、後方予測およ
び両方向予測の予測誤差の絶対値和のうち、最も小さい
ものを、インター予測の予測誤差の絶対値和として選択
する。さらに、このインター予測の予測誤差の絶対値和
と、画像内予測の予測誤差の絶対値和とを比較し、その
小さい方を選択し、この選択した絶対値和に対応するモ
ードを予測モードとして選択する。即ち、画像内予測の
予測誤差の絶対値和の方が小さければ、画像内予測モー
ドが設定される。インター予測の予測誤差の絶対値和の
方が小さければ、前方予測、後方予測または両方向予測
モードのうち、対応する絶対値和が最も小さかったモー
ドが設定される。
【0070】このように、動きベクトル検出回路1は、
参照画像のマクロブロックの信号を、4つの予測モード
のうち、予測判定回路3により選択された予測モードに
対応する予測画像と参照画像の間の動きベクトルを検出
し、可変長符号化回路7と動き補償回路11に出力す
る。
【0071】一方、切換回路4は、予測判定回路3で選
択された予測モードを基に、ブロック単位でスイッチ4
dの切り換えを行う。
【0072】即ち、フィールド内(画像内)符号化モー
ドの場合、スイッチ4dは、接点a側に切り換えられ、
入力画像そのものがデイスクリートコサイン変換(DC
T(discrete cosine transform ))回路5に出力され
る。
【0073】また、前方/後方/両方向予測モードの場
合、スイッチ4dは、接点b/c/d側に切り換えら
れ、符号化する画像から、前方/後方/両方向予測画像
を減算した差分データが、演算器4a/4b/4cでそ
れぞれ発生される。そして、この差分データがDCT回
路5に出力される。
【0074】DCT回路5は映像信号の2次元相関を利
用して、入力画像データ又は差分データをブロツク単位
でデイスクリートコサイン変換し、その結果得られるD
CT変換データを量子化回路6に出力するようになされ
ている。
【0075】量子化回路6は、マクロブロックおよびス
ライス毎に定まる量子化ステツプサイズでDCT変換デ
ータを量子化し、その結果出力端に得られる量子化デー
タを可変長符号化(VLC(variable length code))
回路7及び逆量子化回路8に供給する。量子化に用いる
量子化スケールは送信バッファメモリ9のバッファ残量
をフィードバックすることによって、送信バッファメモ
リ9が破綻しない値に決定する。この量子化スケール
も、可変長符号化回路7及び逆量子化回路8に、量子化
データとともに供給される。
【0076】ここでVLC回路7は、量子化データを、
量子化スケール、予測モード、動きベクトルと共に可変
長符号化処理し、伝送データとして送信バツフアメモリ
9に供給する。
【0077】送信バツフアメモリ9は、伝送データを一
旦メモリに格納した後、所定のタイミングでビットスト
リームとして出力すると共に、メモリに残留している残
留データ量に応じてマクロブロック単位の量子化制御信
号を量子化回路6にフイードバツクして量子化スケール
を制御するようになされている。これにより送信バツフ
アメモリ9は、ビットストリームとして発生されるデー
タ量を調整し、メモリ内に適正な残量(オーバーフロー
又はアンダーフローを生じさせないようなデータ量)の
データを維持するようになされている。
【0078】因に送信バツフアメモリ9のデータ残量が
許容上限にまで増量すると、送信バツフアメモリ9は量
子化制御信号によつて量子化回路6の量子化スケールを
大きくすることにより、量子化データのデータ量を低下
させる。
【0079】またこれとは逆に送信バツフアメモリ9の
データ残量が許容下限値まで減量すると、送信バツフア
メモリ9は量子化制御信号によつて量子化回路6の量子
化スケールを小さくすることにより、量子化データのデ
ータ量を増大させる。
【0080】送信バッファメモリ9から出力されたビッ
トストリームは、図11および図12を参照して後述す
るように、符号化されたオーディオ信号、同期信号等と
多重化され、更にエラー訂正用のコードが付加され、所
定の変調が加えられた後、レーザ光を介して光ディスク
等の記録媒体に記録される。
【0081】逆量子化回路8は、量子化回路6から送出
される量子化データを代表値に逆量子化して逆量子化デ
ータに変換し、出力データの量子化回路6における変換
前の変換データを復号し、逆量子化データをデイスクリ
ートコサイン逆変換(IDCT(inverse discrete cos
ine trasform))回路10に供給するようになされてい
る。
【0082】IDCT回路10は、逆量子化回路8で復
号された逆量子化データをDCT回路105とは逆の変
換処理で画像データに変換し、演算器11aに出力す
る。演算器11aでは、IDCT回路10からの画像デ
ータに、予測モードに基づいて動き補償回路11から出
力される予測画像が加算され、元の画像データと同様の
画像データに復号される。この局所復号された復号画像
データは、前方/後方/両方向予測に用いる画像として
フィールドメモリ群12に書き込まれる。フィールドメ
モリ群12では、バンク切り替えが行われ、これによ
り、符号化する画像に応じて、単一のフィールドが、後
方予測に用いる画像として読み出されたり、前方予測に
用いる画像として読み出される。
【0083】動き補償回路11は、フィールドメモリ群
12に記憶された、局所復号された画像に対して、予測
モード、動きベクトルをもとに動き補償を施し、予測画
像を生成して切換回路4および演算器11aに出力す
る。すなわち、動き補償回路11は、前方/後方/両方
向予測モードのときのみ、フィールドメモリ群12の読
み出しアドレスを、動きベクトル検出回路1がいま出力
しているマクロブロックの位置に対応する位置から動き
ベクトルに対応する分だけずらして、前方予測または後
方予測に用いる画像のデータを読み出し、予測画像デー
タとして出力する。なお、両方向予測モードのときは、
前方予測と後方予測に用いる画像の両方が、予測画像デ
ータとして出力される。
【0084】前方/後方/両方向予測の場合は、予測画
像からの差分がIDCT回路10の出力として送られて
くるので、演算器11aは、この差分を、動き補償回路
11からの予測画像に対して足し込むことで、局所復号
を行なっている。この局所復号画像は、デコーダで復号
される画像と全く同一の画像であり、上述したように、
次の処理画像に対して、前方/後方/両方向予測を行う
ときに用いる画像としてフィールドメモリ群12に記憶
される。
【0085】また画像内予測モードの場合は、画像デー
タそのものがIDCT回路10の出力として送られてく
るので、演算器11aは、この画像データをそのままフ
ィールドメモリ群12に出力して記憶させる。
【0086】なお、量子化回路6から逆量子化回路8に
は、IおよびPピクチャのデータだけ出力され、Bピク
チャのデータは出力されない。従って、フィールドメモ
リ群12には、IおよびPピクチャのデータだけ記憶さ
れ、Bピクチャのデータは記憶されない。これは、Bピ
クチャのデータが、前方/後方/両方向予測に用いられ
ないからである。
【0087】次に、図2にデコーダのブロックダイヤグ
ラムを示す。
【0088】デコーダには伝送メディアを介してビット
ストリームが入力される。即ち、例えば光ディスク等の
伝送メディアからレーザ光を介して再生された再生デー
タは、所定の復調が行われた後、エラー訂正が行われ、
更に、オーディオ信号、同期信号等が多重化されている
場合には、これらの分離が行われる。こうして得られた
画像信号に関するビットストリームは受信バッファ21
を介して可変長復号化(IVLC)回路22に入力される。
可変長復号化回路22は、ビットストリームから量子化
データと、動きベクトル、予測モード、量子化スケール
を復号(可変長復号)する。この量子化データと量子化
スケールは次の逆量子化回路23に入力される。
【0089】逆量子化回路23は、可変長復号化回路2
2からの量子化データを、同じく可変長復号化回路22
より出力された量子化スケールに基づいて逆量子化し、
逆量子化データ、即ちDCTデータを出力する。IDC
T回路24は、逆量子化回路23からのDCTデータに
対し、IDCT処理を施して出力する。
【0090】一方、動き補償回路25は、フィールドメ
モリ群26に記憶された、既に復号された画像に対し
て、予測モード、動きベクトルをもとに動き補償を施
し、予測画像を生成して演算器25aに出力する。すな
わち、動き補償回路25は、前方/後方/両方向予測モ
ードのときのみ、フィールドメモリ群26の読み出しア
ドレスを、いまIDCT回路24から演算器25aに出
力された画像データのブロックの位置に対応するアドレ
スから、可変長復号化回路22からの動きベクトルに対
応する分だけずらして、前方予測または後方予測に用い
る画像のデータを読み出し、予測画像データとして出力
する。
【0091】前方/後方/両方向予測モードの場合は、
予測画像からの差分がIDCT回路24の出力として送
られてくるので、演算器25aは、この差分を、動き補
償回路25からの予測画像に対して足し込むことで復号
を行う。この復号された画像データは、以降に、前方/
後方/両方向予測で符号化された画像を復号するために
用いる画像データとしてフィールドメモリ群26に記憶
される。
【0092】また画像内予測モードの場合は、画像デー
タそのものがIDCT回路24の出力として送られてく
るので、演算器25aは、この画像データをそのままフ
ィールドメモリ群26に出力し、以降に、前方/後方/
両方向予測で符号化された画像を復号するために用いる
画像データとして記憶させる。
【0093】フィールドメモリ群26では、バンク切り
替えが行われ、復号化する画像に応じて、単一のフィー
ルドが、後方予測に用いる画像として読み出されたり、
前方予測に用いる画像として読み出されたりする。
【0094】この画像は、エンコーダで局所復号された
画像と全く同一の画像であり、次に復号される画像(P
またはBピクチャ)はこの復号画像をもとに、前方/後
方/両方向での復号が行なわれる。
【0095】なお、フィールドメモリ群26には、Iお
よびPピクチャのデータだけ記憶され、Bピクチャのデ
ータは記憶されない。これは、Bピクチャのデータが、
前方/後方/両方向予測に用いられないからである。
【0096】以上の第1実施例によるエンコーダおよび
デコーダのハードウエア表現としての構成は、フィール
ドメモリ群12をフレーム単位に用いるのではなく、フ
ィールド単位に用いる点を除いて従来のフレーム単位の
MPEG符号化のエンコーダおよびデコーダのハードウエア
とほとんど同じであるため、同様のハードウエア構成で
実現することが可能であり、また、フレーム単位の符号
化とフィールド単位の符号化とを容易に切り換えること
が可能である。
【0097】本発明の符号化方法で、インターレースの
画像信号について、どのように予測を行なうなうかを以
下に示す。インターレスの画像をフィールド単位で並べ
ると、例えば図3となる。図3において、上側は偶数フ
ィールド、下側は奇数フィールドを示しており、上下1
組で1フレームを構成するようになされている。なお、
偶数、奇数は、説明上便宜的につけたもので、上述とは
逆に、上側を奇数フィールド、下側を偶数フィールドと
しても良い。
【0098】さらに、各フレームを構成する2つのフィ
ールドは、その一方がIピクチャであるときは、他方が
IピクチャまたはPピクチャとなり、その一方がPピク
チャであるときは、他方がIピクチャまたはPピクチャ
となり、また一方がBピクチャであるときは、他方もB
ピクチャとなるようになされている。
【0099】即ち、1フレームを構成する2つのフィー
ルドは、IピクチャとIピクチャ、IピクチャとPピク
チャ、PピクチャとIピクチャ、PピクチャとPピクチ
ャ、BピクチャとBピクチャのいずれかの組み合わせと
なるようになされている。
【0100】また、図3において、横方向は時間に対応
しており、上側のフィールドと下側のフィールドとの横
方向のズレはフィールド周期(例えば、1/60秒)に
対応する。従って、上側どうしのフィールドおよび下側
どうしのフィールドとの横方向のズレはフレーム周期
(例えば、1/30秒)に対応する。
【0101】なお、図3においては、Pピクチャ(前方
予測符号化フィールド)に挾まれたBピクチャ(両方向
予測符号化フィールド)の枚数が、2フィールドの場合
を示したが、Pピクチャの間隔には、制限はないので、
Bピクチャの枚数は、可変である。
【0102】ここでフィールド2はIピクチャ(フィー
ルド内符号化フィールド)であり、フィールド内符号化
される。また、フィールド3,6,7,10,11,1
4,15はPピクチャ(前方予測符号化フィールド)で
あり、前方向から予測される。また、フィールド0,
1,4,5,8,9,12,13はBピクチャ(両方向
予測符号化フィールド)であり、前方向から、後方向か
ら、あるいは両方向から予測される。実際にはPピクチ
ャ及びBピクチャは、プログレッシブスキャン画像の符
号化の場合と同様に、符号化効率によってマクロブロッ
ク単位でイントラ符号化と予測符号化が切り換えられる
ものであり、イントラ符号化されたマクロブロックを含
む場合もある。但し、簡便のためイントラ符号化された
ブロックが有る場合も含めて以下、予測と表現する。
【0103】各ピクチャは、次の図4、図5のように予
測される。まず、Pピクチャの予測は、図4(a)で示
される。Pピクチャは、そのフィールドの前に符号化さ
れたIピクチャもしくはPピクチャのうちの最新の2フ
ィールドから予測される。たとえば、P3は、I2からのみ
予測され、P6はI2とP3から予測される。次にBピクチャ
は、図5で示されるように予測される。Bピクチャは、
その前後のIピクチャもしくはPピクチャのうちの最新
の4フィールドから予測される。たとえば、B4は、I2,
P3,P6,P7から予測される。B5もB4と同様に予測され
る。
【0104】以上のように、予測が最新のフィールドを
用いてなされるので、予測誤差を低減することができ、
高能率予測符号化を行うことができるようになる。
【0105】さて、このような予測方式を可能にする符
号化順序および復号化順序を図6に示す。この方式で
は、1フレームを構成する2枚の連続するフィールド
は、必ず連続して符号化される。例えば、先ず1フレー
ムを構成するI2,P3が連続して符号化され、次に、1フ
レームを構成するB0,B1が連続して符号化され、続いて
1フレームを構成するP6,P7が連続して符号化され、同
様にして、1フレームを構成するB4,B5、1フレームを
構成するP10,P11、1フレームを構成するB8,B9、1フ
レームを構成するP14 ,P15、1フレームを構成するB1
2,B13・・・が順に、それぞれ連続して符号化される。
【0106】また、復号化においては、例えば、先ず1
フレームを構成するI2,P3が連続して復号化され、次
に、1フレームを構成するB0、B1が連続して復号化さ
れ、続いて1フレームを構成するP6,P7が連続して復号
化され、同様にして、1フレームを構成するB4,B5、1
フレームを構成するP10,P11 、1フレームを構成するB
8,B9、1フレームを構成するP14,P15 、1フレームを
構成するB12,B13 ・・・が順に、それぞれ連続して復
号化される。
【0107】また、この方式で作られたBitstre
amにおいて、ランダムアクセスをする場合を考える。
この方式では、フレームを構成する2枚の連続するフィ
ールドは、必ず連続して符号化される。このため、Bi
tstreamにおいても、フレームを構成する2枚の
連続するフィールドに関するデータは連続して存在す
る。このようなBitstreamでは、1つのフレー
ムを復号化するのに、飛び越えたデータを読む必要がな
く、効率よく目的のフレームのデータを得ることができ
る。
【0108】また、フレーム単位の符号化方式との整合
性については、図6の入力、符号化、伝送、復号化順序
から明らかなように、フレームを構成する2枚のフィー
ルドが連続して符号化されるので、整合性はよい。すな
わち、GOP単位でフレーム単位の符号化方式と、提案
しているフィールド単位の符号化方式を容易に切り替え
ることができる。
【0109】なお、上述の実施例においては、1フレー
ムを構成する2つのフィールドのうち、上側のフィール
ドを符号化(または復号)し、その後続けて、1/60
秒だけ時間的に後行する下側のフィールドを符号化する
ようにしたが、例えば図4(b)に示すように、フィー
ルド2をPピクチャ、フィールド3をIピクチャとした
場合などには、先に下側のフィールドを符号化(または
復号)し、その後続けて1/60秒だけ時間的に先行す
る上側のフィールドを符号化するようにすることができ
る。
【0110】この場合においても、上述したように、P
ピクチャ(Bピクチャも同様)は、そのフィールドの前
に符号化されたIピクチャもしくはPピクチャのうちの
最新の2フィールドから予測される。即ち、Iピクチャ
とPピクチャのみを考えた場合、図4(b)のように、
I3,P2,P7,P6,P11,P10,P15,P14,・・・の順で符号化され
るときには、たとえば、P3は、I2からのみ予測され、P6
はP2とP7から予測される。
【0111】従って、この場合、例えばPピクチャであ
るP6の予測にあたっては、時間的に先行するフィールド
(P2)だけでなく、時間的に後行するフィールド(P
7)、即ち、いわばP6の未来の画像が用いられることに
なるので、予測誤差をより少なくすることができる。
【0112】〔第2実施例〕ところで、従来の予測方式
もそうであるが、上述の第1実施例における場合におい
ては、予測を行なうために必要なメモリの枚数は、Bピ
クチャの場合がもっとも多く、4フィールド(2フレー
ム)分必要である。即ち、図5において、例えばB4を予
測するのに、I2,P3,P6,P7の4フィールドを記憶してお
く必要がある(図中、B4に終点が指している矢印の数の
フィールド数が、B4を予測するために必要)。このメモ
リの枚数は、ハードウエアのコストとして大きく響くの
で、これを削減する必要がある。さらに、符号器で予測
を行なうために必要なメモリの枚数は、復号器で復号を
行うために必要なメモリの枚数に影響を与える。そし
て、復号器では、ハードウエアのコストが元々小さいの
で、メモリを削減する効果が大きい。
【0113】そこで、本発明の第2実施例における符号
化方式の予測方式を図7に示す。図7に示すように、符
号化器側で、IおよびPピクチャの偶数フィールド(上
側のフィールド)による前方向からの予測を制限する。
すると、Bピクチャの偶数/奇数フィールド共に参照す
るフィールドは、3フィールドになるので、符号化器の
予測に必要なメモリは、3フィールド分にできる。
【0114】そして、この時の入力、符号化、伝送、復
号化順序は実施例1と同様に図6で示される。
【0115】一方、復号化器では、Bピクチャを復号す
るのに復号画像を記憶するためだけに、符号器と同様に
3フィールド分のメモリが必要であるが、図6に示すよ
うに、復号されたBピクチャは、IおよびPピクチャの
ようにディレイされることなくそのまま出力される(表
示される)ので、この復号されたBピクチャを記憶して
おく必要がない。即ち、この場合、復号器に必要なメモ
リは、3フィールド分にすることができる。
【0116】従って、この場合、メモリを削減し、装置
の低コスト化を図ることができる。
【0117】また、この方式で作られたBitstre
amにおいて、ランダムアクセスをする場合を考える。
この方式においては、フレームを構成する2枚の連続す
るフィールドは、必ず連続して符号化される。このた
め、Bitstreamにおいても、データは連続して
存在する。このようなBitstreamでは、1つの
フレームを復号化するのに、冗長なフィールドに関する
データを読む必要がなく、効率よく目的のフレームのデ
ータを得ることができる。
【0118】また、フレーム単位の符号化方式との整合
性については、図6の入力、符号化、伝送、復号化順序
から明らかなように、フレームを構成する2枚のフィー
ルドが連続して符号化されるので、整合性はよい。すな
わち、GOP単位でフレーム単位の符号化方式と、提案
しているフィールド単位の符号化方式を切り替えること
ができる。
【0119】〔第3実施例〕上述した第2実施例では、
予測方式の一部を制限してしまうので、ある程度予測効
率が低下して画質が劣化する場合がある。このため、第
3実施例では、入力、符号化、伝送、復号化、出力順序
を変更することによって、予測効率を犠牲にすることな
くフィールドメモリを3枚に削減する。それを可能にす
る入力、符号化、伝送、復号化、出力順序を図8に示
す。
【0120】IピクチャもしくはPピクチャの偶数フィ
ールドのあとに、それより時間的に前に存在するBピク
チャの偶数フィールドを符号化し、その後、Iピクチャ
もしくはPピクチャの奇数フィールドのあとに、それよ
り時間的に前に存在するBピクチャの奇数フィールドを
符号化することにより、Pピクチャの間隔毎で、フレー
ム単位で処理は閉じるように保ちつつ、このような順序
で処理を進めることにより、実施例1と同じく図4、図
5の予測方式を用いることができる。
【0121】この順序で作られたBitstream
に、ランダムアクセスする場合を考える。たとえば、第
2番目のフレームにアクセスする場合には、I2,P3をデ
コードする必要がある。ところで、Bitstream
においては、I2,B0,P3,B4・・・の順になっているの
で、必要なI2のデータとP3のデータ以外にも、B0のデー
タを取り込むことになる。これは、ランダムアクセスの
スピードを遅らせることになるが、B0のデータは、Bピ
クチャのデータなので、基本的に両方向から予測されて
おり、データ量はほかのIピクチャ又はPピクチャに比
べてすくないので、それほど負担にはならない。
【0122】また、フレーム単位の符号化方式との整合
性については、Pピクチャの間隔毎に考えれば、フレー
ム単位で処理は閉じており、Pピクチャの間隔は任意に
設定できるので、整合性はよいことがわかる。すなわ
ち、GOP単位でフレーム単位の符号化方式と、提案し
ているフィールド単位の符号化方式を切り替えることが
できる。
【0123】〔第4実施例〕ところで、図7に示す実施
例においては、Bピクチャの上側のフィールドとして
の、例えばB4は、時間的に1/60秒前のP3、1/30
(=2/60)秒後のP6、1/20(=3/60)秒後
のP7から予測される。
【0124】これに対し、Bピクチャの下側のフィール
ドとしての、例えばB5は、時間的に1/30(=2/6
0)秒前のP3、1/60秒後のP6、1/30(=2/6
0)秒後のP7から予測される。
【0125】従って、Bピクチャの下側のフィールドの
方が、Bピクチャの上側のフィールドより時間的に近接
したフィールドから予測されるので、Bピクチャの上側
のフィールドに対しては、下側のものに比べ不利な予測
が行われることになる。
【0126】そこで、図13に示すように、Bピクチャ
の上側のフィールドとしての、例えばB4は、時間的に1
/30(=2/60)秒前のI2 1/60秒前のP3、1/30(=2/60)秒後のP6、
から予測するようにするとともに、Bピクチャの下側の
フィールドとしての、例えばB5は、上述の場合と同様
に、時間的に1/30(=2/60)秒前のP3、1/6
0秒後のP6、1/30(=2/60)秒後のP7から予測
するようにする。
【0127】このようにすることにより、Bピクチャの
上側のフィールドは、Bピクチャの下側のフィールドに
おけるときと同様に、時間的に近接したフィールドから
予測され、予測誤差を減少させることができる。なお、
図13において、○印の中に付してある数字は、符号化
順序を表す。
【0128】従って、この場合、2フレーム単位で符号
化する順番が連続するようになり、即ち2フレーム単位
で処理は閉じるようになり、これにより、フレーム単位
の符号化方式との整合性についてはよいことがわかる。
すなわち、GOP単位でフレーム単位の符号化方式と、
提案しているフィールド単位の符号化方式を切り替える
ことができる。
【0129】次に、上述の第2乃至第4実施例による符
号化方式のエンコーダを、図1との対応部分に同一符号
を付して図9に示す。
【0130】入力されたブロックフォーマットの画像
は、動きベクトル検出回路1で動きベクトルの検出が行
われる。動きベクトル検出回路1は、フィールドメモリ
群2に記憶された前方原画像及び/又は後方原画像を用
いて、現在の参照画像との間の動きベクトルの検出を行
なう。ここで、動きベクトルの検出は、図1で説明した
ように、ブロック単位でのフィールド間差分の絶対値和
が最小になるものを、その動きベクトルとする。
【0131】このブロック単位でのフィールド間差分の
絶対値和は予測判定回路3に送られる。予測判定回路3
は、この値をもとに、参照ブロックの予測モードを決定
する。
【0132】この予測モードをもとに、ブロック単位で
フィールド内/前方/後方/両方向予測の切り替えを行
ない、フィールド内符号化モードの場合は入力画像その
ものを、前方/後方/両方向予測モードのときは、動き
補償回路11より出力された、それぞれの予測画像から
のフィールド間符号化データを切換回路4を介して発生
し、当該差分データをデイスクリートコサイン変換(D
CT(discrete cosine transform ))回路5に出力す
るようになされている。
【0133】DCT回路5は映像信号の2次元相関を利
用して、入力画像データ又は差分データをブロツク単位
でデイスクリートコサイン変換し、その結果得られる変
換データを量子化回路6に出力するようになされてい
る。
【0134】量子化回路6は、マクロブロックおよびス
ライス毎に定まる量子化ステツプサイズでDCT変換デ
ータを量子化し、その結果出力端に得られる量子化デー
タを可変長符号化(VLC(variable length code))
回路7及び逆量子化回路8に供給する。量子化に用いる
量子化スケールは送信バッファメモリ9のバッファ残量
をフィードバックすることによって、送信バッファメモ
リ9が破綻しない値に決定する。この量子化スケール
も、可変長符号化回路7及び逆量子化回路8に、量子化
データとともに供給される。
【0135】ここでVLC回路7は、量子化データを、
量子化スケール、予測モード、動きベクトルと共に可変
長符号化処理し、伝送データとして送信バツフアメモリ
9に供給する。
【0136】送信バツフアメモリ9は、伝送データを一
旦メモリに格納した後、所定のタイミングでビットスト
リームとして出力すると共に、メモリに残留している残
留データ量に応じてマクロブロック単位の量子化制御信
号を量子化回路6にフイードバツクして量子化スケール
を制御するようになされている。これにより送信バツフ
アメモリ9は、ビットストリームとして発生されるデー
タ量を調整し、メモリ内に適正な残量(オーバーフロー
又はアンダーフローを生じさせないようなデータ量)の
データを維持するようになされている。
【0137】因に送信バツフアメモリ9のデータ残量が
許容上限にまで増量すると、送信バツフアメモリ9は量
子化制御信号によつて量子化回路6の量子化スケールを
大きくすることにより、量子化データのデータ量を低下
させる。またこれとは逆に送信バツフアメモリ9のデー
タ残量が許容下限値まで減量すると、送信バツフアメモ
リ9は量子化制御信号によつて量子化回路6の量子化ス
ケールを小さくすることにより、量子化データのデータ
量を増大させる。
【0138】送信バッファメモリ9から出力されたビッ
トストリームは、符号化されたオーディオ信号、同期信
号等と多重化され、更にエラー訂正用のコードが付加さ
れ、所定の変調が加えられた後、レーザ光を介して光デ
ィスク等の記録媒体に記録される。
【0139】ここで、上述の光ディスクなどの記録媒体
の製造方法について、図10および図11を参照して説
明する。即ち、図10において、例えばガラスなどより
なる原盤が用意され、その上に、例えばフォトレジスト
などよりなる記録材料が塗布される。これにより、記録
用原盤が製作される。一方、上述したようにしてソフト
の製作がなされる。
【0140】即ち、図11に示すように、符号器(ビデ
オエンコーダ)で上述したように予測符号化されたビデ
オデータが、一時バッファに記憶されるとともに、オー
ディオエンコーダで符号化されたオーディオデータが、
一時バッファに記憶される。バッファに記憶されたビデ
オデータとオーディオデータは、多重化器(MPX)で
同期信号と共に多重化され、誤り訂正符号回路(EC
C)でエラー訂正用のコードが付加される。そして、変
調回路(MOD)で所定の変調がかけられ、所定のフォ
ーマットにしたがって、例えば磁気テープなどに一旦記
録され、ソフトが製作される。
【0141】このソフトを必要に応じて編集(プリマス
タリング)し、光ディスクに記録すべきフォーマットの
信号を生成する。そして、図10に示すように、この記
録信号に対応して、レーザビームを変調し、このレーザ
ビームを原盤上のフォトレジスト上に照射する。これに
より、原盤上のフォトレジストが記録信号に対応して露
光される。
【0142】その後、この原盤を現像し、原盤上にピッ
トを出現させる。このようにして用意された原盤に、例
えば電鋳等の処理を施し、ガラス原盤上のピットを転写
した金属原盤を製作する。この金属原盤から、さらに金
属スタンパを製作し、これを成形用金型とする。
【0143】この成形用金型に、例えばインジェクショ
ンなどによりPMMA(アクリル)またはPC(ポリカ
ーボネート)などの材料を注入し、固定化させる。ある
いは、金属スタンパ上に2P(紫外線硬化樹脂)などを
塗布した後、紫外線を照射して硬化させる。これによ
り、金属スタンパ上のピットを、樹脂よりなるレプリカ
上に転写することができる。
【0144】このようにして生成されたレプリカ上に、
反射膜が蒸着あるいはスパッタリングなどにより形成さ
れる。あるいはまた、スピンコートにより形成される。
【0145】その後、このディスクに対して内外径の加
工が施され、2枚のディスクを張り合わせるなどの必要
な処置が施される。さらに、ラベルを貼り付けたり、ハ
ブが取り付けられて、カートリッジに挿入される。この
ようにして光りディスクが完成する。
【0146】図9に戻り、一方、逆量子化回路8は、量
子化回路6から送出される量子化データを代表値に逆量
子化して逆量子化データに変換し、出力データの量子化
回路6における変換前の変換データを復号し、逆量子化
データをデイスクリートコサイン逆変換IDCT(inve
rse discrete cosine trasform)回路10に供給するよ
うになされている。
【0147】IDCT回路10は、逆量子化回路で復号
された逆量子化データをDCT回路5とは逆の変換処理
で復号画像データに変換し、演算器11aに出力するよ
うになされている。演算器11aは、IDCT回路10
の出力データに対し、動き補償回路11からの予測画像
を加算し、元の画像に局所復号する。この復号画像は、
前方予測画像もしくは後方予測画像を生成するための画
像としてセレクタ13に供給される。
【0148】セレクタ13は、フィールドメモリ群12
から時間的に前にデータが書き込まれたフィールドメモ
リを順に選択し、新しく入力した復号画像を供給する。
フィールドメモリ群12は、3枚のフィールドメモリで
構成され、入力された復号画像を順に記憶する。
【0149】セレクタ14は、動き補償回路11の指示
に従い、予測判定回路3において判定された予測モード
に基づいて、フィールドメモリ群12からのデータの読
みだしを制御し、必要な復号画像を出力する。即ち、前
方/後方/両方向予測モードに対応して、フィールドメ
モリ群12の読み出しアドレスを、動きベクトル検出回
路1がいま出力しているマクロブロックの位置に対応す
る位置から動きベクトルに対応する分だけずらして、前
方予測または後方予測に用いる画像のデータが、フィー
ルドメモリ群12から読み出され、これにより予測画像
が、セレクタ14および動き補償回路11を介して演算
器11aと切換回路4に出力される。なお、両方向予測
時には、このセレクタ14において、動き補償回路11
の指示に従って、2つのフィールドメモリから読みださ
れた値(前方予測および後方予測に用いる画像のデー
タ)の加算(あるいは加算平均)も行われる。
【0150】以上により、演算器11aでは、動き補償
回路11からの予測画像を用いて、復号画像が得られる
ようになり、切換回路4では、動き補償回路11からの
予測画像を用いて、上述の差分データが得られるように
なることになる。
【0151】さらに、第2実施例乃至第4実施例による
復号化方式のデコーダを、図2と対応する部分には同一
符号を付与して図12に示す。
【0152】デコーダには伝送メディアを介してビット
ストリームが入力される。即ち、例えば光ディスク等の
伝送メディアからレーザ光を介して再生された再生デー
タは、所定の復調が行われた後、エラー訂正が行われ、
更に、オーディオ信号、同期信号等が多重化されている
場合には、これらの分離が行われる。こうして得られた
画像信号に関するビットストリームは受信バッファ21
を介して可変長復号化(IVLC)回路22に入力される。
可変長復号化回路22は、ビットストリームから量子化
データと、動きベクトル、予測モード、量子化スケール
を復号する。この量子化データと量子化スケールは次の
逆量子化回路23に入力される。
【0153】逆量子化回路23は、可変長復号化回路2
2からの量子化データを、同じく可変長復号化回路22
より出力された量子化スケールに基づいて逆量子化し、
逆量子化データ、即ちDCTデータを出力する。IDC
T回路24は、逆量子化回路23からのDCTデータに
対し、IDCT処理を施して出力する。
【0154】一方、動き補償回路25は、フィールドメ
モリ群26に記憶された、既に復号された画像に対し、
セレクタ28を介して、予測モード、動きベクトルをも
とに動き補償を施し、予測画像を生成して演算器25a
に出力する。すなわち、動き補償回路25は、前方/後
方/両方向予測モードのときのみ、フィールドメモリ群
26の読み出しアドレスを、いまIDCT回路24から
演算器25aに出力された画像のブロックの位置に対応
するアドレスから、可変長復号化回路22からの動きベ
クトルに対応する分だけずらして、前方予測または後方
予測に用いる画像のデータを読み出すようにセレクタ2
8に指示し、これを予測画像データとして出力する。
【0155】前方/後方/両方向予測モードの場合は、
予測画像からの差分がIDCT回路24の出力として送
られてくるので、演算器25aは、この差分を、動き補
償回路25からの予測画像に対して足し込むことで復号
を行う。この復号画像は、以降に、前方/後方/両方向
予測で符号化された画像を復号するために用いる画像デ
ータとしてセレクタ27に供給される。セレクタ27
は、フィールドメモリ群26から時間的に前にデータが
書き込まれたフィールドメモリを順に選択し、新しく入
力した復号画像データを供給する。フィールドメモリ群
26は、3つのフィールドメモリで構成され、入力され
た復号画像データを順に記憶する。
【0156】また画像内予測モードの場合は、予測画像
との差分データでなく、画像データそのものがIDCT
回路24の出力として送られてくるので、演算器25a
は、この画像データをそのままセレクタ27を介してフ
ィールドメモリ群26に出力し、以降に、前方/後方/
両方向予測で符号化された画像を復号するために用いる
画像データとして記憶させる。
【0157】セレクタ28は、動き補償回路25の指示
に従い、可変長復号化回路22において復号された予測
モードに基づいて、フィールドメモリ群26からのデー
タの読みだしを制御し、これにより、必要な予測画像
が、動き補償回路25を介して演算器25aに供給され
るようになされている。セレクタ28は、また、加算器
機能を有しており、両方向予測時には、このセレクタ2
8で、データを読みだす2つのフィールドメモリを選択
するとともに、読みだされた値の加算(あるいは加算平
均)も行う。
【0158】この予測画像は、エンコーダで差分データ
が生成されるときに用いられる画像と全く同一のもので
あり、次に復号される画像(PまたはBピクチャ)はこ
の予測画像をもとに、前方/後方/両方向での復号が行
なわれる。
【0159】基本的なエンコーダ、デコーダの動作は、
第1実施例に述べられた符号化、復号化とほとんど同じ
である。異なるのは、フィールドメモリを3枚用いて、
それらを切り替えることにより、前方、後方、および両
方向の予測を行なう点にある。このため、フィールドメ
モリ群12(26)の前後に、どのメモリを選ぶかを選
択するセレクタ13および14(27及び28)が用い
られる。
【0160】尚、上述の実施例2乃至4においては、両
方向予測画像を3又は4フィールドから予測する際に、
3つのフィールドメモリを用いる場合について述べた
が、本発明は、両方向予測画像を所定数のフィールドか
ら予測する際に、そのフィールド数以下のフィールドメ
モリを用いる場合についても適用できる。
【0161】また、上述の実施例1乃至4においては、
エンコーダから出力されたビットストリームは、光ディ
スクに記録するようにしたが、ISDN、衛星通信等の
伝送路に送出するようにしてもよい。
【0162】さらに、本発明は、実施例中でも述べた
が、上述したフィールド単位での処理のみ行う装置だけ
でなく、フレーム単位での処理を行う装置またはフレー
ム/フィールド単位を切り換えて処理する装置であれ
ば、復号(局所復号)したときのメモリへの読み書きを
フィールド単位で行うように制御するようにすることに
より適用可能である。
【0163】そして、上述のようにして、フレーム単位
での処理を行う装置またはフレーム/フィールド単位を
切り換えて処理する装置に、本発明を適用した場合に
は、フレーム単位での処理を行うためのメモリは必要な
くなり、フィールド単位での処理を行うだけのメモリが
あれば済むので、メモリを削減することができ、その結
果、装置の低コスト化を図ることができる。
【0164】
【発明の効果】本発明によれば、インターレーススキャ
ン画像に適用するために、インターレーススキャン構造
に適した予測方式をもつので、予測の効率が高く、高画
質化が達成できる。
【0165】また、本発明によれば、ランダムアクセス
をする場合には、1つのフレームを構成する2枚の連続
するフィールドに関するBitstreamは、連続又は近接し
て存在するので、不要なデータをデコードする必要がな
く、効率よく目的のフレームのデータを得ることができ
る。
【0166】さらに、本発明によれば、フレームを構成
する2枚のフィールドが連続して符号化されるか、少な
くともPピクチャの間隔毎に考えれば、フレーム単位で
閉じた処理により符号化されるので、フレーム単位の符
号化方式との整合性のよい符号化が可能となり、フレー
ム単位の符号化方式と、提案しているフィールド単位の
符号化方式とを、GOP単位で切り替えることもでき
る。
【図面の簡単な説明】
【図1】本発明を適用したエンコーダの構成例を示すブ
ロック図である。
【図2】本発明を適用したデコーダの構成例を示すブロ
ック図である。
【図3】インターレース画像信号時のGOPstruc
tureを説明するための図である。
【図4】本符号化方法のPピクチャの予測方式を説明す
るための図である。
【図5】本符号化方法のBピクチャの予測方式を説明す
るための図である。
【図6】インターレース画像信号時の入力、符号化、復
号化、出力順序を説明するための図である。
【図7】予測方式を制限した場合のBピクチャの予測方
式を説明するための図である。
【図8】第3実施例における、入力、符号化、復号化、
出力順序を説明するための図である。
【図9】第2、第3、および第4実施例の符号化方法に
よるエンコーダの構成例を示すブロック図である。
【図10】本発明の記録媒体の製造方法を説明する図で
ある。
【図11】本発明の記録媒体の製造方法を説明する図で
ある。
【図12】第2、第3、および第4実施例の符号化方法
によるデコーダの構成を示すブロック図である。
【図13】予測誤差を均一化するBピクチャの予測方式
を説明するための図である。
【図14】高能率符号化を説明するための図である。
【図15】プログレッシブスキャン画像信号時のGOP
structureを説明するための図である。
【図16】プログレッシブスキャン画像信号の入力、符
号化、復号化、出力順序を説明するための図である。
【図17】動画像を符号化し、復号化する系の一例の構
成を示すブロック図である。
【図18】動画データの構造を説明するための図であ
る。
【図19】MPEGエンコーダの一例の構成を示すブロック
図である。
【図20】MPEGデコーダの一例の構成を示すブロック図
である。
【符号の説明】
1 動きベクトル検出回路 2 フィールドメモリ群 3 フィールド内/前方/後方/両方向予測判定回路 4 切り換え回路 5 DCT回路 6 量子化回路 7 可変長符号化回路 8 逆量子化回路 9 送信バッファメモリ 10 IDCT回路 11 動き補償回路 12 フィールドメモリ群 13,14 セレクタ 21 受信バッファメモリ 22 可変長復号化回路 23 逆量子化回路 24 IDCT回路 25 動き補償回路 26 フィールドメモリ群 27,28 セレクタ
フロントページの続き (56)参考文献 特開 平5−91500(JP,A) 特表 平6−507285(JP,A) 1.1992年電子情報通信学会春季全国 大会,D−B43 「MPEG動画符号化 アルゴリズムのフィールド間予測への拡 張」(1992.3) 2.1991年テレビジョン学会年次大会 16−1「フレーム間/フィールド間適 応動き補償予測を用いた蓄積メディア用 動画像符号化方式」(1991.7) 3.オプトロニクス No.5 (1992.5)p.86−98(蓄積媒体にお ける符号化) (58)調査した分野(Int.Cl.7,DB名) H04N 7/137 H04N 5/92

Claims (4)

    (57)【特許請求の範囲】
  1. 【請求項1】 偶数及び奇数の2つのフィールドで構成
    された1フレームのインターレーススキャン画像を符号
    化する画像符号化方法において、 所定の偶数フィールドをフィールド内符号化もしくは前
    方予測符号化により符号化し、 次に上記所定の偶数フィールドより時間的に前に存在す
    るフレームの偶数フィールドを両方向予測符号化により
    符号化し、 次に上記所定の偶数フィールドより時間的に後に存在す
    る所定の奇数フィールドをフィールド内符号化もしくは
    前方予測符号化により符号化し、 次に上記所定の偶数フィールドより時間的に前に存在す
    るフレームの奇数フィールドを両方向予測符号化により
    符号化することを特徴とする画像信号符号化方法。
  2. 【請求項2】 上記所定の偶数フィールドと上記所定の
    奇数フィールドとは、1つのフレームを構成することを
    特徴とする請求項1に記載の画像信号符号化方法。
  3. 【請求項3】 偶数及び奇数の2つのフィールドで構成
    された1フレームのインターレーススキャン画像を符号
    化する際に、所定の偶数フィールドをフィールド内符号
    化もしくは前方予測符号化により符号化し、 次に上記所定の偶数フィールドより時間的に前に存在す
    るフレームの偶数フィールドを両方向予測符号化により
    符号化し、 次に上記所定の偶数フィールドより時間的に後に存在す
    る所定の奇数フィールドをフィールド内符号化もしくは
    前方予測符号化により符号化し、 次に上記所定の偶数フィールドより時間的に前に存在す
    るフレームの奇数フィールドを両方向予測符号化により
    符号化することにより生成されたデータを復号化する画
    像信号復号化方法において、 所定の偶数フィールドをフィールド内符号化もしくは前
    方予測符号化して生成したデータを復号化し、 次に上記所定の偶数フィールドより時間的に前に存在す
    るフレームの偶数フィールドを両方向予測符号化して生
    成したデータを復号化し、 次に上記所定の偶数フィールドより時間的に後に存在す
    る所定の奇数フィールドをフィールド内符号化もしくは
    前方予測符号化して生成したデータを復号化し、 次に上記所定の偶数フィールドより時間的に前に存在す
    るフレームの奇数フィールドを両方向予測符号化して生
    成したデータを復号化することを特徴とする画像信号復
    号化方法。
  4. 【請求項4】 上記両方向予測符号化時に形成される両
    方向予測符号化フィールドを、時間的に前に復号化され
    たフィールド内符号化フィールド及び/又は前方予測符
    号化フィールドに対応するデータの内の、最新の3フィ
    ールドを用いて予測することを特徴とする請求項3に記
    載の画像信号復号化方法。
JP08503893A 1992-06-19 1993-04-13 画像信号符号化、復号化方法及び画像信号記録媒体 Expired - Lifetime JP3443867B2 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP08503893A JP3443867B2 (ja) 1992-06-26 1993-04-13 画像信号符号化、復号化方法及び画像信号記録媒体
KR1019930011238A KR940006412A (ko) 1992-06-26 1993-06-19 화상신호 부호화, 복호화 방법 및 화상신호 기록매체
KR1019930011239A KR940000891A (ko) 1992-06-19 1993-06-19 표면 광학 주사 장치
EP19930304967 EP0576289A3 (en) 1992-06-26 1993-06-24 Encoding and decoding picture signals
CA 2097780 CA2097780A1 (en) 1992-06-26 1993-06-24 Methods and systems for encoding and decoding picture signals and related picture-signal recording media
CN93109427A CN1086070A (zh) 1992-06-26 1993-06-26 编码和解码图象信号的方法和系统及相关的图象信号记录介质
US08/517,992 US5574504A (en) 1992-06-26 1995-08-22 Methods and systems for encoding and decoding picture signals and related picture-signal recording media

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP4-169430 1992-06-26
JP16943092 1992-06-26
JP08503893A JP3443867B2 (ja) 1992-06-26 1993-04-13 画像信号符号化、復号化方法及び画像信号記録媒体

Publications (2)

Publication Number Publication Date
JPH0698314A JPH0698314A (ja) 1994-04-08
JP3443867B2 true JP3443867B2 (ja) 2003-09-08

Family

ID=26426071

Family Applications (1)

Application Number Title Priority Date Filing Date
JP08503893A Expired - Lifetime JP3443867B2 (ja) 1992-06-19 1993-04-13 画像信号符号化、復号化方法及び画像信号記録媒体

Country Status (6)

Country Link
US (1) US5574504A (ja)
EP (1) EP0576289A3 (ja)
JP (1) JP3443867B2 (ja)
KR (1) KR940006412A (ja)
CN (1) CN1086070A (ja)
CA (1) CA2097780A1 (ja)

Families Citing this family (66)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3050736B2 (ja) * 1993-12-13 2000-06-12 シャープ株式会社 動画像符号化装置
US5767898A (en) * 1994-06-23 1998-06-16 Sanyo Electric Co., Ltd. Three-dimensional image coding by merger of left and right images
CN1095287C (zh) * 1994-08-24 2002-11-27 西门子公司 以较小的存储需求量进行压缩视频图象数据译码的方法
US6009236A (en) 1994-09-26 1999-12-28 Mitsubishi Denki Kabushiki Kaisha Digital video signal record and playback device and method for giving priority to a center of an I frame
US5646693A (en) * 1994-11-04 1997-07-08 Cismas; Sorin Memory utilization for video decoding and display with 3:2 pull-down
DE69525424T2 (de) * 1994-11-25 2002-10-02 Koninkl Philips Electronics Nv Verfahren und Vorrichtung zur Dekodierung von kodierten Videosignalen
JPH08214265A (ja) * 1995-01-31 1996-08-20 Sony Corp 符号化データの再生方法および再生装置
FR2731864B1 (fr) * 1995-03-14 1997-06-06 Sgs Thomson Microelectronics Decodeur mpeg a capacite memoire reduite
JP3308129B2 (ja) * 1995-03-27 2002-07-29 ソニー株式会社 画像信号復号化方法及び画像信号復号化装置
GB2301973B (en) * 1995-06-06 1999-10-20 Sony Uk Ltd Motion compensated video processing
DE19524688C1 (de) * 1995-07-06 1997-01-23 Siemens Ag Verfahren zur Dekodierung und Kodierung eines komprimierten Videodatenstroms mit reduziertem Speicherbedarf
JP3783238B2 (ja) * 1995-07-31 2006-06-07 ソニー株式会社 撮像システム、画像処理装置、符号化装置、符号化方法及びランダムノイズを除去する方法
SG74566A1 (en) * 1995-08-23 2000-08-22 Sony Corp Encoding/decoding fields of predetermined field polarity apparatus and method
JPH0974566A (ja) * 1995-09-04 1997-03-18 Sony Corp 圧縮符号化装置及び圧縮符号化データの記録装置
WO1997011562A1 (en) * 1995-09-20 1997-03-27 Philips Electronics N.V. Method and device for decoding coded digital video signals
GB2305797B (en) * 1995-09-27 2000-03-01 Sony Uk Ltd Video data compression
KR100218523B1 (ko) * 1995-10-12 1999-09-01 윤종용 엠펙 비디오 복호기
US6057893A (en) * 1995-12-28 2000-05-02 Sony Corporation Picture encoding method, picture encoding apparatus, picture transmitting method and picture recording medium
US6968003B1 (en) * 1996-01-29 2005-11-22 International Business Machines Corporation Speed-memory tradeoff for MPEG decoders
US5754534A (en) * 1996-05-06 1998-05-19 Nahumi; Dror Delay synchronization in compressed audio systems
US6101276A (en) * 1996-06-21 2000-08-08 Compaq Computer Corporation Method and apparatus for performing two pass quality video compression through pipelining and buffer management
US6307975B1 (en) * 1996-11-05 2001-10-23 Sony Corporation Image coding technique employing shape and texture coding
US6038256A (en) * 1996-12-31 2000-03-14 C-Cube Microsystems Inc. Statistical multiplexed video encoding using pre-encoding a priori statistics and a priori and a posteriori statistics
US5991447A (en) * 1997-03-07 1999-11-23 General Instrument Corporation Prediction and coding of bi-directionally predicted video object planes for interlaced digital video
WO1998042134A1 (en) 1997-03-17 1998-09-24 Mitsubishi Denki Kabushiki Kaisha Image encoder, image decoder, image encoding method, image decoding method and image encoding/decoding system
KR100269111B1 (ko) * 1997-06-27 2000-10-16 윤종용 비디오 디코딩과 출력 타이밍 제어방법 및 그 장치
GB9716293D0 (en) * 1997-07-31 1997-10-08 Lsi Logic Corp Method and apparatus for decoding video data
JPH11203724A (ja) * 1998-01-09 1999-07-30 Sony Corp 光ディスク及びその製造方法
US20020044692A1 (en) * 2000-10-25 2002-04-18 Goertzen Kenbe D. Apparatus and method for optimized compression of interlaced motion images
JP2002503901A (ja) 1998-02-13 2002-02-05 クビス・インク 飛越し走査移動画像の最適圧縮方法及び装置
US6091776A (en) * 1998-05-26 2000-07-18 C-Cube Microsystems, Inc. Delay balanced video encoder system
US6549652B1 (en) 1998-09-11 2003-04-15 Cirrus Logic, Inc. Method and apparatus for reducing noise during lossy transformation processes
US7158681B2 (en) * 1998-10-01 2007-01-02 Cirrus Logic, Inc. Feedback scheme for video compression system
US6347155B1 (en) 1998-10-01 2002-02-12 Sharewave, Inc. Method and apparatus for digital data compression
JP4142180B2 (ja) 1998-10-29 2008-08-27 富士通株式会社 動きベクトル符号化装置および復号装置
US20030185455A1 (en) * 1999-02-04 2003-10-02 Goertzen Kenbe D. Digital image processor
US20030142875A1 (en) * 1999-02-04 2003-07-31 Goertzen Kenbe D. Quality priority
US6983101B1 (en) * 1999-03-31 2006-01-03 Sanyo Electric Co., Ltd. Image recording apparatus, image reproducing apparatus and image recording/reproducing apparatus
FI113124B (fi) * 1999-04-29 2004-02-27 Nokia Corp Tiedonsiirto
US6972801B1 (en) * 2000-10-20 2005-12-06 Intervideo, Inc. System and method for deinterlacing a video signal for display on progressive display devices
US7813431B2 (en) * 2002-05-20 2010-10-12 Broadcom Corporation System, method, and apparatus for decoding flexibility ordered macroblocks
KR100523052B1 (ko) 2002-08-30 2005-10-24 한국전자통신연구원 다중 디스플레이 방식을 지원하는 다시점 동영상의 객체 기반 부호화 장치 및 그 방법과 그를 이용한 객체 기반 송수신 시스템 및 그 방법
US7499495B2 (en) 2003-07-18 2009-03-03 Microsoft Corporation Extended range motion vectors
US20050013498A1 (en) 2003-07-18 2005-01-20 Microsoft Corporation Coding of motion vector information
US7620106B2 (en) * 2003-09-07 2009-11-17 Microsoft Corporation Joint coding and decoding of a reference field selection and differential motion vector information
US7599438B2 (en) 2003-09-07 2009-10-06 Microsoft Corporation Motion vector block pattern coding and decoding
US7567617B2 (en) 2003-09-07 2009-07-28 Microsoft Corporation Predicting motion vectors for fields of forward-predicted interlaced video frames
US8064520B2 (en) * 2003-09-07 2011-11-22 Microsoft Corporation Advanced bi-directional predictive coding of interlaced video
US7724827B2 (en) 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
US7623574B2 (en) * 2003-09-07 2009-11-24 Microsoft Corporation Selecting between dominant and non-dominant motion vector predictor polarities
US7616692B2 (en) * 2003-09-07 2009-11-10 Microsoft Corporation Hybrid motion vector prediction for interlaced forward-predicted fields
US8130825B2 (en) * 2004-05-10 2012-03-06 Nvidia Corporation Processor for video data encoding/decoding
US8018463B2 (en) * 2004-05-10 2011-09-13 Nvidia Corporation Processor for video data
US8150232B2 (en) 2004-09-03 2012-04-03 Panasonic Corporation Recording medium, recording device, program, and recording method
US7240133B1 (en) * 2004-10-12 2007-07-03 Altera Corporation Reduced-area architecture for padded-protocol interface
JP2008053763A (ja) * 2004-11-16 2008-03-06 Matsushita Electric Ind Co Ltd Avデータ記録装置及び方法、avデータ再生装置及び方法、当該avデータ記録装置又は方法で記録された記録媒体
TWI266539B (en) * 2005-01-13 2006-11-11 Via Tech Inc Decoding device with multi-buffers
JP2007053554A (ja) * 2005-08-17 2007-03-01 Sony Corp 符号化装置、符号化方法、復号装置、復号方法およびプログラム
US7903737B2 (en) * 2005-11-30 2011-03-08 Mitsubishi Electric Research Laboratories, Inc. Method and system for randomly accessing multiview videos with known prediction dependency
US20080111923A1 (en) * 2006-11-09 2008-05-15 Scheuermann W James Processor for video data
CN101170707B (zh) * 2007-11-08 2012-08-08 华为技术有限公司 图像格式的转换和恢复方法及装置
US9247196B1 (en) 2012-08-30 2016-01-26 Ambarella, Inc. High efficiency video coding for video with interlaced and progressive content using lookahead
JP5811106B2 (ja) * 2013-01-11 2015-11-11 セイコーエプソン株式会社 映像処理装置、表示装置および映像処理方法
JP2015005939A (ja) * 2013-06-24 2015-01-08 ソニー株式会社 画像処理装置および方法、プログラム、並びに撮像装置
TWI608428B (zh) * 2014-03-27 2017-12-11 緯創資通股份有限公司 利用影像辨識產生相對應資訊之影像處理系統及其相關方法
CN113824965A (zh) * 2021-09-22 2021-12-21 北京百度网讯科技有限公司 一种视频编码方法、装置及电子设备

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4985768A (en) * 1989-01-20 1991-01-15 Victor Company Of Japan, Ltd. Inter-frame predictive encoding system with encoded and transmitted prediction error
JPH0714209B2 (ja) * 1989-12-20 1995-02-15 松下電器産業株式会社 動画像符号化装置
JPH03252287A (ja) * 1990-02-28 1991-11-11 Victor Co Of Japan Ltd 動画像圧縮装置
US5150432A (en) * 1990-03-26 1992-09-22 Kabushiki Kaisha Toshiba Apparatus for encoding/decoding video signals to improve quality of a specific region
JP2885322B2 (ja) * 1990-03-27 1999-04-19 日本ビクター株式会社 フィールド間予測符号化装置及び復号化装置
US5093720A (en) * 1990-08-20 1992-03-03 General Instrument Corporation Motion compensation for interlaced digital television signals
KR950011200B1 (ko) * 1990-10-31 1995-09-29 니뽕 빅터 가부시끼가이샤 인터레이스 동화상 신호의 압축 장치
JPH0813138B2 (ja) * 1990-11-28 1996-02-07 松下電器産業株式会社 画像符号化装置
US5185819A (en) * 1991-04-29 1993-02-09 General Electric Company Video signal compression apparatus for independently compressing odd and even fields
US5317397A (en) * 1991-05-31 1994-05-31 Kabushiki Kaisha Toshiba Predictive coding using spatial-temporal filtering and plural motion vectors
US5227878A (en) * 1991-11-15 1993-07-13 At&T Bell Laboratories Adaptive coding and decoding of frames and fields of video
US5293229A (en) * 1992-03-27 1994-03-08 Matsushita Electric Corporation Of America Apparatus and method for processing groups of fields in a video data compression system

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
1.1992年電子情報通信学会春季全国大会,D−B43 「MPEG動画符号化アルゴリズムのフィールド間予測への拡張」(1992.3)
2.1991年テレビジョン学会年次大会 16−1「フレーム間/フィールド間適応動き補償予測を用いた蓄積メディア用動画像符号化方式」(1991.7)
3.オプトロニクス No.5(1992.5)p.86−98(蓄積媒体における符号化)

Also Published As

Publication number Publication date
EP0576289A2 (en) 1993-12-29
KR940006412A (ko) 1994-03-23
JPH0698314A (ja) 1994-04-08
CN1086070A (zh) 1994-04-27
US5574504A (en) 1996-11-12
EP0576289A3 (en) 1994-09-28
CA2097780A1 (en) 1993-12-27

Similar Documents

Publication Publication Date Title
JP3443867B2 (ja) 画像信号符号化、復号化方法及び画像信号記録媒体
JP3348310B2 (ja) 動画像符号化方法および動画像符号化装置
US5305113A (en) Motion picture decoding system which affords smooth reproduction of recorded motion picture coded data in forward and reverse directions at high speed
US20040202249A1 (en) Real-time MPEG video encoding method of maintaining synchronization between video and audio
US5739862A (en) Reverse playback of MPEG video
KR100260475B1 (ko) 화상 데이타 부호화 방법 및 장치, 화상 데이타 복호화 방법 및 장치 및 화상 기록 매체
JP3147792B2 (ja) 高速再生のためのビデオデータの復号化方法及びその装置
JP2001346165A (ja) 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機
EP0899963B1 (en) Moving picture data decoding apparatus
KR100860661B1 (ko) 화상 재생 방법과 화상 처리 방법, 및 이들 방법을 이용가능한 화상 재생 장치, 화상 처리 장치, 텔레비전 수상기
JPH0750840A (ja) 符号記録装置
JPH06350995A (ja) 動画像処理方法
JP4073541B2 (ja) 動画像再符号化装置
JP3515565B2 (ja) 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機
WO1998042139A1 (en) Video decoder with reduced size display buffer
JPH1084545A (ja) ディジタルビデオ信号の符号化方法及び装置
JPH06339111A (ja) 圧縮動画像再生装置
JP2004015351A (ja) 符号化装置及び方法、プログラム、記録媒体
JP3449370B2 (ja) 画像データ復号化方法及び装置
JP3348356B2 (ja) 動画像復号化方法および装置
JPH06268992A (ja) 画像符号化方法、画像復号化方法、画像符号化装置、画像復号化装置及び記録媒体
JP3669536B2 (ja) 画像符号化復号化装置及びその方法
JP2001238167A (ja) 画像再生方法とこの方法を利用可能な画像再生装置およびテレビジョン受像機
JP3590976B2 (ja) 動画像圧縮装置
KR20000010607A (ko) 비디오 디코더 및 디코딩 방법

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20010914

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080627

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090627

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090627

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100627

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100627

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110627

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120627

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130627

Year of fee payment: 10

EXPY Cancellation because of completion of term