JP2001204036A - 画像予測復号化方法 - Google Patents

画像予測復号化方法

Info

Publication number
JP2001204036A
JP2001204036A JP2000368090A JP2000368090A JP2001204036A JP 2001204036 A JP2001204036 A JP 2001204036A JP 2000368090 A JP2000368090 A JP 2000368090A JP 2000368090 A JP2000368090 A JP 2000368090A JP 2001204036 A JP2001204036 A JP 2001204036A
Authority
JP
Japan
Prior art keywords
block
prediction
image
image data
coefficient
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2000368090A
Other languages
English (en)
Other versions
JP3157144B1 (ja
Inventor
Sen Bun Chun
セン・ブン チュン
Mei Shen Shen
メイ・シェン シェン
Thiow Keng Tan
ケン・タン ティオ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2000368090A priority Critical patent/JP3157144B1/ja
Application granted granted Critical
Publication of JP3157144B1 publication Critical patent/JP3157144B1/ja
Publication of JP2001204036A publication Critical patent/JP2001204036A/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • G06T9/004Predictors, e.g. intraframe, interframe coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

(57)【要約】 【課題】 従来技術に比較して、ブロック内の冗長性を
除去することができ、より効率的に画像データを復号化
することができる。 【解決手段】 可変長符号化されたDCT係数を含む入
力ビットストリームを入力し、可変長符号化されたDC
T係数をDCT係数の1次元列に復号化する。次いで、
上ブロック(A)、左ブロック(B)及び上ブロック
(A)と左ブロック(B)の間に位置する対角ブロック
(C')について、左ブロック(B)と対角ブロック
(C')とのDC係数の差及び対角ブロック(C')と上
ブロック(A)とのDC係数の差を求め、これらの差の
うちいずれが小さいかに基づいてカレントブロックに隣
接する上ブロック(A)又は左ブロック(B)のいずれ
かからカレントブロックのDC係数を予測すべき予測ブ
ロックを適応的に選択し、DC係数予測のために選択さ
れたブロックからカレントブロック(C)のAC係数を
予測する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、画像予測復号化方
法に関する。特に、静止画又は動画である画像のデジタ
ル画像データを、例えば光ディスクなどの記録媒体に記
憶し、又は通信回線を伝送した後の画像予測復号化方法
に関する。
【0002】
【従来の技術】デジタル画像を効率よく記憶し又は伝送
するには、圧縮符号化する必要がある。デジタル画像を
圧縮符号化するための方法として、JPEG(Joint Ph
otographic Experts Group)やMPEG(Motion Pictu
re Experts Group)に代表される離散コサイン変換(以
下、DCT変換という。)のほかに、サブバンド符号化
やウェーブレット符号化、フラクタル符号化などの波形
符号化方法がある。また、画像間の冗長な信号を取り除
くには動き補償を用いた画像間予測を行い、差分信号を
波形符号化する。
【0003】MPEGの方式では、入力画像を複数の1
6×16のマクロブロックに分割して処理する。1つの
マクロブロックをさらに8×8のブロックに分割し、8
×8のDCT変換処理を施してから量子化する。これは
フレーム内符号化と呼ばれる。
【0004】一方、ブロックマッチングをはじめとする
動き検出方法で、時間に隣接する別のフレームの中から
対象マクロブロックに誤差の最も小さい予測マクロブロ
ックを検出し、検出された予測マクロブロックを対象マ
クロブロックから減算し、差分マクロブロックを生成
し、8×8のDCT変換を施してから量子化する。これ
をフレーム間符号化と呼び、予測マクロブロックを時間
領域の予測信号と呼ぶ。このようにMPEGでは、同じ
フレームの中から画像を予測していない。
【0005】通常の画像は空間的に似ている領域が多
く、この性質を用いて空間領域に画像を近似することが
できる。時間領域の予測信号と同じように、同じフレー
ムの中から予測信号を求めることも可能である。これを
空間領域の予測信号と呼ぶ。
【0006】空間的に近接する2つの画素値が近いた
め、空間領域の予測信号は一般的に対象信号に近い位置
にある。一方、受信側又は再生側では、原画像がないた
め、予測信号は過去において符号化し再生された信号を
用いる必要がある。この2つの要素から、空間領域の予
測信号を高速に生成する必要がある。画素値を復号化し
再生した後すぐに予測信号の生成に用いられるからであ
る。
【0007】従って、空間領域の予測信号を簡単かつ高
精度に生成する必要がある。また、符号化装置及び復号
化装置において高速演算可能な構成が要求される。
【0008】ところで、画像データの符号化は、JPE
G、MPEG1、H.261、MPEG2及びH.263
などの多くの国際的標準に広く使用されて来た。後者の
標準の各々は符号化能率を更に改善している。すなわ
ち、同じ画質を表現するのに従来の標準に比べてビット
数をさらに減少する努力がなされてきた。
【0009】動画に対する画像データの符号化は、イン
トラフレーム符号化と予測フレーム符号化から成りたっ
ている。ここで、イントラフレーム符号化は、1つのフ
レームの画面内でのフレーム内符号化をいう。例えばM
PEG1標準のような代表的なハイブリッド符号化シス
テムにおいては、連続するフレームは次の3つの異なる
タイプに分類できる。 (a)イントラフレーム(以下、Iフレームとい
う。)、(b)予測フレーム(以下、Pフレームとい
う。)、及び(c)両方向予測フレーム(以下、Bフレ
ームという。)。
【0010】Iフレームは他のフレームと独立的に符号
化され、すなわち、Iフレームは他のフレームを用いる
ことなく圧縮される。Pフレームは、符号化されたフレ
ーム(それは、Pフレームである。)の内容を予測する
ために1つ前のフレームを用いることにより動きの検出
及び補償を通じて符号化されている。Bフレームは、1
つ前のフレームからの情報及びBフレームの中味のデー
タを予測する後続のフレームからの情報を用いる動きの
検出及び補償を用いることにより符号化されている。以
前のフレーム及び後続のフレームはIフレームか、又は
Pフレームである。Iフレームはイントラコードモード
に属している。Pフレーム及びBフレームは予測コード
モードに属している。
【0011】Iフレーム、Pフレーム及びBフレームの
符号化の性質が違っているように、その圧縮方法も各々
異なっている。Iフレームは、冗長性を減少させるため
に一時的な予測を使用しないので、Pフレーム及びBフ
レームに比べてより多くのビット数を必要とする。
【0012】ここで、MPEG2を例として説明する。
ビットレートを4Mビット/秒とし、画像は、30フレ
ーム/秒の画像と仮定する。一般的には、I、P及びB
フレームに用いられるビット数の比は6:3:1であ
る。従ってIフレームは約420Kbits/sを使用し、
Bフレームは約70Kbits/sを使用する。なぜならB
フレームは両方向から十分に予測されているからであ
る。
【0013】図14は、従来技術の画像予測符号化装置
の構成を示すブロック図である。DCT変換をブロック
に基づいて実行するので、最近の画像符号化方法はすべ
て、画像をより小さいブロックに分割することを基礎と
している。イントラフレーム符号化においては、入力さ
れたディジタル画像信号に対して、図14に示されるよ
うに、まず、ブロックサンプリング処理1001が実行
される。次いで、ブロックサンプリング処理1001後
のこれらのブロックに対して、DCT変換処理1004
が実行された後、量子化処理1005及びランレングス
ホフマン可変長符号化(VLC:Variable Length Codi
ng;エントロピー符号化)処理1006が実行される。
一方、予測フレーム符号化においては、入力されたディ
ジタル画像に対して動き補償処理1003が実行され、
そして、動き補償されたブロック(すなわち、予測され
たブロック)に対してDCT変換処理1004が実行さ
れる。次いで、量子化処理1005、及びランレングス
ホフマンVLC符号化(エントロピー符号化)処理10
06が実行される。
【0014】ブロックに基づくDCT変換処理1004
は、処理対象のブロック内の空間的な冗長性を除去し又
は減少させること、並びに、動き検出及び補償処理10
02,1003は隣接するフレームの間の一時的な冗長
性を除去し又は減少させることは、従来の画像符号化技
術から公知である。さらに、DCT変換処理1004及
び量子化処理1005の後に実行される、ランレングス
ホフマンVLC符号化又は他のエントロピー符号化処理
1006は、量子化されたDCT変換係数の間の統計的
冗長性を除去する。しかしその処理は、画面内のブロッ
クのみに対してのみある。
【0015】ディジタル画像は本来的性質として空間的
に大きな冗長性を有している。この冗長性は、画像のフ
レーム内のブロックのみでなく、ブロックを越えてブロ
ックとブロックとの間にも存在している。しかしなが
ら、現実の方法は画像のブロック間の冗長性を除去する
方法を使用していないことは、上述から明らかである。
【0016】現在の画像符号化手法においては、DCT
変換処理1004又は他の変換処理は、ハードウエアの
形成及び計算上の拘束条件のためにブロックに基づいて
実行される。
【0017】空間的な冗長性は、ブロックを基礎とする
変換処理によって減少されるが、それは1つのブロック
内でのみに限定される。隣接する2つのブロック間の冗
長性はあまりうまく考慮されていないが、常に多くのビ
ット数を消費するフレーム内符号化を用いればさらに減
少できるであろう。
【0018】さらに、ブロックを基礎とするDCT変換
処理が、処理対象のブロック内の空間的な冗長性を除去
し、又は減少させ、また、動き予測及び補償処理が、隣
接する2つのフレーム間の一時的な冗長性を除去し、又
は減少させることは、現在の画像符号化技術から公知で
ある。DCT変換処理及び量子化処理の後に実行され
る、ジグザグスキャン及びランレングスホフマンVLC
符号化処理又は他のエントロピー符号化処理は、量子化
されたDCT変換係数の中の統計的冗長性を除去する
が、なお、それは1つのブロック内に限定される。
【0019】ディジタル画像は本来高い空間冗長性を含
んでいる。この冗長性はブロックの内部に存在するのみ
でなく、画像のブロックを越えてそしてブロック間にも
存在している。従って、上記のことから明らかなよう
に、現存する方法においては、JPEG、MPEG1及
びMPEG2のDC係数の予測を除いて、1つの画像の
ブロック間の冗長性を除去する方法を全く用いていな
い。
【0020】MPEG1及びMPEG2においては、D
C係数の予測は、現在の符号化されているブロックから
前の符号化ブロックのDC値を減算することにより実行
される。これは予測が適切でない時に適応性又はモード
スイッチングを有しない簡単な予測方法である。さらに
それはDC係数を含むだけである。
【0021】当該技術分野の現在の状態では、ジグザグ
スキャンはランレングス符号化の前にすべてのブロック
に対して用いられている。ブロックの中味のデータに基
づいてスキャンを適応的にする試みはなされていない。
【0022】図22は、従来技術の画像予測符号化装置
の構成を示すブロック図である。図22において、従来
技術の画像予測符号化装置は、ブロックサンプリニング
ユニット2001、DCT変換ユニット2003、量子
化ユニット2004、ジグザグスキャンユニット200
5及びエントロピー符号化ユニット2006を備える。
本明細書において、「ユニット」という用語は、回路装
置を意味する。
【0023】イントラフレーム符号化(すなわち、フレ
ーム内符号化)においては、入力された画像信号に対し
て、ブロックサンプリング処理2001が実行された
後、直接に、DCT変換処理2003が実行され、そし
て、量子化処理2004、ジグザグスキャン処理200
5及びエントロピー符号化処理2006が順次実行され
る。一方、インターフレーム符号化(すなわち、フレー
ム間符号化、すなわち、予測フレーム符号化)において
は、ブロックサンプリング処理2001の後に、動き検
出及び補償処理がユニット2011において実行され、
次いで、ブロックサンプリング2001からの画像デー
タをユニット2011からの検出値を減算することによ
り、加算器2002により予測誤差が得られる。さら
に、この予測誤差に対して、DCT変換処理2003が
実行され、続いて量子化処理2004、ジグザグスキャ
ン処理2005及びエントロピー符号化処理2006
が、イントラフレーム符号化と同様に実行される。
【0024】図22の画像予測符号化装置内に設けられ
るローカルデコーダにおいて、逆量子化処理及び逆DC
T変換処理はユニット2007及び2008において実
行される。イントラフレーム符号化においては、動き検
出及び補償された予測値は、ユニット2007及び20
08によって再構築された予測誤差に加算器2009に
よって加算され、その加算値は、局所的に復号化された
画像データを意味し、その復号化された画像データは、
ローカルデコーダのフレームメモリ2010に記憶され
る。最終的には、ビットストリームがエントロピー符号
化ユニット2010から出力されて、相手方の画像予測
復号化装置に送信される。
【0025】図23は、従来技術の画像予測復号化装置
の構成を示すブロック図である。ビットストリームは、
可変長デコーダ(VLD:Variable Length Decoding)
ユニット(又はエントロピー復号化ユニット)2021
によって復号化され、次いで、復号化された画像データ
に対して、逆量子化処理及び逆DCT変換処理がユニッ
ト2023及び2024において実行される。インター
フレーム符号化において、ユニット2027で形成され
た、動き検出及び補償された予測値は、加算器2025
によって再構築された予測誤差に加算され、局所的な復
号化画像データが形成される。局所的に復号化された画
像データはローカルデコーダのフレームメモリ1026
に記憶される。
【0026】
【発明が解決しようとする課題】現在の画像符号化技術
においては、DCT変換処理又は他の変換処理は、ハー
ドウェアの形成及び計算上の拘束条件のために、ブロッ
クを基礎として実行されている。空間的冗長性はブロッ
クを基礎とする変換によって削減されるであろう。しか
しながら、それはブロック内のみである。隣接するブロ
ック間の冗長性はあまり十分に考慮されていない。特
に、常に多量のビットを消費するイントラフレーム符号
化については特に考慮がなされていない。
【0027】本発明の目的は、従来技術に比較して、ブ
ロック内の冗長性を除去することができ、より効率的に
画像データを復号化することができる画像予測復号化方
法を提供することにある。
【0028】
【課題を解決するための手段】本発明に係る画像予測復
号化方法は、可変長符号化されたDCT係数を含む入力
ビットストリームを入力するステップと、上記可変長符
号化されたDCT係数をDCT係数の1次元列に復号化
するステップと、上ブロック(A)、左ブロック(B)
及び上記上ブロック(A)と上記左ブロック(B)の間
に位置する対角ブロック(C')について、上記左ブロ
ック(B)と上記対角ブロック(C')とのDC係数の
差及び上記対角ブロック(C')と上記上ブロック
(A)とのDC係数の差を求め、これらの差のうちいず
れが小さいかに基づいてカレントブロックに隣接する上
ブロック(A)又は左ブロック(B)のいずれかから上
記カレントブロックのDC係数を予測すべき予測ブロッ
クを適応的に選択し、上記DC係数予測のために上記選
択されたブロックから上記カレントブロック(C)のA
C係数を予測するステップと、上記予測ブロックのAC
係数について、カレントブロックの量子化ステップサイ
ズによりスケーリングを行うステップと、上記スケーリ
ングされた上記予測ブロックのAC係数からカレントブ
ロックのAC係数を予測するステップとを含むことを特
徴とする。
【0029】
【発明の実施の形態】以下、本発明に係る好ましい実施
形態について、添付の図面を参照して説明する。
【0030】<第1の実施形態グループ>第1の実施形
態グループは、第1の乃至第4の実施形態を含む。
【0031】<第1の実施形態>図1は、本発明に係る
第1の実施形態である画像予測符号化装置の構成を示す
ブロック図である。
【0032】図1において、101は入力端子、102
は第1の加算器、103は符号化器、106は出力端
子、107は復号化器、110は第2の加算器、111
はラインメモリ、112は予測信号発生器である。
【0033】以下、画像予測符号化装置の構成及び動作
について説明する。入力端子101に、符号化の処理対
象となる画像データが入力される。ここで、入力された
画像データは複数の隣接する小領域に分割される。
【0034】図2において、8×8の小領域に分割され
た場合の入力された画像データの画像を示し、図3にお
いて、三角形小領域に分割された場合の入力された画像
データの画像を示す。複数の小領域の画像データを順次
に符号化するが、処理対象の小領域の画像データは、入
力端子101及びライン113を介して加算器102に
入力される。一方、予測信号発生器112は、画面内予
測小領域の画像データを発生し、発生された画像データ
を最適予測小領域の画像データとして、ライン121を
介して加算器102に出力する。
【0035】加算器102は、処理対象の小領域におけ
る入力された画像データの画素値から、予測信号発生器
112からの最適予測小領域の対応する画素値を減算
し、減算結果の差分小領域の画像データを生成して符号
化器103に出力して、圧縮符号化処理を実行する。本
実施形態では、符号化器103はDCT変換器104と
量子化器(Q)105を備え、差分小領域の画像データ
は、DCT変換器104によって周波数領域の画像信号
に変換され、DCT変換係数を得る。次いで、DCT変
換係数は、量子化器105によって量子化される。量子
化された小領域の画像データはライン116を介して出
力端子106に出力され、さらに可変長又は固定長の符
号に変換された後、例えば光ディスクなどの記録媒体に
記憶され又は通信回線を介して伝送される(図示せ
ず。)。
【0036】同時に、量子化された小領域の画像データ
は復号化器107に入力され、ここで、当該復号化器1
07は、逆量子化器108と逆DCT変換器109とを
備え、入力された小領域の画像データを、伸長差分小領
域の画像データに復元する。本実施形態では、入力され
た小領域の画像データは、逆量子化器108によって逆
量子化された後、逆量子化された画像データは、逆離散
コサイン変換器(以下、逆DCT変換器という。)10
9によって空間領域の画像信号に変換される。このよう
に得られた伸長差分小領域の画像データは加算器110
に出力され、加算器110は、伸長差分小領域の画像デ
ータに、予測信号発生器112からライン121とライ
ン122を介して出力される最適予測画像信号を加算し
て、再生小領域の画像データを生成し、再生小領域の画
像データの中から、画面内予測画像信号を生成するため
の再生画素値をラインメモリ111に格納する。予測信
号発生器112は以下のように、画面内予測小領域の画
像データを発生する。すなわち、予測信号発生器112
は、処理対象の小領域の画像データに隣接する再生され
た画像データの画素値を、画面内予測小領域の画像デー
タの画素値として発生する。
【0037】図2において、ブロック200を処理対象
の小領域とすると、隣接する再生された画像データの画
素値はa0、a1、a2、…、a6、a7、b0、b
1、b2、…、b6、b7である。図3において、三角
形301を処理対象の小領域とすると、隣接する再生さ
れた画像データの画素値はg0、g1、…、g4、f
0、f1、f2、…、f7、f8である。また、図3の
三角形300を処理対象の小領域とすると、隣接する再
生された画像データの画素値はe0、h0、h1、…、
h4である。これらの画素値をラインメモリ111に格
納する。予測信号発生器112はラインメモリ111を
アクセスし隣接する画像データの画素値を画面内予測小
領域の画像データの画素値として読み出す。
【0038】図4及び図5はそれぞれ、図1の画像予測
符号化装置に用いられる予測信号発生器の第1及び第2
の実施例の構成を示すブロック図である。
【0039】図4において、処理対象の小領域に対して
水平方向に隣接する画素値a0、a1、a2、…、a
6、a7はラインメモリ111から予測信号発生器11
2に入力され、予測信号発生器112内の発生器401
は、水平方向に同一の画素を例えば8回繰り返して出力
することにより、画面内予測小領域の画像データ403
を生成する。ここで、画面内予測小領域の画像データ4
03は処理対象の小領域に対して垂直方向に隣接する画
素が存在しない場合に用いられる。
【0040】図5において、処理対象の小領域に対して
垂直方向に隣接する画素値b0、b1、b2、…、b
6、b7がラインメモリ111から予測信号発生器11
2に入力され、予測信号発生器112内の発生器402
は、垂直方向に画素を例えば8回繰り返して出力するこ
とにより、画面内予測小領域の画像データ404を生成
する。ここで、画面内予測小領域の画像データ404
は、処理対象の小領域に対して水平方向に隣接する画素
がない場合に用いられる。水平方向及び垂直方向共に隣
接する画素値が存在する場合、図6に示す第3の実施例
のように画面内予測小領域の画像データを生成する。
【0041】図6は、図1の画像予測符号化装置に用い
られる予測信号発生器の第3の実施例の構成を示すブロ
ック図である。
【0042】図6において、発生器401によって発生
された画面内予測小領域の画像データ403(図5参
照。)と、発生器402によって発生された画面内予測
小領域の画像データ404とは加算器500に入力さ
れ、加算器500は、入力された2つの画像データの和
を2で除算することにより、これら2つの画像データを
平均化する。このように、発生器401,402により
隣接する再生された画素を繰り返して出力し、加算器5
00により平均化演算を行うだけなので、画面内予測小
領域の画像データを高速に生成することができる。な
お、隣接する2つの画像データの画素値を線形補間する
ことにより画面内予測小領域の画像データを生成しても
よい。
【0043】図7は、図1の画像予測符号化装置に用い
られる予測信号発生器の第4の実施例の構成を示すブロ
ック図である。
【0044】図7において、処理対象の小領域に対して
水平方向に隣接する画像データの画素値a0、a1、a
2、…、a6、a7は、ラインメモリ111から発生器
401に入力され、発生器401は、水平方向に画素を
繰り返して出力することにより第1の画面内予測小領域
の画像データを生成する。一方、処理対象の小領域に対
して垂直方向に隣接する画素値b0、b1、b2、…、
b6、b7は、ラインメモリ111から発生器402に
入力され、発生器402は、垂直方向に画素を繰り返し
て出力することにより第2の画面内予測小領域の画像デ
ータを生成する。第1の画面内予測小領域の画像データ
と、第2の画面内予測小領域の画像データは加算器50
0に入力され、これら2つの画像データを平均化するこ
とにより第3の画面内予測小領域の画像データを生成す
る。
【0045】一方、処理対象の小領域の画像データは、
ライン616を介して誤差計算器601,602,60
3に入力される。ここで、上記第1の画面内予測小領域
の画像データと、処理対象の小領域の画像データは、誤
差計算器601に入力され、誤差計算器601はそれら
2つの画像データの誤差の絶対値である第1の絶対誤差
を計算して比較器604に出力する。また、上記第2の
画面内予測小領域の画像データと、処理対象の小領域の
画像データは誤差計算器602に入力され、誤差計算器
602はこれら2つの画像データの誤差の絶対値である
第2の絶対誤差を計算して比較器604に出力する。さ
らに、上記第3の画面内予測小領域の画像データと、処
理対象の小領域の画像データは、誤差計算器603に入
力され、誤差計算器603はこれら2つの画像データの
誤差の絶対値である第3の絶対誤差を計算して比較器6
04に出力する。
【0046】比較器604は、入力される3つの絶対誤
差を互いに比較して、絶対誤差の最も小さいものを決定
し、それに対応する画面内予測小領域の画像データをラ
イン121に出力するようにスイッチ605を制御す
る。比較器604は、同時に、第1、第2及び第3の画
面内予測小領域の画像データを識別するための識別子を
ライン615を介して受信側又は再生側の装置に出力す
る。この識別子により、受信側又は再生側では画面内予
測小領域の画像データが一意に決まる。このように誤差
の最も小さい画面内予測小領域の画像データを用いるこ
とによって、符号化時の差分信号を抑圧することがで
き、発生ビット数を削減することができる。
【0047】<第2の実施形態>図8は、本発明に係る
第2の実施形態である画像予測符号化装置の構成を示す
ブロック図であり、図1と同様のものは同一の符号を付
している。 図8の画像予測符号化装置は、図1の画像
予測符号化装置に比較して、動き検出器700、動き補
償器701、最適モード選択器703とフレームメモリ
702を追加して備えたことを特徴とする。
【0048】以下、図8の画像予測符号化装置の構成及
び動作について説明する。
【0049】入力端子101を介して、第1の実施形態
と同様に、入力された処理対象の小領域の画像データが
加算器102に入力され、加算器102は、処理対象の
小領域の画像データを、最適モード選択器703からラ
イン121を介して入力される最適予測小領域の画像デ
ータから減算した後、減算結果の画像データを符号化器
103に出力する。符号化器103は、入力される減算
結果の画像データを圧縮符号化して出力端子106を介
して出力すると同時に、圧縮符号化された小領域の画像
データを復号化器107に出力して伸長復号化させた
後、加算器110に出力して、伸長復号化された画像デ
ータを最適予測小領域の画像データと加算する。
【0050】次いで、第1の実施形態と同様に、画面内
予測小領域の画像データを生成するために用いられる画
像データの画素値のみをラインメモリ111に格納する
一方、再生された画像の画素値をすべてフレームメモリ
702に格納する。
【0051】次の画像の画像データが入力端子101を
介して入力されるときに、動き検出器700には、処理
対象の小領域の画像データと、フレームメモリ702に
格納された再生画像データとが入力され、動き検出器7
00は、ブロックマッチングなどの方法で画像の動きを
検出し、動きベクトルをライン705を介して出力す
る。出力された動きベクトルは、例えば可変長符号化し
て記憶又は伝送される(図示せず。)と同時に動き補償
器701に送られる。動き補償器701は、動きベクト
ルに基づいてフレームメモリ702の再生画像から時間
予測小領域の画像データを生成して、最適モード選択器
703に出力する。動き検出処理及び動き補償処理にお
いては、前方予測と、後方予測と、両方向予測とがあ
り、これらの方法は、例えば米国特許第5,193,0
04号明細書に開示されている。
【0052】一方、予測信号発生器112は、第1の実
施形態と同様に、画面内予測小領域の画像データを発生
して最適モード選択器703に出力すると同時に、処理
対象の小領域の画像データを最適モード選択器703に
出力する。最適モード選択器703は、画面内予測小領
域の画像データと、時間予測小領域の画像データとか
ら、処理対象の小領域の画像データに最も誤差(例え
ば、画素毎の差の絶対値の和)の小さい画像データを選
択し、選択された画像データを最適予測小領域の画像デ
ータとして加算器102に出力する。また、どの予測小
領域の画像データが選択されたかを示す識別子をライン
709を介して受信側又は再生側に出力して伝送する。
【0053】このようにフレーム間動き補償符号化の画
像データに、画面内予測を導入することによりフレーム
間の動きベクトルを伝送する必要がないため、ビット数
をさらに削減できる。
【0054】第1と第2の実施形態では、画面全体に有
意な画素が存在する場合である。画面内に有意であると
そうでない画素が存在する場合がある。例えば、クロマ
キーで撮影された画像では、被写体を表す画素は有意な
もので、背景となるブルーなど領域を現す画素は有意で
ない画素である。有意な物体のテキスチャー及びその形
状を符号化して伝送することにより、物体単位の再生表
示が可能である。このような入力画像に対して、予測信
号発生器112で画面内予測小領域の画像データを生成
する場合、有意でない画素値を用いることができない。
【0055】図9乃至図11は有意な画素と有意でない
画素をもつ入力画像の模式図を示す。本実施形態におい
ては、画素が有意であるかどうかを示すには形状信号を
用いる。形状信号を所定の方法で圧縮符号化して受信側
又は再生側に伝送する。形状を符号化する方法として
は、チェーン符号化などの方法がある。圧縮された形状
信号をまた伸長再生し、再生された形状信号を用いて以
下に述べるように画面内予測信号を生成する。
【0056】図9においては、形状曲線800が境界線
で、矢印の示す方向が物体の内部であって、物体の内部
の画像データは有意な画素から構成される。処理対象の
小領域802に隣接する再生された画素の中で、b4、
b5、b6、b7が有意な画素で、これらの画素値のみ
を繰り返して処理対象の小領域802の画面内予測小領
域の画素値とする。
【0057】また、図10においては、形状曲線804
が境界線で、矢印の示す方向が物体の内部であって、物
体の内部の画像データは有意な画素から構成される。処
理対象の小領域805に隣接する再生された画素の中
で、a4、a5、a6、a7が有意な画素であって、こ
れらの画素値のみを繰り返して処理対象の小領域805
の画面内予測小領域の画素値とする。
【0058】さらに、図11においては、曲線808が
境界線で、矢印の示す方向が物体の内部であって、物体
の内部の画像データは有意な画素から構成される。処理
対象の小領域810に隣接する再生された画素の中で、
a5、a6、a7、b4、b5、b6、b7が有意な画
素であって、これらの画素値のみを繰り返して出力し、
2つの画素値が重なるところでは、それらの画素値を平
均化した値を処理対象の小領域810の画面内予測小領
域の画素値とする。
【0059】図11において、例えば、処理対象の小領
域810の画素z77の値はa7とb7の平均値とす
る。また、画素値が1つもないところでは、水平方向及
び垂直方向に隣接する2つの画素値の平均値をとる。例
えば、画素z14の値はa5とb4の平均値とする。こ
のように、任意の形状をもつ画像の画面予測小領域の画
像データを生成する。
【0060】以上の実施形態においては、正方形状に分
割された小領域について説明したが、本発明はこれに限
らず、図3と同様に、画面を三角形の小領域に分割して
もよい。この場合においても、画像処理が同様に実行さ
れる。
【0061】また、別の実施形態として、有意な画素値
だけを用いて平均値を求めて、その平均値を画面内予測
小領域の画素値としてもよい。具体的には、図9では、
画素b4、b5、b6、b7の平均値を計算し、計算さ
れた平均値を画面内予測小領域の画素値とする。図10
では、画素a4、a5、a6、a7の平均値を計算し、
計算された平均値を画面内予測小領域の画素値とする。
図11では、画素a5、a6、a7、b4、b5、b
6、b7の平均値を計算し、画面内予測小領域の画素値
とする。
【0062】<第3の実施形態>図12は、本発明に係
る第3の実施形態である画像予測復号化装置の構成を示
すブロック図である。
【0063】図12において、901は入力端子、90
2はデータ解析器、903は復号化器、906は加算
器、907は出力端子、908はコントローラ、909
は動き補償器、910は予測信号発生器、911はライ
ンメモリ、912はフレームメモリである。
【0064】以下、図12の画像予測復号化装置の構成
及び動作について説明する。図12において、圧縮符号
化された画像データはデータ解析器902に入力され、
データ解析器902は入力された画像データを解析し
て、圧縮差分小領域の画像データをライン915を介し
て復号化器903に出力し、また、制御信号をライン9
26を介してコントローラ908に出力し、さらには、
上述の動きベクトル(存在する場合のみ)を動き補償器
909に出力する。復号化器903は、逆量子化器90
4と、逆DCT変換器905を備え、圧縮された差分小
領域の画像データを伸長して、伸長差分小領域の画像デ
ータに復元する。
【0065】本実施形態では、圧縮された差分小領域の
画像データは、逆量子化器904により逆量子化された
後、逆量子化後の周波数領域の画像データは、逆DCT
変換器905により空間領域の画像データに変換され
る。変換後の伸長差分小領域の画像データは加算器90
6に入力され、加算器906は、入力される伸長差分小
領域の画像データを、動き補償器923又は予測信号発
生器922からスイッチ913及びライン924を介し
て送られる最適予測小領域の画像データに加算し、加算
結果の再生小領域の画像データを生成する。加算器90
6は、再生された画像データをライン917を介して出
力端子907に出力すると同時に、フレームメモリ91
2に格納する。また、画面内予測小領域の画像を生成す
るために用いられる画像データの画素値をラインメモリ
911に格納する。
【0066】最適予測小領域の画像データは、データ解
析器902からの制御信号に基づいてコントローラ90
8によって決定されてスイッチ913の切り換えが制御
される。画面内予測小領域の画像データがコントローラ
908によって選択される場合、スイッチ913はライ
ン924をライン922に接続し、コントローラ908
からの制御信号に応答して、予測信号発生器910はラ
インメモリ911をアクセスして、隣接する再生画素値
を画面内予測小領域の画素値として出力する。予測信号
発生器910の動作の詳細については、図4、図5及び
図6を参照して詳細上述している。また、時間予測小領
域の画像データがコントローラ908によって選択され
る場合、スイッチ913はライン924をライン923
に接続し、コントローラ908からの制御信号に応答し
て、動き補償器909はデータ解析器902からライン
925を介して送られる動きベクトルに基づいて、フレ
ームメモリ912からの画像データに対して動き補償処
理を実行することにより、時間予測小領域の画像データ
を発生して、スイッチ913及びライン924を介して
加算器906に出力する。
【0067】<第4の実施形態>図13は、本発明に係
る第4の実施形態である画像予測復号化装置の構成を示
すブロック図であり、図13において図12と同様のも
のについては同一の符号を付している。図13の画像予
測復号化装置は、図12の画像予測復号化装置の基本構
成に加えて、形状復号化器990を追加して備えたこと
を特徴とする。図13の画像予測復号化装置の基本動作
も図12と同じであるため、異なる動作だけについて以
下に詳細に説明する。
【0068】本実施形態においては、圧縮符号化された
画像データには、圧縮符号化された形状データが含まれ
る。データ解析器902は、この形状データを抽出して
形状復号化器990に出力し、これに応答して形状復号
化器990は形状信号を伸長再生する。再生された形状
信号は受信側又は再生側に伝送される同時に、予測信号
発生器910に入力される。予測信号発生器910は、
この再生された形状信号に基づいて、図9乃至図11を
参照して説明したように、画面内予測小領域の画像デー
タを生成する。このようにして、任意の形状をもつ画像
の画面内予測小領域の画像データを生成し、受信側又は
再生側において、画像データを復号化し、再生すること
ができる。
【0069】第3と第4の実施形態の特徴は、ラインメ
モリ911を備えた事である。ラインメモリ911がな
ければ、画面内予測小領域の画像データを生成するため
の画素をフレームメモリ912からアクセスしなければ
ならない。隣接する小領域の画素で予測信号を生成する
ために、高速にフレームメモリを書き込み、読み出しす
ることが必要である。専用のラインメモリやバッファを
設けることにより高速なフレームメモリを用いないで高
速に画面内予測小領域の画像データを生成することが可
能になる。
【0070】以上の実施形態において、複数の画素値の
平均値は、所定の重み付け平均値であってもよい。
【0071】以上説明したように、本発明の第1の実施
形態グループによれば、処理対象の小領域の画像データ
に隣接する再生された画素値を画面内予測信号の画素値
とするだけで、従来技術に比較して低い演算量で簡単に
高精度な予測信号を生成することができ、フレーム内符
号化のビット数を削減することができるという特有の効
果が得られる。また、画面内予測信号を生成するために
用いられる再生された画素値を格納するために、ライン
メモリ911を設けているので、画素値を高速にアクセ
スすることができ、画面内予測信号を高速に生成するこ
とができる。
【0072】<第2の実施形態グループ>第2の実施形
態グループは、第5乃至第7の実施形態を含む。
【0073】本発明者は、従来技術の問題点に鑑みて、
画像符号化能率が、2つの画像間又は1つの画像内の2
つのブロックの内部の間のみならず、1つの画像内の2
つのブロック間の冗長性を除去することにより、画像符
号化能率をさらに改善することを見いだした。
【0074】本発明者は隣接するブロックの、同じ位置
のDCT変換係数は多くの場合非常に近似していること
を発見した。特に、2つのブロックに対する原画像の組
織がよく似ている場合、又は同じ画像パターン、例えば
直線、角、その他を含んでいる場合には近似が高いこと
を発見した。同一の情報は情報理論により冗長を意味す
る。
【0075】ブロックを越えてDCT変換領域の中に存
在するこの種の冗長は、以前のブロックからの適応的イ
ントラ予測(フレーム内予測)により除去されるか、又
は大幅に減少させることができる。そして、次のVLC
エントロピー符号化処理は、予測の小さいエントロピー
によりさらに高い符号化能率を達成することができる。
このDCT変換領域の予測の結果として、VLCエント
ロピー符号化回路への冗長データの入力は、大幅に減少
されうる。そのために多くのビットの節約が期待でき
る。従って、符号化された画図データの画質は明確に改
善される。
【0076】本発明に係る本実施形態は、他のブロック
からのDCT変換係数を適格に予測する方式を提供す
る。この方式により隣接するブロックを越えて存在する
冗長性を除去し、量子化されたDCT変換係数のエント
ロピーをより小さくし、その結果、DCT変換係数を符
号化するための必要なビット数を減少することができ
る。
【0077】処理対象である現時点のカレントブロック
(以下、カレントブロックという。)のDCT変換係数
は以前の隣接するブロックの中の同じ位置のDCT変換
係数から予測できる。隣接するブロックは、処理時に既
に復号化されている。すなわち、以前に復号化された隣
接するブロックの1つの中の第1のDC係数により第1
のDC係数は予測される。また、第2の係数AC1は、
同じ復号化されたブロックの中の第2の係数AC1から
予測される。以下同様に実行される。この方法を用いる
ことにより、数個の予測されるブロックを、現時点に符
号化されているDCT変換ブロックに対して上向き左側
に、斜めに左側に、上向きに斜めに右側に、及び上向き
にある隣接する復号化されたブロックから求めることが
できる。これらの予測されたブロックに対して、実際の
エントロピー符号化が実行されることによりチェックさ
れる。そして、より少ないビット数を持つ予測ブロック
が選択された後、エントロピー符号化されて、付加的指
示ビットとともに受信側又は再生側の画像予測復号化装
置に伝送される。画像予測復号化装置には、どの隣接す
るブロックからカレントブロックが予測したかを報告す
る。
【0078】本発明に係る本実施形態の方法は、カレン
トブロックのDCT変換係数を予測することができる。
そのDCT変換係数は他の隣接するブロックのDCT変
換係数と良好な相互関係を一般に保有している。その理
由はDCT変換は、同様のブロック画像に対しては、D
CT変換係数の同一の値又は同一の分布を与える傾向に
あるからである。
【0079】イントラフレームか、又は一時的に予測さ
れたフレームである、入力された画像データに対して通
常、まずブロックに基づいたDCT変換処理が実行され
る。カレントブロックのDCT変換係数が得られた後
に、DCT変換領域の予測処理を量子化前に、また量子
化の後に実行することができる。
【0080】カレントブロックのDCT変換係数は、図
15に示されるように、既に復号化されたブロックであ
って、隣接するブロック、すなわち、左上のブロックB
1、上のブロックB2、右上のブロックB3、左のブロ
ックB4から予測することができる。予測されたブロッ
クは、カレントブロックのDCT変換係数の全てを、同
じ位置にある以前の隣接するブロックのDCT変換係数
の全てから減算することにより得られる。また全てのD
CT変換係数の代わりに、部分的にDCT変換係数を減
算することにより得ることができる。
【0081】異なる予測されたブロックにおける予測さ
れたDCT変換係数は、量子化の前に予測が実行される
ならば、量子化される。次いで、DCT変換係数に対し
て、エントロピー符号化処理が実行される。そのエント
ロピー符号化処理は、画像予測符号化装置のそれと同一
であり、どの予測されたブロックが下位ビットとして使
用するかチェックされる。
【0082】下位ビットを使用する予測ブロックが選択
され、選択された予測ブロックは、予測決定について画
像予測復号化装置に知らせる指示ビットとともにエント
ロピー符号化される。
【0083】画像予測復号化装置においては、指示ビッ
トを用いて予測されたブロックが復号化される。すなわ
ち、1つのブロックに対して予測されたDCT変換係数
を逆エントロピー復号化した後に、当該ブロックに対す
るDCT変換係数は、指示ビットによって表される前に
復号化された隣接するブロックの基準DCT変換係数を
上記復号化されたDCT変換係数に加算することによっ
て得られる。最終的に、逆DCT変換処理が各々のブロ
ックに対する復元されたDCT変換係数に適用され、復
号化された画像データが得られる。
【0084】本発明に係る本実施形態は、通常DCT変
換のような変換によって除去される空間的な冗長性、動
き検出及び補償によってフレーム間で除去される冗長性
及びブロック内の量子化変換係数の中でエントロピー符
号化によって除去される統計的冗長性以外に、隣接する
ブロックを越えてDCT変換領域に存在する他の種類の
冗長性を減少させることができる画像符号化装置を提供
するものである。
【0085】従来技術の画像予測符号化装置を示す図1
4からわかるように、従来の画像符号化(例えば、MP
EGにおいて)に一般的に使用されている画像予測符号
化装置は、ブロックサンプリングユニット1001、D
CT変換ユニット1004、量子化器1005及びエン
トロピー符号化器1006を備える。
【0086】イントラフレーム符号化(フレーム内符号
化)においては、入力された画像信号に対してまず、ブ
ロックサンプリング処理が実行される。次に直接にDC
T変換処理が実行される。それに続いて、量子化処理及
びエントロピー符号化処理が実行される。一方、インタ
ーフレーム符号化(予測フレーム符号化)においては、
ブロックサンプリング処理の後に、処理対象の現時点の
フレームのが画像データに対して、動き検出ユニット1
002及び動き補償ユニット1003の処理が実行さ
れ、さらに、DCT変換処理が実行される。さらに、量
子化処理及びエントロピー符号化処理が実行される。
【0087】ここで、エントロピー符号化ユニット10
06において、量子化値はエントロピー符号化されて符
号データが出力される。エントロピー符号化とは、よく
発生する値には短い符号語を、あまり発生しない値には
長い符号語を割り当てることにより、平均情報量である
エントロピーに近づくように符号化して、全体としての
符号量を大幅に削減する方式である。これは、可逆符号
化である。エントロピー符号化として種々の方式が提案
されているが、ベースラインシステムでは、ハフマン符
号化を用いる。量子化されたDC係数値とAC係数値で
は、ハフマン符号化の方法が異なり、すなわち、DC係
数は8×8画素ブロックの平均値を示すが、一般の画像
では隣のブロックとの平均値は似通った値を持つことが
多い。そこで、前のブロックとの差分をとった後にエン
トロピー符号化を行う。こうすると、0付近に値が集中
するので、エントロピー符号化が効果的となる。また、
AC係数については、例えばジグザグスキャンを行い2
次元データを1次元データに変換する。さらに、特に高
周波成分を含むAC係数は0が多く発生するので、0以
外の値を持つAC係数の値とその前に0がいくつあるか
(ランレングス)を組としてエントロピー符号化する。
【0088】レートコントローラ1007は前に符号化
されたブロックに用いられたビットをフィードバック
し、量子化ユニット1005の処理を制御しかつコード
ビットレートを調整する。ここで、レートコントローラ
1007は、符号化された単位の性質や利用可能なビッ
トに基づいて各符号化されたオブジェクトデータ、各フ
レーム及び各符号化されたブロックに対して異なるビッ
ト量を割り当てるようにコードビットレートを制御す
る。また、逆量子化処理及び逆DCT変換処理はローカ
ルデコーダの一部としてのユニット1008及び100
9において実行される。ローカルデコーダで復号化され
た画像データはローカル復号化フレームメモリ1010
に記憶され、動き検出処理ために利用される。1011
は動き検出のために、前の原フレームを保存する基準フ
レームメモリである。そして、最後にビットストリーム
がエントロピー符号化ユニット1006から出力され
て、受信側又は再生側の画像予測復号化装置に送られ
る。
【0089】図15は、画面内予測のための適応的DC
T変換領域を説明するための画像の模式図である。
【0090】図15において、DCT変換領域におい
て、8×8の4個のDCT変換ブロックがマクロブロッ
クを構成していることが示されている。ここで、B0は
8×8のDCT変換係数を有する現時点のカレントブロ
ックを示す。B2は既に復号化された上側に隣接するブ
ロックを示す。B1及びB3は既に復号化された斜め上
の隣接する2つのブロックを示す。B4は、左側に隣接
する直前のブロックを示す。DCT変換係数を持つブロ
ックは、8×8のDCT変換係数を有する、復号化され
た隣接する複数のブロックから予測できることが図15
からわかる。
【0091】どのブロックからカレントブロックが予測
されたかが常に違っていることに注意すべきである。従
って、最小ビット使用規則に基づく決定が実行され、そ
の決定は画像予測復号化装置側の異なるブロックに適応
的に与えられる。その決定は、指示ビットにより画像予
測復号化装置に報知される。ここで、最小ビット使用規
則は、異なる複数の予測方法の中で予測方法を決定する
ために用いられ、各予測方法が適用された後に、ブロッ
クを符号化するために用いられるビット量が計数され
る。結果として、使用される最小のビット量をもたらす
方法が、使用すべき予測方法として、選択される。
【0092】なお、DCT変換領域予測は量子化の後及
びまた前に実施されることができる。
【0093】<第5の実施形態>図16は、本発明に係
る第5の実施形態である画像予測符号化装置の構成を示
すブロック図である。図16の画像予測符号化装置は、
DCT変換領域予測処理は、量子化処理の後に実行され
ることを特徴としている。
【0094】図16において、入力された画像信号に対
してまず、ブロックサンプリングユニット1012によ
ってブロックサンプリングが実行される。そして、イン
トラフレーム符号化においては、サンプルされたブロッ
ク画像データは加算器1013の処理が実行されずに、
加算器1013を通過してDCT変換ユニット1014
に入力される。一方、予測フレーム符号化においては、
加算器1013は、サンプルされたブロック画像データ
から動き検出及び補償ユニット1025から出力される
動き検出画像データを減算して、減算結果の画像データ
をDCT変換ユニット1014に出力する。そして、D
CT変換処理がユニット1014で実行された後、量子
化処理がユニット1015で実行される。
【0095】DCT変換領域予測処理はユニット101
7で実行され、1018は予測のために前に復号化され
たブロックを格納するためのブロックメモリである。加
算器1016は、量子化ユニット1015から出力され
る現時点のDCT変換ブロックから、DCT変換領域予
測ユニット1017から出力される復号化された隣接す
るブロックを減算する。この符号化された隣接するブロ
ックの決定はDCT変換領域予測ユニット1017にお
いて行われる。最後に、予測されたDCT変換ブロック
に対して、ユニット1020によってエントロピーVL
C符号化処理が実行され、符号化されたビットはビット
ストリームに書きこまれる。
【0096】加算器1019は、予測のために用いられ
る前の隣接するブロックを、予測ブロックに加算するこ
とにより、現時点のDCT変換ブロックを復元する。次
いで、復元されたDCT変換ブロックに対して、逆量子
化処理及び逆DCT変換処理はそれぞれユニット102
1及び1022において実行される。局所的に復号化さ
れて逆DCT変換ユニット1022から出力されるブロ
ックの画像データは加算器1023に入力される。加算
器1023は、復元されたブロックの画像データに前の
フレームの画像データを加算することによって、再構築
された画像データを得てフレームメモリ1024に記憶
される。動き検出及び補償処理はユニット1025で実
行される。動き検出及び補償処理のための前のフレーム
を格納するためにフレームメモリ1024が用いられ
る。
【0097】<第6の実施形態>図17は、本発明に係
る第6の実施形態である画像予測符号化装置の構成を示
すブロック図である。図17の画像予測符号化装置は、
量子化処理の前に、DCT変換領域予測処理が実行され
たことを特徴としている。入力された画像信号に対し
て、ユニット1026においてブロックサンプリング処
理が実行される。次いで、加算器1027は予測フレー
ム符号化のために減算を行い、減算結果の画像データ
は、DCT変換ユニット1028、加算器1029及び
量子化ユニット1030を介して、エントロピーVLC
符号化ユニット1034及び逆量子化ユニット1033
に出力される。
【0098】ブロックメモリ1032は、ユニット10
31のDCT変換領域予測処理のために前のブロックの
画像データを格納している。DCT変換ユニット102
8から出力される現時点のDCT変換ブロックの画像デ
ータは、加算器1029によって、最小ビット使用規則
に従ってDCT変換領域予測ユニット1031で選択さ
れた前のDCT変換ブロックから減算される。減算結果
のDCT変換ブロックの画像データは、量子化ユニット
1030によって量子化された後、逆量子化ユニット1
033及びエントロピーVLC符号化ユニット1034
に出力される。逆量子化ユニット1033は、入力され
る量子化されたDCT変換ブロックの画像データを逆量
子化することにより復元して加算器1035に出力す
る。加算器1035は、復元されたDCT変換ブロック
の画像データを、DCT変換領域予測ユニット1031
からの前のDCT変換ブロックの画像データを加算し
て、加算結果の前のブロックの画像データをブロックメ
モリ1032に格納するとともに、逆DCT変換ユニッ
ト1036に出力する。
【0099】逆DCT変換ユニット1036は、加算器
1035から入力される前のブロックの画像データに対
して逆DCT変換処理を実行して、変換処理後の復元さ
れた画像データを加算器1037に出力する。加算器1
037は、逆DCT変換ユニット1036から出力され
る復元された画像データに動き検出及び補償ユニット1
025から出力される前のフレームの画像データを加算
して、加算結果の画像データをフレームメモリ1038
に一時的に記憶した後、動き検出及び補償ユニット10
25に出力される。
【0100】<B1.モード決定の一般的な説明>図1
8は、図16及び図17のDCT変換領域予測回路10
17,1031の構成を示すブロック図である。
【0101】図18において、1040は予測のために
前の隣接するブロックの画像データを格納するブロック
メモリである。処理対象の現時点のカレントブロックは
ユニット1041に入力され、ユニット1041は、ブ
ロックメモリ1040で格納されている前の隣接するD
CT変換ブロックから入力されたカレントブロックの画
像データを減算して、次の4種類の予測DCT変換ブロ
ックの画像データが得られる。 (a)1042で示されるNo−Predブロック、
(b)1043で示されるUp−Predブロック、
(c)1044で示されるLeft−Predブロッ
ク、(d)1045で示されるOther−Predブ
ロック。
【0102】ここで、2ビットを用いて上記4つの種類
のブロックを示す。すなわち、例えば“00”はNo−
Predブロックを示し、“01”はUp−Predブ
ロックを示し、“10”はLeft−Predを示し、
“11”はOther−Predブロックを示す。
【0103】No−Predブロックは、予測無しのと
きの、現時点のDCT変換ブロックの画像データ自身で
ある。Up−Predブロックは、予測に用いられたブ
ロックが上方に隣接するDCT変換ブロックB2である
場合に得られた予測ブロックの画像データを示す。Le
ft−Predブロックは予測に用いられたブロックが
左側に隣接するDCT変換ブロックB4である場合に得
られた予測ブロックの画像データを示す。Other−
Predブロックは予測がDC係数に対してのみ行われ
たときの予測ブロックの画像データを示す。Other
−Predの場合において、2種類の予測方法が存在す
る。すなわち、Up−DC−Pred(1046)は上
方に隣接するDCT変換ブロックB2に基づいてDC係
数のみに対して予測が行われた場合に得られた予測ブロ
ックの画像データを示す。Left−DC−Pred
(1047)は左側に隣接するDCT変換ブロックB4
に基づいてDC係数のみに対して予測が行われた場合に
得られた予測ブロックの画像データを示す。この2つの
ケースに対して、もう1つビットが指示のために必要と
なる。例えば“0”はUp−DC−Pred(104
6)を示し、“1”はLeft−DC−Pred(10
47)を示すように使用される。
【0104】斜め方向に隣接するブロックB1、B3に
基づいた予測は可能ではあるがその予測結果は上方や左
側のブロックに予測によるもののようによくないので、
本実施形態では用いていない。
【0105】全ての予測されたブロックに対して、ユニ
ット1048によって実際のエントロピー符号化処理が
実行されることにより検査され、チェックされる。異な
る予測されたブロックに使用されたビットはユニット1
049において比較される。最後に、ユニット1050
は最小ビット使用規則に基づいて予測されたDCT変換
ブロックを決定し、指示ビットとともに予測されたDC
T変換ブロックを出力する。すなわち、ビット数が最小
の予測されたDCT変換ブロックを選択する。
【0106】<B2.モード決定の実施>図19は、図
18のDCT変換領域予測回路におけるDC/AC予測
の符号化方法の一例を示す画像の模式図である。
【0107】図19において、先に定義されたDC/A
C予測された画像データの部分集合が実際の使用に対し
て図示されている。カレントブロック1101はカレン
トマクロブロックの上部左側の8×8ブロックであり、
カレントブロック1102はカレントマクロブロックの
上部右側の8×8ブロックである。A及びBは、カレン
トブロック1101に隣接する8×8ブロックである。
カレントブロック1101の強調された上部行及び左列
はそれぞれ、隣接ブロックであるA及びBの同一場所か
ら予測される。つまり、カレントブロック1101の最
上行はその上のブロックAの最上行から予測され、カレ
ントブロック1101の左列はその左のブロックBの左
列から予測される。同様の手順で、カレントブロック1
102はその上のブロックD及びその左のカレントブロ
ック1から予測される。
【0108】C(u,v)を符号化すべきブロックと
し、Ei(u,v)をモードiの場合の予測誤差であっ
て、A(u,v)及び/又はB(u,v)の各ブロック
から予測値を減算して求めたものであるとする。実際の
実施においては、節B1において前述した最も頻度が多
い次の3つのモードのみが使用される。
【0109】(a)モード0:DC予測のみ
【0110】
【数1】E0(0,0)=C(0,0)−(A(0,
0)+B(0,0))/2, E0(u,v)=C(u,v), u≠0;v≠0;u=0,…,7;v=0,…,7
【0111】(b)モード1:上側ブロックからのDC
/AC予測
【0112】
【数2】E1(0,v)=C(0,v)−A(0,
v),v=0,…,7, E1(u,v)=C(u,v), u=1,…,7;v=0,…,7
【0113】(c)モード2:左側ブロックからのDC
/AC予測
【数3】E2(u,0)=C(u,0)−B(u,
0),u=0,…,7, E2(u,v)=C(u,v), u=0,…,7;v=1,…,7.
【0114】モードの選択は、マクロブロックにおける
4つの輝度信号のブロックに対して予測された誤差の絶
対値の和、SADmodeiを計算して、そのうちの最
小値を有するモードを選択することにより行われる。
【0115】
【数4】
【0116】モードの決定は、異なる符号化ビットレー
トを目標とするアプリケーションの違いに依存して、ブ
ロックベース及びマクロブロックベースの両方で実行す
ることができる。モードは、次の表1の可変長コードを
使用して符号化される。
【0117】
【表1】
【0118】量子化後にDC/AC予測を実行する場
合、先行する水平方向の隣接ブロック又は垂直方向の隣
接ブロックでは通常、使用する量子化のステップが異な
るため、DC/AC予測を正確に行うためには、量子化
されたDCT変換係数をスケーリングするために幾つか
の種類の重み係数が必要とされる。
【0119】QacAをブロックA(図19参照。)の
量子化されたDCT変換係数とし、QacBをブロック
B(図19参照。)の量子化されたDCT変換係数とす
る。QstepAをブロックAの量子化に使用される量
子化ステップとすると、QstepBはブロックAの量
子化に使用する量子化ステップであり、QstepCは
カレントブロックCの量子化に使用すべき量子化ステッ
プであり、従ってスケーリング方程式は以下の通りであ
る。
【0120】
【数5】Q’acA=(QacA×QstepA)/Q
stepC
【数6】Q’acB=(QacB×QstepB)/Q
stepC
【0121】ここで、Q’acAはブロックAからのD
CT変換係数であり、カレントブロックCの最上行の予
測に使用される。また、Q’acBはブロックBからの
DCT変換係数であり、カレントブロックCの左列の予
測に使用される。
【0122】<第7の実施形態>図20は、本発明に係
る第7の実施形態である画像予測復号化装置の構成を示
すブロック図である。
【0123】図20において、画像予測符号化装置から
のビットストリームは、エントロピーVLD復号化ユニ
ット1051に入力され、可変長復号化される。復号化
された画像データは、加算器1052によって、DCT
変換領域予測ユニット1053からの前の隣接するDC
T変換ブロックの画像データと加算することにより、D
CT変換ブロックの画像データが復元される。前に隣接
するDCT変換ブロックは、どのブロックであるかは、
ビットストリームからとり出された指示ビットによって
知らされ、ユニット1053において予測のために使用
される。1054は、予測のために用いる隣接するDC
T変換ブロックを格納するためのブロックメモリであ
る。加算器1052から得られる復元されたDCT変換
ブロックは逆DCT変換ユニット1055に出力され
る。逆DCT変換ユニット1055は入力されたDCT
変換ブロックに対して逆DCT変換処理を実行すること
により復元されたDCT変換係数の画像データを生成し
て、加算器1056に出力する。加算器1056は、逆
DCT変換ユニット1055からの復元された画像デー
タを、動き検出及び補償ユニット1057からの前のフ
レームの画像データと加算することにより、動き検出及
び補償されかつ復号化された画像データを生成して出力
する。当該復号化された画像データは、動き検出及び補
償のために前のフレームの画像データを格納するフレー
ムメモリに一時的に格納した後、動き検出及び補償ユニ
ット1057に出力される。動き検出及び補償ユニット
1057は、入力される画像データに対して、動き検出
及び補償処理が実行される。
【0124】さらに、加算器1056から出力される復
号化された画像データは、図16及び図17のブロック
サンプリングユニット1012,1026の処理に対応
する逆の復元処理により、元の画像データが復元され
る。
【0125】さらに、1059は逆量子化ユニットであ
り、図17に示すように量子化処理の前にDCT変換領
域予測処理が行われる場合は、当該逆量子化ユニット1
059は図20における1059aの位置に挿入される
一方、図16に示すように量子化処理の後にDCT変換
領域予測処理が行われる場合は、当該逆量子化ユニット
1059は図20における1059bの位置に挿入され
る。
【0126】図21は、図20の画像予測復号化装置に
おけるDC/AC予測の復号化方法を示すフローチャー
トである。すなわち、図21では、DC/AC予測モー
ドを取得し、隣接するDC/AC予測値からDCT変換
係数を再構成するためのビットストリームの復号化の詳
細が図示されている。
【0127】まず、ステップ1059において、入力さ
れるビットストリームから指示ビットを復号化し、ステ
ップ1060で、指示ビットのフラグがチェックされ、
それが「0」であれば、ステップ1061で上側ブロッ
ク及び左側ブロックの画像データの平均値からDC値を
計算してステップ1063に進む。ステップ1060で
NOであればステップ1062に進み、ステップ106
2でチェックされた指示フラグが「10」であれば、ス
テップ1063で左側ブロックの左列の画像データが抽
出され、ステップ1065に進む。ステップ1062で
NOであればステップ1064に進み、ステップ106
4でチェックされた表示フラグが「11」であれば、ス
テップ1065で上側ブロックの最上行の画像データが
抽出され、ステップ1066に進む。最後に、ステップ
1066では、ステップ1061、1063、又は10
65で取得又は抽出されたDCT変換係数がカレントブ
ロックの対応するDCT変換係数に加算される。
【0128】さらに、以下、本実施形態グループの変形
例について説明する。
【0129】(a)上記ブロックサンプリングユニット
1012,1026は、4つのブロックのグループの中
の二次元配列の画素は、第1のブロックでは奇数番目の
行にある奇数番目の画素から成り、第2のブロックでは
奇数番目の行にある偶数番目の画素から成り、第3ブロ
ックでは偶数番目の行にある奇数場番目の画素から成
り、第4ブロックでは偶数番目の行にある偶数番目の画
素から成るように、画素を交互に差し挟むインターリー
ブ処理を含んでもよい。 (b)上記予測ブロックは、上記ブロックメモリに格納
され、前に復元されたブロックであって、符号化された
カレントブロックに隣接するように位置されたブロック
から選択され、ブロック中の全ての変換係数が選択され
てもよい。 (c)上記予測ブロックは、上記ブロックメモリに格納
され、前に復元されたブロックであって、符号化された
カレントブロックに隣接するように位置されたブロック
から選択され、あらかじめ定められたサブセットがブロ
ックの変換係数として選択されてもよい。
【0130】(d)上記予測ブロックは、上記ブロック
メモリに格納され、前に復元されたブロックであって、
符号化されたカレントブロックの上方及び左側に隣接す
るよう位置されたブロックから選択され、当該ブロック
の最上行、及び当該ブロックの最左列の変換係数のみが
使用され、残りの変換係数はゼロにセットされてもよ
い。 (e)上記予測ブロックは、上記ブロックメモリに格納
され、前に復元されたブロックであって、符号化された
カレントブロックの近傍に位置されたブロックから選択
され、各ブロックの変換係数は異なる重み付け関数で重
み付けされてもよい。 (f)上記予測ブロックは、上記ブロックメモリに格納
され、前に復元されたブロックであって、符号化された
カレントブロックの近傍に位置されたブロックから選択
され、各ブロックの変換係数に対して変換演算が実行さ
れてもよい。
【0131】(g)上記予測ブロックは、上記ブロック
メモリに格納され、前に復元されたブロックであって、
符号化されたカレントブロックの近傍に位置された複数
のブロックの重み付け平均化されてもよい。 (h)復号化された画像データに基づいて、インターリ
ーブされた4個のブロックからなる複数のグループから
二次元配列の画素を形成して元の画像データを復元する
ときに、奇数番目の行にある奇数番目の画素は全て第1
のブロックから求め、奇数番目の行にある偶数番目の画
素は第2のブロックから求め、偶数番目の行にある奇数
番目の画素は第3ブロックから求め、偶数番目の行にあ
る偶数番目の画素は第4ブロックから求めるように、上
記復号化された画像データに対して逆インターリーブ処
理を実行してもよい。
【0132】以上説明したように、本発明に係る本実施
形態グループによれば、隣接するブロック間におけるD
CT変換領域の冗長性を除去又は減少するために大いに
効果があり、その結果、使用ビット数を減少させ、最終
的に符号化効率を大いに改善することができる。詳細な
画像予測符号化装置の例として図18を参照すると、予
測処理は、好ましくは、上側又は左側の隣接するブロッ
クを使用することによってのみ実行される。
【0133】QCIFを含むシーケンスに対しては、上
位ビットレート符号化に対して6.4%のビットを節約
することができ、下位ビットレート符号化に対して20
%のビットを節約することができる。また、例えば、ア
キヨ(Akiyo)、マザー(Mother)、及びドウター(Dau
ghter)などのテストシーケンスなどの他のQCIFシ
ーケンスに対して、約10%のビットを節約することが
できる。さらにCIF及びCCIRのシーケンスに対し
ては、より多くのビット節約が可能である。
【0134】以上説明したように本発明に係る第2の実
施形態グループによれば、現時点の符号化効率を増大さ
せる新しい画像予測符号化装置及び画像予測復号化装置
を提供することができる。当該装置では、符号化効率を
上げるためには複雑な手段は必要とせず、その回路構成
は、非常に簡単で容易に形成できる。
【0135】<第3の実施形態グループ>第3の実施形
態グループは、第8の実施形態を含む。
【0136】本発明者は、従来技術の問題点に鑑みて、
画像符号化効率は、2つの画像間又は1つの画像内のブ
ロックの内部における冗長性ばかりでなく、画像内のブ
ロック間の冗長性を削減するとともに、ブロックのスキ
ャンパターンを適切にすることによりさらに冗長性を改
善することを考えた。
【0137】同じ位置にあっても隣接するブロックの中
のDCT変換係数は多くの場合非常によく似ていること
が見出されている。この2つのブロックに対する原画像
の特質が非常によく似ている場合、もしくは水平又は垂
直ライン、対角線その他の画像パターンが同じものを含
んでいる場合、上記のことは正しいといえる。情報理論
の観点から同じ情報は冗長性を意味することになる。
【0138】ブロックを越えてDCT変換領域の中に存
在する冗長性は、以前のブロックの適応性予測により除
去されるか又は削減されることができる。このことはV
LCエントロピー符号化は予測誤差信号のより小さいエ
ントロピーのためのより高い符号化効率を達成できると
いう結果になる。
【0139】同時に、水平及び垂直の構造は、最左側の
列及び最上行の変換ブロックに、重要なDCT変換係数
が集中するという結果になることは公知である。従っ
て、本発明に係る実施形態は、予測モードに基づいて、
スキャンを適応化することにより係数のスキャンにおけ
る上述の問題点を解決することができる。
【0140】本発明に係る実施形態は、他のブロックか
らカレントブロックのDCT変換係数を適応的に予測
し、その結果隣接するブロック間の冗長性を除去する方
法を提供する。予測誤差の情報は量子化DCT変換係数
のエントロピーをより小さくする予測モードにスキャン
方法を適応化することによりさらに縮少される。その結
果、DCT変換係数を符号化するためのビットの数を削
減できる。
【0141】この問題点を解決するために、予測モード
の決定を実行する方法が各予測及びスキャン方法により
発生される実際のビットレートに基づいて得られる。
【0142】本発明に係る実施形態は、現在のカレント
ブロックのDCT変換係数を予測する方法を提供するも
のである。DCT変換は同じ値、又は同じDCT変換係
数の分布を同じブロックの画像データに与える傾向があ
るので、カレントブロックは通常他の隣接するブロック
の中のDCT変換係数と良好な相互関係を保持してい
る。
【0143】入力された画像データは、イントラフレー
ムであるか又は一時的に予測されたフレームであるかの
いずれかであり、まず、入力された画像データに対し
て、通常ブロックを基礎とするDCT変換処理が実行さ
れる。カレントブロックのDCT変換係数が得られた後
に、DCT変換領域の予測は量子化の前、又は後に実行
することができる。
【0144】カレントブロックの中のDCT変換係数は
上方の左側に対角線方向(斜め方向)に位置した以前の
隣接するブロックから予測することができる。それら
は、図23に示すように、その時刻において既に復号化
されている。予測されたブロックは、カレントブロック
における同じ位置のDCT係数から前の隣接するブロッ
クの1つ又はそれ以上のDCT係数を減算することによ
って、予測された誤差信号を発生する。
【0145】異なる予測モードからの予測誤差信号が、
予測が量子化処理の前になされるならば量子化される。
量子化された予測誤差信号は、エントロピー符号化が実
行される前にシーケンスの(一連の)画像データに対し
てスキャンされる。最小ビット使用規則に基づいて予測
されたブロック、すなわち最小のビットを有する予測ブ
ロックが選択される。このブロックの符号化データは使
用する予測モードとともに画像予測復号化装置に送られ
る。
【0146】画像予測復号化装置は、使用した予測モー
ド及びブロックの符号化されたデータを用いて、予測さ
れたブロックを復号化する。ブロックに対する符号化さ
れたデータに対する逆のエントロピー復号化の後に、量
子化された予測誤差は用いられるスキャンモードに従っ
て逆にスキャンされる。もし量子化処理が予測処理の後
の実行されるならば、ブロックは逆量子化されることに
なる。再構築されたブロックは、予測モードによって指
示された、前に復号化された隣接するブロックの中のD
CT変換係数を現在のDCT変換係数に加算することに
より得ることができる。一方、量子化処理が予測処理の
前に実行されるならば、再構築された係数は逆量子化さ
れる。最後に、逆DCT変換処理が各ブロックに対して
再構築されたDCT変換係数に適用され、復号化された
画像を得ることができる。
【0147】本発明に係る実施形態は、隣接するブロッ
クを越えてDCT変換領域の中に存在する冗長性を減少
させる画像予測符号化装置及び画像予測復号化装置を提
供するものである。
【0148】<第8の実施形態>図24は、本発明に係
る第8の実施形態である画像予測符号化装置の構成を示
すブロック図である。図24の画像予測符号化装置は、
図22の従来技術の画像予測符号化装置と比較して、
(a)加算器2035、(b)H/V/Zスキャンユニ
ット2036、(c)加算器2038、(d)ブロック
メモリ2039、及び(e)量子化スケーリングを有す
るDCT変換領域予測ユニット2040を備えたことを
特徴としている。
【0149】イントラフレーム符号化(フレーム内符号
化)においては、入力された画像信号に対して、ユニッ
ト2031でブロックサンプリング処理が実行された後
に、直接にユニット2033でDCT変換処理が実行さ
れる。次いで、ユニット2034で、DCT変換ユニッ
ト2033から出力されるDCT変換係数に対して量子
化処理が実行される。一方、インターフレーム符号化又
はフレーム間符号化(予測フレーム符号化)において
は、ユニット2031のブロックサンプリング処理の後
に、加算器2032は、ブロックサンプリング処理後の
画像データから、動き検出及び補償ユニット2045か
ら出力された画像データを減算して、予測誤差データを
得る。次いで、この予測誤差データは、DCT変換処理
を実行するDCT変換ユニット2033及び量子化処理
を実行する量子化ユニット2034を介して加算器20
35に出力される。DCT変換係数は、ユニット204
0のDCT変換領域処理によって予測され、予測された
DCT変換係数は加算器2035に入力される。加算器
2035は、量子化ユニット2034からのDCT変換
係数から、DCT変換領域予測ユニット2040からの
予測されたDCT変換係数を減算して、減算結果の予測
誤差のDCT変換係数を、H/V/Zスキャンユニット
2036及び加算器2038に出力する。H/V/Zス
キャンユニット2036は、選択された予測モードに依
存して、入力されたDCT変換係数に対して適応的に、
水平スキャン、垂直スキャン又はジグザグスキャンを実
行して、スキャン処理後のDCT変換係数をエントロピ
ーVLC符号化ユニット2037に出力する。次いで、
エントロピーVLC符号化ユニット2037は、入力さ
れたDCT変換係数をエントロピーVLC符号化処理を
実行して、符号化されたビットストリームを受信側又は
再生側の画像予測復号化装置に伝送する。
【0150】加算器2038は、加算器2035から出
力される量子化されたDCT変換係数と、DCT変換領
域予測ユニット2040からの予測されたDCT変換係
数とを加算することにより、復元された量子化DCT変
換係数データを得る。当該量子化DCT変換係数データ
は、ブロックメモリ2039及び逆量子化ユニット20
41に出力される。
【0151】当該画像予測符号化装置に設けられるロー
カルデコーダにおいて、加算器2038からの復元され
たDCT変換係数データは、次の予測を行うために1つ
のブロックのデータを格納するブロックメモリ2039
に一時的に記憶された後、DCT変換領域予測ユニット
2040に出力される。逆量子化ユニット2041は、
入力される量子化DCT変換係数を逆量子化して逆DC
T変換ユニット2042に出力し、次いで、逆DCT変
換ユニット2042は、入力される復元されたDCT変
換係数を逆DCT変換処理を実行して、現時点のブロッ
クの画像データを復元して加算器2043に出力する。
【0152】フレーム間符号化においては、ローカル復
号化された画像データを生成するために、加算器204
3は、動き検出及び補償ユニット2045によって動き
検出及び補償された画像データと、逆DCT変換ユニッ
ト2042からの復元された画像データとを加算して、
ローカル復号化された画像データを得て、ローカルデコ
ーダのフレームメモリ2044に記憶される。なお、加
算器2043とフレームメモリ2044と動き検出及び
補償ユニット2045の構成及び処理は、図22の従来
技術のユニット2009、2010及び2011と同様
である。
【0153】最終的には、ビットストリームはエントロ
ピー符号化ユニット2037から出力されて画像予測符
号化装置に送られる。
【0154】図25は、本発明に係る第8の実施形態で
ある画像予測復号化装置の構成を示すブロック図であ
る。図25の画像予測復号化装置は、図23の従来技術
の画像予測復号化装置に比較して、(a)H/V/Zス
キャンユニット2052、(b)加算器2053、
(c)DCT変換領域予測ユニット2055、及び
(d)ブロックメモリ2054、を備えたことを特徴と
する。
【0155】図25において、画像予測符号化装置から
のビットストリームは、可変長デコーダユニット205
1において復号化される。復号化されたデータは、H/
V/Z逆スキャンユニット2052に入力され、スキャ
ンモードに依存して、水平に逆方向で、垂直に逆方向
で、又はジグザグに逆方向でスキャンされる。スキャン
処理後のデータは加算器2053に入力され、加算器2
053は、逆スキャン処理後のデータと、DCT変換予
測ユニット2055からの予測誤差データとを加算する
ことにより、復号化されたDCT変換係数データを得
て、これを逆量子化ユニット2056に出力するととも
に、ブロックメモリ2054に記憶される。次いで、逆
量子化ユニット2056は、入力される符号化されたD
CT変換係数データを逆量子化して逆量子化されたDC
T変換係数データを得て、逆DCT変換ユニット205
7に出力する。逆DCT変換ユニット2057は、入力
されるDCT変換係数データに対して逆DCT変換処理
を実行して、元の画像データを復元して、加算器205
8に出力する。フレーム間符号化においては、加算器2
058は、動き検出及び補償ユニット2060からの予
測誤差データに、逆DCT変換ユニット2057からの
画像データを加算して、局所的に復号化された画像デー
タを得て、外部装置に出力するとともに、フレームメモ
リ2059に記憶する。
【0156】さらに、加算器2058から出力される復
号化された画像データは、図24のブロックサンプリン
グユニット2031の処理に対応する逆の復元処理によ
り、元の画像データが復元される。
【0157】以上の実施形態においては、量子化処理が
予測処理に先だって行われる。変形例においては、予測
処理の後に量子化処理を行ってもよい。この場合、ロー
カルデコーダ及び画像予測復号化装置では、予測値が加
算される前に逆量子化処理が実行される。他の詳細は全
て、上述の実施形態と同様である。
【0158】図26は、第8の実施形態において、ブロ
ック分割から得られた、フレームのマクロブロックとブ
ロックの構造を示し、かつブロック予測方法を示す画像
の模式図である。図26の拡大図は、カレントブロック
に対する予測データがどのように符号化されるかを示
す。ここで、ブロックC(u,v)は、上側に隣接する
ブロックA(u,v)と、左方向に隣接するブロックB
(u,v)とから得られる。次に、本発明にこの実施形
態を更に詳しく説明する。
【0159】<C1.予測に使用される係数の番号>予
測に使用される係数のナンバーは画像データのシーケン
スに依存している。フラグAC_Coeffは、各画像
に使用される係数の最適の数を適応的に選択するために
使用される。フラグは下の表2に示され、サイド情報の
一部として画像予測符号化装置から画像予測復号化装置
に送られる。フラグAC_Coeffに対する固定長コ
ード及びFLCを表2に示す。ここで、FLC(Fixed
LengthCoding;固定長符号化)は、すべての可能なイベ
ントを表すために、固定長のコードワードを割り当てる
可逆符号化である。
【0160】
【表2】
【0161】ここで、ACnは、用いられるモードに依
存して、A(0,n)又はB(n,0)である。
【0162】この実施形態の特別なケースでは、最上行
及び最左列のすべてのAC係数が予測のために使用され
る。このケースでは、画像予測符号化装置と画像予測復
号化装置との両方が、このデフォルト値を同意している
とき、フラグを必要としない。
【0163】<C2.量子化ステップのスケーリング>
隣接するブロックがカレントブロックからの異なる量子
化ステップサイズを用いて量子化されるときは、AC係
数の予測はそんなに能率的ではない。従って、当該予測
方法は、予測データが、現在のカレントブロックの量子
化ステップサイズの比と、予測データのブロックの量子
化ステップの比とによってスケーリングされるように変
形される。この定義は次の節C3.における方程式を用
いて与えられる。
【0164】<C3.予測モード>設定される複数のモ
ードは次の通りである。
【0165】(a)モード0:処理ブロックから上側の
ブロックからのDC予測(「上のDCモード」と略
す。)
【0166】
【数7】 E0(0,0)=C(0,0)−A(0,0), E0(u,v)=C(u,v)
【0167】(b)モード1:処理ブロックから左側の
ブロックからのDC予測(「左のDCモード」と略
す。)
【0168】
【数8】 E1(0,0)=C(0,0)−B(0,0), E1(u,v)=C(u,v)
【0169】(c)モード2;処理ブロックから上側の
ブロックからのDC/AC予測(「上のDC/ACモー
ド」と略す。)
【0170】
【数9】 E2(0,0)=C(0,0)−A(0,0), E2(0,v)=C(0,v)−A(0,v)・QA/
QC, v=1,2,…,AC_Coeff, E2(u,v)=C(u,v)
【0171】(d)モード3:処理ブロックから左側の
ブロックからのDC/AC予測(「左のDC/ACモー
ド」と略す。)
【0172】
【数10】 E3(0,0)=C(0,0)−B(0,0), E3(u,0)=C(u,0)−B(u,0)・QB/
QC u=1,2,…,AC_Coeff, E3(u,v)=C(u,v)
【0173】<C4.適応的水平/垂直/ジグザグスキ
ャン>上のような4個の予測モードが与えられるなら
ば、フレーム内符号化の効率は係数のスキャンを採用す
ることによりさらに改善させることができる。
【0174】図27、図28及び図29はそれぞれ、第
8の実施形態における係数スキャンに用いられる水平ス
キャン、垂直スキャン及び水平スキャンの順序を説明す
るための画像の模式図である。ここで、これらのスキャ
ンは集合的にH/V/Zスキャンとして参照される。
【0175】<C5.明示的モードの決定>明示的(ex
plicit)モードの決定においては、予測モードの決定が
画像予測符号化装置において実行され、その決定情報
が、ビットストリームにおける幾つかの符号化されたビ
ット情報を用いて画像予測符号化装置から画像予測復号
化装置に明示的に送られる。
【0176】図30は、第8の実施形態に使用されてい
るモード決定処理を示すフローチャートである。
【0177】図30において、カレントブロックのDC
T変換係数データはユニット2062に入力され、ユニ
ット2062は、ブロックメモリ2061からの隣接す
るブロックのDCT変換係数データから入力されたカレ
ントブロックのDCT変換係数データを減算することに
より、DCT変換予測処理が実行される。ユニット20
62では、節C3.で説明された4つのモードで、DC
T変換予測処理が実行される。次いで、H/V/Zスキ
ャンユニット2063では、係数のスキャン処理が実行
され、ここでは、図30に示すように、節C4.で説明
したそれぞれ対応するスキャン処理が実行される。さら
に、スキャン処理後のDCT変換係数データは、エント
ロピー符号化ユニット2064に送られ、ここで可変長
符号化処理が実行される。次いで、ユニット2065で
は、異なるモードで発生されたすべてのビットが比較さ
れて、ユニット2066では、最少のビットを発生する
予測モードのDCT変換係数のブロックが選択される。
これらのDCT変換係数データのビットは予測モードの
値とともにユニット2066からビットストリームとし
て画像予測復号化装置に送られる。なお、予測モード
は、次の表3の固定長コードを用いて符号化される。
【0178】
【表3】
【0179】<C6.暗黙的モードの決定>モード決定
の第2の実施例では、画像予測符号化装置と画像予測復
号化装置とが同一の予測モード決定機能を共有してい
る。画像予測符号化装置と画像予測復号化装置は共に、
カレントブロックに隣接する復号化されたブロックのD
C係数値に基づいて、予測モードの決定に関する方向性
を決定する。すなわち、暗黙的(implicit)モードの決
定においては、暗黙的モードの決定が幾つかの規則を用
いて画像予測符号化装置と画像予測復号化装置において
実行される。そして、モード決定を示す付加的な情報デ
ータは画像予測符号化装置から画像予測復号化装置に対
して送られない。
【0180】図31は、第8の実施形態の暗黙モード決
定におけるブロックの関係を示す画像の模式図である。
すなわち、図31は、各ブロックと予測対象であるカレ
ントブロックとの位置関係を示している。
【0181】図31において、ブロックCは現在予測中
の処理対象のカレントブロックである。ブロックAは、
予測中のカレントブロックCの上側のブロックである。
ブロックCは、カレントブロックCから左側に位置する
ブロックである。ブロックC’は、カレントブロックC
とは対角位置にあるブロックAとブロックBの間のブロ
ックである。
【0182】まず、DCの方向が決定される。個別の決
定方法を使用して、AC係数も同様に予測中であるか否
かが決定される。これを行うには、予測係数の絶対値の
差の合計を非予測係数の絶対値と比較し、何れが小さい
かを判断する。画像予測復号化装置へのこの指示には、
1ビットが使用される。DC予測の方向性、及びAC係
数が予測されているか否かの決定には、以下の式が使用
される。表3は、可能性のある4つの結論を要約したも
のである。
【0183】(A1)もし
【数11】(B(0,0)−C’(0,0)<C’
(0,0)−A(0,0)) のとき、
【数12】E(0,0)=C(0,0)−A(0,0) であり、(a1)もし
【0184】
【数13】
【0185】のとき、
【0186】
【数14】E(0,v)=C(0,v)−A(0,v)
・QA/QC,v=1,…,7,
【0187】(a2)上記数13が成立しなければ、
【数15】E(0,v)=C(0,v) である。
【0188】(A2)上記数11が成立しなければ、
【数16】E(0,0)=C(0,0)−B(0,0) であり、(b1)もし
【0189】
【数17】
【0190】のとき、
【0191】
【数18】E(u,0)=C(u,0)−B(u,0)
・QB/QC,v=1,…,7,
【0192】(b2)上記数17が成立しなければ、
【数19】E(u,0)=C(u,0) である。
【0193】さらに、他の全ての係数に対して、
【数20】E(u,v)=C(u,v) である。
【0194】
【表4】
【0195】以上の第8の実施形態において、DCT変
換係数予測処理はユニット2040によって、量子化さ
れた変換係数データについて行っているが、本発明はこ
れに限らず、図17の第6の実施形態と同様に、量子化
されない変換係数データについて行ってもよい。この場
合、対応する画像予測復号化装置においては、図25に
おいて、逆量子化ユニット2056は、逆スキャンユニ
ット2052と、加算器2053に移動されて挿入され
る。
【0196】以下、第8の実施形態の変形例について述
べる。
【0197】(a)ブロックサンプリングユニット20
31は、4つのブロックのグループの中の二次元配列の
画素は、第1のブロックでは奇数番目の行にある奇数番
目の画素から成り、第2のブロックでは奇数番目の行に
ある偶数番目の画素から成り、第3ブロックでは偶数番
目の行にある奇数場番目の画素から成り、第4ブロック
では偶数番目の行にある偶数番目の画素から成るよう
に、画素を交互に差し挟むインターリーブ処理を含んで
もよい。 (b)上記予測ブロックは、上記ブロックメモリに格納
され、前に復元されたブロックであって、符号化された
カレントブロックに隣接するように位置されたブロック
から選択され、ブロック中の全ての係数データが選択さ
れてもよい。 (c)上記予測ブロックは、上記ブロックメモリに格納
され、前に復元されたブロックであって、符号化された
カレントブロックに隣接するように位置されたブロック
から選択され、あらかじめ定められたサブセットがブロ
ックの係数データとして選択されてもよい。
【0198】(d)上記予測ブロックは、上記ブロック
メモリに格納され、前に復元されたブロックであって、
符号化されたカレントブロックの上方及び左側に隣接す
るよう位置されたブロックから選択され、当該ブロック
の最上行、及び当該ブロックの最左列の係数データのみ
が使用され、残りの係数データはゼロにセットされても
よい。 (e)上記予測ブロックは、上記ブロックメモリに格納
され、前に復元されたブロックから上述の基準に従って
選択され、当該ブロックの最上行又は最左列からの1つ
又はそれ以上の係数データを含むサブセットのみを使用
することを、画像予測符号化装置と画像予測復号化装置
とが通信を行うことにより決定してもよい。 (f)上記予測ブロックは、上記ブロックメモリに格納
され、前に復元されたブロックから上述の基準に従って
選択され、当該ブロックの最上行又は最左列からの1つ
又はそれ以上の係数データを含むサブセットのみを使用
することを、画像予測符号化装置が決定して、決定され
たサブセット及び係数データの数を示すフラグを、画像
予測復号化装置に送信されるデータに周期的に挿入する
ことにより、画像予測復号化装置に通知してもよい。
【0199】(g)上記予測ブロックは、上記ブロック
メモリに格納され、前に復元されたブロックから上述の
基準に従って選択され、各ブロックの係数データは、符
号化されるカレントブロックの量子化ステップサイズと
予測ブロックの量子化ステップサイズの比に等しい比で
乗算されてもよい。 (h)上記予測ブロックは、上記ブロックメモリに格納
され、前に復元されたブロックから上述の基準に従って
選択され、各ブロックの係数データは、異なる重み付け
関数で重み付けされてもよい。 (i)上記予測ブロックは、上記ブロックメモリに格納
され、前に復元されたブロックから上述の基準に従って
選択され、各ブロックの係数データに対して所定の変換
演算が実行されてもよい。(j)上記予測ブロックは、
符号化されるカレントブロックに隣接して位置する、上
記ブロックメモリに格納され、前に復元されたブロック
の重み付け平均値として得てもよい。
【0200】(k)スキャン方法は、(i)係数データ
が、左から右に向かって、行毎に、最上行で始まり、最
下行で終わるようにスキャンされる水平スキャンと、
(ii)係数データが、最上行から最下行に向かって、列
毎に、最左列から始まり、最右列で終るようにスキャン
される垂直スキャンと、(iii)係数データが、最上行
の最左の係数データから最下行の最右の係数データに向
かって、対角線方向にスキャンされるジグザグスキャン
とのうちの少なくとも1つのスキャン方法を含んでもよ
い。
【0201】(l)上記予測ブロックは、上記ブロック
メモリに格納され、前に復元されたブロックから上述の
基準に従って選択され、上記予測ブロックの予測モード
は、(i)処理対象のカレントブロックから上側に位置
するブロックからの、DC係数として呼ばれる当該ブロ
ックの平均値を表す最上及び最左の係数データのみを予
測のために使用する第1のモードと、(ii)処理対象の
カレントブロックから左側に位置するブロックからの、
DC係数のみを予測のために使用する第2のモードと、
(iii)処理対象のカレントブロックから上側に位置す
るブロックの最上行からの、DC係数及び、高周波成分
を含む0個又はそれ以上のAC係数を予測のために使用
する第3のモードと、(iv)処理対象のカレントブロッ
クから左側に位置するブロックの最左列からの、DC係
数及び、高周波成分を含む0個又はそれ以上のAC係数
を予測のために使用する第4のモードと、の少なくとも
1つの予測モードを含み、上記予測誤差の係数データは
ジグザグスキャンのスキャン方法でスキャンされてもよ
い。
【0202】(m)上記予測ブロックは、上記ブロック
メモリに格納され、前に復元されたブロックから上述の
基準に従って選択され、上記予測誤差の係数データは、
上述のスキャン方法の1つに従ってスキャンされ、上記
予測誤差の係数データを予測する予測モードは、(i)
処理対象のカレントブロックから上側に位置するブロッ
クにおけるDC係数のみが予測のために使用され、上記
予測誤差の係数データに対して、ジグザグスキャンでス
キャン処理が実行される第1のモードと、(ii)処理対
象のカレントブロックから左側に位置するブロックにお
けるDC係数のみが予測のために使用され、上記予測誤
差の係数データに対して、ジグザグスキャンでスキャン
処理が実行される第2のモードと、(iii)処理対象の
カレントブロックから上側に位置するブロックの最上行
におけるDC係数及び、高周波成分を含む0個又はそれ
以上のAC係数が予測のために使用され、上記予測誤差
の係数データに対して、水平スキャンでスキャン処理が
実行される第3のモードと、(iv)処理対象のカレント
ブロックから左側に位置するブロックの最左列における
DC係数及び、高周波成分を含む0個又はそれ以上のA
C係数が予測のために使用され、上記予測誤差の係数デ
ータに対して、垂直スキャンでスキャン処理が実行され
る第4のモードと、の少なくとも1つを含んでもよい。
【0203】(n)上記復号化された画像データに基づ
いて、インターリーブされた4個のブロックからなる複
数のグループから二次元配列の画素を形成して元の画像
データを復元するときに、奇数番目の行にある奇数番目
の画素は全て第1のブロックから求め、奇数番目の行に
ある偶数番目の画素は第2のブロックから求め、偶数番
目の行にある奇数番目の画素は第3ブロックから求め、
偶数番目の行にある偶数番目の画素は第4ブロックから
求めるように、上記復号化された画像データに対して逆
インターリーブ処理を実行してもよい。 (o)画像予測符号化装置と画像予測復号化装置は、予
め決められた同一のルールを用いて、上記予測モードを
決定してもよい。 (p)画像予測符号化装置と画像予測復号化装置は、予
め決められた同一のルールを用いて、上記スキャン方法
を決定してもよい。
【0204】以上説明したように、本発明に係る第3の
実施形態グループによれば、隣接するブロックを越えて
DCT変換領域の中の冗長性を削減又は除去するのに非
常に効果的であり、使用ビットのビット数を削減し、そ
の結果、符号化の効率を大幅に改善することができる。
これは新しいビデオ圧縮アルゴリズムにおけるツールと
しても有用である。
【0205】以上の実施形態において、画像予測符号化
装置及び画像予測復号化装置について述べているが、本
発明はこれに限らず、上記画像予測符号化装置における
各手段、各ユニットなどの構成要素をそれぞれ各ステッ
プに置き換えたステップを含む画像予測符号化方法であ
ってもよいし、上記画像予測復号化装置における各手
段、各ユニットなどの構成要素をそれぞれ各ステップに
置き換えたステップを含む画像予測復号化方法であって
もよい。この場合、例えば、上記画像予測符号化方法及
び/又は上記画像予測復号化方法の各ステップがプログ
ラムとして記憶装置に記憶され、マイクロプロセッサユ
ニット(MPU)、中央演算処理装置(CPU)などの
コントローラは当該プログラムを実行することにより、
画像予測符号化処理及び/又は上記画像予測復号化処理
を実行する。
【0206】また、本発明は、上記画像予測符号化方法
及び/又は上記画像予測復号化方法における各ステップ
を含むプログラムを記録した記録媒体であってもよい。
当該記録媒体は、例えば記録領域がセクタ形状に分割さ
れ、又は記録領域が渦巻き形状で各ブロックに分割され
た円盤形状を有し、例えば、CD−ROM、DVDなど
の光ディスク又は光磁気ディスク、もしくは、フロッピ
ー(登録商標)ディスクなどの磁気記録ディスクであ
る。
【0207】
【発明の効果】以上詳述したように、本発明に係る画像
予測復号化方法によれば、可変長符号化されたDCT係
数を含む入力ビットストリームを入力するステップと、
上記可変長符号化されたDCT係数をDCT係数の1次
元列に復号化するステップと、上ブロック(A)、左ブ
ロック(B)及び上記上ブロック(A)と上記左ブロッ
ク(B)の間に位置する対角ブロック(C')につい
て、上記左ブロック(B)と上記対角ブロック(C')
とのDC係数の差及び上記対角ブロック(C')と上記
上ブロック(A)とのDC係数の差を求め、これらの差
のうちいずれが小さいかに基づいてカレントブロックに
隣接する上ブロック(A)又は左ブロック(B)のいず
れかから上記カレントブロックのDC係数を予測すべき
予測ブロックを適応的に選択し、上記DC係数予測のた
めに上記選択されたブロックから上記カレントブロック
(C)のAC係数を予測するステップと、上記予測ブロ
ックのAC係数について、カレントブロックの量子化ス
テップサイズによりスケーリングを行うステップと、上
記スケーリングされた上記予測ブロックのAC係数から
カレントブロックのAC係数を予測するステップとを含
む。従って、本発明によれば、上ブロック(A)又は左
ブロック(B)のいずれかから適応的に選択された隣接
ブロックのDC係数からカレントブロック(C)のDC
係数を予測し、上記DC係数予測のために上記選択され
たブロックから上記カレントブロック(C)のAC係数
を予測することによって、DCT変換領域中の冗長性を
削除して符号化効率を大幅に改善させた符号化方法に対
応した復号化方法を提供することができる。また、本発
明によれば、予測ブロックのAC係数について、カレン
トブロックの量子化ステップサイズによりスケーリング
を行うステップと、スケーリングされた上記予測ブロッ
クのAC係数からカレントブロックのAC係数を予測す
るステップによって、カレントブロックの量子化ステッ
プサイズと予測ブロックの量子化ステップサイズが異な
る場合でも能率的に復号化できる。
【図面の簡単な説明】
【図1】 本発明に係る第1の実施形態である画像予測
符号化装置の構成を示すブロック図である。
【図2】 図1の画像予測符号化装置に入力される入力
画像を8×8のブロックに分割した場合の模式図であ
る。
【図3】 図1の画像予測符号化装置に入力される入力
画像を三角領域に分割した場合の模式図である。
【図4】 図1の画像予測符号化装置に用いられる予測
信号発生器の第1の実施例の構成を示すブロック図であ
る。
【図5】 図1の画像予測符号化装置に用いられる予測
信号発生器の第2の実施例の構成を示すブロック図であ
る。
【図6】 図1の画像予測符号化装置に用いられる予測
信号発生器の第3の実施例の構成を示すブロック図であ
る。
【図7】 図1の画像予測符号化装置に用いられる予測
信号発生器の第4の実施例の構成を示すブロック図であ
る。
【図8】 本発明に係る第2の実施形態である画像予測
符号化装置の構成を示すブロック図である。
【図9】 図1及び図8の画像予測符号化装置に入力さ
れる入力画像であって、有意である画素を有する入力画
像の一例を示す模式図である。
【図10】 図1及び図8の画像予測符号化装置に入力
される入力画像であって、有意である画素を有する入力
画像の一例を示す模式図である。
【図11】 図1及び図8の画像予測符号化装置に入力
される入力画像であって、有意でない画素を有する入力
画像の一例を示す模式図である。
【図12】 本発明に係る第3の実施形態である画像予
測復号化装置の構成を示すブロック図である。
【図13】 本発明に係る第4の実施形態である画像予
測復号化装置の構成を示すブロック図である。
【図14】 従来技術の画像予測符号化装置の構成を示
すブロック図である。
【図15】 画面内予測のための適応的DCT変換領域
を説明するための画像の模式図である。
【図16】 本発明に係る第5の実施形態である画像予
測符号化装置の構成を示すブロック図である。
【図17】 本発明に係る第6の実施形態である画像予
測符号化装置の構成を示すブロック図である。
【図18】 図16及び図17のDCT変換領域予測回
路の構成を示すブロック図である。
【図19】 図18のDCT変換領域予測回路における
DC/AC予測の符号化方法の一例を示す画像の模式図
である。
【図20】 本発明に係る第7の実施形態である画像予
測復号化装置の構成を示すブロック図である。
【図21】 図20の画像予測復号化装置におけるDC
/AC予測の復号化方法を示すフローチャートである。
【図22】 従来技術の画像予測符号化装置の構成を示
すブロック図である。
【図23】 従来技術の画像予測復号化装置の構成を示
すブロック図である。
【図24】 本発明に係る第8の実施形態である画像予
測符号化装置の構成を示すブロック図である。
【図25】 本発明に係る第8の実施形態である画像予
測復号化装置の構成を示すブロック図である。
【図26】 第8の実施形態における、フレームのマク
ロブロックとブロックの構造を示し、かつブロック予測
方法を示す画像の模式図である。
【図27】 第8の実施形態における係数スキャンに用
いられる水平スキャンの順序を説明するための画像の模
式図である。
【図28】 第8の実施形態における係数スキャンに用
いられる垂直スキャンの順序を説明するための画像の模
式図である。
【図29】 第8の実施形態における係数スキャンに用
いられるジグザグスキャンの順序を説明するための画像
の模式図である。
【図30】 第8の実施形態に使用されているモード決
定処理を示すフローチャートである。
【図31】 第8の実施形態の暗黙モード決定における
ブロックの関係を示す画像の模式図である。
【符号の説明】
101…入力端子、 102…第1の加算器、 103…符号化器、 104…DCT変換器、 105…量子化器、 106…出力端子、 107…復号化器、 108…逆量子化器、 109…逆DCT変換器、 110…第2の加算器、 111…ラインメモリ、 112…予測信号発生器、 200…ブロック、 300,301…三角形、 401,402…発生器、 403,404…画像データ、 500…加算器、 601,602,603…誤差計算器、 604…比較器、 605…スイッチ、 700…動き検出器、 701…動き補償器、 702…フレームメモリ、 703…最適モード選択器、 800,804…形状曲線、 802,805,810…処理対象の小領域、 808…曲線、 901…入力端子、 902…データ解析器、 903…復号化器、 904…逆量子化器、 905…逆DCT変換器、 906…加算器、 907…出力端子、 908…コントローラ、 909…動き補償器、 910…予測信号発生器、 911…ラインメモリ、 912…フレームメモリ、 913…スイッチ、 922…予測信号発生器、 923…動き補償器、 990…形状復号化器、 1001…ブロックサンプリングユニット、 1002…動き検出ユニット、 1003…補償ユニット、 1004…DCT変換器、 1005…量子化ユニット、 1006…エントロピー符号化ユニット、 1007…レートコントローラ、 1008,1009…ユニット、 1010…ローカル復号化フレームメモリ、 1011…基準フレームメモリ、 1012…ブロックサンプリングユニット、 1013…加算器、 1014…DCT変換ユニット、 1015…量子化ユニット、 1016…加算器、 1017…DCT変換領域予測ユニット、 1018…ブロックメモリ、 1019…加算器、 1020…エントロピーVLC符号化ユニット、 1021…逆量子化ユニット、 1022…逆DCT変換ユニット、 1023…加算器、 1024…フレームメモリ、 1025…動き検出及び補償ユニット、 1026…ブロックサンプリングユニット、 1027…加算器、 1028…DCT変換ユニット、 1029…加算器、 1030…量子化ユニット、 1031…DCT変換領域予測ユニット、 1032…ブロックメモリ、 1033…逆量子化ユニット、 1034…エントロピーVLC符号化ユニット、 1035…加算器、 1036…逆DCT変換ユニット、 1037…加算器、 1038…フレームメモリ、 1040…ブロックメモリ、 1041…ユニット、 1042…No−Predブロック、 1043…Up−Predブロック、 1044…Left−Predブロック、 1045…Other−Predブロック、 1048,1049,1050…ユニット、 1051…エントロピーVLD復号化ユニット、 1052…加算器、 1053…DCT変換領域予測ユニット、 1054…ブロックメモリ、 1055…逆DCT変換ユニット、 1056…加算器、 1057…動き検出及び補償ユニット、 1059…逆量子化ユニット、 1101,1102…カレントブロック、 2031…ブロックサンプリングユニット、 2032…加算器、 2033…DCT変換ユニット、 2034…量子化ユニット、 2035…加算器、 2036…H/V/Zスキャンユニット、 2037…エントロピーVLC符号化ユニット、 2038…加算器、 2039…ブロックメモリ、 2040…DCT変換領域予測ユニット、 2041…逆量子化ユニット、 2042…逆DCT変換ユニット、 2043…加算器、 2044…フレーメモリ、 2045…動き検出及び補償ユニット、 2051…可変長デコーダユニット、 2052…H/V/Zスキャンユニット、 2053…加算器、 2054…ブロックメモリ、 2055…DCT変換領域予測ユニット、 2056…逆量子化ユニット、 2057…逆DCT変換ユニット、 2058…加算器、 2059…フレームメモリ、 2060…動き検出及び補償ユニット、 2061…ブロックメモリ、 2062…減算ユニット、 2063…H/V/Zスキャンユニット、 2064…エントロピー符号化ユニット、 2065…比較ユニット、 2066…選択ユニット、 B0…カレントブロック、 B1…左上のブロック、 B2…上のブロック、 B3…右上のブロック、 B4…左のブロック。
フロントページの続き (72)発明者 ティオ ケン・タン シンガポール国シンガポール470601,ベド ック・リザーバー・ロード ブロック601 08−506番

Claims (1)

    【特許請求の範囲】
  1. 【請求項1】 可変長符号化されたDCT係数を含む入
    力ビットストリームを入力するステップと、 上記可変長符号化されたDCT係数をDCT係数の1次
    元列に復号化するステップと、 上ブロック(A)、左ブロック(B)及び上記上ブロッ
    ク(A)と上記左ブロック(B)の間に位置する対角ブ
    ロック(C')について、上記左ブロック(B)と上記
    対角ブロック(C')とのDC係数の差及び上記対角ブ
    ロック(C')と上記上ブロック(A)とのDC係数の
    差を求め、これらの差のうちいずれが小さいかに基づい
    てカレントブロックに隣接する上ブロック(A)又は左
    ブロック(B)のいずれかから上記カレントブロックの
    DC係数を予測すべき予測ブロックを適応的に選択し、
    上記DC係数予測のために上記選択されたブロックから
    上記カレントブロック(C)のAC係数を予測するステ
    ップと、 上記予測ブロックのAC係数について、カレントブロッ
    クの量子化ステップサイズによりスケーリングを行うス
    テップと、 上記スケーリングされた上記予測ブロックのAC係数か
    らカレントブロックのAC係数を予測するステップとを
    含むことを特徴とする画像予測復号化方法。
JP2000368090A 1996-05-28 2000-12-04 画像予測復号化方法 Expired - Lifetime JP3157144B1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000368090A JP3157144B1 (ja) 1996-05-28 2000-12-04 画像予測復号化方法

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
JP13297096 1996-05-28
JP8-132970 1996-05-28
JP17642696 1996-07-05
JP8-176426 1996-07-05
JP25467796 1996-09-26
JP8-254677 1996-09-26
JP2000368090A JP3157144B1 (ja) 1996-05-28 2000-12-04 画像予測復号化方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2000186291A Division JP3149417B2 (ja) 1996-05-28 2000-06-21 画像予測復号化方法及び装置

Publications (2)

Publication Number Publication Date
JP3157144B1 JP3157144B1 (ja) 2001-04-16
JP2001204036A true JP2001204036A (ja) 2001-07-27

Family

ID=27471727

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000368090A Expired - Lifetime JP3157144B1 (ja) 1996-05-28 2000-12-04 画像予測復号化方法

Country Status (1)

Country Link
JP (1) JP3157144B1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005532768A (ja) * 2000-12-06 2005-10-27 リアルネットワークス・インコーポレイテッド ビデオ・データのイントラ符号化方法及び装置
US8964836B2 (en) 2004-06-03 2015-02-24 Industry Academic Cooperation Foundation Kyunghee University Method and apparatus for spatial predictive encoding and/or decoding of video data

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005532768A (ja) * 2000-12-06 2005-10-27 リアルネットワークス・インコーポレイテッド ビデオ・データのイントラ符号化方法及び装置
US8964836B2 (en) 2004-06-03 2015-02-24 Industry Academic Cooperation Foundation Kyunghee University Method and apparatus for spatial predictive encoding and/or decoding of video data

Also Published As

Publication number Publication date
JP3157144B1 (ja) 2001-04-16

Similar Documents

Publication Publication Date Title
JP3149417B2 (ja) 画像予測復号化方法及び装置
JP3857298B2 (ja) 画像予測符号化装置及び方法、並びに画像予測復号化装置及び方法
JP3343554B1 (ja) 画像予測復号化方法及び画像予測符号化装置
JP3157144B1 (ja) 画像予測復号化方法
JP2002359852A (ja) 画像予測復号化装置及び方法
JP3851317B2 (ja) 画像予測符号化方法及び装置
JP3343553B1 (ja) 画像予測符号化装置及び方法
JP3857297B2 (ja) 画像予測符号化方法及び装置

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080209

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090209

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100209

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100209

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110209

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120209

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120209

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130209

Year of fee payment: 12

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130209

Year of fee payment: 12

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140209

Year of fee payment: 13

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S131 Request for trust registration of transfer of right

Free format text: JAPANESE INTERMEDIATE CODE: R313133

SZ02 Written request for trust registration

Free format text: JAPANESE INTERMEDIATE CODE: R313Z02

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

EXPY Cancellation because of completion of term