JP2002142225A - 画像信号符号化装置 - Google Patents

Abstract

(57)【要約】 【課題】 復号後に他の画像信号や文字等の挿入・合
成、画像信号の編集等の加工処理を受けた画像信号に対
して、画質劣化が少ない再符号化を可能とする画像信号
符号化装置を提供する。 【解決手段】 有為無為検出回路７２では、該当するマ
クロブロックのＥｄｉｔｅｄ Ｆｌａｇと共に、符号化
情報の予測モードがＩｎｔｒａブロックでない場合に
は、予測された参照画像データが存在するマクロブロッ
クのＥｄｉｔｅｄＦｌａｇを読み込む。読み込んだＥｄ
ｉｔｅｄ Ｆｌａｇの内、少なくとも一つが１となって
いる場合には、符号化情報は無為であるとする。無為と
判断した場合、及び符号化情報分離回路２１から非検出
信号が出力された場合には、新たに符号化パラメータに
該当する情報を生成し符号化対象マクロブロックの符号
化を行う。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、高能率予測符号化
を行う画像信号符号化装置に関するものである。そし
て、この発明は、復号後に他の画像信号や文字等の挿入
・合成、画像信号の編集等の加工処理を受けた画像信号
に対して、画質劣化が少ない再符号化を可能とする画像
信号符号化装置を提供することを目的としている。

【０００２】

【従来の技術】近年、デジタル化された画像・音声信号
に対し高能率予測符号化による圧縮を行い、その圧縮さ
れた情報を用いて、衛星波、地上波、電話回線などの伝
送路により情報を配信するサービスが実用化されてい
る。このようなサービスにおいて、動画像信号・音声信
号の高能率予測符号化方式として国際規格であるMPEG2
が用いられている。MPEG2は、画像信号の隣接画素間の
相関（空間方向の相関）、及び、フレームもしくはフィ
ールドの相関（時間方向の相関）を利用して、画像信号
の情報量を圧縮する符号化方式である。

【０００３】MPEG2規格における画像符号化は次のよう
なアルゴリズムで処理される。まず時間的に連続する画
像フレームを、基準フレームと予測フレームにふりわけ
る。基準フレームは空間方向の相関のみを用いることで
そのフレームの符号化データのみで復元することができ
る。予測フレームは、基準となるフレームからの時間方
向の相関と空間方向の相関とを共に用いることにより、
基準フレームに対してより符号化効率を高めることがで
きる。予測フレームは、復号された基準フレームと符号
化データより復元される。

【０００４】具体的なMPEG2画像符号化で用いられる符
号化体系について図３を用いて説明する。基準フレーム
であるIフレームは定期的に存在し復号処理の基準とな
る。また、予測フレームには、時間的に前の基準フレー
ムからの予測のみで符号化されるPフレームと、時間的
に前後の2つの基準フレームから予測符号化されるBフレ
ームが存在する。Pフレームは、自身が予測フレームで
あると共に続くBフレームやPフレームの基準フレームに
もなる。

【０００５】Iフレームの画像信号は輝度信号で水平16
画素×垂直16画素のマクロブロックと呼ばれる処理単位
に分割される。分割されたマクロブロックのデータは、
更に8×8画素単位の2次元ブロックに分割され、直交変
換の一種であるDCT（離散コサイン変換）処理が行われ
る。DCT変換後の信号はその2次元ブロックの周波数成分
に準じた値を示すため、一般的な画像では低域に成分が
集中する。また、高周波数成分の情報劣化は低周波数成
分の情報劣化よりも視覚的に目立ちにくい性質がある。
よって低域成分を細かく高域成分を荒く量子化し、その
量子化の係数成分と係数成分がない（係数0）ものとの
連続する長さを可変長符号化することにより、情報量を
圧縮している。

【０００６】Pフレームの画像信号は、Iフレームと同様
に16×16画素のマクロブロックに分割される。Pフレー
ムでは、マクロブロック毎に基準フレームとの間の動き
ベクトルを計算する。動きベクトルの検出は一般的にブ
ロックマッチングにより求められる。マクロブロックの
各画素と、動きベクトル値だけマクロブロックの存在す
る水平・垂直の位置を動かした場所の基準フレームを16
×16画素にブロック化した各画素の差分絶対値総和（も
しくは差分二乗総和）を求め、その最小値をとる動きベ
クトルの値を、検出された動きベクトルとして出力す
る。

【０００７】マクロブロックの各画素は、動きベクトル
により切り出された2次元ブロックの各画素との差分が
とられる。正確な動きベクトルが検出された場合には、
差分ブロックの情報量は元のマクロブロックの持ってい
る情報量よりも大幅に少なくなるため、Iフレームより
も荒い量子化処理が可能となる。実際には差分ブロック
を符号化するか非差分ブロック（Intraブロック）を符
号化するかを選択し（予測モード判定）、選択されたブ
ロックに対してIフレームと同様のDCT・可変長符号化処
理を施し、情報量が圧縮される。

【０００８】Bフレームは、Pフレームと同様の処理が行
われるが、基準フレームが前後に存在するため、それぞ
れの基準フレームとの間で動きベクトルを検出する。B
フレームでは予測の選択肢が、前基準フレームからの予
測（Forward予測）・後基準フレームからの予測（Backw
ard予測）・２つの予測ブロックの画素毎平均値（Avera
ge予測）、の3種類存在し、Intraブロックを合わせた4
種類から予測モード判定を行う。Bフレームは、時間的
に前後の基準フレームから予測が可能となるため、Pフ
レームよりもさらに予測効率が向上する。よって、一般
的にPフレームよりもさらに荒く量子化される。選択さ
れたブロックはI、Pフレームと同様の符号化処理がなさ
れる。

【０００９】Bフレームは復号される為に、時間的に後
の基準フレームからの予測処理が行われるため、基準フ
レームは、Bフレームに先行して符号化される。そのた
め、入力された画像信号は図４に示される順番に並べ替
えが行われ、符号化される。復号処理では、逆の並べ替
えを行ない出力することにより、入力された画像信号の
順番に復号画像が再生される。

【００１０】MPEG2画像符号化を実現する従来の一般的
な符号化装置と復号装置とをそれぞれ図６，図７に示し
説明する。

【００１１】図６に示される符号化装置では、入力され
たデジタル画像信号がフレームメモリ（入力画像メモ
リ）１に記録され、符号化シンタックスに従って符号化
される順番に並べ替えを行うための遅延がなされる。入
力画像メモリ１から出力されたデジタル信号は、2次元
ブロック変換回路２にてマクロブロックが切り出され
る。

【００１２】基準フレームにおいては、マクロブロック
データは直交変換回路４にて8×8画素単位でDCT変換が
行われ、量子化回路４に送られる。量子化回路４におい
て量子化されたDCT係数は、符号化回路５において符号
化テーブル１６の係数に対応したアドレスを参照するこ
とにより可変長または固定長の符号化が行われ、マルチ
プレクサ６により上記符号化データと画面内でのマクロ
ブロックの場所等を示す付加情報（符号化パラメータ）
とが多重化され、ビットストリームとして出力される。

【００１３】一方、量子化回路４で量子化されたDCT係
数は逆量子化回路７、逆直交変換回路８において逆量子
化及び逆DCT処理が行われ、符号化ビットストリームが
復号されてデブロック回路９及び加算回路１０を介して
参照画像メモリ１１に格納される。

【００１４】続いて予測フレームにおいては、入力画像
メモリ１から切り出されたマクロブロックデータと参照
画像メモリ１１に格納されている画像との間で動きベク
トル検出回路１２によって、画像間での動きベクトルが
求められる。出力された動きベクトルにより、予測ブロ
ックが動き補償予測回路１３により参照画像メモリ１１
から切り出され、動き補償予測回路１３では予測モード
の選択を行ない、符号化する入力画像ブロックとの差分
信号を減算器１４で生成し直交変換回路３に送り出す。
差分信号は前記フレームの各ブロックと同様の処理が行
われ、DCT係数が量子化処理され動きベクトルや予測モ
ード（符号化パラメータ）と共にビットストリームとし
て出力される。

【００１５】符号量の制御に関しては、出力されたスト
リームの符号量と符号量制御回路１５において目標とす
る符号量との比較がとられ、目標符号量に近づけるため
に量子化回路４の量子化の細かさ（量子化スケール）を
制御する。３種類の情報量の異なるフレームタイプに対
し、設定された符号化レートに対してそれぞれのフレー
ムタイプの性質と出現頻度を用いて、各フレームに対す
る目標符号量を算出する。また目標符号量は、復号装置
のストリームバッファを仮想的にシミュレートして、バ
ッファのオーバーフロー・アンダーフローが起きないよ
うに制限される。量子化スケールは、スケールと出力符
号量とが一般的にほぼ反比例の関係があることを利用し
て、各フレームタイプ毎に目標符号量に対する量子化ス
ケール値を計算し、量子化処理を行う。ブロック毎に目
標符号量に近づく方向に量子化スケールを変動させるこ
とによって、目標符号量内に符号化ビットストリームを
抑える。

【００１６】図７に示される復号装置では、まず入力さ
れたビットストリームがストリームバッファ３１に蓄え
られる。符号化ビットストリームには仮想的にシミュレ
ートされたバッファ値が書かれており、そのバッファ値
分ビットストリームが蓄えられてから復号処理を行うこ
とにより、バッファが破綻して復号処理が止まることを
防いでいる。ビットストリームは、可変長復号回路３２
にて量子化スケール、予測モード、動きベクトル等の付
加情報を分離すると共に、量子化されたDCT係数を復号
する。復号されたDCT係数は符号化回路内と同様の逆量
子化回路３３、逆直交変換回路３４において逆量子化及
び逆DCT処理が行われ、Intraブロックもしくは差分ブロ
ックが復号され、デブロック回路３５を介して加算器３
６に送られる。

【００１７】予測ブロックの場合には、動き補償予測回
路３７にて復号した予測モードと動きベクトル値より、
参照画像メモリ３８から切り出された予測ブロックとの
加算が加算器３６で行われ、マクロブロックの画像信号
が復元される。IまたはPフレームの場合には復元された
マクロブロックデータは参照画像メモリ３８に書き込ま
れる。Bフレームの場合には、出力フレームメモリ３９
に蓄えられ画像信号として出力される。参照画像メモリ
３８に書かれたI、Pフレームの画像データは図５のタイ
ミングに合わせて、出力するタイミングで出力フレーム
メモリ３９に加えられBフレームと同様に出力される。

【００１８】このような画像符号化を用いた情報配信す
るシステムにおいて、一旦符号化されたストリームを復
号して再度符号化処理を行う必要性が存在する。一つは
情報を取材・記録された場所から情報を配信する場所に
伝送する場合である。伝送路としては有線・無線の通信
回線や記録媒体が考えられるが、伝送路と配信するシス
テムの伝送路の所有する帯域幅が異なる場合には、ビッ
トストリームのビットレートを変更する必要がある。他
には、記録された画像信号を編集・加工する場合が存在
する。複数の画像信号を繋ぎあわせたり、画像信号上に
文字テロップ等を挿入するような場合には、ストリーム
を復号する事なしに実現することは難しい。

【００１９】このような、再符号化処理を行う装置（ト
ランスコーダ）において、再符号化時の符号化劣化を少
なくするために、トランスコーダで伝送される画像信号
（復号されたベースバンド信号）上に、符号化された際
のフレームタイプ等のフレーム情報やマクロブロックの
付加情報（以降、符号化情報（符号化パラメータ）と呼
ぶ）を重畳させて伝送する方式が考えられている。

【００２０】MPEG2符号化においては、Iフレーム、Pフ
レーム、Bフレームの順で画像信号の品質が劣化してい
る場合が一般的である。Iフレームは基準となるフレー
ムであるため、他のフレームより細かく量子化されてい
ると共に、他の画像からの参照がないため、参照フレー
ム劣化の影響を受けない。Pフレーム、Bフレームとなる
につれて、荒く量子化されると共に参照フレーム劣化の
影響を受けやすい。再符号化する時にBフレームとなっ
ていたフレームをIフレームとして符号化すると、劣化
の大きかった画像を基準フレームとして使用したため、
予測されるフレームがその劣化の影響を受け、再符号化
した際の画質劣化が大きくなる。符号化情報を参照し
て、再符号化時のフレームタイプを合わせてやること
で、上記劣化要因が低減される。また、符号化情報内の
マクロブロック付加情報を用いることで、動きベクトル
検出のための処理量を削減できると共に、量子化スケー
ルと符号化ビット数より、マクロブロックの持っている
情報量の指針が得られ、ビットレート変換時に良好な符
号量コントロールが期待できる。

【００２１】再符号化のための符号化情報は、時間的、
空間的に、ビデオ信号に対応づけて、復号処理手段から
再符号化処理手段に伝送する必要がある。

【００２２】これを実現するための伝送方法として、標
準テレビ品質4:2:2デジタルコンポーネントビデオ信号
にMPEG-2ビデオの符号化情報を重畳して伝送する規定を
定めたSMPTE 319Mがある。また、高品位テレビ品質4:2:
2デジタルコンポーネントビデオ信号にMPEG-2ビデオの
符号化情報を重畳して伝送する規定を定めるべくSMPTE
351M案が現在審議中である。

【００２３】符号化情報の具体的な重畳方法についてSM
PTE 319Mを例として説明する。ベースバンド信号は輝度
信号（Y）及び２つの色差信号（Cb,Cr）が４：２：２の
サンプリング比率で伝送され、それぞれ１画素の値が10
ビットで構成されている（1024レベル）。MPEG2画像符
号化においては、復号画像の情報量は8ビット（256レベ
ル）で構成されるので、復号画像信号の下位2ビットは
伝送不要領域となる。この領域に、符号化情報を重畳す
る。SMPTE 319M Table 3の例では、伝送不要領域の内
のCb,Crの最下位ビットを重畳領域としている。

【００２４】具体的に重畳する符号化情報の例としてSM
PTE 319Mにて規格化された符号化情報（SMPTE 319M Fi
gure 1参照）を説明する。各々のマクロブロックを構成
する16×16画素の領域毎に、そのマクロブロック付加情
報とフレーム情報の一部を書き込む。（このマクロブロ
ック付加情報とフレーム情報の一部とを合わせてここで
は符号化情報（符号化パラメータ）と呼んでいる。）C
b,CrのLSBを合わせると256ビット存在し、その２５６ビ
ットがSMPTE 319M Figure 1の情報を示す。マクロブロ
ック付加情報としては、動きベクトル値、予測モード、
量子化スケール、有効DCT係数を有する8×8ブロックの
パターン（coded#block#pattern）等の付加情報と、各
付加情報及びDCT係数を符号化した際に要したビット数
を情報として記録する。

【００２５】また、picture#element#informationの領
域には、SMPTE 319M Table 4で示されるようなフレー
ム情報がマクロブロック毎に分割されて書き込まれる。
この領域はマクロブロック毎に32ビットずつ存在し、フ
レーム全体に渡ってすべてのマクロブロックのpicture#
element#informationを集めると、複数回コピーされた
フレーム情報が復元できる。

【００２６】このような、符号化情報を復号装置から符
号化装置に伝送するトランスコーダの例を図８に示す。
この例では、復号装置と符号化装置との間に合成装置を
挿入し、復号されたベースバンド信号に対して編集加工
された画像を符号化装置で再符号化するものである。図
８に示す復号装置及び符号化装置の構成図を図９，図１
０にそれぞれ示し説明する。なお、図６，図７にそれぞ
れ示した符号化装置、復号装置と同様な部分には同一の
符号を付し、その部分の説明は省略する。

【００２７】図９に示す復号装置の可変長復号回路３２
は、復号した際のフレーム情報とマクロブロック付加情
報及び、マクロブロックの符号化ビット数を算出し、符
号化情報生成回路４１に入力する。符号化情報生成回路
４１においては、フレーム情報及びマクロブロック付加
情報（符号化情報（符号化パラメータ））をSMPTE 319M
Figure 1のようなビットパターンにフォーマットし、
符号化情報メモリ４２に蓄える。

【００２８】符号化情報重畳回路４３においては、出力
フレームバッファ３９に蓄えられている画像情報と、符
号化情報メモリ４２に蓄えられている符号化情報を入力
し、画像情報の色差信号のLSBビットに符号化情報を重
畳する。符号化情報メモリ４２は、I、P、Bフレームの
出力並び替えに対応するように複数フレーム分具備して
おり、符号化情報重畳回路４３はフレームタイプにより
とり出す符号化情報の順番を変更する。

【００２９】図１０に示す符号化装置においては、符号
化情報分離回路２１にて入力画像メモリの画像信号から
符号化情報を抜き取る。抜き取られた符号化情報は、符
号化情報メモリ２２に蓄えられる。符号化シンタックス
制御回路２４では、抜き取られた符号化情報からフレー
ムタイプを検出し、入力画像を符号化順に並べ替える制
御を行う。フレームの符号化情報を抜き取ることが出来
ない場合には、非検出信号が符号化情報分離回路２１か
ら送られ、従来の通常の符号化処理と同様に符号化装置
内で符号化シンタックスを構成し、符号化処理を行う
（符号化情報が重畳されていない画像信号に対する処理
と同様の通常の符号化処理を行う）。マクロブロック情
報生成回路２３では、符号化情報メモリ２２に格納され
ている符号化情報を符号化シンタックスに応じて順番を
入れ替えて読み込み、各マクロブロックに対する符号化
情報を抜き出す。

【００３０】抜き出された符号化情報は、動き補償予測
回路１３、符号量制御回路１５に伝送される。動き補償
予測回路１３では、符号化情報に存在する動きベクトル
と予測モードを用い、参照画像メモリ１１から予測ブロ
ックを切り出し、符号化する入力画像ブロックとの差分
信号を生成し、直交変換回路３に送り出す。フレームで
の符号化情報もしくは、マクロブロック毎の符号化情報
を抜き取ることができなかった場合には、非検出信号が
符号化情報分離回路２１から動き補償予測回路１３に送
られ、従来の符号化処理と同様に動きベクトル検出及び
予測モード選択処理が行われる。

【００３１】符号量制御回路１５では、マクロブロック
毎の符号化した際の量子化スケール及び要したビット数
が符号化情報として入力され、現在制御ターゲットであ
る符号化ビットレートでの設定符号量と比較処理を行う
ことにより、適切な量子化スケールを決定し、符号化処
理を行う。

【００３２】

【発明が解決しようとする課題】符号化された画像信号
に対して編集、テロップ挿入等の加工を施したい場合
に、トランスコーディング装置を構成すると、図８に示
したように復号装置と符号化装置との間に合成装置を挿
入した装置が考えられる。復号したベースバンド信号
（画像信号）に対して編集加工処理を行い、その編集加
工処理を行ったベースバンド信号を符号化装置に入力し
て再符号化する。この場合、合成装置で加工されたベー
スバンド信号の符号化情報が破壊されたり、符号化情報
と加工されたベースバンド信号との関係が一致しなくな
ったりする問題がある。符号化情報が破壊されると、フ
リーで再符号化を行うことになり、良好なトランスコー
ディング機能が実現できない。また、加工されたベース
バンド信号との関係が一致しなくなった符号化情報をそ
のまま引き継ぐと、符号化情報内の動きベクトルや予測
モード等のマクロブロック付加情報に矛盾が生じ、画質
の劣化を生じる問題が発生する。

【００３３】本発明は、復号後に他の画像信号や文字等
の挿入・合成、画像信号の編集等の加工処理を受けた画
像信号に対して、画質劣化が少ない再符号化（高能率予
測符号化による再符号化）を可能とする画像信号符号化
装置を提供することを目的としている。

【００３４】

【課題を解決するための手段】そこで、上記課題を解決
するために本発明は、下記の装置を提供するものであ
る。

【００３５】入力画像信号に対して高能率予測符号化を
行う画像信号符号化装置において、復号前の符号化時の
マクロブロックに対応する符号化パラメータが重畳され
ている復号画像信号を入力画像信号とし、この入力画像
信号に重畳されている前記符号化パラメータを分離し
て、符号化対象となる前記入力画像信号の符号化対象マ
クロブロックに対応する前記分離した符号化パラメータ
から検出した第１の加工処理されたことを示す情報と、
前記符号化対象となる入力画像信号の参照画像におけ
る、前記符号化対象マクロブロックに対する予測ブロッ
クに該当する前記分離した符号化パラメータから検出し
た第２の加工処理されたことを示す情報とに基づき、前
記符号化対象マクロブロックに対応する前記分離した符
号化パラメータが、符号化時に有効であるか無効である
かを判断する判断手段を設け、この判断手段が有効と判
断した場合には、前記符号化対象マクロブロックに対応
する前記分離した符号化パラメータに基づき前記符号化
対象マクロブロックの符号化を行い、この判断手段が無
効と判断した場合には、新たに符号化パラメータに該当
する情報を生成し前記符号化対象マクロブロックの符号
化を行う、ことを特徴とする画像信号符号化装置。

【００３６】

【発明の実施の形態】本発明の一実施例を用いた合成処
理を可能とするトランスコーディング装置（概略構成は
図８と同様）を例として、その一実施例の各部を説明す
る。図１に一実施例における合成装置の構成図を示す。

【００３７】合成装置には、図９に示した復号装置で復
号されたベースバンド画像信号（符号化情報（符号化パ
ラメータ）が重畳されている復号画像信号）が入力さ
れ、フレームメモリ５１に蓄えられる。画像合成回路部
５２では、フレームメモリ５１に記憶された画像信号
と、合成信号生成回路５３で生成されるテロップデー
タ、もしくは合成信号入力回路５４から入力された他の
画像信号を取り込み、合成処理を行う。

【００３８】画像合成回路部５２内では、マクロブロッ
クに相応するブロックを切り出す2次元ブロック回路５
５，６２が具備されている。2次元ブロック回路５５に
おいては、10ビット入力信号の上位8ビットと下位2ビッ
トとが分離され、それぞれ作業メモリ５６，５７に格納
される。ブロック合成回路５８では、切り出されたブロ
ック内に合成処理を行う画像が存在する場合には、フレ
ームメモリ５１側の画像信号及び合成信号生成回路５３
側（または合成信号入力回路５４側）の画像信号それぞ
れの上位8ビットが入力され、合成処理が行われ、作業
メモリ５６に合成されたデータが格納される。それと共
にEdited Flag挿入回路５９において、下位2ビットをブ
ロック化したデータ内の特定位置のビットを1に書き換
え、作業メモリ５７に格納する。

【００３９】符号化情報（符号化パラメータ）の具体的
なフォーマットの例としては、前述したSMPTE 319M Fi
gure 1に示すものを用いるが、そのフォーマットのマク
ロブロック付加情報においてReserved Areaとなってい
る部分の内の１ビット（例えば水平方向０ビット目、垂
直方向９ビット目）を、Edited Flag追加用エリアとし
て用いる。このようなフォーマットをとる場合には、Ed
ited Flagを追加したことにより、CRCデータの変更が必
要となるため、CRC生成回路６０を具備する。合成処理
が行われない場合には、作業メモリ５６，５７の内容は
変更されない。

【００４０】デブロック回路６１では、合成後の作業メ
モリ５６，５７に存在する上位8ビット、下位2ビットを
合わせて10ビット信号を構成し、フレームメモリ５１の
同位置に書き込む。フレームメモリ５１に書き込まれた
画像信号が出力され、符号化装置に入力される。

【００４１】次に、一実施例における符号化装置の構成
図を図２に示し、これについて説明する。なお、符号化
装置の構成の内は、従来例である図１０に示すものと同
様の部分には同一の符号を付し、その部分の具体的な説
明は省略する。

【００４２】マクロブロック情報生成回路７０は、従来
例で示した機能と共に、符号化情報内（符号化パラメー
タ）のEdited Flagを抜き出し、IピクチャもしくはPピ
クチャの場合には参照Edited Flagメモリ７１に格納す
る。参照Edited Flagメモリ７１は、マクロブロック毎
に１ビットで構成され、参照画像メモリ１１と同様に、
基準フレームとなる画像のEdited Flagが格納されてコ
ントロールされる。

【００４３】また、Edited Flagは有為無為検出回路７
２に入力され、符号化情報の使用が可能か否かを判断す
る。有為無為検出回路７２では、該当するマクロブロッ
ク（符号化対象となる入力画像信号の符号化対象マクロ
ブロック）のEdited Flagと共に、符号化情報の予測モ
ードがIntraブロックでない場合には、動きベクトル値
を読み取り、予測された参照画像データが存在するマク
ロブロック（符号化対象となる入力画像信号の参照画像
における、前記符号化対象マクロブロックに対する予測
ブロック）のEdited Flagのアドレス値を計算する。

【００４４】動きベクトル値が水平方向X画素、垂直方
向Y画素、マクロブロックの先頭位置のポイントが水平
方向H、垂直方向Vの場合、必要となるEdited Flagが存
在するアドレス値は４種類存在し、マクロブロック位置
が、 （１）水平（H＋X）／16、垂直（V＋Y）／16 （２）水平（H＋X＋１５）／16、垂直（V+Y）／16 （３）水平（H＋X）／16、垂直（V＋Y＋15）／16 （４）水平（H＋X＋１５）／16、垂直（V＋Y＋１５）／
16 となる。これらのアドレス値から読み込んだEdited Fla
g（第２の加工処理されたことを示す情報）及び自マク
ロブロックのEdited Flag（第１の加工処理されたこと
を示す情報）の内、少なくとも一つが1となっている場
合には、符号化情報（符号化対象マクロブロックに対応
する前記符号化情報分離回路２１で分離した符号化パラ
メータ）は無為であるとする。Intraブロックの場合に
は、自マクロブロックのEdited Flagに1が立っている時
に、無為であると判断する。

【００４５】有為無為検出回路７２の出力信号と、符号
化情報分離回路２１によるマクロブロック毎の符号化情
報の非検出信号を参照し、マクロブロック毎の符号化処
理を行う。即ち、有為無為検出回路７２が有為と判断し
た場合には、符号化対象マクロブロックに対応する前記
の分離した符号化パラメータに基づき符号化対象マクロ
ブロックの符号化を行う。有為無為検出回路７２が無為
と判断した場合、及び符号化情報分離回路２１から非検
出信号が出力された場合には、新たに符号化パラメータ
に該当する情報を生成し前記符号化対象マクロブロック
の符号化を行う。

【００４６】以上説明したように、本実施例の装置によ
れば、符号化された画像信号を一旦復号してから編集、
テロップ挿入等の合成加工を施す場合に、合成装置で入
力画像信号の符号化情報を保持すると共に、加工された
ことを示すフラグ（Edited Flag）をマクロブロック毎
に書き込むことにより、符号化情報（符号化パラメー
タ）内のフレーム情報を完全に保持したまま再符号化処
理を行うことができる。よって、再符号化時のIフレー
ムの位置を以前に符号化されていたストリームのIフレ
ームの位置に合わせることができ、タンデム接続時の画
像劣化を低減できる。

【００４７】さらに、本実施例の装置によれば、マクロ
ブロック内の一部分が加工されていることを示すフラグ
（Edited Flag）を合成装置と符号化装置の間にて受け
渡す仕組みを構築することで、符号化するマクロブロッ
ク自体が加工されているか否かを知ることができると共
に、予測処理を行う際の参照画像の予測ブロック内に加
工された領域が存在するか否かを容易に認識することが
でき、誤った符号化情報を使って再符号化処理を行うこ
とを防止できる。これにより、再符号化に有効な符号化
情報を適切に使用できるようになり、良好なトランスコ
ーディング機能が実現できる。

【００４８】

【発明の効果】以上の通り、本発明の画像信号符号化装
置は、復号後に加工処理を受けた画像信号に対して再符
号化を行う場合に、誤った符号化情報（符号化パラメー
タ）を使用して再符号化処理を行うことを防止でき、有
効な符号化情報を適切に使用して再符号化が行える。従
って、この画像信号符号化装置は画質劣化が少ない再符
号化を可能とすると共に、良好なトランスコーディング
機能を実現できる。

【図面の簡単な説明】

【図１】一実施例における合成装置の構成図である。

【図２】一実施例における符号化装置の構成図である。

【図３】MPEG2画像符号化で用いられる符号化体系を示
す図である。

【図４】MPEG2符号化時の符号化順並べ替えのタイミン
グを示す図である。

【図５】復号時のストリーム到達順と復号画像の出力順
の関係を示す図である。

【図６】MPEG2画像符号化装置の構成図である。

【図７】MPEG2画像復号装置の構成図である。

【図８】合成処理を可能とするトランスコーディング装
置の構成図である。

【図９】トランスコーディング機能を有する従来のMPEG
2画像復号装置の構成図である。

【図１０】トランスコーディング機能を有する従来のMP
EG2画像符号化装置の構成図である。

【符号の説明】

２１ 符号化情報分離回路 ２２ 符号化情報メモリ ２４ 符号化シンタックス制御回路 ５１ フレームメモリ ５２ 画像合成回路部 ５３ 合成信号生成回路 ５４ 合成信号入力回路 ５５，６２ 2次元ブロック回路 ５６，５７ 作業メモリ ５８ ブロック合成回路 ５９ Edited Flag挿入回路 ６０ CRC生成回路 ６１ デブロック回路 ７０ マクロブロック情報生成回路 ７１ 参照Edited Flagメモリ ７２ 有為無為検出回路

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C059 KK01 KK36 MA00 MA01 MA23 ME01 NN00 NN21 PP05 PP06 PP07 PP16 SS01 SS06 UA02 UA33 5J064 AA01 BB03 BB08 BC01 BC25 BD01

Claims (1)

【特許請求の範囲】
1. 【請求項１】入力画像信号に対して高能率予測符号化を
   行う画像信号符号化装置において、 復号前の符号化時のマクロブロックに対応する符号化パ
   ラメータが重畳されている復号画像信号を入力画像信号
   とし、この入力画像信号に重畳されている前記符号化パ
   ラメータを分離して、符号化対象となる前記入力画像信
   号の符号化対象マクロブロックに対応する前記分離した
   符号化パラメータから検出した第１の加工処理されたこ
   とを示す情報と、前記符号化対象となる入力画像信号の
   参照画像における、前記符号化対象マクロブロックに対
   する予測ブロックに該当する前記分離した符号化パラメ
   ータから検出した第２の加工処理されたことを示す情報
   とに基づき、前記符号化対象マクロブロックに対応する
   前記分離した符号化パラメータが、符号化時に有効であ
   るか無効であるかを判断する判断手段を設け、 この判断手段が有効と判断した場合には、前記符号化対
   象マクロブロックに対応する前記分離した符号化パラメ
   ータに基づき前記符号化対象マクロブロックの符号化を
   行い、この判断手段が無効と判断した場合には、新たに
   符号化パラメータに該当する情報を生成し前記符号化対
   象マクロブロックの符号化を行う、ことを特徴とする画
   像信号符号化装置。