JP2000236522A

JP2000236522A - 画像情報処理装置および方法、並びに提供媒体

Info

Publication number: JP2000236522A
Application number: JP3408199A
Authority: JP
Inventors: Susumu Todo; 晋藤堂
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1999-02-12
Filing date: 1999-02-12
Publication date: 2000-08-29

Abstract

(57)【要約】【課題】マクロブロックにエラーが発生した場合にお
ける再生画像の乱れ、暴走、またはハングアップを抑止
する。【解決手段】簡易復号器８１は、入力されたデータス
トリームを復号し、マクロブロック長をメモリ８３に、
DC成分をメモリ８４に出力する。また、簡易復号器８１
は、データストリーム中のエラーを検出して修正MB選択
器８５に通知する。さらに、簡易復号器８１は、解読し
たヘッダに記述されている各種パラメータを修正MB選択
器８５およびMB符号系列発生器８６に出力する。修正MB
選択器８５は、異常箇所を判断してマクロブロックを置
換する区間を決定し、MB符号系列発生器８６は、メモリ
８４に記憶されているDC成分に基づいて、置換するマク
ロブロック生成する。置換マクロブロックはスイッチ８
７およびMBパッキング部８８を介して出力される。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像情報処理装置
および方法、並びに提供媒体に関し、特に、データスト
リームのエラーを修正する画像情報処理装置および方
法、並びに提供媒体に関する。

【０００２】

【従来の技術】近年において、デジタル映像信号を記録
媒体に記録したり伝送したりするためのフォーマットが
数種類提供されている。一般に、デジタル映像信号は、
データ量が極めて多いため、これを記録媒体に長時間記
録する場合、圧縮符号化することが必要である。この圧
縮符号化方法の代表的なものとして、MPEG(Moving Pict
ure Image Coding Experts Group)方式が知られてい
る。MPEG方式は、動き補償予測符号化と離散コサイン変
換（DCT:Discrete Cosine Transform)符号化とを組み合
わせたハイブリット方式である。すなわち、まず最初に
ビデオ信号のフレーム間の差分を取ることにより、時間
軸方向の冗長度を落とした後、離散コサイン変換を用い
て空間軸方向の冗長度を落として能率良く符号化が行わ
れる。

【０００３】ところで、記録媒体として磁気テープ等の
テープ状記録媒体を用いるビデオテープレコーダにおい
ては、回転ヘッドを用い、テープの走行方向に対して斜
めに傾斜したトラック、いわゆるヘリカルトラックを形
成するように記録がなされている。このようなヘリカル
トラックが記録形成されたテープ状記録媒体を、２倍
速、３倍速、あるいはサーチのように、高速でテープを
走行させる場合、回転ヘッドのテープ上での軌跡の角度
が記録トラックの傾き角度とは異なってくるため、ヘリ
カルトラックに記録された信号の全てを再生することが
できなくなる。すなわち、高速再生時には、各ヘリカル
トラックの一部を走査（トレース）するような再生が行
われる。

【０００４】MPEG方式を用いて圧縮符号化を行い、その
データをテープ状記録媒体に記録すると、上述したサー
チ等の高速再生を行った場合、各ヘリカルトラックの一
部しかトレースされないので、再生されたデータを有効
に活用して高品質の再生画像を得ることが困難になる。

【０００５】このため、MPEG方式をそのままテープ状記
録媒体の圧縮符号化方式に用いるよりも、高速再生時に
もある程度有効な画像再生が行える圧縮符号化方法を用
いることが好ましい。

【０００６】このことを考慮して、先に本願出願人は、
MPEG方式と同様に動き補償予測符号化と離散コサイン変
換符号化とを組み合わせたハイブリット方式であり、マ
クロブロックを単位として、マクロブロック内の全DCT
ブロックの各DC係数をまとめ、また全DCTブロックの各A
C係数の低次成分から高次成分までを、それぞれ次数毎
にまとめて順次配列して、テープ状記録媒体に記録する
ことにより、サーチ等の高速再生時、マクロブロック内
の画像再生に重要な全てのDC係数および低次のAC係数を
再生できるようにした圧縮符号化方式の記録フォーマッ
ト（以下、SXフォーマットと記述する）を提案してお
り、SXフォーマットのデータ構造については、例えば特
願平１０−０９１９９３号に記述されている。

【０００７】

【発明が解決しようとする課題】ところで、符号化され
たデータストリームにエラーが混入していた場合、その
データストリームは途中から正常に復号することができ
なくなる。例えば、MPEGにおいては、スライスが１つの
可変長符号系列であるので、スライスの中の所定のマク
ロブロックにエラーが生じた場合、そのマクロブロック
から、そのスライスの最後のマクロブロックまでが復号
不可能となることが多い。

【０００８】また、エラーが混入した符号系列が偶然に
復号できてしまうことがある。そのような場合、復号さ
れたデータ系列には、画素の過不足やアドレスの逆行等
の矛盾（エラー）が生じている可能性が極めて高い。

【０００９】このようなシンタックスエラーは、再生画
像を乱したり、デコーダの暴走やハングアップを引き起
こす原因となる課題があった。

【００１０】本発明はこのような状況に鑑みてなされた
ものであり、エラーの混入により復号不能となった箇所
を正常な符号系列に置換することにより、符号再生時の
暴走、またはハングアップを抑止し、もって、再生画像
の乱れを抑えるようにすることができるようにするもの
である。

【００１１】

【課題を解決するための手段】請求項１に記載の画像情
報処理装置は、データストリームの一部を復号する復号
手段と、データストリームに混入したエラーを検出する
検出手段と、復号手段で復号された情報に基づいて、検
出手段が検出したエラーに起因して復号不可能となる範
囲を判定する判定手段と、復号手段で復号された情報の
一部を記憶する記憶手段と、記憶手段で記憶された情報
の一部に基づいて、置換するデータを発生する発生手段
と、判定手段の判定結果に基づいて、少なくとも復号不
可能な範囲のデータを、発生手段が発生したデータに置
換する置換手段とを含むことを特徴とする。

【００１２】請求項６に記載の画像情報処理方法は、デ
ータストリームの一部を復号する復号ステップと、デー
タストリームに混入したエラーを検出する検出ステップ
と、復号ステップで復号された情報に基づいて、検出ス
テップで検出されたエラーに起因して復号不可能となる
範囲を判定する判定ステップと、復号ステップで復号さ
れた情報の一部を記憶する記憶ステップと、記憶ステッ
プで記憶された情報の一部に基づいて、置換するデータ
を発生する発生ステップと、判定ステップの判定結果に
基づいて、少なくとも復号不可能な範囲のデータを、発
生ステップで発生されたデータに置換する置換ステップ
とを含むことを特徴とする。

【００１３】請求項７に記載の提供媒体は、データスト
リームの一部を復号する復号ステップと、データストリ
ームに混入したエラーを検出する検出ステップと、復号
ステップで復号された情報に基づいて、検出ステップで
検出されたエラーに起因して復号不可能となる範囲を判
定する判定ステップと、復号ステップで復号された情報
の一部を記憶する記憶ステップと、記憶ステップで記憶
された情報の一部に基づいて、置換するデータを発生す
る発生ステップと、判定ステップの判定結果に基づい
て、少なくとも復号不可能な範囲のデータを、発生ステ
ップで発生されたデータに置換する置換ステップとを含
む処理を実行させるコンピュータが読み取り可能なプロ
グラムを提供することを特徴とする。

【００１４】請求項１に記載の画像情報処理装置、請求
項６に記載の画像情報処理方法、および請求項７に記載
の提供媒体においては、データストリームの一部が復号
され、データストリームに混入したエラーが検出され、
検出されたエラーに起因して復号不可能となる範囲が判
定され、復号された情報の一部が記憶され、記憶された
情報の一部に基づいて、置換するデータが発生され、復
号不可能な範囲のデータが置換される。

【００１５】

【発明の実施の形態】本発明を適用したビデオカセット
レコーダの構成について、図１を参照して説明する。は
じめにビデオカセットレコーダの記録系の構成について
説明する。シリアルデータ入力部(SDI_IN)１は、ビデオ
信号とオーディオ信号が多重されたシリアル信号SDI In
の入力を受け付けてパラレル信号に変換し、その入力の
位相基準信号Input Syncをトリガ回路(TG)１６に出力す
るようになされている。さらに、シリアルデータ入力部
１は、変換したパラレル信号からビデオ信号とオーディ
オ信号を分離して、ビデオ信号をSXエンコーダ(SX_ENC)
２に出力し、オーディオ信号を遅延部(DL)３に出力す
る。

【００１６】SXエンコーダ２は、入力されたビデオ信号
を、SXフォーマットに基づいて圧縮符号化し、符号化し
た信号SX1をECC(Error Correction Coding)エンコーダ
(ECC_ENC)４に出力する。遅延部３は、ビデオ信号がSX
エンコーダ２において符号化される間、対応するオーデ
ィオ信号AU1を遅延してECCエンコーダ４に出力するよう
になされている。

【００１７】ECCエンコーダ４は、SXフォーマットで圧
縮符号化されたビデオ信号SX1と非圧縮のオーディオ信
号AU1を入力信号として、誤り訂正符号化を実行し、出
力信号REC DATAをイコライザ(EQ)５に出力する。イコラ
イザ５は、入力された信号REC DATAを記録信号REC RFに
変換して回転ドラム(DRUM)６に供給する。回転ドラム６
は、取り付けられている記録ヘッド（図示せず）に、入
力された記録信号REC RFを供給し、磁気テープ(TAPE)７
に記録させるようになされている。

【００１８】次に、ビデオカセットレコーダの再生系の
構成について説明する。回転ドラム６の再生ヘッド（図
示せず）は、磁気テープ７に記録されている磁気信号を
再生して再生信号PB RFをイコライザ５に出力する。イ
コライザ５は、入力された再生信号PB RFに位相等化処
理を施してECCデコーダ(ECC_DEC)８に出力する。ECCデ
コーダ８は、入力された信号PB DATAに対して、誤り訂
正復号(Error CorrectionDecoding)を実行して、再生ビ
デオ信号SXPBと再生オーディオ信号AUPBを分離するとと
もに、圧縮されている再生ビデオ信号SXPBをSXデコーダ
(SX_DEC)９、シリアルデータ出力部(SDTI)１０、および
MPEG変換部１１に出力し、再生オーディオ信号AUPBを遅
延部(DL)１２に出力する。

【００１９】SXデコーダ９は、入力されたSXフォーマッ
トの再生ビデオ信号SXPBを復号してシリアルデータ出力
部(SDI_OUT)１３に供給する。

【００２０】MPEG変換部１１は、入力された再生ビデオ
信号SXPB（SXフォーマット）をMPEGフォーマットに変換
して、コンシール回路１４に出力するようになされてい
る。コンシール回路１４は、MPEG符号化されたビットス
トリームにエラーを検出した場合、そのエラー箇所をシ
ンタックスエラーにならない符号系列に置換し、出力部
（SDTI）１５に出力するようになされている。コンシー
ル回路１４は、ビットストリーム中にエラーがない場
合、入力されたビットストリームをそのままシリアルデ
ータ出力部(SDTI)１５に出力するようになされている。
コンシール回路１４の詳細は、図１９と図２０を参照し
て後述する。

【００２１】遅延部１２は、入力された再生オーディオ
信号AUPBを遅延して、対応する再生ビデオ信号SXPBとの
タイミングを合わせ、遅延オーディオ信号AUDL1乃至AUD
L3として、シリアルデータ出力部１３、シリアルデータ
出力部１０、またはシリアルデータ出力部１５にそれぞ
れ出力する。

【００２２】シリアルデータ出力部１３は、SXデコーダ
９から入力されたビデオ信号Videooutと、遅延部１２か
ら入力された遅延オーディオ信号AUDL1をマッピング
し、シリアル信号SDI Outとして出力するようになされ
ている。

【００２３】シリアルデータ出力部１０は、ECCデコー
ダ８から入力された再生ビデオ信号SXPB（SXフォーマッ
ト）と、遅延部１２から入力された遅延オーディオ信号
AUDL2をマッピングし、シリアル信号SDTI Out１とし
て、この情報記録装置（ビデオカセットレコーダ）と同
じようにSXフォーマットで圧縮符号化された画像情報を
処理することができる他の装置（図示せず）に出力する
ようになされている。

【００２４】シリアルデータ出力部１５は、コンシール
回路１４から入力されたMPEGフォーマットのビデオ信号
と、遅延部１２から入力された遅延オーディオ信号AUDL
3をマッピングし、シリアル信号SDTI Out２としてMPEG
フォーマットの画像情報を処理することができる他の装
置（図示せず）に出力するようになされている。

【００２５】トリガ回路１６は、外部から入力される外
部基準信号REF Inから基準信号Reference Syncを抽出
し、抽出した基準信号Reference Sync、または入力部１
から入力された位相基準信号Input Syncのうちの一方の
基準信号に同期して、タイミングパルスを発生して各部
に供給する。システムコントローラ(SYSCON)１７、およ
びサーボ回路(SERVO)１８は、信号SY_SVを用いて互いに
連携を取りながら、それぞれ制御信号SY_IO，SERVO_IO
を出力して各部を制御するようになされている。

【００２６】図２は、MPEG変換部１１の詳細な構成を示
している。ECCデコーダ８からMPEG変換部１１に入力さ
れたSXストリーム（再生ビデオ信号(SXPB)）は、可変長
復号部２１、およびヘッダ付加部２４に供給される。可
変長復号部２１は、可変長符号化されているSXストリー
ムをDCT係数が得られるまで部分的に復号することによ
り、データの境界を明確にし、データの並び替えが可能
な信号STRM1を変換部２２に出力するようになされてい
る。

【００２７】変換部２２は、入力信号STRM1に対して、S
XフォーマットとMPEGフォーマットとの相違点であるデ
ータの並び等を修正する。さらに、変換部２２は、スタ
ッフィング部２５から供給される制御信号CUTが”１”
である場合、DCT係数の高次の非ゼロ係数を０に置換し
て出力信号STRM2を生成し、それを可変長符号化部２３
に出力する。

【００２８】可変長符号化部２３は、入力信号STRM2の
うちの可変長符号化されていない部分に対して可変長符
号化を施して出力信号STRM3としてヘッダ付加部２４に
出力する。

【００２９】ここで、可変長復号部２１乃至可変長符号
化部２３の処理をまとめると、図３に示すようになる。
変換部２２に相当する０置換部３２は、制御信号CUTに
基づいて、可変長復号部３１（可変長復号部２１に相当
する）から入力されたDCT係数の高次の非ゼロ係数を０
に置換して、可変長符号化部３３に出力する。０に置換
されたDCT係数は、可変長符号化部３３（可変長符号化
部２３に対応する）において符号化されるが、その符号
量は、０に置換される以前のDCT係数が符号化されてい
た符号量よりも確実に減少している。

【００３０】このように、符号化されているデータスト
リームの全てを一旦復号することなく、その一部を復号
し、DCT係数の高次の非ゼロ係数を０に置換するだけ
で、容易に任意のビットレートに変換することができ
る。

【００３１】また、高次のDCT係数を０に置換して、そ
の符号系列を再生した場合、０への置換によって生ずる
画像劣化は、人間の視覚特性上分かり難いので、実質的
に、画像の劣化を抑止してビットレートを変換すること
ができる。

【００３２】図２に戻る。ヘッダ付加部２４は、予め入
力されたSXストリームから、入力信号STRM3のタイミン
グ等を検出し、MPEGで規定されている各種のヘッダ情報
（その詳細については後述する）を作成する。その後、
可変長符号化部２３から入力された入力信号STRM3に、
作成したヘッダ情報を付加し、出力信号STRM4をスタッ
フィング部２５に出力するようになされている。

【００３３】スタッフィング部２５は、入力信号STRM4
のGOP(Group Of Picture)単位でのデータ長を計算し、
データ長が所定値に達していない場合、入力信号STRM4
にスタッフィングビット”０”を挿入して、GOP単位の
データ長の平均化を図り、MPEGフォーマットの出力信号
MPEG Streamをコンシール回路１４（図１）に出力す
る。反対に、GOP単位のデータ長が所定のデータ長を越
える場合、スタッフィング部２５は、制御信号CUTを”
１”にして変換部２２に出力する。

【００３４】システムコントローラインタフェース２６
は、外部CPU（図１のシステムコントローラ１７）から
の制御信号SYSCON Interfaceに基づいて、可変長復号部
２１乃至スタッフィング部２５を、対応する制御信号SY
S_VLD，SYS_DIFF，SYS_VLC，SYS_MKHD，SYS_STUFFに基
づいて制御するようになされている。

【００３５】次に、MPEG変換部１１のビットレート変換
処理について、図４のフローチャートを参照して説明す
る。この処理は、可変長復号部２１から変換部２２にビ
デオ信号STRM1が入力されたときに開始される。

【００３６】ステップＳ１において、変換部２２は、可
変長復号部２１から信号の入力が終了したか否かを判定
する。信号の入力が終了したと判定された場合、処理を
終了し、信号の入力が終了していないと判定された場
合、ステップＳ２に進む。ステップＳ２において、変換
部２２は、DCT係数の最高次からの順番を示すパラメー
タＮ（Ｎは０乃至６３）を０に初期化する。

【００３７】ステップＳ３において、変換部２２は、高
次からＮ番目のDCT係数の非ゼロ係数を０に置換して、
可変長符号化部２３に出力する。可変長符号化部２３
は、入力信号のうちの可変長符号化されていない部分に
対して可変長符号化を施してヘッダ付加部２４に出力す
る。ヘッダ付加部２４は、入力された信号に、予め作成
したヘッダ情報を付加してスタッフィング部２５に出力
する。

【００３８】ステップＳ４において、スタッフィング部
２５は、ヘッダ付加部２４から入力された信号STRM4の
ビットレートが、予め設定されたビットレート以内であ
るか否かを判定する。ビットレートが予め設定されたビ
ットレート以内ではない（設定されたビットレートを超
えている）と判定された場合、ステップＳ５に進む。ス
テップＳ５において、スタッフィング部２５は、制御信
号CUTを”１”として変換部２２に出力する。この制御
信号CUTに対応して、変換部２２は、パラメータＮを１
だけインクリメントし、ステップＳ３に戻る。

【００３９】その後、ステップＳ４において、スタッフ
ィング部２５に入力された信号STRM4のビットレートが
予め設定されたビットレート以内であると判定されるま
で、ステップＳ３乃至Ｓ５の処理が繰り返され、ステッ
プＳ４において、スタッフィング部２５に出力される信
号のビットレートが予め設定されたビットレート以内で
あると判定された場合、ステップＳ６に進む。

【００４０】ステップＳ６において、変換部２２は、シ
ステムコントローラインタフェース２６による制御に基
づいて、パラメータＮを１だけデクリメントし、ステッ
プＳ７に進む。

【００４１】ステップＳ７において、スタッフィング部
２５は、入力された信号STRM4のビットレートが予め設
定されたビットレートに達するまで、信号STRM4にスタ
ッフィングビット”０”を挿入する。なお、このスタッ
フィング処理の詳細については、図８を参照して後述す
る。その後、処理は、ステップＳ３に戻る。

【００４２】次に、MPEG変換部１１のスタートコードエ
ミュレーション防止処理について説明する。この処理
は、主にヘッダ付加部２４において実行される。上述し
たように、MPEG変換部１１は、SXフォーマットのデータ
をMPEGフォーマットのデータに変換する処理を実行して
おり、SXフォーマットに特有な、例えば、画像編集用の
情報は、MPEGフォーマットには規定されていないので、
この情報はMPEGフォーマットのユーザデータフィールド
に記述される。このMPEGのユーザデータフィールドは、
他のMPEGのデータフィールドとは異なって、特に規定が
存在せず（フリーフォーマットであり）、任意の情報を
記述できるが、その反面、スタートコードエミュレーシ
ョンを引き起こす可能性がある。

【００４３】ここで、スタートコードエミュレーション
について説明する。MPEGにおいては、各データフィール
ドの先頭を示す特別なデータパターンとして、２３ビッ
ト連続する”０”と、それに続く１ビットの”１”との
組み合わせをスタートコードとして規定しており、ユー
ザフィールド以外のデータフィールドにおいては、各フ
ィールドの先頭以外で”０”が２３ビット連続すること
を禁止している。しかしながら、ユーザデータフィール
ドにおいては、そこに記述するデータは任意であり、ユ
ーザは、意識的に０が２３ビット連続することを避けて
データを記述する必要がある。

【００４４】スタートコードエミュレーションとは、ユ
ーザデータフィールドに記載されたデータが、偶然にス
タートコードと一致してしまうことであり、これは、画
像破綻を引き起こす可能性が高い致命的なエラーとな
る。

【００４５】そこで、本実施の形態においては、ヘッダ
付加部２４が、図５に示すように、ユーザデータフィー
ルドの１６ビット毎にマーカビット”１”を挿入して、
スタートコードエミュレーションを防止している。

【００４６】図６は、ヘッダ付加部２４のスタートコー
ドエミュレーション防止処理を実施する部分の詳細な構
成を示しており、図７は各部の動作タイミングを示して
いる。バッファ４１は、ユーザデータフィールドに記述
するユーザデータを記憶しており、図７に示すように、
クロック信号に同期して、ユーザデータを１６ビットず
つレジスタ４５に供給する。したがって、バッファ４１
の容量は、（最大ユーザデータ長／１６）から求められ
る値以上の容量が必要である。

【００４７】ビットずれ測定部４２は、ユーザデータス
タートコード(0x000001B2)に同期してリセットされる４
ビットのカウンタ４３、およびカウント値を１ずつ増加
する加算器４４から構成され、その出力を制御信号ctと
してデータ選択部４７に出力する。レジスタ４５は、バ
ッファ４１から供給された１６ビットのユーザデータを
記憶しており、クロックに同期して、記憶しているユー
ザデータreg1をレジスタ４６、およびデータ選択部４７
に出力する。レジスタ４６は、レジスタ４５から入力さ
れた１６ビットのユーザデータを記憶し、クロックに同
期して記憶しているユーザデータreg2（１クロックサイ
クル前のreg1と同一のユーザデータ）をデータ選択部４
７に出力する。

【００４８】データ選択部４７は、レジスタ４５から入
力されたユーザデータreg1、およびレジスタ４６から入
力されたユーザデータreg2の３２ビット幅のユーザデー
タのうちの所定の１５ビットを、ビットずれ測定部４２
からの制御信号ctの値に基づいて選択し、出力するよう
になされている。例えば、図７の一点鎖線部分に示すよ
うに、制御信号ctの値が３である場合、データ選択部４
７は、３２ビット幅のユーザデータd3[1]乃至d[16]，d2
[1]乃至d2[16]のうちの１５ビットのユーザデータd3[4]
乃至d2[2]を選択し、制御信号ctの値が４である場合
（次のクロックサイクルでは）、ユーザデータd4[5]乃
至d3[3]を選択する。マーカビット発生部４８は、デー
タ選択部４７から１５ビットのユーザデータが出力され
た後、マーカビット”１”を出力する。

【００４９】このように、出力においては、マーカビッ
トを挿入するので、その出力速度は、バッファ４１から
の入力速度に比べて遅くなる。すなわち、１６回のクロ
ックサイクルに対して１５ワードの入力データしか処理
（出力）できない。そこで、バッファ４１は、１６回の
クロックサイクルに１回の割合で（図７の例では、制御
信号ctが１４であるとき）、レジスタ４５へのユーザデ
ータの供給を待機するように制御される。

【００５０】なお、本実施の形態の場合、ユーザデータ
に占めるマーカビットの割合は、6.25(=1/16)％であ
り、２３ビット毎にマーカビットを挿入した場合（4.35
(=1/23)％）と比較すると、1.9％だけユーザデータの伝
送効率が低下する。しかしながら、ビデオ信号全体に占
めるユーザデータフィールドの割合は数百分の一である
ので、ビデオ信号のストリーム全体としては、伝送効率
の低下は十分に抑えられる（それほど低下していない）
ということができる。

【００５１】次に、スタッフィング部２５のスタッフィ
ング処理について説明する。図８は、スタッフィング部
２５の詳細な構成を示している。スタッフィング部２５
（図２）に入力されるビットストリーム（図２の出力信
号STRM4に相当する）は、タイミングジェネレータ５
１、ビットレートカウンタ５２、および遅延部(DL)５７
に供給される。

【００５２】タイミングジェネレータ５１は、ビットス
トリームに含まれている信号であって、図９に示すよう
に、ビットストリーム中に有効なデータが存在しない区
間を示しており、１フレーム毎に存在するV-Blanking信
号（通常のビデオ信号の１フィールド毎に存在する垂直
帰線期間の信号に対応する）を検出する。そして、タイ
ミングジェネレータ５１は、V-Blanking信号が解除され
た（有効なデータが現れた）タイミングに同期して、信
号GOP_STARTを発生し、ビットレートカウンタ５２に出
力する。ビットレートカウンタ５２は、信号GOP_START
に同期してカウンタをリセットし、ビットレートストリ
ームに含まれる有効な符号量をカウントし、その値coun
t_valueを比較部５３に出力する。

【００５３】その後、タイミングジェネレータ５１は、
V-Blanking信号が再度発生した（有効なデータが消え
た）タイミングに同期して、信号GOP_ENDを発生し、比
較部５３に出力する（ここでは、１GOP＝１ピクチャと
されている）。

【００５４】比較部５３は、信号GOP_ENDが入力された
タイミングに同期して、ビットレートカウンタ５２から
入力された有効な符号量を示すカウント値count_value
と、CPUインタフェース(CPU_IF)５４（図２のシステム
コントローラインタフェース２６に相当する）に予め設
定されているビットレートTarget_bit_rateとを比較す
る。カウント値count_valueがビットレートTarget_bit_
rateよりも小さい場合、比較部３は、その差を示す信号
Stuffing_valueをスタッフィングカウンタ５５に出力す
る。

【００５５】スタッフィングカウンタ５５は、入力され
た差信号Stuffing_valueの値だけカウント動作（計時動
作）を実行し、その間、信号Stuffing_enableをスイッ
チ５６に出力する。スイッチ５６には、遅延部５７によ
り、タイミングジェネレータ５１乃至スタッフィングカ
ウンタ５５の処理に対応する遅延が施されたビットスト
リーム、およびスタッフィングビット”０”が供給され
ており、スイッチ５６は、信号Stuffing_enableが入力
されている間、ビットストリームに”０”をスタッフィ
ングする。

【００５６】一方、カウント値count_valueがビットレ
ートTarget_bit_rateよりも大きいと判定した場合、比
較部５３は、制御信号CUTに”１”を立てて変換部２２
（図２）に出力する。なお、この制御信号CUTに対応し
て変換部２２は、上述したように、DCT係数の高次の非
０係数を０に置換する。

【００５７】このように、本実施の形態においては、映
像信号に含まれるV-Blanking信号が存在する期間にスタ
ッフィングを行うので、パッキングの必要がない。した
がって、パッキングのためのメモリも必要としない。さ
らに、パッキングを行わないので、システムディレイを
最小とする（リアルタイム処理を行う）ことが可能であ
る。

【００５８】次に、コンシール回路１４のMPEGデータス
トリーム修正処理について説明するが、その前に、MPEG
データストリームの構造について、図１０乃至図１３を
参照して説明する。

【００５９】MPEGフォーマットにおいては、スライスが
１つの可変長符号系列である。可変長符号系列とは、可
変長符号を復号しなければデータの境界を検出できない
単位である。なお、図１０乃至図１３において、個々の
可変長符号系列の境界は、実線で示されており、それ以
外の境界は破線で示されている。

【００６０】図１０に示すように、データストリームの
最上層であるシーケンス層は、ヘッダ部と複数のGOPか
ら構成されている。GOP層は、ヘッダ部と複数のピクチ
ャから構成されている。ピクチャ層は、ヘッダ部と複数
のスライスから構成されている。さらに、スライス層
は、ヘッダ部と１つ以上のマクロブロックで構成されて
いる。

【００６１】シーケンス層、GOP層、ピクチャ層、スラ
イス層、およびマクロブロック層の先頭には、バイト単
位に整列された（バイトアラインされた）識別コードSC
(Start Code)が配される。なお、上述したヘッダ部は、
ヘッダ(header)、拡張データ(extension)、およびユー
ザデータ(user data)をまとめて、記述したものであ
る。ヘッダ部は、それぞれ可変長符号系列である。

【００６２】また、ヘッダ部には、エンコードのパラメ
ータが記載されており、例えば、シーケンス層のヘッダ
部には画像サイズ（Vertical Size、Horizontal Siz
e）、Progressive Sequence、Chroma Formatが記載され
ており、GOP層のヘッダ部にはTimecodeが記載されてい
る。ピクチャ層のヘッダ部のPicture Coding Extension
には、Intra DC Precision、Intra VLC Formatが記載さ
れている。

【００６３】図１１に示すように、表示順と伝送順は一
致しない。Ｉピクチャはその画面（ピクチャ）が単独で
符号化されたものであるのに対し、ＢピクチャとＰピク
チャは他のピクチャとの相関を利用して符号化されたも
のである。すなわち、Ｂピクチャは直前のＩピクチャま
たはＰピクチャと、直後のＩピクチャまたはＰピクチャ
の差分が符号化されたものであり、Ｐピクチャは直前の
ＩピクチャまたはＰピクチャとの差分が符号化されたも
のであるため、参照するピクチャ（差分をとるためのピ
クチャ）が先に符号化される必要がある。

【００６４】すなわち、表示順はGOPの各ピクチャの順
番（pic0，pic1，pic2，・・・）そのものである。しか
しながら、GOP層のストリーム（伝送順）では、他のピ
クチャとの相関を利用しないＩピクチャ（pic2)から始
まり、続いてＢピクチャ（pic0,pic1)とＰピクチャ（pi
c5)が配置される。

【００６５】図１２に示すように、マクロブロック（M
B）は、画像（ピクチャ）を１６画素×１６画素の格子
状に分割したものであり、マクロブロックを水平方向に
連結したものがスライスである。

【００６６】MPEGストリームにおけるピクチャ内でのス
ライスの順、およびスライス内でのマクロブロックの順
は、マクロブロックアドレスの小さい順（画面上におい
て、上から下、左から右）でなければならず、スライス
の逆行、およびオーバラップ（二重定義）は、MPEGの規
格上許されていない。ただし、スライス間のギャップ
（スキップ）は許容される。

【００６７】連続するスライスの前のスライスの最後の
マクロブロックと、次のスライスの先頭のマクロブロッ
クとが連続する、出願人が提案している放送用および業
務用機器の規格であるβカム（商標）では、スライス間
のマクロブロックオーバラップを形成することは許され
ていない。

【００６８】スライスのピクチャ内の垂直位置(MB Row)
はスライス層のヘッダ（SSC:SliceStart Code）に記述
されており（図１２の例では、mb_row=４が記述されて
おり）、スライスの先頭のマクロブロックの水平位置(M
B Column)は、スライス層の先頭のマクロブロック層に
記述されている（図１２の例では、mb_column=１，３、
または９が記述されている）。画像（ピクチャ）内にお
けるマクロブロックの絶対位置（マクロブロックアドレ
ス）は、画像の水平方向のマクロブロック数MBWidth
（シーケンス層のヘッダの画像サイズ(Vertical size,H
orizontal size)のHorizontal sizeから計算される）を
用いて、次式のように表すことができる。マクロブロッ
クアドレス＝((MB Row)-1)×(MB Width)＋(MB Column)

【００６９】スライス層における先頭から２番目以降の
マクロブロック層には、直前のマクロブロックとのマク
ロブロックアドレスの差が記述されている（図１２の例
では、網かけしたスライス層（mb_row=４の第２番目の
スライス層）の３番目のマクロブロック層には差＝＋２
（２番目のマクロブロックがスキップされているので、
直前のマクロブロックは先頭のマクロブロックとなり、
+2(=5-3)となる）が、４番目のマクロブロック層には差
＝＋１(=6-5)が、それぞれ記述されている）。あるマク
ロブロックにマクロブロックアドレスの差として２以上
が記述されていた場合、それは、直前のマクロブロック
とそのマクロブロックとの間のマクロブロックがスキッ
プされたことを意味している。ただし、スライスの先頭
および末尾のマクロブロック（図１２のmb_column=2の
マクロブロックとmb_column=６のマクロブロック）はス
キップすることが禁止されており、また、Ｉピクチャの
マクロブロックは原則としてスキップされない。

【００７０】MPEG２においては、さらに１つのスライス
を構成するマクロブロックのMB Rowは、すべて同一でな
ければならないと規定されている。従って、図１０に示
すように、Slice層のheaderにmb_rowが記述され、最初
のマクロブロックの冒頭にmb_columnが符号化されて記
述される。２番目以降のマクロブロックの冒頭には、直
前のマクロブロックとのmb_columnの差の値が符号化さ
れて記述される。

【００７１】スライスのストリームについて、図１２に
示した画面を参照して、詳細に説明すると、mb_rowの値
が”４”である位置には、３つのスライスが存在する。
最初のスライスのSSC（slice_start_code）には、この
スライスのmb_rowの値”４”が記述されている。最初の
マクロブロック（mb_row=4，mb_column=1）の冒頭に
は、このマクロブロックのmb_columnの値”１”が記述
されている。次のマクロブロック（mb_row=4，mb_colum
n=2）の冒頭には、直前のマクロブロック（mb_row=4，m
b_column=1）とのmb_columnの値の差”１”(=2-1)が記
述されている。

【００７２】２番目のスライスのSSCには、このスライ
スのmb_rowの値”４”が記述されている。最初のマクロ
ブロック（mb_row=4，mb_column=３）の冒頭には、この
マクロブロックのmb_columnの値”３”が記述されてい
る。２番目のマクロブロック（mb_row=4，mb_column=
5）の冒頭には、直前のマクロブロック（mb_row=4，mb_
column=3）とのmb_columnの値の差”２”(=5-3)が記述
されている。最後のマクロブロック（mb_row=4，mb_col
umn=6）の冒頭には、直前のマクロブロック（mb_row=
4，mb_column=５）とのmb_columnの値の差”1”(=6-5)
が記述されている。なお、mb_row=4，mb_column=4の位
置のマクロブロックは、スキップされるため、スライス
のストリームには含まれない。３番目のスライスについ
ても、同様であるので、ここでは説明を省略する。

【００７３】マクロブロックは、８×８画素の４個のブ
ロックの集合体であり、Chroma Formatが4:2:0であれ
ば、輝度ブロックＹが４個と、青と赤の色差ブロックＣ
ｂ，Ｃｒ各１個から構成され、Chroma Formatが4:2:2で
あれば、輝度ブロックＹが４個と、青と赤の色差ブロッ
クＣｂ，Ｃｒ各２個から構成され、Chroma Formatが4:
4:4であれば、輝度ブロックＹが４個と、２種類の色差
ブロックＣｂ，Ｃｒ各４個から構成される。

【００７４】マクロブロックを、図１３を参照してさら
に詳細に説明すると、マクロブロックの冒頭には、マク
ロブロックヘッダとして、前述したmb_columnの値、ま
たは直前のマクロブロックとのmb_columnの差を表すmac
roblock_adress_increment、マクロブロックの符号化モ
ードを表すmacroblock_type、フレームまたはフィール
ドの予測タイプを表すframe/field_motion_type、DCTが
フレームモードかフィールドモードかを表すdct_type、
マクロブロックの量子化ステップ・サイズを表すquanti
zer_scale_code、動きベクトルを表すmotion_vector[fo
rward]とmotion_vector[backward]、輝度ブロックと色
差ブロックのパターンを表すcoded_block_patternが記
述されている。

【００７５】各ブロック（例えば、輝度ブロックである
block[Y4]）には、６４個の量子化されたDCT係数の系列
を、零係数の連続回数（Run）と、その直後の非零係数
（Level）を１つの単位として可変長符号化したものが
含まれている。

【００７６】前述したように、シーケンス層、GOP層、
スライス層およびそれらの拡張データとユーザデータの
先頭には、バイトアラインされた識別コード（スタート
コード）が付加されるが、マクロブロックとマクロブロ
ックの間には、スタートコードが付加されないので、ス
ライス層では、各スライスが最小の可変長符号系列の単
位である。

【００７７】上述した規定によれば、スライス層の先頭
のマクロブロック層の水平位置と、次のスライス層の先
頭のマクロブロック層の水平位置の差から、スライス内
のマクロブロックの数を計算することができる。また、
シーケンス層のヘッダに記述された画像サイズ(Vertica
l size,Horizontal size)から、画像内の垂直方向のマ
クロブロックの数(Vertical size)、および水平方向の
マクロブロック数(Horizontal size)を計算することが
できる。

【００７８】さらに、GOP層のヘッダに記述されたTimec
odeから、GOP内のピクチャ数を計算することができる。
このように、符号系列の一部、それも、バイトアライン
されているスタートコードの近傍を復号するだけで、GO
Pのピクチャ数、画像内のマクロブロック構成、および
スライス内のマクロブロック数といったデータストリー
ムの骨格を知ることができる。

【００７９】次に、コンシール回路１４で行われるMPEG
データストリームの修正処理について説明する。例え
ば、図１４（Ａ）に示すように、スライス層の５番目の
マクロブロック層にエラーが混入していた場合、そのマ
クロブロック層の復号は不可能であり、同じ可変長符号
系列内のそれより後の６番目乃至９番目のマクロブロッ
ク層の復号も不可能となる。しかしながら、９番目のマ
クロブロックに続くスタートコード（スライススタート
コード(SSC)）は、バイトアラインされているため、可
変長符号を復号することなく、４バイトのパターンマッ
チングを行うだけで検出することができる。したがっ
て、このスライススタートコード以降のマクロブロック
は復号することができる。

【００８０】このスライススタートコードに続くヘッダ
を復号して垂直位置MB Rowを取得し、これに続く先頭マ
クロブロックの最初の符号を復号して水平位置MB Colum
nを取得して、そのマクロブロックのマクロブロックア
ドレスを得ることができる。このマクロブロックアドレ
スから、それより前の途中のマクロブロックで復号不能
となったスライスの先頭マクロブロックのマクロブロッ
クアドレスを減算すれば、途中のマクロブロックで復号
不能となったスライスに含まれるマクロブロックの総数
が得られる。さらに、この総数から復号不能になる以前
に正しく復号できたマクロブロックの数を減算すれば、
復号できなかったマクロブロックの数を得ることができ
る。

【００８１】また、例えば、復号できないマクロブロッ
クに連続して、シーケンスヘッダコード(SHC)、グルー
プスタートコード(GSC)、またはピクチャスタートコー
ド(PSC)が存在するか、もしくは、復号できないマクロ
ブロックに連続してシーケンスエンドコード(SEC)が存
在する場合、途中のマクロブロックで復号不能となった
スライスで画像が完結しているはずである。

【００８２】そこで、適宜に、各層のヘッダ部のスター
トコードの近傍を復号してGOPのピクチャ数、画像内の
マクロブロック構成、およびスライス内のマクロブロッ
ク数を取得し、この全マクロブロック数から、スライス
の先頭マクロブロックのマクロブロックアドレスの値、
および復号不能となる以前に正しく復号できたマクロブ
ロックの数を減算すれば、復号できなかったマクロブロ
ックの数を得ることができる。

【００８３】具体的な計算は、以下の通りである。例え
ば、途中のマクロブロックで復号不能となったスライス
の先頭マクロブロックの垂直位置MB Rowが”３”であ
り、そのスライスの先頭マクロブロックの水平位置MB C
olumnが”２”であり、復号できないマクロブロックに
続くスライス層のヘッダに記述された垂直位置MB Row
が”３”であり、それに続く先頭マクロブロックの水平
位置MB Columnが”１１”である場合、復号不能となっ
たマクロブロックを含むスライス内のマクロブロック数
は、”９”（＝１１−２）である。そのうちの４番目の
マクロブロックまで正しく復号できたとすると、復号で
きなかったマクロブロックの数は５（＝９−４）とな
る。

【００８４】このような正しく復号されなかったマクロ
ブロックをMPEGのシンタックスを守る所定のマクロブロ
ックに置換することが、MPEGデータストリ−ム修正処理
である。

【００８５】図１４乃至図１８は、正しく復号されなか
ったマクロブロックを所定のマクロブロックに置換する
方法を示している。例えば、図１４（Ａ）に示すよう
に、スライス層の先頭から５番目のマクロブロックにエ
ラーが混入していた場合、図１４（Ｂ）に示すように、
５番目乃至９番目のマクロブロックを所定のマクロブロ
ックに置換することができる。または、図１４（Ｃ）に
示すように、５番目乃至８番目のマクロブロックをスキ
ップして９番目のマクロブロックを所定のマクロブロッ
クに置換することができる。

【００８６】あるいは、図１４（Ｄ）に示すように、５
番目および９番目のマクロブロックを所定のマクロブロ
ックに置換して、６番目乃至８番目のマクロブロックを
スキップすることができる。さらに、図１４（Ｅ）に示
すように、１番目乃至９番目のマクロブロックを所定の
マクロブロックに置換することができる。または、図１
４（Ｆ）に示すように、１番目および９番目のマクロブ
ロックを所定のマクロブロックに置換して、２番目乃至
８番目のマクロブロックをスキップすることができる。

【００８７】図１５（Ａ）に示すように、スライス層の
ヘッダにエラーが混入していた場合、図１５（Ｂ）に示
す例では、そのスライス層のスタートコードを除く全て
のデータが置換されている。図１６（Ａ）に示すよう
に、ピクチャ層のヘッダにエラーが混入していた場合、
図１６（Ｂ）に示す例では、そのピクチャ層のスタート
コードを除く全てのデータが置換されている。

【００８８】図１７（Ａ）に示すように、GOP層のヘッ
ダにエラーが混入していた場合、図１７（Ｂ）に示す例
では、そのGOP層のスタートコードを除く全てのデータ
が置換されている。図１８（Ａ）に示すように、シーケ
ンス層のヘッダにエラーが混入していた場合、図１８
（Ｂ）に示す例では、そのシーケンス層のスタートコー
ドを除く全てのデータが置換されている。また、図１８
（Ｃ）に示す例では、そのシーケンス層のシーケンスス
タートコード(SSC)がシーケンスエンドコード(SEC)に置
換されている。

【００８９】図１９は以上のようなMPEGデータストリー
ム修正処理を実行するコンシール回路１４の構成例を示
している。可変長復号部６１は、図２の可変長復号部２
１に相当し、メモリ６２、置換区間制御部６３、マクロ
ブロック(MB)係数系列発生部６４、およびスイッチ６５
は、図２の変換部２２に相当し、可変長符号化部６６
は、図２の可変長符号化部２３に相当する。すなわち、
コンシール回路１４は、MPEG変換部１１と一体化して構
成することもできる。

【００９０】可変長復号部６１は、入力されたデータス
トリームを復号し、ヘッダとマクロブロックの単位に分
割してメモリ６２に出力する。したがって、可変長復号
部６１には、スタートコードを検出し、ヘッダを解読し
て、RunとLevelにまで復号できる能力が必要であるが、
逆量子化を実行してDCT係数の系列まで復号する能力は
必要ない。

【００９１】また、可変長復号部６１は、入力されたデ
ータストリーム中のエラー（復号不能なエラーマクロブ
ロック）を検出して置換区間制御部６３に通知するよう
になされている。さらに、可変長復号部６１は、解読し
たヘッダに記述されている各種パラメータ（画像のサイ
ズ、垂直位置MB Row、水平位置MB Column、および復号
済みマクロブロック数等）を置換区間制御部６３および
可変長符号化部６６に出力する。

【００９２】置換区間制御部６３は、可変長復号部６１
からのエラー通知と各種パラメータに基づいて、異常箇
所を判断してマクロブロックを置換する区間を決定し、
決定結果に対応してマクロブロック係数系列発生部６
４、およびスイッチ６５を制御する。

【００９３】マクロブロック係数系列発生部６４は、エ
ラーマクロブロックと置換するマクロブロックの係数系
列を発生する。例えば、ブラックのマクロブロックに置
換する場合、イントラマクロブロックとして、輝度信号
ブロックに0x10、色差信号ブロックに0x80の係数系列が
発生される。また、最も発生符号量が少ないグレーのマ
クロブロックに置換する場合、イントラマクロブロック
として、輝度信号ブロック、および色差信号ブロックに
0x80の係数系列が発生される。さらに、任意の図柄のマ
クロブロックに置換する場合、前後の影響を受けないイ
ントラマクロブロックとし、DC成分だけで構成される平
坦な図柄が発生される。

【００９４】スイッチ６５は、メモリ６２から供給され
るヘッダの符号系列およびマクロブロックの係数系列、
またはマクロブロック係数系列発生部６４から供給され
る置換用のマクロブロックの係数系列の一方を、置換区
間制御部６３による制御に基づいて選択し、可変長符号
化部６６に出力する。

【００９５】可変長符号化部６６は、入力された係数系
列を符号化して出力する。なお、このとき、メモリ６２
から入力されたヘッダは、既に符号化されているのでそ
のまま流用される。

【００９６】図２０は、コンシール回路１４の他の構成
例を示している。同図において、可変長復号部６１、置
換区間制御部６３、およびスイッチ６５は、図１９に示
した構成と同様であるので、その説明は省略する。

【００９７】メモリ７２は、ヘッダ毎、およびマクロブ
ロック毎に分割された符号系列を記憶する。マクロブロ
ック符号系列発生部７４は、置換用マクロブロックの符
号系列を発生する。例えば、ブラックやグレイのイント
ラマクロブロック、単純フレーム間予測であって符号化
不要である（DCT係数を持たない）Ｐピクチャ用マクロ
ブロック、または１つ前のマクロブロックと予測方向お
よび動きベクトルが同じである符号化不要のＢピクチャ
用マクロブロックが予め記憶されており、可変長復号部
６１から入力されるパラメータに対応して、これらの置
換用マクロブロックの符号系列がスイッチ６５に供給さ
れる。

【００９８】マクロブロック(MB)パッキング部７６は、
スイッチ６５から入力される符号系列（メモリ７２から
供給された符号系列、またはマクロブロック符号系列発
生部７４から供給された符号系列）をパッキングして
（８ビットにビットアレイして）出力する。

【００９９】図２０に示した実施の形態の図１９に示し
た実施の形態に対する優位性は、以下の通りである。す
なわち、メモリ７２（図２０）は、復号される前の、圧
縮された符号系列を記憶するので、係数系列を記憶する
メモリ６２よりも、その容量は小さいものでよい。ただ
し、マクロブロックの符号系列とともに、その符号長を
記憶する必要がある。また、マクロブロック単位の符号
系列のパッキングを行うだけなので、マクロブロックパ
ッキング部７６（図２０）は、符号化を行う可変長符号
化部６６（図１９）よりも、その回路の規模が圧倒的に
小さい。マクロブロック符号系列発生部７４は、単純フ
レーム間予測であって符号化不要であるＰピクチャ用マ
クロブロック、または１つ前のマクロブロックと予測方
向と動きベクトルが同じである符号化不要のＢピクチャ
用マクロブロック（スキップされるマクロブロック）を
供給できるので、実質上、エラーマクロブロック部分を
フリーズさせて補正することができる。

【０１００】なお、上述したMPEGデータストリーム修正
処理は、可変長符号の復号、および再符号化を実行する
ものの、量子化や逆量子化を経ないので、エラーに関係
しない箇所のマクロブロックの画質の劣化は発生しな
い。

【０１０１】図２１乃至図２４を参照して、Ｉピクチャ
（progressive_sequence=0，chroma_format＝＝4:2:2）
内のマクロブロックを置換する具体例を説明する。図２
１に示すように、マクロブロックのSlice Headerには、
start_codeを示す値"00000000_00000000_00000001"、mb
_rowを示す８ビットの値（ここでは、********と記
載）、quantizer_scale_codeを示す５ビットの値（ここ
では、*****（00000以外）と記載）、およびextra_bit_
sliceを示す値"1"が記述されている。

【０１０２】スライスの先頭のマクロブロックには、マ
クロブロックヘッダとしての、macroblock_adress_incr
ement（mb_column）を示す４ビットの値（ここでは、"*
***"と記載）、macroblock_type(=Intra)を示す値"1"、
およびdct_typeを示す１ビットの値（ここでは、"*"と
記載）が記述される。マクロブロックヘッダ以降には、
４つの輝度ブロックのDC成分の値（DCY0乃至DCY3）と、
それぞれのEOB（End Of Block）、および２種類の色差
ブロックCb，CrそれぞれのDC成分の値（DCB0，DCB1，DC
R0，DCR1）と、それぞれのEOB（End Of Block）が記述
される。前述したように、AC成分は記述されない。

【０１０３】図２１のDCY0乃至DCR1には、エラーマクロ
ブロックをグレイに置換する場合、図２２に示す値が設
定される。４つの輝度ブロック（DCY0乃至DCY3）のDC成
分には、すべてdct_dc_size_luminance=0を示す値"100"
が設定され、各色差ブロック（DCB0乃至DCR1）のDC成分
には、すべてdct_dc_size_chrominance=0を示す値"00"
が設定される。

【０１０４】エラーマクロブロックをブラックに置換す
る場合、図２１のDCY0乃至DCR1には、図２３に示す値が
設定される。intra_dc_precision==０（８ビット）の場
合、図２３（Ａ）に示すように、DCY0には、dct_dc_siz
e_luminance=7とdct_dc_differential=-70(Hex)を示す
値”１１１１＿１００００１１１１”が設定される。
DCY1乃至DCR1は、図２２における場合と同様の値が設定
される。

【０１０５】intra_dc_precision==1（９ビット）の場
合、図２３（Ｂ）に示すように、DCY0には、dct_dc_siz
e_luminanc=8と、dct_dc_differential=-E0（Hex）を表
す値”１１１１＿１１００００１１１１＿１”が設定
される。DCY1乃至DCR1は、図２２における場合と同一の
値が設定される。

【０１０６】intra_dc_precision==2（１０ビット）の
場合、図２３（Ｃ）に示すように、DCY0は、dct_dc_siz
e_luminance=9と、dct_dc_differential=-1C0(Hex)を表
す値”１１１１＿１１１００００１１１１＿１１”が
設定される。DCY1乃至DCR1は、図２２における場合と同
一の値が設定される。

【０１０７】さらに、intra_dc_precision==3（１１ビ
ット）の場合、図２３（Ｄ）に示すように、DCY0には、
dct_dc_size_luminance=10と、dct_dc_differential=-3
80(Hex)を表す値”１１１１＿１１１＿００００１１
１１＿１１１”が設定される。DCY1乃至DCR1は、図２２
における場合と同一の値が設定される。

【０１０８】以上は、スライスの先頭のマクロブロック
についての例であるが、スライスの２番目以降のマクロ
ブロックにおいては、図２４に示すように、DCY0乃至DC
Y3のいずれにも、dct_dc_size_luminance=0に対応する
値”１００”が設定される。また、DCB0乃至DCR1には、
それぞれdct_dc_size_chrominiance=0に対応する値”０
０”が設定される。

【０１０９】ＰピクチャまたはＢピクチャ内の先頭のマ
クロブロックにおいては、図２５に示すように、各マク
ロブロックに、所定の値が設定される。図２５の例にお
いては、DCY0，DCB0，DCR0には、後述する所定の値が設
定され、DCY1乃至DCY3には、dct_dc_size_luminance=0
に対応する値”１００”が設定され、DCB1，DCR1には、
dct_dc_size_chrominance=0に対応する値”００”が設
定される。

【０１１０】図２５のDCY0，DCB0，DCR0には、エラーマ
クロブロックをグレイに置換する場合、図２６に示す値
が設定される。この例においては、DCY0に、値”１０
０”が設定され、DCB0，DCR0には、値”００”が設定さ
れる。

【０１１１】さらに、エラーマクロブロックをブラック
に置換する場合には、図２５のDCY0，DCB0，DCR0は、図
２７に示すように設定される。

【０１１２】すなわち、intra_dc_precision==0（８ビ
ット）の場合、図２７（Ａ）に示すように、DCY0に、
値”１１１１＿１００００１１１”が設定され、DCB
0，DCR0には、値”００”が設定される。

【０１１３】intra_dc_precision==1（９ビット）の場
合、図２７（Ｂ）に示すように、DCY0に、値”１１１１
＿１１００００１１１１＿１”が設定され、DCB0，DC
R0には、値”００”が設定される。

【０１１４】intra_dc_precision==2（１０ビット）の
場合、図２７（Ｃ）に示すように、DCY0に、値”１１１
１＿１１１００００１１１１＿１１”が設定され、DC
B0，DCR0には、値”００”が設定される。

【０１１５】intra_dc_precision==3（１１ビット）の
場合、図２７（Ｄ）に示すように、DCY0に、値”１１１
１＿１１１１＿００００１１１１＿１１”が設定さ
れ、DCB0，DCR0には、値”００”が設定される。

【０１１６】ＰピクチャまたはＢピクチャのスライス内
の２番目以降のマクロブロックには、図２８に示すよう
に、DCY0乃至DCY3に、値”１００”が設定され、DCB0乃
至DCR1には、値”００”が設定される。

【０１１７】Ｐピクチャ内のマクロブロックの値をホー
ルドする場合には、図２９に示すように、macroblock_t
ypeとして「MV,Not Coded」を示す値”００１”が設定
される。この他、必要に応じてframe/field_motion_typ
e，motion_vertical_field_select[0][0]，motion_vect
or(field0,forward)==(0,0)，motion_vertical_field_s
elect[1][0]，motion_vector(field1,forward)==(0,0)
の値が、所定の値に適宜設定される。

【０１１８】図１４乃至図１８を用いて説明した、正し
く復号できなかったマクロブロックを置換する所定のマ
クロブロックは、シンタックスエラーを回避することが
目的であるので、置換後のデータストリームがMPEGのシ
ンタックスを守る限り、任意であるが、置換した所定の
マクロブロックを含むデータストリームを復号したと
き、画質を損なわないようにするのが望ましい。

【０１１９】上述したように、この所定のマクロブロッ
クとして、ブラックの（輝度信号が0x10であり、色差信
号が0x80である）マクロブロック、発生する符号量が最
も少ないグレイの（輝度信号、および色差信号が0x80で
ある）マクロブロック、または平坦な図柄のマクロブロ
ックを利用することができる。

【０１２０】グレイのマクロブロックは、全ブロックの
DC成分がDC予測のリセット値（中央値）に一致してお
り、DC成分を除くすべてのDCT係数が”０”のイントラ
マクロブロックとすればよい。この場合、各ブロックは
DC成分とEOB（End of Block）だけで構成され、DC成分
以外のDCT係数は”０”であるため、quantizer_scale_c
odeを任意とすることができる。ただし、直前のマクロ
ブロックがイントラマクロブロックであった場合、DC成
分の予測をしなければならないため、直前のマクロブロ
ックのDC成分の値を記憶しておく必要がある。

【０１２１】ブラックのマクロブロックは、輝度ブロッ
クのDC成分が最小であり、色差ブロックのDC成分がDC予
測のリセット値（中央値）に一致しており、DC成分を除
くすべてのDCT係数が”０”のイントラマクロブロック
とすればよい。

【０１２２】以上に述べたように、置換するマクロブロ
ックをグレイまたはブラックとすることは、非常に簡便
な方法であるが、図１９または図２０に示したような構
成のMPEG変換部１１で所定の処理を施したMPEG信号を、
コンシール回路１４で特別の処理をすることなく、その
まま出力すると、復号後の画像に誤りが目立つ場合があ
る。そこで、復号後の画像の誤りを極力抑えるために、
画像信号の空間方向の高い相関性を利用して、コンシー
ル回路１４で、置換するマクロブロックを生成（補正）
することができる。

【０１２３】例えば、Ｉピクチャ内のマクロブロックを
置換する場合、図３０に示すように、同一ピクチャ内の
周辺のブロックから、そのDC成分を推測してマクロブロ
ックを生成することができる。各ブロックでは、DC成分
とEOBのみが符号化され、DC成分以外のDCT係数は、グレ
イやブラックの場合と同様に必要ない。

【０１２４】参照する周辺のブロックの選択は、種々考
えられるが、例えば、輝度ブロックに対しては、図３０
の左側の列に示す方法を採用することができる。また色
差ブロックについては、Chroma Formatが4:4:4の場合、
図３０の左側の列に示す方法を、Chroma Formatが4:2:2
の場合、図３０の中央の列に示す方法を、またChromaFo
rmatが4:2:0の場合、図３０の右側の列に示す方法を、
それぞれ採用することができる。

【０１２５】図３０を横方向に具体的に説明すると、図
３０（Ａ）は、エラーのない直前のマクロブロックを参
照する方法を示しており、この方法の場合、参照データ
として、直前のマクロブロックの符号系列、マクロブロ
ック長、およびDC成分を記憶しておく必要がある。

【０１２６】図３０（Ｂ）は、エラーのない直前のマク
ロブロックと真上のマクロブロックを参照する方法を示
しており、この方法の場合、その参照の比率は、ともに
１／２づつ、または直前を３／４，真上を１／４などと
することができる。この場合、参照データとして、符号
系列とマクロブロック長を、前述の比率に応じて、１マ
クロブロック分記憶する必要があり、また、真上から直
前までのDC成分を記憶しておく必要がある。

【０１２７】図３０（Ｃ）は、エラーのない直前のマク
ロブロック、真上のマクロブロック、および直下のマク
ロブロックを参照する方法を示しており、その参照の比
率は、図３０（Ｂ）の場合と同様、種々の比率とするこ
とができる。この場合、参照データとして、符号系列と
マクロブロック長を、前述の比率に応じて、１マクロブ
ロック分記憶する必要があり、また、真上から直下まで
のDC成分を記憶しておく必要がある。さらにこの場合、
真下のマクロブロックを参照するため、置換マクロブロ
ックを生成するのに、MB Width分の遅延が伴う。

【０１２８】さらに、図３０（Ｄ）に示すように、エラ
ーのない真上、直前、直後、および真下のマクロブロッ
クを参照する方法、または、図３０（Ｅ）に示すよう
に、エラーのない真上、直前、直後、真下、および斜め
４方向のマクロブロックを参照する方法を採用すること
もできる。また、これらの方法を適宜使い分けることも
できる。

【０１２９】ＢピクチャとＰピクチャ内のマクロブロッ
クを置換する場合、図３１に示すように、動画像が時間
方向に強い相関性を持っていることを利用して、マクロ
ブロックを作成することができる。Ｐピクチャ内のエラ
ーマクロブロックは、「MC（動き補償予測），MV（動き
ベクトル）＝"0"，Not Coded」の符号系列で置換され
る。これは、０の符号（Not Coded）を、MV＝０の動き
ベクトルで動き補償することを意味する。この方法で置
換すると、図３１（Ａ）に示すように、このエラーマク
ロブロックは、直前または直近のＩピクチャの同一位置
のマクロブロックと同じ図柄に復号される。ここで、動
きベクトルがない(MV=0)にも関わらず、「No MC」では
なく、「MC」を使用する（動き補償を行う）のは、「No
MC，Not Coded」がMPEGに定義されていないためであ
る。

【０１３０】また、図３１（Ｂ）に示すように、Ｐピク
チャ内のエラーマクロブロックをスキップするようにし
ても、図３１（Ａ）と同様の効果を得ることができる。
つまり、Ｐピクチャにおいてスキップされたマクロブロ
ックは、「MV＝"0"，Not Coded」として、すなわち、実
質的に、「No MC，Not Coded」として処理されるからで
ある。

【０１３１】Ｂピクチャ内のエラーマクロブロックは、
「Fwd，MV="0"，Not Coded」、または「Interpolated，
MV="0"，Not Coded」の符号系列で置換される。「Fwd，
MV="0"，Not Coded」の場合、図３１（Ａ）の２枚目の
（Ｐピクチャの左側の）Ｂピクチャに示すように、直前
のＩピクチャと同じ図柄（前値ホールド、フリーズ）と
なり、「Interpolated，MV="0"，Not Coded」の場合、
図３１（Ａ）の１枚目の（Ｉピクチャの右側の）Ｂピク
チャに示すように、参照画像（前のＩピクチャと後のＰ
ピクチャ）の平均値の図柄（クロスフェード）となる。

【０１３２】また、図３１（Ｂ）に示すように、Ｂピク
チャ内のエラーマクロブロックをスキップすると、Ｂピ
クチャのスキップされたマクロブロックは、直前のマク
ロブロックと同じ動き補償（予測方向（Forward、Backw
ard、Interpolated）と動きベクトルが同じ）を行った
後、”Not Coded”として処理される。

【０１３３】図１４（Ａ）に示したように、エラーマク
ロブロックが複数連続する場合、マクロブロックを、図
１４（Ｂ）乃至（Ｄ）に示すように置換することを説明
したが、各ピクチャにそれぞれの方法が適用できるか否
かを図３１（Ｃ），（Ｄ）を参照して説明する。

【０１３４】図１４（Ｂ）に示したエラーマクロブロッ
クをすべて置換する方法は、Ｉピクチャ、Ｐピクチャ、
およびＢピクチャのすべてに適用することができる。こ
れに対し、図１４（Ｃ）および（Ｄ）で示したエラーマ
クロブロックの一部をスキップする方法は、Ｐピクチャ
とＢピクチャには適用できるが、Ｉピクチャには適用で
きない。これは、Ｉピクチャのマクロブロックはスキッ
プが禁止されているからである。

【０１３５】図１４（Ｂ）乃至図１４（Ｄ）に示す３つ
の方法のいずれが採用された場合においても、Ｐピクチ
ャのエラーマクロブロックは、すべて同一の画像に復号
される（図３１（Ｃ），（Ｄ））。Ｂピクチャのエラー
マクロブロックは、エラーマクロブロックのすべてを置
換する方法（図１４（Ｂ））、または連続したエラーマ
クロブロックの最初と最後を置換し、中間のエラーマク
ロブロックをスキップする方法（図１４（Ｄ））が採用
された場合、図３１（Ｃ）に示すように、同一の画像に
復号される。連続するエラーマクロブロックの最後のみ
を置換する方法（図１４（Ｃ））が採用された場合、Ｂ
ピクチャのエラーマクロブロックは、図３１（Ｄ）に示
すように復号される。

【０１３６】エラーマクロブロックをスキップすると、
総符号長を短く抑えることができる。従って、エラーマ
クロブロックをスキップして、できる限り少ないデータ
でエラーマクロブロックを置換し、符号長の不足分をス
タッフィングして、もとのデータ長と揃えることが望ま
しい。ただし、スライスの最終マクロブロックをスキッ
プすることは、MPEG規定により禁じられている。

【０１３７】図３２は、コンシール回路１４が、自らの
簡易復号器８１によりエラーを検出し、MPEGデータスト
リーム修正処理を実行する場合の構成例を示している。

【０１３８】簡易復号器８１は、図１のMPEG変換部１１
からのMPEG STREAM（入力符号系列）を簡易復号し、ヘ
ッダとマクロブロックの単位まで分割する。簡易復号器
８１は、抽出したマクロブロック長をメモリ８３に出力
するとともに、マクロブロックのDC成分を復号して、メ
モリ８４に出力する。また、簡易復号器８１は、マクロ
ブロックアドレスとそれぞれのヘッダに含まれる各種の
パラメータを抽出し、修正MB選択器８５およびMB符号系
列発生器８６に出力する。

【０１３９】簡易復号器８１の復号能力は、スタートコ
ードを検出、弁別し、ヘッダ部を解読し、マクロブロッ
ク単位まで分割する能力で十分であり、マクロブロック
をランとレベル系列や、DCT係数系列まで復号する能力
は必要とされない。ただし、前述したＩピクチャの置換
符号系列を生成するために、DCT係数のDC成分を復号す
る能力は必要とされる。従って、簡易復号器８１は、逆
量子化、逆DCT、Ｐピクチャ、およびＢピクチャの画素
値を復号する必要はなく、動き補償機能において必要と
される、２フレーム分のメモリも必要とされない。簡易
復号器８１は、MPEG STREAM（入力符号系列）の異常を
検出し、エラーフラグを修正MB選択器８５に出力する。

【０１４０】なお、簡易復号器８１に、回路規模は増え
るが、ランとレベルまで復号し、ランを累計して、ブロ
ック内のDCT係数の数を確認したり、DC値が規定の範囲
内に収まっていることを確認させる機能を持たせること
もできる。

【０１４１】メモリ８２は、コンシール回路１４に入力
されたMPEG STREAM（入力符号系列）を記憶する。メモ
リ８３は、簡易復号器８１から入力されたマクロブロッ
ク長を記憶する。メモリ８４は、簡易復号器８１から入
力されたDC成分を記憶する。

【０１４２】修正MB選択器８５は、簡易復号器８１から
入力されたマクロブロックアドレス、種々のパラメータ
（Progressive Sequence，Picture Coding Type，Chrom
a Format，Intra DC Precision，Intra VLC Formatな
ど）およびエラーフラグから、MPEG STREAM（入力符号
系列）の異常区間を判定し、修正区間をMB符号系列発生
器８６に指示するとともに、対応する制御信号をスイッ
チ８７，８９に出力する。

【０１４３】MB符号系列発生器８６は、修正MB選択器８
５から修正区間の指示があったとき、簡易復号器８１か
ら入力されたマクロブロックアドレス、種々のパラメー
タ（Progressive Sequence，Picture Coding Type，Chr
oma Format，Intra DC Precision，Intra VLC Formatな
ど）、並びにメモリ８４からの過去のDC成分に応じて、
最適な（図３０および図３１を参照して詳述した）置換
する符号系列をスイッチ８７に出力するとともに、対応
するマクロブロック長をスイッチ８９に出力する。

【０１４４】スイッチ８７は、修正MB選択器８５からの
制御信号により、メモリ８２からの符号系列またはMB符
号系列発生器８６からの符号系列を選択し、MBパッキン
グ部８８に出力する。スイッチ８９は、メモリ８３から
のマクロブロック長またはMB符号系列発生器８６からの
マクロブロック長を、修正MB選択部８５からの制御信号
に基づいて選択し、MBパッキング部８８に出力する。MB
パッキング部８８は、MB符号系列発生器８６から入力さ
れたヘッダとマクロブロック、およびマクロブロックと
マクロブロックとの間のパッキングを行う。

【０１４５】コンシール回路１４の動作について説明す
ると、MPEG変換部１１（図１）から入力されたMPEG STR
EAM（入力符号系列）は、メモリ８２に入力されて記憶
されるとともに、簡易復号器８１に入力されて簡易復号
される。簡易復号器８１において、MPEG STREAM（入力
符号系列）にエラーが発見された場合、エラーフラグが
修正MB選択器６５に出力される。

【０１４６】修正MB選択器６５は、MPEG STREAM（入力
符号系列）中の異常区間を判定し、その区間に対応する
信号を、MB符号系列発生器８６に供給する。MB符号系列
発生器８６は、メモリ８４からの過去のDC成分などから
最適な置換符号系列とそのマクロブロック長を生成し、
スイッチ８７とスイッチ８９にそれぞれ出力する。スイ
ッチ８７，８９は、修正MB選択器８５からの制御信号に
基づき、MB符号系列発生器８６からの置換符号系列とそ
のマクロブロック長を選択し、MBパッキング部８８に出
力する。MBパッキング部８８は、入力された符号系列
を、必要に応じてパッキング修正し、シリアルデータ出
力部１５（図１）に出力する。

【０１４７】簡易復号器８１において、MPEG STREAM
（入力符号系列）にエラーが発見されなかった場合、入
力されたMPEG STREAM（入力符号系列）がメモリ８２、
スイッチ８７、およびMBパッキング部８８を介して、そ
のままシリアルデータ出力部１５に出力される。

【０１４８】図３２のコンシール回路１４は、簡易復号
器８１でMPEG STREAM（入力符号系列）の異常を検出す
る構成としているが、図３３に示すように、ECCデコー
ダ８からのエラーフラグをコンシール回路１４の修正MB
選択器８５に入力し、簡易復号器８１からのエラーフラ
グを省略するか、両者を併用することもできる。図３３
のコンシール回路１４は、前述したエラーフラグの点を
除いて、図３２の場合と同様であるので、ここではその
説明を省略する。

【０１４９】MPEGのストリームでは、ヘッダ部にエンコ
ードのパラメータが記載されており、具体的な画像情報
は、ヘッダ部に続くブロック層に符号化されて記載され
ている。デコーダはヘッダ部からパラメータを読みと
り、そのパラメータに基づいて、ブロック層に符号化さ
れている画像情報を復号する。従って、図３２に示すよ
うに、デコーダ（簡易復号器８１）でエラーを検出する
構成とした場合、必然的にマクロブロック以下の階層に
エラーが検出される。例えば、スタートコードが異常と
なった場合、本来スタートコードではない部分をスター
トコードと認識してしまったり、スタートコードを見落
としてしまったりして、本来のスタートコード以降のど
こかのマクロブロックで、復号不能に陥ったり、復号結
果に矛盾または不整合が発生したりするので、結果的に
エラーが検出される。

【０１５０】つまり、デコーダによりエラーを検出する
場合、ヘッダ部を信用することが前提となり、マクロブ
ロックの符号系列を発生させることができる符号系列発
生器を擁して、マクロブロック単位の置換を行うことと
なる。

【０１５１】これに対して、図３３に示すように、外部
の回路（例えば、図１のECCデコーダ８）によって、エ
ラーを検出する場合、スタートコードやヘッダ部のエラ
ーを検出できる可能性がある。ヘッダ部のエラーが検出
された場合、そのエラーがスライスヘッダ部のときはそ
のスライス、そのエラーがピクチャヘッダ部のときはそ
のピクチャ、そのエラーがGOPヘッダ部のときはそのGO
P、そのエラーがシーケンスヘッダ部のときはそのシー
ケンスが信用できないことになる。しかし、ピクチャ以
上の単位で、符号系列の置換を行うことは、回路規模と
遅延時間の増大を招くために、現実的な修復方法ではな
い。

【０１５２】そこで、図３３において、ヘッダ部のエラ
ーをECCデコーダ８で検出したときは、メモリ８２に予
め記憶しておいた過去のヘッダ、具体的には直近の１GO
P分のヘッダを使用したストリームを出力するようにす
ることもできる。これは、多くの場合、ヘッダ部はGOP
単位で繰り返される性質を利用するものである。

【０１５３】なお、上述したMPEGデータストリーム修正
処理は、可変長符号の復号、および再符号化を実行する
ものの、量子化や逆量子化を経ないので、エラーに関係
しない箇所のマクロブロックの画質の劣化は発生しな
い。

【０１５４】例えば、図３０（Ａ）に示すように、直前
のマクロブロックを参照するようにする場合、図３４に
示すように、そのマクロブロックのDCY0は、直前のマク
ロブロックのDCY1に設定され、DCY1は、値”００”に設
定され、DCY2は、直前のマクロブロックのDCY3と、自分
自身のマクロブロックのDCY1（＝”００”）（この値
は、直前のマクロブロックのDCY3から直前のマクロブロ
ックのDCY1を減算した値に等しい）に設定され、DCY3
は、値”００”に設定される。さらにDCB0は、直前のマ
クロブロックのDCB0に設定され、DCR0は、直前のマクロ
ブロックのDCR0と自分自身のマクロブロックのDCB0との
差に設定され、DCB1は、直前のマクロブロックのDCB1に
設定され、DCR1は、直前のマクロブロックのDCR1と、自
分自身のマクロブロックのDCR0との差に設定される。

【０１５５】Ｂピクチャ内のマクロブロックを補完する
場合は、図３５に示すように、各種のパラメータが、適
宜、所定の値に設定される。

【０１５６】以上においては、本発明をビデオカセット
レコーダに適用した場合を例としたが、本発明は、その
他の画像情報処理装置に適用することが可能である。

【０１５７】なお、上記各処理を行うコンピュータプロ
グラムは、磁気ディスク、CD-ROM等の情報記録媒体より
なる提供媒体のほか、インターネット、デジタル衛星な
どのネットワーク提供媒体を介してユーザに提供するこ
とができる。

【０１５８】

【発明の効果】以上のように、請求項１に記載の画像情
報処理装置、請求項６に記載の画像情報処理方法、およ
び請求項７に記載の提供媒体によれば、復号不可能とな
る範囲を判定して、復号不可能な範囲のデータを復号不
可能な範囲より前また後のデータに基づいて置換するよ
うにしたので、再生時の暴走、またはハングアップを抑
止し、さらに再生画像の画質を向上させることが可能と
なる。

【図面の簡単な説明】

【図１】本発明を適用したビデオカセットレコーダの構
成を示すブロック図である。

【図２】図１のMPEG変換部１１の構成を示すブロック図
である。

【図３】MPEG変換部１１の処理を説明する図である。

【図４】MPEG変換部１１のビットレート変換処理を説明
するフローチャートである。

【図５】スタートコードエミュレーション防止処理を説
明する図である。

【図６】図２のヘッダ付加部２４のスタートコードエミ
ュレーション防止処理に関わる部分の構成を示すブロッ
ク図である。

【図７】図６のヘッダ付加部２４のスタートコードエミ
ュレーション防止処理を説明するタイミングチャートで
ある。

【図８】図２のスタッフィング部２５の構成を示すブロ
ック図である。

【図９】図８のスタッフィング部２５のスタッフィング
処理を説明するタイミングチャートである。

【図１０】MPEG方式のストリームのデータ構造を説明す
る図である。

【図１１】図１０のGOP層のデータ構造を説明する図で
ある。

【図１２】図１０のスライスのストリームを説明する図
である。

【図１３】図１０のスライス層のより詳細なデータ構造
を説明する図である。

【図１４】図１のコンシール回路１４のMPEGデータスト
リーム修正処理を説明する図である。

【図１５】図１のコンシール回路１４のMPEGデータスト
リーム修正処理を説明する図である。

【図１６】図１のコンシール回路１４のMPEGデータスト
リーム修正処理を説明する図である。

【図１７】図１のコンシール回路１４のMPEGデータスト
リーム修正処理を説明する図である。

【図１８】図１のコンシール回路１４のMPEGデータスト
リーム修正処理を説明する図である。

【図１９】図１のコンシール回路１４の構成例を示すブ
ロック図である。

【図２０】図１のコンシール回路１４の他の構成例を示
すブロック図である。

【図２１】コンシール回路１４が行うＩピクチャの修正
処理を説明する図である。

【図２２】Ｉピクチャをグレイに修正する場合の処理を
説明する図である。

【図２３】Ｉピクチャをブラックに修正する場合の処理
を説明する図である。

【図２４】Ｉピクチャのスライス内の２番目以降のマク
ロブロックを修正する場合の処理を説明する図である。

【図２５】コンシール回路１４が行うＰピクチャおよび
Ｂピクチャの修正処理を説明する図である。

【図２６】ＰピクチャまたはＢピクチャをグレイに修正
する場合の処理を説明する図である。

【図２７】ＰピクチャまたはＢピクチャをブラックに修
正する場合の処理を説明する図である。

【図２８】ＰピクチャまたはＢピクチャのスライス内の
２番目以降のマクロブロックを修正する場合の処理を説
明する図である。

【図２９】Ｐピクチャのマクロブロックをホールドする
場合の処理を説明する図である。

【図３０】図１のコンシール回路１４が行うコンシール
処理を説明する図である。

【図３１】図１のコンシール回路１４が行うコンシール
処理を説明する図である。

【図３２】図１のコンシール回路１４の他の構成例を示
すブロック図である。

【図３３】図１のコンシール回路１４のさらに他の構成
例を示すブロック図である。

【図３４】図３０（Ａ）のコンシール処理を説明する図
である。

【図３５】Ｂピクチャのコンシール処理を説明する図で
ある。

【符号の説明】１１ MPEG変換部，８ ECCデコーダ，１４コン
シール回路，２１可変長復号部，２２変換部，
２３可変長符号化部，２４ヘッダ付加部，２５
スタッフィング部，２６システムコントローライ
ンタフェース，３１可変長復号部，３２０置換
部，３３可変長符号化部，６１可変長復号部，
６２メモリ，６３置換区間制御部，６４マク
ロブロック計数系列発生部，６６可変長符号化部，
８１簡易復号器，８２，８３，８４メモリ，
８５修正MB選択器，８６ MB符号系列発生器，８８
MBパッキング器

Claims

【特許請求の範囲】

【請求項１】画像情報が圧縮符号化されたデータスト
リームのエラーを修正する画像情報処理装置において、前記データストリームの一部を復号する復号手段と、前記データストリームに混入したエラーを検出する検出
手段と、前記復号手段で復号された情報に基づいて、前記検出手
段が検出したエラーに起因して復号不可能となる範囲を
判定する判定手段と、前記復号手段で復号された前記情報の一部を記憶する記
憶手段と、前記記憶手段で記憶された前記情報の一部に基づいて、
置換するデータを発生する発生手段と、前記判定手段の判定結果に基づいて、少なくとも前記復
号不可能な範囲のデータを、前記発生手段が発生したデ
ータに置換する置換手段とを含むことを特徴とする画像
情報処理装置。
【請求項２】前記記憶手段は、前記検出手段が検出し
た前記復号不可能な範囲より前の所定の範囲のデータを
記憶することを特徴とする請求項１に記載の画像情報処
理装置。
【請求項３】前記記憶手段は、前記検出手段が検出し
た前記復号不可能な範囲より後の所定の範囲のデータを
さらに記憶することを特徴とする請求項２に記載の画像
情報処理装置。
【請求項４】前記発生手段は、符号系列を発生するこ
とを特徴とする請求項１に記載の画像情報処理装置。
【請求項５】前記判定手段は、前記データストリーム
の誤り検出の情報を用いて復号不可能となる範囲をさら
に判定することを特徴とする請求項１に記載の画像情報
処理装置。
【請求項６】画像情報が圧縮符号化されたデータスト
リームのエラーを修正する画像情報処理装置の画像情報
処理方法において、前記データストリームの一部を復号する復号ステップ
と、前記データストリームに混入したエラーを検出する検出
ステップと、前記復号ステップで復号された情報に基づいて、前記検
出ステップで検出されたエラーに起因して復号不可能と
なる範囲を判定する判定ステップと、前記復号ステップで復号された前記情報の一部を記憶す
る記憶ステップと、前記記憶ステップで記憶された前記情報の一部に基づい
て、置換するデータを発生する発生ステップと、前記判定ステップの判定結果に基づいて、少なくとも前
記復号不可能な範囲のデータを、前記発生ステップで発
生されたデータに置換する置換ステップとを含むことを
特徴とする画像情報処理方法。
【請求項７】画像情報が圧縮符号化されたデータスト
リームのエラーを修正する画像情報処理装置に、前記データストリームの一部を復号する復号ステップ
と、前記データストリームに混入したエラーを検出する検出
ステップと、前記復号ステップで復号された情報に基づいて、前記検
出ステップで検出されたエラーに起因して復号不可能と
なる範囲を判定する判定ステップと、前記復号ステップで復号された前記情報の一部を記憶す
る記憶ステップと、前記記憶ステップで記憶された前記情報の一部に基づい
て、置換するデータを発生する発生ステップと、前記判定ステップの判定結果に基づいて、少なくとも前
記復号不可能な範囲のデータを、前記発生ステップで発
生されたデータに置換する置換ステップとを含む処理を
実行させるコンピュータが読み取り可能なプログラムを
提供することを特徴とする提供媒体。