JP2002281507A - 動画像の符号化装置及び復号装置 - Google Patents

Abstract

(57)【要約】 【課題】状況に応じてエラーコンシールメント方法を自
動又は手動で選択する。 【解決手段】符号化装置では、符号化ビデオビットスト
リーム中のユーザデータ領域に、エラーコンシールメン
ト方法識別情報を付加する。復号装置では、入力装置４
５でレジスタＲＥＧ２にエラーコンシールメント方法識
別情報ＩＤ２が入力され、復号部４２はエラーコンシー
ルメント方法識別情報ＩＤ１を分離してレジスタＲＥＧ
１に格納し、復号部４２がエラーを検出して検出信号Ｅ
ＲＲを活性にした場合、エラーコンシールメント処理部
４３は識別情報ＩＤ１及びＩＤ２に基づいてエラーコン
シールメント処理を行う。他の復号装置では、復号部で
検出されたエラーに基づいてエラー発生率検出部でエラ
ー発生率を検出し、復号部がエラーを検出した場合、エ
ラーコンシールメント処理部は、エラー発生率に応じて
エラーコンシールメント処理を行う。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、有線又は無線の伝
送経路でエラーが混入したビデオビットストリームに対
しエラーコンシールメント（誤り隠蔽）処理を行うため
の情報を付加する符号化装置及びこれに対応した復号装
置に関する。

【０００２】

【従来の技術】ＭＰＥＧでは、データの冗長性を削減す
るためにフレーム間予測符号化を行うので、エラーが時
間方向に伝搬する。特にＭＰＥＧ−４では、移動体通信
での適用を考慮しているので、伝送エラーが生じやすい
環境にあり、規格上、誤り耐性の向上が図られている。

【０００３】伝送エラーによる損失マクロブロックは通
常、動きベクトルに基づき参照画像から切り出された画
像ブロックで補間される。このようなエラーコンシール
メント処理方法に関しては、ＭＰＥＧに規格化されてお
らず、復号器メーカーに委ねられている。

【０００４】

【発明が解決しようとする課題】従来のエラーコンシー
ルメント処理では、状況に応じてその方法を適宜変更す
ることができなかったので、これを例えば携帯テレビ電
話に適用した場合、利用者にとって不満足な結果になる
場合がある。

【０００５】本発明の目的は、このような問題点に鑑
み、状況に応じてエラーコンシールメント方法を自動又
は手動で選択することができる動画像の符号化装置及び
復号装置を提供することにある。

【０００６】

【課題を解決するための手段及びその作用効果】本発明
による動画像符号化装置の一態様では、符号化ビデオビ
ットストリーム中のユーザデータ領域に、エラーコンシ
ールメント方法識別情報を付加する。

【０００７】本発明による動画像復号装置の一態様で
は、復号部はエラーコンシールメント方法識別情報を分
離して記憶部に格納し、復号部がエラーを検出した場
合、エラーコンシールメント処理部は該識別情報に基づ
いてエラーコンシールメント処理を行う。

【０００８】この構成によれば、状況に応じて送信者に
よりエラーコンシールメント方法を選択することができ
るので、特に伝送エラーが多い場合に、画質劣化による
不快感を軽減することができる。

【０００９】本発明による動画像復号装置の他の態様で
は、入力手段で記憶部にエラーコンシールメント方法識
別情報を入力し、復号部がエラーを検出した場合、エラ
ーコンシールメント処理部は該識別情報に基づいてエラ
ーコンシールメント処理を行う。

【００１０】この構成によれば、状況に応じて受信者に
よりエラーコンシールメント方法を選択することができ
るので、特に伝送エラーが多い場合に、画質劣化による
不快感を軽減することができる。

【００１１】本発明による動画像復号装置の他の態様で
は、復号部で検出されたエラーに基づいてエラー発生率
検出部でエラー発生率を検出し、復号部がエラーを検出
した場合、エラーコンシールメント処理部は、エラー発
生率に応じてエラーコンシールメント処理を行う。

【００１２】この構成によれば、エラー発生率に応じて
自動的にエラーコンシールメント方法が選択されるの
で、手動選択することなく、伝送エラーによる受信者の
不快感を低減することができる。

【００１３】本発明による動画像復号装置の他の態様で
は、検出部で符号化画像列中のイントラ符号化画像の割
合に関する情報を取得し、復号部がエラーを検出した場
合、エラーコンシールメント処理部は該情報に応じてエ
ラーコンシールメント処理を行う。

【００１４】該情報は、符号化ビデオビットストリーム
のユーザ領域に該情報が付加されている場合には該情報
を復号部が分離することにより取得され、又は、復号部
で分離されたピクチャコーディングタイプのデータを集
計して取得される。

【００１５】この構成によれば、イントラ符号化画像の
割合に応じて、自動的にエラーコンシールメント方法が
選択されるので、手動選択することなく、伝送エラーに
よる受信者の不快感を低減することができる。

【００１６】本発明による動画像復号装置の他の態様で
は、復号部がエラーを検出した場合、エラーコンシール
メント処理部はその符号化画像から次のイントラ符号化
画像までの符号化画像数に応じてエラーコンシールメン
ト方法を選択しエラーコンシールメント処理を行う。

【００１７】この構成によれば、エラー発生ピクチャか
ら、エラーが収束する次のＩピクチャまでのピクチャ数
に応じて、自動的にエラーコンシールメント方法が選択
されるので、手動選択することなく、伝送エラーによる
受信者の不快感を低減することができる。

【００１８】本発明による動画像符号化装置の他の態様
では、符号化ビデオビットストリーム中のユーザデータ
領域に、各ビデオパケット内のマクロブロック数の値を
付加するとともに、各ビデオパケット内のマクロブロッ
ク数を該値にする。

【００１９】この構成によれば、復号装置において破損
画像領域の検出率が向上するので、結果として画質を向
上させることができる。

【００２０】本発明による動画像復号装置の他の態様で
は、符号化ビデオビットストリーム中のユーザデータ領
域に、各ビデオパケット内のビット数の上限値を付加す
るとともに、各ビデオパケット内のビット数を該上限値
以下にする。

【００２１】この構成によれば、復号装置において破損
画像領域の検出率が向上するので、結果として画質を向
上させることができる。

【００２２】

【発明の実施の形態】以下、図面を参照して本発明の実
施形態を説明する。

【００２３】［第１実施形態］図１は、本発明の第１実
施形態の、ＭＰＥＧに従った動画像無線送信装置の概略
ブロック図である。この装置は、例えば携帯テレビ電話
の送信部である。

【００２４】ビデオカメラ１０から出力されたビデオ信
号は、符号化ユニット１１に供給される。符号化ユニッ
ト１１は、ハードウエア構成であっても、マイクロコン
ピュータを用いたソフトウエア構成であってもよい。符
号化ユニット１１は、符号化部１２、ユーザデータ付加
部１３及びレジスタ１４を備えている。レジスタ１４に
は、キースイッチアレイなどの入力装置１５を操作する
ことによりエラーコンシールメント方法識別コードＩＤ
１が設定される。符号化部１２は、ビデオカメラ１０か
らのビデオ信号を符号化して符号化ビデオストリームを
生成し、送信機１６へ供給する。送信機１６は、符号化
ビデオストリームで搬送波を変調し、電波の形で送信す
る。

【００２５】図３（Ａ）は、ＭＰＥＧ−４に従って符号
化部１２で生成されたビデオビットストリーム２０の最
上位層の構造を示す。

【００２６】ビデオビットストリーム２０は、ビジュア
ルオブジェクトシーケンス開始コード、プロファイル及
びレベル指示、ユーザデータ２１、ビジュアルオブジェ
クト２２、並びに、ビジュルアルオブジェクトシーケン
ス終了コードからなる。ユーザデータ２１及びビジュア
ルオブジェクト２２はいずれも、任意データ長であり、
先頭に開始コードを有している。ビジュアルオブジェク
ト２２は例えば、１回のテレビ電話の開始から終了まで
の内容である。

【００２７】ビジュアルオブジェクト２２の下階層には
ビデオオブジェクト層があり、その下階層にはＶＯＰグ
ループ層（ＧＯＶ層）があり、その下階層にはビデオオ
ブジェクトプレーン（ＶＯＰ）層がある。

【００２８】図３（Ｂ）はＭＰＥＧ−４のＶＯＰ以下の
階層のビットストリーム構成を示す。

【００２９】ビデオオブジェクトプレーン２３に含まれ
るビデオパケット２４は、その先頭から順に、再同期マ
ーカー２５、ビデオパケット（ＶＰ）ヘッダ２６、ヘッ
ダー拡張コード（ＨＥＣ）２７、ＨＥＣ＝‘１’のとき
に付加されるＶＯＰヘッダの一部２８、マクロブロック
情報２９及びスタッフビット３０を有している。マクロ
ブロック情報２９は、その先頭から順に、動きに関する
情報３１、モーションマーカー３２及びＤＣＴ計数情報
３３を有している。ＤＣＴ計数情報３３はテクスチャー
であり、複数のマクロブロックで構成されている。

【００３０】図２は、図１中のユーザデータ付加部１３
の処理を示すフローチャートである。

【００３１】（Ｓ１）ユーザデータ付加部１３は、符号
化部１２で生成中のビデオビットストリーム２０内のユ
ーザデータ２１の開始コードを検出し、又はこの生成が
符号化部１２から通知されると、ステップＳ２へ進む。

【００３２】（Ｓ２）ユーザデータ付加部１３は、レジ
スタ１４に設定されているエラーコンシールメント方法
識別コードＩＤ１をユーザデータ２１内の所定位置に付
加する。

【００３３】次に、状況に応じたエラーコンシールメン
ト方法の具体例を説明する。

【００３４】主に人の顔がビデオカメラ１０に写ってい
る場合、わずかな伝送エラーであっても、 受信側で参照画像から対応する画像ブロックを切り出
して損失マクロブロックを補間し、 現画面上の１つ上のマクロブロックを切り出して損失
マクロブロックを補間し、又は、 動きベクトルに基づき参照画像から画像ブロックを切
り出して損失マクロブロックを補間するというエラーコ
ンシールメント処理（第１の方法）を行うと、顔画像の
一部が不連続的に変化するため目立ち、受信者に悪い印
象を与える虞れがある。

【００３５】この場合、エラー画面を間引き、伝送エラ
ーを含まない、メモリに一時格納されている過去のフレ
ーム画像で置き換えるというエラーコンシールメント処
理（第２の方法）を行うことにより、動きが不連続にな
るというデメリットがあるものの、受信者に悪い印象を
与えるのを防止することができる。

【００３６】一方、主に風景などがビデオカメラ１０に
写っている場合には、上記第１の方法でエラーコンシー
ルメント処理を行った方が、一般に自然に見える。

【００３７】また、エラーコンシールメントを行わない
場合、損失画像ブロックが抜けるので、受信者は伝送エ
ラー発生状態を容易に知ることができる。受信者が携帯
電話の操作にうとい場合、送信者の指示で受信状況を把
握させ、その結果を聞いて送信者側でエラーコンシール
メント処理方法を選択してあげることもできる。

【００３８】そこで、送信者は、入力装置１５を操作し
てエラーコンシールメント方法を選択し、これをレジス
タ１４に設定する。具体例として、レジスタ１４に設定
されるエラーコンシールメント方法識別コードＩＤ１を
次のように定める。

【００３９】 ＩＤ＝０：エラーコンシールメントを行わない ＩＤ＝１：第１のエラーコンシールメント方法 ＩＤ＝２：第２のエラーコンシールメント方法 なお、第１の方法をさらに分けてＩＤ１を定義してもよ
い。

【００４０】エラーコンシールメント方法自体は公知で
あり、本実施形態の特徴は、エラーコンシールメント方
法識情報に基づいてエラーコンシールメント方法を選択
することにある。

【００４１】図４は、図１の装置に対応した動画像無線
受信装置の概略ブロック図である。

【００４２】受信機４０は、受信信号を復調して符号化
ビットストリームを抽出し、復号ユニット４１に供給す
る。復号ユニット４１は、ハードウエア構成であって
も、マイクロコンピュータを用いたソフトウエア構成で
あってもよい。この点は、以下の実施形態についても同
様である。復号ユニット４１は、復号部４２、エラーコ
ンシールメント処理部４３、レジスタＲＥＧ１及びＲＥ
Ｇ２を備えている。

【００４３】復号部４２は、受信機４０からの符号化ビ
ットストリームに対し、可変長復号、逆量子化及び逆Ｄ
ＣＴ変換を行って、復号された画像信号Ｄ１又は予測誤
差信号を生成する。予測誤差信号の場合、復号部４２は
動きベクトルに基づき画像メモリ４４から参照画像ブロ
ックを切り出し、これを画像信号Ｄ３として取り出し、
予測信号として該予測誤差信号と加算することにより、
画像信号Ｄ１を生成する。画像信号Ｄ１は、エラーコン
シールメント処理部４３に供給される。復号部４２はま
た、その可変長復号部において、ビデオパケット（Ｖ
Ｐ）の単位でエラーを検出し、エラー検出信号ＥＲＲを
エラーコンシールメント処理部４３へ供給する。復号部
４２はさらに、その可変長復号部においてユーザデータ
２１を分離し、レジスタＲＥＧ１に格納させる。簡単化
のために、ユーザデータ２１にはエラーコンシールメン
ト方法識別コードＩＤ１のみ含まれているとする。

【００４４】ＩＤ１＝０の場合、受信側でもエラーコン
シールメント方法識別コードの値を選択できるようにす
るため、復号ユニット４１にレジスタＲＥＧ２が備えら
れている。レジスタＲＥＧ２には、入力装置４５を操作
してエラーコンシールメント方法識別コードＩＤ２が設
定される。ＩＤ２の取り得る値は、上述のＩＤ１のそれ
と同一である。エラーコンシールメント方法識別コード
ＩＤ１及びＩＤ２は、エラーコンシールメント処理部４
３に供給される。

【００４５】エラーコンシールメント処理部４３は、エ
ラー検出信号ＥＲＲが活性の場合、識別コードＩＤ１及
びＩＤ２の値に基づきエラーコンシールメント方法を決
定し、それを実行する。

【００４６】図５は、図４中のエラーコンシールメント
処理部４３によるエラーコンシールメント方法の決定手
順を示すフローチャートである。

【００４７】（Ｓ１０、Ｓ１１）エラー検出信号ＥＲＲ
が不活性であれば、画像信号Ｄ１をそのまま画像信号Ｄ
２として画像メモリ４４に格納する。

【００４８】（Ｓ１２、Ｓ１３）エラー検出信号ＥＲＲ
が活性でＩＤ１≠０であれば、識別コードＩＤ１の値に
対応した方法でエラーコンシールメント処理を行う。

【００４９】（Ｓ１４、Ｓ１５）エラー検出信号ＥＲＲ
が活性でＩＤ１＝０である場合には、ＩＤ２≠０のと
き、識別コードＩＤ２の値に対応した方法でエラーコン
シールメント処理を行う。

【００５０】（Ｓ１６）エラーコンシールメント方法識
別コードＩＤ１及びＩＤ２の値が共に０である場合、予
め定められた方法、例えば上記第１の方法でエラーコン
シールメント処理を行う。

【００５１】エラーコンシールメント処理部４３は、第
１の方法でエラーコンシールメント処理を行う場合、損
失マクロブロックの動きベクトル又はこれが壊れている
場合にはスクリーン上で１つ上のマクロブロックの動き
ベクトルに基づき、画像メモリ４４内の参照画像から画
像ブロックを切り出し、これを画像信号Ｄ３として取り
出し、画像信号Ｄ２として画像メモリ４４に格納するこ
とにより、損失マクロブロックを補間する。

【００５２】エラーコンシールメント処理部４３は、第
２の方法でエラーコンシールメント処理を行う場合、画
像信号Ｄ１を捨て、制御信号Ｃ１を活性にする。この制
御信号Ｃ１は、表示回路４６に供給される。

【００５３】画像メモリ４４内には通常、３フレームが
一時的に格納される。これらのフレームは、第１のエラ
ーコンシールメント方法が実行されたフレーム又はエラ
ー無しフレームである。両フレームを区別するために、
画像メモリ４４内の各フレームに対しフラグを用意し、
第１のエラーコンシールメント方が実行されたフレーム
に対しこのフラグがエラーコンシールメント処理部４３
により立てられる。

【００５４】表示回路４６は、画像メモリ４４に格納さ
れた復号画像を表示順に読み出してフォーマット変換
し、さらにビデオ信号に変換して表示パネル４７に供給
する。

【００５５】表示回路４６は、制御信号Ｃ１が活性であ
る間、上記フラグが立っていないエラー無し同一フレー
ムを繰り返し画像メモリ４４から読み出す。

【００５６】本第１実施形態によれば、状況に応じて送
信者又は受信者によりエラーコンシールメント方法を選
択することができるので、特に伝送エラーが多い場合
に、画質劣化による不快感を軽減することができる。

【００５７】また、エラーコンシールメント方法識別コ
ードＩＤ１の選択に関し、送信側の方が受信側よりも優
先順位が高いので、例えば自己の顔画像を伝送している
場合に、相手に与える虞がある不快感の軽減を、送信側
で制御することができる。

【００５８】［第２実施形態］図６は、本発明の第２実
施形態のエラーコンシールメント処理部によるエラーコ
ンシールメント方法の決定手順を示すフローチャートで
ある。

【００５９】この実施形態では、エラーコンシールメン
ト方法選択に関し、送信側より受信側の方の優先順位が
高い。すなわち、図５のステップＳ１４及びＳ１５の処
理を、ステップＳ１２及びＳ１３の処理よりも先に行っ
ている。

【００６０】他の点は、上記第１実施形態と同一であ
る。

【００６１】本第２実施形態によれば、受信側でエラー
コンシールメント方法を自由に選択することができるの
で、受信画像の画質に応じ該方法を選択して不快感を軽
減することができる。

【００６２】［第３実施形態］図７は、本発明の第３実
施形態の動画像無線受信装置の概略ブロック図である。

【００６３】復号ユニット４１Ａでは、復号部４２から
のエラー検出信号ＥＲＲがエラーコンシールメント処理
部４３Ａのみならずエラー発生率検出部５０にも供給さ
れる。エラー発生率検出部５０は、単位時間例えば１０
秒当たりのエラーレートＥＲを検出し、これを比較部５
１に供給する。一方、レジスタＲＥＧ３には、入力装置
４５を操作して参照値ＲＥＦ１が設定され、これが比較
部５１に供給される。比較部５１は、エラーレートＥＲ
と参照値ＲＥＦ１とを比較し、その結果をエラーコンシ
ールメント処理部４３Ａに供給する。

【００６４】図８は、エラーコンシールメント処理部４
３Ａによるエラーコンシルメント方法決定手順を示すフ
ローチャートである。

【００６５】（Ｓ２０）エラー検出信号ＥＲＲが活性で
あれば、ステップＳ２１へ進む。

【００６６】（Ｓ２１）ＥＲ＜ＲＥＦ１であればステッ
プＳ２２へ進み、そうでなければステップＳ２３へ進
む。

【００６７】（Ｓ２２）上記第１の方法で、すなわち損
失画像領域を補間することにより、エラーコンシールメ
ント処理を行い、ステップＳ２０へ戻る。

【００６８】（Ｓ２２）上記第２の方法で、すなわちエ
ラーフレームを間引くことにより、エラーコンシールメ
ント処理を行い、ステップＳ２０へ戻る。

【００６９】本第３実施形態によれば、エラー発生率に
応じて自動的にエラーコンシールメント方法が選択され
るので、手動選択することなく、伝送エラーによる受信
者の不快感を低減することができる。

【００７０】［第４実施形態］図１１は、受信装置の復
号部に供給される符号化画像の時系列を示す。図中の符
号Ｉ及びＰはそれぞれ、Ｉピクチャー及びＰピクチャー
を示している。

【００７１】図１１（Ａ）において、Ｐ３でエラーが生
じた場合、次のＩ２の１つ前のピクチャーまでエラーが
伝搬する。図１１（Ｂ）において、Ｉ１にエラーが生じ
た場合、次のＩ２の１つ前のピクチャーまでエラーが伝
搬する。

【００７２】エラーが生じたピクチャーから、エラーが
収束する次のＩピクチャーまでのフレーム数が少なけれ
ば、エラーが生じたピクチャー及びそのエラーが伝搬す
るピクチャーを間引いてもその影響が小さいので、これ
らをエラー発生前のピクチャーで置き換えることによ
り、受信者の不快感を軽減することができる。

【００７３】図９は、この方法を実施するための、本発
明の第４実施形態の動画像無線受信装置の概略ブロック
図である。

【００７４】復号ユニット４１Ｂでは、エラーが生じて
ピクチャーを間引く場合のピクチャーを間引数を予知す
るダウンカウンタ５２を備えている。レジスタＲＥＧ４
はＩピクチャ割合逆数ＩＲの保持用であり、その出力は
ダウンカウンタ５２の並列データ入力端に供給される。
ダウンカウンタ５２のロード制御入力端Ｌ及びクロック
入力ＣＫにはそれぞれ、復号部４２ＡからＩピクチャ検
出信号ＩＰ及びＰピクチャ検出信号ＰＰが供給される。

【００７５】図１０は、図９中のダウンカウンタ５２及
びレジスタＲＥＧ４に対する復号部４２Ａの処理を示す
フローチャートである。

【００７６】復号部４２Ａに供給される符号化ビットス
トリームの上記ユーザデータ領域には、上記第１実施形
態と同様にしてＩピクチャ割合逆数ＩＲが付加されてい
る。

【００７７】（Ｓ３０、Ｓ３１）復号部４２Ａは、その
可変長復号部において、ユーザデータ領域であると判定
すればＩＲを分離し、レジスタＲＥＧ４に格納させる。

【００７８】（Ｓ３２〜Ｓ３５）復号部４２Ａは、その
可変長復号部においてピクチャコーディングタイプＰＣ
Ｔを分離した時、ＰＣＴがＩピクチャーであることを示
している場合にはＩピクチャ検出信号ＩＰのパルスを出
力し、ＰＣＴがＰピクチャーであることを示している場
合にはＰピクチャ検出信号ＰＰのパルスを出力する。

【００７９】Ｉピクチャ検出信号ＩＰのパルスにより、
Ｉピクチャ割合逆数ＩＲが初期値としてダウンカウンタ
５２にロードされる。これにより、ダウンカウンタ５２
の計数値ＣＶは、次のＩピクチャーまでのフレーム数と
なる。その後、Ｐピクチャ検出信号ＰＰのパルス毎に計
数値ＣＶが１だけデクリメントされる。すなわち、次の
Ｉピクチャーまでのフレーム数が減少する。

【００８０】この値ＣＶは、比較部５１に供給される。
一方、レジスタＲＥＧ５には、入力装置４５を操作して
参照値ＲＥＦ２が設定され、この値が比較部５１に供給
される。比較部５１は、計数値ＣＶと参照値ＲＥＦ２と
を比較し、その結果をエラーコンシールメント処理部４
３Ａに供給する。

【００８１】エラーコンシールメント処理部４３Ａは、
図７のエラーコンシールメント処理部４３Ａと同様に、
ＣＶ＜ＲＥＦ２であれば上記第１の方法で、すなわち損
失画像領域を補間することにより、エラーコンシールメ
ント処理を行い、そうでなければ上記第２の方法で、す
なわちエラーフレームを間引くことにより、エラーコン
シールメント処理を行う。

【００８２】他の点は上記第３実施形態と同一である。

【００８３】本第４実施形態によれば、エラー発生ピク
チャから、エラーが収束する次のＩピクチャまでのピク
チャ数に応じて、自動的にエラーコンシールメント方法
が選択されるので、手動選択することなく、伝送エラー
による受信者の不快感を低減することができる。

【００８４】なお、図９の構成に図７のエラー発生率検
出部５０、比較部５１及びレジスタＲＥＧ３を付加し、
エラーコンシールメント処理部４３Ａにおいて、ＣＶ≧
ＲＥＦ２の条件の替わりにＥＲ≧ＲＥＦ１かつＣＶ≧Ｒ
ＥＦ２の条件を用いて上記エラーコンシールメント方法
の選択を自動的に行うようにしてもよい。

【００８５】また、Ｉピクチャ割合逆数ＩＲは、平均的
値であってもよい。

【００８６】［第５実施形態］本発明の第５実施形態の
動画像無線送信装置のハードウエア構成は、図１と同一
である。図１２は、この第５実施形態における、図１中
のユーザデータ付加部１３の処理を示すフローチャート
である。

【００８７】（Ｓ４０）ユーザデータ付加部１３は、符
号化部１２で生成中のビデオビットストリーム２０内の
ユーザデータ２１の開始コードを検出し又はこの生成が
符号化部１２から通知されると、ステップＳ４１へ進
む。

【００８８】（Ｓ４１）ユーザデータ付加部１３は、レ
ジスタ１４に設定されているマクロブロック数ＭＢＮを
ユーザデータ２１内の所定位置に付加する。

【００８９】符号化部１２は、各ビデオパケット（Ｖ
Ｐ）内のマクロブロック数を値ＭＢＮにする。

【００９０】ＭＰＥＧ−４では、１つのＶＰ内のマクロ
ブロック数が任意であるので、１画面（フレーム又はフ
ィールド）中の最後のＶＰが次の画面にわたって含まれ
る場合がある。この場合、この２画面にわたったＶＰに
エラーが発生すると、エラーを含むフレーム数が増え
る。

【００９１】そこで、１画面中のＶＰの数を整数にす
る。例えば図１３（Ａ）に示すように、１画面が１１×
９マクロブロックで構成される場合、ＭＢＮ＝９とする
と、１画面中のＶＰの数は１１×９／９＝１１と整数に
なる。

【００９２】また、各ＶＰ内のマクロブロック数ＭＢＮ
が一定であるので、復号部において、図１３（Ｂ）に示
すＶＰのヘッダ（図３（Ｂ）中の２５〜２８）に含まれ
るユニークワードの位置、例えば再同期マーカー２５の
位置を、ＶＰ内のマクロブロック数を計数することによ
り、順次検出することができる。

【００９３】復号部は、例えば図１３（Ｂ）に示すビデ
オパケットＶＰ１のヘッダ中のユニークワード位置を検
出し、この位置のデータがユニークワードに一致しない
場合、ビデオパケットＶＰ１を損失画像ブロックとみな
し、上記第１の方法でこれを補間する。次に、ビデオパ
ケットＶＰ１内のマクロブロック数を計数し、これによ
り、次のビデオパケットＶＰ２内のヘッダ中のユニーク
ワード位置を検出する。そして、前記同様の処理を行
う。復号部でこのような処理を繰り返すことにより、破
損画像領域の検出率が向上する。

【００９４】復号部はさらに、例えば図１３（Ｂ）に示
すＶＰ１のヘッダに含まれているマクロブロック番号を
記憶部に記憶しておき、ＶＰ１内のマクロブロックを検
出する毎に該記憶部の記憶値を１だけインクリメント
し、該記憶値が次のＶＰ２のヘッダに含まれているマク
ロブロック番号に一致しない場合、ビデオパケットＶＰ
１を損失画像ブロックとみなす。マクロブロックは可変
長データであって、ユニークワードであるエンドマーク
を含むので、このエンドマークを検出することにより、
マクロブロックを検出する。ノイズでエンドマークの一
部又は全部がビット反転した場合、エンドマークが検出
されないので、上記不一致が生ずる。

【００９５】このような処理により、従来検出できなか
った破損画像領域が検出されることになり、これに対し
エラーコンシールメント処理を施すことにより画質を向
上させることができる。

【００９６】［第６実施形態］本発明の第６実施形態で
は、上記第５実施形態のマクロブロック数ＭＢＮの替わ
りに、各ＶＰ内のビット数合計の上限値を定め、これを
ユーザデータに付加する。そして、復号装置において
は、ＶＰ内のヘッダのユニークワード位置からビット数
を計数し、次のＶＰ内のヘッダを検出した時に計数値が
該上限値を超えていた場合、途中のユニークワードがエ
ラーにより破壊されたためにこれが検出されず、該上限
値を超えたと判定する。

【００９７】このようにしてエラー領域を限定すること
ができ、上記同様にして画質を向上させることができ
る。

【００９８】なお、本発明には外にも種々の変形例が含
まれる。

【００９９】例えば、本発明はＭＰＥＧ−４以外のビデ
オビットストリームや携帯テレビ電話以外の装置に対し
ても適用可能である。また、ユーザデータ領域は、上述
以外の位置のものであってもよい。

【０１００】本発明には、以下のような付記構成が含ま
れる。

【０１０１】（付記１） エラーコンシールメント方法
識別情報を格納する記憶部と、動画像データを符号化し
て符号化ビデオビットストリームを生成する符号化部
と、該符号化ビデオビットストリーム中のユーザデータ
領域に、格納された該識別情報を付加するユーザデータ
付加部と、を有することを特徴とする動画像符号化装
置。

【０１０２】（付記２） 上記記憶部に対し上記識別情
報を入力する入力手段をさらに有することを特徴とする
付記１記載の動画像符号化装置。

【０１０３】（付記３） 記憶部と、エラーコンシール
メント方法識別情報がユーザデータ領域に付加された符
号化ビデオビットストリームを復号して動画像データを
再生し、該符号化ビデオビットストリーム中のデータ損
失エラーを検出するすると共に、該識別情報を分離して
該記憶部に格納する復号部と、該復号部が該エラーを検
出した場合、該記憶部に格納された該識別情報に基づい
てエラーコンシールメント処理を行うエラーコンシール
メント処理部と、を有することを特徴とする動画像復号
装置。

【０１０４】（付記４） 上記エラーコンシールメント
処理部は、上記記憶部に上記識別情報が格納されていな
い場合、所定の方法でエラーコンシールメント処理を行
うことを特徴とする付記３記載の動画像復号装置。

【０１０５】（付記５） 記憶部と、該記憶部にエラー
コンシールメント方法識別情報を入力する入力手段と、
符号化ビデオビットストリームを復号して動画像データ
を再生すると共に、該符号化ビデオビットストリーム中
のデータ損失エラーを検出する復号部と、該復号部が該
エラーを検出した場合、該記憶部に格納された該識別情
報に基づいてエラーコンシールメント処理を行うエラー
コンシールメント処理部と、を有することを特徴とする
動画像復号装置。

【０１０６】（付記６） 符号化ビデオビットストリー
ムを復号して動画像データを再生すると共に、該符号化
ビデオビットストリーム中のデータ損失エラーを検出す
る復号部と、検出された該エラーに基づいてエラー発生
率を検出するエラー発生率検出部と、該エラー発生率を
設定値と比較する比較部と、該復号部が該エラーを検出
した場合、該比較部の比較結果に応じてエラーコンシー
ルメント処理を行うエラーコンシールメント処理部と、
を有することを特徴とする動画像復号装置。

【０１０７】（付記７） 符号化ビデオビットストリー
ムを復号して動画像データを再生すると共に、該符号化
ビデオビットストリーム中のデータ損失エラーを検出す
る復号部と、符号化画像列中のイントラ符号化画像の割
合に関する情報を取得する検出部と、該復号部が該エラ
ーを検出した場合、該情報に応じてエラーコンシールメ
ント処理を行うエラーコンシールメント処理部と、を有
することを特徴とする動画像復号装置。

【０１０８】（付記８） 上記符号化ビデオビットスト
リームは、そのユーザ領域に上記情報を有し、上記検出
部は、該ユーザ領域中の該情報を取得する、ことを特徴
とする付記７記載の動画像復号装置。

【０１０９】（付記９） 符号化ビデオビットストリー
ムを復号して動画像データを再生すると共に、該符号化
ビデオビットストリーム中のデータ損失エラーを検出す
る復号部と、該復号部が該エラーを検出した場合、その
符号化画像から次のイントラ符号化画像までの符号化画
像数に応じてエラーコンシールメント方法を選択しエラ
ーコンシールメント処理を行うエラーコンシールメント
処理部と、を有することを特徴とする動画像復号装置。

【０１１０】（付記１０） 動画像データを符号化して
符号化ビデオビットストリームを生成するとともに、該
符号化ビデオビットストリーム中の各ビデオパケット内
のマクロブロック数を所定値にする符号化部と、該符号
化ビデオビットストリーム中のユーザデータ領域に、該
所定値を付加するユーザデータ付加部と、を有すること
を特徴とする動画像符号化装置。

【０１１１】（付記１１） 動画像データを符号化して
符号化ビデオビットストリームを生成するとともに、該
符号化ビデオビットストリーム中の各ビデオパケット内
のビット数を所定値以下にする符号化部と、該符号化ビ
デオビットストリーム中のユーザデータ領域に、該所定
値を付加するユーザデータ付加部と、を有することを特
徴とする動画像符号化装置。

【図面の簡単な説明】

【図１】本発明の第１実施形態の動画像無線送信装置の
概略ブロック図である。

【図２】図１中のユーザデータ付加部の処理を示すフロ
ーチャートである。

【図３】ＭＰＥＧ−４に従って符号化部で生成されたビ
デオビットストリームの構造を示す説明図である。

【図４】図１の装置に対応した動画像無線受信装置の概
略ブロック図である。

【図５】図４中のエラーコンシールメント処理部による
エラーコンシールメント方法の決定手順を示すフローチ
ャートである。

【図６】本発明の第２実施形態のエラーコンシールメン
ト処理部によるエラーコンシールメント方法の決定手順
を示すフローチャートである。

【図７】本発明の第３実施形態の動画像無線受信装置の
概略ブロック図である。

【図８】図７中のエラーコンシールメント処理部による
エラーコンシルメント方法決定手順を示すフローチャー
トである。

【図９】本発明の第４実施形態の動画像無線受信装置の
概略ブロック図である。

【図１０】図９中のダウンカウンタ５２及びレジスタＲ
ＥＧ４に対する復号部４２Ａの処理を示すフローチャー
トである。

【図１１】受信装置の復号部に供給される符号化画像の
時系列を示す説明図である。

【図１２】本発明の第５実施形態における、図１中のユ
ーザデータ付加部の処理を示すフローチャートである。

【図１３】（Ａ）は、本発明の第６実施形態のビデオパ
ケット配列説明図、（Ｂ）は破壊されたビデオパケット
の検出説明図である。

【符号の説明】

１０ ビデオカメラ １１ 符号化ユニット １２ 符号化部 １３ ユーザデータ付加部 １４ レジスタ １５、４５ 入力装置 １６ 送信機 ２０ ビデオビットストリーム ２１ ユーザデータ ２２ ビジュアルオブジェクト ２３ ビデオオブジェクトプレーン ２４ ビデオパケット ２５ 再同期マーカー ２６ ＶＰヘッダ ２７ ヘッダー拡張コード ２８ ＶＯＰヘッダの一部 ２９ マクロブロック情報 ３０ スタッフビット ３１ 動きに関する情報 ３２ モーションマーカー ３３ ＤＣＴ計数情報 ４０ 受信機 ４１、４１Ａ、４１Ｂ 復号ユニット ４２、４２Ａ 復号部 ＲＥＧ１〜ＲＥＧ５ レジスタ ４３、４３Ａ エラーコンシールメント処理部 ４４ 画像メモリ ４６ 表示回路 ４７ 表示パネル ５０ エラー発生率検出部 ５１ 比較部 ５２ ダウンカウンタ

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5B001 AB01 AB02 AB03 AB05 AC01 AD06 AE02 5C059 LB07 MA00 MA04 MA23 MC38 ME01 PP05 PP06 RA04 RF01 RF11 SS07 SS10 TA76 TB04 TB07 TC22 TC50 TD11 UA02 UA05 5K014 AA01 FA06 GA02

Claims (5)

【特許請求の範囲】
1. 【請求項１】 エラーコンシールメント方法識別情報を
   格納する記憶部と、 動画像データを符号化して符号化ビデオビットストリー
   ムを生成する符号化部と、 該符号化ビデオビットストリーム中のユーザデータ領域
   に、格納された該識別情報を付加するユーザデータ付加
   部と、 を有することを特徴とする動画像符号化装置。
2. 【請求項２】 記憶部と、 エラーコンシールメント方法識別情報がユーザデータ領
   域に付加された符号化ビデオビットストリームを復号し
   て動画像データを再生し、該符号化ビデオビットストリ
   ーム中のデータ損失エラーを検出するすると共に、該識
   別情報を分離して該記憶部に格納する復号部と、 該復号部が該エラーを検出した場合、該記憶部に格納さ
   れた該識別情報に基づいてエラーコンシールメント処理
   を行うエラーコンシールメント処理部と、 を有することを特徴とする動画像復号装置。
3. 【請求項３】 符号化ビデオビットストリームを復号し
   て動画像データを再生すると共に、該符号化ビデオビッ
   トストリーム中のデータ損失エラーを検出する復号部
   と、 検出された該エラーに基づいてエラー発生率を検出する
   エラー発生率検出部と、 該エラー発生率を設定値と比較する比較部と、 該復号部が該エラーを検出した場合、該比較部の比較結
   果に応じてエラーコンシールメント処理を行うエラーコ
   ンシールメント処理部と、 を有することを特徴とする動画像復号装置。
4. 【請求項４】 符号化ビデオビットストリームを復号し
   て動画像データを再生すると共に、該符号化ビデオビッ
   トストリーム中のデータ損失エラーを検出する復号部
   と、 符号化画像列中のイントラ符号化画像の割合に関する情
   報を取得する検出部と、 該復号部が該エラーを検出した場合、該情報に応じてエ
   ラーコンシールメント処理を行うエラーコンシールメン
   ト処理部と、 を有することを特徴とする動画像復号装置。
5. 【請求項５】 符号化ビデオビットストリームを復号し
   て動画像データを再生すると共に、該符号化ビデオビッ
   トストリーム中のデータ損失エラーを検出する復号部
   と、 該復号部が該エラーを検出した場合、その符号化画像か
   ら次のイントラ符号化画像までの符号化画像数に応じて
   エラーコンシールメント方法を選択しエラーコンシール
   メント処理を行うエラーコンシールメント処理部と、 を有することを特徴とする動画像復号装置。