JP2001069509A - 画像処理装置及びその方法 - Google Patents

Abstract

(57)【要約】 【課題】 ＭＰＥＧ４符号化方式において、シェイプデ
ータの符号化に用いられる算術符号化はエラーに対する
耐性に乏しいため、シェイプ符号の伝送過程において何
らかのエラーが発生してしまうと、正確な形状情報を再
生することが困難となり、正常なビデオオブジェクトの
再生ができなくなってしまう。 【解決手段】 セレクタ１０６，１０９においては、注
目マクロブロックが矩形領域内部であり、かつ該矩形領
域内部の任意形状領域外にある特定マクロブロックであ
るか否かが、形状情報に基づいて判別され、注目マクロ
ブロックが前記特定マクロブロックであると判別された
場合に、復号されたテクスチャデータに代えてマーカ発
生器１０７，１０８で生成された特定のマーカコードを
出力する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は画像処理装置及びそ
の方法に関し、例えば動画像の符号化及び復号を行なう
画像処理装置及びその方法に関する。

【０００２】

【従来の技術】現在、ＩＳＯ／ＩＥＣ１４４９６(MPEG
phase4)では、次世代動画像符号化方式（以下、単にＭ
ＰＥＧ４と称する）の検討が行われている。ＭＰＥＧ４
においては、ビデオオブジェクトという概念を導入し
て、動画像を構成するに際し、複数のオブジェクトを重
ねあわせて合成することにより符号化効率を向上し、ま
た、各オブジェクトの再利用をも可能にしている。

【０００３】ＭＰＥＧ４による符号化及び復号の概要
を、図４および図５を参照して説明する。

【０００４】図４は、ＭＰＥＧ４による符号化器の概要
構成を示す図である。４０１は、動画像のディジタルビ
デオソースである。４０２はビデオオブジェクト弁別器
であり、動画像中に含まれる各種オブジェクト（たとえ
ば、人物、車、背景など）を弁別する。４０３〜４０５
はビデオオブジェクトエンコーダであり、弁別された各
々のビデオオブジェクト（ＶＯ）を個別に符号化する。
尚、このＶＯエンコーダの総数は特定されない。４０６
は多重化器であり、各ＶＯエンコーダの出力を多重化
し、１本のビットストリーム４０７に統合する。

【０００５】図５に、ＭＰＥＧ４による復号器の概要構
成を示す。伝送されてきたビットストリーム５０１は、
逆多重化器５０２により、それぞれのＶＯに対応する符
号に分離される。各符号は、まず、５０３〜５０５のＶ
Ｏデコーダにより復号処理される。その後、５０６の合
成器により合成（重ねあわせ処理）が行われ、ビデオシ
ーケンスが完成する。

【０００６】ここでＭＰＥＧ４の特徴について、図６を
参照して説明する。ここではビデオオブジェクトと、テ
クスチャおよび形状符号化との関係について説明する。

【０００７】着目されるビデオオブジェクトは、任意の
手法によって領域が抽出される。その中で、対象部分と
その他に分離されるが、ここでは具体的な分離方法につ
いては特に言及しない。図６において、６０１は元の動
画像の１フレーム、６０２は分離されたビデオオブジェ
クト、６０３は背景画像、のそれぞれの概念を示す。

【０００８】６０４及び６０５に、ビデオオブジェクト
の構成例を示す。ビデオオブジェクトは必ずしも矩形領
域全体とは限らないため、ＭＰＥＧ４ではビデオオブジ
ェクトに外接する矩形を最低の単位として符号化が行わ
れる。６０４における黒枠が外接矩形を示す。尚、この
矩形は必ずしもビデオオブジェクトに外接している必要
はなく、より大きな矩形であっても問題ない。この矩形
内の着目領域は、テクスチャ（模様）データと形状（シ
ェイプ）データ（６０５）とに分けて符号化される。従
って、任意形状の着目領域の外で、かつ矩形領域内にあ
る領域に対しては、テクスチャデータは伝送されず（実
際には全画素が白または黒い画像として符号化され
る）、シェイプデータとして着目領域外として伝送され
る。一般にシェイプデータは２値データとして扱われ、
例えば、１は着目領域、０は領域外を示す。

【０００９】以下、ＭＰＥＧ４におけるテクスチャデー
タの符号化方法について説明する。

【００１０】一般に、テクスチャの符号化としてはＤＣ
Ｔ（離散コサイン変換）が用いられるが、ＭＰＥＧ４に
おいても同様の変換符号化が用いられる。矩形領域内で
の処理単位はマクロブロックを呼ばれ、図７に示すよう
に、輝度（Ｙ），色差（Ｃｒ，Ｃｂ）信号に対しておの
おの１６×１６画素（ブロック７０１），８×８画素
（ブロック７０２，７０３）を基本として処理される。
そしてＤＣＴ係数を算出した後、量子化及びエントロピ
ー符号化が行われる。エントロピー符号化としては、ハ
フマン符号化が主に用いられる。

【００１１】図８に、ＭＰＥＧ４におけるテクスチャ符
号化を行なう詳細構成例を示す。

【００１２】動画像の符号化においては、連続するフレ
ームの冗長性を省くために、動き補償技術が広く使用さ
れている。図８において、８０２は動き検出を行うため
に着目フレームより以前（あるいは以後）のフレームを
ストアするフレームバッファ、８０１は動きベクトル算
出部、８０３はＤＣＴ演算部、８０４は量子化部であ
る。また、８０５はＤＰＣＭ符号化部、８０６は２次元
→１次元のスキャンを行なうスキャン部、８０７はラン
レングス算出部、８０８はハフマン符号化部である。

【００１３】ここで図９に、ＤＣＴ演算部８０３におけ
る出力例を示す。尚、通常、ＤＣＴ演算部８０３におい
ては８×８画素単位で処理が行なわれる。図９に示すよ
うに、ＤＣＴ演算による出力は、ＤＣ成分９０１および
残りのＡＣ成分９０２に分離される。ＤＣＴ演算部８０
３から出力されるＤＣ成分はＤＰＣＭ(DifferentialPul
se Code Modulation)の後にハフマン符号化され、ＡＣ
成分は２次元（ジグザグ）スキャン，ゼロレングス算
出，ハフマン符号化されることにより、テクスチャ符号
が生成される。

【００１４】次に、ＭＰＥＧ４におけるシェイプデータ
の符号化方法について説明する。

【００１５】図１０に、ＭＰＥＧ４におけるシェイプデ
ータの符号化を行なう詳細構成例を示す。図１０におい
て、１００２は動き検出を行うために着目フレームより
以前（あるいは以後）のフレームをストアするフレーム
バッファ、１００１は動きベクトル算出部、１００３は
算術符号化部である。シェイプデータはテクスチャ符号
化と同様に、マクロブロック単位により動き検出が行わ
れた後、算術符号化が行われる。ことにより、シェイプ
符号が生成される。尚、動きベクトル算出部１００１に
おいては、テクスチャと同じ動きベクトルを採用するこ
とができるため、シェイプデータとして独立した動き検
出を行う必要はない。

【００１６】以上説明したように、ＭＰＥＧ４の符号化
においては、テクスチャデータの符号化とシェイプデー
タの符号化とがそれぞれ行われる。従って、ビデオオブ
ジェクト全体としての符号化は、図１１に示す構成によ
って実現される。即ち、１つのビデオオブジェクトは、
そのテクスチャ情報とシェイプ情報とがそれぞれテクス
チャエンコーダ１１０１及びシェイプエンコーダ１１０
２において別々に符号化された後、多重化部１１０３に
おいて多重化されることにより、ビットストリームが形
成される。

【００１７】

【発明が解決しようとする課題】しかしながら、上述し
たシェイプデータの符号化及び復号の際に用いられる算
術符号化においては、一般にエラーに対する耐性に乏し
い。従って、シェイプ符号の伝送過程において何らかの
伝送エラーが発生してしまうと、正確な形状情報を再生
することが困難となってしまう。従って、正常なビデオ
オブジェクトの再生ができなくなってしまうという問題
があった。

【００１８】本発明は上記問題を解決するためになされ
たものであり、シェイプ符号の伝送時にエラーが発生し
た場合でも、正確なビデオオブジェクトの再生を可能と
する画像処理装置及びその方法を提供することを目的と
する。

【００１９】

【課題を解決するための手段】上記目的を達成するため
の一手段として、本発明の画像処理装置は以下の構成を
備える。

【００２０】即ち、ビデオ画像の任意の矩形領域内部に
おいて抽出された任意形状領域のテクスチャデータ及び
形状情報をそれぞれ符号化するテクスチャ符号化手段及
び形状符号化手段を備える画像処理装置であって、特定
のマーカコードを発生するマーカ発生手段と、注目マク
ロブロックが前記矩形領域内部であり、かつ、前記任意
形状領域外の領域内にある特定マクロブロックであるか
否かを判別する判別手段と、前記判別手段において注目
マクロブロックが前記特定マクロブロックであると判別
された場合に、前記テクスチャデータとして前記マーカ
コードを出力するマーカ付与手段と、を有することを特
徴とする。

【００２１】また、ビデオ画像の任意の矩形領域内部に
おいて抽出された任意形状領域のテクスチャ符号データ
及び形状符号データをそれぞれ復号するテクスチャ復号
手段及び形状復号手段を備える画像処理装置であって、
テクスチャ符号データからマーカコードを検出するマー
カ検出手段と、形状符号データにおいて発生したエラー
を検出するエラー検出手段と、前記エラーが検出され、
かつ、前記マーカコードが検出された場合に、前記形状
復号手段において復号された形状データを変更する変更
手段と、を有することを特徴とする。

【００２２】

【発明の実施の形態】以下、本発明に係る一実施形態に
ついて、図面を参照して詳細に説明する。

【００２３】＜第１実施形態＞図１に、本実施形態にお
けるビデオオブジェクト符号化装置のブロック構成を示
す。同図においては、ビデオオブジェクトから分離され
たテクスチャデータとシェイプデータをそれぞれ入力し
て符号化し、テクスチャ符号及びシェイプ符号を出力す
る。

【００２４】図１に示す構成において、１０２は動き検
出を行うために着目フレームより以前（あるいは以後）
のフレームをストアするフレームバッファ、１０１は動
きベクトル算出部、１０３はＤＣＴ演算部、１０４は量
子化部であり、これらは上述した図８に示す８０１〜８
０４と同様に、テクスチャ符号化を行なうために動作す
る。

【００２５】また、１１４は動き検出を行うために着目
フレームより以前（あるいは以後）のフレームをストア
するフレームバッファ、１１３は動きベクトル算出部で
あり、これらは上述した図１０に示す１００２，１００
１と同様に、シェイプ符号化を行なうために動作する。

【００２６】以下、本実施形態における特徴的な構成に
ついて説明する。

【００２７】１０７はＤＣマーカ発生器であり、特定の
ＤＣ係数のパターンを発生させる。１０８はＡＣマーカ
発生器であり、ＤＣマーカ発生器１０７と同様に、特定
のＡＣ係数のパターンを発生させる。本実施形態におい
ては、この特定パターンをマーカコードとして定義し、
オブジェクト外部についてはテクスチャデータに代えて
このマーカコードを符号化することを特徴とする。

【００２８】１０６及び１０９はセレクタであり、テク
スチャデータを符号化する際に、対応するシェイプデー
タに基づき、実際のテクスチャデータを符号化するの
か、あるいはマーカを符号化するのかを切り替える。即
ち、符号化対象のテクスチャデータが、シェイプデータ
によって形状外であると判断された場合には、セレクタ
１０６及び１０９をマーカ側に切り替えることにより、
マーカコードが挿入される。尚、本実施形態において
は、注目マクロロブロックのブロックタイプがIntra、
即ちフレーム内符号化を行なうＩフレームである場合
に、形状外テクスチャデータに代えてマーカコードを挿
入する。

【００２９】挿入されたマーカコードは通常のテクスチ
ャデータと同様に、ＤＣマーカはＤＰＣＭの後にハフマ
ン符号化され、また、ＡＣマーカは１次スキャン、ラン
レングス演算の後にハフマン符号化される。

【００３０】セレクタ１０６及び１０９の出力は、シェ
イプデータに基づいて制御される。即ち、矩形内である
オブジェクト内部については通常のテクスチャデータを
選択し、反対にオブジェクト外部についてはマーカコー
ドを選択して出力する。

【００３１】図２は、本実施形態においてマーカコード
が埋め込まれたマクロブロック例を示す図である。

【００３２】ここで、一般に動画像を符号化する際に、
フレーム間の動き補償を行なわないマクロブロック、即
ちフレーム内符号化を行なうＩフレームのマクロブロッ
クについては、ＡＣ成分が存在する画像はＤＣ係数が０
にはならない。しかしながら本実施形態においては図２
に示されるように、ＤＣ係数が０となっており、これが
即ちＤＣマーカである。

【００３３】また、図２に示されるように２つ以上のＡ
Ｃ成分を同じ値とし、また、マクロブロック内の各ブロ
ックのＡＣ成分を同じ値とすることにより、このマクロ
ブロックはＡＣマーカを埋め込んだマクロブロックであ
ると判別することができる。

【００３４】尚、図２に示す例はあくまでもマーカコー
ドの一例に過ぎず、本発明のマーカコードはこの例に限
定されるものではない。

【００３５】尚、本実施形態において、マーカコードが
挿入されたマクロブロックはビデオオブジェクト外のみ
に配置されるものであるため、該マクロブロックを復号
して得られる実際のビデオオブジェクトに対して、何ら
影響を与えるものではない。

【００３６】また、本実施形態のマーカは擬似的なテク
スチャデータとして符号化されるため、特に該マーカコ
ードを送信するためにビットストリームのフォーマット
を変更する必要もない。

【００３７】以上説明したように本実施形態によれば、
矩形領域内であり、かつ任意形状のオブジェクト外領域
であるテクスチャデータとして、特定のマーカコードを
挿入することができる。

【００３８】＜第２実施形態＞以下、本発明に係る第２
実施形態について説明する。

【００３９】図３に、第２実施形態におけるビデオオブ
ジェクト復号装置のブロック構成を示す。第２実施形態
の復号装置は、上述した第１実施形態で示したビデオオ
ブジェクト符号化装置による符号化データを復号するも
のである。

【００４０】同図において、３０１はテクスチャ符号用
ハフマンデコーダ、３０２は１次元→２次元への逆スキ
ャン部、３０３は逆量子化部、３０４は逆ＤＣＴ部、３
０５は動き補償部であり、入力されたテクスチャ符号は
これら３０１〜３０５の各部を経ることにより、テクス
チャデータとして復号される。尚、３０６はテクスチャ
の動き補償の際に必要となるバッファメモリである。以
上の構成によるテクスチャ復号過程は、通常の復号処理
と同様である。

【００４１】以下、第２実施形態における特徴的な構成
について説明する。

【００４２】３０７はマーカ判別器であり、図１に示し
た符号化装置によって埋め込まれたマーカコードを検出
する。尚、第２実施形態においては、注目マクロロブロ
ックがＩフレーム、即ちフレーム内符号化されていた場
合に、該マクロブロックに対してマーカコードの検出を
実行する。ここで、マーカコードが検出されたマクロブ
ロックについては、テクスチャが存在しないものと判断
される。従って、該マクロブロックのテクスチャデータ
を任意の係数（たとえば０）で埋めてしまっても構わな
いが、該マクロブロックは最終的にシェイプデータによ
ってマスクされてしまうため、そのまま以降のデコード
プロセスを実行し、ノイズ画像を生成したとしても、実
用上問題ない。

【００４３】一方、シェイプ符号については、算術復号
部３０８において算術復号処理が施された後、動き補償
部３０９にて動き補償が行われる。尚、３１０はシェイ
プデータの動き補償の際に必要となるバッファメモリで
ある。セレクタ３１２においては、通常は該動き補償後
のシェイプデータがそのまま選択されて、シェイプデー
タとして復号される。

【００４４】３１１は、伝送されてきたシェイプ符号に
エラーがあるか否か検出するエラー検出部である。第２
実施形態においては、ここで何らかのエラーが検出され
た場合に、そのマクロブロックのシェイプデータは失わ
れるものの、これをマーカブロックによって補間可能と
することを特徴とする。以下、第２実施形態におけるシ
ェイプデータの補間処理について詳細に説明する。

【００４５】シェイプエラー検出部３１１において、シ
ェイプ符号に何らかのエラーが検出された場合、マーカ
判別器３０７においてマーカコードが検出されていれ
ば、該マクロブロックはオブジェクト外であり、即ちビ
デオ合成した際に例えば表示されないと判断できる。従
ってこの場合、領域外マクロブロックであることを示す
ように、シェイプ変更器３１２においてシェイプデータ
の値を置き換える。

【００４６】一方、シェイプ符号に何らかのエラーが検
出されたものの、マーカ判別器３０７においてマーカコ
ードが検出されていなければ、該マクロブロックは実質
的なテクスチャ情報を示すものであるため、オブジェク
ト内であると判断される。従ってこの場合、エラーが発
生した以降のマクロブロック内の画像データが全て表示
されるように、シェイプ変更器３１２においてシェイプ
データの値を置き換える。

【００４７】このように、シェイプ変更器３１２におい
ては、シェイプエラー発生時のみにシェイプデータを変
更する。もちろん、シェイプ符号にエラーが存在しない
場合にはシェイプデータを変更することなく、動き補償
部３０９から出力されたシェイプデータがそのまま出力
されることは言うまでもない。

【００４８】以上説明したように第２実施形態によれ
ば、シェイプ符号にエラーが生じた場合にテクスチャ内
に埋め込まれたマーカコードを判定することにより、シ
ェイプデータを確実に復号することが可能となる。

【００４９】尚、上述した各実施形態においては、シェ
イプデータにおけるエラー発生時の補間を行なうため
に、マーカコードを使用する例について説明した。しか
しながら本発明はマーカコードの使用目的をこの例に限
定するものではなく、例えば、画像付帯情報や日時情報
等の他の情報を、マーカコードとして挿入するこも可能
である。

【００５０】また、マーカコード挿入のオン／オフを、
符号化対象ビデオオブジェクトの各マクロブロック単位
でのシェイプデータの重要性に応じて、あるいは、伝送
路のエラー発生頻度に応じて切り替えることも可能であ
る。

【００５１】

【他の実施形態】なお、本発明は、複数の機器（例えば
ホストコンピュータ、インタフェイス機器、リーダ、プ
リンタなど）から構成されるシステムに適用しても、一
つの機器からなる装置（例えば、複写機、ファクシミリ
装置など）に適用してもよい。

【００５２】また、本発明の目的は、前述した実施形態
の機能を実現するソフトウェアのプログラムコードを記
録した記憶媒体（または記録媒体）を、システムあるい
は装置に供給し、そのシステムあるいは装置のコンピュ
ータ（またはCPUやMPU）が記憶媒体に格納されたプログ
ラムコードを読み出し実行することによっても、達成さ
れることは言うまでもない。この場合、記憶媒体から読
み出されたプログラムコード自体が前述した実施形態の
機能を実現することになり、そのプログラムコードを記
憶した記憶媒体は本発明を構成することになる。また、
コンピュータが読み出したプログラムコードを実行する
ことにより、前述した実施形態の機能が実現されるだけ
でなく、そのプログラムコードの指示に基づき、コンピ
ュータ上で稼働しているオペレーティングシステム(OS)
などが実際の処理の一部または全部を行い、その処理に
よって前述した実施形態の機能が実現される場合も含ま
れることは言うまでもない。

【００５３】さらに、記憶媒体から読み出されたプログ
ラムコードが、コンピュータに挿入された機能拡張カー
ドやコンピュータに接続された機能拡張ユニットに備わ
るメモリに書込まれた後、そのプログラムコードの指示
に基づき、その機能拡張カードや機能拡張ユニットに備
わるCPUなどが実際の処理の一部または全部を行い、そ
の処理によって前述した実施形態の機能が実現される場
合も含まれることは言うまでもない。

【００５４】

【発明の効果】以上説明したように本発明によれば、シ
ェイプ符号の伝送時にエラーが発生した場合でも、正確
なシェイプ情報を復元することによって、正確なビデオ
オブジェクトの再生が可能となる。

【図面の簡単な説明】

【図１】本発明に係る一実施形態であるビデオオブジェ
クト符号化装置の構成を示すブロック図、

【図２】本実施形態においてマーカコードが付与された
マクロブロックを示す図、

【図３】第２実施形態であるビデオオブジェクト復号装
置の構成を示すブロック図、

【図４】従来の動画像符号化装置の構成を示すブロック
図、

【図５】従来の動画像復号装置の構成を示すブロック
図、

【図６】ビデオオブジェクトの抽出例を示す図、

【図７】マクロブロックの構成を示す図、

【図８】従来のテクスチャ符号化を行なう構成を示すブ
ロック図、

【図９】ＤＣＴ係数を示す図、

【図１０】従来のシェイプ符号化を行なう構成を示すブ
ロック図、

【図１１】従来のビデオオブジェクト符号化器の構成を
示す図、である。

【符号の説明】

１０１ 動き検出部 １０２ ＶＯテクスチャバッファ １０３ ＤＣＴ演算器 １０４ 量子化器 １０５ ＤＰＣＭ演算器 １０６ セレクタ １０７ ＤＣマーカ発生器 １０８ ＡＣマーカ発生器 １０９ セレクタ １１０ ２次元スキャン器 １１１ ランレングス演算器 １１２ ハフマン符号器 １１３ 動き検出器 １１４ ＶＯシェイプバッファ １１５ 算術演算器 ３０１ ハフマンデコーダ ３０２ 逆スキャン器 ３０３ 逆量子化器 ３０４ 逆ＤＣＴ演算器 ３０５ テクスチャ用動き補償器 ３０６ ＶＯテクスチャバッファ ３０７ マーカ判別器 ３０８ 算術復号器 ３０９ 動き補償器 ３１０ ＶＯシェイプバッファ ３１１ シェイプエラー検出部 ３１２ シェイプ変更器

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5B057 CA12 CA16 CB12 CB16 CB18 CC01 CG02 CG05 CG06 CG07 CH18 DA08 DA17 5C059 KK01 LA00 LB18 MA23 MB14 MB16 MC33 ME02 ME05 ME11 NN01 PP05 RC00 RF00 RF01 UA02 UA05 UA31 5J064 AA02 BA08 BA09 BA10 BA13 BA16 BC02 BC16 BC25 BD03

Claims (21)

【特許請求の範囲】
1. 【請求項１】 ビデオ画像の任意の矩形領域内部におい
   て抽出された任意形状領域のテクスチャデータ及び形状
   情報をそれぞれ符号化するテクスチャ符号化手段及び形
   状符号化手段を備える画像処理装置であって、 特定のマーカコードを発生するマーカ発生手段と、 注目マクロブロックが前記矩形領域内部であり、かつ、
   前記任意形状領域外の領域内にある特定マクロブロック
   であるか否かを判別する判別手段と、 前記判別手段において注目マクロブロックが前記特定マ
   クロブロックであると判別された場合に、前記テクスチ
   ャデータとして前記マーカコードを出力するマーカ付与
   手段と、を有することを特徴とする画像処理装置。
2. 【請求項２】 前記マーカ発生手段は、前記任意形状領
   域のテクスチャデータの符号化によって生成されない値
   を、前記マーカコードとして発生することを特徴とする
   請求項１記載の画像処理装置。
3. 【請求項３】前記判別手段は、前記注目マクロブロック
   の形状情報に基づいて、前記注目マクロブロックが特定
   マクロブロックであるか否かを判別することを特徴とす
   る請求項１記載の画像処理装置。
4. 【請求項４】 前記形状符号化手段は、前記任意形状領
   域の形状情報を算術符号化することを特徴とする請求項
   １記載の画像処理装置。
5. 【請求項５】 前記テクスチャ符号化手段は、 前記テクスチャデータに対して離散コサイン変換を施す
   ＤＣＴ手段と、 前記離散コサイン変換後のテクスチャデータに対して量
   子化を施す量子化手段と、 前記量子化後のテクスチャデータに対してエントロピ符
   号化を施す符号化手段と、を備え、 前記マーカ付与手段は、前記量子化後のテクスチャデー
   タに対して前記マーカコードを出力することを特徴とす
   る請求項１記載の画像処理装置。
6. 【請求項６】 前記マーカ付与手段は、フレーム内符号
   化を行なうマクロブロックに対して、ＤＣＴ係数のＤＣ
   成分を０として出力することを特徴とする請求項５記載
   の画像処理装置。
7. 【請求項７】 前記マーカ付与手段は、マクロブロック
   内の各ブロックのＡＣ成分の値を同一として出力するこ
   とを特徴とする請求項５記載の画像処理装置。
8. 【請求項８】 前記テクスチャ符号化手段及び前記形状
   符号化手段は、動き補償を行なうことを特徴とする請求
   項１乃至７のいずれかに記載の画像処理装置。
9. 【請求項９】 更に、前記テクスチャ符号化手段及び形
   状符号化手段において符号化された符号データを多重化
   する多重化手段と、 該多重化されたデータを他装置へ伝送する伝送手段と、
   を備えることを特徴とする請求項１乃至８のいずれかに
   記載の画像処理装置。
10. 【請求項１０】 前記マーカ付与手段は、前記マーカコ
    ードの出力頻度を前記伝送手段におけるエラー発生頻度
    に応じて決定することを特徴とする請求項９記載の画像
    処理装置。
11. 【請求項１１】 ビデオ画像の任意の矩形領域内部にお
    いて抽出された任意形状領域のテクスチャ符号データ及
    び形状符号データをそれぞれ復号するテクスチャ復号手
    段及び形状復号手段を備える画像処理装置であって、 テクスチャ符号データからマーカコードを検出するマー
    カ検出手段と、 形状符号データにおいて発生したエラーを検出するエラ
    ー検出手段と、 前記エラーが検出され、かつ、前記マーカコードが検出
    された場合に、前記形状復号手段において復号された形
    状データを変更する変更手段と、を有することを特徴と
    する画像処理装置。
12. 【請求項１２】 前記変更手段は、前記エラーが検出さ
    れ、かつ、前記マーカコードが検出された場合に、前記
    形状データが前記任意形状領域外となるように変更する
    ことを特徴とする請求項１１記載の画像処理装置。
13. 【請求項１３】 前記変更手段は、前記エラーが検出さ
    れ、しかしながら前記マーカコードが検出されなかった
    場合に、該エラー以降の形状データが全て出力されるよ
    うに変更することを特徴とする請求項１１記載の画像処
    理装置。
14. 【請求項１４】 前記テクスチャ復号手段は、 前記テクスチャ符号データに対してエントロピ復号処理
    を施す復号手段と、 前記エントロピ復号されたテクスチャデータに対して逆
    量子化を施す逆量子化手段と、 前記逆量子化後のテクスチャデータに対して逆離散コサ
    イン変換を施すＩＤＣＴ手段と、を備え、 前記マーカ検出手段は、前記エントロピ復号後のテクス
    チャデータから前記マーカコードを検出することを特徴
    とする請求項１１記載の画像処理装置。
15. 【請求項１５】 前記マーカ検出手段は、前記テクスチ
    ャデータのマクロブロックがフレーム内符号化されてい
    た場合に、該マクロブロックからマーカコードを検出す
    ることを特徴とする請求項１４記載の画像処理装置。
16. 【請求項１６】 更に、前記テクスチャ復号手段及び形
    状復号手段において復号されたデータを合成して前記任
    意形状領域のビデオ画像を再生する再生手段を有するこ
    とを特徴とする請求項１１記載の画像処理装置。
17. 【請求項１７】 更に、前記テクスチャ符号データと形
    状符号データの多重化データを他装置から受信する受信
    手段と、 前記多重化データからテクスチャ符号データ及び形状符
    号データを分離する分離手段と、を備えることを特徴と
    する請求項１１乃至１６のいずれかに記載の画像処理装
    置。
18. 【請求項１８】 ビデオ画像の任意の矩形領域内部にお
    いて抽出された任意形状領域のテクスチャデータ及び形
    状情報をそれぞれ符号化する画像処理方法であって、 特定のマーカコードを発生するマーカ発生工程と、 注目マクロブロックが前記矩形領域内部であり、かつ、
    前記任意形状領域外の領域内にある特定マクロブロック
    であるか否かを判別する判別工程と、 前記判別手段において注目マクロブロックが前記特定マ
    クロブロックであると判別された場合に、前記テクスチ
    ャデータとして前記マーカコードを出力するマーカ付与
    工程と、を有することを特徴とする画像処理方法。
19. 【請求項１９】 ビデオ画像の任意の矩形領域内部にお
    いて抽出された任意形状領域のテクスチャ符号データ及
    び形状符号データをそれぞれ復号する画像処理方法であ
    って、 テクスチャ符号データからマーカコードを検出するマー
    カ検出工程と、 形状符号データにおいて発生したエラーを検出するエラ
    ー検出工程と、 前記エラーが検出され、かつ、前記マーカコードが検出
    された場合に、前記形状復号手段において復号された形
    状データを変更する変更工程と、を有することを特徴と
    する画像処理方法。
20. 【請求項２０】 ビデオ画像の任意の矩形領域内部にお
    いて抽出された任意形状領域のテクスチャデータ及び形
    状情報をそれぞれ符号化する画像処理のプログラムコー
    ドが記録された記録媒体であって、該プログラムコード
    は少なくとも、 特定のマーカコードを発生するマーカ発生工程のコード
    と、 注目マクロブロックが前記矩形領域内部であり、かつ、
    前記任意形状領域外の領域内にある特定マクロブロック
    であるか否かを判別する判別工程のコードと、 前記判別手段において注目マクロブロックが前記特定マ
    クロブロックであると判別された場合に、前記テクスチ
    ャデータとして前記マーカコードを出力するマーカ付与
    工程のコードと、を有することを特徴とする記録媒体。
21. 【請求項２１】 ビデオ画像の任意の矩形領域内部にお
    いて抽出された任意形状領域のテクスチャ符号データ及
    び形状符号データをそれぞれ復号する画像処理のプログ
    ラムコードが記録された記録媒体であって、該プログラ
    ムコードは少なくとも、 テクスチャ符号データからマーカコードを検出するマー
    カ検出工程のコードと、 形状符号データにおいて発生したエラーを検出するエラ
    ー検出工程のコードと、 前記エラーが検出され、かつ、前記マーカコードが検出
    された場合に、前記形状復号手段において復号された形
    状データを変更する変更工程のコードと、を有すること
    を特徴とする記録媒体。