JP2002044657A - 画像復号化方法、画像復号化装置および画像復号化プログラム記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 画素値を含んでいない形状値のみのストリー
ムを復号化した場合に、不自然な画素値が表示されない
ようにする。 【解決手段】 復号化装置Dec１はビデオストリームStr
の復号化を行う。但し、ビデオストリームStrが形状の
みを含んでいる場合はオブジェクト非表示情報Bolyで
「非表示」を指示する。そうでなければオブジェクト非
表示情報Bolyで「表示」を指示する。スイッチSW０はオ
ブジェクト非表示情報Bolyが「非表示」を指示する場合
は、形状値生成器GEN１からのカラーを表示しない形状
値、即ち合成の際に当該画素が透明であり他の画像がそ
のまま表示されるという形状値Avalを選択する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像復号化方法、
画像復号化装置および画像復号化プログラム記録媒体に
関するものであり、特に、複数の画像（オブジェクト）
からなるストリームをそれぞれ復号化し、復号化した画
像を合成して表示する画像復号化システムにおいて、各
画像のストリームを復号化するために使用される画像復
号化方法、画像復号化装置および画像復号化プログラム
記録媒体の改良を図ったものに関する。

【０００２】

【従来の技術】近年、音声，画像，その他の画素値を統
合的に扱うマルチメディア時代を迎え、従来からの情報
メディア、つまり新聞，雑誌，テレビ，ラジオ，電話等
の情報を人に伝達する手段がマルチメディアの対象とし
て取り上げられるようになってきた。一般に、マルチメ
ディアとは、文字だけでなく、図形、音声、特に画像等
を同時に関連づけて表わすことをいうが、上記従来の情
報メディアをマルチメディアの対象とするには、その情
報をディジタル形式にして表すことが必須条件となる。

【０００３】ところが、上記各情報メディアの持つ情報
量をディジタル情報量として見積もってみると、文字の
場合１文字当たりの情報量は１〜２バイトであるのに対
し、音声の場合１秒当たり６４kｂｉｔ（電話品質）、
さらに動画については１秒当たり１００Mbｉｔ（現行テ
レビ受信品質）以上の情報量が必要となり、上記情報メ
ディアの膨大な情報をディジタル形式でそのまま扱うこ
とは現実的ではない。例えば、テレビ電話は、６４kbps
〜１．５Mbpsの伝送速度を持つサービス総合ディジタル
網（ＩＳＤＮ:Integrated Services Digital Network）
によってすでに実用化されているが、テレビ・カメラの
映像をそのままＩＳＤＮで送ることは不可能である。

【０００４】そこで、必要となってくるのが情報の圧縮
技術であり、例えば、テレビ電話の場合、ＩＴＵ−Ｔ
（国際電気通信連合 電気通信標準化部門）で国際標準
化されたＨ．２６１やＨ．２６３規格の動画圧縮技術が
用いられている。また、ＭＰＥＧ１規格の情報圧縮技術
によると、通常の音楽用ＣＤ（コンパクト・ディスク）
に音声情報とともに画像情報を収録することも可能とな
る。

【０００５】ここで、ＭＰＥＧ（Moving Picture Exper
ts Group)とは、動画像の画素値圧縮の国際規格であ
り、ＭＰＥＧ１は、動画画素値を１．５Mbpsまで、つま
りテレビジョン信号の情報を約１００分の１にまで圧縮
する規格である。また、ＭＰＥＧ１規格の対象とする伝
送速度が主として約１．５Mbpsに制限されていることか
ら、さらなる高画質化の要求をみたすべく規格化された
ＭＰＥＧ２では、その制限が緩和され、動画画素値が２
〜１５Mbpsに圧縮される。

【０００６】さらに現状では、ＭＰＥＧ１，ＭＰＥＧ２
と標準化を進めてきた作業グループ（ISO/IEC JTC１/SC
２９/WG１１） によって、物体単位で符号化・操作を可
能とし、マルチメディア時代に必要な新しい機能を実現
するＭＰＥＧ４の規格化がほぼ完了しつつある。ＭＰＥ
Ｇ４では、当初、低ビットレートの符号化方法の標準化
を目指してきたが、現在はインタレース画像や高ビット
レートの符号化も含む、より汎用的な符号化に拡張され
ている。ＭＰＥＧ４の特徴の１つに、複数の画像系列を
同時に符号化し伝送する仕組みがある。これは、複数の
画像によって１つの画像シーンを構成できるようにした
ものであり、前景と背景を別の画像系列にしてフレーム
周波数や画質・ビットレートを個別に変更することが可
能であり、複数の画像系列をマルチ画面のように水平も
しくは垂直方向に並べてユーザが所望の画像系列のみを
抽出したり拡大表示ができるようになった。背景はＭＰ
ＥＧ２と同様に画素値のみを符号化するのが一般的であ
るが、前景は物体（オブジェクト）の画素値を表す画素
値信号のみではなく、物体の形状を示す形状信号も同時
に符号化される。一般に、この前景の符号化は物体単位
の符号化として知られている。表示される画像は、この
復号化された各画像の合成画像である。

【０００７】図８はオブジェクト単位の画像合成の様子
を説明する図である。図８(a)は表示画像を構成する気
球の前景画像（以下、単に前景と称す）fv１の画素値、
図８(b)は図８(a)の前景fv１に対応する形状信号fm１の
形状値、図８(c)は表示画像を構成する人物の前景fv２
の画素値、図８(d)は図８(c) の前景fv２に対応する形
状信号fm２の形状値、図８(e)は背景画像（以下、単に
背景と称す）rvの画素値であり、図８(f)は図８(e)の背
景rvに図８(a)および図８(c)の前景fv１,fv２を合成し
た表示画像である。

【０００８】なお、図８(b)および図８(d)の形状信号の
画面において、画面内で黒く塗りつぶした部分は対応す
る画素値が存在する領域、即ち物体内部を表し、白い部
分は対応する画素値が存在しない領域、即ち物体外部を
表す。なお、画素値が存在する／存在しないという意味
で、画素値が有意である／有意でないという表現が用い
られることもある。

【０００９】図９は従来の画像復号化システムの構成を
示すブロック図である。図において、DeMuxは多重化ス
トリームStrMを分離するストリーム分離装置、Dec１，D
ec２，Dec３はストリーム分離装置DeMuxによって分離さ
れたそれぞれのビデオストリームStr１，Str２， Str３
を復号化する復号化装置、Comp１は復号化装置Dec１，D
ec２，Dec３によって復号化された復号画像Dout１，Dou
t２，Dout３を合成する画像合成装置、Dispはこの画像
合成装置Comp１によって合成された画像Vcomを表示する
表示装置、IFはユーザがオブジェクトを選択するための
オブジェクト選択装置、CPUはオブジェクト選択装置IF
の指示に応じて復号化装置Dec１，Dec２，Dec３を制御
する制御装置である。

【００１０】次に動作について説明する。多重化ストリ
ームStrMはストリーム分離装置DeMuxによって３つのオ
ブジェクトの画像に相当するビデオストリームStr１，
Str２， Str３に分離され、合わせてこれらの重なりの
順を示す重なり情報Odrが制御装置CPUに通知される。復
号化装置Dec１はビデオストリームStr１を復号化し、復
号画像Dout１を出力する。同様に、復号化装置Dec２，D
ec３はそれぞれビデオストリームStr２，Str３を復号化
し、復号画像Dout２，Dout３をそれぞれ出力する。画像
合成装置Comp１はこれら復号画像Dout１、Dout２および
Dout３を合成して合成済画像Vcomとし、表示装置Dispで
表示する。

【００１１】一方、オブジェクト単位符号化では、ユー
ザがオブジェクト単位で画像の表示／非表示の切り替え
を行うことができる。ユーザは、オブジェクト選択装置
IFで各オブジェクトの表示／非表示を選択し、オブジェ
クト選択装置IFはこの選択に応じたオブジェクト非表示
情報Dselを画像合成装置Comp１に通知し、画像合成装置
Comp１は表示すべきオブジェクトのみで画像を合成し表
示する。

【００１２】さて、物体の形状値を用いれば物体の内外
が判断できるので、図１０のように、ポインタPrを使っ
て画面内のボタンBnを選択する操作を実行する場合のよ
うに、ユーザが画面の特定の位置を指定し、その位置が
物体の内外のいずれであるかを情報として得ることも可
能である。すなわち、ユーザはオブジェクト選択装置IF
でポインタを移動し選択する等により指定した画素位置
を示すオブジェクト選択情報Pselを制御装置CPUに通知
し、制御装置CPUは各オブジェクトに対応する復号化装
置Dec１、Dec２およびDec３に対しそれぞれオブジェク
ト判定命令Q１、Q２およびQ３で 当該指定した位置が画
面内のボタン等のオブジェクトの内外のいずれであるか
を問い合わせる。復号化装置Dec１、Dec２およびDec３
はオブジェクト判定結果A１、A２およびA３によって前
記問い合わせた位置が物体の内外のいずれであるかを制
御装置CPUに報告し、制御装置CPUはオブジェクト判定結
果A１、A２およびA３をまとめてオブジェクト判定結果R
eqとしてユーザやアプリケーションに通知する。

【００１３】なお、図９の画像復号化システムのブロッ
ク図は３つの画像を合成して合成済画像Vcomを構成する
例を示したが、合成する画像数は３未満もしくは３以上
でも構わない。また、復号化装置は各ビデオストリーム
毎に１つずつ設ける例を示したが、時分割等により１つ
の画像復号化装置で複数のビデオストリームの復号化が
可能であれば、画像復号化装置の個数を適宜削減するこ
とも可能である。

【００１４】図１１は図９に示す従来の画像復号化シス
テムの画像復号化装置が有する復号化装置Decの構成を
示すブロック図である。図において、ビデオストリーム
Str、オブジェクト判定命令Q、オブジェクト判定結果A
および復号画像Doutはそれぞれ図９のビデオストリーム
Str１、Str２、Str３、オブジェクト判定命令Q１、Q
２、Q３、オブジェクト判定結果A１、A２、A３、復号画
像Dout１、Dout２、Dout３のいずれか１つに相当する。
また、DecUはビデオストリームStrを復号化する画像復
号ユニット、MEM１、MEM２、MEM３およびMEM４は復号画
像mem１、mem２、mem３およびmem４をそれぞれ記憶する
メモリである。

【００１５】次に動作について説明する。図１１におい
て、画像復号ユニットDecUはビデオストリームStrを復
号化し、復号化した画像である復号画像mem１、復号画
像mem２、復号画像mem３および復号画像mem４を、メモ
リMEM１、メモリMEM２、メモリMEM３およびメモリMEM４
に記憶する。この時、ビデオストリームStrが画面間符
号化されている場合には、メモリMEM１、メモリMEM２、
メモリMEM３およびメモリMEM４から復号画像mem１、復
号画像mem２、復号画像mem３および復号画像mem４を読
み出して動き補償時の参照画像として利用する。形状を
有する画像信号は、カラーを示す３成分（YUVもしくは
RGBなど）と形状値Aの合計４成分で構成されるため、メ
モリも４成分に対応するものを個別に記載しているが、
実際に実装する際にはこれらを１つのメモリにまとめて
もよい。

【００１６】図１１の例では、メモリMEM１、メモリMEM
２、メモリMEM３およびメモリMEM４はそれぞれ輝度画素
値Yimg、２つの色差画素値Uimg,Vimg、および形状値Aim
gを記憶している。メモリMEM４には形状値Aimgが記憶さ
れているため、図９の制御装置CPUからのオブジェクト
判定命令Qでポインタのポイント位置等の画素位置が指
定されると、メモリMEM４はその位置が物体の内外のい
ずれであるかを判定し、オブジェクト判定結果Aとして
これを出力する。メモリMEM１、メモリMEM２、メモリME
M３およびメモリMEM４に記憶された復号化画像は、表示
のタイミングで画素復号画像Yimg、画素復号画像Uimg、
画素復号画像Vimgおよび形状復号画像Aimgとして読み出
され、それぞれ画素復号画像Yout、Uout、Voutおよび形
状復号画像Aoutとなる。この画素復号画像Yout、Uout、
Voutおよび形状復号画像Aoutをまとめたものを復号画像
Doutとする。

【００１７】図１２は形状値が記憶されているメモリME
M４の内部構成を示すもので、図において、MEM４１は形
状信号を記憶する形状信号記憶用メモリ、CMPは図９の
オブジェクト選択装置IFで操作するポインタがボタン等
の物体の画像の内外のいずれをポイントしているかを比
較，判定するポイント位置比較手段である。

【００１８】次に動作について説明する。図１２におい
て、形状信号記憶用メモリMEM４１は図１１の復号ユニ
ットDecUにより復号された形状信号mem４をビットマッ
プとして記憶する。ポイント位置比較手段CMPは図１１
の制御装置CPUが発するオブジェクト判定命令Qによりこ
のオブジェクト判定命令Qとともに送られる，図９のオ
ブジェクト選択装置IFで操作するポインタのポイント位
置情報、を形状信号記憶用メモリMEM４１のアドレスに
変換し、そのアドレスに形状信号のビットマップが存在
するか否かを判定する等により、ポインタのポイント位
置がボタン等の物体の画像の内外のいずれに位置してい
るかを判定する。そしてその判定結果をオブジェクト判
定結果Aとして図９の制御装置CPUに回答する。

【００１９】さて、物体の形状値を用いて物体内外のい
ずれであるかを情報として得られることを説明したが、
この仕組みを利用し、形が変化するGUI(Graphic User I
nterface)操作可能なボタンとして形状値を使用するこ
とができる。これはいわゆるホットスポットと言われる
もので、例えば端末の画面上の或る場所（例えばボタン
状の画像とする）をクリックすることで、端末に特別な
処理を実行させる等の場合に、その或る場所を示す形状
信号を動画として送信することにより、ボタンの位置や
形状等を変化させることが可能となる。こうした目的に
おいては、画像として画素値と形状値の両方を備えたも
のだけでなく、形状値のみの画像も有効であるというこ
とで、ＭＰＥＧ４では形状値のみの符号化も利用可能と
なっている。

【００２０】例えば、図８(f)を背景とし、図８(b)およ
び図８(d) の形状値のみを符号化すれば、図８(f)にお
いてポインタで位置を指定することにより、その位置が
人物や気球の内外いずれに位置するかの内外判定を実現
できるので、この画像の内外判定のみを行うのであれ
ば、図８(a)や図８(c)、図８(e)の個別の画素値の符号
化は不要で、単に図８(f)の画素値のみを符号化すれば
良いため、符号化・復号化処理が簡単になり、場合によ
っては符号化すべき画素数の削減により圧縮率も向上す
る。

【００２１】以上の説明から、ＭＰＥＧ４でのカラー画
像（動画）のストリームには、形状が変化しない映像に
対してはＹＵＶ（カラー信号）のみ、オブジェクト単位
の符号化を行う場合はＹＵＶ＋Ａ（カラー信号に形状信
号を付加）、画像の内外判定等を行う場合はＡ（形状信
号）のみ、の３通りが存在することがわかる。

【００２２】なお、画像はＭＰＥＧ１で伝送し、これに
ＭＰＥＧ４の形状信号を付加することもある。また、Ｍ
ＰＥＧ４で伝送された形状信号にテクスチャを張り付け
ることで、ＭＰＥＧ４とＣＧ（コンピュータグラフィッ
クス）を組み合わせ、カラー画像を表示する場合もあ
る。

【００２３】図１３は、オブジェクトの画像に相当する
ビデオストリームStrのフォーマットの概略を示す図で
ある。図１３において、ＨＤはストリーム全体のヘッ
ダ、ＤＡ１，…，ＤＡＸはそれぞれ１画面分のデータ、
ＨＤ１，…，ＨＤＸはそれぞれ画面データＤＡ１，…，
ＤＡＸに対応するヘッダである。ストリーム全体のヘッ
ダＨＤは画像サイズ（画像の大きさがフレーム毎に変化
しない場合）や符号化方式（量子化の方法、データの並
び方に関する情報）に加え、符号化されている対象（上
述のＹＵＶ，ＹＵＶ＋Ａ，Ａ等）が何かを示す情報を符
号化して格納している。

【００２４】また、画面データＤＡ１，…，ＤＡＸに対
応するヘッダＨＤ１，…，ＨＤＸは、復号化に必要なパ
ラメータや、対応する画像データが何番目のフレーム
か、ＩフレームかＰフレームか、等の情報を符号化して
格納している。

【００２５】また、図１４は、オブジェクトの画像に相
当するビデオストリームStrを複数多重化した多重化ス
トリームStrMの構成を示す図である。図１４に示す例で
は、ビデオストリームStrは、１フレーム分ずつ時分割
多重され、重なり情報Odrを含むヘッダＭＨＤがビデオ
ストリームStrの間に配置されている。

【００２６】

【発明が解決しようとする課題】ところで、上述のよう
に、形状値のみを符号化することは有益ではあるが、画
素値を含んでいない形状値のみのストリームを受信した
場合にこれを復号化した場合の画素値がどのようになる
かは現時点のMPEG４規格では決められていない。形状値
のみのストリームというのは、本来、受信側では表示し
ないことを前提として作られるものであるが、これを受
信し復号化した際の対応をMPEG４規格が規定していない
以上、形状値のみのストリームは、画像通信を利用して
情報端末に種々のサービスを提供する等のアプリケーシ
ョン側での取り決めによって、非表示とすべきものであ
る。

【００２７】しかしながら、一般に開発コスト削減のた
めに、汎用的に作成された画像復号化装置が様々なアプ
リケーションで使用されることが多く、このような画像
復号化装置は伝送されてきた情報を必ず復号化し表示す
るように設計されるため、形状値のみのストリームを受
信した場合もこれを復号化してしまい、その復号化によ
って、予め予測できない何らかの画素値を表示してしま
い、画面を見ている人に違和感や不快感を与えることに
なる。

【００２８】この発明は、上記のような従来のものの問
題点に鑑みてなされたもので、形状値のみのストリーム
を受信した場合に予測し得ない画素の画面表示を行うの
を防止することができる画像復号化方法、画像復号化装
置および画像復号化プログラム記録媒体を提供すること
を目的とする。

【００２９】

【課題を解決するための手段】この課題を解決するため
に、本願の請求項１の発明に係る画像復号化方法は、画
像を構成する画素値を符号化した情報、または画像を構
成する画素値が有意であるか否かを示す形状値を符号化
した情報、の少なくとも一方を含むストリームを入力
し、該ストリームを復号化して得た、画素値、または形
状値、の少なくとも一方を出力する画像復号化方法にお
いて、前記ストリームが、画像を構成する画素値を符号
化した情報を含むか否かを判定し、当該ストリームが、
前記画素値を符号化した情報を含まない場合は、復号化
した画素値を、画像表示手段に表示しないようにしたも
のである。

【００３０】また、本願の請求項２の発明に係る画像復
号化方法は、請求項１記載の画像復号化方法において、
前記ストリームが、画像を構成する画素値を符号化した
情報を含まない場合は、前記復号化した形状値を、表示
されない形状値に変換して出力するようにしたものであ
る。

【００３１】また、本願の請求項３の発明に係る画像復
号化方法は、画像を構成する画素値を符号化した情報、
または画像を構成する画素値が有意であるか否かを示す
形状値を符号化した情報、の少なくとも一方を含むスト
リームを入力し、該ストリームを復号化して得た、画素
値、または形状値、の少なくとも一方を出力する画像復
号化方法において、前記ストリームが、画像を構成する
画素値を符号化した情報を含まない場合は、所定の値
を、復号化した画素値として出力するようにしたもので
ある。

【００３２】また、本願の請求項４の発明に係る画像復
号化方法は、請求項１記載の画像復号化方法において、
前記ストリームが画素値を符号化した情報を含まない場
合は、復号化した結果の表示を禁止する信号を、上記画
像表示手段に出力するようにしたものである。

【００３３】また、本願の請求項５の発明に係る画像復
号化方法は、請求項１記載の画像復号化方法において、
前記画像は、背景に対する前景を構成する物体の１つの
画像であるものとしたものである。

【００３４】また、本願の請求項６の発明に係る画像復
号化方法は、画像を構成する画素値を符号化した情報、
または画像を構成する画素値が有意であるか否かを示す
形状値を符号化した情報、の少なくとも一方を含むスト
リームを入力し、該ストリームを処理する画像復号化方
法において、前記ストリームが、画像を構成する画素値
を符号化した情報を含むか否かを判定し、当該ストリー
ムが、前記画素値を符号化した情報を含まない場合は、
該ストリームの復号化を行わないようにしたものであ
る。

【００３５】また、本願の請求項７の発明に係る画像復
号化装置は、画像を構成する画素値を符号化した情報、
または画像を構成する画素値が有意であるか否かを示す
形状値を符号化した情報、の少なくとも一方を含むスト
リームを入力とし、該ストリームを復号化して得た、画
素値、または形状値、の少なくとも一方を出力する画像
復号化手段と、前記ストリームが、画像を構成する画素
値を符号化した情報を含むか否かを判定し、当該ストリ
ームが、前記画素値を符号化した情報を含まない場合は
前記画像復号化手段の出力である画素値が表示されない
ようにする表示制御手段とを備えるようにしたものであ
る。

【００３６】また、本願の請求項８の発明に係る画像復
号化装置は、請求項７記載の画像復号化装置において、
前記画像は、背景に対する前景を構成する物体の１つの
画像としたものである。

【００３７】また、本願の請求項９の発明に係る画像復
号化プログラム記録媒体は、画像を構成する画素値を符
号化した情報、または画像を構成する画素値が有意であ
るか否かを示す形状値を符号化した情報、の少なくとも
一方を含むストリームを入力し、該ストリームを復号化
して得た、画素値、または形状値、の少なくとも一方を
出力する画像復号化方法を実行する画像復号化プログラ
ムを記録した画像復号化プログラム記録媒体において、
前記ストリームが、画像を構成する画素値を符号化した
情報を含むか否かを判定し、当該ストリームが、前記画
素値を符号化した情報を含まない場合は、復号化した画
素値を表示しない画像復号化方法を実行するプログラ
ム、を記録するようにしたものである。

【００３８】また、本願の請求項１０の発明に係る画像
復号化プログラム記録媒体は、請求項９記載の画像復号
化プログラム記録媒体において、前記画像は、背景に対
する前景を構成する物体の１つの画像としたものであ
る。

【００３９】

【発明の実施の形態】以下、本発明の実施の形態につい
て、図１ないし図６を用いて説明する。

【００４０】（実施の形態１）図１は本発明の実施の形
態１による画像復号化装置の構成を示すブロック図であ
る。図１において、図１１と同一符号は同一又は相当部
分である。の従来の画像復号化装置のブロック図と異な
るのは、形状値のみのストリームを受信した場合に画像
復号ユニットDecU１からオブジェクト非表示情報Bolyが
出力されること、形状値生成器GEN１およびスイッチSW
０が追加されたことである。それ以外の構成は図１１の
従来の画像復号化装置と同じであるため、説明を省略す
る。

【００４１】次に動作について説明する。画像復号ユニ
ットDecU１は、ビデオストリームStrの復号化を図１１
の画像復号ユニットDecUと同様の動作により行う。その
際、復号化すべき符号が予測符号の場合等、必要があれ
ばメモリMEM１，メモリMEM２，メモリMEM３，メモリMEM
４を参照する。そして、ビデオストリームStrがカラー
成分を含まず形状のみを含んでいる場合はオブジェクト
非表示情報Bolyとして「非表示」である旨の値を出力
し、そうでなければ「表示」である旨を出力する。

【００４２】このオブジェクト非表示情報Bolyは、画像
復号ユニットDecU１が図１３に示す本来の画像データＤ
Ａ１ないしＤＡＸをデコードする過程で、符号化された
対象の情報を含んでいるパケットヘッダＨＤをデコード
することに伴い画像復号ユニットDecU１の内部で生成さ
れるので、このオブジェクト非表示情報Bolyを出力する
のに画像復号ユニットDecU１は従来の画像復号ユニット
DecUに対し特段のハードウエアの追加を必要としない。

【００４３】形状値生成器GEN１は定数発生器からな
り、カラーを表示しない形状値、即ち、画像合成の際に
当該画素が透明であり他の画像がそのまま表示されると
いう形状値Avalを生成し常時出力している。スイッチSW
０は画像復号ユニットDecU１からのオブジェクト非表示
情報Bolyが「非表示」を示す場合は形状値生成器GEN１
からの形状値Avalを形状復号画像Aoutとして選択し、オ
ブジェクト非表示情報Bolyが「表示」を示す場合はメモ
リMEM４からの復号された形状復号画像Aimgを形状復号
画像Aoutとして選択する。

【００４４】この様にして、ビデオストリームStrがカ
ラー成分を含まず形状のみを含んでいる場合は、形状復
号画像Aoutとして画像復号ユニットDecU１からの不測の
画素値に代えて、非表示に相当する値が出力されること
になる。

【００４５】従って、図９の画像復号化システムの復号
化装置Decとして図１に示す本実施の形態１による画像
復号化装置を用いれば、画像合成を行う際に、形状のみ
のビデオストリームについてはこれを透明として表示さ
せることが可能となり、汎用の画像復号化装置に若干の
ハードウエアを付加するのみで、形状値のみの画像が伝
送されてきた時でも、復号化過程に依存する不自然なカ
ラー画素値を表示することなく、これを自動的に非表示
に切り替えることが可能な画像復号化装置を実現でき
る。

【００４６】（実施の形態２）図２は本発明の実施の形
態２による画像復号化装置を示すブロック図である。同
図において、図１１の従来の画像復号化装置のブロック
図、および図１の本発明の画像復号化装置におけるブロ
ック図と異なるのは、図１の画素値生成器GEN１および
スイッチSW０に代えて画素値生成器GEN２およびスイッ
チSW１，SW２，SW３が追加されたことである。それ以外
の機器は図１１の従来の画像復号化装置のブロック図の
動作と同じため、説明を省略する。

【００４７】実施の形態１では、形状のみの画像のスト
リームが入力された場合はその画像を表示しないものと
したが、形状のみの画像のストリームが入力された場合
に所定のカラー画素値を表示するものとし、クリエータ
（データ作成者）やデータ送信者が予測し得ない、不自
然なカラー画素値が表示されることを防ぐというアプロ
ーチも可能である。

【００４８】本実施の形態２は、このアプローチによる
もので、所定のカラー画素値として例えばグレー値等の
不自然でないカラー画素値を予め設定すれば、形状のみ
のビデオストリームは形状を有するグレー画像として表
示されることになり、ユーザに違和感を与えずに入力さ
れたストリームの形状を提示する手段として利用できる
ようにしている。

【００４９】図２において、画素値生成器GEN２は予め
設定可能な定数を発生する定数発生器からなり、上述の
グレー値等の所定の画素値Pvalを生成しており、常時こ
れを出力している。オブジェクト非表示情報Bolyが「非
表示」の場合にはスイッチSW１、SW２およびSW３は、画
素値生成器GEN２からの画素値Pvalを選択し、画素復号
画像Yout、UoutおよびVoutとして出力する。逆に、オブ
ジェクト非表示情報Bolyが「表示」の場合にはスイッチ
SW１、スイッチSW２およびスイッチSW３でメモリMEM
１、 MEM２およびMEM３から出力される，画像復号ユニ
ットDecU１により復号された，画素復号画像Yimg、Uimg
および画素復号画像Vimgを、画素復号画像Yout、画素復
号画像Uoutおよび画素復号画像Voutとして出力する。

【００５０】この様にして、ビデオストリームStrがカ
ラー成分を含まず形状のみを含んでいる場合は、形状復
号画像Aoutとして復号化装置Dec１からの不測の画素値
に代えて、グレー等の所定のカラー画像値が出力される
ことになる。

【００５１】従って、図９の画像復号化システムのブロ
ック図の復号化装置Decに代えて、図２のブロック構成
による画像復号化装置を用いれば、汎用の画像復号化装
置に画素生成器やスイッチ等の若干のハードウエアを付
加するだけで、形状値のみの画像が伝送されてきた時で
も、これを自動的に所定の色の画像表示に切り替えるこ
とができ、ポインタのポイント位置が物体の画像の内外
のいずれに位置しているかを判定する際の物体等の表示
も容易に実行できる画像復号化装置を実現できる。

【００５２】なお、形状のみの画像にCGのテクスチャを
貼り付ける場合には、画素値生成器GEN２で生成する画
素値Pvalとしてそのテクスチャの画素値を使用すること
もでき、この場合テクスチャが貼り付けられた復号画像
Doutを得ることができるので、テクスチャの貼り付けの
ための余分な演算が不要になる。

【００５３】以上の様にして、形状のみの画像のストリ
ームが入力された場合に、所定のカラー信号を表示する
ことができ、予め不自然でない画素値を設定しておくこ
とにより、形状のみの画像のストリームが入力された場
合であっても不測の画素値を表示することによる画質妨
害をなくすことができる。

【００５４】（実施の形態３）図３は本発明の実施の形
態３による画像復号化システムの構成を示すブロック図
である。本実施の形態３による画像復号化システムは、
図９の従来の画像復号化システムの復号化装置Dec１、
復号化装置Dec２および復号化装置Dec３を、復号画像情
報Dout１、Dout２およびDout３の他に、表示の有無を指
示するオブジェクト非表示情報Boly１、オブジェクト非
表示情報Boly２およびオブジェクト非表示情報Boly３を
出力する復号化装置DecA１、復号化装置DecA２および復
号化装置DecA３に置き換えたものである。

【００５５】実施の形態１では、形状のみの画像ストリ
ームを入力した場合に復号化装置の内部のみで処理をす
る方法について説明した。しかしながら、各画像を表示
するか否かを示すオブジェクト非表示情報Boly１、オブ
ジェクト非表示情報Boly２およびオブジェクト非表示情
報Boly３を参照して「非表示」を指示した場合にはその
オブジェクトを画像合成装置Comp２で表示しない仕組み
を画像合成装置に導入すれば、実施の形態１と同様の効
果を実現できる。

【００５６】図４は図３中の画像合成装置Comp２の構成
を示す図であり、図において、Comp２１は復号画像情報
Dout１、Dout２およびDout３を合成するビデオ合成器、
Odecは図３中のオブジェクト選択装置IFからのオブジェ
クト選択信号Dselをデコードするオブジェクト選択信号
デコーダ、SW２１,SW２２,SW２３はオブジェクト選択信
号デコーダOdecのデコード信号Odec１，Odec２，Odec３
およびオブジェクト非表示情報Boly１，Boly２，Boly３
に応じてオンあるいはオフするスイッチである。

【００５７】次に動作について説明する。図４におい
て、スイッチSW２１,SW２２,SW２３はそれぞれ図３中の
復号化装置DecA１, DecA２, DecA３が出力するオブジェ
クト非表示情報Boly１，Boly２，Boly３に応じて動作
し、オブジェクト非表示情報Boly１，Boly２，Boly３が
「表示」を示していればオン、「非表示」を示していれ
ばオフして、それぞれの復号化装置DecA１, DecA２, De
cA３のデコード出力Dout１, Dout２, Dout３のなかから
オブジェクト非表示情報が「非表示」となっているもの
はビデオ合成器Comp２１に入力しない。これにより、形
状のみの信号については画像合成されることはない。な
お、図３中のオブジェクト選択装置IFで表示させたいオ
ブジェクトを選択する場合も同様に、オブジェクト選択
装置IFからのオブジェクト選択信号Dselをオブジェクト
選択信号デコーダOdecが選択し、そのデコード結果Odec
１, Odec２, Odec３が「選択」を示しているスイッチSW
２１,SW２２,SW２３のみがオンすることによって、表示
させたいオブジェクトのデコード出力のみがビデオ合成
器Comp２１に入力される。

【００５８】図５は復号化装置DecA１、復号化装置DecA
２および復号化装置DecA３を構成する復号化装置DecAの
例である。同図において、図１の本発明の画像復号化装
置におけるブロック図と同じ動作をする機器は同じ番号
を付す。図１の実施の形態１の画像復号化装置における
ブロック図と図５の実施の形態３の画像復号化装置にお
けるブロック図の違いは、後者が形状値生成器GEN１お
よびスイッチSW０が無いことのみであり、３つのオブジ
ェクトに対応した復号化装置が、それぞれ形状値のみを
受信した場合、画像合成装置にそのオブジェクトの合成
を禁止する制御信号を出力するだけであるから、特に説
明するまでもなくその動作は明らかである。また、実施
の形態１と同様、オブジェクトや復号化装置の個数は適
宜変更可能であることは言うまでもない。

【００５９】以上のように、形状のみの画像ストリーム
の場合は画像復号化装置で表示を禁止するオブジェクト
非表示情報Bolyを出力し、画像合成装置Comp２でこのオ
ブジェクト非表示情報Bolyに応じてそのオブジェクトの
合成表示を禁止することで、形状のみの画像ストリーム
が入力された場合に不自然な画素値が合成表示されるこ
とを防止することができる。

【００６０】（実施の形態４）図１５は、本発明の実施
の形態４による画像復号化システムのストリーム分離装
置DeMuxの構成を示す図である。図において、１５１は
図１４に示すような多重化ストリームStrMのＭＨＤに含
まれる重なり情報Odrを読み出すとともにＭＨＤに後続
するストリームのオブジェクト番号を抽出するオブジェ
クト番号抽出手段、１５２は多重化された複数のストリ
ームのストリーム全体のヘッダＨＤをみて各ストリーム
が画素情報を含むものであるか否かを判定する画素情報
有無判定手段である。

【００６１】次に動作について説明する。本実施の形態
４による画像復号化システムは、多重化ストリームStrM
を複数のストリームに分離する段階で分離対象となるス
トリームが画素情報を含むものであるか否かを判定し、
画素情報を含まないストリーム、すなわち形状のみの画
像ストリームについてはこれを後段の復号化装置Decに
対して出力しないようにしたものである。図１５に示す
ストリーム分離装置DeMuxに図１４に示すような多重化
ストリームStrMが入力されると、画素情報有無判定手段
１５２は多重化ストリームStrMに多重化された複数のス
トリームのストリーム全体のヘッダＨＤをみて各ストリ
ームが画素情報を含むものであるか否かを判定し、判定
結果をオブジェクト番号抽出手段１５１に対して出力す
る。オブジェクト番号抽出手段１５１は入力された多重
化ストリームStrMのＭＨＤに含まれる重なり情報Odrを
読み出してこれを制御装置CPUに対して出力するととも
にＭＨＤに後続するストリームのオブジェクト番号を抽
出し、オブジェクト番号ごとにSW１５を切り替えて多重
化された複数のストリームを分離して出力する制御を行
う。画素情報有無判定手段１５２がいずれかのオブジェ
クト番号のストリームが画素情報を含まないと判定した
ときは、オブジェクト番号抽出手段１５１はこの判定結
果を受けて、画素情報を含まないと判定されたストリー
ムのオブジェクト番号を抽出したときにSW１５を非出力
の端子（図中の最下端の端子）に切り替えて、画素情報
を含まないストリーム、すなわち形状のみの画像ストリ
ームが後段の復号化装置Decに対して出力されないよう
に制御する。

【００６２】このように、本実施の形態４による画像復
号化システムは、多重化ストリームStrMを複数のストリ
ームに分離する段階で分離対象となるストリームが画素
情報を含むものであるか否かを判定し、画素情報を含ま
ないストリーム、すなわち形状のみの画像ストリームに
ついてはこれを後段の復号化装置Decに対して出力しな
いようにしたから、形状のみの画像ストリームが入力さ
れた場合に不自然な画素値が表示されることを防止する
ことができる。

【００６３】（実施の形態５）さらに、上記実施の形態
１ないし３で示した画像復号装置に相当する動作を実行
するためのプログラムを、フロッピー（登録商標）ディ
スク等の記録媒体に記録するようにすることにより、上
記各実施の形態で示した処理を、独立したコンピュータ
システムにおいて簡単に実施することが可能となる。

【００６４】図６は、上記実施の形態１ないし３の画像
復号化装置に相当する動作を実行するプログラムを格納
したフロッピーディスクを用いて、実施の形態１ないし
３の画像復号化装置に相当する画像復号化方法をコンピ
ュータシステムにより実施する場合の説明図である。

【００６５】図６(b)は、請求項９記載の画像復号化プ
ログラム記録媒体に対応するフロッピーディスクの正面
からみた外観、断面構造、及びフロッピーディスクを示
し、図６(a)は、記録媒体本体であるフロッピーディス
クの物理フォーマットの例を示している。フロッピーデ
ィスクＦＤはケースＦ内に内蔵され、該ディスクの表面
には、同心円状に外周からは内周に向かって複数のトラ
ックＴｒが形成され、各トラックは角度方向に１６のセ
クタＳｅに分割されている。従って、上記プログラムを
格納したフロッピーディスクでは、上記フロッピーディ
スクＦＤ上に割り当てられた領域に、上記プログラムと
しての画像復号化方法が記録されている。

【００６６】また、図６(c)は、フロッピーディスクＦ
Ｄに上記プログラムの記録再生を行うための構成を示
す。上記プログラムをフロッピーディスクＦＤに記録す
る場合は、コンピュータシステムＣｓから上記プログラ
ムとしての画像復号化方法をフロッピーディスクドライ
ブを介して書き込む。また、フロッピーディスク内のプ
ログラムにより上記画像復号化方法をコンピュータシス
テム中に構築する場合は、フロッピーディスクドライブ
によりプログラムをフロッピーディスクから読み出し、
コンピュータシステムに転送する。

【００６７】図７はこのコンピュータシステムに転送さ
れ実行される画像復号化プログラムの処理内容を示すフ
ローチャートの説明図である。図７(a)は図１の実施の
形態１の画像復号化装置により実行される画像復号化方
法（請求項１および２に対応）をコンピュータシステム
で実現する際の画像復号化プログラムの処理内容を示す
もので、図において、ステップＳ１でビデオストリーム
を入力し、ステップＳ２でこれをデコードし、ステップ
Ｓ３でこのストリームが形状信号のみか否かを判定し、
否であれば、ステップＳ４でデコードした画素信号や形
状信号を図示しない画像合成ステップに出力し、形状信
号のみであれば、ステップＳ５で透明である旨、即ち非
表示である旨を示す信号を作成し、形状信号のデコード
結果に代えてこれを図示しない画像合成ステップに出力
する。

【００６８】図７(b)は図２の実施の形態２の画像復号
化装置により実行される画像復号化方法（請求項１およ
び３に対応）をコンピュータシステムで実現する際の画
像復号化プログラムの処理内容を示すもので、図におい
て、ステップＳ１でビデオストリームを入力し、ステッ
プＳ２でこれをデコードし、ステップＳ３でこのストリ
ームが形状信号のみか否かを判定し、否であれば、ステ
ップＳ４でデコードした画素信号や形状信号を図示しな
い画像合成ステップに出力する。ここまでの処理は図７
(a)と同様である。ステップＳ３で形状信号のみと判定
されれば、ステップＳ６でグレー等の所定の画素値を作
成し、形状信号のデコード結果に代えてこれを図示しな
い画像合成ステップに出力する。

【００６９】また、図７(c)は図３の実施の形態３の画
像復号化システムにより実行される画像復号化方法（請
求項１および４に対応）をコンピュータシステムで実現
する際の画像復号化プログラムの処理内容を示すもの
で、ステップＳ４までの処理は図７(a)と同様である。
ステップＳ３で形状信号のみと判定されれば、ステップ
Ｓ７で当該ストリームに関しては画像の合成を中止する
旨の命令を作成し、これを表示側、即ち図示しない画像
合成ステップに出力する。

【００７０】なお、上記説明では、記録媒体としてフロ
ッピーディスクを一例として説明を行ったが、ハードデ
ィスク等の磁気ディスクや光ディスク、光磁気ディスク
等を用いても同様に行うことができる。また、記録媒体
はこれに限らず、ＩＣカード、ＲＯＭカセット等の半導
体記憶装置の他、プログラムを記録できるものであれば
同様に実施することができる。

【００７１】

【発明の効果】以上のように、本願の請求項１の発明に
係る画像復号化方法によれば、画像を構成する画素値を
符号化した情報、または画像を構成する画素値が有意で
あるか否かを示す形状値を符号化した情報、の少なくと
も一方を含むストリームを入力し、該ストリームを復号
化して得た、画素値、または形状値、の少なくとも一方
を出力する画像復号化方法において、前記ストリーム
が、画像を構成する画素値を符号化した情報を含むか否
かを判定し、当該ストリームが、前記画素値を符号化し
た情報を含まない場合は、復号化した画素値を、画像表
示手段に表示しないようにしたので、画素値を有さない
形状値のみのストリームが入力された場合に自動的に画
像を非表示とすることができ、かつこれを、様々なアプ
リケーションで使用可能な汎用的な画像復号化方法を使
用しながら実現でき、形状値のみのストリームを復号化
した際に何らかの画素値が表示されてしまい、見ている
人に不快感を与えるという，不測の事態を避けることが
できる、実用的価値が高い画像復号化方法が得られる効
果がある。

【００７２】また、本願の請求項２の発明に係る画像復
号化方法によれば、請求項１記載の画像復号化方法にお
いて、前記ストリームが、画像を構成する画素値を符号
化した情報を含まない場合は、前記復号化した形状値
を、表示されない形状値に変換して出力するようにした
ので、画素値を有しない形状値のみのストリームが入力
された場合に自動的に画像を非表示とすることができ、
かつこれを、様々なアプリケーションで使用可能な汎用
的な画像復号化方法を使用しながら実現でき、形状値の
みのストリームを復号化した際に何らかの画素値が表示
されてしまい、見ている人に不快感を与えるという，不
測の事態を避けることができる、実用的価値が高い画像
復号化方法が得られる効果がある。

【００７３】また、本願の請求項３の発明に係る画像復
号化方法によれば、画像を構成する画素値を符号化した
情報、または画像を構成する画素値が有意であるか否か
を示す形状値を符号化した情報、の少なくとも一方を含
むストリームを入力し、該ストリームを復号化して得
た、画素値、または形状値、の少なくとも一方を出力す
る画像復号化方法において、前記ストリームが、画像を
構成する画素値を符号化した情報を含まない場合は、所
定の値を、復号化した画素値として出力するようにした
ので、画素値を有しない形状値のみのストリームが入力
された場合は自動的に画像に自然な画素値を表示ことが
でき、かつこれを、様々なアプリケーションで使用可能
な汎用的な画像復号化方法を使用しながら実現でき、形
状値のみのストリームを復号化した際に不自然な画素値
が表示されてしまい、見ている人に不快感を与えるとい
う，不測の事態を避けることができる、実用的価値が高
い画像復号化方法が得られる効果がある。

【００７４】また、本願の請求項４の発明に係る画像復
号化方法によれば、請求項１記載の画像復号化方法にお
いて、前記ストリームが、画像を構成する画素値を符号
化した情報を含まない場合は、復号化した結果の表示を
禁止する信号を、上記画像表示手段に出力するようにし
たので、画素値を有しない形状値のみのストリームが入
力された場合は自動的に画像を非表示とすることがで
き、かつこれを、様々なアプリケーションで使用可能な
汎用的な画像復号化方法を使用しながら実現でき、形状
値のみのストリームを復号化した際に何らかの画素値が
表示されてしまい、見ている人に不快感を与えるとい
う，不測の事態を避けることができる、実用的価値が高
い画像復号化方法が得られる効果がある。

【００７５】また、本願の請求項５の発明に係る画像復
号化方法によれば、請求項１記載の画像復号化方法にお
いて、前記画像は、背景に対する前景を構成する物体の
１つの画像であるものとしたので、オブジェクト単位の
画像符号化を行ったビデオストリームに対する画像復号
化方法として、様々なアプリケーションで使用可能な汎
用的なものを用いた場合、形状値のみのストリームを復
号化した際に何らかの画素値が表示されてしまい、見て
いる人に不快感を与えるという，不測の事態を避けるこ
とができる、実用的価値が高い画像復号化方法が得られ
る効果がある。

【００７６】また、本願の請求項６の発明に係る画像復
号化方法によれば、画像を構成する画素値を符号化した
情報、または画像を構成する画素値が有意であるか否か
を示す形状値を符号化した情報、の少なくとも一方を含
むストリームを入力し、該ストリームを処理する画像復
号化方法において、前記ストリームが、画像を構成する
画素値を符号化した情報を含むか否かを判定し、当該ス
トリームが、前記画素値を符号化した情報を含まない場
合は、該ストリームの復号化を行わないようにしたの
で、画素値を有しない形状値のみのストリームが入力さ
れた場合は自動的に画像を非表示とすることができ、か
つこれを、様々なアプリケーションで使用可能な汎用的
な画像復号化方法を使用しながら実現でき、形状値のみ
のストリームを復号化した際に何らかの画素値が表示さ
れてしまい、見ている人に不快感を与えるという，不測
の事態を避けることができる、実用的価値が高い画像復
号化方法が得られる効果がある。

【００７７】また、本願の請求項７の発明に係る画像復
号化装置によれば、画像を構成する画素値を符号化した
情報、または画像を構成する画素値が有意であるか否か
を示す形状値を符号化した情報、の少なくとも一方を含
むストリームを入力とし、前記ストリームを復号化して
得た、画素値、または、形状値、の少なくとも一方を出
力する画像復号化手段と、前記ストリームが画素値を符
号化した情報を含むか否かを判定し、当該ストリーム
が、前記画素値を符号化した情報を含まない場合は前記
画像復号化手段の出力である画素値が表示されないよう
にする表示制御手段とを備えるようにしたので、画素値
を有しない形状値のみのストリームが入力された場合に
自動的に画像を非表示とすることができ、かつこれを、
様々なアプリケーションで使用可能な汎用的な画像復号
化装置を使用しながら実現でき、形状値のみのストリー
ムを復号化した際に何らかの画素値が表示されてしま
い、見ている人に不快感を与えるという，不測の事態を
避けることができる、実用的価値が高い画像復号化装置
が得られる効果がある。

【００７８】また、本願の請求項８の発明に係る画像復
号化装置によれば、請求項７記載の画像復号化装置にお
いて、前記画像は、背景に対する前景を構成する物体の
１つの画像としたので、オブジェクト単位の画像符号化
を行ったビデオストリームに対する画像復号化装置とし
て、様々なアプリケーションで使用可能な汎用的なもの
を用いた場合、形状値のみのストリームを復号化した際
に何らかの画素値が表示されてしまい、見ている人に不
快感を与えるという，不測の事態を避けることができ
る、実用的価値が高い画像復号化装置が得られる効果が
ある。

【００７９】また、本願の請求項９の発明に係る画像復
号化プログラム記録媒体によれば、画像を構成する画素
値を符号化した情報、または画像を構成する画素値が有
意であるか否かを示す形状値を符号化した情報、の少な
くとも一方を含むストリームを入力し、該ストリームを
復号化して得た、画素値、または形状値、の少なくとも
一方を出力する画像復号化方法を実行する画像復号化プ
ログラムを記録した画像復号化プログラム記録媒体にお
いて、前記ストリームが画素値を符号化した情報を含む
か否かを判定し、当該ストリームが前記画素値を符号化
した情報を含まない場合は、復号化した画素値を表示し
ない画像復号化方法を実行するプログラム、を記録する
ようにしたので、画素値を有しない形状値のみのストリ
ームが入力された場合は自動的に画像を非表示とするこ
とができ、様々なアプリケーションで使い回すことがで
きる汎用的な画像復号化プログラムを使用しながら、形
状値のみのストリームを復号化した際に何らかの画素値
が表示されてしまい、見ている人に不快感を与えるとい
う，不測の事態を避けることができる、実用的価値が高
い画像復号化プログラム記録媒体が得られる効果があ
る。

【００８０】また、本願の請求項１０の発明に係る画像
復号化プログラム記録媒体によれば、請求項９記載の画
像復号化プログラム記録媒体において、前記画像は、背
景に対する前景を構成する物体の１つの画像としたの
で、オブジェクト単位の画像符号化を行ったビデオスト
リームに対する画像復号化プログラムとして、様々なア
プリケーションで使用可能な汎用的なものを用いた場合
に、形状値のみのストリームを復号化した際に何らかの
画素値が表示されてしまい、見ている人に不快感を与え
るという，不測の事態を避けることができる、実用的価
値が高い画像復号化プログラム記録媒体が得られる効果
がある。

【図面の簡単な説明】

【図１】本発明の実施の形態１による画像復号化装置の
構成を示すブロック図

【図２】本発明の実施の形態２による画像復号化装置の
構成を示すブロック図

【図３】本発明の実施の形態３による画像復号化システ
ムの構成を示すブロック図

【図４】本発明の実施の形態３による画像復号化システ
ムの画像合成装置の構成を示すブロック図

【図５】本発明の実施の形態３による画像復号化システ
ムの画像復号化装置の構成を示すブロック図

【図６】実施の形態１から実施の形態３をコンピュータ
システムにより実現するためのプログラムを格納するた
めの記憶媒体についての説明図

【図７】本発明の実施の形態４による画像復号化プログ
ラム記憶媒体により実行される画像復号化方法について
のフローチャートを示す図

【図８】オブジェクト単位の画像合成の説明図

【図９】従来の画像復号化システムのブロック図

【図１０】ポインタによるポイント指定の例を示す図

【図１１】従来の画像復号化装置のブロック図

【図１２】従来の画像復号化装置の形状信号記憶用のメ
モリのブロック図

【図１３】ビデオストリームのフォーマットを示す説明
図

【図１４】多重化ストリームのフォーマットの例と該多
重化ストリームと各オブジェクトに対応する複数のスト
リームの関係を示す図

【図１５】本発明の実施の形態４による画像復号化シス
テムのストリーム分離装置DeMuxの構成を示す図

【符号の説明】

StrM 多重化ストリーム DeMux ストリーム分離装置 Str ビデオストリーム Str１ ビデオストリーム Str２ ビデオストリーム Str３ ビデオストリーム Dec 復号化装置 Dec１ 復号化装置 Dec２ 復号化装置 Dec３ 復号化装置 DecA 復号化装置 DecA１ 復号化装置 DecA２ 復号化装置 DecA３ 復号化装置 mem１ 復号画像 mem２ 復号画像 mem３ 復号画像 mem４ 復号画像 Dout 復号画像 Dout１ 復号画像 Dout２ 復号画像 Dout３ 復号画像 Comp１ 画像合成装置 Comp２ 画像合成装置 IF オブジェクト選択装置 Psel オブジェクト選択情報 Dsel オブジェクト非表示情報 Req オブジェクト判定結果 CPU 制御装置 A オブジェクト判定結果 A１ オブジェクト判定結果 A２ オブジェクト判定結果 A３ オブジェクト判定結果 Q オブジェクト判定命令 Q１ オブジェクト判定命令 Q２ オブジェクト判定命令 Q３ オブジェクト判定命令 DecU 画像復号ユニット DecU１ 画像復号ユニット DecU２ 画像復号ユニット DecU３ 画像復号ユニット SW０ スイッチ SW１ スイッチ SW２ スイッチ SW３ スイッチ SW４ スイッチ GEN１ 形状値生成器 GEN２ 画素値生成器 Aval 形状値 Pval 画素値 Vcom 合成済画像 Disp 表示装置 MEM１ メモリ MEM２ メモリ MEM３ メモリ MEM４ メモリ Yimg 画素復号画像 Uimg 画素復号画像 Vimg 画素復号画像 Aimg 形状復号画像 Yout 画素復号画像 Uout 画素復号画像 Vout 画素復号画像 Aout 形状復号画像 Boly オブジェクト非表示情報 Boly１ オブジェクト非表示情報 Boly２ オブジェクト非表示情報 Boly３ オブジェクト非表示情報 Ｃｓ コンピュータ・システム ＦＤ フロッピディスク ＦDD フロッピディスクドライブ

Claims (10)

【特許請求の範囲】
1. 【請求項１】 画像を構成する画素値を符号化した情
   報、または画像を構成する画素値が有意であるか否かを
   示す形状値を符号化した情報、の少なくとも一方を含む
   ストリームを入力し、該ストリームを復号化して得た、
   画素値、または形状値、の少なくとも一方を出力する画
   像復号化方法において、 前記ストリームが、画像を構成する画素値を符号化した
   情報を含むか否かを判定し、 当該ストリームが、前記画素値を符号化した情報を含ま
   ない場合は、復号化した画素値を、画像表示手段に表示
   しないことを特徴とする画像復号化方法。
2. 【請求項２】 請求項１記載の画像復号化方法におい
   て、 前記ストリームが、画像を構成する画素値を符号化した
   情報を含まない場合は、前記復号化した形状値を、表示
   されない形状値に変換して出力することを特徴とする画
   像復号化方法。
3. 【請求項３】 画像を構成する画素値を符号化した情
   報、または画像を構成する画素値が有意であるか否かを
   示す形状値を符号化した情報、の少なくとも一方を含む
   ストリームを入力し、該ストリームを復号化して得た、
   画素値、または形状値、の少なくとも一方を出力する画
   像復号化方法において、 前記ストリームが、画像を構成する画素値を符号化した
   情報を含まない場合は、所定の値を、復号化した画素値
   として出力することを特徴とする画像復号化方法。
4. 【請求項４】 請求項１記載の画像復号化方法におい
   て、 前記ストリームが、画像を構成する画素値を符号化した
   情報を含まない場合は、復号化した結果の表示を禁止す
   る信号を、上記画像表示手段に出力することを特徴とす
   る画像復号化方法。
5. 【請求項５】 請求項１記載の画像復号化方法におい
   て、 前記画像は、背景に対する前景を構成する物体の１つの
   画像であることを特徴とする画像復号化方法。
6. 【請求項６】 画像を構成する画素値を符号化した情
   報、または画像を構成する画素値が有意であるか否かを
   示す形状値を符号化した情報、の少なくとも一方を含む
   ストリームを入力し、該ストリームを処理する画像復号
   化方法において、 前記ストリームが、画像を構成する画素値を符号化した
   情報を含むか否かを判定し、 当該ストリームが、前記画素値を符号化した情報を含ま
   ない場合は、該ストリームの復号化を行わないことを特
   徴とする画像復号化方法。
7. 【請求項７】 画像を構成する画素値を符号化した情
   報、または画像を構成する画素値が有意であるか否かを
   示す形状値を符号化した情報、の少なくとも一方を含む
   ストリームを入力とし、該ストリームを復号化して得
   た、画素値、または形状値、の少なくとも一方を出力す
   る画像復号化手段と、 前記ストリームが、画像を構成する画素値を符号化した
   情報を含むか否かを判定し、当該ストリームが、前記画
   素値を符号化した情報を含まない場合は前記画像復号化
   手段の出力である画素値が表示されないようにする表示
   制御手段とを備えたことを特徴とする画像復号化装置。
8. 【請求項８】 請求項７記載の画像復号化装置におい
   て、 前記画像は、背景に対する前景を構成する物体の１つの
   画像であることを特徴とする画像復号化装置。
9. 【請求項９】 画像を構成する画素値を符号化した情
   報、または画像を構成する画素値が有意であるか否かを
   示す形状値を符号化した情報、の少なくとも一方を含む
   ストリームを入力し、該ストリームを復号化して得た、
   画素値、または形状値、の少なくとも一方を出力する画
   像復号化方法を実行する画像復号化プログラムを記録し
   た画像復号化プログラム記録媒体において、 前記ストリームが、画像を構成する画素値を符号化した
   情報を含むか否かを判定し、 当該ストリームが、前記画素値を符号化した情報を含ま
   ない場合は、復号化した画素値を表示しない画像復号化
   方法を実行するプログラム、を記録したことを特徴とす
   る画像復号化プログラム記録媒体。
10. 【請求項１０】 請求項９記載の画像復号化プログラム
    記録媒体において、 前記画像は、背景に対する前景を構成する物体の１つの
    画像であることを特徴とする画像復号化プログラム記録
    媒体。