JPH10285593A - 画像伝送用データ構造，画像伝送方法，画像復号化装置，及びデータ記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 動画像ＭＩを構成する第１，第２の物体ｏｂ
１，ｏｂ２に対応する関連データをアクセスする時の操
作性の向上を図るとともに、該関連データの所在情報の
管理を簡略化し、しかも、伝送の誤りによる関連データ
の所在情報の損失をほぼ回避する。 【解決手段】 動画像ＭＩを構成する第１，第２の物体
ｏｂ１，ｏｂ２に対応するデジタル画像信号を符号化し
て伝送する際、伝送される各物体の画像符号化信号とし
ての符号化ビット列１０１，１０２を、各物体を画像表
示するための表示用情報としての表示ビット列（符号化
データ）１４，１８，２４，２７に加えて、該各物体に
関連する関連データの所在情報としての所在ビット列１
３，１７，２３を含むデータ構造とするようにとした。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像伝送用データ
構造，画像伝送方法，画像復号化装置及びデータ記録媒
体に関し、特に動画像を構成する物体に対応する、該物
体に関連する関連データの所在情報を含めた画像符号化
信号のデータ構造、各物体の画像信号を上記データ構造
の画像符号化信号に変換して伝送する方法、及び上記デ
ータ構造の画像符号化信号を復号化する装置、並びに上
記画像伝送方法あるいは上記画像復号化装置による画像
処理を行うためのプログラムを格納したデータ記録媒体
に関するものである。

【０００２】

【従来の技術】デジタル画像情報を効率よく蓄積もしく
は伝送するには、デジタル画像情報を圧縮符号化する必
要があり、現状では、デジタル画像情報を圧縮符号化す
るための方法として、ＪＰＥＧ(Joint Photographic Co
ding Experts Group）やＭＰＥＧ(Moving Picture Expe
rts Group)に代表される離散コサイン変換（ＤＣＴ：Di
screte Cosine Transform ）の他に、サブバンド、ウェ
アブレット、フラクタル等の波形符号化方法がある。

【０００３】また、隣接するフレーム等の画面の間にお
ける冗長な画像情報を取り除く方法としては、動き補償
を用いた画面間予測を行い、つまり現画面の画素の画素
値を、これと前画面の画素の画素値との差分を用いて表
し、この差分信号を波形符号化する方法がある。最近で
は、圧縮効率を向上させると同時に、１画面を構成す
る、個々の物体に対応した領域毎に画像信号を再生でき
るよう、画像信号を物体毎に別々に圧縮符号化して伝送
する方式が実用化されている。

【０００４】この方式では、再生側で、それぞれの物体
に対応する、符号化された画像信号を復号化し、この復
号化により再生した個々の物体の画像を合成して、１画
面に相当する画像の表示を行っている。このように物体
単位で画像信号を符号化することにより、表示すべき物
体の画像を自由に組み合わせて合成することが可能とな
り、これにより動画像を簡単に再編集できるようにな
る。

【０００５】また、この方式では、通信路の混み具合や
再生装置の性能、さらに視聴者の好みに応じて、比較的
に重要でない物体の画像については再生を行わずに、動
画像の表示を行うことができる。

【０００６】さらに、上記方式では、物体単位のスケー
ラビリティ，つまり階層的な処理が実現できる。このよ
うな階層的な処理では、各物体に対応する画像信号とし
て、解像度が異なる複数の階層に対応した画像信号を用
い、各階層の画像信号の符号化処理あるいは復号化処理
が他の階層の画像信号を用いて行われる。

【０００７】ところで、近年、コンピュータのネットワ
ークを経由して、視聴したい動画像をアクセスすること
ができる映像提供システムが普及してきている。図９は
このような映像提供システムを説明するための模式図で
ある。この映像提供システム７００では、複数のネット
ワーク，つまりネットワーク７０１〜７０３は相互に接
続されており、各ネットワーク７０１〜７０３には、映
像情報を提供する複数のサーバーが接続されるととも
に、映像情報の提供を受ける複数の映像受信再生端末装
置（以下単に端末装置という。）が接続されている。な
お、図９では、説明を簡単にするため、上記端末装置と
しては、上記ネットワーク７０１に接続された端末装置
７０４のみを示している。また、ネットワーク７０１に
サーバー７０５が、ネットワーク７０３にはサーバー７
０６が、ネットワーク７０２にはサーバー７０７が接続
されている。

【０００８】このような映像提供システム７００では、
端末装置７０４が例えばサーバー７０５から映像情報の
提供を受ける場合、まず、該端末装置７０４は上記サー
バー７０５との間で連絡をとり、該端末７０４とサーバ
ー７０５の間で回線の接続状態を成立させる。その後該
端末装置７０４は、該サーバー７０５から提供される所
定の番組の画像データを受信し、この画像データを復号
化して再生する。

【０００９】また、このようにして端末装置に受信され
た画像データ（つまり所定の番組の情報）に関連する関
連データを、さらに上記端末装置７０４にて入手可能と
するために、上記画像データが記述されている画像ファ
イルに対応する、該画像ファイルとはフォーマットの異
なるテキストファイルに、上記番組に関連する関連デー
タの所在場所を示す所在情報が記述してある。従って、
ユーザーは、端末装置に受信された番組の関連データ
を、テキストファイルに記載されたその所在情報に従っ
て入手することができる。

【００１０】例えば、上記のような映像提供システムと
しての現在のインターネットでは、テキストファイルと
してハイパーテキストファイルが用いられ、このテキス
トファイル中に文字群とその文字群に関する別の情報
（関連データ）の所在場所を示す所在情報が記述されて
おり、ユーザが所定の文字群を選択すると、選択された
文字群に関する別の情報が所定のサーバーから提供され
ることとなる。つまり、これらの文字群は、テキストフ
ァイル，プログラムファイル，グラフィックファイル等
の別のドキュメントにリンクしている。

【００１１】現在では、個々の動画像に関する別の情報
（関連データ）についても、該当する動画像に対応する
ハイパーテキストファイルにその所在情報を記述するこ
とにより、動画像のリンク先を指定するようになってい
る。

【００１２】以下、図１０を用いて具体的に説明する。
現在の情報提供システムとしてのインターネットには、
複数の情報源が接続されており、個々の情報源には、例
えば、種々の事柄に関するホームページの情報がハイパ
ーテキストファイルとして格納されている。ここでは、
端末装置７０４が、恐竜の世界といったタイトルのホー
ムページＨＰの情報を保持している情報源に接続され、
該端末装置７０４の表示部に上記ホームページＨＰ（ハ
イパーテキストファイルに対応する画面ＨＴｓ）が表示
されている状況を例に挙げて具体的に説明する。

【００１３】このホームページＨＰでは、図１０(a) に
示すように、恐竜に関連する動画像の項目が文字群「シ
ーン１」〜文字群「シーン３」により表示され、さら
に、各項目の動画像を構成するオブジェクト，例えば、
シーン１についてはオブジェクトｏｂ１，ｏｂ２に関連
する関連データが文字群「オブジェクト１」，文字群
「オブジェクト２」により表示されており、これら文字
群の表示領域が、動画像を指定するための指定領域Ｄ１
〜Ｄ３、及び関連データを指定する指定領域Ｄ１１，Ｄ
１２となっている。

【００１４】また、このホームページＨＰの表示内容
は、該ホームページに対応するハイパーテキストファイ
ルＨｆ中に記載されている。具体的には、図１０(b) に
示すように、文字群「シーン１」ｍ１〜文字群「シーン
３」ｍ３と、各シーンに対応する動画像データの所在場
所を示す所在情報ｂ１〜ｂ３とが対をなすよう記述さ
れ、文字群「オブジェクト１」ｍ１１，文字群「オブジ
ェクト２」ｍ１２と、各オブジェクトに関連する関連デ
ータの所在場所を示す所在情報ｂ１１〜ｂ１２とが対を
なすよう記述されている。

【００１５】そして、ユーザが上記ホームページＨＰ内
の、文字列「シーン１」に相当する指定領域Ｄ１上にマ
ウスポインタＭＰを移動し、マウスのクリック動作を行
えば、上記文字群「シーン１」にリンクした動画像デー
タを表示するための新たな表示画面ＭＰｓが動画像ＭＩ
の画面として開かれる。ここでは、この動画像の画面Ｍ
Ｐｓには、２つのオブジェクトｏｂ１，ｏｂ２ととも
に、動画像の表示を制御するための表示制御ボタンＣＢ
１〜ＣＢ４が表示されている。ユーザはこの表示制御ボ
タンＣＢ１〜ＣＢ４をマウスポインタＭＰを使って操作
することにより、動画像の表示を制御することができ
る。

【００１６】また、ユーザがシーン２，あるいはシーン
３に対応する動画像を見たい場合は、マウスポインタＭ
Ｐを、上記動画像ＭＩの画面ＭＰｓ上から、上記ホーム
ページＨＰ内の、文字列「シーン２」あるいは「シーン
３」に相当する指定領域Ｄ２あるいはＤ３上に移動し、
マウスのクリック動作を行えば、上記文字群「シーン
２」あるいは文字群「シーン３」にリンクした動画像デ
ータを表示するための新たな表示画面が動画像の画面と
して開かれる。

【００１７】さらに、ユーザがシーン１の動画像ＭＩを
構成するオブジェクトｏｂ１に関連する関連データを検
索したい場合は、マウスポインタＭＰを、上記動画像の
画面ＭＰｓ上から、上記ホームページＨＰ内の、文字列
「オブジェクト１」に相当する指定領域Ｄ１１上に移動
し、マウスのクリック動作を行えば、上記文字群「オブ
ジェクト１」にリンクした、オブジェクトｏｂ１に関連
する関連データが新たに表示されることとなる。

【００１８】

【発明が解決しようとする課題】ところが、個々のシー
ンに対応する動画像の画像データを、上記のようにハイ
パーテキストを経由してアクセスする場合、動画像ＭＩ
の画面ＭＰｓとハイパーテキストの画面（ホームページ
ＨＰ）ＨＴｓとの間でマウスポインタＭＰを移動する必
要がある。このため、端末装置７０４の表示部には、少
なくとも２つの画面，つまり動画像の画面ＭＰｓとハイ
パーテキストファイルの画面ＨＴｓを表示するか、ある
いは表示部にて上記画面ＭＰｓと画面ＨＴｓの切り換え
を行う必要がある。

【００１９】また、各シーンに登場するオブジェクトに
関連する関連データ（例えば、オブジェクトが恐竜であ
る場合はその外形の特徴や生息地域等）の所在場所を示
す所在情報も、ハイパーテキストファイルに記述されて
おり、これらの関連データを検索する場合でも、マウス
ポインタＭＰを、動画像ＭＩの画面ＭＰｓからハイパー
テキストファイルの画面ＨＴｓに移動させる必要があ
る。

【００２０】特に、画像を構成する物体単位で符号化処
理や復号化処理を行う方式では、１つの画像が複数の物
体（つまり小画像）から構成されており、各物体につい
て関連データが存在し、しかも各物体の関連データが異
なるサーバーに蓄積されている場合がある。

【００２１】例えば、動画像ＭＩを構成するオブジェク
トｏｂ１の関連データが図９に示すサーバー７０６に、
オブジェクトｏｂ２の関連データがサーバー７０７にあ
る場合、各オブジェクトに対応する関連データをアクセ
スする際には、各オブジェクトが表示されている動画像
ＭＩの画面ＭＰｓから、対応するハイパーテキストの画
面（ホームページ等）ＨＴｓを経由して、所定のサーバ
ーに保持されている関連データにアクセスしなければな
らず、関連データのアクセスのための操作性が悪いとい
うだけでなく、この場合、個々の物体に対応する関連デ
ータの所在情報の管理が難しい。つまり、動画像を構成
するオブジェクトを変更する場合、これと同時に、変更
したオブジェクトについて、ハイパーテキストファイル
におけるそのオブジェクトの関連データの所在情報に関
する記述を変更しなければならない。

【００２２】さらに、伝送の誤りでハイパーテキストフ
ァイルに記述されている情報が失われると、上記動画像
を構成する個々のオブジェクトの関連データの所在情報
も失われてしまい、画像ファイルに記述されている動画
像のデータだけではオブジェクトの関連データのアクセ
スを行うことができないという問題がある。

【００２３】本発明は、上記のような問題点を解決する
ためになされたもので、画像を構成する各物体に対応す
る関連データをアクセスする時の操作性の向上を図ると
ともに、複数の物体からなる画像に対する、各物体に対
応する関連データの所在情報の管理を簡単化することが
でき、しかも、伝送の誤りによる物体に対応する関連デ
ータの損失を回避することができる画像伝送用データ構
造及び画像伝送方法、並びに上記データ構造を有する画
像符号化信号の復号化処理を行う画像復号化装置を得る
ことを目的とする。

【００２４】また、本発明は、上記画像伝送方式及び画
像復号化装置による画像処理をソフトフェアにより実現
するためのプログラムを格納したデータ記録媒体を得る
ことを目的とする。

【００２５】

【課題を解決するための手段】この発明（請求項１）に
係る画像伝送用データ構造は、動画像を構成する個々の
物体に対応するデジタル画像信号を符号化して伝送する
ためのデータ構造であって、上記各物体に対応するデジ
タル画像信号の符号化により得られる画像符号化信号
を、対応する物体を画像表示するための表示用情報と、
対応する物体に関連する関連データの所在場所を示す所
在情報とを含む構成としたものである。

【００２６】この発明（請求項２）に係る画像伝送方法
は、動画像を構成する個々の物体に対応するデジタル画
像信号を伝送する方法であって、上記各物体に対応する
画像信号を符号化して画像符号化信号を生成し、該各物
体に対応する画像符号化信号を、該画像符号化信号にそ
の物体に関連する関連データの所在場所を示す所在情報
を付加して伝送するものである。

【００２７】この発明（請求項３）に係る画像復号化装
置は、動画像を構成する個々の物体に対応するデジタル
画像信号を符号化して得られる画像符号化信号として、
該各物体を画像表示するための表示用情報、及び該各物
体に関連する関連データの所在場所を示す所在情報を含
む画像符号化信号を受け、該画像符号化信号に対して所
定の復号化処理を施す画像復号化装置であって、上記関
連データの所在情報に基づいて、該関連データをアクセ
スするためのアクセス信号を、上記関連データの所在場
所である情報源に送信する送信手段と、上記表示用情報
を復号化する復号化処理部とを備えたものである。

【００２８】この発明（請求項４）は、請求項３記載の
画像復号化装置において、上記各物体に対応する画像符
号化信号を構成する符号化ビット列を、所定数のフレー
ムに対応する表示用情報を構成する表示ビット列毎に、
上記関連データの所在情報を構成する所在ビット列を配
列した構成としたものである。

【００２９】この発明（請求項５）は、請求項３記載の
画像復号化装置において、上記各物体に対応する画像符
号化信号を構成する符号化ビット列を、上記各物体に対
応する関連データの所在情報を構成する所在ビット列
と、該各物体に対応する表示用情報を構成する表示ビッ
ト列とを含み、該所在ビット列が上記符号化ビット列の
先頭に配置されている構成としたものである。

【００３０】この発明（請求項６）に係る画像復号化装
置は、動画像を構成する個々の物体に対応するデジタル
画像信号を符号化して得られる画像符号化信号として、
該各物体を画像表示するための表示用情報を含み、かつ
該各物体を識別するための物体識別子と、該物体に関連
する関連データの所在場所を示す所在情報とからなる一
覧表情報を含む画像符号化信号を受け、該画像符号化信
号に対して所定の復号化処理を施す画像復号化装置であ
って、上記関連データの所在情報に基づいて、該関連デ
ータをアクセスするためのアクセス信号を、上記関連デ
ータの所在場所である情報源に送信する送信手段と、上
記表示用情報を復号化する復号化処理部とを備えたもの
である。

【００３１】この発明（請求項７）に係る画像復号化装
置は、動画像を構成する個々の物体に対応するデジタル
画像信号を符号化して得られる画像符号化信号として、
該各物体を画像表示するための表示用情報、及び複数の
物体の合成処理に用いる合成情報を含む画像符号化信号
を受け、該画像符号化信号に対して所定の復号化処理を
施す画像復号化装置であって、上記各物体に対応する合
成情報に、該各物体を識別するための物体識別子ととも
に含まれる、該各物体に関連する関連データの所在場所
を示す所在情報に基づいて、該関連データをアクセスす
るためのアクセス信号を、上記関連データの所在場所で
ある情報源に送信する送信手段と、上記表示用情報を復
号化する復号化処理部とを備えたものである。

【００３２】この発明（請求項８）に係る信号伝送用デ
ータ構造は、１つの情報群を構成する複数の個別情報に
対応するデジタル信号を符号化して伝送するためのデー
タ構造であって、上記各個別情報に対応するデジタル信
号の符号化により得られる符号化信号を、対応する個別
情報を再生するための再生用信号と、対応する個別情報
に関連する関連データの所在場所を示す所在情報を含む
構成としたものである。

【００３３】この発明（請求項９）に係るデータ記録媒
体は、コンピュータに画像信号の伝送処理を行わせるた
めのプログラムを格納したデータ記録媒体であって、該
プログラムを、請求項２記載の画像伝送方法による画像
信号の伝送処理をコンピュータが行うよう構成したもの
である。

【００３４】この発明（請求項１０）に係るデータ記録
媒体は、コンピュータに画像信号の復号化処理を行わせ
るためのプログラムを格納したデータ記録媒体であっ
て、上記プログラムを、請求項３記載の画像復号化装置
による画像復号化処理を、コンピュータが行うよう構成
したものである。

【００３５】この発明（請求項１１）に係る画像伝送用
データ構造は、動画像を構成する個々の物体に対応する
デジタル画像信号を符号化して伝送するためのデータ構
造であって、上記各物体に対応するデジタル画像信号の
符号化により得られる画像符号化信号を、対応する物体
を画像表示するための表示用情報と、該表示用情報の所
在場所を示す所在情報とを含む構成としたものである。

【００３６】この発明（請求項１２）に係る画像伝送方
法は、動画像を構成する個々の物体に対応するデジタル
画像信号を伝送する方法であって、上記各物体に対応す
るデジタル画像信号を符号化して画像符号化信号を生成
し、該各物体に対応する画像符号化信号を、該画像符号
化信号にその物体を表示するための表示用情報の所在場
所を示す所在情報を付加して伝送するものである。

【００３７】この発明（請求項１３）に係る画像復号化
装置は、動画像を構成する個々の物体に対応するデジタ
ル画像信号を符号化して得られる画像符号化信号とし
て、該各物体を画像表示するための表示用情報、及び該
表示用情報の所在場所を示す所在情報を含む画像符号化
信号を受け、該画像符号化信号に所定の復号化処理を施
す画像復号化装置であって、上記表示用情報の所在情報
に基づいて、上記表示用情報をアクセスするためのアク
セス信号を、上記表示用情報の所在場所である情報源に
送信する送信手段と、上記表示用情報を復号化する復号
化処理部とを備えたものである。

【００３８】この発明（請求項１４）は、請求項１３記
載の画像復号化装置において、上記各物体に対応する画
像符号化信号を構成する符号化ビット列を、所定数のフ
レームに対応する表示用情報を構成する表示ビット列毎
に、上記表示用情報の所在情報を構成する所在ビット列
を配列した構成としたものである。

【００３９】この発明（請求項１５）は、請求項１３記
載の画像復号化装置において、上記各物体に対応する画
像符号化信号を構成する符号化ビット列を、上記各物体
に対応する表示用情報を構成する表示ビット列と、該各
物体の表示用情報の所在情報を構成する所在ビット列と
を含み、該所在ビット列が上記符号化ビット列の先頭に
配置されている構成としたものである。

【００４０】この発明（請求項１６）に係る画像復号化
装置は、動画像を構成する個々の物体に対応するデジタ
ル画像信号を符号化して得られる画像符号化信号とし
て、該各物体を画像表示するための表示用情報を含み、
かつ該各物体を識別するための物体識別子と上記各物体
の表示用情報の所在情報とからなる一覧表情報を含む画
像符号化信号を受け、該画像符号化信号に対して所定の
復号化処理を施す画像復号化装置であって、上記表示用
情報の所在情報に基づいて、該表示用情報をアクセスす
るためのアクセス信号を、上記表示用情報の所在場所で
ある情報源に送信する送信手段と、上記表示用情報を復
号化する復号化処理部とを備えたものである。

【００４１】この発明（請求項１７）に係る画像復号化
装置は、動画像を構成する個々の物体に対応するデジタ
ル画像信号を符号化して得られる画像符号化信号とし
て、該各物体を表示するための表示用情報、及び複数の
物体の合成処理に用いる合成情報を含む画像符号化信号
を受け、該画像符号化信号に対して所定の復号化処理を
施す画像復号化装置であって、上記各物体に対応する合
成情報に、該各物体を識別するための物体識別子ととも
に含まれる、該各物体の表示用情報の所在場所を示す所
在情報に基づいて、該表示用情報をアクセスするための
アクセス信号を、上記表示用情報の所在場所である情報
源に送信する送信手段と、上記表示用情報を復号化する
復号化処理部とを備えたものである。

【００４２】この発明（請求項１８）に係る信号伝送用
データ構造は、１つの情報群を構成する複数の個別情報
に対応するデジタル信号を符号化して伝送するためのデ
ータ構造であって、上記各個別情報に対応するデジタル
信号の符号化により得られる符号化信号を、対応する個
別情報を再生するための再生用信号と、対応する個別情
報の再生用信号の所在場所を示す所在情報を含む構成と
したものである。

【００４３】この発明（請求項１９）に係るデータ記録
媒体は、コンピュータに画像信号の伝送処理を行わせる
ためのプログラムを格納したデータ記録媒体であって、
該プログラムを、請求項１２記載の画像伝送方法による
画像信号の伝送処理をコンピュータが行うよう構成した
ものである。

【００４４】この発明（請求項２０）に係るデータ記録
媒体は、コンピュータに画像信号の復号化処理を行わせ
るためのプログラムを格納したデータ記録媒体であっ
て、上記プログラムを、請求項１３記載の画像復号化装
置による画像復号化処理を、コンピュータが行うよう構
成したものである。

【００４５】

【発明の実態の形態】以下、本発明の実施の形態につい
て図１〜図８を用いて説明する。 実施の形態１．図１は本発明の実施の形態１による画像
伝送方法を説明するための図であり、図１(a) は複数の
物体からなる動画像ＭＩの表示画面ＭＰｓを示し、図１
(b) ，図１(c) は、それぞれ該動画像ＭＩを構成する第
１の物体（背景）ｏｂ１，第２の物体（前景）ｏｂ２に
対応する画像符号化信号のデータ構造を示している。

【００４６】この実施の形態１の画像伝送方法は、例え
ば、動画像ＭＩを構成する第１，第２の物体ｏｂ１，ｏ
ｂ２に対応するデジタル画像信号を伝送する方法であ
る。この方法では、上記各物体ｏｂ１，ｏｂ２に対応す
るデジタル画像信号の符号化処理によって符号化データ
が生成され、さらに該各物体に対応する符号化データ
は、該各物体に関連する関連データの所在場所を示す所
在情報が付加されて画像符号化信号として伝送されるこ
ととなる。なお、図１(a) 中、図１０(c) と同一符号は
同一のものを示す。また、ここでは上記画像符号化信号
はＭＰＥＧ１の規格に準拠した符号化方式により、デジ
タル画像信号を圧縮符号化して得られるものとしてい
る。

【００４７】以下、本実施の形態１の画像伝送方法によ
り伝送される、上記第１，第２の物体ｏｂ１，ｏｂ２に
対応する画像符号化信号のデータ構造について詳しく説
明する。上記第１の物体ｏｂ１に対応する画像符号化信
号を構成する符号化ビット列１０１は、各フレームに対
応する複数の単位ビット列Ｄ１（ｋ）〔ｋ＝１，２，・
・・，ｉ，ｉ＋１，・・・ｎ（ｉ，ｎは正の整数）〕か
ら構成されている。

【００４８】例えば、第ｉ番目のフレームに対応する単
位ビット列Ｄ１（ｉ）は、各フレームに対応した同期信
号としての同期ビット列１１と、第１の物体ｏｂ１を他
の物体ｏｂ２と識別するための物体識別子ＩＤとしての
識別ビット列１２と、上記第１の物体ｏｂ１に関連する
関連データの所在場所を示す所在情報ＲＬとしての所在
ビット列１３と、上記第１の物体ｏｂ１を画像表示する
ための表示用情報（符号化データ）としての表示ビット
列１４とから構成されている。また、第（ｉ＋１）番目
のフレームに対応する単位ビット列Ｄ１（ｉ＋１）も、
上記第ｉ番目の単位ビット列Ｄ１（ｉ）と同様、同期ビ
ット列１５，識別ビット列１６，所在ビット列１７，及
び表示ビット列１８とから構成されている。このように
この符号化ビット列１０１は、各フレームに対応する単
位ビット列（つまり表示ビット列）毎に、上記所在ビッ
ト列を配列したものとなっている。

【００４９】また、第２の物体ｏｂ２に対応する画像符
号化信号を構成する符号化ビット列１０２も、上記第１
の物体ｏｂ１の符号化ビット列１０１と同様、各フレー
ムに対応する複数の単位ビット列Ｄ２（ｋ）〔ｋ＝１，
２，・・・，ｉ，ｉ＋１，・・・，ｎ（ｉ，ｎは正の整
数）〕から構成されている。

【００５０】例えば、第ｉ番目のフレームに対応する単
位ビット列Ｄ２（ｉ）は、上記第１の物体ｏｂ１の符号
化ビット列１０１と同様、同期信号としての同期ビット
列２１と、物体識別子ＩＤとしての識別ビット列２２
と、関連データの所在場所を示す所在情報ＲＬとしての
所在ビット列２３と、表示用情報（符号化データ）とし
ての表示ビット列２４とから構成されている。また、第
（ｉ＋１）番目のフレームに対応する単位ビット列Ｄ２
（ｉ＋１）は、上記単位ビット列Ｄ２（ｉ）とは異な
り、同期ビット列２５，識別ビット列２６，及び表示ビ
ット列２７から構成されており、このフレームの単位ビ
ット列Ｄ２（ｉ＋１）には所在ビット列は含まれていな
い。従って、この符号化ビット列１０２は、２以上のフ
レームに対応する単位ビット列（つまり表示ビット列）
毎に、上記所在ビット列を配列したものとなっている。

【００５１】そして、上記単位ビット列Ｄ１（ｉ），Ｄ
１（ｉ＋１），Ｄ２（ｉ）では、その先頭に同期ビット
列１１，１５，２１が位置し、これに続いて識別ビット
列１２，１６，２２、所在ビット列１３，１７，２３及
び表示ビット列１４，１８，２４がこの順番で伝送され
るよう配列されている。また、上記単位ビット列Ｄ２
（ｉ＋１）では、その先頭に同期ビット列２５が位置
し、これに続いて識別ビット列２６、及び表示ビット列
２７がこの順番で伝送されるよう配列されている。ここ
で上記識別ビット列１２，１６，２２，２６は５ビッ
ト、所在ビット列１３，１７，２３は６４ビットでもっ
て表されている。

【００５２】また、図１(b) に示す符号化ビット列１０
１における各単位ビット列Ｄ１（ｋ）は、同じ画像系列
（物体ｏｂ１）の圧縮データであるため、各単位ビット
列Ｄ１（ｋ）における物体識別子ＩＤとしての識別ビッ
トは全部同じ値となっており、また、図１(c) に示す符
号化ビット列１０２における各単位ビット列Ｄ２（ｋ）
は、同じ画像系列（物体ｏｂ２）の圧縮データであるた
め、各単位ビット列Ｄ２（ｋ）における物体識別子ＩＤ
としての識別ビットは全部同じ値となっている。そし
て、符号化ビット列１０１における識別ビット列と、符
号化ビット列１０２における識別ビット列とは、物体ｏ
ｂ１に対応する単位ビット列Ｄ１（ｋ）と物体ｏｂ２に
対応する単位ビット列Ｄ２（ｋ）とを区別できるよう、
異なる値となっている。

【００５３】ここで、例えば第１，第２の物体ｏｂ１，
ｏｂ２に関連する関連データとは、該物体に関する別の
画像もしくは文書のデータであり、例えば、図１(a) に
示すように、第１の物体ｏｂ１が恐竜の生息地の風景の
映像であり、第２の物体ｏｂ２が恐竜の映像である場
合、第１の物体ｏｂ１の関連データとしては、その生息
地の地形や気候等の説明文等が挙げられ、第２の物体ｏ
ｂ２の関連データとしては、その恐竜の生態を説明する
ための画像、名前や種族の説明文等が挙げられる。この
ような関連データは、第１，第２の物体ｏｂ１，ｏｂ２
からなる動画像ＭＩの提供者（サーバー）がもっている
ものもあるし、他のサーバーがもっているものもある。
図９では、恐竜の生態を説明する映像はサーバー７０５
により提供され、恐竜の生息地の地形や気候等の説明
文、及び恐竜の名前や種族の説明文はサーバー７０６に
よって提供されるといった場合もある。

【００５４】さらに、上記第１，第２の物体ｏｂ１，ｏ
ｂ２の関連データの所在情報は、第１，第２の物体に関
連する別のデータの所在場所であり、本実施の形態で
は、この所在情報としては、インターネット名（関連デ
ータを保持するサーバーの所在場所）とリモートパス
（そのサーバーにおける関連データのファイル名）とを
記述するようにしている。

【００５５】このような構成の本実施の形態１では、動
画像を構成する第１，第２の物体ｏｂ１，ｏｂ２に対応
するデジタル画像信号を符号化して伝送する際、伝送さ
れる画像符号化信号としての符号化ビット列１０１，１
０２を、各物体を画像表示するための表示用情報として
の表示ビット列１４，１８，２４，２７に加えて、該各
物体に関連する関連データの所在情報としての所在ビッ
ト列１３，１７，２３を含むデータ構造としたので、再
生側では、画像符号化信号に基づいて、物体とその関連
データの所在情報とを直接関連付けすることが可能とな
る。このため、上記表示用情報としての画像ファイルと
はフォーマットが異なるテキストファイル（例えばハイ
パーテキスト）を用いる必要がない。この結果、画像を
構成する各物体に対応する関連データをアクセスする時
の操作性の向上を図ることができる。例えば、ユーザ
は、動画像ＭＩの表示画面ＭＰｓ上で、各物体ｏｂ１，
ｏｂ２の表示領域上にマウスポインタＭＰを移動し、ク
リック動作を行うだけで、その物体に関連する関連デー
タを得ることができる。

【００５６】また、上記実施の形態１では、関連データ
の所在情報ＲＬとしての所在ビット列を、第１の物体の
符号化ビット列では全てのフレームについて、また第２
の物体の符号化ビット列では２以上の所定数のフレーム
毎に付加しているので、シーンチェンジの生ずる動画像
の種々のシーンに応じて、該動画像を構成する物体の関
連データの所在情報を変化させることができる。この場
合、関連データは、動画像の種々のシーンによって変化
することとなる。

【００５７】また、動画像を構成する個々の物体につい
ては、物体を表示するための表示用情報と該物体に関連
する関連データとが同一の画像符号化信号に含まれるこ
ととなり、物体に対応する関連データの所在情報の管理
を簡単化することができる。しかも、各物体の関連デー
タの所在情報が物体の画像符号化信号と一体となって伝
送されるため、物体の関連データの所在情報だけが伝送
の誤りにより欠落することはなく、物体に対応する関連
データの所在情報の損失を低減することができる。

【００５８】なお、上記実施の形態１では、関連データ
の所在情報を、所定数のフレーム毎に単位ビット列に付
加するようにしているが、関連データの所在情報は、そ
の値が変わる時点のフレームに相当する単位ビット列に
のみ付加するようにしてもよい。この場合、各単位ビッ
ト列に１ビットのフラグを付加し、このフラグが１のと
きには関連データの所在情報ＲＬが存在し、一方このフ
ラグが０のときに関連データの所在情報が存在しないこ
とを示すようにする。

【００５９】また、全てのフレームの単位ビット列にお
ける関連データの所在情報の値が同じである場合、関連
データの所在情報は、１つの画像系列，つまり１つの物
体に対応する符号化ビット列の先頭にのみ付加してもよ
い。この場合、具体的には図１(b) に示す符号化ビット
列では、先頭フレームの単位ビット列より前に関連デー
タの所在情報としての所在ビット列を配置することとな
る。

【００６０】また、上記実施の形態１では、動画像が２
つの物体から構成されている場合について説明したが、
本発明の画像伝送方法は、上記実施の形態１の場合に限
定されるものではなく、動画像がＮ（Ｎは正の整数）個
の物体から構成されている場合にも適用できる。

【００６１】この場合、第１〜第Ｎの物体に対応するデ
ジタル画像信号が符号化されて第１〜第Ｎの画像符号化
信号が生成され、第１〜第Ｎの画像符号化信号がそれぞ
れ、第１〜第Ｎの画像符号化信号に第１〜第Ｎの物体に
関連する関連データの所在場所を示す所在情報が付加さ
れて伝送されることとなる。

【００６２】実施の形態２．図２は本発明の実施の形態
２による画像伝送方法を説明するための図である。この
実施の形態２の画像伝送方法は、動画像を構成する第
１，第２の物体に対応するデジタル画像信号を符号化す
ると同時にこれを多重化して多重符号化信号を生成し、
この多重符号化信号を伝送するものである。

【００６３】このような伝送方法により送出される多重
符号化信号１０３は、第１，第２の物体を画像表示する
ための表示用情報と、上記第１，第２の物体に対応する
物体識別子及び該第１，第２の物体に対応する関連デー
タの所在情報からなる一覧表情報と、両物体の合成処理
に用いる合成情報とを含むデータ構造となっている。こ
こで、第１，第２の物体に対応する画像符号化信号とし
ての符号化ビット列１０１，１０２は、上記実施の形態
１のものと全く同一のデータ構造となっている。

【００６４】具体的には、上記多重符号化信号を構成す
る多重符号化ビット列１０３は、１つの動画像に対応す
る同期信号としての同期ビット列３０ａと、これに続く
上記一覧表情報ＲＬＴとしての一覧ビット列３０ｂと、
これに続く、複数のビデオパケット３１ｂ〜３５ｂ及び
各ビデオパケットに対応するヘッダ３１ａ〜３５ａとを
含む構成となっている。そして、上記第１の物体ｏｂ１
の画像符号化信号を構成する符号化ビット列１０１と、
第２の物体ｏｂ２の画像符号化信号を構成する符号化ビ
ット列１０２とは所定の符号量毎に分割され、分割され
た各ビット列が、多重符号化ビット列１０３中に上記各
ビデオパケットとして配列されている。

【００６５】例えば、第１の物体ｏｂ１の第ｉ番目のフ
レームに対応する符号化ビット列Ｄ１（ｉ）はビデオパ
ケット３１ｂとビデオパケット３３ｂに割り当てられ、
第２の物体ｏｂ２の第ｉ番目のフレームに対応する符号
化ビット列Ｄ２（ｉ）は、ビデオパケット３２ｂとビデ
オパケット３４ｂ等に割り当てられている。上記各ビデ
オパケット３１ｂ〜３５ｂにはヘッダ３１ａ〜３５ａが
付加してあり、これらのヘッダ３１ａ〜３５ａにはパケ
ット識別子が含まれている。

【００６６】ここでは、パケット識別子を６ビットの固
定長符号により表しており、第１の物体ｏｂ１に対応す
るビデオパケットと第２の物体ｏｂ２に対応するビデオ
パケットとを区別するため、ヘッダ３１ａ，３３ａにお
けるパケット識別子と、ヘッダ３２ａ，３４ａにおける
パケット識別子とは異なるものとなっている。

【００６７】また、上記合成情報もパケット化され、合
成情報パケット３５ｂとして、上記多重符号化ビット列
１０３に含まれている。この合成情報パケット３５ｂに
もこれに対応するヘッダ３５ａがあり、そのヘッダ３５
ａにはビデオパケットにおけるパケット識別子とは異な
るパケット識別子が含まれている。また、上記一覧ビッ
ト列３０ｂからなる所在情報一覧表情報ＲＬＴは、各物
体の物体識別子と、各物体に対応する関連データの所在
情報とを含んでいる。

【００６８】図３は上記所在情報一覧表情報ＲＬＴから
得られる一覧表４０１の例を示しており、この一覧表４
０１における左側の列４０２には物体識別子（objectＩ
Ｄ）としての数値が記述され、右側の列４０３には各画
像（物体）の関連データの所在情報（resource locatio
n ）４０４〜４０６であるインターネット名とリモート
パスが記述されている。なお、図３に示す一覧表４０１
の例では、上記第１の物体ｏｂ１の物体識別子（object
ＩＤ）は「２」であり、上記第２の物体ｏｂ２の物体識
別子（objectＩＤ）は「５」である。また、動画像を構
成する第３の物体が存在する場合は、図３に示すように
第３の物体の物体識別子（objectＩＤ）は例えば「７」
となる。

【００６９】また、図４は上記多重符号化信号の符号化
ビット列１０３に含まれる合成情報５０１の例を示す。
この合成情報５０１には、第１の物体（ｏｂｊ１）に関
する合成データ５０２と、第２の物体（ｏｂｊ２）に関
する合成データ５０３とを含んでいる。

【００７０】第１の物体の合成データ５０２としては、
上記物体識別子（ｉｄ＝２）５０４、背景か前景かを示
す奥行き情報（ｃｏ＝０）５０５、水平配置情報，つま
り動画像の画面ＭＰｓ上での水平方向における第１の物
体の配置情報（ｘｐｏｓ＝０）５０６、垂直配置情報，
つまり動画像の画面ＭＰｓ上での垂直方向における第１
の物体の配置情報（ｙｐｏｓ＝０）５０７、及び関連デ
ータの所在情報（ｕｒｌ）５０８が記述されている。ま
た、第２の物体の合成データ５０３としては、上記第１
の物体の合成データ５０２と同様に、物体識別子（ｉｄ
＝５）５０９、奥行き情報（ｃｏ＝１）５１０、水平配
置情報（ｘｐｏｓ＝０）５１１、垂直配置情報（ｙｐｏ
ｓ＝０）５１２、及び関連データの所在情報（ｕｒｌ）
５１３が記述されている。

【００７１】このように本実施の形態２では、第１の物
体ｏｂ１に対応する画像符号化信号と、第２の物体ｏｂ
２に対応する画像符号化信号とを多重化して伝送する
際、伝送される多重符号化信号を、物体の物体識別子と
物体の関連データの所在情報からなる一覧表情報を含む
データ構造としたので、上記実施の形態１の効果に加え
て、再生側では、多重符号化信号の一部の情報である上
記一覧表情報によって、各物体とこれに対応する関連デ
ータの所在情報との対応関係を把握することができる。

【００７２】また、この実施の形態２では、上記多重符
号化信号に含まれる合成情報をも、上記各物体の物体識
別子と、各物体に対応する関連データの所在情報を有す
るものとしたので、関連データの所在情報の伝送をより
確実に行うことができ、伝送途中での関連データの所在
情報の欠落をほとんどなくすことができる。

【００７３】なお、上記実施の形態２では、多重符号化
信号を、物体の物体識別子と物体の関連データの所在情
報からなる一覧表情報を含むデータ構造とするととも
に、該多重符号化信号に含まれる合成情報をも、物体識
別子と物体の関連データの所在情報を有するものとして
いるが、上記物体識別子と物体の関連データの所在情報
が上記合成情報に含まれている場合は、多重符号化信号
に上記一覧表情報が含まれていなくてもよく、また上記
多重符号化信号に上記一覧表情報が含まれている場合
は、上記合成情報に物体識別子と関連データの所在情報
が含まれていなくてもよい。

【００７４】また、上記実施の形態２では、動画像が２
つの物体から構成されている場合について説明したが、
本発明の画像伝送方法は、上記実施の形態２の場合に限
定されるものではなく、動画像がＮ（Ｎは正の整数）個
の物体から構成されている場合にも適用できる。

【００７５】この場合、第１〜第Ｎの物体に対応するデ
ジタル画像信号が符号化され、さらに第１〜第Ｎの画像
符号化信号が多重化されて１つの多重符号化信号が生成
されることとなる。また、この多重符号化信号は、第１
〜第Ｎの物体識別子と、第１〜第Ｎの物体の関連データ
の所在情報とからなる一覧表を含むものとなり、さら
に、上記合成情報には、少なくとも第１〜第Ｎの物体識
別子と、第１〜第Ｎの物体の関連データの所在情報とが
含まれることとなる。

【００７６】さらに、上記実施の形態１，２では、物体
に関連する関連データは、物体とは別のデータとしてい
るが、物体に関連する関連データは、物体を画像表示す
るための表示用情報としてもよい。

【００７７】実施の形態３．図５は本発明の実施の形態
３によるデジタル画像復号化装置を説明するためのブロ
ック図である。この実施の形態３のデジタル画像復号化
装置２００ａは、上記実施の形態２で説明したような、
合成情報と表示用情報（符号化データ）を含む多重符号
化信号ＭＥｇを受け、複数の物体からなる動画像を再生
するものである。

【００７８】すなわち、このデジタル画像復号化装置２
００ａは、入力端子２００ａに入力された多重符号化信
号ＭＥｇから、第１，第２の物体に対応する符号化デー
タＤ１，Ｄ２と合成情報Ｃｇを分離抽出する分離器（Ｄ
ＥＭＵＸ）２０１と、該合成情報Ｃｇに基づいて制御信
号Ｃｓ１，Ｃｓ２を生成するとともに、各物体に関連す
る関連データをアクセスするためのアクセス信号Ａｓを
生成するコントロールデコーダ２０２と、第１，第２の
物体に対応する符号化データＤ１，Ｄ２を受け、その復
号化処理により第１，第２の画像再生信号Ｒ１，Ｒ２を
生成する第１，第２のビデオデコーダ２０３，２０４
と、該各画像再生信号Ｒ１，Ｒ２を上記制御信号Ｃｓ１
に基づいて格納するフレームメモリバンク２０５とを有
している。ここでは、ＭＰＥＧ１に準拠した符号化方式
に対応する復号化処理を行っており、フレームメモリバ
ンク２０５からは、上記復号化処理で用いる予測信号Ｐ
１，Ｐ２が各ビデオデコーダ２０３，２０４に供給され
るようになっている。ただし、各ビデオデコーダ２０
３，２０４がフレームメモリを有する場合は、上記フレ
ームメモリバンク２０５から各デコーダ２０３，２０４
に予測信号を供給する必要はない。

【００７９】また、上記画像復号化装置２００ａは、コ
ントロールデコーダ２０２からの制御信号Ｃｓ２に基づ
いて、フレームメモリバンク２０５に格納されている第
１，第２の再生画像信号Ｒ１，Ｒ２を合成して合成画像
信号Ｒ１２を生成する合成器２０６と、該合成器の出力
Ｒ１２を画像表示する表示器２０７とを有している。

【００８０】さらに、上記画像復号化装置２００ａは、
上記コントロールデコーダ２０２からのアクセス信号Ａ
ｇを送信信号ＴＡｓとして送信する送信器２２０を有し
ている。

【００８１】なお、この実施の形態では、画像復号化装
置２００ａとして２つのビデオデコーダを有するものを
示しているが、これは画像復号化装置の説明をしやすく
するためであって、実際の画像復号化装置はさらに多く
のビデオデコーダを有するものであってもよい。また、
画像復号化装置におけるビデオデコーダは１つでもよ
く、また、画像合成処理が不要である場合は、合成器２
０６を省略してもよい。

【００８２】また、上記多重符号化信号ＭＥｇは、上記
実施の形態２の伝送方法により送出される多重符号化信
号１０３と全く同一のデータ構造となっている。ただ
し、具体的な符号化データについては上記実施の形態２
とは異なる。つまり、上記実施の形態２では、第１の物
体が恐竜の生息地の画像、第２の物体が恐竜であるのに
対し、この実施の形態３では、第１の物体が魚の画像、
第２の物体が海中の画像としており、第１の物体の関連
データとしては、魚２０１の名前、生態などである。こ
のように画像の関連データとは、当該画像に関する別の
画像もしくは文書のデータであり、動画像を構成する個
々の物体によって、その物体に関連する関連データは異
なる。さらに例を挙げると、ある物体が東京オリンピッ
クの映像である場合、東京オリンピックの映像の関連デ
ータとしては、例えばオリンピックの歴史や開催時の日
本の状況などの映像がある。このようなデータは、実施
の形態２においても説明したように、同じ画像提供者
（サーバー）がもっているものもあるし、他のサーバー
がもっているものもある。図９では、東京オリンピック
の映像を提供するのはサーバー７０５で、オリンピック
の歴史の映像はサーバー７０６によって提供される場合
があることは言うまでもない。

【００８３】次に動作について説明する。本デジタル画
像復号化装置２００ａの入力端子２００ａに上記符号化
データと合成情報を含む多重符号化信号ＭＥｇが入力さ
れると、分離器２０１では、該多重符号化信号ＭＥｇか
ら合成情報Ｃｇ及び第１，第２の物体に対応する符号化
データＤ１，Ｄ２が分離され、該合成情報Ｃｇはコント
ロールデコーダ２０２に送られる。このコントロールデ
コーダ２０２では該合成情報Ｃｇに基づいて、上記制御
信号Ｃｓ１，Ｃｓ２及び上記アクセス信号Ａｓが生成さ
れる。このときアクセス信号Ａｓは、上記合成情報Ｃｇ
に含まれる関連データの所在情報に基づいて生成され
る。

【００８４】一方、上記多重符号化信号ＭＥｇから分離
された第１，第２の物体に対応する符号化データＤ１，
Ｄ２は、それぞれ対応するビデオデコーダ２０３，２０
４に入力される。各ビデオデコーダ２０３及び２０４で
は、各物体に対応する符号化データＤ１，Ｄ２に対する
復号化処理が行われ、該復号化処理により得られた各物
体に対応する画像再生信号Ｒ１，Ｒ２がフレームメモリ
バンク２０５に格納される。本実施の形態のビデオデコ
ーダでは、その復号化処理にＭＰＥＧ１準拠の符号化処
理に代表されるフレーム間動き補償，離散コサイン変換
方式を用いているが、ビデオデコーダにおける復号化処
理には、他の信号変換方式を用いてもよい。

【００８５】また、上記フレームメモリバンク２０５か
らは、コントロールデコーダ２０２からの制御信号Ｃｓ
１に基づいて、合成処理の対象となる物体の画像再生信
号が合成器２０６に読み出される。すると、該合成器２
０６では、上記コントロールデコーダからの制御信号Ｃ
ｓ２に基づいて、上記フレームメモリバンク２０５から
読み出された所定の物体に対応する画像再生信号の合成
処理が行われる。そして、該合成処理により合成された
合成再生信号Ｒ１２が表示器２０７に画像表示される。

【００８６】また、送信器２２０では、コントロールデ
コーダ２０２にて生成された、所定の物体に関連する関
連データを受信するためのアクセス信号Ａｓが、その送
信端子２２１から受信要求信号（送信信号）ＴＡｓとし
て外部に送信する。

【００８７】以下、上記コントロールデコーダ２０２か
らの制御信号Ｃｓ１及びＣｓ２による合成処理の具体例
について、図６を用いて概念的に説明する。なお、ここ
では説明の都合上、上記多重符号化信号ＭＥｇに含まれ
る第１の符号化データＲ１により魚の画像が前景画像
（第１の物体）５１として再生され、上記多重符号化信
号ＭＥｇに含まれる第２の符号化データＲ２により海中
の画像が背景画像（第２の物体）５２として再生され、
第１及び第２の物体により、海中を泳ぐ魚の映像が動画
像５３として表示されるものとする。また、図６には、
上記第１，第２の物体を合成する処理が模式的に示され
ている。

【００８８】上述したように、上記フレームメモリバン
ク２０５には、各ビデオデコーダ２０３及び２０４によ
り再生された、第１，第２の物体５１，５２に対応する
第１，第２の画像再生信号Ｒ１，Ｒ２が格納されてお
り、このフレームメモリバンク２０５からは、上記コン
トロールデコーダ２０２から制御信号Ｃｓ１に基づい
て、所要の物体，ここでは第１，第２の物体５１，５２
に対応する第１，第２の画像再生信号Ｒ１，Ｒ２が合成
器２０６に読み出される。

【００８９】すると、合成器２０６では、上記コントロ
ールデコーダ２０２からの制御信号Ｃｓ２に基づいて、
上記第１，第２の画像再生信号Ｒ１，Ｒ２の合成処理が
行われ、合成画像，つまり動画像に対応する合成再生信
号が生成される。このとき、第１の物体が前景画像で、
第２の物体が背景画像であることは、コントロールデコ
ーダ２０２からの制御信号Ｃｓ２により示されている。

【００９０】次に、上記コントロールデコーダと合成器
による、図４に示す合成情報に基づいた合成処理につい
て詳細に説明する。なお、ここでは説明の都合上、図４
に示す合成情報５０１における第１の物体の合成データ
５０２を、図６に示す魚の画像５１についての合成デー
タとし、該合成情報５０１における第２の物体の合成デ
ータ５０３を、図６に示す海中の画像５２についての合
成データとする。また、上記各合成データ５０２及び５
０３には、各物体の合成時刻（例えば、他の物体との合
成を行うタイミング）に関する情報（図示せず）が含ま
れている。

【００９１】上記コントロールデコーダ２０２には、図
２に示すような一覧表情報ＲＬＴとしての一覧表ビット
列３０ｂ及び合成情報パケット３５ｂが分離器２０１か
ら供給され、さらには、各物体の符号化ビット列におけ
る関連データの所在情報ＲＬとしての所在ビット列１
３，１６，２３等も送られる。またこのコントロールデ
コーダ２０２では、物体あるいは複数の物体により構成
される合成画像に対応する関連データの所在情報を管理
している。

【００９２】一方、合成器２０６は、各物体の合成時刻
に対する基準時刻を、画像復号化装置における時計の所
定の時刻に合わせ、装置の時計が各物体の合成時刻にな
った時点で、物体識別子によって指定された物体の画像
データ（画像再生信号）を、フレームメモリバンク２０
５から読み出す。そして、読み出した画像データを、上
記合成情報における該当する物体の奥行きと配置の情報
に従って合成する。

【００９３】上記合成情報における奥行き情報（ｃｏ＝
０）は、その物体が合成画像における最も後ろに位置す
る背景画像であることを示し、奥行き情報（ｃｏ＝１）
は、奥行き情報（ｃｏ＝０）を有する物体より手前に位
置することを示している。また、水平配置情報（ｘｐｏ
ｓ）は、表示画面における物体の水平方向における位
置、垂直配置情報（ｙｐｏｓ）は、表示画面における物
体の垂直方向における位置を示している。従って、表示
画面上の位置は、位置座標（ｘｐｏｓ，ｙｐｏｓ）によ
り表され、また、位置座標（０、０）は表示画面の中心
位置を示している。

【００９４】そして、コントロールデコーダ２０２で
は、例えば上記合成情報に含まれているその他の情報に
基づいて関連データの必要な所定の物体を判定し、その
物体の関連データをアクセスするためのアクセス信号Ａ
ｓを送信器２２０に出力する。これにより、送信器２２
０は、上記物体の関連データの所在情報に示されたサー
バーに対し受信要求信号ＴＡｓを発信する。すると、該
受信要求信号ＴＡｓを受信したサーバーは、関連データ
の所在情報に記述されたリモートパス（ファイル名）に
従って、上記関連データを上記画像復号化装置２００ａ
の入力端子２１０に送る。なお、本実施の形態では、画
像復号化装置２００ａとサーバーとの間での通信には、
ユーディーピー（ＵＤＰ）という通信プロトコルを利用
している。

【００９５】このように本実施の形態３では、複数の物
体に対応するデジタル画像信号を多重符号化して得られ
る多重符号化信号ＭＥｇを受け、該多重符号化信号に含
まれる、各物体に対応する符号化データＤ１，Ｄ２、各
物体に対応する関連データの所在情報、及び複数の物体
を合成するための合成情報を抽出する分離器２０１と、
上記関連データの所在情報及び合成情報に基づいて、複
数の物体からなる動画像の再生表示を制御するコントロ
ールデコーダ２０２とを備えたので、多重符号化信号の
復号化処理により複数の物体からなる動画像を再生表示
する際、必要な物体に対応する関連データをその所在情
報に基づいてコントロールデコーダ２０２の制御により
自動的に取得することができる。

【００９６】実施の形態４．図７は本発明の実施の形態
４によるデジタル画像復号化装置を説明するためのブロ
ック図である。この実施の形態４のデジタル画像復号化
装置２００ｂは、上記実施の形態３のデジタル画像復号
化装置２００ａの構成に加えて、ユーザがコントロール
デコーダ２０２に指令信号（例えば、上記関連データを
アクセスするためのアクセス信号の発生を指令する信
号）を与えるための入力端末装置２０８を備えたもので
あり、その他の構成及び動作は上記実施の形態３のデジ
タル画像復号化装置２００ａと全く同一である。なお、
ここでは、上記入力端末装置２０８としてマウスを用い
ているが、マウスの代わりにリモートコントローラなど
を用いてもよいことは言うまでもない。

【００９７】このような構成のデジタル画像復号化装置
２００ｂでは、上記入力端末装置２０８により、例え
ば、動画像を構成する複数の物体のうちの所望の物体を
指定して、その関連データを要求する操作を行うと、そ
の操作による指令信号Ｕｓがコントロールデコーダ２０
２に送出される。すると、該デコーダ２０２からは、該
指令信号Ｕｓに基づいて上記物体の関連データをアクセ
スするアクセス信号Ａｓが送信器２２０に供給され、送
信器２２０からは、受信要求信号ＴＡｓが該関連データ
の所在情報が示すサーバに送信される。この受信要求信
号ＴＡｓを受け取ったサーバからは、上記所要の物体の
関連データがデジタル画像復号化装置２００ｂに送信さ
れてくる。

【００９８】このように本実施の形態４では、複数の物
体に対応するデジタル画像信号を多重符号化して得られ
る多重符号化信号を受け、該多重符号化信号に含まれ
る、各物体に対応する符号化データ、各物体に対応する
関連データの所在情報、及び複数の物体を合成するため
の合成情報を抽出する分離器２０１と、上記関連データ
の所在情報及び合成情報に基づいて、複数の物体からな
る動画像の再生表示を制御するコントロールデコーダ２
０２と、動画像を構成する物体をその表示画面上で指定
する入力端末装置（マウス）２０８とを備えたので、多
重符号化信号の復号化処理により複数の物体からなる動
画像が表示されている画面上で、ユーザが所望の物体を
マウスにより指定するだけで、その物体に関連する関連
データを取得することができ、物体の関連データを取得
する際に、動画像の表示画面をテキストファイルの表示
画面に切り替えるといった操作が不要となる。

【００９９】また、物体の関連データの所在情報は物体
の符号化データと一体に付加されているので、符号化デ
ータが損失しない限り関連データの所在情報を失うこと
もない。

【０１００】さらに、上記のように取得した動画像の編
集により、該動画像に新たな物体を追加する場合でも、
動画像の画像符号化信号を変更するだけで、動画像を構
成する各物体の関連データの所在情報も同時に変更され
ることとなり、所在情報の管理も簡単になる。

【０１０１】なお、上記実施の形態３，４では、上記多
重符号化信号ＭＥｇを、所在情報一覧表情報ＲＬＴ、合
成情報、及び関連データの所在情報ＲＬの３つの付加情
報を有するデータ構造としているが、上記多重符号化信
号ＭＥｇは、上記３つの付加情報のうちのいずれか１つ
を含む構成としてもよい。

【０１０２】また、上記実施の形態３，４では、物体に
関連する関連データは、物体とは別のデータとしている
が、物体に関連する関連データは、物体を画像表示する
ための表示用情報としてもよい。

【０１０３】さらに、上記各実施の形態では、符号化信
号として、動画像を構成する物体に対応するデジタル画
像信号を符号化して得られる画像符号化信号を挙げて説
明したが、符号化信号はこれに限らず、音響やスピーチ
を含めたオーディオ信号等を符号化して得られるオーデ
ィオ符号化信号であってもよい。

【０１０４】さらに、上記各実施の形態で示した画像送
信方法や、画像復号化装置の構成を実現するためのプロ
グラムを、フロッピーディスク等のデータ記録媒体に記
録するようにすることにより、上記各実施の形態で示し
た処理を、独立したコンピュータシステムにおいて簡単
に実施することが可能となる。

【０１０５】図８は、上記各実施の形態の画像伝送方法
による伝送処理、あるいは上記画像復号化装置による画
像復号化処理を、これらの信号処理に対応したプログラ
ムを格納したフロッピーディスクを用いて、コンピュー
タシステムにより実施する場合を説明するための図であ
る。

【０１０６】図８(a) は、フロッピーディスクＦＤの正
面からみた外観、断面構造、及び記録媒体であるフロッ
ピーディスク本体を示し、図８(b) は、フロッピーディ
スク本体Ｄの物理フォーマットの例を示している。フロ
ッピーディスク本体ＤはケースＦ内に内蔵され、該ディ
スク本体Ｄの表面には、同心円状に外周から内周に向か
って複数のトラックＴｒが形成され、各トラックは角度
方向に１６のセクタＳｅに分割されている。従って、上
記プログラムを格納したフロッピーディスク本体Ｄで
は、上記フロッピーディスク本体Ｄ上に割り当てられた
領域に、上記プログラムとしてのデータが記録されてい
る。

【０１０７】また、図８(c) は、フロッピーディスクＦ
Ｄに対する上記プログラムの記録再生を行うための構成
を示す。上記プログラムをフロッピーディスクＦＤに記
録する場合は、コンピュータシステムＣｓから上記プロ
グラムとしてのデータをフロッピーディスクドライブＦ
DDを介してフロッピディスクＦＤに書き込む。また、フ
ロッピーディスクＦＤ内のプログラムにより、上記画像
伝送方法あるいは画像復号化装置をコンピュータシステ
ムＣｓ中に構築する場合は、フロッピーディスクドライ
ブＦDDによりプログラムをフロッピーディスクＦＤから
読み出し、コンピュータシステムＣｓに転送する。

【０１０８】なお、上記説明では、データ記録媒体とし
て、上記各実施の形態における伝送処理あるいは復号化
処理を行うためのプログラムを格納したものを挙げた
が、データ記録媒体としては、上記第１あるいは第２の
実施の形態におけるデータ構造の画像符号化信号（符号
化ビット列あるいは多重符号化ビット列）を格納したも
のも挙げられる。またデータ記録媒体に格納する符号化
信号は、画像符号化信号に限らず、上述したオーディオ
符号化信号であってもよい。

【０１０９】また、上記説明では、データ記録媒体とし
てフロッピーディスクを用いたコンピュータシステムに
よる画像処理の説明を行ったが、この画像処理は、光デ
ィスクを用いても同様に行うことができる。また、記録
媒体はこれに限らず、ＩＣカード、ＲＯＭカセット等、
プログラムを記録できるものであれば同様に上記画像処
理を実施することができる。

【０１１０】

【発明の効果】以上のように本発明（請求項１）に係る
画像伝送用データ構造によれば、動画像を構成する個々
の物体に対応する画像符号化信号を、各物体を画像表示
するための表示用情報に加えて、各物体に関連する関連
データの所在場所を示す所在情報を含む構成としたの
で、ユーザが上記動画像の表示画面上で所要の物体を指
定するだけで、該物体に対応する関連データをアクセス
することが可能となる。これにより関連データをアクセ
スする際の操作性の向上を図ることができる。

【０１１１】また、各物体の表示用情報と関連データの
所在情報が一体となっているため、物体の表示用情報を
管理することにより、物体に対応する関連データの所在
情報の管理も行うことができ、関連データの所在情報の
管理が簡単になる。しかも、物体の表示用信号の伝送と
同時に物体の関連データの所在情報も伝送されるため、
伝送誤りによる関連データの損失を大きく低減すること
ができる。

【０１１２】この発明（請求項２）に係る画像伝送方法
によれば、動画像を構成する個々の物体に対応するデジ
タル画像信号を符号化して画像符号化信号を生成し、該
各物体に対応する画像符号化信号を、該画像符号化信号
にその物体に関連する関連データの所在場所を示す所在
情報を付加して伝送するので、上記と同様、各物体に対
応する関連データをアクセスする時の操作性の向上を図
るとともに、該関連データの所在情報の管理を簡単化す
ることができ、しかも、伝送の誤りによる関連データの
損失をほぼ回避することができる。

【０１１３】この発明（請求項３）に係る画像復号化装
置によれば、動画像を構成する個々の物体に対応する画
像符号化信号に含まれる、各物体に対応する関連データ
の所在情報に基づいて、該関連データをアクセスするた
めのアクセス信号を、上記関連データの所在場所である
情報源に送信する送信手段を備えたので、各物体に対応
する関連データをアクセスする時の操作性の向上を図る
とともに、該関連データの所在情報の管理を簡単化する
ことができ、しかも、伝送の誤りによる関連データの損
失をほぼ回避することができる。

【０１１４】この発明（請求項４）によれば、請求項３
記載の画像復号化装置において、上記各物体に対応する
画像符号化信号としての符号化ビット列を、所定数のフ
レームに対応する表示用情報としての表示ビット列毎
に、上記関連データの所在情報としての所在ビット列を
配列した構成としたので、物体の動きに応じて異なる関
連データを、画像の表示画面上での簡単な操作により得
ることができる。

【０１１５】この発明（請求項５）によれば、請求項３
記載の画像復号化装置において、上記各物体に対応する
画像符号化信号としての符号化ビット列を、上記各物体
に対応する関連データの所在情報としての所在ビット列
と、該各物体に対応する表示用情報としての表示ビット
列とを含み、該所在ビット列が上記符号化ビット列の先
頭に配置されている構成としたので、画像符号化信号の
伝送の際には、物体に対応する関連データの所在情報が
まず伝送されることとなり、伝送誤りによる関連データ
の所在情報の欠落を抑制できる。

【０１１６】この発明（請求項６）に係る画像復号化装
置によれば、動画像を構成する個々の物体に対応する画
像符号化信号として、各物体を識別するための物体識別
子と各物体に対応する関連データの所在情報からなる一
覧表情報を含む画像符号化信号を受け、上記関連データ
の所在情報に基づいて、該関連データをアクセスするよ
うにしたので、上記一覧表情報により、動画像を構成す
るすべての物体の関連データの所在情報を得ることがで
きる。

【０１１７】この発明（請求項７）に係る画像復号化装
置によれば、動画像を構成する個々の物体に対応する画
像符号化信号として、複数の物体の合成処理に用いる合
成情報を含む画像符号化信号を受け、該合成情報に含ま
れる、各物体に対応する関連データの所在情報に基づい
て、該関連データをアクセスするようにしたので、上記
合成情報に基づいて上記各物体の関連データを得ること
ができる。

【０１１８】この発明（請求項８）に係る信号伝送用デ
ータ構造によれば、１つの情報群を構成する個々の個別
情報に対応する符号化信号を、各個別情報を再生するた
めの再生用信号に加えて、各個別情報に関連する関連デ
ータの所在場所を示す所在情報を含む構成としたので、
各個別情報に対応する関連データをアクセスする時の操
作性の向上を図るとともに、該関連データの所在情報の
管理を簡単化することができ、しかも、伝送の誤りによ
る関連データの損失をほぼ回避することができる。

【０１１９】この発明（請求項９）に係るデータ記録媒
体によれば、コンピュータによる画像信号の伝送処理の
ためのプログラムを、コンピュータが請求項２記載の画
像伝送方法による画像信号の伝送処理を行うよう構成し
たので、物体の関連データをアクセスする時の操作性を
向上するとともに、該関連データの所在情報の管理を簡
単にすることができ、しかも、伝送の誤りによる関連デ
ータの所在情報の損失がほとんどない画像伝送処理をコ
ンピュータにより実現できる。

【０１２０】この発明（請求項１０）に係るデータ記録
媒体によれば、コンピュータによる復号化処理のための
プログラムを、コンピュータが請求項３記載の画像復号
化装置による画像復号化処理を行うよう構成したので、
動画像を構成する各物体の関連データをアクセスする時
の操作性がよい画像復号化処理をコンピュータにより実
現できる。

【０１２１】この発明（請求項１１）に係る画像伝送用
データ構造によれば、動画像を構成する個々の物体に対
応する画像符号化信号を、各物体を画像表示するための
表示用情報と、該表示用情報の所在場所を示す所在情報
とを含む構成としたので、受信側では、少なくとも各物
体の表示用情報の所在情報を受信すれば、各物体の表示
用情報をその情報源にアクセスすることができ、物体の
表示用情報がなくても、各物体の画像表示を行うことが
できる。

【０１２２】この発明（請求項１２）に係る画像伝送方
法によれば、動画像を構成する個々の物体に対応するデ
ジタル画像信号を符号化して画像符号化信号を生成し、
該各物体に対応する画像符号化信号を、該画像符号化信
号に各物体の表示用情報の所在情報を付加して伝送する
ので、上記と同様、受信側では、少なくとも各物体の表
示用情報の所在情報を受信すれば、各物体の表示用情報
をその情報源にアクセスすることができ、物体の表示用
情報がなくても、各物体の画像表示を行うことができ
る。

【０１２３】この発明（請求項１３）に係る画像復号化
装置によれば、動画像を構成する個々の物体に対応する
画像符号化信号に含まれる、各物体の表示用情報の所在
情報に基づいて、上記表示用情報をアクセスするための
アクセス信号を、上記表示用情報の所在場所である情報
源に送信する送信手段を備えたので、上記物体の表示用
情報の所在情報に基づいて、特定の物体の表示用情報を
必要に応じてその情報源に対してアクセスすることがで
き、受信側にて動画像の編集を簡単に行うことができ
る。

【０１２４】この発明（請求項１４）によれば、請求項
１３記載の画像復号化装置において、上記各物体に対応
する画像符号化信号としての符号化ビット列を、所定数
のフレームに対応する表示用情報としての表示ビット列
毎に、上記表示用情報の所在情報としての所在ビット列
を配列した構成としたので、物体の表示用情報の関連デ
ータが確実に受信されることとなる。

【０１２５】この発明（請求項１５）によれば、請求項
１３記載の画像復号化装置において、上記各物体に対応
する画像符号化信号としての符号化ビット列を、上記各
物体に対応する表示用情報としての表示ビット列と、該
各物体の表示用情報の所在情報としての所在ビット列と
を含み、該所在ビット列が上記符号化ビット列の先頭に
配置されている構成としたので、画像符号化信号の伝送
の際には、物体の表示用情報の所在情報がまず伝送され
ることとなり、伝送誤りによる表示用情報の所在情報の
欠落を抑制できる。

【０１２６】この発明（請求項１６）に係る画像復号化
装置によれば、動画像を構成する個々の物体に対応する
画像符号化信号として、該各物体の表示用情報を含み、
かつ該各物体を識別するための物体識別子と上記各物体
の表示用情報の所在情報とからなる一覧表情報を含む画
像符号化信号を受け、該表示用情報の所在情報に基づい
て、表示用情報のアクセスを行うようにしたので、上記
一覧表情報により、動画像を構成するすべての物体の表
示用情報の所在情報を得ることができる。このため、受
信側では、上記一覧表情報にのみ基づいて、各物体の表
示用情報をその情報源にアクセスして複数の物体からな
る動画像の表示を行うことができる。

【０１２７】この発明（請求項１７）に係る画像復号化
装置によれば、動画像を構成する個々の物体に対応する
画像符号化信号として、複数の物体の合成処理に用いる
合成情報を含む画像符号化信号を受け、該合成情報に含
まれる、該各物体の表示用情報の所在情報に基づいて、
該表示用情報をアクセスするようにしたので、受信側で
は、上記合成情報にのみ基づいて、所望の物体の表示用
情報をその情報源から得ることができる。

【０１２８】このため、例えば、人工衛星から送られて
くる動画像の画像符号化信号を、中継局を介してローカ
ル局に伝送する場合、該画像符号化信号の合成情報に含
まれる所定の物体（コマーシャル）の表示用情報の所在
情報を中継局で各ローカル局に対応したものに書き換え
ることにより、各ローカル局ではその地方に適したコマ
ーシャルを含む動画像を再生することができる。

【０１２９】この発明（請求項１８）に係る信号伝送用
データ構造によれば、１つの情報群を構成する個々の個
別情報に対応する符号化信号を、各個別情報を再生する
ための再生用信号に加えて、各個別情報の再生用信号の
所在情報を含む構成としたので、受信側では、少なくと
も各個別情報の再生用信号の所在情報を受信すれば、各
個別情報の再生用信号をその情報源にアクセスすること
ができ、個別情報の再生用信号がなくても、各個別情報
の再生を行うことができる。

【０１３０】この発明（請求項１９）に係るデータ記録
媒体によれば、コンピュータによる画像信号の伝送処理
のためのプログラムを、コンピュータが請求項１２記載
の画像伝送方法による画像信号の伝送処理を行うよう構
成したので、受信側では、少なくとも各物体の表示用情
報の所在情報を受信すれば、各物体の表示用情報をその
情報源にアクセスすることができ、物体の表示用情報が
なくても、各物体の画像表示を行うことができる画像伝
送処理をコンピュータにより実現できる。

【０１３１】この発明（請求項２０）に係るデータ記録
媒体によれば、コンピュータによる画像信号の復号化処
理のためのプログラムを、コンピュータが請求項１３記
載の画像復号化装置による画像復号化処理を行うよう構
成したので、上記物体の表示用情報の所在情報に基づい
て、特定の物体の表示用情報を必要に応じてその情報源
に対してアクセスすることができ、受信側にて動画像の
編集を簡単に行うことができる画像復号化処理をコンピ
ュータにより実現できる。

【０１３２】以上のように本発明によれば、画像の符号
化データにその画像の関連データの所在情報を埋め込む
ことにより、該関連データをアクセスする時の操作性が
向上し、複数の物体から構成された画像では、個々の物
体の関連データの所在情報の管理が簡単になり、伝送の
誤りによる関連データの損失がほぼなくなる効果が得ら
れる。

【図面の簡単な説明】

【図１】本発明の実施の形態１による画像伝送方法を説
明するための図であり、図１(a) は第１，第２の物体に
より構成される動画像の表示画面を示し、図１(b) ，図
１(c) はそれぞれ第１，第２の物体に対応する画像符号
化信号のデータ構造を示している。

【図２】本発明の実施の形態２による画像伝送方法を説
明するための図であり、第１，第２の物体に対応する画
像符号化信号を多重化した多重符号化信号のデータ構造
を示している。

【図３】上記実施の形態２の画像伝送方法により送出さ
れる画像符号化信号における関連データの所在情報一覧
表の例を示す図である。

【図４】上記実施の形態２の画像伝送方法により送出さ
れる画像符号化信号における合成情報の例を示す図であ
る。

【図５】本発明の実施の形態３によるデジタル画像復号
化装置を示すブロック図である。

【図６】上記実施の形態３のデジタル画像復号化装置に
よる物体の合成処理を説明するための模式図である。

【図７】本発明の実施の形態４によるデジタル画像復号
化装置を説明するためのブロック図である。

【図８】図８(a) 〜図８(c) は、本発明の各実施の形態
のデータ構造を有する画像符号化信号、並びに画像伝送
方法及び画像復号化装置による画像処理をコンピュータ
により実現するためのプログラムを格納するためのデー
タ記録媒体を説明するための図である。

【図９】従来のネットワークのシステムを説明するため
の模式図である。

【図１０】従来のネットワークのシステムの一例である
インターネット上での画像データのアクセスを説明する
ための図であり、図１０(a) はハイパーテキストファイ
ルの画面（ホームページ）を示し、図１０(b) は上記ハ
イパーテキストファイルにおける記述を示し、図１０
(c) は動画像の表示画面を示している。

【符号の説明】

１１，１５，２１，２５，３０ａ 同期ビット列 １２，１６，２２，２６ 識別ビット列 １３，１７，２３ 所在ビット列 １４，１８，２４，２７ 表示ビット列 ３０ｂ 一覧ビット列 ３１ａ〜３５ａ ヘッダ ３１ｂ〜３４ｂ ビデオパケット ３５ｂ 合成情報パケット １０１，１０２ 符号化ビット列 １０３ 多重符号化ビット列 ２００ａ，２００ｂ デジタル画像復号化装置 ２０１ 分離器 ２０２ コントロールデコーダ ２０３，２０４ ビデオデコーダ ２０５ フレームメモリバンク ２０６ 合成器 ２０７ 表示器 ２０８ 入力端末装置 ２１０ 入力端子 ２２０ 送信器 ２２１ 送信端子 Ａｓ アクセス信号 ＣＢ１〜ＣＢ４ 表示制御ボタン Ｃｓ１，Ｃｓ２ 制御信号 Ｃｓ コンピュータシステム Ｃｇ 合成情報 Ｄ フロッピーディスク本体 Ｄ１，Ｄ２ 符号化データ（表示用信号） Ｄ１（ｉ），Ｄ１（ｉ＋１），Ｄ２（ｉ），Ｄ２（ｉ＋
１） 単位ビット列 Ｆ フロッピーディスクケース ＦＤ フロッピーディスク ＦDD フロッピーディスクドライブ ＭＥｇ 多重符号化信号 ＭＰｓ 動画像の表示画面 ＭＩ 動画像 ＭＰｓ 動画像の表示画面 ＭＰ マウスポインタ Ｐ１，Ｐ２ 予測信号 ｏｂ１，ｏｂ２ 第１，第２の物体 Ｒ１，Ｒ２ 画像再生信号（画像データ） Ｒ１２ 合成画像信号 ＴＡｓ 受信要求信号

Claims (20)

【特許請求の範囲】
1. 【請求項１】 動画像を構成する個々の物体に対応する
   デジタル画像信号を符号化して伝送するためのデータ構
   造であって、 上記各物体に対応するデジタル画像信号の符号化により
   得られる画像符号化信号は、 対応する物体を画像表示するための表示用情報と、 対応する物体に関連する関連データの所在場所を示す所
   在情報を含むものであることを特徴とする画像伝送用デ
   ータ構造。
2. 【請求項２】 動画像を構成する個々の物体に対応する
   デジタル画像信号を伝送する方法であって、 上記各物体に対応する画像信号を符号化して画像符号化
   信号を生成し、 該各物体に対応する画像符号化信号を、該画像符号化信
   号にその物体に関連する関連データの所在場所を示す所
   在情報を付加して伝送することを特徴とする画像伝送方
   法。
3. 【請求項３】 動画像を構成する個々の物体に対応する
   デジタル画像信号を符号化して得られる画像符号化信号
   として、該各物体を画像表示するための表示用情報、及
   び該各物体に関連する関連データの所在場所を示す所在
   情報を含む画像符号化信号を受け、該画像符号化信号に
   対して所定の復号化処理を施す画像復号化装置であっ
   て、 上記関連データの所在情報に基づいて、該関連データを
   アクセスするためのアクセス信号を、上記関連データの
   所在場所である情報源に送信する送信手段と、 上記表示用情報を復号化する復号化処理部とを備えたこ
   とを特徴とする画像復号化装置。
4. 【請求項４】 請求項３記載の画像復号化装置におい
   て、 上記各物体に対応する画像符号化信号を構成する符号化
   ビット列は、 所定数のフレームに対応する表示用情報を構成する表示
   ビット列毎に、上記関連データの所在情報を構成する所
   在ビット列を配列したものであることを特徴とする画像
   復号化装置。
5. 【請求項５】 請求項３記載の画像復号化装置におい
   て、 上記各物体に対応する画像符号化信号を構成する符号化
   ビット列は、 上記各物体に対応する関連データの所在情報を構成する
   所在ビット列と、該各物体に対応する表示用情報を構成
   する表示ビット列とを含み、該所在ビット列が上記符号
   化ビット列の先頭に配置されていることを特徴とする画
   像復号化装置。
6. 【請求項６】 動画像を構成する個々の物体に対応する
   デジタル画像信号を符号化して得られる画像符号化信号
   として、該各物体を画像表示するための表示用情報を含
   み、かつ該各物体を識別するための物体識別子と、該物
   体に関連する関連データの所在場所を示す所在情報とか
   らなる一覧表情報を含む画像符号化信号を受け、該画像
   符号化信号に対して所定の復号化処理を施す画像復号化
   装置であって、 上記関連データの所在情報に基づいて、該関連データを
   アクセスするためのアクセス信号を、上記関連データの
   所在場所である情報源に送信する送信手段と、 上記表示用情報を復号化する復号化処理部とを備えたこ
   とを特徴とする画像復号化装置。
7. 【請求項７】 動画像を構成する個々の物体に対応する
   デジタル画像信号を符号化して得られる画像符号化信号
   として、該各物体を画像表示するための表示用情報、及
   び複数の物体の合成処理に用いる合成情報を含む画像符
   号化信号を受け、該画像符号化信号に対して所定の復号
   化処理を施す画像復号化装置であって、 上記各物体に対応する合成情報に、該各物体を識別する
   ための物体識別子とともに含まれる、該各物体に関連す
   る関連データの所在場所を示す所在情報に基づいて、該
   関連データをアクセスするためのアクセス信号を、上記
   関連データの所在場所である情報源に送信する送信手段
   と、 上記表示用情報を復号化する復号化処理部とを備えたこ
   とを特徴とする画像復号化装置。
8. 【請求項８】 １つの情報群を構成する複数の個別情報
   に対応するデジタル信号を符号化して伝送するためのデ
   ータ構造であって、 上記各個別情報に対応するデジタル信号の符号化により
   得られる符号化信号は、 対応する個別情報を再生するための再生用信号と、 対応する個別情報に関連する関連データの所在場所を示
   す所在情報とを含むものであることを特徴とする信号伝
   送用データ構造。
9. 【請求項９】 コンピュータに画像信号の伝送処理を行
   わせるためのプログラムを格納したデータ記録媒体であ
   って、 上記プログラムは、請求項２記載の画像伝送方法による
   画像信号の伝送処理をコンピュータが行うよう構成され
   ていることを特徴とするデータ記録媒体。
10. 【請求項１０】 コンピュータに画像信号の復号化処理
    を行わせるためのプログラムを格納したデータ記録媒体
    であって、 上記プログラムは、請求項３記載の画像復号化装置によ
    る画像復号化処理を、コンピュータが行うよう構成され
    ていることを特徴とするデータ記録媒体。
11. 【請求項１１】 動画像を構成する個々の物体に対応す
    るデジタル画像信号を符号化して伝送するためのデータ
    構造であって、 上記各物体に対応するデジタル画像信号の符号化により
    得られる画像符号化信号は、 対応する物体を画像表示するための表示用情報と、 該表示用情報の所在場所を示す所在情報とを含むもので
    あることを特徴とする画像伝送用データ構造。
12. 【請求項１２】 動画像を構成する個々の物体に対応す
    るデジタル画像信号を伝送する方法であって、 上記各物体に対応するデジタル画像信号を符号化して画
    像符号化信号を生成し、 該各物体に対応する画像符号化信号を、該画像符号化信
    号にその物体を表示するための表示用情報の所在場所を
    示す所在情報を付加して伝送することを特徴とする画像
    伝送方法。
13. 【請求項１３】 動画像を構成する個々の物体に対応す
    るデジタル画像信号を符号化して得られる画像符号化信
    号として、該各物体を画像表示するための表示用情報、
    及び該表示用情報の所在場所を示す所在情報を含む画像
    符号化信号を受け、該画像符号化信号に所定の復号化処
    理を施す画像復号化装置であって、 上記表示用情報の所在情報に基づいて、上記表示用情報
    をアクセスするためのアクセス信号を、上記表示用情報
    の所在場所である情報源に送信する送信手段と、 上記表示用情報を復号化する復号化処理部とを備えたこ
    とを特徴とする画像復号化装置。
14. 【請求項１４】 請求項１３記載の画像復号化装置にお
    いて、 上記各物体に対応する画像符号化信号を構成する符号化
    ビット列は、 所定数のフレームに対応する表示用情報を構成する表示
    ビット列毎に、上記表示用情報の所在情報を構成する所
    在ビット列を配列したものであることを特徴とする画像
    復号化装置。
15. 【請求項１５】 請求項１３記載の画像復号化装置にお
    いて、 上記各物体に対応する画像符号化信号を構成する符号化
    ビット列は、 上記各物体に対応する表示用情報を構成する表示ビット
    列と、該各物体の表示用情報の所在情報を構成する所在
    ビット列とを含み、該所在ビット列が上記符号化ビット
    列の先頭に配置されていることを特徴とする画像復号化
    装置。
16. 【請求項１６】 動画像を構成する個々の物体に対応す
    るデジタル画像信号を符号化して得られる画像符号化信
    号として、該各物体を画像表示するための表示用情報を
    含み、かつ該各物体を識別するための物体識別子と上記
    各物体の表示用情報の所在情報とからなる一覧表情報を
    含む画像符号化信号を受け、該画像符号化信号に対して
    所定の復号化処理を施す画像復号化装置であって、 上記表示用情報の所在情報に基づいて、該表示用情報を
    アクセスするためのアクセス信号を、上記表示用情報の
    所在場所である情報源に送信する送信手段と、 上記表示用情報を復号化する復号化処理部とを備えたこ
    とを特徴とする画像復号化装置。
17. 【請求項１７】 動画像を構成する個々の物体に対応す
    るデジタル画像信号を符号化して得られる画像符号化信
    号として、該各物体を表示するための表示用情報、及び
    複数の物体の合成処理に用いる合成情報を含む画像符号
    化信号を受け、該画像符号化信号に対して所定の復号化
    処理を施す画像復号化装置であって、 上記各物体に対応する合成情報に、該各物体を識別する
    ための物体識別子とともに含まれる、該各物体の表示用
    情報の所在場所を示す所在情報に基づいて、該表示用情
    報をアクセスするためのアクセス信号を、上記表示用情
    報の所在場所である情報源に送信する送信手段と、 上記表示用情報を復号化する復号化処理部とを備えたこ
    とを特徴とする画像復号化装置。
18. 【請求項１８】 １つの情報群を構成する複数の個別情
    報に対応するデジタル信号を符号化して伝送するための
    データ構造であって、 上記各個別情報に対応するデジタル信号の符号化により
    得られる符号化信号は、 対応する個別情報を再生するための再生用信号と、 対応する個別情報の再生用信号の所在場所を示す所在情
    報とを含むものであることを特徴とする信号伝送用デー
    タ構造。
19. 【請求項１９】 コンピュータに画像信号の伝送処理を
    行わせるためのプログラムを格納したデータ記録媒体で
    あって、 上記プログラムは、請求項１２記載の画像伝送方法によ
    る画像信号の伝送処理をコンピュータが行うよう構成さ
    れていることを特徴とするデータ記録媒体。
20. 【請求項２０】 コンピュータに画像信号の復号化処理
    を行わせるためのプログラムを格納したデータ記録媒体
    であって、 上記プログラムは、請求項１３記載の画像復号化装置に
    よる画像復号化処理を、コンピュータが行うよう構成さ
    れていることを特徴とするデータ記録媒体。