JP2000232632A - データ伝送方法，データ伝送システム，データ受信方法，及びデータ受信装置 - Google Patents

Abstract

(57)【要約】 【課題】 ＭＰＥＧ４の画像データをサーバ１００ａ，
１００ｂからクライアント端末２００へ伝送するデータ
伝送システム１０００において、ネットワークの伝送帯
域の消費を小さく抑え、しかも伝送エラーにより受信端
末側で画像の再生が不確実になるのを回避する。 【解決手段】 １シーンを構成する各物体に対応する実
体データのうちの、静止画像及び繰り返し動画像として
の物体に対応する実体データを、上記１シーンに対応す
るシーンデータの再生がクライアント端末２００にて開
始される前に、また、ＳＤＰ情報を、受信側への最初の
伝送データとして、信頼性の高いプロトコルによるダウ
ンロード型伝送処理によりサーバ１００ａ，１００ｂか
らクライアント端末２００に伝送するようにした。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、データ伝送方法，
データ伝送システム，データ送信装置，及びデータ受信
装置に関し、特にＭＰＥＧ４の画像データをその種類に
応じた伝送形式によりインターネットを介して送する方
法に関するものである。

【０００２】

【従来の技術】近年、音声，画像，その他のデータを統
合的に扱うマルチメディア時代を迎え、従来からの情報
メディア，つまり新聞，雑誌，テレビ，ラジオ，電話等
の情報を人に伝達する手段がマルチメディアの対象とし
て取り上げられるようになってきた。一般に、マルチメ
ディアとは、文字だけでなく、図形、音声、特に画像等
を同時に関連づけて表すことをいうが、上記従来の情報
メディアをマルチメディアの対象とするには、その情報
をディジタル形式にして表すことが必須条件となる。

【０００３】ところが、上記各情報メディアの持つ情報
量をディジタル情報量として見積もってみると、文字の
場合１文字当たりの情報量は１〜２バイトであるのに対
し、音声の場合１秒当たり６４kbits （電話品質）、さ
らに動画については１秒当たり１００Mbits （現行テレ
ビ放送品質）以上の情報量が必要となり、上記テレビ等
の情報メディアではその膨大な情報をディジタル形式で
そのまま扱うことは現実的ではない。例えば、テレビ電
話は、６４kbps〜１．５Mbpsの伝送速度を持つサービス
総合ディジタル網（ＩＳＤＮ:Integrated Services Dig
ital Network）によってすでに実用化されているが、テ
レビカメラの映像をそのままＩＳＤＮで送ることは不可
能である。

【０００４】そこで、必要となってくるのが情報の圧縮
技術であり、例えば、テレビ電話の場合、ＩＴＵ−Ｔ
（国際電気通信連合 電気通信標準化部門）で国際標準
化されたＨ．２６１規格の動画圧縮技術が用いられてい
る。また、ＭＰＥＧ１規格の情報圧縮技術によると、通
常の音楽用ＣＤ（コンパクト・ディスク）に音声情報と
ともに画像情報を入れることも可能となる。

【０００５】ここで、ＭＰＥＧ（Moving Picture Exper
ts Group) とは、動画像に対応する画像信号（動画デー
タ）の圧縮伸長技術に関する国際規格であり、ＭＰＥＧ
１は、動画データを１．５Mbpsまで、つまりテレビ信号
の情報を約１００分の１にまで圧縮する規格である。ま
た、ＭＰＥＧ１規格を対象とする伝送速度が主として約
１．５Mbpsに制限されていることから、さらなる高画質
化の要求をみたすべく規格化されたＭＰＥＧ２では、動
画データが２〜１５Mbpsに圧縮される。

【０００６】さらに現状では、ＩＳＯ（International
Organization for Standardization: 国際標準化機構）
によって、具体的には、ＭＰＥＧ１，ＭＰＥＧ２と標準
化を進めてきた作業グループ（ISO/IEC JTC1/SC29/WG1
1) によって、最新の画像符号化方式であるＭＰＥＧ４
の標準化作業が進められている。このＭＰＥＧ４は、物
体単位での符号化処理や信号操作を可能とし、マルチメ
ディア時代に必要な新しい機能を実現するものである。

【０００７】図７及び図８は物体単位の符号化処理を説
明するための図である。ＭＰＥＧ４では、図７に示す１
フレームの画像Ｇは、複数の物体を合成して得られる合
成画像として扱われる。ここでは、１フレームの画像Ｇ
は、背景Ｂ（図８(a)），第１の前景である大きい魚Ｆ
１（図８(b)），第２の前景である小さい魚Ｆ２（図８
(c)）及び第３の前景である水草Ｆ３（図８(d)）から構
成されている。

【０００８】また、ＭＰＥＧ４による物体単位の符号化
処理では、上記合成画像Ｇを構成する各物体（背景Ｂ及
び第１〜第３の前景Ｆ１〜Ｆ３）に対応する画像データ
が個別に符号化される。そして各物体に対応する画像符
号化データ（物体データ）が伝送媒体を介して送信され
る。

【０００９】また、ＭＰＥＧ４による物体単位の復号化
処理では、各物体に対応する画像符号化データが個別
に、あるいは多重化された状態で伝送媒体を介して受信
される。該受信された画像符号化データは、物体別に復
号化処理が施されて各物体に対応する画像復号化データ
が生成される。そして、各物体に対応する画像復号化デ
ータが合成されて、合成画像（復号再生画像）Ｇに対応
する画像再生データ（シーンデータ）が生成される。

【００１０】そしてこのような物体単位で符号化及び復
号化処理が施される画像データの伝送処理では、画像デ
ータを各物体毎に符号化して得られる画像符号化データ
（物体データ）だけでなく、各物体を合成して表示する
ための１フレーム（合成画像の表示領域）上での各物体
の配置を表す情報（シーン記述情報）（図１５(b)参
照）等を含む制御情報も伝送媒体を介して伝送されてい
る。また一方では、近年、コンピュータのネットワーク
を経由して、視聴したい動画像をアクセスすることがで
きる映像提供システムが普及してきている。

【００１１】図９はこのような映像提供システムを説明
するための模式図である。この映像提供システム７００
では、複数のネットワーク，つまりネットワーク７０１
〜７０３は相互に接続されており、各ネットワーク７０
１〜７０３には、映像情報を提供する複数のサーバーが
接続されるとともに、映像情報の提供を受ける複数の映
像受信再生端末装置（以下単に端末装置という。）が接
続されている。なお、図９では、説明を簡単にするた
め、上記端末装置としては、上記ネットワーク７０１に
接続された端末装置７０４のみを示している。また、ネ
ットワーク７０１にはサーバー７０５が、ネットワーク
７０３にはサーバー７０６が、ネットワーク７０２には
サーバー７０７が接続されている。

【００１２】このような映像提供システム７００では、
端末装置７０４が例えばサーバー７０５から映像情報の
提供を受ける場合、まず、該端末装置７０４は上記サー
バー７０５との間で連絡をとり、該端末７０４とサーバ
ー７０５の間で回線の接続状態を成立させる。その後、
該端末装置７０４は、該サーバー７０５から提供される
符号化された所定の画像データを受信し、この画像デー
タを復号化して再生する。

【００１３】以下、上記ネットワークとしてのインター
ネットを介して所定の画像データを取得する具体的な例
について説明する。現在の情報提供システムにおけるネ
ットワークを形成するインターネットには、上述したよ
うに複数の情報源（サーバ）が接続されており、個々の
情報源には、例えば、種々の事柄に関するホームページ
の情報が格納されている。ここでは、端末装置７０４
が、恐竜の世界といったタイトルのホームページＨＰの
情報を保持している情報源に接続され、該端末装置７０
４の表示部に上記ホームページＨＰが表示されている状
況を例に挙げて説明する。

【００１４】このホームページＨＰでは、図１０に示す
ように、恐竜に関連する動画シーンの項目が文字列「シ
ーン１」〜文字列「シーン３」により表示されており、
これら文字列の表示領域が、動画像を指定するための指
定領域Ｄ１〜Ｄ３となっている。この状態で、ユーザが
上記ホームページＨＰ内の、文字列「シーン１」に相当
する指定領域Ｄ１上にマウスポインタＭＰを移動し、マ
ウスのクリック動作を行えば、上記文字列「シーン１」
にリンクした動画シーンＰの画面ＭＰｓが図１１(a) に
示すように表示される。このような画像データの伝送を
行うためのインターネット上での画像（テキスト，音声
及びビデオ）データの伝送処理としては、現在、ダウン
ロード型伝送処理とストリーム型伝送処理がある。

【００１５】このダウンロード型伝送処理では、配信サ
ーバから送信された映像ファイル（画像データ）は端末
側で一旦コピーされ、その後、映像ファイルに対応する
画像が再生されることとなる。このため、この形式の伝
送処理では、ファイルの転送が終了するまでは、端末側
では画像の再生を行うことができず、つまり、転送のた
めの待ち時間があり、ダウンロード型伝送処理は、映像
や音声等の長時間再生には不向きである。一方、ストリ
ーム型伝送処理では、配信サーバから端末への画像デー
タ等の伝送が行われている間にも、端末側にて、受信し
たデータに基づいて画像の再生が行われる。このため、
動画データや音声データ等のリアルタイム処理が必要な
データは、このストリーム型伝送処理により伝送される
こととなる。

【００１６】そして現在では、ストリーム型伝送処理
は、ＲＴＰ（Real-Time Transport Protocol）と呼ばれ
るものが主流となっており、図１６に示すように配信サ
ーバ（送信側）Ｓとパーソナルコンピュータ等の端末
（受信側）ＴとがインターネットにおけるＩＳＤＮ等の
回線により接続された通信システムでは、ＲＴＰにより
画像データの伝送が行われる。

【００１７】このＲＴＰによるデータ伝送では、送信側
と受信側の間で、時間情報としてのタイムスタンプによ
り各パケットに対する処理の同期がとられており、同期
外れ（到着遅延）パケットや送信エラーが発生したエラ
ーパケットは受信側で破棄される。また、破棄されたパ
ケットあるいは喪失したパケットは、各パケットに付与
されているシーケンス番号の抜けにより、受信側で検出
される。

【００１８】

【発明が解決しようとする課題】このような状況におい
て、最近では、ＭＰＥＧ４の画像データをインターネッ
トを介して伝送する方法が検討されている。ＭＰＥＧ４
では、図１１(a)に示す動画シーンＰは、上述したよう
に４つのオブジェクト( 物体) ｏｂ１〜ｏｂ４からなる
合成画像Ｇ１（図１１(b)参照）として扱われる。つま
り、この合成画像Ｇ１では、オブジェクトｏｂ１は空等
を表す静止画像としての背景（図１２(a)）、オブジェ
クトｏｂ２は火山を表す繰り返し動画像としての第１の
前景（図１２(b)）、オブジェクトｏｂ３は大きな恐竜
を表す動画像としての第２の前景（図１２(c)）、オブ
ジェクトｏｂ４は小さな恐竜を表す動画像としての第３
の前景（図１２(d)）である。

【００１９】以下、現在検討されているＭＰＥＧ４対応
のデータ伝送方法について、図１５を用いて説明する。
ただし、以下の説明では、端末Ｔに対するサーバは複数
あってもよい。このデータ伝送方法は、ＭＰＥＧ４で扱
う１シーン（合成画像）に対応する画像データを、該シ
ーンを構成する各物体毎に所定のサーバからＲＴＰによ
りインターネットを介して取得するというものである。

【００２０】まず、図１０で説明したように端末Ｔの表
示部にホームページＨＰが表示されている状態で、ユー
ザが上記ホームページＨＰ内の、文字列「シーン１」に
相当する指定領域Ｄ１上でマウスのクリック動作を行う
と、該文字列「シーン１」にリンクした、このシーン
（合成画像）Ｇ１に対応するセッション関連情報（ＳＤ
Ｐ:Session Description Protocol）（図１３(a)）、及
びイニシャルオブジェクトディスクリプタ（ＩＯＤ:Ini
tial Object Descriptor）（図１３(b)）が、これらの
情報が格納されているサーバＳからインターネット（図
９参照）を介して上記端末Ｔに伝送される。

【００２１】なお、ここで上記セッション関連情報（以
下ＳＤＰ情報ともいう。）には、図１３(a)に示すよう
に、それぞれ合成画像の再生に必要となる、データの種
別と該データの伝送形式及び所在場所（ＵＲＬ：Unifor
m Resource Locator）とが対をなすよう記述されてい
る。具体的には、上記データとしては、上記シーンを構
成する各物体を再生するための物体データ（実体デー
タ），つまり画像データ，オーディオデータ，及びテキ
ストデータだけでなく、制御情報，つまりイニシャルオ
ブジェクトディスクリプタ（ＩＯＤ:Initial Object De
scriptor）、オブジェクトディスクリプタストリーム
（ＯＤＳ：Object Descriptor Stream）、シーンデスク
リプションストリーム（ＳＤＳ：Scene Description St
ream）が挙げられる。

【００２２】また、上記イニシャルオブジェクトディス
クリプタ（以下ＩＯＤ情報ともいう。）には、図１３
(b) に示すように、オブジェクトディスクリプタストリ
ーム（ＯＤＳ：Object Descriptor Stream）自体に対応
するオブジェクトディスクリプタ（ＯＤ：Object Descr
iptor ）のデータ、及びシーンディスクリプションスト
リーム（ＳＤＳ：Scene Description Stream）自体に対
応するオブジェクトディスクリプタ（ＯＤ：Object Des
criptor ）のデータが格納されている。

【００２３】さらに、上記オブジェクトディスクリプタ
ストリーム（以下ＯＤＳ情報ともいう。）には、図１４
(a)に示すように、上記シーンを構成する全ての物体の
オブジェクトディスクリプタ（ＯＤ：Object Descripto
r ）のデータが格納されている。また、シーンデスクリ
プションストリーム（以下ＳＤＳ情報ともいう。）に
は、図１４(b)に示すように、所定の時刻ｔ1 〜ｔn に
対応するシーン記述情報ＳＤ１〜ＳＤｎのデータが格納
されている。

【００２４】上記ＳＤＰ情報及びＩＯＤ情報が上記端末
Ｔに伝送されると、端末Ｔは、各物体に対応するＯＤＳ
情報（つまりオブジェクトディスクリプタＯＤ１〜ＯＤ
４）及び実体データを、それぞれのＵＲＬ（所在情報）
及びシンクロナイゼーションソース（以下単にＳＳＲＣ
ともいう。）を指定してサーバＳ側に要求するととも
に、上記シーンＧ１に対応するＳＤＳ情報（つまりシー
ン記述情報ＳＤ１〜ＳＤｎ）を、そのＵＲＬ（所在情
報）及びＳＳＲＣ（Synchronization Source）を指定し
てサーバ側に要求する。ここで、上記ＳＳＲＣは、ＲＴ
Ｐパケットのチャネルを識別するためのチャネルｉｄで
ある。

【００２５】上記端末Ｔからの要求を受け取った対応す
るサーバＳでは、要求されたデータをパケット化し、各
パケットに、端末側から指定されたＳＳＲＣを付与して
ＲＴＰにより端末Ｔに伝送する。これにより端末Ｔで
は、上記シーンＧ１を構成する各物体の画像データ（物
体データ）、オブジェクトディスクリプタＯＤ１〜ＯＤ
４、シーンデスクリプションＳＤ１〜ＳＤｎを取得し
て、これらのデータに基づいて、上記シーンＧ１の画像
を再生表示することが可能となる。

【００２６】なお、図１５(a)にはオブジェクトデスク
リプタＯＤ１（ｉｄ＝１００）の具体的な記述内容が示
され、図１５(b)にはシーンデスクリプションＳＤ１
（時刻ｔ１）の具体的な記述内容が示されている。とこ
ろが、ＭＰＥＧ４に対応する画像データには、ＳＤＰ情
報，ＩＯＤ情報，ＳＤＳ情報，ＯＤＳ情報等のように伝
送エラーが生ずると、画像再生が不可能となるようなデ
ータ（制御情報）が含まれている。このようなデータ
（制御情報）をＲＴＰにより伝送した場合、伝送エラー
に対するリカバリーが行われないため、受信側端末では
頻繁に画像データの再生ができない状況が生じる。

【００２７】また、上記ダウンロード型伝送処理とスト
リーム型伝送処理とを任意な順序で行った場合、ストリ
ーム型伝送処理により伝送された画像データの再生中
に、ダウンロード型伝送処理により画像データが伝送さ
れる場合もある。この場合には、シーン再生中のデータ
伝送量が極端に増加することとなり、ネットワークの帯
域の消費を小さく抑えることができない。

【００２８】さらに、ＳＤＳ情報とＯＤＳ情報から、シ
ーンを構成する各オブジェクトの個数や階層構成につい
ては把握できるが、物体データ（各オブジェクトに対応
する画像データ）のアドレス（ＵＲＬ）と各オブジェク
トとの対応関係を得ることはできない。

【００２９】本発明は上記のような問題点を解決するた
めになされたもので、伝送エラーにより受信端末側で画
像の再生が不確実になるのを回避することができ、多少
の伝送エラーが生じても、受信端末側での画像再生を確
実に行うことができるデータ伝送方法，データ伝送シス
テム，データ受信方法，及びデータ受信装置を得ること
を目的とする。

【００３０】また、本発明は、シーン再生中のデータ伝
送量が極端に増加するのを回避することができ、ネット
ワークの伝送帯域の消費を小さく抑えることができるデ
ータ伝送方法，データ伝送システム，データ受信方法，
及びデータ受信装置を得ることを目的とする。また、本
発明は、シーンに対応するセッション関連情報に基づい
て、各物体とこれに対応する画像データの所在場所との
対応付けを行うことができるデータ伝送方法，データ伝
送システム，データ受信方法，及びデータ受信装置を得
ることを目的とする。

【００３１】

【課題を解決するための手段】この発明（請求項１）に
係るデータ伝送方法は、シーンを構成する複数の物体を
再生するための複数の物体データを送信側から受信側へ
伝送するデータ伝送方法であって、上記複数の物体デー
タのうち、第１の物体データを、その伝送が完了した後
に受信側にて該第１の物体データに基づいて上記シーン
の再生処理が行われるよう伝送する第１の伝送処理と、
上記複数の物体データのうち、上記第１の物体データ以
外の第２の物体データを、その伝送中に受信側にて該第
２の物体データに基づいて上記シーンの再生処理が行わ
れるよう伝送する第２の伝送処理とを含むものである。

【００３２】この発明（請求項２）に係るデータ伝送方
法は、シーンを再生するためのシーンデータを送信側か
ら受信側へ伝送するデータ伝送方法であって、上記シー
ンデータの一部である第１のデータを、伝送エラーに対
する再送処理を必ずしも行わない第１の伝送プロトコル
により伝送する第１の伝送処理と、上記シーンデータの
一部である第２のデータを、伝送エラーに対する再送処
理を行う第２の伝送プロトコルにより伝送する第２の伝
送処理とを含み、上記第２のデータを、上記シーンを構
成する各物体の階層構造を、該各物体を識別するための
各物体に対応するオブジェクト識別子により示すシーン
記述情報、及び各物体に関連する付帯情報を各物体のオ
ブジェクト識別子と対応させて示すオブジェクト関連情
報としたものである。

【００３３】この発明（請求項３）に係るデータ伝送方
法は、シーンを再生するためのシーンデータを送信側か
ら受信側へ伝送するデータ伝送方法であって、上記シー
ンを構成する各物体を再生するための物体データを、各
物体毎に送信側から受信側へ伝送するとともに、上記物
体を識別するための該各物体に対応するオブジェクト識
別子と、該各物体に対応する物体データの所在場所を示
す所在場所情報とを関連付けるテーブル情報を、送信側
から受信側へ送信するものである。

【００３４】この発明（請求項４）に係るデータ伝送シ
ステムは、シーンを構成する複数の物体を再生するため
の複数の物体データを送信するデータ送信装置と、上記
複数の物体データを受信し、該物体データに基づいて上
記シーンを再生するデータ受信装置とを備え、上記デー
タ伝送装置を、上記複数の物体データのうち、第１の物
体データを、その伝送が完了した後に上記データ受信装
置にて該第１の物体データに基づいて上記シーンの再生
処理が行われるよう送信する第１の送信部と、上記複数
の物体データのうち、上記第１の物体データ以外の第２
の物体データを、その伝送中に上記データ受信装置にて
該第２の物体データに基づいて上記シーンの再生処理が
行われるよう送信する第２の送信部とを有する構成とし
たものである。

【００３５】この発明（請求項５）は、請求項４記載の
データ伝送システムにおいて、上記データ送信装置を、
１シーンを構成する物体に対応する物体データが上記第
１の送信部と第２の送信部のいずれの送信部により送信
されるべき物体データであるかを識別するための伝送形
式識別情報を含む、物体データの伝送及び物体の再生を
行うための制御情報を、上記１シーンに対応するデータ
の伝送処理における受信側への最初の伝送データとし
て、上記第１の送信部により送信する構成としたもので
ある。

【００３６】この発明（請求項６）に係るデータ伝送シ
ステムは、シーンを再生するためのシーンデータを送信
するデータ送信装置と、上記シーンデータを受信して上
記シーンを再生するデータ受信装置とを備え、上記デー
タ送信装置を、上記シーンデータの一部である第１のデ
ータを、伝送エラーに対する再送処理を必ずしも行わな
い第１の伝送プロトコルにより送信する第１の送信部
と、上記シーンデータの一部である第２のデータを、伝
送エラーに対する再送処理を行う第２の伝送プロトコル
により送信する第２の送信部とを有する構成とし、上記
第２の送信部を、上記シーンを構成する物体の階層構造
を、物体を識別するための各物体に対応するオブジェク
ト識別子により示すシーン記述情報、及び各物体に関連
する付帯情報を各物体のオブジェクト識別子と対応させ
て示すオブジェクト関連情報を、上記第２のデータとし
て送信する構成としたものである。

【００３７】この発明（請求項７）に係るデータ伝送シ
ステムは、シーンを構成する物体を再生するための物体
データを、各物体毎に送信するデータ送信装置と、上記
物体データを受信し、該物体データに基づいて上記シー
ンを再生するデータ受信装置とを備え、上記データ送信
装置を、上記物体を識別するための該各物体に対応する
オブジェクト識別子と、該各物体に対応する物体データ
の所在場所を示す所在場所情報とを関連付けるテーブル
情報を送信する情報送信手段を有する構成としたもので
ある。

【００３８】この発明（請求項８）は、請求項７記載の
データ伝送システムにおいて、上記情報送信手段を、上
記テーブル情報を、上記シーンに対応するデータの伝送
処理における受信側への最初の伝送情報である、物体デ
ータの伝送及び物体の再生を行うための制御情報に含め
て送信するよう構成したものである。

【００３９】この発明（請求項９）は、請求項７記載の
データ伝送システムにおいて、上記情報送信手段を、上
記テーブル情報を、各物体に関連する付帯情報を各物体
のオブジェクト識別子と対応させて示すオブジェクト関
連情報に含めて送信するよう構成したものである。

【００４０】この発明（請求項１０）に係るデータ受信
方法は、送信側から送信された、シーンを構成する複数
の物体を再生するための複数の物体データを受信し、該
物体データに基づいて上記シーンを再生するデータ受信
方法であって、上記複数の物体データのうち、第１の物
体データを受信し、該物体データの受信が完了した後、
該第１の物体データに基づいて上記シーンの再生を行う
第１の受信処理と、上記複数の物体データのうち、上記
第１の物体データ以外の第２の物体データを受信しつ
つ、該第２の物体データに基づいて上記シーンの再生を
行う第２の受信処理とを含むものである。

【００４１】この発明（請求項１１）に係るデータ受信
方法は、送信側から送信された、シーンを再生するため
のシーンデータを受信して、上記シーンを再生するデー
タ受信方法であって、伝送エラーに対する再送処理を必
ずしも行わない第１の伝送プロトコルにより送信され
た、上記シーンデータの一部である第１のデータを受信
する第１の受信処理と、伝送エラーに対する再送処理を
行う第２の伝送プロトコルにより送信された、上記シー
ンデータの一部である第２のデータを受信する第２の受
信処理とを含み、上記第２のデータを、上記シーンを構
成する各物体の階層構造を、該各物体を識別するための
各物体に対応するオブジェクト識別子により示すシーン
記述情報、及び各物体に関連する付帯情報を各物体のオ
ブジェクト識別子と対応させて示すオブジェクト関連情
報としたものである。

【００４２】この発明（請求項１２）に係るデータ受信
方法は、送信側から送信されたシーンを再生するための
シーンデータを受信して、上記シーンを再生するデータ
受信方法であって、上記シーンを構成する物体毎に送信
された、該物体を再生するための物体データを受信する
とともに、上記物体を識別するための該各物体に対応す
るオブジェクト識別子と、該各物体に対応する物体デー
タの所在場所を示す所在場所情報とを関連付ける、送信
側からのテーブル情報を受信するものである。

【００４３】この発明（請求項１３）に係るデータ受信
装置は、送信側から送信された、シーンを構成する複数
の物体を再生するための複数の物体データを受信し、該
物体データに基づいて上記シーンを再生するデータ受信
装置であって、上記複数の物体データのうち、第１の物
体データを受信する第１の受信部と、上記複数の物体デ
ータのうち、上記第１の物体データ以外の第２の物体デ
ータを受信する第２の受信部と、上記第１の物体データ
及び第２の物体データに基づいて、上記シーンの再生を
行う再生部とを備え、上記再生部では、上記第１の物体
データに基づくシーンの再生は、該第１の物体データの
受信が完了した後に行われ、上記第２の物体データに基
づく再生は、該第２の物体データの受信と並行して行わ
れるものである。

【００４４】この発明（請求項１４）は、請求項１３記
載のデータ受信装置において、上記物体データの伝送及
び物体の再生を行うための制御情報を、上記シーンに対
応するデータの伝送処理における受信側への最初の伝送
データとして上記第１の受信部にて受信し、上記各物体
に対応する物体データを、上記制御情報に含まれる、該
物体データが上記第１の受信部と第２の受信部のいずれ
の受信部により受信されるべき物体データであるかを示
す伝送形式識別情報に応じて、上記第１及び第２の受信
部のいずれかにて受信するものである。

【００４５】この発明（請求項１５）に係るデータ受信
装置は、送信側から送信されたシーンを再生するための
シーンデータを受信して、該シーンを再生するデータ受
信装置であって、伝送エラーに対する再送処理を必ずし
も行わない第１の伝送プロトコルにより上記シーンデー
タの一部として送信された第１のデータを受信する第１
の受信部と、伝送エラーに対する再送処理を行う第２の
伝送プロトコルにより、上記シーンデータの一部として
送信された第２のデータを受信する第２の受信部とを備
え、上記第２の受信部を、上記シーンを構成する物体の
階層構造を、物体を識別するための各物体に対応するオ
ブジェクト識別子により示すシーン記述情報、及び各物
体に関連する付帯情報を各物体のオブジェクト識別子と
対応させて示すオブジェクト関連情報を、上記第２のデ
ータとして受信する構成としたものである。

【００４６】この発明（請求項１６）に係るデータ受信
装置は、送信側からシーンを構成する物体毎に送信され
た、該物体を再生するための物体データを受信して、上
記シーンを再生するデータ受信装置であって、伝送エラ
ーに対する再送処理を必ずしも行わない第１の伝送プロ
トコルにより上記シーンデータの一部として送信された
第１のデータを受信する第１の受信部と、伝送エラーに
対する再送処理を行う第２の伝送プロトコルにより、上
記シーンデータの一部として送信された第２のデータを
受信する第２の受信部とを備え、上記第２の受信部を、
上記物体を識別するための該各物体に対応するオブジェ
クト識別子と、該各物体に対応する物体データの所在場
所を示す所在場所情報とを関連付ける、送信側からのテ
ーブル情報を、上記第２のデータとして受信する構成と
したものである。

【００４７】この発明（請求項１７）は、請求項１６記
載のデータ受信装置において、上記第２の受信部を、上
記テーブル情報を、上記１シーンに対応するシーンデー
タとして最初に受信する、個々の物体に対応する物体デ
ータの伝送及び物体の再生を行うための制御情報に含ま
れる情報として受信する構成としたものである。

【００４８】この発明（請求項１８）は、請求項１６記
載のデータ受信装置において、上記第２の受信部を、上
記テーブル情報を、各物体に関連する付帯情報を各物体
のオブジェクト識別子と対応させて示す、送信側からの
オブジェクト関連情報に含まれる情報として受信する構
成としたものである。

【００４９】

【発明の実施の形態】以下、本発明の着眼点及び基本原
理について説明する。本件発明者は、ＭＰＥＧ４に対応
する画像データの伝送処理では、伝送エラーによりシー
ンの再生が不確実になる可能性がある、ＳＤＰ情報，Ｉ
ＯＤ情報，ＳＤＳ情報，ＯＤＳ情報等の制御情報につい
ては、伝送エラー発生時にデータを再送する処理などを
行う信頼性の高いプロトコルにより伝送することによ
り、伝送エラーによるシーン再生に与える悪影響を極力
抑えることができることを見いだした。

【００５０】また、本件発明者は、受信側でプリダウン
ロード型の物体データとストリーム型の物体データとを
合成して再生が行われるようなシーンの画像データ（シ
ーンデータ）を伝送する場合には、上記シーンを構成す
る各物体の画像データ（物体データ）のデータ形式を識
別するための識別子を、上記シーンデータの伝送処理の
最初にダウンロードする制御情報等に記述しておき、受
信側でのシーンの再生開始前にダウンロードするように
することにより、シーン再生中のデータ伝送量を削減で
きることを見いだした。

【００５１】なお、ここでダウンロード型の物体データ
とは、背景静止画像，繰り返し動画像，オーディオ，あ
るいはテキストといった物体の画像データであり、一度
受信側に伝送すれば、受信側ではシーンの切り替わりが
生ずるまで利用できるデータである。このようなデータ
は、その伝送が完了した後に受信側にて該データに基づ
いてシーンの再生が行われるよう伝送される。一方、ス
トリーム型の物体データは、時間の経過とともに変化す
る動画像（物体）の画像データであり、例えばあるシー
ンの切り替わりから次のシーンの切り替わりまでのデー
タを全てダウンロードするには時間がかかるものであ
る。このようなデータは、その伝送中に受信側にて該デ
ータに基づいてシーンの再生が行われるよう伝送され
る。

【００５２】さらに、本件発明者は、物体を識別するた
めの各物体に対応するオブジェクト識別子と、各物体の
画像データ（物体データ）とを関連付けるテーブル情報
を伝送することにより、受信側では、各物体とこれに対
応する物体データとを関連つけてシーンの再生を行うこ
とができることを見いだした。以下、本発明の実施の形
態について説明する。

【００５３】（実施の形態１）図１〜図５は、本発明の
実施の形態１によるデータ伝送システムを説明するため
の図であり、図１は、該データ伝送システムの全体的な
構成を概略的に示している。この実施の形態１のデータ
伝送システム１０００は、画像データ，音声データ，テ
キストデータ等の物体データのうちのダウンロード型物
体データをその伝送が完了した後に受信側にて、該デー
タに基づいて情報の再生が行われるよう伝送するダウン
ロード型伝送処理と、上記物体データのうちのストリー
ム型物体データをその伝送中に受信側にて情報の再生が
行われるよう伝送するストリーム型伝送処理のうちのい
ずれかの処理により、所定のサーバからクライアント端
末に対してデータの伝送を行う構成となっている。ここ
で、上記ダウンロード型（以下プリダウンロード型とも
いう。）の物体データは、シーンを構成する比較的デー
タ量の小さい物体データであり、ストリーム型物体デー
タはシーンを構成する比較的データ量の大きい物体デー
タである。

【００５４】このシステム１０００は、所定のデータを
保持する第１〜第３のサーバ１００ａ〜１００ｃと、各
サーバに対して所要のデータを要求するクライアント
（表示端末）２００とを含み、各サーバ１００ａ〜１０
０ｃとクライアント２００とはインターネットにより接
続可能となっている。なおここでは、第１のサーバ（サ
ーバＡ）１００ａは、ストリーム型ビデオデータを保持
し、第２のサーバ（サーバＢ）１００ｂは、プリダウン
ロード型ビデオデータ，ＩＯＤ情報，及びセッション関
連情報（ＳＤＰ情報）を保持し、第３のサーバ（サーバ
Ｃ）１００ｃは、所定のホームページのデータを保持し
ているものとする。ここで、ビデオデータは、シーンを
構成する物体を再生するための画像データである。ま
た、上記ＩＯＤ情報には、１シーンにおける所定時刻ｔ
１〜ｔｎに対応するシーン記述情報ＳＤ１〜ＳＤｎから
なるＳＤＳ情報、及び１シーンを構成するすべての物体
に対応するオブジェクトデスクリプタＯＤからなるＯＤ
Ｓ情報が含まれている。

【００５５】また、上記第２のサーバ１００ｂが保持し
ているセッション関連情報（ＳＤＰ情報）には、図２に
示すように、最初に、データ種別（ＩＯＤ）と対応付け
て、ＩＯＤ情報の所在場所とＩＯＤ情報の伝送形式が記
載されている。その後に、データ種別（ＯＤＳ）と対応
付けて、ＯＤＳ情報の所在場所とＯＤＳ情報の伝送形式
が記載され、さらに、データ種別（ＳＤＳ）と対応付け
て、ＳＤＳ情報の所在場所とＳＤＳ情報の伝送形式が記
載されている。ここではＩＯＤ情報，ＯＤＳ情報，ＳＤ
Ｓ情報の伝送形式はダウンロード型としている。

【００５６】さらに、上記セッション関連情報（ＳＤ
Ｐ）には、データ種別（ビデオ），データ種別（オーデ
ィオ），データ種別（テキスト）と対応付けて、それぞ
れ実体データの所在場所及び該実体データの伝送形式、
さらにこの実体データに対応するオブジェクトディスク
リプタの識別子が記載されている。そして、背景静止画
像や繰り返し動画像、さらにテキストやオーディオ等の
物体に対応する実体データについては、伝送形式として
ダウンロード型と記述され、通常の動画像に対応する実
体データについては、伝送形式としてストリーム型と記
述されている。なお、図３には、上記ＳＤＰ情報におけ
る具体的な記述内容が示されている。ただしデータ種別
の具体的な記述は省略している。

【００５７】そして、上記ＳＤＰ情報には、図２，図３
に示すように、データ種別はｍ＝・・・の形式で記述さ
れ、伝送形式及び所在場所は、データ種別の記述（ｍ＝
・・・）に続いてａ＝・・・の形式で記述され、さらに
オブジェクト識別子は、伝送形式及び所在場所の記述
（ａ＝・・・）に続いて記述されている。ここで、１つ
のデータ種別の記述（ｍ＝・・・）に続く伝送形式及び
所在場所の記述（ａ＝・・・）と、該伝送形式及び所在
場所の記述（ａ＝・・・）に続くオブジェクト識別子の
記述（ａ＝・・・）とにより、１つの物体を識別するた
めの、該物体に対応するオブジェクト識別子と、該物体
に対応する、物体データの所在場所を示す所在場所情報
とを関連付けるテーブル情報が形成されている。

【００５８】また、上記ＩＯＤ情報には、図１３(b)に
示すようにＯＤＳ情報自体に対応するＯＤods（オブジ
ェクトデスクリプタ）のデータと、ＳＤＳ情報自体に対
応するＯＤsds（オブジェクトデスクリプタ）のデータ
が、それぞれ対応するヘッダ情報とともに記述されてい
る。さらに、ＯＤＳ情報には、図１４(a)に示すよう
に、物体に対応するオブジェクトディスクリプタ（Ｏ
Ｄ）のデータがヘッダ情報とともに、１シーンを構成す
る全ての物体に相当する分だけまとめて記述されてい
る。また、ＳＤＳ情報には、図１４(b)に示すように、
１つのシーンの、所定時刻ｔ1 〜ｔｎに対応するシーン
構成を示すシーンディスクリプションＳＤ１〜ＳＤｎの
データがヘッダ情報とともに記述されている。

【００５９】また、オブジェクト識別子（ｉｄ＝１０
０）のオブジェクトディスクリプタ（ＯＤ）には、図１
５(a)に示すように、オブジェクト識別子の値（ｉｄ）
としてのＯＤｉｄ＝１００及びエレメンタリストリーム
ｉｄとしてのＥＳｉｄ＝１０，ＥＳｉｄ＝２０が記述さ
れており、さらにこのオブジェクトがビデオデータとオ
ーディオデータのうちのビデオデータであることを示す
識別子「Ｖｉｄｅｏ」やその他の付帯情報，例えば符号
化された実体データを復号化するための情報等も記述さ
れている。なお、他のオブジェクト識別子のオブジェク
トディスクリプタ（ＯＤ）の記述内容も、図１５(a)に
示すものと同様となっている。さらにＯＤＳ情報自体に
対応するＯＤods（オブジェクトデスクリプタ）の記
述、及びＳＤＳ情報自体に対応するＯＤsds（オブジェ
クトデスクリプタ）の記述も図１５(a)に示すものと同
様となっている。

【００６０】また、シーン記述情報ＳＤ１には、図１５
(b)に示すように、時刻ｔ1 におけるシーンを構成する
オブジェクトの階層構造が記述されており、他の時刻ｔ
2 〜ｔn におけるシーン記述情報ＳＤ２〜ＳＤｎの内容
も図１５(b)に示すものと同様となっている。

【００６１】次に上記データ伝送システムの動作を概略
的に説明する。例えば、クライアント端末２００の表示
部に、第３のサーバ１００ｃに保持されているホームペ
ージＨＰが図１０に示すように表示されており、この状
態で、ユーザがホームページＨＰにおける文字列「シー
ン１」をマウスポインタＭＰのクリック動作により選択
すると、シーン１に対応するＳＤＰ情報の要求が、この
文字列「シーン１」にリンクしたＳＤＰ情報を保持する
第２のサーバ１００ｂに対して行われる。これによりＳ
ＤＰ情報が第２のサーバ１００ｂからクライアント端末
２００に伝送される。

【００６２】すると、クライアント端末２００では、上
記ＳＤＰ情報の記述内容（図２ 参照）に基づいて、Ｉ
ＯＤ情報，ＯＤＳ情報，ＳＤＳ情報並びに各オブジェク
トの実体データ（物体データ）の取得処理が始められ
る。まず、クライアント端末２００では、ＳＤＰ情報の
始めに記述されているＩＯＤ情報を保持しているサーバ
Ｂに対して、その所在場所（ＵＲＬ）及び伝送形式（ダ
ウンロード形式）を指定してＩＯＤ情報の要求を行う。
すると、サーバＢでは、要求されたＩＯＤ情報をダウン
ロード形式の伝送処理によってクライアント端末２００
に伝送する。これによりクライアント端末２００ではサ
ーバＢから上記ＩＯＤ情報を受け取る。ここでは、上記
ダウンロード形式の伝送処理は、ＴＣＰ（Transport Co
ntrol Protocol）に基づくＨＴＴＰ（Hyper Text Trans
fer Protocol）によるものとする。ここで、上記ＩＯＤ
情報には、ＯＤＳ情報自体に対応するＯＤiodのデータ
及びＳＤＳ情報自体に対応するＯＤsdsのデータが含ま
れている。

【００６３】次に、クライアント端末２００は、ＳＤＰ
情報に記述されているＯＤＳ情報及びＳＤＳ情報を保持
しているサーバＢに対して、その所在場所（ＵＲＬ）及
び伝送形式（ダウンロード形式）を指定してＯＤＳ情報
及びＳＤＳ情報の要求を行う。すると、サーバＢでは、
要求されたＯＤＳ情報及びＳＤＳ情報をダウンロード形
式の伝送処理によってクライアント端末２００に伝送す
る。これによりクライアント端末２００ではサーバＢか
ら上記ＯＤＳ情報及びＳＤＳ情報を受け取る。ここで、
上記ＯＤＳ情報は、１シーンに対応する全ての物体のオ
ブジェクトディスクリプタＯＤを含む情報であり、上記
ＳＤＳ情報は、１つのシーンにおける所定時刻ｔ1 〜ｔ
nに対応するシーンデスクリプションＳＤ１〜ＳＤｎを
含む情報である。ここでは、上記ＯＤＳ情報及びＳＤＳ
情報の要求及び取得は、ＴＣＰに基づくＨＴＴＰにより
行われる。また、クライアント端末２００では、ＳＤＰ
情報の記述内容に基づいて、各物体の画像データ（実体
データ）の要求が、伝送形式を指定して行われる。

【００６４】具体的には、まず、クライアント端末２０
０から、上記シーンを構成する背景静止画像や繰り返し
動画像としての物体に対応する画像データ（実体デー
タ）の要求が、伝送形式としてダウンロード形式を指定
して第２のサーバ１００ｂに対して行われる（図１の
〔１〕で示す処理）。すると、該サーバ１００ｂは、要
求されたデータを、指定された伝送形式（ＴＣＰに基づ
くＨＴＴＰ）によりクライアント端末２００に伝送する
（図１の〔２〕で示す処理）。

【００６５】これにより、ＩＯＤ情報，ＯＤＳ情報（１
シーンを構成するすべての物体のＯＤ），ＳＤＳ情報
（１シーンにおける所定時刻のＳＤ１〜ＳＤｎ）等の情
報が信頼性の高い伝送プロトコルにより伝送されること
となり、また、ダウンロード型のオブジェクトの画像デ
ータが、ストリーム型のオブジェクトの画像データの伝
送前の伝送されることとなる。

【００６６】続いて、クライアント端末２００は、上記
ＯＤＳ情報をそのオブジェクトデスクリプタＯＤodsに
基づいて解析して、１シーンを構成するすべての物体の
オブジェクトディスクリプタＯＤ（ｉｄ＝１００，２０
０，３００，４００）を取得するとともに、上記ＳＤＳ
情報をそのオブジェクトデスクリプタＯＤsdsに基づい
て解析して、１シーンにおける所定時刻のシーンデスク
リプションＳＤ１〜ＳＤｎを取得する。その後、上記Ｏ
ＤＳ情報から得られるオブジェクトディスクリプタＯＤ
（ｉｄ＝１００，２００，３００，４００）、及びＳＤ
Ｓ情報から得られるシーンディスクリプションＳＤ１〜
ＳＤｎに基づいて、各物体の実体データの復号化及び合
成を行って、１シーンに対応する画像を再生する。

【００６７】続いて、クライアント端末２００から、動
画像としての物体に対応する画像データ（実体データ）
の要求が、伝送形式としてストリーム形式を指定して第
１のサーバ１００ａに対して行われる（図１の〔３〕で
示す処理）。すると、該サーバ１００ａは、要求された
データを、指定されたストリーム形式の伝送処理により
クライアント端末２００に伝送する（図１の〔４〕で示
す処理）。ここでは、ストリーム形式の伝送処理は、Ｕ
ＤＰ（User Datagram Protocol）に基づくＲＴＰ（Real
Time Transport Protocol）によるものとする。

【００６８】以下、上記実施の形態１のデータ伝送シス
テムにおけるサーバとクライアント端末２００の間での
データ伝送処理について詳細に説明する。図４は、上記
システムにおけるサーバ１００及びクライアント端末２
００の構成を説明するための図である。なお、図４で
は、説明の都合上、サーバ１００は、図１における第
１、第２のサーバ１００ａ、１００ｂをまとめて示して
いる。

【００６９】上記サーバ１００は、各物体の実体データ
（物体データ）や、各物体に対応するＳＤＰ情報，ＯＤ
Ｓ情報，及びＳＤＳ情報等を格納したハードディスク
（ＨＤＤ）１１０と、クライアント端末２００との間
で、ＨＴＴＰにより伝送されたメッセージ（ＨＴＴＰメ
ッセージ）の交換を行って、該メッセージに含まれる、
要求データの所在場所（ＵＲＬ）を出力するＨＴＴＰメ
ッセージ交換部１３１と、クライアント端末２００との
間で、ＲＴＳＰにより伝送されたメッセージ（ＲＴＳＰ
メッセージ）の交換を行って、該メッセージに含まれ
る、要求データの所在場所（ＵＲＬ）とＲＴＰのチャネ
ルｉｄであるＳＳＲＣを出力するとともに、該ＵＲＬの
データ読み込み部への出力に対する応答（ＡＣＫ）を受
けるＨＴＴＰメッセージ交換部１４１とを有している。

【００７０】また、上記サーバ１００は、上記交換部１
３１及び１４１からの要求データの所在場所（ＵＲＬ）
に基づいて上記ハードディスク１１０からデータを読み
出すデータ読み出し部１２０と、読み出されたデータに
対応するＨＴＴＰヘッダを生成するＨＴＴＰヘッダ生成
部１３２と、読み出されたデータをこれに対応するＨＴ
ＴＰヘッダを付加して送出するＨＴＴＰデータ送出部１
３３とを有している。さらに、上記サーバ１００は、読
み出されたデータに対応するＲＴＰパケットを生成し
て、該ＲＴＰパケットに上記交換部１４１から指定され
たＳＳＲＣを付与するＲＴＰパケット生成部１４２と、
該ＳＳＲＣが付与されたＲＴＰパケットを受け、上記メ
ッセージ交換部１４１からのポート信号に基づいて該Ｒ
ＴＰパケットを送出するＲＴＰパケット送出部１４３と
を有している。

【００７１】上記クライアント端末２００は、サーバ１
００のＨＴＴＰデータ送出部１３３の出力を受信して、
オブジェクトの実体データのＵＲＬやそのオブジェクト
ディスクリプタｉｄを出力するとともに、オブジェクト
ディスクリプタＯＤを出力するＨＴＴＰデータ受信部２
１２と、該データ受信部２１２からの出力（ダウンロー
ド型オブジェクトの実体データのＵＲＬ）を受け、サー
バ１００のＨＴＴＰメッセージ交換部１３１との間でＨ
ＴＴＰメッセージの交換を行って、該ＵＲＬを出力する
ＨＴＴＰメッセージ交換部２１１とを有している。

【００７２】また、上記クライアント端末２００は、Ｈ
ＴＴＰデータ受信部２１２の出力（ストリーム型オブジ
ェクトの実体データのＵＲＬ）及びオブジェクトディス
クリプタｉｄを受け、サーバ１００のＲＴＳＰメッセー
ジ交換部１４１との間でＲＴＳＰメッセージの交換を行
って、ＲＴＰポート番号，ＳＳＲＣ，その他のデータを
出力するＲＴＳＰメッセージ交換部２１３と、サーバ１
００のＲＴＰパケット送出部１４３からのＲＴＰパケッ
トを受け、上記メッセージ交換部２１３からのＲＴＰポ
ート番号，ＳＳＲＣ，その他のデータに基づいてＲＴＰ
データを出力するＲＴＰデータ受信部２１４とを有して
いる。

【００７３】さらに、上記クライアント端末２００は、
ＨＴＴＰデータ受信部２１２の出力及びＲＴＰ受信部２
１４の出力に基づいて、各物体の、符号化された画像デ
ータ（実体データ）を復号化するビデオ復号化部２２０
と、該ビデオ復号化部２２０にて復号化された各物体の
画像復号化データを、上記ＨＴＴＰデータ受信部２１２
からのシーン記述情報ＳＤに基づいて合成して、１シー
ンに対応する画像再生データを表示装置へ出力するビデ
オ合成部２３０とを有している。

【００７４】次に、データ伝送システムにおけるサーバ
１００とクライアント端末２００の間でのデータ伝送処
理における、上記サーバ１００とクライアント端末２０
０の詳細な動作について説明する。図３は、上記データ
伝送システムにて扱われるＳＤＰ情報の記述内容，シー
ン記述情報ＳＤの内容，及び再生されるシーンの関連を
示しており、図５はデータ送信システムにおけるセッシ
ョンセットアップの手順、つまり１シーンを構成する各
物体の画像データを取得する手順を説明するための図で
ある。ここでは、クライアント端末２００が、図１１
(b)に示す合成画像Ｇ１を構成する各物体（オブジェク
ト）ｏｂ１〜ｏｂ４を取得して、該合成画像Ｇ１を再生
表示する場合について説明する。

【００７５】従って、図３のＳＤＰ情報では、オブジェ
クトディスクリプタ（ｉｄ：１００）の物体ｏｂ１は、
図１１(b)の合成画像Ｇ１における背景静止画像であ
り、その実体データＤ＿ＶＯ＃１は、サーバＢに格納さ
れた、ダウンロード形式に対応するプロトコル（ＨＴＴ
Ｐ）により伝送要求がなされるデータであることが示さ
れている。また、オブジェクトディスクリプタ（ｉｄ：
２００）の物体ｏｂ２は、図１１(b)の合成画像Ｇ１に
おける第１の前景としての繰り返し動画像（火山）であ
り、その実体データＤ＿ＶＯ＃２は、サーバＢに格納さ
れた、ダウンロード形式に対応するプロトコル（ＨＴＴ
Ｐ）により伝送要求がなされるデータであることが示さ
れている。さらに、オブジェクトディスクリプタ（ｉ
ｄ：３００，４００）の物体ｏｂ３，ｏｂ４は、図１１
(b)の合成画像Ｇ１における第２の前景としての動画像
（大きい恐竜），及び第３の前景としての動画像（小さ
い恐竜）であり、その実体データＳ＿ＶＯ＃１，Ｓ＿Ｖ
Ｏ＃２は、サーバＡに格納された、ストリーム形式に対
応するプロトコル（ＲＴＰ）により伝送要求がなされる
データであることが示されている。

【００７６】また、図３のＳＤ（シーン記述）には、Ｏ
Ｄｉｄが１００である物体及びＯＤｉｄが２００である
物体が、上記シーンＧ１に対応する第１階層の下位階層
（第２階層）に属し、ＯＤｉｄが３００である物体及び
ＯＤｉｄが４００である物体は、第２階層におけるＯＤ
ｉｄが２００である物体の下位階層（第３階層）に属し
ていることが示されている。

【００７７】クライアント端末２００では、図１１(b)
に示すシーン（合成画像）Ｇ１を取得するユーザの指令
がなされると、クライアント端末２００におけるＨＴＴ
Ｐメッセージ交換部２１１からサーバ側のＨＴＴＰメッ
セージ交換部１３１に対してＳＤＰ情報の要求がそのＵ
ＲＬを指定してなされる。すると、サーバ側の交換部１
３１からは、ＳＤＰ情報のＵＲＬがデータ読み込み部１
２０へ送信され、データ読み込み部１２０では、ハード
ディスク１１０からＳＤＰ情報の読み込みが行われる。
該データ読み込み部１２０によりハードディスク１１０
から読み出されたＳＤＰ情報は、ＨＴＴＰヘッダ生成部
１３２で生成されたヘッダが付与され、ＨＴＴＰデータ
送出部１３３からクライアント端末２００へ送出され
る。なお、上記ＳＤＰ情報の要求及び送出はＨＴＴＰに
より行われる。上記サーバのデータ送出部１３３から送
出されたＳＤＰ情報がクライアント端末のＨＴＴＰデー
タ受信部２１２に受信されると、該受信部２１２では、
該ＳＤＰ情報の解析が行われる。

【００７８】まず、クライアント側の受信部２１２か
ら、ＳＤＰ情報の始めに記述されているＩＯＤ情報の要
求の指示がメッセージ交換部２１１に送られ、メッセー
ジ交換部２１１では、記ＳＤＰ情報の要求と同様にして
ＩＯＤ情報の要求がそのＵＲＬを指定してサーバ側のＨ
ＴＴＰメッセージ交換部１３１に対してなされる。これ
により上記ＩＯＤ情報がＳＤＰ情報と同様にしてサーバ
側の送出部１３３からクライアント側の受信部２１２に
送られる。このＩＯＤ情報の要求及び送出もＳＤＰ情報
と同様、ＨＴＴＰにより行われる。

【００７９】上記サーバのデータ送出部１３３から送出
されたＩＯＤ情報がクライアント端末のＨＴＴＰデータ
受信部２１２に受信されると、該受信部２１２では、該
ＩＯＤ情報の解析が行われ、ＯＤＳ情報に対応するＯＤ
odsのデータ及びＳＤＳ情報に対応するＯＤsdsのデータ
が得られる。

【００８０】次に、クライアント側の受信部２１２か
ら、ＳＤＰ情報にてＩＯＤ情報に続いて記述されている
ＯＤＳ情報及びＳＤＳ情報の要求の指示がメッセージ交
換部２１１に送られ、メッセージ交換部２１１では、記
ＳＤＰ情報の要求と同様にしてＯＤＳ情報及びＳＤＳ情
報の要求がそのＵＲＬを指定してサーバ側のＨＴＴＰメ
ッセージ交換部１３１に対してなされる。これにより上
記ＯＤＳ情報及びＳＤＳ情報がＳＤＰ情報と同様にして
サーバ側の送出部１３３からクライアント側の受信部２
１２に送られる。このＯＤＳ情報及びＳＤＳ情報の要求
及び送出もＳＤＰ情報と同様、ＨＴＴＰにより行われ
る。

【００８１】上記サーバのデータ送出部１３３から送出
されたＯＤＳ情報及びＳＤＳ情報がクライアント端末の
ＨＴＴＰデータ受信部２１２に受信されると、該受信部
２１２では、上記ＯＤＳ情報及びＳＤＳ情報の解析がそ
れぞれのオブジェクトデスクリプタＯＤods及びＯＤsds
に基づいて行われ、１シーンに対応する全ての物体のオ
ブジェクトディスクリプタＯＤ及び該シーンの各時刻ｔ
1 〜ｔn に対応するシーンデスクリプションＳＤ１〜Ｓ
Ｄｎが得られる。なお、これらのＯＤＳ情報及びＳＤＳ
情報も、上記ＳＤＰ情報やＩＯＤ情報と同様にしてサー
バＢからクライアント側に伝送される。ここで、上記Ｏ
ＤＳ情報及びＳＤＳ情報の要求及び取得は、ＴＣＰに基
づくＨＴＴＰにより行われる。

【００８２】これにより、クライアント側では、上記選
択したシーンを構成する全ての物体のオブジェクトディ
スクリプタ（ＯＤ）と、該シーンの各時刻ｔ1 〜ｔn に
対応するシーンデスクリプションＳＤ１〜ＳＤｎが取得
されることとなる。上記各オブジェクトディスクリプタ
（ＯＤ）はビデオ復号部２２０に出力され、またシーン
デスクリプションＳＤ１〜ＳＤｎはビデオ合成部２３０
に出力される。

【００８３】その後、クライアント側では、ＨＴＴＰデ
ータ受信部２１２及びＨＴＴＰメッセージ交換部２１１
により、ＳＤＰ情報の記述内容に基づいて、ダウンロー
ド型の物体ｏｂ１の実体データＤ＿ＶＯ＃１の要求が、
そのデータ伝送をダウンロード形式でＨＴＴＰにより行
うことを指定しかつ該実体データのＵＲＬを指定して行
われる。この要求がサーバＢのＨＴＴＰメッセージ交換
部１３１に届くと、該交換部１３１では、上記実体デー
タＤ＿ＶＯ＃１のＵＲＬがデータ読み込み部１２０に伝
送され、さらに該データ読み込み部１２０によるハード
ディスク１１０からの上記実体データＤ＿ＶＯ＃１の読
み込みが行われる。該データ読み込み部１２０からの実
体データＤ＿ＶＯ＃１は、ＨＴＴＰヘッダ生成部１３２
にて所定のヘッダが付与され、さらにＨＴＴＰデータ送
出部１３３によりクライアント側に送出される。

【００８４】そして、この実体データＤ＿ＶＯ＃１はク
ライアント側のＨＴＴＰデータ受信部２１２に受信され
ると、次のオブジェクトの実体データＤ＿ＶＯ＃２の要
求及び取得が上記実体データＤ＿ＶＯ＃１と同様に行わ
れる。なお、上記受信部２１２に受信された実体データ
は順次ビデオ復号部２２０に供給されて、ビデオ合成部
２３０に出力される。

【００８５】続いて、クライアント端末２００から、Ｒ
ＴＳＰメッセージ交換部２１３及びＲＴＳＰデータ受信
部２１４により、上記ＳＤＰ情報に基づいて、動画像と
しての物体に対応する画像データ（実体データ）Ｓ＿Ｖ
Ｏ＃１の要求が、そのデータ伝送をストリーム形式でＲ
ＴＰにより行うことを指定しかつ該実体データのＵＲ
Ｌ，ＲＴＰポート信号，及びＳＳＲＣを指定して行われ
る。

【００８６】この要求がサーバＢのＲＴＳＰメッセージ
交換部１４１に届くと、該交換部１４１からは、上記実
体データＳ＿ＶＯ＃１のＵＲＬがデータ読み込み部１２
０に出力される。このときＳＳＲＣはＲＴＰパケット生
成部１４２に、ポート信号はＲＴＰパケット送出部１４
３に出力される。すると、データ読み込み部１２０で
は、この実体データが指定されたＵＲＬに存在するか否
かを検索し、実体データが存在する場合はＡＣＫ信号が
ＲＴＳＰメッセージ交換部１４１に出力される。

【００８７】続いて、画像データ（実体データ）Ｓ＿Ｖ
Ｏ＃２の要求が、そのデータ伝送をストリーム形式でＲ
ＴＰにより行うことを指定しかつ該実体データのＵＲ
Ｌ，ＲＴＰポート信号，及びＳＳＲＣを指定して行われ
る。すると、上記と同様にして実体データが存在する場
合はＡＣＫ信号がＲＴＳＰメッセージ交換部１４１に出
力される。このようにストリーム型オブジェクトの実体
データについては、順次セットアップが行われる。

【００８８】そして、ユーザの操作に基づいて、上記各
ストリーム型オブジェクトのＰＬＡＹ信号（再生開始信
号）がクライアント側のＲＴＳＰメッセージ交換部２１
３から上記サーバ側のＲＴＳＰメッセージ交換部１４１
に送信されると、各ストリーム型オブジェクトの実体デ
ータがサーバ側からクライアント側に伝送される。な
お、各ストリーム型オブジェクトのＰＬＡＹ信号（再生
開始信号）の送信は各オブジェクト毎に別々に行って
も、一括してまとめて行ってもよい。

【００８９】つまり、該データ読み込み部１２０では、
ハードディスク１１０からの上記実体データＳ＿ＶＯ＃
１，Ｓ＿ＶＯ＃２の読み込みが行われ、該データ読み込
み部１２０から実体データＳ＿ＶＯ＃１，Ｓ＿ＶＯ＃２
がＲＴＰパケット生成部１４２に出力される。該実体デ
ータＳ＿ＶＯ＃１，Ｓ＿ＶＯ＃２は、該生成部１４２に
てパケット化されて、各ＲＴＰパケットに、クライアン
ト側から指定されたチャネルｉｄとしてのＳＳＲＣが付
与されて、ＲＴＰパケット生成部１４３からクライアン
ト側にＲＴＰにより送出される。

【００９０】そして、この実体データＳ＿ＶＯ＃１，Ｓ
＿ＶＯ＃２がクライアント側のＲＴＰデータ受信部２１
４に受信されると、上記受信部２１４に受信された実体
データは順次、上記ＲＴＰパケット受信部２１４にて、
上記ポート信号、ＳＳＲＣ及びその他の補助情報に基づ
いてパケットから取り出されて、ビデオ復号部２２０に
て復号化され、さらにビデオ合成部２３０に出力され
る。このビデオ合成部２３０では、上記ダウンロード型
の実体データＤ＿ＶＯ＃１，Ｄ＿ＶＯ＃２及びストリー
ム型実体データＳ＿ＶＯ＃１，Ｓ＿ＶＯ＃２が、上記シ
ーン記述情報に基づいて合成されて、１シーンに対応す
るシーンデータが表示装置に出力されて、上記シーンが
再生表示される。

【００９１】このように本実施の形態１では、１シーン
を構成する各物体に対応する画像データ（実体データ）
のうちの、静止画像及び繰り返し動画像としての物体に
対応する画像データを、上記１シーンに対応するシーン
データの再生が受信側にて開始される前に伝送するの
で、シーン再生中のデータ伝送量が極端に増加するのを
回避することができ、ネットワークの伝送帯域の消費を
小さく抑えることができる。

【００９２】また、個々の物体に対応する画像データの
伝送及び再生を行うための制御情報（ＳＤＰ情報）を、
各物体に対応する物体データを上記ダウンロード型伝送
処理とストリーム型伝送処理のいずれの形式の伝送処理
により伝送すべきかを識別するための伝送形式識別情報
を含むものとし、ＳＤＰ情報を、１シーンに対応するシ
ーンデータの伝送処理における受信側への最初の伝送デ
ータとして、信頼性の高いプロトコルによる伝送処理に
より伝送するとともに、シーン記述情報ＳＤＳ、及びオ
ブジェクト関連情報ＯＤＳを信頼性の高いプロトコルに
よる伝送処理により伝送するので、受信端末側で画像の
再生が不確実になるのをより一層抑制することができ
る。

【００９３】また、上記ＳＤＰ情報には、１シーンに対
応するシーンデータを、該１シーンを構成する個々の物
体毎に別々に送信側から受信側へ伝送する際、物体を識
別するための、各物体に対応するオブジェクト識別子
と、各物体を再生表示するための物体データの所在場所
を示す、各物体に対応する所在場所情報とを関連付ける
テーブル情報が含まれているので、受信側では、上記テ
ーブル情報に基づいて、各物体とこれに対応する物体デ
ータの所在場所との対応付けを行うことができる。

【００９４】なお、上記実施の形態１では、ＯＤＳ情報
（つまり全ての物体のオブジェクトディスクリプタＯ
Ｄ），及びＳＤＳ情報（各時刻におけるシーンディスク
リプションＳＤ１〜ＳＤｎ）を、別々にサーバ側から取
得する場合について説明したが、これらの情報は１つの
ファイルとしてまとめてサーバ側から取得するようにし
てもよい。

【００９５】実施の形態２．図６は本発明の実施の形態
２のデータ伝送システムを説明するための図であり、こ
のデータ送信システムにおけるセッションセットアップ
の手順を示している。この実施の形態２のシステムで
は、上記ＳＤＰ情報，ＩＯＤ情報，ＯＤＳ情報（つまり
全ての物体のオブジェクトディスクリプタＯＤ），及び
ＳＤＳ情報（各時刻におけるシーンディスクリプション
ＳＤ１〜ＳＤｎ）を、セットアップファイル情報（ＭＳ
Ｆ情報）としてまとめて所定のサーバに格納してある。

【００９６】この実施の形態２では、例えば、クライア
ント端末２００の表示部に、所定のサーバに保持されて
いるホームページＨＰが図１０に示すように表示されて
おり、この状態で、ユーザがホームページＨＰにおける
文字列「シーン１」をマウスポインタＭＰのクリック動
作により選択すると、シーン１に対応するＭＳＦ情報の
要求が、この文字列「シーン１」にリンクしたＭＳＦ情
報を保持するサーバに対して行われる。これによりＭＳ
Ｆ情報が該サーバからクライアント端末２００に伝送さ
れる。このＭＳＦ情報の伝送は、ＴＣＰ（Transport Co
ntrol Protocol）に基づくＨＴＴＰ（Hyper Text Trans
fer Protocol）によるダウンロード形式の伝送処理によ
り行われる。

【００９７】すると、クライアント端末２００では、上
記ＭＳＦ情報に格納されているＳＤＰ情報の記述内容
（図２参照）に基づいて、ＩＯＤ情報並びに各オブジェ
クトの実体データの取得処理が始められる。以降の伝送
処理は、上記実施の形態１と同様である。

【００９８】このような構成の実施の形態２では、上記
ＳＤＰ情報，ＩＯＤ情報，ＯＤＳ情報（つまり全ての物
体のオブジェクトディスクリプタＯＤ），及びＳＤＳ情
報（各時刻におけるシーンディスクリプションＳＤ１〜
ＳＤｎ）を、セットアップファイル情報（ＭＳＦ情報）
として一括して取得するので、ＳＤＰ情報，ＩＯＤ情
報，ＯＤＳ情報，及びＳＤＳ情報等の制御情報を別々に
取得する実施の形態１に比べて、制御情報の取得を簡単
に行うことができる効果がある。

【００９９】なお、上記各実施の形態では、シーンを構
成する各物体（オブジェクト）に対応する物体データと
して、画像データを例に挙げて説明したが、シーンを構
成する各物体に対応する物体データは、音声データであ
ってもよい。さらに、上記画像データは、イメージ（自
然画）のデータに限らず、ＣＧ（コンピュータグラフィ
ック）データやテキストデータであってもよい。

【０１００】また、上記実施の形態１では、各物体の実
体データのＵＲＬとＯＤｉｄとを対応付けるテーブル情
報は、ＳＤＰ情報内に格納するようにしたが、このテー
ブル情報は、ＳＤＰ情報とは独立させてその前後にサー
バ側からクライアント側に伝送するようにしてもよい。

【０１０１】また、上記実施の形態２では、各物体の実
体データのＵＲＬとＯＤｉｄとを対応付けるテーブル情
報は、ＭＳＦ情報におけるＳＤＰ情報内に格納するよう
にしたが、このテーブル情報は、ＳＤＰ情報とは独立さ
せてＭＳＦ情報内に格納するようにしてもよい。

【０１０２】また、上記各実施の形態では、シーンを構
成する物体の階層や、シーンにおける物体の位置を指定
するためのデータ（制御情報）として、ＳＤＳ情報につ
いて説明したが、該制御情報は、上記ＳＤＳ情報に限る
ものではない。

【０１０３】例えば、上記ＳＤＳ情報の代わりに、ＳＭ
ＩＬ（Synchronized Multimedia Integration Languag
e）を用いてもよく、この場合、上記各実施の形態と同
様にオーディオ，ビデオ，テキストなどの物体に対応す
る物体データを、ダウンロード形式あるいはストリーム
形式の伝送処理により送信あるいは受信することが可能
である。さらに、上記ＳＭＩＬが、上記ＩＯＤ情報、Ｏ
ＤＳ情報あるいはＳＤＰ情報と同等の情報を含む場合に
は、上記ＩＯＤ情報、ＯＤＳ情報あるいはＳＤＰ情報を
伝送する必要がないことは言うまでもない。

【０１０４】さらに、上記各実施の形態では、サーバと
クライアント端末の間でのデータ伝送について説明した
が、サーバ及びクライアント端末は共にパーソナルコン
ピュータであってもよく、また、サーバはワークステー
ションであってもよい。さらに、第１のテレビ電話と第
２のテレビ電話の間でのデータ伝送の場合は、データの
送信側も受信側のクライアント端末となる。

【０１０５】またさらに、上記各実施の形態では、デー
タ伝送システムとして、ダウンロード形式の伝送処理
は、ＴＣＰ（Transport Control Protocol）に基づくＨ
ＴＴＰ（Hyper Text Transfer Protocol）により行い、
ストリーム形式の伝送処理は、ＵＤＰ（User Datagram
Protocol）に基づくＲＴＰ（Real Time Transport Prot
ocol）により行うものを示したが、データ伝送システム
における各形式の伝送処理は上記のものに限るものでは
ない。

【０１０６】例えば、ネットワークにおける帯域幅ある
いはエラー率等が一定レベルであることが保証されてい
るような場合には、ネットワークの種類によっては、ス
トリーム形式の伝送処理を、ＴＣＰに基づくＨＴＴＰに
より行うようにすることも可能である。

【０１０７】

【発明の効果】以上のようにこの発明（請求項１）に係
るデータ伝送方法によれば、シーンを構成する複数の物
体を再生するための複数の物体データのうちの特定の物
体データを、その伝送が完了した後に受信側にて該物体
データに基づいて上記シーンの再生処理が行われるよう
伝送するので、シーン再生中のデータ伝送量が極端に増
加するのを回避することができ、ネットワークの伝送帯
域の消費を小さく抑えることができる。

【０１０８】この発明（請求項２）に係るデータ伝送方
法によれば、シーンを構成する各物体の階層構造を、該
各物体を識別するための各物体に対応するオブジェクト
識別子により示すシーン記述情報、及び各物体に関連す
る付帯情報を各物体のオブジェクト識別子と対応させて
示すオブジェクト関連情報を、伝送エラーに対して再送
処理を行う信頼性の高いプロトコルにより伝送するの
で、伝送エラーにより受信端末側で画像の再生が不確実
になるのを抑制することができ、伝送エラーが多少生じ
ても、受信側端末では画像再生を良好に行うことができ
る。

【０１０９】この発明（請求項３）に係るデータ伝送方
法によれば、シーンを構成する物体を識別するための該
各物体に対応するオブジェクト識別子と、該各物体に対
応する物体データの所在場所を示す所在場所情報とを関
連付けるテーブル情報を、送信側から受信側へ送信する
ので、受信側では、上記テーブル情報に基づいて、各物
体とこれに対応する物体データの所在場所との対応付け
を行うことができる。

【０１１０】この発明（請求項４）に係るデータ伝送シ
ステムによれば、シーンを構成する複数の物体を再生す
るための複数の物体データのうち第１の物体データを送
信する第１の送信部、及び上記複数の物体データのうち
第１の物体データ以外の第２の物体データを送信する第
２の送信部を有するデータ送信装置と、上記複数の物体
データを受信し、該物体データに基づいて上記シーンを
再生するデータ受信装置とを備え、上記データ送信装置
では、上記複数の物体データのうちの第１の物体データ
を、その伝送が完了した後に受信側にて該物体データに
基づいて上記シーンの再生処理が行われるよう伝送する
ので、シーン再生中のデータ伝送量が極端に増加するの
を回避することができ、ネットワークの伝送帯域の消費
を小さく抑えることができる。

【０１１１】この発明（請求項５）によれば、請求項４
記載のデータ伝送システムにおいて、上記データ送信装
置では、物体データの伝送及び物体の再生を行うための
制御情報を、これに１シーンを構成する物体に対応する
物体データが、上記第１及び第２の送信部のいずれの送
信部により送信されるべき物体データであるかを識別す
るための伝送形式識別情報を含めて、上記１シーンに対
応するデータの伝送処理における受信側への最初の伝送
データとして送信するので、ネットワークの伝送帯域の
消費を小さく抑えることができる効果に加えて、伝送エ
ラーにより受信端末側で画像の再生が不確実になるのを
抑制することができる。

【０１１２】この発明（請求項６）に係るデータ伝送シ
ステムによれば、シーンを再生するためのシーンデータ
を送信するデータ送信装置と、上記シーンデータを受信
して上記シーンを再生するデータ受信装置とを備え、上
記データ伝送装置では、上記シーンを構成する物体の階
層構造を、物体を識別するための各物体に対応するオブ
ジェクト識別子により示すシーン記述情報、及び各物体
に関連する付帯情報を各物体のオブジェクト識別子と対
応させて示すオブジェクト関連情報を、伝送エラーに対
して再送処理を行う信頼性の高い伝送プロトコルにより
送信するので、伝送エラーにより受信端末側で画像の再
生が不確実になるのを抑制することができ、伝送エラー
が多少生じても、受信側端末では画像再生を良好に行う
ことができる。

【０１１３】この発明（請求項７，８，９）に係るデー
タ伝送システムは、シーンを構成する物体を再生するた
めの物体データを、各物体毎に送信するデータ送信装置
と、上記物体データを受信し、該物体データに基づいて
上記シーンを再生するデータ受信装置とを備え、上記デ
ータ送信装置では、上記物体を識別するための該各物体
に対応するオブジェクト識別子と、該各物体に対応する
物体データの所在場所を示す所在場所情報とを関連付け
るテーブル情報を送信するようにしたので、受信側で
は、上記テーブル情報に基づいて、各物体とこれに対応
する物体データの所在場所との対応付けを行うことがで
きる。

【０１１４】この発明（請求項１０）に係るデータ受信
方法によれば、送信側からのシーンを構成する複数の物
体を再生するための複数の物体データのうち、特定の物
体データを、該物体データに基づいて、物体からなるシ
ーンの再生が行われる前に受信するので、シーン再生中
のデータ伝送量が極端に増加するのを回避することがで
き、ネットワークの伝送帯域の消費を小さく抑えること
ができる。

【０１１５】この発明（請求項１１）に係るデータ受信
方法によれば、伝送エラーに対して再送処理を行う伝送
プロトコルにより送信されたデータとして、シーンを構
成する各物体の階層構造を、該各物体を識別するための
各物体に対応するオブジェクト識別子により示すシーン
記述情報、及び各物体に関連する付帯情報を各物体のオ
ブジェクト識別子と対応させて示すオブジェクト関連情
報を受信するので、伝送エラーにより受信端末側で画像
の再生が不確実になるのを抑制することができ、伝送エ
ラーが多少生じても、シーンの再生を良好に行うことが
できる。

【０１１６】この発明（請求項１２）に係るデータ受信
方法によれば、シーンを構成する物体毎に送信された、
該物体を再生するための物体データを受信するととも
に、上記各物体に対応するオブジェクト識別子と、該各
物体に対応する物体データの所在場所を示す所在場所情
報とを関連付けるテーブル情報を受信するので、シーン
の再生処理の際に、上記テーブル情報に基づいて、各物
体とこれに対応する物体データの所在場所との対応付け
を行うことができる。

【０１１７】この発明（請求項１３）に係るデータ受信
装置によれば、送信側からのシーンを構成する複数の物
体を再生するための複数の物体データのうち、第１の物
体データを受信する第１の受信部と、上記複数物体デー
タのうち、第１の物体データ以外の第２の物体データを
受信する第２の受信部とを備え、再生部では、上記第１
の物体データに基づいてシーンを再生する処理を、該第
１の物体データの受信が完了した後に行い、上記第２の
物体データに基づいてシーンを再生する処理を、該第２
の物体データの受信と並行して行うので、シーン再生中
のデータ伝送量が極端に増加するのを回避することが可
能となる。

【０１１８】この発明（請求項１４）によれば、請求項
１３記載のデータ受信装置において、上記物体データの
伝送及び物体の再生を行うための制御情報に含まれる、
該物体データが上記第１及び第２の物体データのいずれ
の物体データであるかを示す伝送形式識別情報に応じ
て、物体データを上記第１及び第２の受信部のいずれか
にて受信するので、ネットワークの伝送帯域の消費を小
さく抑えるとともに、伝送エラーにより受信端末側で画
像の再生が不確実になるのを抑制することが可能とな
る。

【０１１９】この発明（請求項１５）に係るデータ受信
装置によれば、伝送エラーに対して再送処理を行う伝送
プロトコルにより送信されたデータとして、シーンを構
成する物体の階層構造を、物体を識別するための各物体
に対応するオブジェクト識別子により示すシーン記述情
報、及び各物体に関連する付帯情報を各物体のオブジェ
クト識別子と対応させて示すオブジェクト関連情報を受
信する受信部を備えたので、伝送エラーにより受信端末
側で画像の再生が不確実になるのを抑制することが可能
となる。

【０１２０】この発明（請求項１６，１７，１８）に係
るデータ受信装置によれば、伝送エラーに対して再送処
理を行う伝送プロトコルにより送信されたデータとし
て、物体を識別するための該各物体に対応するオブジェ
クト識別子と、該各物体に対応する物体データの所在場
所を示す所在場所情報とを関連付ける、送信側からのテ
ーブル情報を受信する受信部を備えたので、伝送エラー
が多少発生しても、上記テーブル情報に基づいて、各物
体とこれに対応する物体データの所在場所との対応付け
を良好に行うことができる。

【図面の簡単な説明】

【図１】本発明の実施の形態１によるデータ伝送システ
ムを説明するための図であり、該システムの全体構成を
示している。

【図２】上記実施の形態１のデータ伝送システムにて制
御情報として伝送されるＳＤＰ情報の内容を示す図であ
る。

【図３】上記実施の形態１のデータ伝送システムにて扱
われるＳＤＰ情報の記述内容，シーン記述内容，及び再
生されるシーンの関連を説明するための図である。

【図４】上記実施の形態１のデータ伝送システムにおけ
るサーバ（データ送信装置）及びクラインアント端末
（データ受信装置）の構成を示すブロック図である。

【図５】上記実施の形態１によるデータ送信システムに
おけるセッションセットアップの手順を説明するための
図である。

【図６】本発明の実施の形態２によるデータ送信システ
ムにおけるセッションセットアップの手順を説明するた
めの図である。

【図７】ＭＰＥＧ４で扱われる合成画像を示す図であ
る。

【図８】上記合成画像を構成する各物体として、背景
（図(a)），第１の前景（図(b)），第２の前景（図
(c)），第３の前景（図(d)）を示す図である。

【図９】従来のネットワークシステムを説明するための
模式図である。

【図１０】上記ネットワークシステムにて取得されたホ
ームページの画面を示す図である。

【図１１】上記ホームページにリンクした動画ファイル
の画像を示す図であり、ＭＰＥＧ４以前の規格で扱われ
る画像データによるシーン（図(a)）、ＭＰＥＧ４で扱
われる画像データによるシーン（図(b)）を示してい
る。

【図１２】図１１(b)に示すシーンとしての合成画像を
構成する各物体として、静止画像としての背景（図
(a)），繰り返し動画像としての第１の前景（図(b)），
動画像としての第２，第３の前景（図(c) ，(d)）を示
す図である。

【図１３】ＭＰＥＧ４で扱われる画像データにおけるＳ
ＤＰ情報の内容（図(a)）、及びＩＯＤ情報の内容（図
(b)）を説明するための図である。

【図１４】上記ＩＯＤ情報に含まれるＯＤＳ情報の内容
（図(a)）、及び該ＩＯＤ情報に含まれるＳＤＳ情報の
内容（図(b)）を説明するための図である。

【図１５】ＭＰＥＧ４におけるオブジェクトディスクリ
プタＯＤ（ｉｄ：１００）（図(a)）及びシーンディス
クリプションＳＤ１（時刻ｔ１）（図(b)）を説明する
ための図である。

【図１６】サーバと端末の間でインターネットを介して
ＲＴＰによりデータ伝送を行う従来のデータ伝送システ
ムを示す図である。

【符号の説明】

１００，７０５〜７０７，Ｓ サーバ １００ａ サーバＡ １００ｂ サーバＢ １００ｃ サーバＣ １１０ ハードディスク １２０ データ読み込み部 １３１，２１１ ＨＴＴＰメッセージ交換部 １３２ ＨＴＴＰヘッダ生成部 １３３ ＨＴＴＰデータ送出部 １４１，２１３ ＲＴＳＰメッセージ交換部 １４２ ＲＴＰパケット生成部 １４３ ＲＴＰパケット送出部 ２００ クライアント（表示端末） ２１２ ＨＴＴＰデータ受信部 ２１４ ＲＴＰデータ受信部 ２２０ ビデオ復号化部 ２３０ ビデオ合成部 ７００ 映像提供システム ７０１〜７０３ ネットワーク ７０４ 端末装置 ７０５〜７０７，Ｓ サーバ １０００ ネットワークシステム Ｇ，Ｇ１ シーン（合成画像） Ｂ 背景としてのオブジェクト（物体） Ｄ１〜Ｄ３ 指定領域 Ｆ１〜Ｆ３ 前景としてのオブジェクト（物体） ＨＰ ホームページ ＭＰ マウスポインタ ＭＰｓ 表示画面 ＳＤＰ セッション関連情報 ＳＤ シーン記述情報 Ｔ 端末 Ｐ シーン ＯＤ オブジェクトディスクリプタ ｏｂ１〜ｏｂ４ オブジェクト

Claims (18)

【特許請求の範囲】
1. 【請求項１】 シーンを構成する複数の物体を再生する
   ための複数の物体データを送信側から受信側へ伝送する
   データ伝送方法であって、 上記複数の物体データのうち、第１の物体データを、そ
   の伝送が完了した後に受信側にて該第１の物体データに
   基づいて上記シーンの再生処理が行われるよう伝送する
   第１の伝送処理と、 上記複数の物体データのうち、上記第１の物体データ以
   外の第２の物体データを、その伝送中に受信側にて該第
   ２の物体データに基づいて上記シーンの再生処理が行わ
   れるよう伝送する第２の伝送処理とを含むことを特徴と
   するデータ伝送方法。
2. 【請求項２】 シーンを再生するためのシーンデータを
   送信側から受信側へ伝送するデータ伝送方法であって、 上記シーンデータの一部である第１のデータを、伝送エ
   ラーに対する再送処理を必ずしも行わない第１の伝送プ
   ロトコルにより伝送する第１の伝送処理と、 上記シーンデータの一部である第２のデータを、伝送エ
   ラーに対する再送処理を行う第２の伝送プロトコルによ
   り伝送する第２の伝送処理とを含み、 上記第２のデータは、上記シーンを構成する各物体の階
   層構造を、該各物体を識別するための各物体に対応する
   オブジェクト識別子により示すシーン記述情報、及び各
   物体に関連する付帯情報を各物体のオブジェクト識別子
   と対応させて示すオブジェクト関連情報であることを特
   徴とするデータ伝送方法。
3. 【請求項３】 シーンを再生するためのシーンデータを
   送信側から受信側へ伝送するデータ伝送方法であって、 上記シーンを構成する各物体を再生するための物体デー
   タを、各物体毎に送信側から受信側へ伝送するととも
   に、 上記物体を識別するための該各物体に対応するオブジェ
   クト識別子と、該各物体に対応する物体データの所在場
   所を示す所在場所情報とを関連付けるテーブル情報を、
   送信側から受信側へ送信することを特徴とするデータ伝
   送方法。
4. 【請求項４】 シーンを構成する複数の物体を再生する
   ための複数の物体データを送信するデータ送信装置と、 上記複数の物体データを受信し、該物体データに基づい
   て上記シーンを再生するデータ受信装置とを備え、 上記データ伝送装置は、 上記複数の物体データのうち、第１の物体データを、そ
   の伝送が完了した後に上記データ受信装置にて該第１の
   物体データに基づいて上記シーンの再生処理が行われる
   よう送信する第１の送信部と、 上記複数の物体データのうち、上記第１の物体データ以
   外の第２の物体データを、その伝送中に上記データ受信
   装置にて該第２の物体データに基づいて上記シーンの再
   生処理が行われるよう送信する第２の送信部とを有して
   いることを特徴とするデータ伝送システム。
5. 【請求項５】 請求項４記載のデータ伝送システムにお
   いて、 上記データ送信装置は、１シーンを構成する物体に対応
   する物体データが上記第１の送信部と第２の送信部のい
   ずれの送信部により送信されるべき物体データであるか
   を識別するための伝送形式識別情報を含む、物体データ
   の伝送及び物体の再生を行うための制御情報を、上記１
   シーンに対応するデータの伝送処理における受信側への
   最初の伝送データとして、上記第１の送信部により送信
   することを特徴とするデータ伝送システム。
6. 【請求項６】 シーンを再生するためのシーンデータを
   送信するデータ送信装置と、 上記シーンデータを受信して上記シーンを再生するデー
   タ受信装置とを備え、 上記データ送信装置は、 上記シーンデータの一部である第１のデータを、伝送エ
   ラーに対する再送処理を必ずしも行わない第１の伝送プ
   ロトコルにより送信する第１の送信部と、 上記シーンデータの一部である第２のデータを、伝送エ
   ラーに対する再送処理を行う第２の伝送プロトコルによ
   り送信する第２の送信部とを有し、 上記第２の送信部は、上記シーンを構成する物体の階層
   構造を、物体を識別するための各物体に対応するオブジ
   ェクト識別子により示すシーン記述情報、及び各物体に
   関連する付帯情報を各物体のオブジェクト識別子と対応
   させて示すオブジェクト関連情報を、上記第２のデータ
   として送信することを特徴とするデータ伝送システム。
7. 【請求項７】 シーンを構成する物体を再生するための
   物体データを、各物体毎に送信するデータ送信装置と、 上記物体データを受信し、該物体データに基づいて上記
   シーンを再生するデータ受信装置とを備え、 上記データ送信装置は、 上記物体を識別するための該各物体に対応するオブジェ
   クト識別子と、該各物体に対応する物体データの所在場
   所を示す所在場所情報とを関連付けるテーブル情報を送
   信する情報送信手段を有することを特徴とするデータ伝
   送システム。
8. 【請求項８】 請求項７記載のデータ伝送システムにお
   いて、 上記情報送信手段は、 上記テーブル情報を、上記シーンに対応するデータの伝
   送処理における受信側への最初の伝送情報である、物体
   データの伝送及び物体の再生を行うための制御情報に含
   めて送信するよう構成されていることを特徴とするデー
   タ伝送システム。
9. 【請求項９】 請求項７記載のデータ伝送システムにお
   いて、 上記情報送信手段は、 上記テーブル情報を、各物体に関連する付帯情報を各物
   体のオブジェクト識別子と対応させて示すオブジェクト
   関連情報に含めて送信するよう構成されていることを特
   徴とするデータ伝送システム。
10. 【請求項１０】 送信側から送信された、シーンを構成
    する複数の物体を再生するための複数の物体データを受
    信し、該物体データに基づいて上記シーンを再生するデ
    ータ受信方法であって、 上記複数の物体データのうち、第１の物体データを受信
    し、該物体データの受信が完了した後、該第１の物体デ
    ータに基づいて上記シーンの再生を行う第１の受信処理
    と、 上記複数の物体データのうち、上記第１の物体データ以
    外の第２の物体データを受信しつつ、該第２の物体デー
    タに基づいて上記シーンの再生を行う第２の受信処理と
    を含むことを特徴とするデータ受信方法。
11. 【請求項１１】 送信側から送信された、シーンを再生
    するためのシーンデータを受信して、上記シーンを再生
    するデータ受信方法であって、 伝送エラーに対する再送処理を必ずしも行わない第１の
    伝送プロトコルにより送信された、上記シーンデータの
    一部である第１のデータを受信する第１の受信処理と、 伝送エラーに対する再送処理を行う第２の伝送プロトコ
    ルにより送信された、上記シーンデータの一部である第
    ２のデータを受信する第２の受信処理とを含み、 上記第２のデータは、上記シーンを構成する各物体の階
    層構造を、該各物体を識別するための各物体に対応する
    オブジェクト識別子により示すシーン記述情報、及び各
    物体に関連する付帯情報を各物体のオブジェクト識別子
    と対応させて示すオブジェクト関連情報であることを特
    徴とするデータ受信方法。
12. 【請求項１２】 送信側から送信されたシーンを再生す
    るためのシーンデータを受信して、上記シーンを再生す
    るデータ受信方法であって、 上記シーンを構成する物体毎に送信された、該物体を再
    生するための物体データを受信するとともに、 上記物体を識別するための該各物体に対応するオブジェ
    クト識別子と、該各物体に対応する物体データの所在場
    所を示す所在場所情報とを関連付ける、送信側からのテ
    ーブル情報を受信することを特徴とするデータ受信方
    法。
13. 【請求項１３】 送信側から送信された、シーンを構成
    する複数の物体を再生するための複数の物体データを受
    信し、該物体データに基づいて上記シーンを再生するデ
    ータ受信装置であって、 上記複数の物体データのうち、第１の物体データを受信
    する第１の受信部と、 上記複数の物体データのうち、上記第１の物体データ以
    外の第２の物体データを受信する第２の受信部と、 上記第１の物体データ及び第２の物体データに基づい
    て、上記シーンの再生を行う再生部とを備え、 上記再生部では、上記第１の物体データに基づくシーン
    の再生は、該第１の物体データの受信が完了した後に行
    われ、上記第２の物体データに基づく再生は、該第２の
    物体データの受信と並行して行われることを特徴とする
    データ伝送装置。
14. 【請求項１４】 請求項１３記載のデータ受信装置にお
    いて、 上記物体データの伝送及び物体の再生を行うための制御
    情報は、上記シーンに対応するデータの伝送処理におけ
    る受信側への最初の伝送データとして上記第１の受信部
    にて受信され、 上記各物体に対応する物体データは、上記制御情報に含
    まれる、該物体データが上記第１の受信部と第２の受信
    部のいずれの受信部により受信されるべき物体データで
    あるかを示す伝送形式識別情報に応じて、上記第１及び
    第２の受信部のいずれかにて受信されることを特徴とす
    るデータ受信装置。
15. 【請求項１５】 送信側から送信されたシーンを再生す
    るためのシーンデータを受信して、該シーンを再生する
    データ受信装置であって、 伝送エラーに対する再送処理を必ずしも行わない第１の
    伝送プロトコルにより上記シーンデータの一部として送
    信された第１のデータを受信する第１の受信部と、 伝送エラーに対する再送処理を行う第２の伝送プロトコ
    ルにより、上記シーンデータの一部として送信された第
    ２のデータを受信する第２の受信部とを備え、 上記第２の受信部は、上記シーンを構成する物体の階層
    構造を、物体を識別するための各物体に対応するオブジ
    ェクト識別子により示すシーン記述情報、及び各物体に
    関連する付帯情報を各物体のオブジェクト識別子と対応
    させて示すオブジェクト関連情報を、上記第２のデータ
    として受信することを特徴とするデータ受信装置。
16. 【請求項１６】 送信側からシーンを構成する物体毎に
    送信された、該物体を再生するための物体データを受信
    して、上記シーンを再生するデータ受信装置であって、 伝送エラーに対する再送処理を必ずしも行わない第１の
    伝送プロトコルにより上記シーンデータの一部として送
    信された第１のデータを受信する第１の受信部と、 伝送エラーに対する再送処理を行う第２の伝送プロトコ
    ルにより、上記シーンデータの一部として送信された第
    ２のデータを受信する第２の受信部とを備え、 上記第２の受信部は、 上記物体を識別するための該各物体に対応するオブジェ
    クト識別子と、該各物体に対応する物体データの所在場
    所を示す所在場所情報とを関連付ける、送信側からのテ
    ーブル情報を、上記第２のデータとして受信することを
    特徴とするデータ受信装置。
17. 【請求項１７】 請求項１６記載のデータ受信装置にお
    いて、 上記第２の受信部は、上記テーブル情報を、上記１シー
    ンに対応するシーンデータとして最初に受信する、個々
    の物体に対応する物体データの伝送及び物体の再生を行
    うための制御情報に含まれる情報として受信することを
    特徴とするデータ受信装置。
18. 【請求項１８】 請求項１６記載のデータ受信装置にお
    いて、 上記第２の受信部は、上記テーブル情報を、各物体に関
    連する付帯情報を各物体のオブジェクト識別子と対応さ
    せて示す、送信側からのオブジェクト関連情報に含まれ
    る情報として受信することを特徴とするデータ受信装
    置。