WO2005096635A1

WO2005096635A1 - 符号化信号蓄積配信システム、符号化信号選択転送装置、符号化信号分離送信装置、符号化信号受信合成装置

Info

Publication number: WO2005096635A1
Application number: PCT/JP2005/006249
Authority: WO
Inventors: Tsuyoshi Hanamura; Isao Nagayoshi; Asako Inaba; Hideyoshi Tominaga
Original assignee: Media Glue Corporation
Priority date: 2004-03-31
Filing date: 2005-03-31
Publication date: 2005-10-13
Also published as: JP2005295106A

Abstract

　サーバ蓄積器１０４０を有するサーバ１０００と、ルータ蓄積器２０４０を有するルータ２００００と、レシーバ蓄積器３０４０ｎを有するレシーバ３０００ｎと、を備え、レシーバ３０００ｎが特定の伝送符号化信号Ｓｔ（ｌ）の再配信要求をルータ２０００に送信し、ルータ２０００が前記伝送符号化信号Ｓｔ（ｌ）の再配信要求にしたがってルータ蓄積器２０４０に蓄積された伝送符号化信号Ｓｔ（ｌ）をレシーバ３０００ｎに送信することにより、再配信要求時に、伝送符号化信号Ｓｔ（ｌ）をサーバ１０００まで取りに行かずに、伝送符号化信号Ｓｔ（ｌ）を取得することができ、ネットワーク上のトラフィックを悪化させず、通信コストを抑えることができる。

Description

明細書

符号化信号蓄積配信システム、符号化信号選択転送装置、符号化信号分離送信装置、符号化信号受信合成装置

技術分野

[0001] 本発明は、映像のスケーラブル伝送を行うとともに、蓄積することができる符号化信号蓄積配信システム、符号化信号選択転送装置、符号化信号分離送信装置および符号化信号受信合成装置に関するものである。

背景技術

[0002] 動画像をディジタルィ匕する技術にぉ、て、発生する膨大な情報量を圧縮して符号化するための方式として、ディジタルビデオおよび付随するオーディオに対する符号化方式の標準規格 ISOZIEC 13818 (通称、「MPEG— 2」(Moving Picture E xpert Group Phase 2))がある。このようにして生成された MPEG— 2の規格に準拠したビットストリーム（以後、「MPEG— 2ビットストリーム」と呼ぶ）は、通信ゃテレビジョン放送など幅広、分野で使用されて!、る。

[0003] MPEG— 2ビットストリームは階層構造を有し、最上位のシーケンスレイヤから GOP

(Group of Pictures)レイヤ、ピクチャレイヤ、スライスレイヤ、マクロブロックレイヤおよびブロックレイヤの順の各レイヤからなる。

[0004] MPEG— 2においては、一連の複数の画面から構成される動画像において、各画面をー且フレームメモリに保存し、フレーム間の差分を取ることによって時間軸方向の冗長度を削減し、さらに、各フレームを構成する複数の画素を離散コサイン変換（以後、「DCT」と略す)等の直交変換処理を行うことにより空間軸方向の冗長度を削減することにより、効率良ヽ動画像圧縮符号化を実現して、る。

[0005] 符号ィ匕された信号は、復号器に送られて復号され再生される。復号器では、画面を再生し第 1のフレームメモリに保存し、差分情報に基づいて次に続くべき画面を予測し第 2のフレームメモリに保存し、 2つのフレームからその間に挿入される画面をさらに予測して、一連の画面を構成し動画像を再生する。このような手法は双方向予測と呼ばれる。 [0006] MPEG— 2では、この双方向予測を実現するために、 Iピクチャ、 Pピクチャおよび B ピクチャという 3つのタイプを規定している。 Iピクチャは、イントラ符号ィ匕ピクチャの略であり、他のピクチャとは独立して静止画として符号ィ匕される画面のことである。 Pピクチヤは、順方向予測符号ィ匕ピクチャの略であり、時間的に過去に位置する Iまたは P ピクチャに基づいて予測符号ィ匕される画面のことである。 Bピクチャは、双方向予測符号ィ匕ピクチャの略であり、時間的に前後に位置する Iまたは Pピクチャを用いて順方向、逆方向または双方向のピクチヤに基づいて予測符号ィ匕される画面のことである。すなわち、 Iピクチャおよび Pピクチャを先に符号ィ匕処理した後、その間に挿入される Bピクチャが符号ィ匕される。

[0007] 符号化器で符号ィ匕された MPEG— 2ビットストリームは、所定の転送速度で伝送路に送出され、該伝送路上の復号器に入力されて復号され再生される。しカゝしながら、動画像を符号ィヒして発生する情報量は一定ではな、。特にシーンチェンジ時には、情報量は一気に増大する。このように一定しない符号ィヒ信号を固定レートの伝送路に送出するために、予め送信用バッファのレベル以上の情報量が発生しな、ように符号ィ匕データのレート制御を行う必要がある。

[0008] MPEG— 2では、 ISO/IEC JTC1/SC29/WG11/N0400 Test Model

5 (April, 1993) (以後、「TM5」と略す）にレート制御方式が記載されている。

[0009] MPEG— 2の TM5のレート制御では、ステップ 1で、まずピクチャタイプ毎に GOP 内の未符号ィ匕ピクチャに対する割り当て符号量 Rに基づ、てビット配分する。ステツプ 2で、マクロブロック単位に符号ィ匕処理を行う際に使用する量子化スケールを、ビット配分に基づいて算出した仮想バッファ占有量力も算出する。

[0010] また、 MPEG— 2以外の圧縮フォーマットを有する復号器や、異なる転送速度の伝送路に接続された復号器も多数存在するため、異なる圧縮フォーマットや異なる転送速度に MPEG— 2ビットストリームを変換する動画圧縮符号ィ匕信号変換装置が必要となる。これを実現するための装置が所謂トランスコーダである。符号化器から伝送された画像圧縮符号化信号は、トランスコーダで適切な信号に変換され、各復号器に信号が供給される。

[0011] 図 29に一般的な従来のトランスコーダ 50の第 1例を示す。従来のトランスコーダ 50 は、第 1ビットレートを有する第 1伝送路（図示なし）に接続され、第 1MPEG— 2ビットストリーム blを入力する可変長復号部 (VLD) 51と、逆量子化器 53と、量子化器 55 と、第 2ビットレートを有する第 2伝送路（図示なし）に接続され、第 2MPEG— 2ビットストリーム b2を出力する VLC57と、量子化器 55で発生する符号量を制御するレート制御部 59と、を備えている。第 2ビットレートは第 1ビットレートより低い転送速度である。

[0012] VLD51および逆量子化器 53によって、第 1MPEG— 2ビットストリーム blをマクロブロック単位に DCT係数領域まで復号し、量子ィ匕器 55および VLC57によって、得られた DCT係数信号を符号ィ匕して、第 1MPEG— 2ビットストリームより少な、符号量を有する第 2MPEG— 2ビットストリーム b2を生成するものである。

[0013] 量子化器 55における量子化処理では、 DCT変換で得られた係数を所定の量子化ステップで除算する。これにより画像信号は圧縮される。この量子化ステップは、所定の量子化テーブルに含まれる複数の量子化マトリクス値に量子化スケールを乗算して求められる。

[0014] トランスコーダ 50では、第 1MPEG— 2ビットストリーム bl内のシーケンスレイヤ、 G OPレイヤ、ピクチャレイヤ、スライスレイヤおよびマクロブロックレイヤの符号化情報を殆ど再利用する。基本的にブロックレイヤの DCT係数の変換およびブロックレイヤの変換に伴い修正が必要なマクロブロックレイヤの符号の変換の処理のみが行われる

[0015] このように構成されたトランスコーダ 50において、レート制御部 59は MPEG— 2の T

M5に記載されているレート制御を行う。

[0016] 図 30に従来のトランスコーダ 50のレート制御処理のフローチャートを示す。同図に示されるように、従来のレート制御処理はステップ A1〜A14力もなる。

[0017] ステップ A1で、変数 nを 1に設定する。ここで、変数 nは、入力画像信号に含まれる複数のピクチャに付けられた番号を示し、以後、 n番目のピクチャを pic(n)と示す。

[0018] 続くステップ A2で、 I、 Pおよび Bピクチャの複雑さを示す指標 Xi、 Xpおよび Xbを下記の式 (al)、式 (a2)および式 (a3)により算出する。

[0019] Xi=Si X Qi …式（al) [0020] Xp = Sp X Qp …式（a2)

[0021] Xb = Sb X Qb …式（a3)

[0022] ここで、 Si、 Spおよび Sbはそれぞれ I、 Pおよび Bピクチャの発生符号量であり、 Qi、 Qpおよび Qbは、それぞれ I、 Pおよび Bピクチャ内の全マクロブロックの量子化スケールコードの平均値である平均量子化パラメータである。ただし、平均量子化パラメ一タは 1〜31の範囲に正規化されている。

[0023] この画面の複雑さ指標 Xi、 Xpおよび Xbは、符号化情報量が多く発生するような画像、すなわち低い圧縮率の画像に対して大きくなり、逆に高い圧縮率の画像に対しては小さくなる。

[0024] また、 I、 Pおよび Bピクチャの画面の複雑さを示すパラメータ Xi、 Xpおよび Xbの初期値は、次式 (a4)、式 (a5)および式 (a6)でそれぞれ与えられる。

[0025] Xi= 160 X target— BitrateZl 15 …式（a4)

[0026] Xp = 60 X target— BitrateZl 15 …式（a5)

[0027] Xb = 42 X target— BitrateZl 15 …式（a6)

[0028] ここで、 target_Bitrateは、トランスコーダ 50の目標ビットレートである。

[0029] 続くステップ A3で、 GOP内の I、 Pおよび Bピクチャに対する割り当て符号量 Ti、 Tp および Tbを、次式 (a7)、式 (a8)および式 (a9)によりそれぞれ算出する。ただし、 Np および Nbは、それぞれ GOP内の未符号化の Pおよび Bピクチャの数を示す。

[数 1]

Ti: . . '式 (a7)

R

Tp: >式 (a8)

NbKpXb

Np '

KbXp

5 - . . ·式（a9)

NpKbXp

Nb-'

KpXb

[0030] ここで、 Kpおよび Kbは、 Iピクチャの量子化スケールコードを基準とした Pおよび B ピクチャの量子化スケールコードの比率を示し、 Kp= l. 0および Kb= l. 4になる場合に、常に全体の画質が最適化されると仮定する。

[0031] 続くステップ A4で、変数 nが 1か否かの判定がなされる。すなわち、符号化対象のピクチャが 1番目のピクチャ pic(l)か否かの判定がなされる。 1番目のピクチャの場合、ステップ A5へ進み、 1番目のピクチャでない場合はステップ A6へ進む。ステップ A5 では、次式（alO)により GOP内の一番初めのピクチャ pic(l)を符号化する時の GOP 内の未符号ィ匕ピクチャに対する割り当て符号量 Rを求める。

[0032] R=target— Bitrate X NZpicture— rate+R …式（alO)

[0033] ここで、 Nは GOP内のピクチヤの総数、 picture_rateは、入力画像の時間解像度を示す値であり、 1秒間に復号され表示される画面の枚数を示す。

[0034] ステップ A6では、 GOP内の未符号ィ匕ピクチャに対する割り当て符号量 Rを (n— 1) 番目のピクチャ pic(n-l)が符号ィ匕された時の I、 Pおよび Bピクチャの発生符号量 Si、 S pまたは Sbに基づいて、次式（al l)、式（al2)および式（al3)の何れかにより更新する。

[0035] R=R-Si …式（al l)

[0036] R=R-Sp …式（al2)

[0037] R=R-Sb …式（al3)

[0038] ステップ A5および A6はともにステップ A7へ進み、変数 jに 1を設定する。ここで、変数 jは、 1ピクチャ内の複数のマクロブロックに付けられた番号を示し、以後、 j番目のマクロブロックを MB(j)と示す。

[0039] 続くステップ A8で、 I、 Pおよび Bピクチャ内の j番目のマクロブロック MB(j)を符号ィ匕する時の仮想バッファの占有量 di(j)、 dp(j)および db(j)が次式 (al4)、式 (al5)および式 (al6)によりそれぞれ算出される。

[数 2] _di(j) = _di(0) + B(j- 1) - ^_ΝΜβ ^} · . .式 (&14) dp(j) = dp(0) + B(j- D ^TP _N^" ^1} . . .式（^a15) db(j) = db(0) + B(j- D- -¹) ■ . '式（al6)

[0040] ここで、 B(j— 1)は、（j— 1)番目のマクロブロック MB(j—l)までの全マクロブロックの発生符号量である。

[0041] また、 di(0)、 dp(0)および db(0)は、それぞれ I、 Pおよび Bピクチャの仮想バッファ占有量の初期値であり、次式 (a 17)、式 (a 18)および式 (a 19)でそれぞれ与えられる。

[0042] di(0)= lO Xr/31 …式（al7)

[0043] dp(0)=Kp X di(0) …式（a 18)

[0044] db(0)=Kb X di(0) …式（a 19)

[0045] ここで、 rはリアクションパラメータと呼ばれ、下記の式（a20)で示され、フィードバックループの応答速度を制御する。

[0046] r= 2 Xtarget— BitrateZpicture— rate …式（a20)

[0047] また、 I、 Pおよび Bピクチャ符号化終了時の仮想バッファ占有量、すなわち NMB番目のマクロブロック MB(NMB)を符号化したときの仮想バッファ占有量 di(NMB)、 d p(NMB)および db(NMB)は、ピクチャタイプ毎に、次回符号化する時の仮想バッファ占有量の初期値 di(0)、 dp(0)および db(0)として用いられる。

[0048] 続くステップ A9で、上記の仮想バッファの占有量 d(j)に基づ、て、各ピクチャ毎に j 番目のマクロブロック MB(j)に対する量子化スケールコード QG)を次式（a21)により求める。

[0049] Q0) = d0) 31/r …式（a21)

[0050] 続くステップ A10で、ステップ A9で算出された量子化スケールコード Q(j)を使用して j番目のマクロブロック MB(j)を量子化する。続くステップ Al lで、変数 jをインクリメントして、ステップ A12へ進み、変数 jがマクロブロック総数 NMBを超えているか否かの判定をする。ここで、 NMBは n番目のピクチャ pic(n)内に含まれるマクロブロックの総数である。変数 jがマクロブロック総数 NMBを超えていない場合は、ステップ A8へ戻り、変数 jがマクロブロック総数 NMBを超えている場合は、ステップ A13へ進む。

[0051] このようにして、変数 jは、ステップ A8〜A11の符号化処理を繰り返すためのループカウンタとしても使用される。これにより、 n番目のピクチャ pic(n)内の 1番目のマクロブロック MB(1)力ら NMB番目のマクロブロック MB(NMB)まで全てのマクロブロックに対して順次符号ィ匕処理を行うことができる。

[0052] ステップ A13で、変数 nをインクリメントして、ステップ A14へ進み、変数 nが符号化対象のピクチャ総数 NPICを超えている力否かの判定をする。ここで、変数 nがピクチャ総数 NPICを超えていない場合は、ステップ A2へ戻り、変数 nがピクチャ総数 NPI Cを超えている場合は、本処理を終了する。

[0053] このように第 1のトランスコーダ 50では、 Iおよび Pピクチャ周期などのような画像構造に関する情報を持ち得ないために、図 30に示された TM5のレート制御のような、画像 GOP構造などの情報に基づ、てビット配分を行う方法は、入力画像構造を仮定しなければ行うことができな!/、。

[0054] そこで、 GOP構造を仮定せずにレート制御を行う方法を採用した例として、図 31に示される第 2の従来のトランスコーダ 60がある。同図に示されるように、第 2の従来のトランスコーダ 60は、上記第 1の従来のトランスコーダ 50の構成に加えて、遅延回路 6 1と、ビットレート比率計算部 63と、入力符号量積算部 65と、差分符号量計算部 67と、目標出力符号量更新部 69と、量子化スケールコード算出部 71と、を備えている。

[0055] このように構成されたトランスコーダ 60の処理の流れを図 32に示す。同図に示されるように、トランスコーダ 60の処理は、ステップ B1〜： B13からなる。ステップ B6〜： B13 は、上記第 1従来例に示されたレート処理のステップ A7〜A14と同じである。但し、ステップ B7では、目標出力符号量更新部 69で算出された目標出力符号量 Toutに基づいて、仮想バッファ占有量の算出がなされる。

[0056] また、同様に GOP構造を仮定せずにレート制御を行う方法を採用した別の例として、図 33および図 34に従来のトランスコーダの第 3例を示す。図 33に示されるように、第 3の従来のトランスコーダ 80は、第 1ビットレートを有する第 1伝送路に接続され、入力ビットストリーム b3を入力する VLD81と、第 1の従来のトランスコーダ 50と同じ、逆量子化器 53と、量子化器 55と、 VLC57と、を含み、図 31のトランスコーダ 60と同じビットレート比率計算部 63と、差分符号量計算部 67と、を含み、さらに、目標出力符号量更新部 83と、量子化スケールコード算出部 85と、を備えている。

[0057] 第 3の従来のトランスコーダ 80では、ビットストリーム b3に予め符号量を情報として記述しておき、その情報に基づいてレート制御を行うものである。

[0058] し力しながら、トランスコーダは符号化処理後の信号を対象として!/、るために、符号化前の元の信号は知ることはできない。したがって、符号量制御においては、トランスコード処理後の画像自身の歪みではなぐ再量子化処理によって新たに発生する歪みに着目して、この歪みを抑制することにより、画質の低下を抑制しながら符号量の削減を実現しなければならな、。

[0059] そこで、本願出願人は、先に復号量子化パラメータおよび再量子化パラメータに依存した再量子化レート歪み関数を考慮することにより、復号量子化パラメータ、および前段で算出された量子化パラメータに基づいて最適な量子化パラメータの算出を実現する動画像圧縮符号化信号変換方法、装置および変換プログラムを記録した媒体を提案した (例えば、特開 2001— 169283号公報（関係対応ヨーロッパ特許公開 EP1067798)参照）。

[0060] このものは、逆量子化を行う逆量子化器と、再量子化を行う量子化器と、を備えたトランスコーダにおいて、入力量子化パラメータに基づくレート歪み関数を考慮し、量子化パラメータを切り換える量子化パラメータ切り換え部を設けることにより、量子化係数領域データから再量子化係数領域データへの変換時における誤差を極力抑えることがでさる。

[0061] このように、トランスコーダは様々な利用環境に適した形へのビットストリーム変換を実現する処理器である。

[0062] さらに、さまざまな帯域の混在するネットワークにおいて、利用環境に適した映像ストリームを生成し提供するスケーラビリティを実現する技術として、ビットレートスケーリング方式、階層符号化方式が存在する。

[0063] 例えば、ネットワーク上の各ルータに設置されたビットレートスケーリングトランスコーダにおいて、要求されるビットレートに応じ、ビットレート削減によるストリーム変換を実現する。これにより、ネットワークの変動に対応した映像のスケーラビリティを実現している。

[0064] し力しながら、ビットレートスケーリングトランスコーダ自らがレート制御とストリーム変換を行うため、ルータに高度な処理が要求されるため多くの負荷力 Sかかる。

[0065] また、サーバにおいてあら力じめ入力されたストリームを、階層構造をもつストリームに変換し、ルータにおける階層選択によりスケーラビリティを実現する。これにより、トランスコーダによるレート制御の必要はなくなり、ネットワーク上の各ルータにおける信号処理等の負荷もなくなる。しかしながら、階層構造に変換されたストリーム間に依存関係があるため、各階層に優先順位がつけられており、階層選択時に優先順位を考慮した制御を行う必要があるという問題がある。

[0066] さらに、レシーバ側で映像の品質を向上させようとした場合、毎回サーバまでストリームを取りに行かなければならず、ネットワーク上のトラフィックの悪化や通信コストが力かってしまうという問題点があった。

[0067] 本発明は、このような従来の問題を解決するためになされたもので、サーバにおける分離器において、独立した分離ストリームを生成し、帯域選択機能を有するルータにおいて、ネットワーク状態に応じた伝送路選択を行うとともに、ルータ等でストリームを蓄積して、再配信の際にはストリームを蓄積しているルータ力も配信を行うことにより、映像のスケーラブル伝送を行うとともに、通信コストの削減を行うことができる符号化信号蓄積配信システム、符号化信号選択転送装置、符号化信号分離送信装置、符号化信号受信合成装置を提供するものである。

発明の開示

課題を解決するための手段

[0068] 本発明の符号ィ匕信号蓄積配信システムは、複数の画像情報力構成される 1次動画像を符号化した 1次符号化信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号ィヒ信号より符号量が少ない基本符号ィヒ信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器と、前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器と、前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記 3次動画像を復元させる 3次符号化信号を合成する受信合成器と、を備え、

前記分離送信器が、前記 1次符号化信号を入力する分離器入力手段と、前記分離器入力手段で入力した 1次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離手段と、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、前記分離器多重化手段で多重化した伝送符号化信号を蓄積する分離器蓄積手段と、前記伝送符号化信号を前記選択転送器に送信する分離器送信手段と、を備え、

前記選択転送器が、前記伝送符号化信号を前記分離送信器から受信する転送器受信手段と、前記転送器受信手段で受信した伝送符号化信号を蓄積する転送器蓄積手段と、前記伝送符号化信号を前記受信合成器に送信する転送器送信手段と、を備え、

前記受信合成器が、前記伝送符号化信号を前記選択転送器から受信する合成器受信手段と、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号ィ匕信号と、を分離する合成器分離手段と、前記合成器分離手段で分離した基本符号化信号と拡張符号化信号と、を前記受信合成器に蓄積する合成器蓄積手段と、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、 3次動画像を復元させる 3次符号化信号を生成する合成器合成手段と、前記合成器合成手段で合成した 3次符号化信号を出力する合成器出力手段と、前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信手段と、を備え、さらに、前記選択転送器が、前記受信合成器から送信された伝送符号化信号の再配信要求を受信する転送器再配信要求受信手段と、を備え、前記転送器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号ィ匕信号を前記受信合成器に送信し、前記受信合成器の合成器受信手段が、前記再配信要求にしたがって前記選択転送器から送信された伝送符号化信号を受信することを特徴とした構成を有している。 [0069] また、本発明の符号化信号蓄積配信システムは、請求項 1に記載の符号ィ匕信号蓄積配信システムにおいて、前記選択転送器が、前記転送器受信手段で受信した伝送符号化信号の中から前記選択転送器に蓄積する伝送符号化信号を選択する転送器蓄積信号選択手段を備え、前記転送器蓄積手段が、前記選択した伝送符号化信号を蓄積することを特徴とした構成を有して、る。

[0070] さらに、本発明の符号化信号蓄積配信システムは、請求項 1に記載の符号ィ匕信号蓄積配信システムにおいて、前記選択転送器が、前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択手段を備え、前記転送器送信手段が、前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とした構成を有して、る。

[0071] さらに、本発明の符号化信号蓄積配信システムは、請求項 3に記載の符号ィ匕信号蓄積配信システムにおいて、前記選択転送器が、前記転送器送信手段が送信した伝送符号ィヒ信号の送信情報を記憶する転送器送信情報記憶手段を備え、前記転送器送信信号選択手段が、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とした構成を有している。

[0072] さらに、本発明の符号化信号蓄積配信システムは、請求項 3に記載の符号ィ匕信号蓄積配信システムにおいて、前記受信合成器が、前記合成器受信手段で受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶手段と、前記合成器受信情報記憶手段で記憶した識別情報をもとに未受信の伝送符号化信号を検索する合成器未受信信号検索手段と、を備え、前記合成器再配信要求送信手段が、前記未受信の伝送符号化信号の再配信要求を前記選択転送器に送信し、前記選択転送器の転送器再配信要求受信手段が、再送する前記伝送符号ィヒ信号が指定された再配信要求を前記受信合成器カゝら受信し、前記転送器送信信号選択手段が、前記再配信要求にしたがって再送する伝送符号化信号を選択し、前記転送器送信手段が、前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とした構成を有している。

[0073] さらに、本発明の符号化信号蓄積配信システムは、請求項 5に記載の符号ィ匕信号蓄積配信システムにおいて、前記選択転送器が、前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれて、る場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信手段を備え、前記分離送信器が、前記伝送符号化信号の再配信要求を前記選択転送器から受信する分離器再配信要求受信手段を備え、前記分離器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記選択転送器に送信し、前記選択転送器の転送器受信手段が、前記再配信要求にしたがって前記分離送信器から送信された伝送符号化信号を受信することを特徴とした構成を有して、る。

[0074] さらに、本発明の符号化信号蓄積配信システムは、請求項 6に記載の符号化信号蓄積配信システムにおいて、前記選択転送器の転送器受信手段が、前記分離送信器または他の選択転送器から、前記伝送符号化信号を受信し、前記転送器送信手段が、前記伝送符号化信号を、前記受信合成器または他の選択転送器に、送信し、前記転送器再配信要求受信手段が、前記受信合成器または他の選択転送器から、前記再配信要求を受信し、前記転送器再配信要求送信手段が、前記蓄積外の伝送符号化信号の再配信要求を、他の選択転送器または前記分離送信器に、送信することを特徴とした構成を有して、る。

[0075] さらに、本発明の符号化信号蓄積配信システムは、請求項 3から請求項 7のいずれ力 1項に記載の符号ィ匕信号蓄積配信システムにお、て、前記選択転送器の転送器送信信号選択手段が、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とした構成を有してヽる。

[0076] さらに、本発明の符号化信号蓄積配信システムは、複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1次動画像の疑似動画像である 2 次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3 次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器と、前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器と、前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記 3次動画像を復元させる 3次符号化信号を合成する受信合成器と、を備え、

前記分離送信器が、前記 1次符号化信号を入力する分離器入力手段と、前記分離器入力手段で入力した 1次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離手段と、前記分離器分離手段で分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積手段と、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、前記伝送符号化信号を前記選択転送器に送信する分離器送信手段と、を備え、

前記受信合成器が、前記伝送符号化信号を前記選択転送器から受信する合成器受信手段と、前記合成器受信手段で受信した伝送符号化信号を前記受信合成器に蓄積する合成器蓄積手段と、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、 3次動画像を復元させる 3次符号化信号を生成する合成器合成手段と、前記合成器合成手段で合成した 3次符号化信号を出力する合成器出力手段と、前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信手段と、を備え、

さらに、前記選択転送器が、前記受信合成器から送信された再配信要求を受信する転送器再配信要求受信手段と、を備え、前記転送器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信し、前記受信合成器の合成器受信手段が、前記再配信要求にしたがって前記選択転送器力送信された伝送符号化信号を受信することを特徴とした構成を有してヽる。

さらに、本発明の符号化信号蓄積配信システムは、請求項 9に記載の符号ィ匕信号蓄積配信システムにおいて、前記選択転送器が、前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれて、る場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信手段を備え、前記分離送信器が、前記伝送符号化信号の再配信要求を前記選択転送器から受信する分離器再配信要求受信手段を備え、前記分離器多重化手段が、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号ィ匕信号を生成し、前記分離器送信手段が、前記生成した伝送符号化信号を前記選択転送器に送信し、前記選択転送器の転送器受信手段が、前記再配信要求にしたがって前記分離送信器から送信された伝送符号化信号を受信することを特徴とした構成を有している。

[0078] また、本発明の符号ィ匕信号選択転送装置は、複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号ィ匕信号より符号量が少ない基本符号ィ匕信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、前記複数の拡張符号化信号と、を任意に組み合わせて生成された伝送符号化信号を受信する転送器受信手段と、前記転送器受信手段で受信した伝送符号化信号を蓄積する転送器蓄積手段と、前記伝送符号化信号を送信する転送器送信手段と、前記伝送符号化信号の再配信要求を受信する転送器再配信要求受信手段と、を備え、前記転送器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とした構成を有している。

[0079] さらに、本発明の符号ィ匕信号選択転送装置は、請求項 11に記載の符号ィ匕信号選択転送装置にお!ヽて、前記転送器受信手段で受信した伝送符号化信号の中から蓄積する伝送符号化信号を選択する転送器蓄積信号選択手段を備え、前記転送器蓄積手段が、前記選択した伝送符号化信号を蓄積することを特徴とした構成を有している。

[0080] さらに、本発明の符号ィ匕信号選択転送装置は、請求項 11に記載の符号ィ匕信号選択転送装置において、前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択手段を備え、前記転送器送信手段が、前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とした構成を有している。

[0081] さらに、本発明の符号ィ匕信号選択転送装置は、請求項 13に記載の符号ィ匕信号選択転送装置にお!ヽて、前記転送器送信手段が送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶手段を備え、前記転送器送信信号選択手段が、前記再配信要求を受信したとき、前記記憶した送信情報に基づ!ヽて未送信の前記伝送符号化信号を選択することを特徴とした構成を有している。

[0082] さらに、本発明の符号ィ匕信号選択転送装置は、請求項 13に記載の符号ィ匕信号選択転送装置において、前記転送器再配信要求受信手段が、再送する前記伝送符号化信号が指定された再配信要求を受信し、前記転送器送信信号選択手段が、前記再配信要求にしたがって再送する伝送符号化信号を選択し、前記転送器送信手段力前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とした構成を有している。

[0083] さらに、本発明の符号ィ匕信号選択転送装置は、請求項 15に記載の符号ィ匕信号選択転送装置にお!、て、前記再配信要求の中に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれて、る場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信手段を備え、前記転送器受信手段が、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とした構成を有して、る。

[0084] さらに、本発明の符号ィ匕信号選択転送装置は、請求項 16に記載の符号ィ匕信号選択転送装置において、前記転送器受信手段が、前記伝送符号化信号を生成し送信する分離送信器または他の選択転送器から、前記伝送符号化信号を受信し、前記転送器送信手段が、前記伝送符号化信号を、前記伝送符号化信号を受信し 3次動画像を復元させる 3次符号化信号を合成する受信合成器または他の選択転送器に、送信し、前記転送器再配信要求受信手段が、前記受信合成器または他の選択転送器から、前記再配信要求を受信し、前記転送器再配信要求送信手段が、前記蓄積外の伝送符号化信号の再配信要求を、他の選択転送器または前記分離送信器に、送信することを特徴とした構成を有して、る。

[0085] さらに、本発明の符号化信号選択転送装置は、請求項 13から請求項 17のいずれ力 1項に記載の符号ィ匕信号選択転送装置にぉ、て、前記転送器送信信号選択手段力前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とした構成を有して、る。

[0086] また、本発明の符号化信号受信合成装置は、複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号ィ匕信号より符号量が少ない基本符号ィ匕信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信手段と、前記伝送符号ィ匕信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、前記合成器分離手段で分離した基本符号化信号と拡張符号化信号と、を蓄積する合成器蓄積手段と、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、 3次動画像を復元させる 3次符号化信号を生成する合成器合成手段と、前記合成器合成手段で合成した 3次符号ィヒ信号を出力する合成器出力手段と、前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信手段と、を備え、前記合成器受信手段が、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とした構成を有して、る。

[0087] さらに、本発明の符号ィ匕信号受信合成装置は、複数の画像情報から構成される 1 次動画像を符号化した 1次符号化信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号ィ匕信号より符号量が少ない基本符号ィ匕信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信手段と、前記合成器受信手段で受信した伝送符号化信号を蓄積する合成器蓄積手段と、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、 3次動画像を復元させる 3次符号化信号を生成する合成器合成手段と、前記合成器合成手段で合成した 3次符号化信号を出力する合成器出力手段と、前記伝送符号ィ匕信号の再配信要求を送信する合成器再配信要求送信手段と、を備え、前記合成器受信手段が、前記再配信要求にしたがった伝送符号ィ匕信号を受信することを特徴とした構成を有している。

[0088] さらに、本発明の符号化信号受信合成装置は、請求項 19または請求項 20に記載の符号化信号受信合成装置にお!ヽて、前記合成器受信手段で受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶手段と、前記合成器受信情報記憶手段で記憶した識別情報をもとに未受信の伝送符号化信号を検索する合成器未受信信号検索手段と、を備え、前記合成器再配信要求送信手段が、前記未受信の伝送符号化信号の再配信要求を送信することを特徴とした構成を有して、る。

[0089] また、本発明の符号化信号分離送信装置は、複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を入力する分離器入力手段と、前記分離器入力手段で入力した 1次符号化信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号ィヒ信号より符号量が少ない基本符号ィヒ信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離手段と、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、前記分離器多重化手段で多重化した伝送符号化信号を蓄積する分離器蓄積手段と、前記伝送符号化信号を送信する分離器送信手段と、を備えたことを特徴とした構成を有して、る。

[0090] さらに、本発明の符号化信号分離送信装置は、請求項 22に記載の符号化信号分離送信装置にお!ヽて、前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信手段を備え、前記分離器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とした構成を有している。

[0091] さらに、本発明の符号化信号分離送信装置は、複数の画像情報から構成される 1 次動画像を符号化した 1次符号ィ匕信号を入力する分離器入力手段と、前記分離器入力手段で入力した 1次符号化信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号ィ匕信号より符号量が少ない基本符号ィ匕信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離手段と、前記分離器分離手段で分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積手段と、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、前記伝送符号化信号を送信する分離器送信手段と、を備えたことを特徴とした構成を有している。

[0092] さらに、本発明の符号化信号分離送信装置は、請求項 24に記載の符号ィ匕信号分離送信装置にお!ヽて、前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信手段を備え、前記分離器多重化手段が、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号ィヒ信号を生成し、前記分離器送信手段が、前記生成した伝送符号化信号を送信することを特徴とした構成を有して、る。

[0093] また、本発明の符号化信号蓄積配信方法および符号化信号蓄積配信プログラムは、複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィヒ信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットヮーク上に伝送する複数の伝送符号化信号に変換する分離送信器を制御する分離送信器制御ステップと、前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器を制御する選択転送器制御ステップと、前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記 3次動画像を復元させる 3次符号化信号を合成する受信合成器を制御する受信合成器制御ステツプと、を備え、

前記分離送信器制御ステップが、前記 1次符号ィ匕信号を入力する分離器入力ステップと、前記分離器入力ステップで入力した 1次符号ィ匕信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離ステップと、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、前記分離器多重化ステツプで多重化した伝送符号化信号を蓄積する分離器蓄積ステップと、前記伝送符号化信号を前記選択転送器に送信する分離器送信ステップと、を備え、

前記選択転送器制御ステップが、前記伝送符号ィ匕信号を前記分離送信器力受信する転送器受信ステップと、前記転送器受信ステップで受信した伝送符号化信号を蓄積する転送器蓄積ステップと、前記伝送符号化信号を前記受信合成器に送信する転送器送信ステップと、を備え、

前記受信合成器制御ステップが、前記伝送符号ィ匕信号を前記選択転送器力受信する合成器受信ステップと、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、前記合成器分離ステツプで分離した基本符号化信号と拡張符号化信号と、を前記受信合成器に蓄積する合成器蓄積ステップと、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、 3次動画像を復元させる 3次符号化信号を生成する合成器合成ステップと、前記合成器合成ステップで合成した 3次符号ィ匕信号を出力する合成器出力ステップと、前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信ステップと、を備え、

さらに、前記選択転送器制御ステップが、前記受信合成器から送信された伝送符号化信号の再配信要求を受信する転送器再配信要求受信ステップと、を備え、前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号ィ匕信号を前記受信合成器に送信し、前記受信合成器制御ステップの合成器受信ステップが、前記再配信要求にしたがって前記選択転送器から送信された伝送符号ィ匕信号を受信することを特徴とした構成を有して、る。

[0094] さらに、本発明の符号化信号蓄積配信方法は、請求項 26に記載の符号化信号蓄積配信方法において、前記選択転送器制御ステップが、前記転送器受信ステップで受信した伝送符号化信号の中から前記選択転送器に蓄積する伝送符号化信号を選択する転送器蓄積信号選択ステップを備え、前記転送器蓄積ステップが、前記選択した伝送符号化信号を蓄積することを特徴とした構成を有している。

[0095] さらに、本発明の符号化信号蓄積配信方法は、請求項 26に記載の符号化信号蓄積配信方法において、前記選択転送器制御ステップが、前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択ステップを備え、前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とした構成を有して、る。

[0096] さらに、本発明の符号化信号蓄積配信方法は、請求項 28に記載の符号化信号蓄積配信方法において、前記選択転送器制御ステップが、前記転送器送信ステップが送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶ステップを備え、前記転送器送信信号選択ステップが、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とした構成を有している。

[0097] さらに、本発明の符号化信号蓄積配信方法は、請求項 28に記載の符号化信号蓄積配信方法において、前記受信合成器制御ステップが、前記合成器受信ステップで受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶ステップと、前記合成器受信情報記憶ステップで記憶した識別情報をもとに未受信の伝送符号化信号を検索する合成器未受信信号検索ステップと、を備え、前記合成器再配信要求送信ステップが、前記未受信の伝送符号化信号の再配信要求を前記選択転送器に送信し、前記選択転送器制御ステップの転送器再配信要求受信ステップが、再送する前記伝送符号ィ匕信号が指定された再配信要求を前記受信合成器カゝら受信し、前記転送器送信信号選択ステップが、前記再配信要求にしたがって再送する伝送符号化信号を選択し、前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とした構成を有している。

[0098] さらに、本発明の符号化信号蓄積配信方法は、請求項 30に記載の符号化信号蓄積配信方法において、前記選択転送器制御ステップが、前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれて!/、る場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信ステップを備え、前記分離送信器制御ステップが、前記伝送符号ィ匕信号の再配信要求を前記選択転送器力受信する分離器再配信要求受信ステップを備え、前記分離器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記選択転送器に送信し、前記選択転送器制御ステップの転送器受信ステップ力前記再配信要求にしたがって前記分離送信器から送信された伝送符号化信号を受信することを特徴とした構成を有している。

[0099] さらに、本発明の符号化信号蓄積配信方法は、請求項 31に記載の符号ィ匕信号蓄積配信方法において、前記選択転送器制御ステップの転送器受信ステップが、前記分離送信器または他の選択転送器から、前記伝送符号化信号を受信し、前記転送器送信ステップが、前記伝送符号化信号を、前記受信合成器または他の選択転送器に、送信し、前記転送器再配信要求受信ステップが、前記受信合成器または他の選択転送器から、前記再配信要求を受信し、前記転送器再配信要求送信ステップ力前記蓄積外の伝送符号化信号の再配信要求を、他の選択転送器または前記分離送信器に、送信することを特徴とした構成を有している。

[0100] さらに、本発明の符号化信号蓄積配信方法は、請求項 28から請求項 32のいずれ力 1項に記載の符号ィ匕信号蓄積配信方法にぉ、て、前記選択転送器制御ステップの転送器送信信号選択ステップが、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とした構成を有している。

[0101] さらに、本発明の符号ィ匕信号蓄積配信方法および符号ィ匕信号蓄積配信プログラムは、複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィヒ信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットヮーク上に伝送する複数の伝送符号化信号に変換する分離送信器を制御する分離送信器制御ステップと、前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器を制御する選択転送器制御ステップと、前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記 3次動画像を復元させる 3次符号化信号を合成する受信合成器を制御する受信合成器制御ステツプと、を備え、

前記分離送信器制御ステップが、前記 1次符号ィ匕信号を入力する分離器入力ステップと、前記分離器入力ステップで入力した 1次符号ィ匕信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離ステップと、前記分離器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積ステップと、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、前記伝送符号化信号を前記選択転送器に送信する分離器送信ステップと、を備え、

前記受信合成器制御ステップが、前記伝送符号ィ匕信号を前記選択転送器力受信する合成器受信ステップと、前記合成器受信ステップで受信した伝送符号化信号を前記受信合成器に蓄積する合成器蓄積ステップと、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、 3次動画像を復元させる 3次符号化信号を生成する合成器合成ステップと、前記合成器合成ステツプで合成した 3次符号ィ匕信号を出力する合成器出力ステップと、前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信ステップと、を備え、

さらに、前記選択転送器制御ステップが、前記受信合成器から送信された再配信要求を受信する転送器再配信要求受信ステップと、を備え、前記転送器送信ステツプが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信し、前記受信合成器制御ステップの合成器受信ステップが、前記再配信要求にしたがって前記選択転送器から送信された伝送符号化信号を受信することを特徴とした構成を有している。

[0102] さらに、本発明の符号化信号蓄積配信方法は、請求項 34に記載の符号化信号蓄積配信方法において、前記選択転送器制御ステップが、前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれて!/、る場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信ステップを備え、前記分離送信器制御ステップが、前記伝送符号ィ匕信号の再配信要求を前記選択転送器力受信する分離器再配信要求受信ステップを備え、前記分離器多重化ステップが、前記蓄積された基本符号ィ匕信号および拡張符号ィ匕信号から、前記再配信要求にしたがった前記伝送符号化信号を生成し、前記分離器送信ステップが、前記生成した伝送符号ィ匕信号を前記選択転送器に送信し、前記選択転送器制御ステップの転送器受信ステップが、前記再配信要求にしたがって前記分離送信器から送信された伝送符号ィ匕信号を受信することを特徴とした構成を有して、る。

[0103] また、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィヒ信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、前記複数の拡張符号化信号と、を任意に組み合わせて生成された伝送符号化信号を受信する転送器受信ステップと、前記転送器受信ステップで受信した伝送符号化信号を蓄積する転送器蓄積ステップと、前記伝送符号化信号を送信する転送器送信ステツプと、前記伝送符号化信号の再配信要求を受信する転送器再配信要求受信ステツプと、を備え、前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とした構成を有している。

[0104] さらに、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、請求項 36に記載の符号化信号選択転送方法、または、請求項 49に記載の符号化信号選択転送プログラムにおヽて、前記転送器受信ステップで受信した伝送符号化信号の中から蓄積する伝送符号化信号を選択する転送器蓄積信号選択ステップを備え、前記転送器蓄積ステップが、前記選択した伝送符号化信号を蓄積することを特徴とした構成を有して、る。

[0105] さらに、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、請求項 36に記載の符号化信号選択転送方法、または、請求項 49に記載の符号化信号選択転送プログラムにおいて、前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択ステップを備え、前記転送器送信ステツプが、前記転送器送信信号選択ステップで選択した伝送符号ィ匕信号を送信することを特徴とした構成を有して、る。

[0106] さらに、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、請求項 38に記載の符号化信号選択転送方法、または、請求項 51に記載の符号化信号選択転送プログラムにおヽて、前記転送器送信ステップが送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶ステップを備え、前記転送器送信信号選択ステップが、前記再配信要求を受信したとき、前記記憶した送信情報に基づ!/ヽて未送信の前記伝送符号化信号を選択することを特徴とした構成を有して!/、る。

[0107] さらに、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、請求項 38に記載の符号化信号選択転送方法、または、請求項 51に記載の符号化信号選択転送プログラムにおいて、前記転送器再配信要求受信ステップが、再送する前記伝送符号化信号が指定された再配信要求を受信し、前記転送器送信信号選択ステップが、前記再配信要求にしたがって再送する伝送符号ィ匕信号を選択し、前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とした構成を有してヽる。

[0108] さらに、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、請求項 40に記載の符号化信号選択転送方法、または、請求項 53に記載の符号化信号選択転送プログラムにお、て、前記再配信要求の中に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれて!/ヽる場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信ステップを備え、前記転送器受信ステップが、前記再配信要求にしたがつた伝送符号化信号を受信することを特徴とした構成を有している。

[0109] さらに、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、請求項 38から請求項 41のいずれか 1項に記載の符号化信号選択転送方法、または、請求項 51から請求項 54のいずれか 1項に記載の符号ィ匕信号選択転送プログラムにおいて、前記転送器送信信号選択ステップが、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とした構成を有している。

[0110] また、本発明の符号化信号受信合成方法および符号化信号受信合成プログラムは、複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィヒ信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信ステップと、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、前記合成器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する合成器蓄積ステップと、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、 3次動画像を復元させる 3次符号化信号を生成する合成器合成ステップと、前記合成器合成ステツプで合成した 3次符号ィ匕信号を出力する合成器出力ステップと、前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信ステップと、を備え、前記合成器受信ステップが、前記再配信要求にしたがった伝送符号ィ匕信号を受信することを特徴とした構成を有して、る。

[0111] さらに、本発明の符号ィ匕信号受信合成方法および符号ィ匕信号受信合成プログラムは、複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィヒ信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信ステップと、前記合成器受信ステップで受信した伝送符号化信号を蓄積する合成器蓄積ステップと、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、 3次動画像を復元させる 3次符号化信号を生成する合成器合成ステップと、前記合成器合成ステップで合成した 3次符号化信号を出力する合成器出力ステップと、前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信ステップと、を備え、前記合成器受信ステップが、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とした構成を有している。

[0112] また、本発明の符号化信号分離送信方法および符号化信号分離送信プログラムは、複数の画像情報カゝら構成される 1次動画像を符号化した 1次符号ィ匕信号を入力する分離器入力ステップと、前記分離器入力ステップで入力した 1次符号ィ匕信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少なヽ基本符号化信号と、前記基本符号化信号により復元される前記 2 次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィ匕信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離ステップと、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、前記分離器多重化ステップで多重化した伝送符号化信号を蓄積する分離器蓄積ステップと、前記伝送符号化信号を送信する分離器送信ステップと、を備えたことを特徴とした構成を有している。

[0113] さらに、本発明の符号化信号分離送信方法および符号化信号分離送信プログラムは、複数の画像情報カゝら構成される 1次動画像を符号化した 1次符号ィ匕信号を入力する分離器入力ステップと、前記分離器入力ステップで入力した 1次符号ィ匕信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少なヽ基本符号化信号と、前記基本符号化信号により復元される前記 2 次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィ匕信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離ステップと、前記分離器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積ステップと、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、前記伝送符号化信号を送信する分離器送信ステップと、を備えたことを特徴とした構成を有している。

[0114] さらに、本発明の符号ィ匕信号受信合成プログラムは、請求項 56または請求項 57に記載の符号ィ匕信号受信合成プログラムにお、て、前記合成器受信ステップで受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶ステップと、前記合成器受信情報記憶ステップで記憶した識別情報をもとに未受信の伝送符号化信号を検索する合成器未受信信号検索ステップと、を備え、前記合成器再配信要求送信ステップが、前記未受信の伝送符号化信号の再配信要求を送信することを特徴とした構成を有して、る。

[0115] さらに、本発明の符号化信号分離送信プログラムは、請求項 59に記載の符号化信号分離送信プログラムにおいて、前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信ステップを備え、前記分離器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とした構成を有している。

[0116] さらに、本発明の符号化信号分離送信プログラムは、請求項 61に記載の符号化信号分離送信プログラムにおいて、前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信ステップを備え、前記分離器多重化ステップが、前記蓄積された基本符号ィ匕信号および拡張符号ィ匕信号から、前記再配信要求にしたがった前記伝送符号化信号を生成し、前記分離器送信ステップが、前記生成した伝送符号ィ匕信号を送信することを特徴とした構成を有して、る。

図面の簡単な説明

[図 1]本発明の第 1の実施の形態における符号ィ匕信号蓄積配信システムのブロック図である。

[図 2]符号ィ匕信号蓄積配信システムの処理概要 (サーバでの処理)を示すブロック図である。

[図 3]符号ィ匕信号蓄積配信システムの処理概要 (サーノくからレシーバへの配信処理) を示すブロック図である。

[図 4]符号化信号蓄積配信システムの処理概要 (ルータとレシーバ間の再配信処理）を示すブロック図である。

[図 5]サーバの分離器とサーバ蓄積器との関係を示すブロック図である。

[図 6]サーバの分離器とサーバ蓄積器との関係を示すブロック図である。

[図 7]方式 1 (ロバストネス伝送路あり）における分離器の多重化部の多重化方式を示すブロック図である。

[図 8]方式 2 (ロバストネス伝送路なし）における分離器の多重化部の多重化方式を示すブロック図である。

[図 9]本発明のルータを示すブロック図である。

[図 10]伝送路選択器の蓄積制御スィッチボックスおよびスィッチ制御器による制御を示すブロック図である。

[図 11]伝送路選択器の帯域選択制御スィッチボックスおよびスィッチ制御器による制御を示すブロック図である。

[図 12]伝送路選択器のスィッチ制御器における Rsのとる値の一例を示す図である。

[図 13]スィッチ制御器の制御による伝送路選択器における伝送路選択例を示す図である。

[図 14]図 13の例におけるスィッチの値と蓄積、伝送状態の関係を示す図である。 [図 15]ルータのスィッチ制御器のレジスタを利用した再配信処理 (ルータからレシ一バに第 1伝送)例を示すブロック図である。

[図 16]ルータのスィッチ制御器のレジスタを利用した再配信処理（レシーバ力もルータへリクエスト）例を示すブロック図である。

[図 17]ルータのスィッチ制御器のレジスタを利用した再配信処理 (ルータからレシ一バに第 2伝送)例を示すブロック図である。

[図 18]ルータ、レシーバ間の配信動作とレジスタ値との関係を示す図である。

[図 19]レシーバの合成器とレシーバ蓄積器との関係を示すブロック図である。

[図 20]レシーバの合成器とレシーバ蓄積器との関係を示すブロック図である。

[図 21]方式 1における多重分離部および基本ストリーム選択器を示すブロック図である。

[図 22]方式 2における多重分離部および基本ストリーム選択器を示すブロック図である。

[図 23]ルータ、レシーバ間の配信動作とレジスタ値との関係を示す図である。

圆 24]分離器の分離部を示すブロック図である。

[図 25]合成器の合成部を示すブロック図である。

圆 26]レートの異なる分離ストリームを入力する伝送路選択器による伝送路選択例を示すブロック図である。

圆 27]多段伝送を行う符号ィ匕信号蓄積配信システム (ストリームの初回配信)を示すブロック図である。

圆 28]多段伝送を行う符号ィ匕信号蓄積配信システム (伝送路上のストリーム検索)を示すブロック図である。

[図 29]従来のトランスコーダの概略ブロック図である。

[図 30]従来のトランスコーダにおける、 MPEG— 2の TM5のレート制御処理を示すフローチャートである。

[図 31]従来のトランスコーダの概略ブロック図である。

[図 32]従来のトランスコーダの処理を示すフローチャートである。

[図 33]従来のトランスコーダの概略ブロック図である。 [図 34]従来のトランスコーダの処理を示すフローチャートである。

発明を実施するための最良の形態

[0118] 以下、本発明の実施の形態の符号ィ匕信号蓄積配信システムについて、図面を用いて説明する。

[0119] 本発明の符号ィ匕信号蓄積配信システムは、サーバにおけるストリーム分離機能を有するトランスコーダにおいて、独立した分離ストリームを生成し、帯域選択機能を有するルータにおいて、ネットワーク状態に応じた伝送路選択機能を行うことにより映像のスケーラブル伝送を実現する。分離された各ストリームのプライオリティはほぼ等しぐルータにおける任意の伝送路の選択によりスケーラビリティの実現ができる。

[0120] また、本実施の形態の符号ィ匕信号蓄積配信システム、特に、サーバにおける分離処理、多重化処理およびレシーバにおける多重化処理等は、本願出願人が先に出願した特願 2003— 381859の符号ィ匕信号分離合成システムの処理を用いて行うものである。

[0121] (第 1の実施の形態）

本発明の第 1の実施の形態における符号ィ匕信号蓄積配信システムを、図 1に示し説明する。

[0122] 図 1に示すように、符号化信号蓄積配信システムは、映像再生のための符号化ストリーム (伝送符号化信号)を送出するサーバ 1000と、ネットワーク上で伝送路選択を行うルータ 2000と、複数の符号化ストリーム (伝送符号化信号)を受信し合成を行うレシーノ 3000a、 3000b * · ·、 3000ηと、を備えてヽる。レシーノ 3000a、 3000b · · ·、 3000ηは、いくつであっても良い。また、ルータ 2000も、複数備えていても構わない。ルータ 2000を複数備えた場合の例は、他の実施の形態で説明する。

[0123] また、レシーノ 3000a、 3000b · · ·、 3000ηによって合成および復号された符号化ス卜リームは、それぞれディスプレイ 4000a、 4000b - · ·、 4000ηにより映像として再生される。

[0124] ここで、サーバ 1000に入力される符号化ストリームは、標準の符号化器で生成された符号化ストリームであり、例えば、カメラ 600がとらえた映像を、符号化器 700で符号ィ匕したものであったり、コンテンツ蓄積器 800に記憶されたコンテンツの符号化ストリームである。また、サーバ 1000は、分離器 1010およびサーバ蓄積器 1040を備え、ルータ 2000は、伝送路選択器 2010および転送器送信情報記憶手段としてのルータ蓄積器 2040を備えて、る。

[0125] また、レシーノ 3000a、 3000b…、 3000ηは、それぞれ合成器 3010a、 3010b · • ·、 3010η,復号器 3030a、 3030b…、 3030ηおよびレシーノ蓄積器 3040a、 30 40b- · ·、 3040ηを備え、レシーノ 3000a、 3000b * · ·、 3000η【こお!ヽて復号を行う復号器 3030a、 3030b · · ·、 3030ηは、標準のものに準拠する。

[0126] ここで、レシーノ 3000a、 3000b…、 3000η,合成器 3010a、 3010b…、 3010 n、復号器 3030a、 3030b- · ·、 3030ηおよびレシーノ蓄積器 3040a、 30墨…、 3040ηは、それぞれ同様のものであるので、以下では、その 1つをレシーバ 3000、合成器再配信要求送信手段および合成器未受信信号検索手段としての合成器 30 10、復号器 3030および合成器受信情報記憶手段としてのレシーバ蓄積器 3040として説明する。また、ディスプレイ 4000a、 400(Λ · · ·、 4000ηも、それぞれ同様のものであるので、その 1つをディスプレイ 4000とする。

[0127] 次に、本符号ィ匕信号蓄積配信システムの概要について、図 2から図 4を参照して、説明する。

[0128] まず、図 2に示すように、サーバ 1000において、符号化器 700等力も符号化ストリームを入力する。サーバ 1000では、符号化ストリームを入力すると、分離器 1010により、複数の分離ストリーム (伝送符号化信号; Stl〜St6)に分離する。そして、分離した複数の分離ストリーム (Stl〜St6)を、サーバ蓄積器 1040に蓄積する。

[0129] 次に、図 3に示すように、サーバ 1000が、サーバ蓄積器 1040に蓄積した分離ストリーム（Stl〜St6)を、ノレータ 2000に送信する。ノレータ 2000で ίま、サーノ 1000力ら送信された分離ストリーム（Stl〜St6)を受信する。そして、ルータ 2000は、受信した分離ストリーム（Stl〜St6)から、ルータ 2000で蓄積する分離ストリーム（Stl、 St 3、 St5、 St6)を選択し、ルータ蓄積器 2040に蓄積する。続いて、ルータ 2000では、受信した分離ストリーム（Stl〜St6)から、ルータ 2000から送信する分離ストリーム (St2、 St4)を選択し、レシーバ 3000に送信する。ここで、ルータ 2000とレシーノ 3 000との間の帯域は、狭帯域であるとする。すなわち、サーノ 1000とルータ 2000との間の帯域は、太ぐルータ 2000とレシーバ 3000との間の帯域は、細くなつている。

[0130] レシーバ 3000では、ルータ 2000から送信された分離ストリーム（St2、 St4)を受信する。そして、レシーバ 3000は、受信した分離ストリーム（St2、 St4)を、レシーバ蓄積器 3040に蓄積する。また、レシーバ 3000では、受信した分離ストリーム（St2、 St 4)を、合成器 3010で合成し、合成ストリームを生成して、生成した合成ストリームを復号器 3030で復号することにより、ディスプレイ 4000で映像を再生することができる

[0131] さらに、図 4に示すように、レシーノ 3000力らノレータ 2000に対して、分離ストリーム

(Stl〜St6)のリクエスト（再配信要求）を送る。ルータ 2000では、レシーノ 4000力ら送信されたリクエストと配信帯域にしたがって、ルータ蓄積器 2040から再配信する分離ストリーム（Stl、 St3)を選択し取得する。そして、ルータ 2000は、取得した分離ストリーム（Stl、 St3)を、レシーノ 3000【こ送信する。

[0132] レシーバ 3000では、ルータ 2000から今回送信された分離ストリーム（Stl、 St3)を受信する。そして、レシーバ 3000は、受信した分離ストリーム（Stl、 St3)と、レシ一バ蓄積器 3040にすでに蓄積していた分離ストリーム（St2、 St4)とを、合成器 3010 で合成し、合成ストリームを生成する。生成した合成ストリームは、復号器 3030で復号することにより、前回よりも高品質な映像をディスプレイ 4000で再生することができる。

[0133] 以上のように、本符号化信号蓄積配信システムでは、サーバ 1000、ルータ 20000 、レシーバ 3000のそれぞれが蓄積機能を有することにより、再配信要求に対して足りな、符号化ストリームのみを送信して、レシーバ 3000で受信済みの符号化ストリームと合成して復号することができるので、小さな容量の符号化ストリームの送受信を行うだけで、高品質の映像を復元して、再生することができる。

[0134] 以下、各装置の詳細説明を行う。

まず、サーバ 1000の分離器 1010およびサーバ蓄積器 1040との関係について、図 5、図 6にブロック図を示し、説明する。

[0135] 図 5、図 6に示すように、分離器 1010は、すでに符号ィ匕されアーカイブ等に蓄積されている符号化ストリームやカメラで撮影され符号化された符号化ストリームを入力とし、独立した符号化ストリームに分離し出力する。また、分離器 1010は、分離器入力手段および分離器分離手段としての分離部 (separateU 100と、分離器多重化手段および分離器出力手段としての多重化部 (MUX)1600と、を備えている。

[0136] 分離器蓄積手段としてのサーバ蓄積器 1040に蓄積される符号化ストリームは、多重化部 1600から出力され、サーバ 1000から直接出力される伝送符号ィ匕信号（図 5 の場合）、あるいは、分離部 1100で分離され、多重化部 1600で多重化される前の基本ストリーム B、拡張ストリーム E (m) (図 6の場合)である。

[0137] 分離器 1010による分離ストリーム生成の方法は、多重化部 1600における処理により、以下に示す 2つの方式があり、各方式の処理図を図 7、図 8にそれぞれ示す。

[0138] 方式（1) ロバストネス伝送路のあるネットワークで映像の送出を行う。

[0139] 方式（2) ロバストネス伝送路のないネットワークで映像の送出を行う。

[0140] 分離部 (separate)l lOOは、入力された符号化ストリームを、 1本の基本ストリーム Bと

、 M本の拡張ストリーム E(m) (0≤m≤M—l)に分離する。

[0141] 多重化部 (MUX)1600は、分離部 1100から出力される基本ストリーム Bと拡張ストリーム E(m) (0≤m≤M— 1)の多重化を、伝送路の特性に応じて行う。その方法は、以下に示す方式（1)と方式 (2)とがある。

[0142] 方式（1)

[0143] 方式（1)では、分離ストリームとして St(0)と、 L本のストリーム St(l) (l≤l≤L— 1)を出力する。基本ストリーム Bは、分離ストリーム St(0)として伝送エラーの発生しない口バストネス伝送路に送出され、拡張ストリーム E(m) (0≤m≤M— 1)は、各々分離ストリーム St(l) (1≤1≤L— 1)として伝送される。 St(l)を下記式（1)に示す。

[数 3]

[0144] 1番目の分離ストリーム St(l)のビットレート Rate[St(l)]は、下記式（2)のように表現で

[数 4] [ Rate[St(0)] = Rate[B] . . .式（

L Rate[St(/ )] = Rate[E(7 - l)] (L = M + 1, l≤J≤U)

[0145] 方式（2)

[0146] 方式（2)では、 L本のストリーム St(l) (0≤l≤L— 1)が出力される。基本ストリーム B は、コピーされすべての拡張ストリーム E(m)に多重化される。このように、基本ストリーム Bを複数の伝送路を用いて伝送することによりネットワーク状態に依存しない再生を保証する。この場合、分離ストリーム St(l)は、下記式（3)のようにあらわすことができる。ここで、 Multiplex[ ']は多重化を意味する。

[0147] St(l) =Multiplex[B,E(l)] (L = M、 0≤1≤M— 1) 式（3)

[0148] 分離ストリーム St(l)のビットレート Rate[St(l)]は、下記式 (4)となる。

[0149] Rate[St(l)] = Rate[B + E(l)] (L = M、 0≤1≤M— 1) 式（4)

[0150] 次に、ルータ 2000について、図 9に示し説明する。

[0151] 同図に示すように、ルータ 2000は、伝送路選択器 2010、スィッチ制御器 2020および転送器蓄積手段としてのルータ蓄積器 2040を備え、サーバ 1000より出力された L本の分離ストリーム St(l)を入力とし、ネットワーク状況に応じ伝送路選択 (伝送路のオン'オフ）により伝送するストリームのレートを制御し、映像のスケーラビリティを実現するとともに、蓄積する分離ストリーム St(l)を選択し、ルータ蓄積器 2040に蓄積するものである。

[0152] また、伝送路選択器 1010は、映像蓄積機能を有するにあたり、ストリームごとに蓄積および伝送の有無をそれぞれスィッチで制御するため、転送器受信手段および転送器蓄積信号選択手段としての蓄積制御スィッチボックス 2300ならびに転送器送信手段および転送器送信信号選択手段としての帯域選択制御スィッチボックス 2400 を備えている。蓄積制御スィッチボックス 2300は、スィッチ制御器 2020により制御され、ルータ蓄積器 2040に出力する分離ストリーム St(l)を選択し、帯域選択制御スィツチボックス 2400は、スィッチ制御器 2020により制御され、レシーバ 3000に送信する分離ストリーム St(l)を選択するものである。ここで、ルータ 2000より出力されるストリ一ムの総レート Rate[St out]を、 Rate[St out] =∑ Rate[St(l)]とする。ルータ 2000の

1

出力ストリームの目標総レートを、 Rtargetとすると、 Rate[St out] ≤ Rtargetとなる St( 1)の伝送路スィッチをオンにする。

[0153] スィッチ制御器 2020は、 2つのレジスタを持ち、それぞれのレジスタの値により蓄積制御スィッチボックス 2300、帯域選択制御スィッチボックス 2400を制御する。蓄積制御スィッチボックス 2300の構成およびスィッチ制御器 2020による制御を、図 10に、帯域選択制御スィッチボックス 2400の構成およびスィッチ制御器 2020による制御を、図 11に示す。

[0154] スィッチ制御機能におけるレジスタの持つ値を、 Rt 、う 2進数の数値で表す。 Rは、 L桁からなり、各ビットが MSB (最上位ビット)側から順に Sw(0)、 Sw(l) · · ·、 Sw(L —1)の各状態に対応する。蓄積制御スィッチのレジスタの値を Rsとし、帯域選択制御スィッチのレジスタの値を Rdとする。

[0155] したがって、図 10、図 11に示すように、スィッチ制御器 2020は、レジスタ Rsとレジスタ Rdとを有し、レジスタ内の値により、蓄積制御スィッチボックス 2300および帯域選択制御スィッチボックス 2400を制御して、それぞれ蓄積する分離ストリーム St(l)、送信する分離ストリーム St(l)を選択するものである。

[0156] 図 10に示すように、蓄積制御スィッチボックス 2300の制御では、スィッチ制御器 20 20のレジスタ Rsの値が" 0"のときには、蓄積制御スィッチボックス 2300の該当のスィツチを" 0"側、すなわちアースして分離ストリーム St(l)を蓄積せず、スィッチ制御器 20 20のレジスタ Rsの値が" 1"のときには、蓄積制御スィッチボックス 2300の該当のスィツチを" 1"側、すなわちルータ蓄積器 2040に分離ストリーム St(l)を出力する。

[0157] また、ルータ蓄積器 2040は、蓄積制御スィッチボックス 2300から出力された分離ストリーム St(l)を蓄積するものである。

[0158] 図 11に示すように、帯域選択制御スィッチボックス 2400の制御では、スィッチ制御器 2020のレジスタ Rdの値が" 0"のときには、帯域選択制御スィッチボックス 2400の該当のスィッチを" 0"側、すなわちアースして分離ストリーム St(l)を出力せず、スイツチ制御器 2020のレジスタ Rsの値力 ' 1"のときには、帯域選択制御スィッチボックス 2 400の該当のスィッチを" 1"側、すなわちレシーバ 3000に分離ストリーム St(l)を送信する。

[0159] ここで、 Rdが下記式（5)のように与えられたときに、 3つの制御ポリシー（全ストリームを蓄積、全ストリームを破棄、伝送しないストリームを蓄積)それぞれにおける Rsの設定値を、図 12に示す。

[0160] Rd= 101100 式（5)

[0161] このうち、伝送しないストリームのみを蓄積する場合は、

[数 5]

Rs = Rd . · *^ ⁽⁶⁾

[0162] と表される。

[0163] 図 13に、スィッチ制御器 2020の制御による伝送路選択器 2010における伝送路選択の具体例を示す。また、図 14に、図 13におけるスィッチの値と蓄積、伝送状態の関係を示す。

[0164] この場合、分離ストリーム数を決定するパラメータ Lは、 L = 6である。蓄積に関しては、 Sw (0)、 Sw (3)、 Sw (4)をオンにすることにより、蓄積制御スィッチボックス 23 s s s

00で分離ストリーム St (0)、 St (3)、 St (4)が選択され、ルータ蓄積部 2040に蓄積される。また、伝送に関しては、目標レート Rtargetが与えられた際に、 Rate[St out]≤ Rtargetを実現するため、 Sw (0)、 Sw (2)、 Sw (3)、 Sw (5)をオンにすることによ

d d d d

り、帯域選択制御スィッチボックス 2400で分離ストリーム St(0)、 St(2)、 St(3)、 St(5) が選択され、 Rate[St(0) + St(2) + St(3) + St(5)]≤ Rtargetを実現している。

[0165] 図 15から図 17に、ルータ 2000においてスィッチ制御器 2020におけるレジスタ Rs 、 Rdを利用した分離ストリーム St (1)の再配信処理例を示す。また、図 18に、ルータ 2 000とレシーバ 3000との間の配信動作とレジスタ値 Rdの関係を示す。ここでは、ルータ 2000とレシーバ 3000との間の回線は、使用可能な帯域がストリーム 2本相当に制限されているものとする。

[0166] 図 15に示すように、この伝送路を使用したストリームを配信するとき、全ての分離ストリーム St (1)力ルータ 2000に蓄積されているとする。すなわち、

[0167] Rs= l l l l l l 式（7)

である。

[0168] ルータ 2000では、サーバ 1000から配信された分離ストリーム St (0)〜St (5)から、レシーバ 3000に配信する帯域にしたがって送信する分離ストリーム St (1)を選択する Rdの値を求める。ここでは、全ての分離ストリーム St (1)が同等の符号量で、ストリーム 2本相当の帯域なので、レジスタ Rdの中の 2つのビット、 Sw (0)と、 Sw (3)を選

d d 択する。これにより、

[0169] Rd= 100100 式（8)

となる。次に、この Rd[100100]にしたがって、スィッチ制御器 2020力伝送路選択器 2010の帯域選択制御スィッチボックス 2400を制御し、分離ストリーム St (0)と St ( 3)を選択する。そして、ルータ 2000からこの選択した分離ストリーム St (0)と St (3)をレシーバ 3000に第 1伝送として送信する。レシーバ 3000では、受信した分離ストリーム St (0)と St (3)をレシーバ蓄積器³040に蓄積する。

[0170] 次に、図 16に示すように、レシーバ 3000からさらに分離ストリーム St (1)を配信してもらうように、第 1リクエストを送信する。ルータ 2000では、レシーバ 3000からの第 1リタエストを受信すると、 Rdを検索し、 Rdのビットが 0に対応するストリームをルータ蓄積器 2040から探し出す（St (1)、 St (2)、 St (4)、 St (5) )。

[0171] 次に、図 17に示すように、探索した分離ストリーム St (1)、 St (2)、 St (4)、 St (5)から配信する帯域にしたがって送信する分離ストリーム St (1)を選択する。ここでは、分離ストリーム St (1)、 St (5)を選択し、ルータ蓄積器 2040から読み込み、レシーバ 30 00に第 2伝送として送信する。スィッチ制御器 2040では、分離ストリーム St (1)、 St ( 5)を送信したら、 Rdの Sw (1)、 Sw (5)に 1をセットする。レシーバ 3000では、ルー

d d

タ 2000から配信された分離ストリーム St (1)、 St (5)を受信し、合成器 3010において、受信した分離ストリーム St (l)、 St (5)と、レシーバ蓄積器 3040に蓄積されている分離ストリーム St (0)、 St (3)と、を合成する。

[0172] さらに、分離ストリーム St (1)が必要であれば、レシーバ 3000から第 2リクエストを送信する。このように、リクエストを繰り返すことにより、全ての分離ストリーム St (1)をレシーバ 3000で受信することもできる。

[0173] 次に、レシーバ 3000の合成器 3010について、説明する。合成器 3010は、入力される L，本のストリーム St(l)を合成し、合成ストリームの出力を行う。合成ストリームの映像品質は、受信するストリームの総レートのみに依存し、受信ストリームの種類に依存しない。受信するストリームの総レートは、ルータ 2000における伝送路選択により決定される。

[0174] レシーバ 3000の合成器 3010およびレシーバ蓄積器 3040との関係について、タイプ 1を図 19、タイプ 2を図 20に示し、説明する。

[0175] 図 19、図 20に示すように、合成器 3010は、多重分離部（DEMUX)と、基本ストリーム選択器 (B-Selector)と、合成器合成手段および合成器出力手段としての合成部（ merge) 3300と、を備え、さらに、レシーノ 3000は、合成制御器（merge controller) 3 020およびレシーバ蓄積器 3040を備えている。図示上は、多重分離部と基本ストリーム選択器とを合わせて合成器受信手段および合成器分離手段としての多重基本選択器 3090としている。また、合成制御器 3020および合成器蓄積手段としてのレシーバ蓄積器 3040につ、ては、合成器 3010に含まれる構成であっても構わな、。

[0176] また、図 19に示すタイプ 1においては、蓄積するストリームは多重分離する前のものであり、図 20に示すタイプ 2においては、多重分離後のものである。合成制御器 302 0は、 L桁力なるレジスタ Rmを持ち、それぞれ MSB (最上位ビット）側から St (0)、 S t (l) · · ·、 St (L— 1)の受信状態を表す。受信したストリームに対応するビットが 1となる。、

[0177] また、タイプ 1およびタイプ 2の合成器 3010における多重分離方式は、それぞれ 2 つ取り、上記方式（1)に対応する多重分離部および基本ストリーム選択器のブロック図を、図 21に、上記方式（2)に対応する多重分離部および基本ストリーム選択器のブロック図を、図 22にそれぞれ示す。

[0178] 方式（1)においては、通常の多重分離方式を取り、方式（2)においては、 Bストリームをそれぞれ Eストリームより多重分離し、最適な Bストリームを選択してから合成するため、実際に合成に使用されなカゝつた Bストリームは破棄される。

[0179] 多重分離部（DEMUX) 3100は、入力される L，本のストリーム St(l)を、 α本の基本ストリーム Βと、 Μ，本の拡張ストリーム E(m)に分割する。ここで、 αは、多重分離部 31 00に入力されるすべての分離ストリーム St(l)内に多重化されている基本ストリーム Β の総数を示し、上記方式（1)、方式（2)に応じてその数は異なり、下記式（9)に示すようになる。

[数 6] ₌ ( 1 (方式 1) . . ·式（9) ひ一 1_ L' (方式 2)

[0180] また、ストリーム分割時に検出されるストリームに発生した誤り等の情報は、合成制御器 3020に渡す。

[0181] 基本ストリーム選択器（B- Selector) 3200は、合成制御器 3020からの制御を受け、入力される α本の Bストリームからビット誤りの少ない 1本のストリームを選択し出力する。この際、 —1)本の基本ストリーム Βは破棄される。

[0182] 合成部 (merge) 3300は、合成制御器 3020からの制御を受け、入力される基本ストリーム Bと拡張ストリーム E(m) (0≤ m ≤ M，一 1)を合成し、合成ストリームを出力する。したがって、合成部 3300に入力された拡張ストリーム E(m)のすべてが合成されるというわけではない。

[0183] 合成制御器 (merge controller) 3020は、ネットワーク上の誤り検出器力誤り訂正情報、また、多重分離部 3100、合成部 3300における処理において検出される誤り情報を受け取り、基本ストリーム Bについての情報は基本ストリーム選択器 3200に対して、拡張ストリーム E(m)についての情報は合成部 3300に対して、制御をかけ、誤り訂正が不可能とされたストリームを合成制御器 3020において切り捨てる処理を行う。

[0184] 上記合成制御器 3020のレジスタ Rmを利用することで、ルータ 2000で説明したものと同様に、ストリームの再配信処理を行うことができる。上記ルータ 2000のスィッチ制御器 2020のレジスタ Rdが、配信状態を記憶する値であるのに対し、レシーバ 300 0の合成制御器 3020のレジスタ Rmは、受信状態を記憶する値であるので、伝送路上で失われたストリームに対する保障がある。

[0185] 図 23に、ルータ 2000とレシーバ 3000との間の配信動作とレジスタ値 Rmの関係を示す。ここでも、レジスタ Rdを使用した再配信処理のときと同様に、ルータ 2000には全てのストリームが蓄積しているものとし、ルータ 2000とレシーバ 3000との間の回線は、使用可能な帯域がストリーム 2本相当に制限されているものとする。

[0186] まず、初回配信で分離ストリーム St (0)、 St (3)を受信すると、受信した分離ストリーム St (0)、 St (3)に対応するレジスタ Rmのビットに 1をセットする。次に、レシーバ 30 00では、レジスタ Rmの値を参照し、受信していないストリームを検索する。伝送路の帯域を考慮してストリームを任意に選択し、ルータ 2000に再配信リクエストを送る。本例の第 1リクエストでは、受信していないストリームが Rmの各ビットより St (1)、 St (2) 、 St (4)、 St (5)と検出され、任意のストリームとして分離ストリーム St (1)、 St (5)を選択し、ルータ 2000へリクエストを送信している。ルータ 2000では、リクエストされたストリームをルータ蓄積器 2040から検索して、レシーバ 3000へ再配信する。レシーバ 3 000では、受信に成功すれば、 Rmの対応するビットに 1をセットして Rmを更新する。

[0187] 以上を繰り返して全ての分離ストリーム St (1)をレシーバ 3000に配信することができる。

[0188] ここで、サーバ 1000の分離器 1010の分離部 (separate)l 100およびレシーバ 300 0の合成器 3010の合成部 (merge)3300について、簡単に説明しておく。

[0189] 分離部 (separate)l 100の一実施形態である分離部 (separate)l 100aのブロック図を、図 24に示す。

[0190] 分離部 1100aは、係数情報分離部 1260、可変長復号器 (VLD) 1110、ランレべル係数変換器 1120、基本拡張階層分離器 1130、基本量子化係数変換器 1140、拡張量子化係数分離器 1150、基本再スキャン器 1160、予測誤差再スキャン器 117 0、拡張再スキャン器 1181、 1182、 1183、基本可変長符号化器 (VLC基本） 1210 、予測誤差可変長符号化器 (VLC予測誤差) 1220、拡張可変長符号化器 (VLC-F 0) 1231、 (VLC-F¹) 1232, (VLC 'F^N_1) 1233および係数情報多重ィ匕部 1270aを備え、符号化ストリーム（1次符号ィ匕信号)を入力し、基本符号化信号 B、拡張符号化信号 E (0)、 E (1)、 E (2) · · ·、 E (M— 1)を出力するものである。

[0191] 分離部 1100aの係数情報分離部 1260は、入力された符号化ストリーム（1次符号化信号)を、係数情報と係数情報以外に分離し、出力するものである。この場合、係数情報は、 2次元ランレングスによりハフマン符号ィ匕された量子化係数符号であり、係数情報以外とは MB層のデータとイントラ MBの DC係数符号である。

[0192] 可変長復号器 (VLD) 1110は、係数情報分離部 1260に分離された係数情報を、可変長復号し、ランレベル情報に変換するものである。

[0193] ランレベル係数変 120は、 VLD1110に復号されたランレベル情報を、係数変換し、 1次元の量子化係数列 Xに変換するものである。 [0194] 基本拡張階層分離器 1130は、ランレベル係数変 1120に変換された量子化係数列 Xを、基本階層の係数列 Βと、拡張階層の係数列 Εと、に分離するものである

[0195] 基本量子化係数変換器 1140は、基本拡張階層分離器 1130によって分離された基本階層係数列 Βを入力し、符号量削減のための変換、一般的には量子化を行い、基本量子化係数列 Cと、前記基本階層係数列 Βと前記基本量子化係数列 Cとの差分情報である余り係数列 (予測誤差係数列) Dと、に変換するものである。

[0196] ここで、基本量子化係数列 Cとは、基本階層係数列 Βの各係数値に対して符号量削減のための変換を行った基本量子化係数の列である。また、余り係数列 Dとは、前記基本階層係数列 Βの各係数値と、前記基本量子化係数列 Cの基本量子化係数から復元される各係数値との差である余り係数値 (予測誤差係数値)の列である。

[0197] 拡張量子化係数分離器 1150は、基本拡張階層分離器 1130によって分離された拡張階層係数列 Εを入力するとともに、外部から拡張階層分離パターン情報を入力し、前記拡張階層分離パターン情報にしたがって前記拡張階層係数列 Εを複数の拡張量子化係数列 F°、 F¹ " ' F^{N_ 1}に分離するものである。

[0198] 基本再スキャン器 1160および基本可変長符号化器 (VLC基本） 1210は、基本量子化係数変換器 1140に生成された基本量子化係数列 Cを、再スキャンし、可変長符号化し、基本量子化係数符号化信号を生成するものである。

[0199] 予測誤差再スキャン器 1170および予測誤差可変長符号化器 (VLC予測誤差） 12 20は、基本量子化係数変換器 1140に生成された余り係数列 Dを、再スキャンし、余り係数のランレベル係数値を生成し、この余り係数のランレベル係数値を、可変長符号化し、余り係数符号化信号を生成し、拡張符号ィ匕信号 E (0)として出力するものである。

[0200] 拡張再スキャン器 1181、 1182、 1183は、拡張量子ィ匕係数変換器 1150に生成されたそれぞれの拡張量子化係数列 F、 F F^N_1を、再スキャンし、拡張量子化係数のランレベル係数値を生成するものである。

[0201] 拡張可変長符号化器(¥1^ ) 1231、（VLC 'F¹) 1232、（VLC 'F^N_1) 1233は、それぞれ拡張再スキャン器 1181、 1182、 1183に生成された拡張量子化係数のランレベル係数値を、可変長符号化し、拡張符号化信号 E (1)、 E (2)、 E (M— 1)を生成するものである。

[0202] 係数情報多重化部 1270aは、 VLC基本 1210に生成された基本量子化係数符号化信号と、係数情報分離部 1260に分離された係数情報以外のデータと、を入力し、多重化して、基本符号化信号 Bを生成するものである。

[0203] 以上説明したように、分離部 1100aにおいて、符号化ストリーム（1次符号化信号）を入力して、基本符号化信号 B、拡張符号ィ匕信号 Ε (0)、 Ε (1)、 Ε (2) · · ·、 E (M— 1

)を生成することができる。

[0204] 次に、合成部 (merge)3300の一実施形態である合成部 (merge)3300aのブロック図を、図 25に示す。

[0205] 合成部 3300aは、係数情報分離部 3450a、基本可変長復号器 (VLD基本） 3310 、予測誤差可変長復号器 (VLD予測誤差) 3320、拡張可変長復号器 (VLD，E (0) ) 3331、（VLD'E (1) ) 3332、（VLD · E (N '—1) ) 3333、基本係数変換器 3340、予測誤差係数変換器 3350、拡張係数変換器 3361、 3362, 3363,基本量子化係数合成器 3370、拡張量子化係数合成器 3380、基本拡張階層合成器 3390、ランレベル係数変換器 3410、可変長符号化器 (VLC) 3420および係数情報多重化部 34 60を備え、基本符号化信号 B*、拡張符号化信号 E* (0)、 E* (1)、 E* (2)…、 E* ( M'—1)を入力し、合成ストリーム（3次符号ィ匕信号)を出力するものである。

[0206] 合成部 3300aの係数情報分離部 3450aは、入力された基本符号化信号 B*を、係数情報と係数情報以外に分離し、出力するものである。この場合、係数情報は、 2次元ランレングスによりハフマン符号化された量子化係数符号であり、係数情報以外とは MB層のデータとイントラ MBの DC係数符号である。

[0207] 基本可変長復号器 (VLD基本) 3310および基本係数変 3340は、係数情報分離部 3450aに分離された係数情報を、可変長復号し、基本量子化係数列 C*に変換するものである。

[0208] 予測誤差可変長復号器 (VLD予測誤差） 3320および予測誤差係数変換器 3350 は、入力された拡張符号化信号 E* (0)を、可変長復号し、余り係数 (予測誤差係数）のランレベル情報に変換し、さらに、余り係数列 (予測誤差係数列) に変換するものである。

[0209] 拡張可変長復号器0^ 3^ (0) ) 3331、（VLD'E (l) ) 3332、（VLD'E (N'—1 ) ) 3333は、それぞれ入力された拡張符号化信号 E* (0)、 E* (1)、 E* (Μ'— 1)を、可変長復号し、拡張量子化係数のランレベル情報に変換するものである。

[0210] 拡張係数変^^ 3361、 3362、 3363は、それぞれ VLD'E (O) 3331、 VLD'E (1 ) 3332、 VLD'E (N，—1) 3333に変換された拡張量子化係数のランレベル情報を、拡張量子化係数列 F*°、

F*^N'^_1に変換するものである。

[0211] 基本量子化係数合成器 3370は、基本係数変換器 3340に変換された基本量子化係数列 C*と、予測誤差係数変換器 3350に変換された余り係数列 (予測誤差係数列 ) D*と、を合成し、基本階層係数列 B*を生成するものである。

[0212] 拡張量子化係数合成器 3380は、 VLD'E (0) 3331、 VLD-E (l) 3332· · ·、 VL D'E (N， - 1) 3333に変換された拡張量子化係数列 F*°、 F*¹ ' . ' F*^N'^_1を入力するとともに、外部カゝら拡張階層分離パターン情報を入力し、前記拡張階層分離バターン情報にしたがって前記拡張量子化係数列 F*°、 F*¹ ' · ·、 F*^N'^_1を拡張階層係数列 E*に合成するものである。

[0213] 基本拡張階層合成器 3390は、基本量子化係数合成器 3370に生成された基本階層係数列 B*と、拡張量子化係数合成器 3380に生成された拡張階層係数列 E*と、を合成して、合成量子化係数列（3次量子化係数列) X*を生成するものである。

[0214] ランレベル係数変翻 3410は、基本拡張階層合成器 3390に生成された合成量子化係数列（3次量子化係数列) X*を係数変換し、ランレベル情報に変換するものである。

[0215] 可変長符号化器 (VLC) 3420は、ランレベル係数変 ^3410に変換されたランレベル情報を可変長符号ィ匕し、係数情報の符号ィ匕信号を生成するものである。

[0216] 係数情報多重化部 3460は、 VLC3420に生成された係数情報の符号化信号と、係数情報分離部 3450aに分離された係数情報以外のデータと、を入力し、多重化して、合成ストリーム（3次符号化信号)を生成するものである。

[0217] 以上説明したように、合成部 3300aにおいて、基本符号化信号 B*、拡張符号化信号 E* (0)、 E* (1)、 E* (2)…、 E* (M，— 1)を入力して、合成ストリーム（3次符号化信号)を生成することができる。

[0218] この合成ストリーム（3次符号化信号）は、通常の MPEG— 2ストリームであるので、例えば一般的な復号器である復号器 3030において復号して、再生することができる

[0219] (第 2の実施の形態）

次に、分離器 1010の多重化部 1600で、拡張ストリーム E(m)を多重化することで、レートの異なる分離ストリーム St(l) (0≤1≤L— 1)を生成する場合について、説明する。

[0220] 多重化部 1600で拡張ストリーム E(m)を多重化することにより、分離部 1100より出力される拡張ストリーム数 Mを変更することなぐ伝送路の数に応じた L本の分離ストリームが生成可能となり、分離ストリーム St(l)のレートの違いを利用して、選択可能なレートの種類がストリームの数よりも多くなる。

[0221] この場合、分離器 1010の多重化器 1600内で、拡張ストリーム E (m)を多重化することで、分離ストリーム St(l)をすベて異なるレートにすることができる。このとき、拡張ストリーム E (m)を G1本多重化し、分離ストリーム St(l)のレートは、多重化された拡張ストリームの合計レートにほぼ等しくなり、多重化パラメータ G1によって決まる。

[0222] 拡張ストリーム E (m)の多重化の方法としては、ストリームを 1本分ずつ増やして!/、く方法、ストリームを 2のべき乗倍にしていく方法等がある。上記の 2つの方法は、 G1 = 1+ 1および G1 =^となる合成であり、拡張ストリーム E (m)の多重化の方法力数列 Xに従うものとすると、それぞれ下記式（10)、下記式（11)となる。

[0223] X = { 1, 2, 3 · · · , n} 式（10)

[0224] X = { 1, 2, 4· · · , 2^n_1} 式（11)

[0225] 上記のようにレートの異なる分離ストリーム St(l)が生成された場合にっ、て、伝送路選択器の伝送路選択の具体例を、図 26に示し説明する。

[0226] また、本実施の形態は、上記特許、特願 2003— 381859における第 5の実施の形態に、映像蓄積機能を付加したものである。

[0227] 図 26に示すように、分離器 1010内の多重化部 1600において、 G1 =^となる拡張ストリームの多重化が行われ、基本ストリームの多重化が方式（1)、方式（2)のいずれかの方式を用いて行われ、分離ストリーム St(0)、 St(l)、 St(2)が生成された。このとき

、 L = 3であり、分離ストリーム St (1)のレート力それぞれ Rate [St(0)] ^q、 Rate[St(

1)] 2q、 Rate[St(2)] 4qとなるように生成されたとする。

[0228] 帯域制御スィッチボックス 2300では、上記実施の形態と同様に、スィッチ制御部 2

020のレジスタ Rsの値 [110]にしたがって制御され、分離ストリーム St (0)、 St (1)をルータ蓄積器 2040に蓄積する。

[0229] 帯域選択制御スィッチボックス 2400では、目標レートが Rtarget = 4qのとき、分離ストリーム St(2)の伝送路スィッチをオン、 St (0)、 St (1)の伝送路スィッチをオフにするように、スィッチ制御部 2020のレジスタ Rdの値が [001]となり、 Rate[St(out)]≤4q を実現している。

[0230] ここで、 Rdに関して、レジスタの各ビットが LSB (最下位ビット）側から Sw (0)、 Sw

d d

(1) · · ·と対応するように構成すると、使用帯域を 2進数で表した値をレジスタ値として与えることで帯域制御することもできる。

[0231] また、映像蓄積機能を有しているため、上記実施の形態と同様に、レジスタ値の参照による再配信が可能である。

[0232] 合成器 3010の多重分離部 3100は、上記特許、特願 2003— 381859における第

5の実施の形態に、映像蓄積機能を付加したものである。

[0233] (第 3の実施の形態）

次に、多段伝送を行う符号化信号蓄積配信システムを、図 27、図 28に示し、説明する。

[0234] 図 27、図 28に示すように、本実施の形態の符号ィ匕信号蓄積配信システムでは、サーノ 1000とレシーノ 3000との間に、ノレータ 2000aとノレータ 2000bと力介在するちのとする。また、ルータが 3つ以上の場合であっても、本実施の形態と同様の処理を行うことができる。

[0235] まず、図 27に示すように、ストリームの初回配信では、サーバ 1000がオリジナルの符号化ストリームを入力し、複数の分離ストリーム St (1)に分離して、全ての分離ストリーム St (1)をサーバ蓄積器 1040に蓄積する。

[0236] 次に、サーノ 1000力らルータ 2000aに、全ての分離ストリーム St (1)を配信する。ここでは、サーバ 1000からルータ 2000aの伝送路においては、十分な帯域が確保されているものとし、全ての分離ストリーム St (1)が配信されて、ルータ 2000aでは、分離ストリーム St (1)の蓄積は行わな!/、。

[0237] 続！/、て、ノレータ 2000a力らノレータ 2000bへの伝送にお!/、て、分離ストリーム St (1) 、 St (5)力失われたとする。次に、ノレータ 2000b力らレシーノ 3000の伝送路にお!/、ては、帯域制限されており、ルータ 2000bの選択により、分離ストリーム St (2)、 St (3 )のみが配信される。また、ルータ 2000bでは、分離ストリーム St (0)、 St (4)を、ルータ蓄積器 2040bに蓄積する。さらに、レシーバ 3000では、受け取った分離ストリーム St (2)、 St (3)を、レシーバ蓄積器 3040に蓄積する。

[0238] 次に、図 28に示すように、レシーバ 3000は、取得できなかった分離ストリーム St (0 ；)、 St (1)、 St (4)、 St (5)の再酉己信!;クエス卜をノレータ 2000bに送る。

[0239] ルータ 2000bでは、ルータ蓄積器 2040bに蓄積されている分離ストリーム St (1)を検索し、リクエストされたストリームの一部 St (0)、 St (4)をレシーバ 3000に配信する。また、ルータ 2000bは、見つからなかった分離ストリーム St (1)、 St (5)の再配信リクエス卜をルータ 2000aに送る。

[0240] ノレータ 2000aでは、ノレータ蓄積器 2040aに蓄積されて!、る分離ストリーム St (1)を検索するが、蓄積されている分離ストリーム St (1)が無いため、配信は行わない。さらに、ルータ 2000aは、見つからなかった分離ストリーム St (1)、 St (5)の再配信リクェストをサーバ 1000に送る。

[0241] サーバ 1000では、蓄積されている分離ストリーム St (1)を検索し、リクエストされた分離ストリーム St (l)、 St (5)を、ルータ 2000a、ルータ 2000bを経由して、レシーノ 30 00に酉己信する。また、このとき、レシーノ 3000への酉己信は、ノレータ 2000a、ノレータ 2 000bを経由しなくても構わない。

[0242] レシーバ 3000では、レシーバ蓄積器 1040に蓄積されている分離ストリーム St (2) 、 St (3)と、ノレータ 2000b力ら配信された分離ストリーム St (0)、 St (4)と、サーバ 10 00から配信された分離ストリーム St (1)、 St (5)と、を合成器 3010で合成して、サーノ 1000に入力されたオリジナルの符号化ストリームと同等の合成ストリームを得ることができる。 [0243] 以上の処理により、レシーノ 3000は、ネットワーク上の最も近いルータ 2000ゃサーバ 1000から必要な分離ストリーム St (1)を取得することができ、通信コストの削減ができるとともに、ネットワーク上のトラフィックを抑えて、合成ストリームを生成することができる。ここで、ネットワーク上で最も近いとは、物理的な距離が近いことを意味するものではなぐ回線経路が近いことをあらわす。

[0244] また、この合成ストリームは、復号器 3020に出力され、復号されて、ディスプレイ 40 00で再生することができる。したがって、ネットワーク上で最も近い装置 (ルータまたはサーバ)から、ストリームを受信して、オリジナルと同一の映像再生を行うことができる。

産業上の利用可能性

[0245] 以上のように、本発明にカゝかる符号ィ匕信号蓄積配信システム、符号化信号選択転送装置、符号化信号分離送信装置および符号化信号受信合成装置は、再配信要求時に、伝送符号化信号を符号化信号分離送信装置まで取りに行かずに、符号ィ匕信号選択転送装置に蓄積された伝送符号ィ匕信号を取得することができ、ネットワーク上のトラフィックを悪ィ匕させず、通信コストを抑えて、必要に応じて高品質の映像を得ることができる合成ストリームの生成を行うことができると!/、う効果を有し、映像のスケーラブル伝送を行う符号化信号蓄積配信システム、符号化信号選択転送装置、符号化信号分離送信装置および符号化信号受信合成装置等として有用である。

Claims

請求の範囲

複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1 次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィ匕信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器と、

前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器と、

前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記 3次動画像を復元させる 3次符号化信号を合成する受信合成器と、

を備え、

前記分離送信器が、

前記 1次符号化信号を入力する分離器入力手段と、

前記分離器入力手段で入力した 1次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離手段と、

前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、

前記分離器多重化手段で多重化した伝送符号化信号を蓄積する分離器蓄積手段と、

前記伝送符号化信号を前記選択転送器に送信する分離器送信手段と、を備え、

前記選択転送器が、

前記伝送符号化信号を前記分離送信器から受信する転送器受信手段と、前記転送器受信手段で受信した伝送符号化信号を蓄積する転送器蓄積手段と、前記伝送符号化信号を前記受信合成器に送信する転送器送信手段と、を備え、

前記受信合成器が、前記伝送符号化信号を前記選択転送器から受信する合成器受信手段と、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、

前記合成器分離手段で分離した基本符号化信号と拡張符号化信号と、を前記受信合成器に蓄積する合成器蓄積手段と、

前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、 3次動画像を復元させる 3次符号化信号を生成する合成器合成手段と、

前記合成器合成手段で合成した 3次符号ィヒ信号を出力する合成器出力手段と、前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信手段と、

を備え、

さらに、前記選択転送器が、

前記受信合成器から送信された伝送符号化信号の再配信要求を受信する転送器再配信要求受信手段と、を備え、

前記転送器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記受信合成器に送信し、

前記受信合成器の合成器受信手段が、前記再配信要求にしたがって前記選択転送器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信システム。

[2] 請求項 1に記載の符号ィ匕信号蓄積配信システムにお、て、

前記選択転送器が、

前記転送器受信手段で受信した伝送符号化信号の中から前記選択転送器に蓄積する伝送符号化信号を選択する転送器蓄積信号選択手段を備え、

前記転送器蓄積手段が、前記選択した伝送符号ィ匕信号を蓄積することを特徴とする符号化信号蓄積配信システム。

[3] 請求項 1に記載の符号ィ匕信号蓄積配信システムにお、て、

前記選択転送器が、

前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択手段を備え、

前記転送器送信手段が、前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とする符号化信号蓄積配信システム。

[4] 請求項 3に記載の符号ィ匕信号蓄積配信システムにお、て、

前記選択転送器が、

前記転送器送信手段が送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶手段を備え、

前記転送器送信信号選択手段が、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とする符号化信号蓄積配信システム。

[5] 請求項 3に記載の符号ィ匕信号蓄積配信システムにお、て、

前記受信合成器が、

前記合成器受信手段で受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶手段と、

前記合成器受信情報記憶手段で記憶した識別情報をもとに未受信の伝送符号ィ匕信号を検索する合成器未受信信号検索手段と、

を備え、

前記合成器再配信要求送信手段が、前記未受信の伝送符号化信号の再配信要求を前記選択転送器に送信し、

前記選択転送器の転送器再配信要求受信手段が、再送する前記伝送符号化信号が指定された再配信要求を前記受信合成器力受信し、

前記転送器送信信号選択手段が、前記再配信要求にしたがって再送する伝送符号化信号を選択し、

[6] 請求項 5に記載の符号ィ匕信号蓄積配信システムにお、て、

前記選択転送器が、

前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれて、る場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信手段を備え、

前記分離送信器が、

前記伝送符号化信号の再配信要求を前記選択転送器から受信する分離器再配信要求受信手段を備え、

前記分離器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記選択転送器に送信し、

前記選択転送器の転送器受信手段が、前記再配信要求にしたがって前記分離送信器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信システム。

[7] 請求項 6に記載の符号ィ匕信号蓄積配信システムにお、て、

前記選択転送器の転送器受信手段が、前記分離送信器または他の選択転送器から、前記伝送符号化信号を受信し、

前記転送器送信手段が、前記伝送符号化信号を、前記受信合成器または他の選択¾5送器に、送信し、

前記転送器再配信要求受信手段が、前記受信合成器または他の選択転送器から、前記再配信要求を受信し、

前記転送器再配信要求送信手段が、前記蓄積外の伝送符号化信号の再配信要求を、他の選択転送器または前記分離送信器に、送信することを特徴とする符号ィ匕信号蓄積配信システム。

[8] 請求項 3から請求項 7の、ずれ力 1項に記載の符号ィ匕信号蓄積配信システムにおいて、

前記選択転送器の転送器送信信号選択手段が、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とする符号化信号蓄積配信システム。

[9] 複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1 次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィ匕信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器と、

を備え、

前記分離送信器が、

前記 1次符号化信号を入力する分離器入力手段と、

前記分離器分離手段で分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積手段と、

前記選択転送器が、

前記受信合成器が、

前記伝送符号化信号を前記選択転送器から受信する合成器受信手段と、前記合成器受信手段で受信した伝送符号化信号を前記受信合成器に蓄積する合成器蓄積手段と、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、

を備え、

さらに、前記選択転送器が、

前記受信合成器から送信された再配信要求を受信する転送器再配信要求受信手段と、を備え、

前記転送器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信し、

請求項 9に記載の符号ィ匕信号蓄積配信システムにおいて、

前記選択転送器が、

前記分離送信器が、

前記分離器多重化手段が、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号ィ匕信号を生成し、

前記分離器送信手段が、前記生成した伝送符号化信号を前記選択転送器に送信し、

[11] 複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1 次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィ匕信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、前記複数の拡張符号化信号と、を任意に組み合わせて生成された伝送符号化信号を受信する転送器受信手段と、

前記転送器受信手段で受信した伝送符号化信号を蓄積する転送器蓄積手段と、前記伝送符号化信号を送信する転送器送信手段と、

前記伝送符号化信号の再配信要求を受信する転送器再配信要求受信手段と、を備え、

前記転送器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とする符号化信号選択転送装置。

[12] 請求項 11に記載の符号化信号選択転送装置にお!、て、

前記転送器受信手段で受信した伝送符号化信号の中から蓄積する伝送符号化信号を選択する転送器蓄積信号選択手段を備え、

前記転送器蓄積手段が、前記選択した伝送符号ィ匕信号を蓄積することを特徴とする符号化信号選択転送装置。

[13] 請求項 11に記載の符号化信号選択転送装置にお!、て、

前記転送器送信手段が、前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とする符号化信号選択転送装置。

[14] 請求項 13に記載の符号化信号選択転送装置にお!/、て、前記転送器送信手段が送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶手段を備え、

前記転送器送信信号選択手段が、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とする符号化信号選択転送装置。

[15] 請求項 13に記載の符号化信号選択転送装置において、

前記転送器再配信要求受信手段が、再送する前記伝送符号化信号が指定された再配信要求を受信し、

[16] 請求項 15に記載の符号化信号選択転送装置において、

前記再配信要求の中に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれて!/、る場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信手段を備え、

前記転送器受信手段が、前記再配信要求にしたがった伝送符号ィ匕信号を受信することを特徴とする符号化信号選択転送装置。

[17] 請求項 16に記載の符号化信号選択転送装置において、

前記転送器受信手段が、前記伝送符号化信号を生成し送信する分離送信器または他の選択転送器から、前記伝送符号化信号を受信し、

前記転送器送信手段が、前記伝送符号化信号を、前記伝送符号化信号を受信し 3次動画像を復元させる 3次符号化信号を合成する受信合成器または他の選択転送に、し、

前記転送器再配信要求送信手段が、前記蓄積外の伝送符号化信号の再配信要求を、他の選択転送器または前記分離送信器に、送信することを特徴とする符号ィ匕信号選択転送装置。

[18] 請求項 13から請求項 17のいずれか 1項に記載の符号ィ匕信号選択転送装置において、

前記転送器送信信号選択手段が、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とする符号化信号選択転送装置。

[19] 複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1 次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィ匕信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信手段と、

前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、

前記合成器分離手段で分離した基本符号化信号と拡張符号化信号と、を蓄積する合成器蓄積手段と、

前記合成器合成手段で合成した 3次符号ィヒ信号を出力する合成器出力手段と、前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信手段と、を備え、

前記合成器受信手段が、前記再配信要求にしたがった伝送符号ィ匕信号を受信することを特徴とする符号化信号受信合成装置。

[20] 複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1 次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィ匕信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信手段と、

前記合成器受信手段で受信した伝送符号化信号を蓄積する合成器蓄積手段と、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、

[21] 請求項 19または請求項 20に記載の符号化信号受信合成装置において、

を備え、

前記合成器再配信要求送信手段が、前記未受信の伝送符号化信号の再配信要求を送信することを特徴とする符号化信号受信合成装置。

[22] 複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を入力する分離器入力手段と、

前記分離器入力手段で入力した 1次符号化信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離手段と、

前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、前記分離器多重化手段で多重化した伝送符号化信号を蓄積する分離器蓄積手段と、

前記伝送符号化信号を送信する分離器送信手段と、

を備えたことを特徴とする符号化信号分離送信装置。

[23] 請求項 22に記載の符号化信号分離送信装置において、

前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信手段を備え、

前記分離器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とする符号化信号分離送信装置。

[24] 複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を入力する分離器入力手段と、

前記伝送符号化信号を送信する分離器送信手段と、

を備えたことを特徴とする符号化信号分離送信装置。

[25] 請求項 24に記載の符号化信号分離送信装置において、

前記分離器多重化手段が、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号ィ匕信号を生成し、前記分離器送信手段が、前記生成した伝送符号化信号を送信することを特徴とする符号化信号分離送信装置。

複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1 次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィ匕信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器を制御する分離送信器制御ステップと、

前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器を制御する選択転送器制御ステップと、

前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記 3次動画像を復元させる 3次符号化信号を合成する受信合成器を制御する受信合成器制御ステップと、

を備え、

前記分離送信器制御ステップが、

前記 1次符号ィヒ信号を入力する分離器入力ステップと、

前記分離器入力ステップで入力した 1次符号ィ匕信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離ステップと、

前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、

前記分離器多重化ステップで多重化した伝送符号化信号を蓄積する分離器蓄積ステップと、

前記伝送符号化信号を前記選択転送器に送信する分離器送信ステップと、を備え、

前記選択転送器制御ステップが、

前記伝送符号化信号を前記分離送信器から受信する転送器受信ステップと、前記転送器受信ステップで受信した伝送符号ィヒ信号を蓄積する転送器蓄積ステツプと、

前記伝送符号化信号を前記受信合成器に送信する転送器送信ステップと、を備え、

前記受信合成器制御ステップが、

前記伝送符号化信号を前記選択転送器から受信する合成器受信ステップと、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、

前記合成器分離ステップで分離した基本符号化信号と拡張符号化信号と、を前記受信合成器に蓄積する合成器蓄積ステップと、

前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、 3次動画像を復元させる 3次符号化信号を生成する合成器合成ステップと、

前記合成器合成ステップで合成した 3次符号ィ匕信号を出力する合成器出カステツプと、

前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信ステップと、

を備え、

さらに、前記選択転送器制御ステップが、

前記受信合成器から送信された伝送符号化信号の再配信要求を受信する転送器再配信要求受信ステップと、を備え、

前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記受信合成器に送信し、

前記受信合成器制御ステップの合成器受信ステップが、前記再配信要求にしたがつて前記選択転送器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信方法。

請求項 26に記載の符号化信号蓄積配信方法において、

前記選択転送器制御ステップが、

前記転送器受信ステップで受信した伝送符号ィヒ信号の中から前記選択転送器に蓄積する伝送符号化信号を選択する転送器蓄積信号選択ステップを備え、前記転送器蓄積ステップが、前記選択した伝送符号ィ匕信号を蓄積することを特徴とする符号化信号蓄積配信方法。

[28] 請求項 26に記載の符号化信号蓄積配信方法において、

前記選択転送器制御ステップが、

前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択ステップを備え、

前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とする符号化信号蓄積配信方法。

[29] 請求項 28に記載の符号化信号蓄積配信方法において、

前記選択転送器制御ステップが、

前記転送器送信ステップが送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶ステップを備え、

前記転送器送信信号選択ステップが、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とする符号化信号蓄積配信方法。

[30] 請求項 28に記載の符号化信号蓄積配信方法において、

前記受信合成器制御ステップが、

前記合成器受信ステップで受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶ステップと、

前記合成器受信情報記憶ステップで記憶した識別情報をもとに未受信の伝送符号化信号を検索する合成器未受信信号検索ステップと、

を備え、

前記合成器再配信要求送信ステップが、前記未受信の伝送符号化信号の再配信要求を前記選択転送器に送信し、

前記選択転送器制御ステップの転送器再配信要求受信ステップが、再送する前記伝送符号化信号が指定された再配信要求を前記受信合成器から受信し、

前記転送器送信信号選択ステップが、前記再配信要求にしたがって再送する伝送符号化信号を選択し、前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とする符号化信号蓄積配信方法。

[31] 請求項 30に記載の符号化信号蓄積配信方法において、

前記選択転送器制御ステップが、

前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれて、る場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信ステップを備え、

前記分離送信器制御ステップが、

前記伝送符号化信号の再配信要求を前記選択転送器から受信する分離器再配信要求受信ステップを備え、

前記分離器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記選択転送器に送信し、

前記選択転送器制御ステップの転送器受信ステップが、前記再配信要求にしたがつて前記分離送信器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信方法。

[32] 請求項 31に記載の符号化信号蓄積配信方法にお!、て、

前記選択転送器制御ステップの転送器受信ステップが、前記分離送信器または他の選択転送器から、前記伝送符号化信号を受信し、

前記転送器送信ステップが、前記伝送符号化信号を、前記受信合成器または他の選択転送器に、送信し、

前記転送器再配信要求受信ステップが、前記受信合成器または他の選択転送器から、前記再配信要求を受信し、

前記転送器再配信要求送信ステップが、前記蓄積外の伝送符号化信号の再配信要求を、他の選択転送器または前記分離送信器に、送信することを特徴とする符号化信号蓄積配信方法。

[33] 請求項 28から請求項 32の、ずれか 1項に記載の符号化信号蓄積配信方法において、前記選択転送器制御ステップの転送器送信信号選択ステップが、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とする符号化信号蓄積配信方法。

を備え、

前記分離送信器制御ステップが、

前記 1次符号ィヒ信号を入力する分離器入力ステップと、

前記分離器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積ステップと、

前記選択転送器制御ステップが、

前記受信合成器制御ステップが、

前記伝送符号化信号を前記選択転送器から受信する合成器受信ステップと、前記合成器受信ステップで受信した伝送符号ィヒ信号を前記受信合成器に蓄積する合成器蓄積ステップと、

前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、

を備え、

さらに、前記選択転送器制御ステップが、

前記受信合成器から送信された再配信要求を受信する転送器再配信要求受信ステツプと、を備え、

前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信し、

請求項 34に記載の符号化信号蓄積配信方法において、

前記選択転送器制御ステップが、

前記分離送信器制御ステップが、

前記分離器多重化ステップが、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号ィ匕信号を生成し、

前記分離器送信ステップが、前記生成した伝送符号ィ匕信号を前記選択転送器に送信し、

複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1 次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィ匕信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、前記複数の拡張符号化信号と、を任意に組み合わせて生成された伝送符号化信号を受信する転送器受信ステップと、

前記転送器受信ステップで受信した伝送符号ィヒ信号を蓄積する転送器蓄積ステツプと、

前記伝送符号化信号を送信する転送器送信ステップと、

前記伝送符号化信号の再配信要求を受信する転送器再配信要求受信ステップとを備え、

前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とする符号化信号選択転送方法。 [37] 請求項 36に記載の符号化信号選択転送方法にお、て、

前記転送器受信ステップで受信した伝送符号化信号の中から蓄積する伝送符号化信号を選択する転送器蓄積信号選択ステップを備え、

前記転送器蓄積ステップが、前記選択した伝送符号ィ匕信号を蓄積することを特徴とする符号化信号選択転送方法。

[38] 請求項 36に記載の符号化信号選択転送方法にお、て、

前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とする符号化信号選択転送方法。

[39] 請求項 38に記載の符号化信号選択転送方法にお、て、

前記転送器送信信号選択ステップが、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とする符号化信号選択転送方法。

[40] 請求項 38に記載の符号化信号選択転送方法にお、て、

前記転送器再配信要求受信ステップが、再送する前記伝送符号ィ匕信号が指定された再配信要求を受信し、

前記転送器送信信号選択ステップが、前記再配信要求にしたがって再送する伝送符号化信号を選択し、

[41] 請求項 40に記載の符号化信号選択転送方法にお、て、

前記再配信要求の中に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれて!/、る場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信ステップを備え、

前記転送器受信ステップが、前記再配信要求にしたがった伝送符号ィ匕信号を受信することを特徴とする符号化信号選択転送方法。

[42] 請求項 38から請求項 41の、ずれか 1項に記載の符号化信号選択転送方法において、

前記転送器送信信号選択ステップが、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とする符号化信号選択転送方法。

[43] 複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1 次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィ匕信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信ステップと、

前記合成器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する合成器蓄積ステップと、

前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信ステップとを備え、

前記合成器受信ステップが、前記再配信要求にしたがった伝送符号ィ匕信号を受信することを特徴とする符号化信号受信合成方法。

[44] 複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1 次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィ匕信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信ステップと、

前記合成器受信ステップで受信した伝送符号ィ匕信号を蓄積する合成器蓄積ステツプと、

[45] 複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を入力する分離器入力ステップと、

前記分離器入力ステップで入力した 1次符号化信号を、前記 1次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号ィヒ信号より符号量が少ない基本符号ィ匕信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離ステップと、

前記伝送符号化信号を送信する分離器送信ステップと、

を備えたことを特徴とする符号化信号分離送信方法。

[46] 複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を入力する分離器入力ステップと、

前記伝送符号化信号を送信する分離器送信ステップと、

を備えたことを特徴とする符号化信号分離送信方法。

[47] コンピュータに、

を実行させ、

前記分離送信器制御ステップが、

前記 1次符号ィヒ信号を入力する分離器入力ステップと、

前記選択転送器制御ステップが、

前記受信合成器制御ステップが、

前記合成器合成ステップで合成した 3次符号ィ匕信号を出力する合成器出カステツプと、前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信ステップと、

を備え、

さらに、前記選択転送器制御ステップが、

前記受信合成器制御ステップの合成器受信ステップが、前記再配信要求にしたがつて前記選択転送器から送信された伝送符号化信号を受信することを特徴とするコンピュータ読み取り可能な符号ィ匕信号蓄積配信プログラム。

コンピュータに、

を実行させ、

前記分離送信器制御ステップが、

前記 1次符号ィヒ信号を入力する分離器入力ステップと、

前記選択転送器制御ステップが、

前記受信合成器制御ステップが、

を備え、

さらに、前記選択転送器制御ステップが、

[49] コンピュータに、

前記伝送符号化信号を送信する転送器送信ステップと、

前記伝送符号化信号の再配信要求を受信する転送器再配信要求受信ステップとを実行させ、

前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とするコンピュータ読み取り可能な符号化信号選択転送プログラム。

[50] 請求項 49に記載の符号ィ匕信号選択転送プログラムにお、て、

前記転送器蓄積ステップが、前記選択した伝送符号ィ匕信号を蓄積することを特徴とする符号化信号選択転送プログラム。 [51] 請求項 49に記載の符号ィ匕信号選択転送プログラムにお、て、

前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とする符号化信号選択転送プログラム。

[52] 請求項 51に記載の符号ィ匕信号選択転送プログラムにお、て、

前記転送器送信信号選択ステップが、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とする符号化信号選択転送プログラム。

[53] 請求項 51に記載の符号ィ匕信号選択転送プログラムにお、て、

[54] 請求項 53に記載の符号ィ匕信号選択転送プログラムにお、て、

前記転送器受信ステップが、前記再配信要求にしたがった伝送符号ィ匕信号を受信することを特徴とする符号化信号選択転送プログラム。

[55] 請求項 51から請求項 54の、ずれか 1項に記載の符号化信号選択転送プログラムにおいて、

前記転送器送信信号選択ステップが、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とする符号化信号選択転送プログラム。

[56] コンピュータに、

複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を、前記 1 次動画像の疑似動画像である 2次動画像を復元させる前記 1次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記 2次動画像より前記 1次動画像に近い 3次動画像を前記基本符号ィ匕信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信ステップと、

前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信ステップとを実行させ、

前記合成器受信ステップが、前記再配信要求にしたがった伝送符号ィ匕信号を受信することを特徴とするコンピュータ読み取り可能な符号ィ匕信号受信合成プログラム。

[57] コンピュータに、

[58] 請求項 56または請求項 57に記載の符号ィ匕信号受信合成プログラムにお、て、前記合成器受信ステップで受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶ステップと、

を備え、

前記合成器再配信要求送信ステップが、前記未受信の伝送符号化信号の再配信要求を送信することを特徴とする符号化信号受信合成プログラム。

[59] コンピュータに、

複数の画像情報から構成される 1次動画像を符号化した 1次符号化信号を入力する分離器入力ステップと、

前記伝送符号化信号を送信する分離器送信ステップと、

を実行させることを特徴とするコンピュータ読み取り可能な符号化信号分離送信プログラム。

[60] 請求項 59に記載の符号ィ匕信号分離送信プログラムにお、て、

前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信ステップを備え、

前記分離器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とする符号化信号分離送信プログラム。

[61] コンピュータに、

前記伝送符号化信号を送信する分離器送信ステップと、を実行させることを特徴とするコンピュータ読み取り可能な符号化信号分離送信プログラム。

請求項 61に記載の符号ィ匕信号分離送信プログラムにお、て、

前記分離器多重化ステップが、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号ィ匕信号を生成し、前記分離器送信ステップが、前記生成した伝送符号化信号を送信することを特徴とする符号化信号分離送信プログラム。