WO2005039180A1

WO2005039180A1 - メディア信号の送信方法と受信方法ならびに送受信方法及び装置

Info

Publication number: WO2005039180A1
Application number: PCT/JP2004/013943
Authority: WO
Inventors: Kazunori Ozawa
Original assignee: Nec Corporation
Priority date: 2003-10-16
Filing date: 2004-09-24
Publication date: 2005-04-28
Also published as: JP4903435B2; US20070127437A1; KR20060096044A; EP1679895A1; CN1864409A; JPWO2005039180A1

Abstract

　メディア信号の送・受信において、有線IPネットワークや無線ネットワークでの帯域の変動や、無線のハンドオーバなどで、データの損失によって発生するメディア信号の劣化を低減し、かつそのために必要となる処理量の増加を小さく抑える。　双方向のメディア送受信において、受信側は、ストリームをデコーダ１１２でデコードして得られたメディア信号を格納するバッファ１１１の蓄積量を監視し、バッファの蓄積量があらかじめ定められたしきい値をこえるかまたは下回った場合に、制御信号を伝送路に出力する制御部１０８を有し、送信側は、メディア信号をエンコードしてストリームを出力するが、伝送路から制御信号を入力した際に、エンコーダ１０４の圧縮レートを変化させる制御部１０２を有する。

Description

明細書

メディア信号の送信方法と受信方法ならびに送受信方法及び装置技術分野

[0001] 本発明は、メディア信号の送信方法と受信方法ならびに送受信方法及び装置に関し、特に、メディア信号 (音声，画像など）の有線伝送路や無線伝送路で双方向に送信、受信に好適とされる、方法、装置、ならびにプログラムに関する。

背景技術

[0002] 近年、音声，動画像データを効率良く伝送する方法として、高能率圧縮による符号化データを伝送する方法が多く用いられて！/ヽる。

[0003] 音声 ·動画像圧縮符号化情報を、パケット交換方式を利用した IP (Internet

Protocol)ネットワークへ配信する方法が多数ある。

[0004] このような音声 '動画像データの送 ·受信を、有線 IPネットワークや、無線区間を含む IPネットワークを用いて行う場合、 IPネットワークでの輻輳や、無線区間で無線誤りや損失が発生した際は、失われたデータの再送要求を行い、該当するパケットを送信側から再送する方法が一般的である。

[0005] なお、全通信帯域に占める音声帯域の割合を制御して画像の品質を向上させるテレビ会議端末装置として、画像符号化データバッファの使用容量に基づヽて検知された画像符号化データのサイズと、音声符号ィ匕データバッファの使用容量に基づヽて検知された音声データ符号ィ匕レートに基づいて、音声エンコーダにおける符号ィ匕レートを制御する構成が開示されている (例えば下記特許文献 1参照)。また、受信バッファに蓄積されるデータ量を監視し、蓄積データ量と閾値との大小関係に基づき、受信クロック周波数を可変させる AV送受信システムが知られて、る（例えば下記特許文献 2参照)。

[0006] 特許文献 1 :特開 2001— 333401号公報 (第 4頁、第 1図）

特許文献 2 :特開 2002-165148号公報 (第 3-4頁、第 4図）

発明の開示

発明が解決しょうとする課題 [0007] し力しながら、音声'画像の通信 (例えば TV電話など)では、再送により時間遅延が発生することから、通常、再送を用いることができない。このため、パケットが損失した際に、受信側で品質が劣化する、という問題がある。

[0008] また、画像データ受信装置が無線エリア (セル)を越えて、隣接の無線エリアに移動する際に、ハンドオーバが発生するが、ハンドオーバ期間中は、データの受信が停止してしまうため、大量のデータの欠落が生じてしまう。これにより、受信装置の出力ノッファが枯渴してしまい、動画像では、画面がとまる、フリーズするなどの問題が生じ、音声では音が途切れる、音声が無音になってしまう、などの問題が生じる。

[0009] そして、無線区間のハンドオーバだけでなぐ有線 IPネットワークで帯域が時間的に変動する場合にも、上記と同様の問題が発生している。

[0010] したがって、本発明の目的は、例えば動画 ·音声等のメディア信号の配信において、有線 IPネットワーク及び無線区間を含む IPネットワークで、待機が時間的に変動する場合に、受信品質の劣化を最小限に抑えることを可能とする方法、装置、コンビュータプログラムを提供することである。

[0011] また、本発明の他の目的は、無線区間でノヽンドオーバが発生しても、受信品質の劣化を最小限に抑える方法、装置、コンピュータプログラムを提供することである。課題を解決するための手段

[0012] 前記目的を達成する本発明の 1つのアスペクトに係る送信装置によれば、メディア信号を入力して符号化 (エンコード)して得られたストリームを伝送路に出力するェンコーダ部と、伝送路から所定の制御信号を受信した際に、前記エンコーダ部の圧縮レートを変化させて前記ストリームを出力するように制御する制御部と、を備えて、る

[0013] 本発明の他のアスペクトに係る送信装置によれば、メディア信号を入力して符号ィ匕して得られたストリームを出力するエンコーダ部と、前記エンコーダ部で符号ィ匕されたストリームを入力し、伝送路力所定の制御信号を受信した際に、前記メディア信号が前記ェンコーダ部で符号化された時間間隔と異なる時間間隔でストリームを前記伝送路に出力する制御を行う出力制御部と、を備えている。

[0014] 本発明の 1つのアスペクトに係る受信装置によれば、伝送路力受信したストリームを復号するデコーダ部と、前記デコーダ部で復号して得られたメディア信号を格納するノッファ部と、前記バッファ部の蓄積量を監視し、前記バッファ部の蓄積量が予め定められたしきい値を越える力又は下回った場合に、制御信号を前記伝送路に出力する制御部と、を備えている。

[0015] 本発明の他のアスペクトに係る受信装置によれば、伝送路力受信したストリームを復号するデコーダ部と、前記伝送路の受信状況を監視する監視部と、前記受信状況が予め定められた状況になった場合に、前記監視部からの通知に基づき、制御信号を前記伝送路に出力する制御部と、を備えている。

[0016] 本発明の 1つのアスペクトに係る送受信装置によれば、ストリームを受信し復号するデコーダ部と、復号後のメディア信号を格納するバッファ部と、バッファ量を監視し、前記バッファ量が予め定められたしきい値を越えるか又は下回った場合に制御信号を伝送路に出力する第 1の制御部と、メディア信号をエンコードしてストリームを出力するエンコーダ部と、伝送路力制御信号を入力した際にエンコーダのレートを変化させ出力する第 2の制御部を備える。

[0017] また本発明の他のアスペクトに係る送受信装置によれば、ストリームを受信して復号

(デコード)し復号後のメディア信号を格納するノッファ部と、ノッファの量を監視し、前記バッファ量が予め定められたしきい値を越える力、又は下回った場合に制御信号を伝送路に出力する第 1の制御部と、メディア信号をエンコードしてストリームを出力し、伝送路力制御信号を入力したときは、入力信号がエンコードされた時間間隔と異なる時間間隔で前記ストリームを出力する第 2の制御部を備える。

[0018] また、本発明の他のアスペクトに係る送受信装置によれば、ストリームを受信してデコードするデコーダ部と、受信状況を監視する監視部と、前記受信状況が予め定められた状況になった場合に制御信号を伝送路に出力する第 1の制御部と、メディア信号をエンコードしストリームを出力するエンコーダ部と、伝送路力制御信号を入力した際は、入力信号がエンコードされた時間間隔と異なる時間間隔でストリームを出力する第 2の制御部を備える。

[0019] 本発明に係る送信方法によれば、メディア信号を入力して符号化して得られたストリームを伝送路に出力する方法において、前記伝送路から所定の制御信号を受信した際に、前記符号ィ匕処理の圧縮レートを変化させて前記ストリームを出力するように制御するか、あるいは、前記伝送路から所定の制御信号を受信したときは、前記メディァ信号が符号化された時間間隔と異なる時間間隔で前記ストリームを前記伝送路に出力するように制御してもよ!/、。

[0020] 本発明に係る受信方法によれば、ストリームを受け取り該ストリームを復号し、前記復号して得られたメディア信号を蓄積するバッファ部の蓄積量を監視し、前記バッファ部の蓄積量が予め定められたしきい値を越える力、又は下回った場合に、あるいは、受信状況の監視結果に基づき、制御信号を前記伝送路に出力する。

発明の効果

[0021] 本発明によれば、動画像の無線での双方向通信にお!、て、画像受信装置側で無線区間でのハンドオーバが発生したり、無線ネットワークや IPネットワークでの輻輳やパケットロスなどにより、受信状況が時間的に変動しても、画質や音質の乱れを最小限に抑えることができる、という効果がある。

[0022] また、本発明によれば、上記の効果を得るため、送信側、受信側両方に加わる処理量を少なく抑えることができるという効果がある。

図面の簡単な説明

[0023] [図 1]本発明の第 1の実施の形態の画像データ配信装置 (送信装置)の構成を示す図である。

[図 2]本発明の第 2の実施の形態の画像データ配信装置 (送信装置)の構成を示す図である。

[図 3]本発明の第 3の実施の形態の画像データ配信システムの構成を示す図である。

[図 4]本発明の第 4の実施の形態の画像データ配信システムの構成を示す図である。

[図 5]本発明の第 5の実施の形態の画像データ配信システムの構成を示す図である。

[図 6]本発明の第 6の実施の形態の画像データ配信システムの構成を示す図である。符号の説明

[0024] 101、 101A 画像データ配信装置 (画像データ送信装置）

102 制御部

104 エンコーダ 106 伝送路

107、 107A 画像データ受信装置

108 制御部

109 画像符号化データ受信部

110 無線状態判別部

111 符号ィ匕データバッファ

112 デコーダ

120 画像信号

121、 122、 123 制御信号

204 画像ストリーム出力制御部

発明を実施するための最良の形態

[0025] 本発明の実施の形態について説明する。本発明の一実施形態の送受信装置において、送信側は、画像及び Z又は音声を含むメディア信号を入力として符号ィ匕 (ェンコード)して配信データを作成しストリームとして出力するエンコーダ（102)と、伝送路 (106)から制御信号（121)を入力した際に、エンコーダ（102)の圧縮レートを変化させる制御部 102と、を有する。

[0026] あるいは、本発明の他の実施形態において、送信側は、伝送路（106)から制御信号（121)を入力したときは、入力（ソース）がエンコードされた時間間隔と異なる時間間隔でストリームを出力するように制御する出力制御部（204)を備えた構成としてもよい。

[0027] 本発明の一実施形態において、受信側は、ストリームをデコーダ（112)で復号 (デコード)して得られたメディア信号を格納するバッファ部（111)の蓄積量を監視し、バッファ部の蓄積量が予め定められたしきい値を越えるか又は下回った場合に、制御信号（ 123)を伝送路に出力する制御部（ 108)を有する。

[0028] あるいは、本発明の他の実施形態において、受信側は、受信状況を監視し、監視結果に基づき、ハンドオーバ検出時等に、制御信号（123)を伝送路に出力するようにしてもよい。

[0029] 本発明の一実施形態の送信方法について説明する。本発明の一実施形態の送信方法は以下のステップ Al、 A2を含む。

[0030] ステップ A1：メディア信号を入力としエンコーダでエンコードし配信データを作成しストリームを出力する。

[0031] ステップ A2 :伝送路から所定の制御信号を受信した際に、前記エンコーダにおける圧縮レートを変化させてストリームを出力するように制御する。

[0032] 本発明の他の実施形態の送信方法は以下のステップ Al l、 A12を含む。

[0033] ステップ Al 1：メディア信号を入力としエンコーダでエンコードし配信データを作成しストリームを出力する。

[0034] ステップ A12 :前記エンコーダでエンコード後のストリームを伝送路に出力する際に

、伝送路力所定の制御信号を受信したときは、入力メディア信号が前記エンコーダによりエンコードされた時間間隔と異なる時間間隔で前記ストリームを出力するように

、ストリームの出力の制御を行う。

[0035] 本発明の一実施形態の受信方法は以下のステップ Bl、 B2を含む。

[0036] ステップ B1：伝送路に送信されたストリームを受け取り該ストリームをデコードする。

[0037] ステップ B2：前記デコードして得られたメディア信号を蓄積するバッファの蓄積量を監視し、前記バッファの蓄積量が予め定められたしきい値を越える力又は下回った場合に、制御信号を伝送路に出力する。

[0038] 本発明の他の実施形態の受信方法は以下のステップ Bl l、 B12を含む。

[0039] ステップ Bl 1：伝送路に送信されたストリームを受け取り該ストリームをデコードする

[0040] ステップ B12 :伝送路の受信状況を監視し、前記受信状況が予め定められた状況になった場合に、前記監視部からの通知に基づき、制御信号を伝送路に出力する。

[0041] 本発明の別の実施形態の送受信方法は、双方向のメディア送受信に用いて好適とされ、、送信側は、上記ステップ Al、 A2、又は、 Al l、 A12を含み、受信側は、ステップ Bl、 B2、又はステップ Bl l、 B12を含む。

[0042] 上記各ステップ Al、 A2、 Al l, A12は、送信側のコンピュータ（又はプロセッサ）によるプログラムによって処理'機能を実現してもよい。

[0043] 上記各ステップ Bl、 B2、 Bl 1、 B12は、送信側のコンピュータ（又はプロセッサ）によるプログラムによって処理'機能を実現してもよい。

実施例

[0044] 本発明について更に詳細に説述するため、添付図面を参照して説明する。図 1は、本発明の第 1の実施例の構成を示す図である。画像及び Z又は音声データは、無線物理層上に IP (Internet Protocol)が構築されている伝送路 106を通じて、 UDPZ IP〖こより伝送されるものとする。図示されない画像データ受信装置は、例えば、無線 I P網に接続されるクライアント端末であり、 UDP (User Datagram Protocol) ZIPを用 V、て画像符号化データを受信する。

[0045] 図 1を参照すると、画像データ配信 (送信)装置 101は、入力した画像信号を符号化するためのエンコーダ 104と、制御部 102とを備えている。エンコーダ 104 (「ストリ一ム.エンコーダ」ともいう）は、入力した画像信号 120を予め定められたビットレートで符号ィ匕し、ストリームとして、伝送路 106に出力する。入力される画像信号等は、フアイル、あるいは、ライブ配信の場合、カメラ等からのデータであってもよい。

[0046] 制御部 102は、伝送路 106から制御信号 121を入力した際は、画像データのビットレートを変更させるための制御信号 122を、エンコーダ 104に出力し、エンコーダ 10 4は、制御信号 122に従い、画像データの符号ィ匕ビットレート (圧縮レート）を変更 (例えば、低いビットレートに変更）した上で、伝送路 106に出力する。なお、本実施例において、図示されない画像データ受信装置は、画像符号ィ匕データの受信バッファが枯渴しそうになると、伝送路 106に制御信号を送出する。伝送路 106は、無線物理層上に、 IP (Internet Protocol)が構築されているものとし、送信プロトコルは、 UDP/I Pを用いるものとする。制御信号としては、 IETF (Internet Engineering Task Force) で RFC化されている RTCP(Real Time Transport Protocol)や、現在 IETFで規格策定中の RTCPの拡張や、 IETFで RFC (Request For Comments)化されている RTS P(Real Time Streaming Protocol)などを用いることができる。この点は、以下の各実施例についても同様である。

[0047] なお、図 1では、説明の簡略化のために、送信装置 (配信装置)と受信装置を分けて記載したが、送受信装置として、送信機能と受信機能の両者を 1台に登載することも可能である。この場合は、本実施例に記載した、送信装置及び受信装置の両機能を、 1台で実現することになることを付け加えておく。この点は、以下の実施例でも、同様である。

[0048] 図 2は、本発明の第 2の実施例の構成を示す図である。図 2を参照すると、本実施例の画像データ配信装置 101Aは、図 1の画像データ配信装置 101の構成に、画像ストリーム出力制御部 204が追加されている。エンコーダ 104は入力した画像信号を予め定められたビットレートで符号ィ匕し、ストリームとして、伝送路 106に出力する。制御部 102は、伝送路 106から制御信号 121を入力した際は、制御信号 122を画像ストリーム出力制御部 204に出力する。

[0049] 画像ストリーム出力制御部 204は、制御部 102から制御信号 122を入力した際に、画像符号化データを、エンコーダ 104において符号ィ匕が行なわれた時間間隔 T、又は、クロック Τと異なる時間間隔 T'、又は異なるクロック T'で読み出して、伝送路 106 に出力する。

[0050] 図 3は、本発明の第 3の実施例の構成を示す図である。図 3を参照すると、画像データ配信装置 101は、図 1に示した画像データ配信装置 101と同一構成とされる。

[0051] 画像データ受信装置 107は、画像符号ィ匕データ受信部 109において伝送路 106 力も画像符号ィ匕データを受信しバッファ部 (記憶装置） 111に一時的に蓄積し、伝送路 106でのパケットゆらぎや、パケットの遅着を吸収した上で、デコーダ 112へ出力する。なお、ノッファ部 111は、デコーダ 112でデコードされたメディア信号を蓄積するバッファ (記憶部）を有する。

[0052] なお、説明を明瞭とするため、受信した画像符号ィ匕データを一時的に蓄積するバッファ部 111は、画像符号ィ匕データ受信部 109の外部に設けられているが、画像符号化データ受信部 109内に、画像符号ィ匕データを一時的に蓄積するノッファを設ける構成としてもよいことは勿論である。この場合、画像符号ィ匕データ受信部 109から、画像符号化データがデコーダ 112に供給され、図 3のバッファ部 111は、デコーダ 1 12でデコードされたメディア信号を蓄積するバッファのみを備える。デコーダ 112でデコードされた画像信号は、不図示の表示装置等に表示される。

[0053] 制御部 108は、デコードされたメディア信号を蓄積するノッファの蓄積量を予め定められた時間間隔毎に計測し、デコードされたメディア信号を蓄積するバッファの蓄積量が枯渴しそうになると、伝送路 106に制御信号 123を送出する。制御部 108は、デコードされたメディア信号を蓄積するバッファの蓄積量を予め定められた上側、下側等の閾値と大小を判定することで、バッファの枯渴状態を判定するようにしてもよい。なお、本実施例の変形例として、制御部 108は、受信した画像符号化データを一時的に蓄積するバッファの蓄積量に基づき、制御信号 123の出力を制御するようにしてちよい。

[0054] 画像データ配信装置 101の制御部 102は、伝送路 106を介して画像データ受信装置 107から制御信号 121を受信した場合は、エンコーダ 104に制御信号 122を出力し、エンコーダ 104のビットレート（圧縮レート）を変更（例えば、低いビットレートに変更）した上で、伝送路 106に出力する。本実施例においても、伝送路 106は、無線物理層上に IP (Internet Protocol)が構築されているものとし、送信プロトコルは UDP/ IPを用いるものとする。なお、画像データ配信装置 101が受信する制御信号 121は、画像データ受信装置 107から送信される制御信号 123と、同一の制御信号である。

[0055] 図 4は、本発明の第 4の実施例の構成を示す図である。図 4を参照すると、画像データ受信装置 107の構成は、図 3に示した画像データ受信装置 107と同一構成とされる。図 4の画像データ配信装置 101Aは、図 2に示した画像データ配信装置 101A と同一構成とされる。

[0056] 画像データ受信装置 107の制御部 108は、符号ィ匕データバッファ部 111のバッファ量を予め定められた時間間隔毎に計測し、符号ィ匕データバッファ部 111が枯渴しそうになると、伝送路 106に制御信号 123を送出する。

[0057] 画像データ配信装置 101の制御部 102は、伝送路 106を介して画像データ受信装置 107から制御信号 121を受信した場合は、制御信号 122を画像ストリーム出力制御部 204に出力し、画像ストリーム出力制御部 204は、画像符号化データを、ェンコーダ 104におヽて符号ィ匕が行なわれた時間間隔 T、又は、クロック Τと異なる時間間隔 T'又は、異なるクロック T'で読み出して、伝送路 106に出力する。なお、図 4において、画像データ配信装置 101Aが受信する制御信号 121は、画像符号化データ受信部 107から送信される制御信号 123と、同一の制御信号である。

[0058] 図 5は、本発明の第 5の実施例の構成を示す図である。図 5を参照すると、画像データ配信装置 101は、図 1に示した画像データ配信装置 101と同一構成とされる。画像データ受信装置 107Aは、図 3の画像データ受信装置 107に、無線状態判別部 1 10が追加されている。

[0059] 画像データ受信装置 107Aの無線状態判別部 110は、伝送路 106の無線受信状態を監視し、受信状況が予め定められた状況になった場合に制御部 108に伝え、制御部 108から、伝送路 106に対し、制御信号 123を出力する。画像データ配信装置 101の制御部 102は、伝送路 106を介して画像データ受信装置 107Aから制御信号 121 (バッファが枯渴状態）を受信した場合は、エンコーダ 104に制御信号 122を出力し、エンコーダ 104の符号ィ匕ビットレート (圧縮レート)を変更した上で、伝送路 106 に出力する。制御信号 122を受けて、エンコーダ 104は、例えば、低いビットレートに変更する。なお、図 5において、画像データ配信装置 101が受信する制御信号 121 は、画像データ受信装置 107Aから送信される制御信号 123と、同一の制御信号でめる。

[0060] 図 6は、本発明の第 6の実施例の構成を示す図である。図 6を参照すると、画像データ配信装置 101 Aは、図 2に示した画像データ配信装置 101 Aと同一構成とされる。画像データ受信装置 107Aは、図 5の画像データ受信装置 107Aと同一とされる。

[0061] 画像データ受信装置 107Aの無線状態判別部 110は、伝送路 106の無線受信状態を監視し、受信状況が予め定められた状況になった場合に制御部 108に伝え、制御部 108から、伝送路 106に対し、制御信号 123を出力する。画像データ配信装置 101Aの制御部 102は、伝送路 106を介して画像データ受信装置 107A力も制御信号 121を受信した場合は、制御信号 122を画像ストリーム出力制御部 204に出力し、画像ストリーム出力制御部 204は、画像符号化データを、エンコーダ 104において符号ィ匕が行なわれた時間間隔 T、又は、クロック Τと異なる時間間隔 T'、又は、異なるクロック T'で読み出して、伝送路 106に出力する。図 6において、画像データ配信装置 101Aが受信する制御信号 121は、画像データ受信装置 107Aから送信される制御信号 123と、同一の制御信号である。

[0062] なお、無線状態判別部 110として、伝送路 106の無線受信状態を監視し、無線状態力現在の無線受信エリア（セル)から、隣接のセルへのハンドオーバを決定するハンドオーバになった場合に、制御部 108に伝えるハンドオーバ判別部で構成してちょい。

以上本発明を上記実施例に即して説明したが、本発明は、上記実施例の構成にのみに限定されるものでなぐ本発明の原理に準ずる各種変形、修正を含むことは勿論である。

Claims

請求の範囲

[1] メディア信号を入力して符号ィ匕して得られたストリームを伝送路に出力するェンコ一ダ部と、

前記伝送路力制御信号を受信した際に、前記エンコーダ部の圧縮レートを変化させて前記ストリームを出力するように制御する制御部と、

を備えたことを特徴とする送信装置。

[2] メディア信号を入力して符号ィ匕して得られたストリームを出力するエンコーダ部と、前記エンコーダ部から出力されたストリームを入力し、伝送路力制御信号を受信した際に、前記メディア信号が前記エンコーダ部で符号ィ匕された時間間隔と異なる時間間隔で前記ストリームを前記伝送路に出力する制御を行う出力制御部と、を備えたことを特徴とする送信装置。

[3] 伝送路力受信したストリームを復号するデコーダ部と、

前記デコーダ部で復号して得られたメディア信号を格納するバッファ部と、前記バッファ部の蓄積量を監視し、該蓄積量が予め定められたしきい値を越えるか、または下回った場合に、制御信号を前記伝送路に出力する制御部と、

を備えたことを特徴とする受信装置。

[4] 伝送路力受信したストリームを復号するデコーダ部と、

前記伝送路の受信状況を監視する監視部と、

前記受信状況が予め定められた状況になった場合、前記監視部からの通知に基づき、制御信号を前記伝送路に出力する制御部と、

を備えたことを特徴とする受信装置。

[5] 前記監視部は、前記伝送路の無線状態が、現在の無線エリア力隣接エリアへのハンドオーバになった場合に、前記制御部に通知することを特徴とする請求項 4記載

[6] 伝送路力受信したストリームを復号するデコーダ部と、

前記デコーダ部で復号して得られたメディア信号を格納するバッファ部と、前記バッファ部の蓄積量を監視し、該蓄積量が予め定められたしきい値を越える力、または下回った場合に、制御信号を前記伝送路に出力する第 1の制御部と、メディア信号を入力して符号ィ匕して得られたストリームを前記伝送路に出力するェンコーダ部と、

前記伝送路力制御信号を受信した際に、前記エンコーダ部の圧縮レートを変化させて前記ストリームを出力するように制御する第 2の制御部と、

を備えたことを特徴とする送受信装置。

[7] 伝送路力受信したストリームを復号するデコーダ部と、

前記デコーダ部で復号して得られたメディア信号を格納するバッファ部と、前記バッファ部の蓄積量を監視し、該蓄積量が予め定められたしきい値を越えるか、または下回った場合に、制御信号を前記伝送路に出力する第 1の制御部と、メディア信号を入力して符号ィ匕して得られたストリームを出力するエンコーダ部と、前記エンコーダ部から出力されたストリームを入力し、前記伝送路から制御信号を受信した際に、前記メディア信号が前記エンコーダ部で符号化された時間間隔と異なる時間間隔で該ストリームを前記伝送路に出力する制御を行う第 2の制御部と、を備えたことを特徴とする送受信装置。

[8] 伝送路力受信したストリームを復号するデコーダ部と、

前記伝送路の受信状況を監視する監視部と、前記受信状況が予め定められた状況になった場合、前記監視部からの通知に基づき、制御信号を前記伝送路に出力する第 1の制御部と、

メディア信号を入力して符号ィ匕して得られたストリームを前記伝送路に出力するェンコーダ部と、

を備えたことを特徴とする送受信装置。

[9] 伝送路力受信したストリームを復号するデコーダ部と、

前記伝送路の受信状況を監視する監視部と、

前記受信状況が予め定められた状況になった場合、前記監視部からの通知に基づき、制御信号を伝送路に出力する第 1の制御部と、

メディア信号を入力して符号ィ匕して得られたストリームを出力するエンコーダ部と、前記エンコーダ部から出力されたストリームを入力し、前記伝送路から制御信号を受信した際に、前記メディア信号が前記エンコーダ部で符号化された時間間隔と異なる時間間隔で該ストリームを前記伝送路に出力する制御を行う第 2の制御部と、を備えたことを特徴とする送受信装置。

[10] 前記監視部は、前記伝送路の無線状態が、現在の無線エリア力隣接エリアへのハンドオーバになった場合に、前記第 1の制御部に通知する、ことを特徴とする請求項 8又は 9記載の送受信装置。

[11] メディア信号を入力して符号ィ匕して得られたストリームを伝送路に出力するステップと、

前記伝送路から所定の制御信号を受信した際に、前記符号化処理の圧縮レートを変化させて前記ストリームを出力するように制御するステップと、

を含む、ことを特徴とする送信方法。

[12] メディア信号を入力して符号ィ匕して得られたストリームを出力するステップと、

前記符号化して得られたストリームを伝送路に出力するにあたり、前記伝送路から所定の制御信号を受信した際に、前記メディア信号が符号化された時間間隔と異なる時間間隔でストリームを前記伝送路に出力するように、ストリームの出力制御を行うステップと、

を含む、ことを特徴とする送信方法。

[13] 伝送路力受信したストリームを復号するステップと、

前記復号して得られたメディア信号を蓄積するバッファ部の蓄積量を監視し、該蓄積量が予め定められたしきい値を越えるか、または下回った場合に、制御信号を前記伝送路に出力するステップと、

を含む、ことを特徴とする受信方法。

[14] 伝送路力受信したストリームを復号するステップと、

前記伝送路の受信状況を監視し、前記受信状況が予め定められた状況になった場合に、制御信号を前記伝送路に出力するステップと、

を含む、ことを特徴とする受信方法。

[15] 前記伝送路の無線状態が、現在の無線エリアから、隣接のセルへのハンドオーバになった場合に、前記制御信号を前記伝送路に出力する、ことを特徴とする請求項 1 4記載の受信方法。

[16] 伝送路力受信したストリームを復号するステップと、

前記復号して得られたメディア信号を蓄積するバッファ部の蓄積量を監視し、該蓄積量が予め定められたしきい値を越える力、または下回った場合に、制御信号を伝送路に出力するステップと、

メディア信号を入力して符号化処理して得られたストリームを前記伝送路に出力するステップと、

前記伝送路力制御信号を入力した際に、前記エンコーダ部の圧縮レートを変化させてストリームを出力するように制御するステップと、

を有する、ことを特徴とする送受信方法。

[17] 伝送路力受信したストリームを復号するステップと、

メディア信号を入力して符号化処理して得られたストリームを出力するステップと、前記伝送路から前記制御信号を受信した際に、前記前記メディア信号が符号化処理された時間間隔と異なる時間間隔で、該ストリームを前記伝送路に出力するように、ストリームの出力制御を行うステップと、

を含む、ことを特徴とする送受信方法。

[18] 伝送路力受信したストリームを復号するステップと、

前記伝送路の受信状況を監視し、前記受信状況が予め定められた状況になった場合、制御信号を前記伝送路に出力するステップと、

メディア信号を符号化処理してストリームを出力するステップと、

前記伝送路から前記制御信号を入力した際に、前記符号化処理の圧縮レートを変化させ出力するステップと、

を含む、ことを特徴とする送受信方法。

[19] 伝送路力受信したストリームを復号するステップと、前記伝送路の受信状況を監視し、前記受信状況が予め定められた状況になった場合に、制御信号を前記伝送路に出力するステップと、

メディア信号を入力して符号ィ匕して得られたストリームを出力するステップと、前記伝送路から前記制御信号を受信した際に、前記メディア信号が符号化処理された時間間隔と異なる時間間隔で該ストリームを前記伝送路に出力するように、ストリームの出力制御を行うステップと、

を含む、ことを特徴とする送受信方法。

[20] 前記伝送路の無線状態が、現在の無線エリアから、隣接のセルへのハンドオーバになった場合に、前記制御信号を前記伝送路に出力する、ことを特徴とする請求項 1 8又は 19記載の送受信方法。

[21] 送信装置を構成するコンピュータに、

メディア信号を入力して符号化して得られたストリームを伝送路に出力する処理と、伝送路から所定の制御信号を受信した際に、前記符号化処理の圧縮レートを変化させてストリームを出力するように制御する処理と、

を実行させるためのプログラム。

[22] 送信装置を構成するコンピュータに、

メディア信号を入力して符号化して得られたストリームを出力する処理と、前記符号ィ匕後のストリームを送信する際に、伝送路力所定の制御信号を受信した際に、前記メディア信号が前記符号ィ匕処理により符号化された時間間隔と異なる時間間隔でストリームを伝送路に出力するように、ストリームの出力制御を行う処理と、を実行させるためのプログラム。

[23] 送信装置から伝送路に送信されたストリームを受け取る受信装置を構成するコンビユータに、

前記伝送路から受信したストリームを復号する処理と、

復号後のメディア信号を蓄積するバッファ部の蓄積量を監視し、該蓄積量が予め定められたしきい値を越える力または下回った場合に、制御信号を前記伝送路に出力する処理と、

を実行させるためのプログラム。

[24] 送信装置から伝送路に送信されたストリームを受け取る受信装置を構成するコンビユータに、

前記伝送路から受信したストリームを復号する処理と、

前記伝送路の受信状況を監視し、前記受信状況が予め定められた状況になった場合に、制御信号を前記伝送路に出力する処理と、

を実行させるためのプログラム。

[25] 音声及び Z又は画像を含む情報データを入力として符号ィヒ処理し配信用データを生成し該配信用データを、有線及び Z又は無線の伝送路を介して配信する送信装置が、

前記伝送路から所定の制御信号を受け取った際に、前記符号化処理の圧縮レートを可変させるか、又は、入力データが前記符号ィ匕処理により符号化された時間間隔と異なる時間間隔で、前記配信用データを出力するように出力の制御を行う手段と、を備えたこと、ことを特徴とする送信装置。

[26] 請求項 25の送信装置力も前記伝送路に配信された前記配信用データを受け取り復号する手段を備えた受信装置が、受信したデータを記憶する記憶装置の蓄積量の状態、又は、前記伝送路からの受信状態を監視し、監視結果に基づき、前記制御信号を前記伝送路を介して前記送信装置に送信する手段を備えたこと、ことを特徴と

[27] 請求項 25記載の送信装置と、請求項 26記載の受信装置を備えた送受信システム

[28] 画像信号を入力して符号化して得られた画像符号化データを出力するエンコーダと、

伝送路力制御信号を受信した際に、前記エンコーダ部の圧縮レートを変化させて前記画像符号化データを前記伝送路に出力する、又は、前記画像符号化データが前記エンコーダで符号化された時間間隔と異なる時間間隔で前記画像符号ィ匕デ一タを前記伝送路に出力するように制御する制御部と、

を備えたことを特徴とする画像データ送信装置。

[29] 伝送路から受信した画像符号化データを復号するデコーダと、前記デコーダで復号して得られた画像信号を格納するバッファと、

前記バッファの蓄積量、又は、前記伝送路の受信状況の監視結果に基づき、制御信号を前記伝送路に出力する制御部と、を備えたことを特徴とする画像データ受信