JP4909590B2 - メディア信号の受信装置、送信装置及び送受信システム - Google Patents

Description

本発明は、データの送信・受信技術に関し、特に、無線伝送路を介した、符号化された画像・音声データの配信に好適に適用される受信装置、送信装置及び送受信システムに関する。

近年、動画像データを効率良く伝送する方法として、高能率圧縮による符号化データを伝送する方法が多く用いられている。動画像圧縮符号化情報を、パケット交換方式を利用したＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークへ配信する方法は多数ある。無線伝送路を用いた動画像の配信について、種々の試みがなされている。以下の説明において、動画像や音声のデータのことを、メディア信号とも呼んでいる。

動画像データや音声データの配信を、無線伝送路を用いて行う場合、無線伝送路での無線誤りや損失が発生した際には、失われたデータの再送要求を行う方法が一般的である。また、無線伝送路での通信では、個々の受信者の無線受信環境に基づいた送受信電力制御等を行って、データの通信品質を確保し、受信データの安定化を図っている。

無線伝送路上での通信において、基地局と移動局のそれぞれのバッファでのデータ蓄積量を計測し、データ蓄積量の各々が第１、第２のしきい値の間になるように無線回線の数量を増減させることで、データを効率よく送受信できるようにした無線通信システムが知られている。そのような無線システムは、日本国特許公開：特開２００１−３５９１５３号公報（ＪＰ，Ｐ２００１−３５９１５３Ａ）に開示されている。

受信バッファの管理として、受信バッファに蓄積されるデータ量を監視し、蓄積データ量が上側のしきい値より大きくなったとき、受信クロックの周波数を高くし、蓄積データ量が下側のしきい値より小さくなったとき、受信クロックの周波数を低く設定するようにしたＡＶ送受信システムも知られている。そのようなＡＶ送受信システムは、日本国特許公開：特開２００２−１６５１４８号公報（ＪＰ，Ｐ２００２−１６５１４８Ａ）に開示されている。

パケット出力方式のパケット交換機であって、パケット蓄積量が予め定められたしきい値を越えたバッファメモリが発生すると、しきい値超過のバッファメモリの発生を知らせる情報を、蓄積量がしきい値以下になるまで送出し続けるものが、日本国特許公開：特開平７−７９２５２号公報（ＪＰ，７−７９２５２，Ａ）に開示されている。

ところで、無線伝送路を介して移動局である受信装置に動画像の配信を行う場合、その受信装置（移動局）が、ある無線エリアあるいは無線セルを越えて、隣接の無線エリアに移動する際には、受信装置が接続する基地局の切り替えを行う必要が生じ、ハンドオーバが発生する。ハンドオーバの期間中は、受信装置において、データの受信が停止してしまうため、大量のデータの欠落が生じてしまう。受信が停止すると、受信装置のバッファには新たには受信データが蓄積されないものの、バッファに既に格納されているデータは復号のためなどに次々と取り出される。その結果、バッファ中に滞留しているデータ量がゼロになって、バッファが「枯渇」してしまい、その結果、動画像の場合では、画面が停止するあるいは画面がフリーズする等の問題が発生し、一方、音声信号の場合では、音が途切れる、あるいは音声が無音になってしまう等の問題が生じる。

このような動画像における画面の停止や音声における音の途切れは、ハンドオーバ時にのみ生じる問題でない。ベストエフォートネットワークにおいて、使用できる帯域幅が時間的に変動する場合にも、同様の問題が発生している。

さらに、受信側で欠落したデータを、送信側から受信側に、ただ単に再送した場合、本来の受信データと再送データとを受信装置で同時に受信するためには、ネットワークリソースが不足してしまう。

本発明の目的は、動画像や音声などのデータの配信に際して受信装置にハンドオーバが発生しても、受信品質の劣化を最小限に抑えることができる方法を提供することにある。

本発明の別の目的は、動画像や音声などのデータの配信に際して受信装置にハンドオーバが発生しても、受信品質の劣化を最小限に抑えることができる装置を提供することにある。

本発明のさらに別の目的は、ハンドオーバなどに起因する受信品質劣化を最小限に抑えることができるとともに、送信側及び受信側の双方における処理量を少なく抑えることができる方法及び装置を提供することにある。

前記目的を達成する本発明によれば、受信装置は、受信側でメディア信号を格納するバッファの蓄積量を監視する監視手段と、蓄積量が予め定められたしきい値を超えるかまたは下回った場合に制御信号を伝送路に出力する制御手段とを有する。本発明の受信装置では、バッファからデータを取り出してデコードするデコーダを設け、バッファのデータが枯渇する前にデータが受信されるように制御することにより、デコードされるメディア信号の品質が維持される。

また、本発明の受信装置は、受信状況を監視する監視手段と、受信状況が予め定められた状況となった場合に制御信号を伝送路に出力する制御手段とを有する構成としてもよい。予め定められた状況としては、無線ハンドオーバが例示される。

本発明の送信装置は、少なくとも２種類の異なるビットレートのメディア信号を格納する蓄積部と、伝送路から制御信号を入力して、制御信号に基づき、メディア信号のビットレートを切り替えて蓄積部からメディア信号を出力する切替え部と、を有する。

あるいは送信装置は、少なくとも２種類の異なるビットレートのメディア信号が格納された少なくとも２種類以上のファイルを格納する蓄積部と、伝送路から制御信号を入力し、制御信号に基づき、出力すべきファイルを切り替えて蓄積部から出力する出力部とを、備えていてもよい。

あるいは送信装置は、メディア信号が格納された蓄積部と、伝送路から制御信号を入力し、制御信号に基づき、蓄積部からメディア信号をビットレートを変換して出力する変換部と、を有する構成としてもよい。

あるいは送信装置は、蓄積部に格納されたメディア信号を、伝送路から入力した制御信号により、メディア信号が符号化された時間間隔と異なる時間間隔で読み出して出力する構成としてもよい。

本発明の送受信システムは、上述した受信装置と上述した送信装置とを有し、伝送路を介して送信装置から受信装置にメディア信号が送られ、受信装置から送信装置に制御信号が送られるようにしたものである。

例えば本発明の送受信システムでは、受信装置は、メディア信号を格納するバッファの蓄積量を監視する監視手段と、蓄積量が予め定められたしきい値を超えるか、またはしきい値を下回った場合に制御信号を伝送路に出力する制御手段と、を有し、送信装置は、少なくとも２種類の異なるビットレートのメディア信号を格納する蓄積部と、伝送路から制御信号を入力して、制御信号に基づき、ビットレートを切り替えて蓄積部からメディア信号を出力する手段と、を有する。この構成において、蓄積手段には、少なくとも２種類の異なるビットレートのメディア信号が格納された少なくとも２種類以上のファイルを蓄積するようにし、出力手段は、伝送路から制御信号を入力し、制御信号に基づき、蓄積手段からファイルを切り替えて出力するようにしてもよい。あるいは送信装置は、メディア信号が格納された蓄積手段と、伝送路から制御信号を入力し、制御信号に基づいて、メディア信号を蓄積手段からビットレートを変換して出力する変換手段と、を備えてもよい。あるいは送信装置は、メディア信号が蓄積された蓄積手段と、伝送路から制御信号を入力し、制御信号に基づいて、メディア信号が符号化された時間間隔と異なる時間間隔で蓄積手段からメディア信号を読み出して出力する出力手段と、を備えてもよい。

本発明の別の送受信システムでは、受信装置は、受信状況を監視する監視手段と、受信状況が予め定められた状況となった場合に制御信号を伝送路に出力する制御手段と、を備え、送信装置は、少なくとも２種類の異なるビットレートのメディア信号が格納された少なくとも２種類のファイルを蓄積する蓄積手段と、伝送路から制御信号を入力し、制御信号に基づき、蓄積手段からファイルを切り替えて出力する手段と、を備える。あるいは送信装置は、メディア信号が格納された蓄積手段と、伝送路から制御信号を入力し、制御信号に基づき、蓄積手段からメディア信号をビットレートを変換して出力する変換手段とを有する。あるいは送信装置は、メディア信号が蓄積された蓄積手段と、伝送路から制御信号を入力し、制御信号に基づいて、メディア信号が符号化された時間間隔と異なる時間間隔で蓄積手段からメディア信号を読み出して出力する出力手段と、を備えてもよい。

本発明によれば、動画像や音声の符号化されたデータを無線伝送路で配信するとき、無線ネットワーク帯域の変動や、画像及び／または音声データの受信装置が基地局間をハンドオーバすることによる受信品質の劣化、例えば画質や音質の乱れを最小限に抑えることができる。また、そのような効果を得るための送信側、受信側での追加の処理量を少なく抑えることができる。

［図１］図１は、本発明に基づく画像データ配信システムの構成を示すブロック図である。
［図２］図２は、データ受信装置の第１の例の構成を示すブロック図である。
［図３］図３は、データ受信装置の第２の例の構成を示すブロック図である。
［図４］図４は、データ受信装置の第３の例の構成を示すブロック図である。
［図５］図５は、画像データ送信装置の第１の例の構成を示すブロック図である。
［図６］図６は、画像データ送信装置の第２の例の構成を示すブロック図である。
［図７］図７は、画像データ送信装置の第３の例の構成を示すブロック図である。
［図８］図８は、画像データ配信システムの第１の例の構成を示すブロック図である。
［図９］図９は、画像データ配信システムの第２の例の構成を示すブロック図である。
［図１０］図１０は、画像データ配信システムの第３の例の構成を示すブロック図である。
［図１１］図１１は、画像データ配信システムの第４の例の構成を示すブロック図である。
［図１２］図１２は、画像データ配信システムの第５の例の構成を示すブロック図である。
［図１３］図１３は、画像データ配信システムの第６の例の構成を示すブロック図である。
［図１４］図１４は、画像データ配信システムの第７の例の構成を示すブロック図である。

以下、本発明の好ましい実施の形態について、画像符号化データの送信及び受信に関連して説明するが、音声符号化データやオーディオ符号化データなどのリアルタイムメディア信号に対しても、以下で述べるものと同様の構成を用いて本発明を適用できることは、いうまでもない、
図１に示す本発明の好ましい実施形態の画像データ配信システムは、伝送路１０６を介して、データ送信装置からデータ受信装置に、メディア信号として、画像データ信号及び／又は音声データ信号を配信するものである。ここでは、メディア信号は画像データ信号を含んでいるものとし、データ送信装置は画像データ送信装置１０１であり、データ受信装置は画像データ受信装置１０７であるものとする。

無線ネットワークとして構成された伝送路１０６では、無線物理層上にＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）網が構築されており、データは、プロトコルとしてＵＤＰ（Ｕｓｅｒ Ｄａｔａｇｒａｍ Ｐｒｏｔｏｃｏｌ）／ＩＰを用いて伝送されるものとする。すなわち伝送路１０６は、無線ＩＰ網である。画像データ送信装置１０１は、無線ＩＰ網に接続されるサーバであって、送信プロトコルとしてＵＤＰ／ＩＰを用い、画像符号化データを送信する。画像データ受信装置１０７は、無線ＩＰ網に接続されるクライアント端末であり、ＵＤＰ／ＩＰを用いて画像符号化データを受信する。さらにこの配信システムは、画像データ受信装置１０７から伝送路１０６を介して画像データ送信装置１０１に対して制御信号が送信されるように構成されており、画像データ送信装置１０１は、後述するように、制御信号に応じて、ビットレートを切替えて画像符号化データを送信する。

まず、画像データ受信装置１０７について説明する。

図２は、画像データ受信装置の第１の例を示している。図２に示した画像データ受信装置１０７Ａは、受信部１０９、制御部１０８、符号化データバッファ部１１１、デコーダ１１２を備えている。

受信部１０９は、伝送路１０６から画像符号化データを受信し、符号化データバッファ部１１１に蓄積する。符号化データバッファ部１１１は、受信した画像符号化データを一時的に格納するものであって、伝送路１０６でのパケットゆらぎや、パケットの遅着を吸収した上で、受信パケットをデコーダ１１２へ出力する。

制御部１０８は、符号化データバッファ部１１１のバッファの蓄積量を予め定められた時間間隔毎に計測する。ここでバッファの蓄積量とは、バッファ中に現在滞留しているデータの量を表すものである。制御部１０８は、符号化データバッファ部１１１のバッファが枯渇しそうになると、伝送路１０６に対して制御信号を送出する。すなわち、バッファの蓄積量が予め定められたしきい値を下回る場合か、このしきい値を越える場合に、制御部１０８は、制御信号を伝送路１０６を介してコンテンツデータを配信する側に送出する。配信する側は、一般的には、画像データ送信装置である。バッファの蓄積量がしきい値を下回る場合とは、バッファ内の滞留データ量が少なくなって、バッファが枯渇状態に近くなっている場合に対応する。ここで制御信号のフォーマットとしては、例えば、ＩＥＴＦ（Ｉｎｔｅｒｎｅｔ Ｅｎｇｉｎｅｅｒｉｎｇ Ｔａｓｋ Ｆｏｒｃｅ）においてＲＦＣ（Ｒｅｑｕｅｓｔ ｆｏｒ Ｃｏｍｍｅｎｔｓ）として標準化されているＲＴＣＰ（Ｒｅａｌ−ｔｉｍｅ Ｔｒａｎｓｐｏｒｔ Ｃｏｎｔｒｏｌ Ｐｒｏｔｏｃｏｌ）や、現在、ＩＥＴＦで規格策定中のＲＴＣＰの拡張版や、ＩＥＴＦにおいてＲＦＣとして標準化されているＲＴＳＰ（Ｒｅａｌ−ｔｉｍｅ Ｓｔｒｅａｍｉｎｇ Ｐｒｏｔｏｃｏｌ）などを用いることができる。制御信号に何を用いることができるかという点に関しては、以下の各例についても同様である。

図３は、画像データ受信装置の第２の例を示している。図３において、図２と同一の構成要素は、同一の参照符号が付されており、以下では、重複する説明は繰り返さない。

図３に示す画像データ受信装置１０７Ｂは、図２に示した画像データ受信装置１０７Ａに、無線状態判別部１１０を追加したものである。無線状態判別部１１０は、受信部１０９とともに伝送路１０６に接続され、その出力が制御部１０８に接続されている。無線状態判別部１１０は、画像データ受信装置１０７Ｂにおける伝送路１０６の無線受信状態を監視し、受信状況が予め定められた状況となった場合に、その旨を制御部１０８に通知する。無線状態判別部１１０からの通知を受けた制御部１０８は、伝送路１０６に対し、制御信号を出力する。

図４は、画像データ受信装置の第３の例を示している。図４において、図２と同一の構成要素は、同一の参照符号が付されており、以下では、重複する説明は繰り返さない。

図４に示す画像データ受信装置１０７Ｃは、図２に示した画像データ受信装置１０７Ａに、ハンドオーバ判別部２１０を追加したものである。ハンドオーバ判別部２１０は、伝送路１０６の無線状態を監視し、無線状態に基づき、受信装置１０７Ｃが所属すべき無線受信エリア（あるいはセル）が現在の無線受信エリアから隣接のエリアへの変更になったとき、すなわちハンドオーバとなった場合に、その旨を制御部１０８に伝える。制御部１０８は、ハンドオーバの通知を受けると、伝送路１０６に対して、制御信号を出力する。この画像データ受信装置１０７Ｃは、図３に示す画像データ受信装置１０７Ｂにおいて、無線状態判別部１１０が判別する無線受信状態がハンドオーバである場合に対応する。

次に、画像データ送信装置１０１について説明する。

図５は、画像データ送信装置の第１の例を示している。図５に示した画像データ送信装置１０１Ａは、画像データ蓄積部１０３と、画像符号化データ送信部１０４と、制御部１０２とを備えている。

画像データ蓄積部１０３は、少なくとも２種類の異なるビットレート（例えばＢ１及びＢ２）の画像データ信号を蓄積する。異なるビットレートの画像データ信号のそれぞれに対応して、画像データ蓄積部１０３には、蓄積領域１２１、１２２を備えている。ここで、画像データは、（１）予め蓄積された画像データ、（２）リアルタイムで符号化して生成された画像データ、のいずれかであるものとする。

制御部１０２は、画像データ受信装置から伝送路１０６に送信された制御信号を伝送路１０６から入力し、その制御信号に基づき、画像データのビットレートを切り替えるための信号すなわちビットレート切り替え信号を出力する。

画像符号化データ送信部１０４は、制御部１０２から出力されたビットレート切り替え信号に従い、画像データのビットレートを切り替えた上で、符号化し、伝送路１０６に出力する。

図５に示した画像データ送信装置１０１Ａにおいては、異なるビットレート（Ｂ１及びＢ２）の画像符号化データをそれぞれファイルとして画像データ蓄積部１０３に格納しておき、画像符号化データ送信部１０４は、伝送路１０６からの制御信号に従い、ファイルを切り替えて伝送路１０６に出力する構成としてもよい。この場合は、画像データ蓄積部１０３において、ビットレートごとの蓄積領域を明示的に区別して設ける必要はない。

図６は、画像データ送信装置の第２の例を示している。図６において、図５と同一の構成要素は、同一の参照符号が付されており、以下では、重複する説明は繰り返さない。

図６に示す画像データ送信装置１０１Ｂは、図５に示した画像データ送信装置１０１Ａに、画像トランスコーダ２０５を備えて構成されたものである。画像トランスコーダ２０５は、画像符号化データを入力し、制御部１０２から制御信号を入力し、制御信号に従い、入力した画像符号化データのビットレートをリアルタイムまたは非リアルタイムに変換して、画像符号化データ送信部１０４に出力する。画像符号化データ送信部１０４は、ビットレート変換後の画像データを伝送路１０６に出力する。

図７は、画像データ送信装置の第３の例を示している。図７において、図５と同一の構成要素は、同一の参照符号が付されており、以下では、重複する説明は繰り返さない。

図７に示す画像データ送信装置１０１Ｃは、図５に示した画像データ送信装置１０１Ａと同様のものであるが、画像符号化データ送信部の機能において異なっている。図７に示す画像データ送信装置１０１Ｃにおいて画像符号化データ送信部２０４は、制御部１０２から制御信号を入力し、制御信号に応じ、画像符号化データを、符号化の際に用いた時間間隔（またはクロック）Ｔとは異なる時間間隔（またはクロック）Ｔ’で読み出して、伝送路１０６に出力する。

以上、本実施形態の画像データ配信システムで用いられる画像データ受信装置と画像データ送信装置を説明した。次に、これらの画像データ受信装置と画像データ送信装置を組み合わせて構成される画像データ配信システムの具体的な例を説明する。

図８は、画像データ配信システムの第１の例を示している。この画像データ配信システムは、図２に示した画像データ受信装置１０７Ａと、図５に示した構成の画像データ送信装置１０１Ａとを備えている。

この画像データ配信システムにおいて画像データ受信装置１０７Ａでは、画像符号化データ受信部１０９が、伝送路１０６から画像符号化データを受信し、符号化データバッファ部１１１に蓄積する。符号化データバッファ部１１１は、画像符号化データにおける伝送路１０６でのパケットゆらぎやパケットの遅着を吸収した上で、画像符号化データをデコーダ１１２へ出力する。制御部１０８は、符号化データバッファ部１１１のバッファの蓄積量を予め定められた時間間隔毎に計測し、バッファが枯渇しそうになると、すなわち、バッファの蓄積量が所定のしきい値を下回った場合に、伝送路１０６に制御信号を送出する。

画像データ送信装置１０１Ａは、少なくとも２種類の異なるビットレート（例えばＢ１及びＢ２）の画像データ信号を画像データ蓄積部１０３に蓄積している。ここで、画像データは、（１）予め蓄積された画像データ、（２）リアルタイムで符号化し生成された画像データのいずれかであるものとする。

画像データ送信装置１０１Ａにおいて制御部１０２は、伝送路１０６から制御信号を入力し、制御信号に基づき、画像データのビットレートを切り替える信号を出力する。画像符号化データ送信部１０４は、制御信号に従い、画像データ蓄積部１０３に蓄積された画像符号化データのビットレートを切り替えて読み出し、伝送路１０６に出力する。

したがって、このシステムにおいて、伝送路１０６を介して画像データ信号を受信する画像データ受信装置１０７Ａにおける処理は、
画像データを格納するバッファの蓄積量を制御部１０８が監視するステップと、
バッファの蓄積量が予め定められたしきい値を超えるかまたは下回った場合に、制御部１０８が制御信号を伝送路１０６に出力するステップと、を有する。

同様に、画像データ送信装置１０１Ａにおける処理は、
少なくとも２種類の異なるビットレートの画像データを画像データ蓄積部１０３に格納するステップと、
伝送路１０６から制御信号を入力し、制御信号に基づき、ビットレートを切り替えて画像データを画像データ蓄積部１０３から出力するステップと、
画像データを符号化して伝送路１０６に送信するステップと、を有する。

図８に示した画像データ配信システムにおいて、画像データ送信装置１０１Ａとして、画像データを異なるビットレート（Ｂ１及びＢ２）のファイルとして画像データ蓄積部１０３に格納し、制御信号に従い画像符号化データ送信部１０４がファイルを切り替えて伝送路１０６に出力するものを使用することができる。そのような画像データ送信装置１０１Ａを用いた場合には、画像データ送信装置１０１Ａでの処理は、
少なくとも２種類の異なるビットレートの画像データが格納された少なくとも２種類以上のファイルを蓄積部１０３に格納するステップと、
伝送路１０６から制御信号を入力するステップと、
制御信号に基づき、ファイルを切り替えて蓄積部１０３から出力するステップと、
出力されたファイルの画像データを符号化して伝送路１０６に送信するステップと、
を有する。画像データ受信装置１０７Ａでの処理は上述と同様である。

図９は、画像データ配信システムの第２の例を示している。この画像データ配信システムは、図３に示した画像データ受信装置１０７Ｂと、図５に示した構成の画像データ送信装置１０１Ａとを備えている。図９において、図８と同一の構成要素は、同一の参照符号が付されており、以下では、重複する説明は繰り返さない。

画像データ受信装置１０７Ｂの無線状態判別部１１０は、伝送路１０６の無線受信状態を監視し、受信状況が予め定められた状況となった場合にその旨を制御部１０８に伝える。制御部１０８は、伝送路１０６に対し、制御信号を出力する。

したがって、伝送路１０６を介して画像データ信号を受信する画像データ受信装置１０７Ｂにおける処理は、
無線状態判別部１１０が、伝送路１０６での受信状況を監視するステップと、
無線状態判別部１１０での監視の結果、受信状況が予め定められた状況となった場合に、制御部１０８が、制御信号を伝送路１０６に出力するステップと、を有する。

画像データ送信装置１０１Ａにおける処理は、
少なくとも２種類の異なるビットレートの画像データが格納された少なくとも２種類のファイルを蓄積部１０３に蓄積するステップと、
伝送路１０６から制御信号を入力するステップと、
制御信号に基づき、ファイルを切り替えて蓄積部１０３から出力するステップと、
出力されたファイルの画像データを符号化して伝送路１０６に送信するステップと、を有する。

なお、図９に示した画像データ配信システムにおいて、画像データ受信装置１０７Ｂの代わりに、図４に示した画像データ受信装置１０７Ｃを用いることができる。画像データ受信装置１０７Ｃを用いたシステムの構成が、第３の例のシステムとして、図１０に示されている。画像データ受信装置１０７Ｃを用いた場合には、無線受信状況がハンドオーバである場合に、制御信号が伝送路１０６を介して画像データ送信装置１０１Ａに送られることになる。したがって、このシステムにおいて画像データ受信装置１０７Ｃにおける処理は、
ハンドオーバ判別部２１０が、伝送路１０６での受信状況を監視するステップと、
ハンドオーバ判別部２１０での監視の結果、ハンドオーバとなった場合に、制御部１０８が、制御信号を伝送路１０６に出力するステップと、を有する。画像データ送信装置１０１Ａにおける処理は、図９に示したシステムでの場合と同じである。

図１１は、画像データ配信システムの第４の例を示している。この画像データ配信システムは、図２に示した画像データ受信装置１０７Ａと、図６に示した構成の画像データ送信装置１０１Ｂとを備えている。図１１において、図８と同一の構成要素は、同一の参照符号が付されており、以下では、重複する説明は繰り返さない。

画像データ送信装置１０１Ｂにおいて、画像トランスコーダ２０５は、画像符号化データを入力し、制御部１０２から制御信号を入力し、制御信号に従い、入力した画像符号化データのビットレートを変換して、画像符号化データ送信部１０４に出力する。画像符号化データ送信部１０４は、ビットレート変換後の画像符号化データを伝送路１０６に出力する。

この配信システムにおける処理として、伝送路１０６を介して画像データ信号を受信する画像データ受信装置１０７Ａでの処理は、
画像データを格納するバッファの蓄積量を監視するステップと、
バッファの蓄積量が予め定められたしきい値を超えるか、または下回った場合に制御信号を伝送路１０６に出力するステップと、を有する。

また画像データ送信装置１０１Ｂでの処理は、
伝送路１０６から制御信号を入力し、制御信号に基づき、画像データを格納する蓄積部から画像データをビットレートを変換して出力するステップと、
画像データを符号化して送信するステップと、を有する。

図１２は、画像データ配信システムの第５の例を示している。この画像データ配信システムは、図３に示した画像データ受信装置１０７Ｂと、図６に示した構成の画像データ送信装置１０１Ｂとを備えている。図１２において、図８と同一の構成要素は、同一の参照符号が付されており、以下では、重複する説明は繰り返さない。

画像データ受信装置１０７Ｂの無線状態判別部１１０は、伝送路１０６の無線受信状態を監視し、受信状況が予め定められた状況となった場合にその旨を制御部１０８に伝える。制御部１０８は、伝送路１０６に対し、制御信号を出力する。画像データ送信装置１０１Ｂの画像トランスコーダ２０５は、画像符号化データを入力し、制御部１０２から制御信号を入力し、制御信号に従い、蓄積部１０３から入力した画像符号化データをそのビットレートを変換して、画像符号化データ送信部１０４に出力する。画像符号化データ送信部１０４は、ビットレート変換後の画像符号化データを伝送路１０６に出力する。

この配信システムにおいて画像データ受信装置１０７Ｂが実行する処理は、
伝送路１０６での受信状況を監視するステップと、
受信状況が予め定められた状況となった場合に制御信号を伝送路１０６に出力するステップと、を有する。

画像データ送信装置１０１Ｂが実行する処理は、
伝送路１０６から制御信号を入力し、制御信号に基づき、画像データを格納する蓄積部１０３から画像データをビットレートを変換して出力するステップを有する。

なお、図１２に示した画像データ配信システムにおいて、画像データ受信装置１０７Ｂの代わりに、図４に示した画像データ受信装置１０７Ｃを用いることができる。画像データ受信装置１０７Ｃを用いた場合には、無線受信状況がハンドオーバである場合に、制御信号が伝送路１０６を介して画像データ送信装置１０１Ｂに送られることになる。

図１３は、画像データ配信システムの第６の例を示している。この画像データ配信システムは、図２に示した画像データ受信装置１０７Ａと、図７に示した構成の画像データ送信装置１０１Ｃとを備えている。図１３において、図８と同一の構成要素は、同一の参照符号が付されており、以下では、重複する説明は繰り返さない。

画像データ受信装置１０７Ａでは、画像符号化データ受信部１０９が、伝送路１０６から画像符号化データを受信し、符号化データバッファ部１１１に蓄積する。符号化データバッファ部１１１は、伝送路でのパケットゆらぎや、パケットの遅着を吸収した上で、画像符号化データをデコーダ１１２へ出力する。制御部１０８は、符号化データバッファ部１１１のバッファの蓄積量を予め定められた時間間隔毎に計測し、バッファが枯渇しそうになると、伝送路１０６に制御信号を送出する。

画像データ送信装置１０１Ｃの画像符号化データ送信部２０４は、画像データ受信装置１０７Ａから伝送路１０６に送信された制御信号を制御部１０２から入力し、画像符号化データを、符号化の際に用いた時間間隔（またはクロック）Ｔとは異なる時間間隔（またはクロック）Ｔ’で蓄積部１０３から読み出して、伝送路１０６に出力する。

この配信システムにおいて画像データ受信装置１０７Ａが実行する処理は、
画像データを格納するバッファの蓄積量を監視するステップと、
バッファの蓄積量が予め定められたしきい値を超えるか、または下回った場合に制御信号を伝送路１０６に出力するステップと、を有する。

画像データ送信装置１０１Ｃが実行する処理は、
伝送路から制御信号を入力し、蓄積部１０３に格納された画像データを、制御信号により、画像データが符号化された時間間隔と異なる時間間隔で蓄積部１０３から読み出して出力するステップを含む。

図１４は、画像データ配信システムの第７の例を示している。この画像データ配信システムは、図３に示した画像データ受信装置１０７Ｂと、図７に示した構成の画像データ送信装置１０１Ｃとを備えている。図１４において、図８と同一の構成要素は、同一の参照符号が付されており、以下では、重複する説明は繰り返さない。

画像データ受信装置１０７Ｂの無線状態判別部１１０は、伝送路１０６の無線受信状態を監視し、受信状況が予め定められた状況となった場合に制御部１０８に伝え、制御部１０８は、伝送路１０６に対し、制御信号を出力する。画像データ送信装置１０１Ｃの画像符号化データ送信部２０４は、画像データ受信装置１０７Ａから伝送路１０６に送信された制御信号を制御部１０２から入力し、画像符号化データを、符号化の際に用いた時間間隔（またはクロック）Ｔとは異なる時間間隔（またはクロック）Ｔ’で蓄積部１０３から読み出して、伝送路１０６に出力する。

この配信システムにおいて画像データ受信装置１０７Ｂが実行する処理は、
伝送路１０６での受信状況を監視するステップと、
受信状況が予め定められた状況となった場合に制御信号を伝送路に出力するステップと、を有する。

画像データ送信装置１０１Ｃが実行する処理は、
伝送路１０６から制御信号を入力し、蓄積部１０３に格納された画像データを、制御信号により、画像データが符号化された時間間隔と異なる時間間隔で蓄積部１０３から読み出して出力するステップを含む。

なお、図１４に示した画像データ配信システムにおいて、画像データ受信装置１０７Ｂの代わりに、図４に示した画像データ受信装置１０７Ｃを用いることができる。画像データ受信装置１０７Ｃを用いた場合には、無線受信状況がハンドオーバである場合に、制御信号が伝送路１０６を介して画像データ送信装置１０１Ｃに送られることになる。

以上説明した画像データ配信システムにおいて、画像データ受信装置及び画像データ送信装置は、いずれも、コンピュータを用いて実現することができる。すなわち、コンピュータ上でプログラムを実行することによって、上述した画像データ受信装置、画像データ送信装置での処理及び制御を実現できる。ここでいうコンピュータには、プロセッサやコントローラも含まれる。プログラムは、ネットワークを介して、あるいは、そのプログラムを格納したＣＤ−ＲＯＭのような記録媒体を介して、コンピュータに読み込まれる。本発明は、このようなプログラムあるいはプログラムプロダクトあるいは記録媒体をも包含するものである。さらには、そのようなプログラムを伝送する媒体も、本発明の範疇に含まれる。

以下、本発明に基づくプログラムの例を説明する。

第１のプログラムは、
伝送路から受信したメディア信号を格納するバッファの蓄積量を監視する処理と、
前記監視の結果に基づき、前記蓄積量が予め定められたしきい値を超えるか、または下回ったときに、所定の制御信号を前記伝送路に出力し、前記バッファのデータが枯渇する前にデータが受信されるように制御する処理と、
を受信装置を構成するコンピュータに実行させるプログラムである。

第２のプログラムは、
伝送路からの受信状況を監視する処理と、
前記受信状況が予め定められた状況となった場合に、所定の制御信号を前記伝送路に出力する処理と、
を受信装置を構成するコンピュータに実行させるプログラムである。

第３のプログラムは、
伝送路からの受信状況を監視する処理と、
前記受信状況が無線ハンドオーバとなった場合に、所定の制御信号を前記伝送路に出力する処理と、
を受信装置を構成するコンピュータに実行させるプログラムである。

第４のプログラムは、
少なくとも２種類の異なるビットレートのメディア信号を蓄積部に格納しておく処理と、
伝送路から制御信号を入力して、前記制御信号に基づき、前記ビットレートを切り替えて前記メディア信号を前記蓄積部から出力する処理と、
前記出力されたメディア信号を符号化して前記伝送路に送信する処理と、
を送信装置を構成するコンピュータに実行させるプログラムである。

第５のプログラムは、
少なくとも２種類の異なるビットレートのメディア信号が格納された少なくとも２種類以上のファイルを蓄積部に蓄積しておく処理と、
伝送路から制御信号を入力し、前記制御信号に基づき、ファイルを切り替えて前記蓄積部から出力する処理と、
前記出力されたファイルのメディア信号を符号化して前記伝送路に送信する処理と、
を送信装置を構成するコンピュータに実行させるプログラム。

第６のプログラムは、
伝送路から制御信号を入力する処理と、
前記制御信号に基づき、蓄積部に格納されたメディア信号を、そのビットレートを変換して出力する処理と、
前記ビットレートが変換されたメディア信号を符号化して前記伝送路に送信する処理と、
を送信装置を構成するコンピュータに実行させるプログラムである。

第７のプログラムは、
伝送路から制御信号を入力する処理と、
前記制御信号に基づき、入力信号が符号化された時間間隔と異なる時間間隔で、その入力信号を出力する処理と、
を送信装置を構成するコンピュータに実行させるプログラムである。

以上本発明を上記実施形態に即して説明したが、本発明は、上記実施例の構成にのみ限定されるものでなく、本発明の原理の範囲内で当業者であればなし得るであろう各種変形、修正を含むことはもちろんである。

Claims (2)

1. 移動通信システムに用いられる送受信システムであって、
   メディア信号を無線伝送路に送信する送信装置と、前記送信装置から前記無線伝送路を介してメディア信号を受信する受信装置と、を有し、
   前記受信装置は、
   前記無線伝送路での無線受信状況を監視しハンドオーバとなった場合か否かを判別する監視手段と、
   前記無線受信状況がハンドオーバとなった場合に制御信号を前記無線伝送路に出力する制御手段と、
   を備え、
   前記送信装置は、
   メディア信号を格納する蓄積手段と、
   前記受信装置から前記無線伝送路に出力された前記制御信号を入力し、前記蓄積手段に格納されたメディア信号を、前記制御信号に基づき、前記メディア信号の符号化の際に用いられたクロックと異なるクロックで前記蓄積手段から読み出して出力する手段と、
   出力されたメディア信号を前記無線伝送路に送信する手段と、
   を備える、送受信システム。
2. 移動通信システムにおける送受信方法であって、
   無線伝送路を介してメディア信号を受信する受信装置において、前記無線伝送路での無線受信状況を監視しハンドオーバとなった場合か否かを判別するステップと、
   前記無線受信状況がハンドオーバとなった場合に制御信号を前記受信装置から前記無線伝送路に出力するステップと、
   前記メディア信号を前記無線伝送路に送信する送信装置において、前記受信装置から前記無線伝送路に出力された前記制御信号を入力するステップと、
   前記送信装置の蓄積手段に格納されたメディア信号を、前記制御信号により、前記メディア信号の符号化の際に用いられたクロックと異なるクロックで前記蓄積手段から読み出して出力するステップと、
   前記出力されたメディア信号を前記送信装置から前記無線伝送路に送信するステップと、
   を有する、送受信方法。

Images