JP4705265B2 - 映像または音声伝送システム - Google Patents
映像または音声伝送システム Download PDFInfo
- Publication number
- JP4705265B2 JP4705265B2 JP2001120785A JP2001120785A JP4705265B2 JP 4705265 B2 JP4705265 B2 JP 4705265B2 JP 2001120785 A JP2001120785 A JP 2001120785A JP 2001120785 A JP2001120785 A JP 2001120785A JP 4705265 B2 JP4705265 B2 JP 4705265B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- data
- transmission
- unit
- audio data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
【０００１】
【発明の属する技術分野】
この発明は、映像または音声伝送システム、特に伝送路のトラフィックの変化による映像または音声データの伝送速度の低下に対応する映像または音声伝送システムに関するものである。
【０００２】
【従来の技術】
従来、データの伝送速度が保証されていないインターネットなどの回線を介して動画の転送を行う場合、伝送路上のトラフィックの変化によって使用可能な伝送帯域が変化し、その映像データが本来必要とする転送レートよりも下回ることにより、映像を配信するサーバーから、受信・表示出力するクライアントへ十分なデータ量が届かず、その結果映像が途切れることがあった。
【０００３】
このような問題に対して、十分なデータ量が届かない場合でも映像を途切れないようにした改良案が、特開平１１−１８７３６７号公報に映像伝送システムとして開示されている。
図９は、上記公報に示された従来の改良案の映像伝送システムの構成を示すブロック図である。この図において１は映像データの送信を行う映像送信装置、２は映像データの受信を行う映像受信装置、３は映像送信装置１と映像受信装置２とを結び映像データを伝送する伝送路である。
なお、映像送信装置１と映像受信装置２はそれぞれ次のように構成されている。
【０００４】
即ち、映像送信装置１は、同一映像毎に異なる再生レートを持つ３個の映像データ（１）（２）（３）と、３個の映像データ（１）（２）（３）のいずれかを選択する形で切換える映像データレート切換部１１と、映像データレート切換部１１から出力された映像データを伝送路３を介して映像受信装置２に送信する映像データ送信部１３と、映像受信装置２からのレート切換要求を受信して映像データレート切換部１１に切換要求信号を伝達するレート切換受信部１４とから構成されている。
【０００５】
また、映像受信装置２は、映像送信装置１から映像データを受信する映像データ受信部２１と、映像データ受信部２１で受信した映像データを一時的に蓄積するバッファメモリ２２と、バッファメモリ２２に蓄積された映像データを順次取得して映像を再生する映像表示部２３と、バッファメモリ２２のデータ量を検出するデータ量検出部２５と、データ量検出部２５によって検出されたバッファメモリ２２のデータ量に応じて映像送信装置１に対して映像データのレートを切換えるよう要求するレート切換要求部２４とを備えている。
【０００６】
図１０は、バッファメモリ２２内のデータ量と基準値との関係を示す図である。
【０００７】
次に、図９に示す従来の改良案の動作について、図１０を用いて詳細に説明する。
映像送信装置１の映像データ送信部１３から送信される映像データは、複数の映像データ（１）〜（３）のうちの任意の１つを映像データレート切換部１１で選択したもので、伝送路３を介して映像受信装置２の映像データ受信部２１に送信される。映像データ受信部２１によって受信された映像データはバッファメモリ２２に一時的に格納される。
【０００８】
映像表示部２３は、バッファメモリ２２から映像データを取り出し、映像を再生する。このバッファメモリ２２に格納されるデータ量は、伝送路３上のトラフィックの変化に伴う映像データの伝送速度の変化によって増減する。即ち、映像データの送信レートが必要とする転送レートより下回ってくると、バッファメモリ２２に格納されるデータ量も低下してくる。
バッファメモリ２２のデータ量には、図１０に示すように、第１の基準値（ａ）と第２の基準値（ｂ）とが設定されており、第１の基準値（ａ）＜第２の基準値（ｂ）とされている。なお、第１の基準値（ａ）および第２の基準値（ｂ）は、同一番組に含まれる映像の集合体毎に設けられている。
【０００９】
データ量検出部２５は、映像データの再生中にバッファメモリ２２に格納されているデータ量が第１の基準値（ａ）を下回った場合、または第２の基準値（ｂ）を上回った場合にレート切換要求部２４にレート切換え要求を出すように指示する。
レート切換要求部２４は、バッファメモリ２２に格納されているデータ量が第１の基準値（ａ）を下回った場合には、現在送信されている映像データよりも低い映像レートの映像データに切換えるよう、映像送信装置１のレート切換受信部１４に要求する。また、バッファメモリ２２に格納されているデータ量が第２の基準値（ｂ）を上回った場合には、現在送信されている映像データよりも高い映像レートの映像データに切換えるよう、映像送信装置１のレート切換受信部１４に要求するようにされている。
また、映像送信装置１のレート切換受信部１４は、レート切換要求部２４からのレート切換要求を受信した時、これを映像データレート切換部１１に伝達する。
【００１０】
ここで、３個の映像データ（１）（２）（３）は、映像データ（１）→映像データ（２）→映像データ（３）の順にビットレートが高くなっていく３種類の映像レートを持つものとし、現在送信されている映像データは映像データ（２）とする。
この場合、映像データ（１）→映像データ（２）→映像データ（３）の順にビットレートが高くなっていくため、映像データ（１）は低ビットレートで送信速度は速くなるが画質はその分悪くなり、映像データ（２）、（３）となるほど高ビットレートで送信速度は遅くなるが画質はその分良くなる。
【００１１】
映像データレート切換部１１は、レート切換受信部１４から現在送信されている映像データよりも低い映像レートの映像データに切換えるように要求された場合は、映像データ（２）から映像データ（１）に切換え、現在送信されている映像データよりも高い映像レートの映像データに切換えるように要求された場合は、映像データ（２）から映像データ（３）に切換えることになる。
この後、映像受信装置２のデータ量検出部２５は、バッファメモリ２２に格納されているデータ量を一定時間ごとに検出し、以上説明した動作を繰返し行う。
【００１２】
【発明が解決しようとする課題】
従来の映像伝送システムは以上のように構成され、１つの映像を送出するのに映像レートの異なる映像データを複数個用意しなければならなかったため、映像送信装置に、複数の映像データを蓄積できるだけの容量を持った蓄積装置を備えなければならず、さらに、レートの異なる映像データを複数個作成するために複数回映像をエンコードしなければならないという問題点があった。
換言すると、大きな容量を持った蓄積装置が必要な割に送出できる映像の数が少なく、しかもエンコードの手間が増大するという問題点があった。
【００１３】
この発明は上記のような問題点を解消するためになされたもので、送信装置において、１つの映像または音声用に１つの映像または音声データを用意するだけでよく、使用可能な伝送帯域が変化しても、映像または音声が途切れない映像または音声伝送システムを提供することを目的とする。
【００１４】
【課題を解決するための手段】
この発明に係る映像または音声伝送システムは、デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、送信装置からの映像または音声データを伝送路を介して受信する受信装置とを備え、送信装置は、映像または音声データにおける伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、データレート制御部によりレート制御された映像または音声データを受信装置に送出するデータ送信部と、データレート制御部に送信レートによるレート制御を実行するための送信レート制御信号を与えるレート制御受信部とを有し、受信装置は、送信装置からの映像または音声データを伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積するバッファメモリと、バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部と、バッファメモリに蓄積されている映像または音声データの量をデータ再生中に検出するデータ量検出部と、データ量検出部の検出結果に応じて送信レート制御信号を送信装置のレート制御受信部に与えるレート制御要求部とを有し、データレート制御部は、送信レート制御信号に応じて、映像または音声データの直交変換を実行し、直交変換における周波数帯域を変化させるのである。
【００１５】
この発明に係る映像または音声伝送システムは、また、デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、送信装置からの映像または音声データを伝送路を介して受信する受信装置とを備え、送信装置は、映像または音声データにおける伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、データレート制御部によりレート制御された映像または音声データを受信装置に送出するデータ送信部と、定期的に応答要求信号を発し、受信装置からの応答受信完了信号を受信するまでの応答時間を計測する応答計測部と、応答計測部からの応答要求信号を伝送路を介して受信装置に送信すると共に、受信装置からの応答受信完了信号を受信して応答計測部に伝達する送信側応答送受信部とを有し、受信装置は、送信装置からの映像または音声データを伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積するバッファメモリと、バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部と、送信装置からの応答要求信号を受信して送信装置側に応答受信完了信号を送信する受信側応答送受信部とを有し、データレート制御部は、応答時間に応じて、映像または音声データの直交変換を実行し、直交変換における周波数帯域を変化させるものである。
【００１６】
この発明に係る映像または音声伝送システムは、また、デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、送信装置からの映像または音声データを伝送路を介して受信する受信装置とを備え、送信装置は、映像または音声データにおける伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、データレート制御部によりレート制御された映像または音声データを一時的に蓄積する送信側バッファメモリと、送信側バッファメモリに蓄積された送信データを読み出して受信装置に送出するデータ送信部と、送信側バッファメモリに蓄積されたデータ量を検出し、その量に応じた送信レートによるレート制御を実行するための送信レート制御信号を発生し、データレート制御部に与えるデータ量検出部とを有し、受信装置は、送信装置からの映像または音声データを伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積する受信側バッファメモリと、受信側バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部とを有し、データレート制御部は、送信レート制御信号に応じて、映像または音声データの直交変換を実行し、直交変換における周波数帯域を変化させるものである。
【００１８】
【発明の実施の形態】
実施の形態１．
以下、この発明の実施の形態１を図にもとづいて説明する。
図１は、実施の形態１の構成を示すブロック図である。この図において、図９と同一または相当部分には同一符号を付して説明を省略する。
図１において、２６は映像受信装置２に設けられたレート制御要求部で、データ量検出部２５が検出したバッファメモリ２２のデータ量に応じてレート制御を実行するための制御信号を出力し、伝送路３を介して映像送信装置１に送出する。１５は映像送信装置１に設けられたレート制御受信部で、レート制御要求部２６からの制御信号を受信して後述する映像データレート制御部１６に伝達し、映像データのレート制御を行なう。
【００１９】
（１）Ａは映像送信装置１に設けられた映像データで、１つの映像用に１つの映像データだけが用意されている。
１６は映像データ（１）Ａのレートを制御する映像データレート制御部で、レート制御受信部１５からの制御信号にもとづいて映像データのレートを制御し、レートを制御した映像データを映像データ送信部１３に送出する。
【００２０】
さらに詳しく説明する。バッファメモリ２２におけるデータ量と送出されるべき映像データのレートとは、図２に示すような関係にある。つまり、データ量が大きくなるということは、バッファメモリ２２から読み出して出力されるデータよりも伝送路３を介してバッファメモリ２２に書きこまれるデータ量が大きくなっていることを示している。これは、伝送路３の負荷が小さくなっていることに起因すると考えられるので、より高いレートの映像を送出することが可能になる。逆に、バッファメモリ２２のデータ量が小さくなるということは、バッファメモリ２２から読み出して出力されるデータよりも伝送路３を介してバッファメモリ２２に書きこまれるデータ量が小さくなっていることを示している。
これは、伝送路３の負荷が大きくなっていることに起因すると考えられるので、より低いレートの映像を送出しなければ、バッファメモリ２２内のデータがなくなり、映像が途切れるなどの問題を引き起こすこととなる。
従って、レート制御要求部２６は、図２の関係にしたがって、しかるべきレートとなるような制御信号を出力し、レート制御受信部１５を経て映像データレート制御部１６に与え、映像データのレート制御を行なうものである。
【００２１】
一般的に映像信号を圧縮して映像データを生成する場合、ＤＣＴ（DiscreteCosine Transform）符号化方式に代表される直交変換が用いられる。例えば、８×８画素の映像信号に対してＤＣＴを行うと、図３に示すような６４個の変換係数が得られる。これらの変換係数は、もとの映像信号の周波数分布を２次元的に表現しているとみなすことができる。つまり、Ｃ１１は、映像信号の直流成分に相当し、Ｃ１１から右に行くほど、また、下に行くほど、高い周波数に対応しており、Ｃ８８が最も高い周波数に対応した変換係数となる。また、映像の，性質として、低周波成分に大きな値が集中しており、高周波成分をカット、つまり帯域制限を行うことによって情報圧縮を行うことができる。このとき、高周波成分まで伝送した場合、レートは高くなり、高周波成分をカットして帯域制限を行った場合、レートは低くなる。
【００２２】
このため、レート制御要求部２６のレート制御信号に応じて、どこまでの高周波成分を情報として送出するかを映像データレート制御部１６において制御することにより、映像データのレートの制御が可能となる。
即ち、図２に示した関係からバッファメモリ２２のデータ量に対応したレートに相当する制御信号をレート制御要求部２６が出力し、その制御信号に応じてどこまでの高周波成分を情報として送出するかを映像データレート制御部１６によって制御することにより、 伝送路３の負荷に応じたレートの制御が可能となる。
【００２３】
実施の形態２．
次に、この発明の実施の形態２を図にもとづいて説明する。
図４は、実施の形態２の構成を示すブロック図である。この図において、図１と同一または相当部分には同一符号を付して説明を省略する。
図１と異なる点は、映像送信装置１と映像受信装置２との間の応答時間を計測し、応答時間に応じて映像データのレートを制御するようにした点である。
即ち図４において、１８及び２７は映像送信装置１と映像受信装置２との間の伝送路３の応答時間を測定するデータを送受信するために映像送信装置１と映像受信装置２のそれぞれに設けられた応答送受信部、１７はその応答時間を計測すると共に、計測結果に応じて映像データレート制御部１６にレート制御用の信号を与える応答計測部である。
【００２４】
次に、実施の形態２の動作、特に応答時間の計測について，図５および図６を用いて詳細に説明する。
応答計測部１７は、送信側の応答送受信部１８に対して定期的に応答要求を発信し、 送信側の応答送受信部１８は伝送路３を介して受信側の応答送受信部２７に応答要求を送信する。
図５は、応答要求を発信した後、応答受信完了の信号を受信するまでの応答時間を計測する状況を示す説明図である。
送信側の応答送受信部１８から応答要求を受信した受信側の応答送受信部２７では、応答要求を受信したことを応答受信完了として送信側の応答送受信部１８に返す。送信側の応答送受信部１８は応答受信完了を応答計測部１７に通知する。応答計測部１７では、応答要求の発信から応答受信完了の受信までの時間を計測して応答時間とする。
【００２５】
上記の応答時間が長い場合は、伝送路３の負荷が大きく、短い場合は、伝送路３の負荷が小さいことを示している。従って、応答時間に応じて映像送信装置１から送出すべき映像データのレートを制御すれば、伝送路３の負荷に応じた映像データを送出することが可能となる。
【００２６】
一方、応答時間と送出されるべき映像データのレートとは、 図６に示すような関係にある。応答時間が長くなるということは、伝送路３の負荷が大きくなっていることに起因すると考えられるので、この場合、より低いレートの映像を送出しなければ、バッファメモリ２２内のデータがなくなり、映像が途切れるなどの問題を引き起こすこととなる。逆に、応答時間が短くなるということは、伝送路３の負荷が小さくなっていることに起因すると考えられるので、より高いレートの映像を送出することが可能である。
従って、応答計測部１７は、計測した応答時間から、図６に示す関係にもとづいて、しかるべきレートとなるような制御信号を映像データレート制御部１６に与えるものである。
【００２７】
実施の形態２は以上のように構成されているため、図６に示す関係から応答時間に対応したレートに相当する制御信号を応答計測部１７が出力し、その制御信号に応じて映像データレート制御部１６が映像レートを制御することにより、伝送路３の負荷に応じたレートの制御が可能となる。
【００２８】
実施の形態３．
次に、この発明の実施の形態３を図にもとづいて説明する。図７は、実施の形態３の構成を示すブロック図である。図７において、図１と同一または相当部分には同一符号を付して説明を省略する。
図１と異なる点は、映像受信装置２からデータ量検出部２５とレート制御要求部２６とを除去すると共に、映像送信装置１に送信側バッファメモリと、そのデータ量を検出し、データ量に応じたレート制御信号を出力して映像データレート制御部に与えるようにした点である。即ち図７において、１２は映像送信装置１に設けられ、映像データを一時的に蓄積する送信側バッファメモリで、ここに蓄積された送信データを取り出して映像データ送信部１３から伝送路３を介して映像受信装置２に送信するようにされている。１９は送信側バッファメモリ１２に蓄積された映像データ量を検出し、そのデータ量に応じたレート制御信号を出力して映像データレート制御部１６に与え、レートを制御するデータ量検出部である。
【００２９】
次に、実施の形態３の動作について図８を用いて詳細に説明する。
図７に示すように、映像送信装置１の映像データは、映像データレート制御部１６を経て送信側バッファメモリ１２に貯えられた後、映像データ送信部１３から伝送路３を介して映像受信装置２の映像データ受信部２１に送信される。
映像データ受信部２１は、受信した映像データを受信側バッファメモリ２２に一時的に格納し、映像表示部２３は、受信側バッファメモリ２２から映像データを取り出して映像を再生する。
【００３０】
さらに詳しく説明する。送信側バッファメモリ１２におけるデータ量と送出されるべき映像データのレートとは、図８に示すような関係にある。
図８において、データ量が大きくなるということは、蓄積されている映像データが送信側バッファメモリ１２に書きこまれるデータ量よりも、送信側バッファメモリ１２から読み出されて伝送路３に送出されるデータ量の方が少ないことを示している。つまり、伝送路３の負荷が大きくなり、データがスムーズに流れていないことを示している。この場合、より低いレートの映像を送出しなければ、送信側バッファメモリ１２内のデータがオーバーフローし、正常な映像が送出できなくなるという問題を引き起こすこととなる。また、送信側バッファメモリ１２内のデータが少ない場合は、伝送路３の負荷が小さいことを示している。
従って、送信側バッファメモリ１２のデータ量に応じて送出すべき映像データのレートを制御すれば、伝送路３の負荷に応じた映像データを送出することが可能となる。
このため、データ量検出部１９は、送信側バッファメモリ１２のデータ量を検出し、図８に示す関係にしたがって、しかるべきレートとなるような制御信号を出力して映像データレート制御部１６に与えるものである。
【００３１】
実施の形態３は以上のように構成されているため、図８に示した関係からデータ量に対応したレートに相当する制御信号をデータ量検出部１９が出力し、その制御信号に応じて映像データレート制御部１６がレートを制御することにより、伝送路３の負荷に応じたレートの制御が可能となる。
【００３２】
なお、上述した各実施の形態においては、映像データを扱うものとして説明したが、この発明は映像データのみに限られるものではなく、音声データまたは音声を伴う映像データにおいても同様な効果を期待することができる。
【００３３】
【発明の効果】
この発明に係る映像または音声伝送システムは、デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、送信装置からの映像または音声データを伝送路を介して受信する受信装置とを備え、送信装置は、映像または音声データにおける伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、データレート制御部によりレート制御された映像または音声データを受信装置に送出するデータ送信部と、データレート制御部に送信レートによるレート制御を実行するための送信レート制御信号を与えるレート制御受信部とを有し、受信装置は、送信装置からの映像または音声データを伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積するバッファメモリと、バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部と、バッファメモリに蓄積されている映像または音声データの量をデータ再生中に検出するデータ量検出部と、データ量検出部の検出結果に応じて送信レート制御信号を送信装置のレート制御受信部に与えるレート制御要求部とを有し、データレート制御部は、送信レート制御信号に応じて、映像または音声データの直交変換を実行し、直交変換における周波数帯域を変化させるものであるため、１つの映像または音声用にレートの違う複数個の映像または音声データを用意することなく、ネットワークの負荷に応じた映像または音声データの送出が可能となり、映像または音声が途切れることのない伝送システムを構築することができる。
【００３４】
この発明に係る映像または音声伝送システムは、また、デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、送信装置からの映像または音声データを伝送路を介して受信する受信装置とを備え、送信装置は、映像または音声データにおける伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、データレート制御部によりレート制御された映像または音声データを受信装置に送出するデータ送信部と、定期的に応答要求信号を発し、受信装置からの応答受信完了信号を受信するまでの応答時間を計測する応答計測部と、応答計測部からの応答要求信号を伝送路を介して受信装置に送信すると共に、受信装置からの応答受信完了信号を受信して応答計測部に伝達する送信側応答送受信部とを有し、受信装置は、送信装置からの映像または音声データを伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積するバッファメモリと、バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部と、送信装置からの応答要求信号を受信して送信装置側に応答受信完了信号を送信する受信側応答送受信部とを有し、データレート制御部は、応答時間に応じて、映像または音声データの直交変換を実行し、直交変換における周波数帯域を変化させるため、さらに、映像または音声受信装置の構成を簡略化することができる。一般的に１台の送信装置に対して複数台の受信装置を接続する場合が多いが、このとき、受信装置の構成を簡略化できれば、システム全体を安価に提供することができる。
【００３５】
この発明に係る映像または音声伝送システムは、また、デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、送信装置からの映像または音声データを伝送路を介して受信する受信装置とを備え、送信装置は、映像または音声データにおける伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、データレート制御部によりレート制御された映像または音声データを一時的に蓄積する送信側バッファメモリと、送信側バッファメモリに蓄積された送信データを読み出して受信装置に送出するデータ送信部と、送信側バッファメモリに蓄積されたデータ量を検出し、その量に応じた送信レートによるレート制御を実行するための送信レート制御信号を発生し、データレート制御部に与えるデータ量検出部とを有し、受信装置は、送信装置からの映像または音声データを伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積する受信側バッファメモリと、受信側バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部とを有し、データレート制御部は、送信レート制御信号に応じて、映像または音声データの直交変換を実行し、直交変換における周波数帯域を変化させるものであるため、さらに、送信装置と受信装置の間の通信量を削減することができ、ネットワーク全体の負荷を軽減することができる。
【図面の簡単な説明】
【図１】 この発明の実施の形態１の構成を示すブロック図である。
【図２】 実施の形態１におけるバッファメモリのデータ量と映像データのレートとの関係を示す図である。
【図３】 実施の形態１におけるＤＣＴの変換係数を示す図である。
【図４】 この発明の実施の形態２の構成を示すブロック図である。
【図５】 実施の形態２における応答時間を計測する状況を示す説明図である。
【図６】 実施の形態２における応答時間と映像データのレートとの関係を示す図である。
【図７】 この発明の実施の形態３の構成を示すブロック図である。
【図８】 実施の形態３における送信側バッファメモリのデータ量と映像データのレートとの関係を示す図である。
【図９】 従来の映像伝送システムの構成を示すブロック図である。
【図１０】従来の映像伝送システムにおけるバッファメモリのデータ量とレート切換の基準値との関係を示す図である。
【符号の説明】
１ 映像送信装置、 ２ 映像受信装置、 （１）Ａ 映像データ、
３ 伝送路、 １３ 映像データ送信部、 １５ レート制御受信部
１６ 映像データレート制御部、 １７ 応答計測部、
１８、２７ 応答送受信部、 ２１ 映像データ受信部、
２２ バッファメモリ、 ２３ 映像表示部、
１９、２５ データ量検出部、 ２６ レート制御要求部。
【発明の属する技術分野】
この発明は、映像または音声伝送システム、特に伝送路のトラフィックの変化による映像または音声データの伝送速度の低下に対応する映像または音声伝送システムに関するものである。
【０００２】
【従来の技術】
従来、データの伝送速度が保証されていないインターネットなどの回線を介して動画の転送を行う場合、伝送路上のトラフィックの変化によって使用可能な伝送帯域が変化し、その映像データが本来必要とする転送レートよりも下回ることにより、映像を配信するサーバーから、受信・表示出力するクライアントへ十分なデータ量が届かず、その結果映像が途切れることがあった。
【０００３】
このような問題に対して、十分なデータ量が届かない場合でも映像を途切れないようにした改良案が、特開平１１−１８７３６７号公報に映像伝送システムとして開示されている。
図９は、上記公報に示された従来の改良案の映像伝送システムの構成を示すブロック図である。この図において１は映像データの送信を行う映像送信装置、２は映像データの受信を行う映像受信装置、３は映像送信装置１と映像受信装置２とを結び映像データを伝送する伝送路である。
なお、映像送信装置１と映像受信装置２はそれぞれ次のように構成されている。
【０００４】
即ち、映像送信装置１は、同一映像毎に異なる再生レートを持つ３個の映像データ（１）（２）（３）と、３個の映像データ（１）（２）（３）のいずれかを選択する形で切換える映像データレート切換部１１と、映像データレート切換部１１から出力された映像データを伝送路３を介して映像受信装置２に送信する映像データ送信部１３と、映像受信装置２からのレート切換要求を受信して映像データレート切換部１１に切換要求信号を伝達するレート切換受信部１４とから構成されている。
【０００５】
また、映像受信装置２は、映像送信装置１から映像データを受信する映像データ受信部２１と、映像データ受信部２１で受信した映像データを一時的に蓄積するバッファメモリ２２と、バッファメモリ２２に蓄積された映像データを順次取得して映像を再生する映像表示部２３と、バッファメモリ２２のデータ量を検出するデータ量検出部２５と、データ量検出部２５によって検出されたバッファメモリ２２のデータ量に応じて映像送信装置１に対して映像データのレートを切換えるよう要求するレート切換要求部２４とを備えている。
【０００６】
図１０は、バッファメモリ２２内のデータ量と基準値との関係を示す図である。
【０００７】
次に、図９に示す従来の改良案の動作について、図１０を用いて詳細に説明する。
映像送信装置１の映像データ送信部１３から送信される映像データは、複数の映像データ（１）〜（３）のうちの任意の１つを映像データレート切換部１１で選択したもので、伝送路３を介して映像受信装置２の映像データ受信部２１に送信される。映像データ受信部２１によって受信された映像データはバッファメモリ２２に一時的に格納される。
【０００８】
映像表示部２３は、バッファメモリ２２から映像データを取り出し、映像を再生する。このバッファメモリ２２に格納されるデータ量は、伝送路３上のトラフィックの変化に伴う映像データの伝送速度の変化によって増減する。即ち、映像データの送信レートが必要とする転送レートより下回ってくると、バッファメモリ２２に格納されるデータ量も低下してくる。
バッファメモリ２２のデータ量には、図１０に示すように、第１の基準値（ａ）と第２の基準値（ｂ）とが設定されており、第１の基準値（ａ）＜第２の基準値（ｂ）とされている。なお、第１の基準値（ａ）および第２の基準値（ｂ）は、同一番組に含まれる映像の集合体毎に設けられている。
【０００９】
データ量検出部２５は、映像データの再生中にバッファメモリ２２に格納されているデータ量が第１の基準値（ａ）を下回った場合、または第２の基準値（ｂ）を上回った場合にレート切換要求部２４にレート切換え要求を出すように指示する。
レート切換要求部２４は、バッファメモリ２２に格納されているデータ量が第１の基準値（ａ）を下回った場合には、現在送信されている映像データよりも低い映像レートの映像データに切換えるよう、映像送信装置１のレート切換受信部１４に要求する。また、バッファメモリ２２に格納されているデータ量が第２の基準値（ｂ）を上回った場合には、現在送信されている映像データよりも高い映像レートの映像データに切換えるよう、映像送信装置１のレート切換受信部１４に要求するようにされている。
また、映像送信装置１のレート切換受信部１４は、レート切換要求部２４からのレート切換要求を受信した時、これを映像データレート切換部１１に伝達する。
【００１０】
ここで、３個の映像データ（１）（２）（３）は、映像データ（１）→映像データ（２）→映像データ（３）の順にビットレートが高くなっていく３種類の映像レートを持つものとし、現在送信されている映像データは映像データ（２）とする。
この場合、映像データ（１）→映像データ（２）→映像データ（３）の順にビットレートが高くなっていくため、映像データ（１）は低ビットレートで送信速度は速くなるが画質はその分悪くなり、映像データ（２）、（３）となるほど高ビットレートで送信速度は遅くなるが画質はその分良くなる。
【００１１】
映像データレート切換部１１は、レート切換受信部１４から現在送信されている映像データよりも低い映像レートの映像データに切換えるように要求された場合は、映像データ（２）から映像データ（１）に切換え、現在送信されている映像データよりも高い映像レートの映像データに切換えるように要求された場合は、映像データ（２）から映像データ（３）に切換えることになる。
この後、映像受信装置２のデータ量検出部２５は、バッファメモリ２２に格納されているデータ量を一定時間ごとに検出し、以上説明した動作を繰返し行う。
【００１２】
【発明が解決しようとする課題】
従来の映像伝送システムは以上のように構成され、１つの映像を送出するのに映像レートの異なる映像データを複数個用意しなければならなかったため、映像送信装置に、複数の映像データを蓄積できるだけの容量を持った蓄積装置を備えなければならず、さらに、レートの異なる映像データを複数個作成するために複数回映像をエンコードしなければならないという問題点があった。
換言すると、大きな容量を持った蓄積装置が必要な割に送出できる映像の数が少なく、しかもエンコードの手間が増大するという問題点があった。
【００１３】
この発明は上記のような問題点を解消するためになされたもので、送信装置において、１つの映像または音声用に１つの映像または音声データを用意するだけでよく、使用可能な伝送帯域が変化しても、映像または音声が途切れない映像または音声伝送システムを提供することを目的とする。
【００１４】
【課題を解決するための手段】
この発明に係る映像または音声伝送システムは、デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、送信装置からの映像または音声データを伝送路を介して受信する受信装置とを備え、送信装置は、映像または音声データにおける伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、データレート制御部によりレート制御された映像または音声データを受信装置に送出するデータ送信部と、データレート制御部に送信レートによるレート制御を実行するための送信レート制御信号を与えるレート制御受信部とを有し、受信装置は、送信装置からの映像または音声データを伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積するバッファメモリと、バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部と、バッファメモリに蓄積されている映像または音声データの量をデータ再生中に検出するデータ量検出部と、データ量検出部の検出結果に応じて送信レート制御信号を送信装置のレート制御受信部に与えるレート制御要求部とを有し、データレート制御部は、送信レート制御信号に応じて、映像または音声データの直交変換を実行し、直交変換における周波数帯域を変化させるのである。
【００１５】
この発明に係る映像または音声伝送システムは、また、デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、送信装置からの映像または音声データを伝送路を介して受信する受信装置とを備え、送信装置は、映像または音声データにおける伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、データレート制御部によりレート制御された映像または音声データを受信装置に送出するデータ送信部と、定期的に応答要求信号を発し、受信装置からの応答受信完了信号を受信するまでの応答時間を計測する応答計測部と、応答計測部からの応答要求信号を伝送路を介して受信装置に送信すると共に、受信装置からの応答受信完了信号を受信して応答計測部に伝達する送信側応答送受信部とを有し、受信装置は、送信装置からの映像または音声データを伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積するバッファメモリと、バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部と、送信装置からの応答要求信号を受信して送信装置側に応答受信完了信号を送信する受信側応答送受信部とを有し、データレート制御部は、応答時間に応じて、映像または音声データの直交変換を実行し、直交変換における周波数帯域を変化させるものである。
【００１６】
この発明に係る映像または音声伝送システムは、また、デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、送信装置からの映像または音声データを伝送路を介して受信する受信装置とを備え、送信装置は、映像または音声データにおける伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、データレート制御部によりレート制御された映像または音声データを一時的に蓄積する送信側バッファメモリと、送信側バッファメモリに蓄積された送信データを読み出して受信装置に送出するデータ送信部と、送信側バッファメモリに蓄積されたデータ量を検出し、その量に応じた送信レートによるレート制御を実行するための送信レート制御信号を発生し、データレート制御部に与えるデータ量検出部とを有し、受信装置は、送信装置からの映像または音声データを伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積する受信側バッファメモリと、受信側バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部とを有し、データレート制御部は、送信レート制御信号に応じて、映像または音声データの直交変換を実行し、直交変換における周波数帯域を変化させるものである。
【００１８】
【発明の実施の形態】
実施の形態１．
以下、この発明の実施の形態１を図にもとづいて説明する。
図１は、実施の形態１の構成を示すブロック図である。この図において、図９と同一または相当部分には同一符号を付して説明を省略する。
図１において、２６は映像受信装置２に設けられたレート制御要求部で、データ量検出部２５が検出したバッファメモリ２２のデータ量に応じてレート制御を実行するための制御信号を出力し、伝送路３を介して映像送信装置１に送出する。１５は映像送信装置１に設けられたレート制御受信部で、レート制御要求部２６からの制御信号を受信して後述する映像データレート制御部１６に伝達し、映像データのレート制御を行なう。
【００１９】
（１）Ａは映像送信装置１に設けられた映像データで、１つの映像用に１つの映像データだけが用意されている。
１６は映像データ（１）Ａのレートを制御する映像データレート制御部で、レート制御受信部１５からの制御信号にもとづいて映像データのレートを制御し、レートを制御した映像データを映像データ送信部１３に送出する。
【００２０】
さらに詳しく説明する。バッファメモリ２２におけるデータ量と送出されるべき映像データのレートとは、図２に示すような関係にある。つまり、データ量が大きくなるということは、バッファメモリ２２から読み出して出力されるデータよりも伝送路３を介してバッファメモリ２２に書きこまれるデータ量が大きくなっていることを示している。これは、伝送路３の負荷が小さくなっていることに起因すると考えられるので、より高いレートの映像を送出することが可能になる。逆に、バッファメモリ２２のデータ量が小さくなるということは、バッファメモリ２２から読み出して出力されるデータよりも伝送路３を介してバッファメモリ２２に書きこまれるデータ量が小さくなっていることを示している。
これは、伝送路３の負荷が大きくなっていることに起因すると考えられるので、より低いレートの映像を送出しなければ、バッファメモリ２２内のデータがなくなり、映像が途切れるなどの問題を引き起こすこととなる。
従って、レート制御要求部２６は、図２の関係にしたがって、しかるべきレートとなるような制御信号を出力し、レート制御受信部１５を経て映像データレート制御部１６に与え、映像データのレート制御を行なうものである。
【００２１】
一般的に映像信号を圧縮して映像データを生成する場合、ＤＣＴ（DiscreteCosine Transform）符号化方式に代表される直交変換が用いられる。例えば、８×８画素の映像信号に対してＤＣＴを行うと、図３に示すような６４個の変換係数が得られる。これらの変換係数は、もとの映像信号の周波数分布を２次元的に表現しているとみなすことができる。つまり、Ｃ１１は、映像信号の直流成分に相当し、Ｃ１１から右に行くほど、また、下に行くほど、高い周波数に対応しており、Ｃ８８が最も高い周波数に対応した変換係数となる。また、映像の，性質として、低周波成分に大きな値が集中しており、高周波成分をカット、つまり帯域制限を行うことによって情報圧縮を行うことができる。このとき、高周波成分まで伝送した場合、レートは高くなり、高周波成分をカットして帯域制限を行った場合、レートは低くなる。
【００２２】
このため、レート制御要求部２６のレート制御信号に応じて、どこまでの高周波成分を情報として送出するかを映像データレート制御部１６において制御することにより、映像データのレートの制御が可能となる。
即ち、図２に示した関係からバッファメモリ２２のデータ量に対応したレートに相当する制御信号をレート制御要求部２６が出力し、その制御信号に応じてどこまでの高周波成分を情報として送出するかを映像データレート制御部１６によって制御することにより、 伝送路３の負荷に応じたレートの制御が可能となる。
【００２３】
実施の形態２．
次に、この発明の実施の形態２を図にもとづいて説明する。
図４は、実施の形態２の構成を示すブロック図である。この図において、図１と同一または相当部分には同一符号を付して説明を省略する。
図１と異なる点は、映像送信装置１と映像受信装置２との間の応答時間を計測し、応答時間に応じて映像データのレートを制御するようにした点である。
即ち図４において、１８及び２７は映像送信装置１と映像受信装置２との間の伝送路３の応答時間を測定するデータを送受信するために映像送信装置１と映像受信装置２のそれぞれに設けられた応答送受信部、１７はその応答時間を計測すると共に、計測結果に応じて映像データレート制御部１６にレート制御用の信号を与える応答計測部である。
【００２４】
次に、実施の形態２の動作、特に応答時間の計測について，図５および図６を用いて詳細に説明する。
応答計測部１７は、送信側の応答送受信部１８に対して定期的に応答要求を発信し、 送信側の応答送受信部１８は伝送路３を介して受信側の応答送受信部２７に応答要求を送信する。
図５は、応答要求を発信した後、応答受信完了の信号を受信するまでの応答時間を計測する状況を示す説明図である。
送信側の応答送受信部１８から応答要求を受信した受信側の応答送受信部２７では、応答要求を受信したことを応答受信完了として送信側の応答送受信部１８に返す。送信側の応答送受信部１８は応答受信完了を応答計測部１７に通知する。応答計測部１７では、応答要求の発信から応答受信完了の受信までの時間を計測して応答時間とする。
【００２５】
上記の応答時間が長い場合は、伝送路３の負荷が大きく、短い場合は、伝送路３の負荷が小さいことを示している。従って、応答時間に応じて映像送信装置１から送出すべき映像データのレートを制御すれば、伝送路３の負荷に応じた映像データを送出することが可能となる。
【００２６】
一方、応答時間と送出されるべき映像データのレートとは、 図６に示すような関係にある。応答時間が長くなるということは、伝送路３の負荷が大きくなっていることに起因すると考えられるので、この場合、より低いレートの映像を送出しなければ、バッファメモリ２２内のデータがなくなり、映像が途切れるなどの問題を引き起こすこととなる。逆に、応答時間が短くなるということは、伝送路３の負荷が小さくなっていることに起因すると考えられるので、より高いレートの映像を送出することが可能である。
従って、応答計測部１７は、計測した応答時間から、図６に示す関係にもとづいて、しかるべきレートとなるような制御信号を映像データレート制御部１６に与えるものである。
【００２７】
実施の形態２は以上のように構成されているため、図６に示す関係から応答時間に対応したレートに相当する制御信号を応答計測部１７が出力し、その制御信号に応じて映像データレート制御部１６が映像レートを制御することにより、伝送路３の負荷に応じたレートの制御が可能となる。
【００２８】
実施の形態３．
次に、この発明の実施の形態３を図にもとづいて説明する。図７は、実施の形態３の構成を示すブロック図である。図７において、図１と同一または相当部分には同一符号を付して説明を省略する。
図１と異なる点は、映像受信装置２からデータ量検出部２５とレート制御要求部２６とを除去すると共に、映像送信装置１に送信側バッファメモリと、そのデータ量を検出し、データ量に応じたレート制御信号を出力して映像データレート制御部に与えるようにした点である。即ち図７において、１２は映像送信装置１に設けられ、映像データを一時的に蓄積する送信側バッファメモリで、ここに蓄積された送信データを取り出して映像データ送信部１３から伝送路３を介して映像受信装置２に送信するようにされている。１９は送信側バッファメモリ１２に蓄積された映像データ量を検出し、そのデータ量に応じたレート制御信号を出力して映像データレート制御部１６に与え、レートを制御するデータ量検出部である。
【００２９】
次に、実施の形態３の動作について図８を用いて詳細に説明する。
図７に示すように、映像送信装置１の映像データは、映像データレート制御部１６を経て送信側バッファメモリ１２に貯えられた後、映像データ送信部１３から伝送路３を介して映像受信装置２の映像データ受信部２１に送信される。
映像データ受信部２１は、受信した映像データを受信側バッファメモリ２２に一時的に格納し、映像表示部２３は、受信側バッファメモリ２２から映像データを取り出して映像を再生する。
【００３０】
さらに詳しく説明する。送信側バッファメモリ１２におけるデータ量と送出されるべき映像データのレートとは、図８に示すような関係にある。
図８において、データ量が大きくなるということは、蓄積されている映像データが送信側バッファメモリ１２に書きこまれるデータ量よりも、送信側バッファメモリ１２から読み出されて伝送路３に送出されるデータ量の方が少ないことを示している。つまり、伝送路３の負荷が大きくなり、データがスムーズに流れていないことを示している。この場合、より低いレートの映像を送出しなければ、送信側バッファメモリ１２内のデータがオーバーフローし、正常な映像が送出できなくなるという問題を引き起こすこととなる。また、送信側バッファメモリ１２内のデータが少ない場合は、伝送路３の負荷が小さいことを示している。
従って、送信側バッファメモリ１２のデータ量に応じて送出すべき映像データのレートを制御すれば、伝送路３の負荷に応じた映像データを送出することが可能となる。
このため、データ量検出部１９は、送信側バッファメモリ１２のデータ量を検出し、図８に示す関係にしたがって、しかるべきレートとなるような制御信号を出力して映像データレート制御部１６に与えるものである。
【００３１】
実施の形態３は以上のように構成されているため、図８に示した関係からデータ量に対応したレートに相当する制御信号をデータ量検出部１９が出力し、その制御信号に応じて映像データレート制御部１６がレートを制御することにより、伝送路３の負荷に応じたレートの制御が可能となる。
【００３２】
なお、上述した各実施の形態においては、映像データを扱うものとして説明したが、この発明は映像データのみに限られるものではなく、音声データまたは音声を伴う映像データにおいても同様な効果を期待することができる。
【００３３】
【発明の効果】
この発明に係る映像または音声伝送システムは、デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、送信装置からの映像または音声データを伝送路を介して受信する受信装置とを備え、送信装置は、映像または音声データにおける伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、データレート制御部によりレート制御された映像または音声データを受信装置に送出するデータ送信部と、データレート制御部に送信レートによるレート制御を実行するための送信レート制御信号を与えるレート制御受信部とを有し、受信装置は、送信装置からの映像または音声データを伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積するバッファメモリと、バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部と、バッファメモリに蓄積されている映像または音声データの量をデータ再生中に検出するデータ量検出部と、データ量検出部の検出結果に応じて送信レート制御信号を送信装置のレート制御受信部に与えるレート制御要求部とを有し、データレート制御部は、送信レート制御信号に応じて、映像または音声データの直交変換を実行し、直交変換における周波数帯域を変化させるものであるため、１つの映像または音声用にレートの違う複数個の映像または音声データを用意することなく、ネットワークの負荷に応じた映像または音声データの送出が可能となり、映像または音声が途切れることのない伝送システムを構築することができる。
【００３４】
この発明に係る映像または音声伝送システムは、また、デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、送信装置からの映像または音声データを伝送路を介して受信する受信装置とを備え、送信装置は、映像または音声データにおける伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、データレート制御部によりレート制御された映像または音声データを受信装置に送出するデータ送信部と、定期的に応答要求信号を発し、受信装置からの応答受信完了信号を受信するまでの応答時間を計測する応答計測部と、応答計測部からの応答要求信号を伝送路を介して受信装置に送信すると共に、受信装置からの応答受信完了信号を受信して応答計測部に伝達する送信側応答送受信部とを有し、受信装置は、送信装置からの映像または音声データを伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積するバッファメモリと、バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部と、送信装置からの応答要求信号を受信して送信装置側に応答受信完了信号を送信する受信側応答送受信部とを有し、データレート制御部は、応答時間に応じて、映像または音声データの直交変換を実行し、直交変換における周波数帯域を変化させるため、さらに、映像または音声受信装置の構成を簡略化することができる。一般的に１台の送信装置に対して複数台の受信装置を接続する場合が多いが、このとき、受信装置の構成を簡略化できれば、システム全体を安価に提供することができる。
【００３５】
この発明に係る映像または音声伝送システムは、また、デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、送信装置からの映像または音声データを伝送路を介して受信する受信装置とを備え、送信装置は、映像または音声データにおける伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、データレート制御部によりレート制御された映像または音声データを一時的に蓄積する送信側バッファメモリと、送信側バッファメモリに蓄積された送信データを読み出して受信装置に送出するデータ送信部と、送信側バッファメモリに蓄積されたデータ量を検出し、その量に応じた送信レートによるレート制御を実行するための送信レート制御信号を発生し、データレート制御部に与えるデータ量検出部とを有し、受信装置は、送信装置からの映像または音声データを伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積する受信側バッファメモリと、受信側バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部とを有し、データレート制御部は、送信レート制御信号に応じて、映像または音声データの直交変換を実行し、直交変換における周波数帯域を変化させるものであるため、さらに、送信装置と受信装置の間の通信量を削減することができ、ネットワーク全体の負荷を軽減することができる。
【図面の簡単な説明】
【図１】 この発明の実施の形態１の構成を示すブロック図である。
【図２】 実施の形態１におけるバッファメモリのデータ量と映像データのレートとの関係を示す図である。
【図３】 実施の形態１におけるＤＣＴの変換係数を示す図である。
【図４】 この発明の実施の形態２の構成を示すブロック図である。
【図５】 実施の形態２における応答時間を計測する状況を示す説明図である。
【図６】 実施の形態２における応答時間と映像データのレートとの関係を示す図である。
【図７】 この発明の実施の形態３の構成を示すブロック図である。
【図８】 実施の形態３における送信側バッファメモリのデータ量と映像データのレートとの関係を示す図である。
【図９】 従来の映像伝送システムの構成を示すブロック図である。
【図１０】従来の映像伝送システムにおけるバッファメモリのデータ量とレート切換の基準値との関係を示す図である。
【符号の説明】
１ 映像送信装置、 ２ 映像受信装置、 （１）Ａ 映像データ、
３ 伝送路、 １３ 映像データ送信部、 １５ レート制御受信部
１６ 映像データレート制御部、 １７ 応答計測部、
１８、２７ 応答送受信部、 ２１ 映像データ受信部、
２２ バッファメモリ、 ２３ 映像表示部、
１９、２５ データ量検出部、 ２６ レート制御要求部。
Claims (6)
- デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、上記送信装置からの上記映像または音声データを伝送路を介して受信する受信装置とを備えた映像または音声伝送システムであって、
上記送信装置は、
上記映像または音声データにおける上記伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、上記データレート制御部によりレート制御された映像または音声データを上記受信装置に送出するデータ送信部と、上記データレート制御部に上記送信レートによるレート制御を実行するための送信レート制御信号を与えるレート制御受信部とを有し、
上記受信装置は、
上記送信装置からの映像または音声データを上記伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積するバッファメモリと、上記バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部と、上記バッファメモリに蓄積されている映像または音声データの量をデータ再生中に検出するデータ量検出部と、上記データ量検出部の検出結果に応じて上記送信レート制御信号を上記送信装置の上記レート制御受信部に与えるレート制御要求部とを有し、
上記データレート制御部は、上記送信レート制御信号に応じて、上記映像または音声データの直交変換を実行し、上記直交変換における周波数帯域を変化させることを特徴とする映像または音声伝送システム。 - デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、上記送信装置からの上記映像または音声データを伝送路を介して受信する受信装置とを備えた映像または音声伝送システムであって、
上記送信装置は、
上記映像または音声データにおける上記伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、上記データレート制御部によりレート制御された映像または音声データを上記受信装置に送出するデータ送信部と、定期的に応答要求信号
を発し、上記受信装置からの応答受信完了信号を受信するまでの応答時間を計測する応答計測部と、上記応答計測部からの上記応答要求信号を上記伝送路を介して上記受信装置に送信すると共に、上記受信装置からの上記応答受信完了信号を受信して上記応答計測部に伝達する送信側応答送受信部とを有し、
上記受信装置は、
上記送信装置からの映像または音声データを上記伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積するバッファメモリと、上記バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部と、上記送信装置からの上記応答要求信号を受信して上記送信装置側に上記応答受信完了信号を送信する受信側応答送受信部とを有し、
上記データレート制御部は、上記応答時間に応じて、上記映像または音声データの直交変換を実行し、上記直交変換における周波数帯域を変化させることを特徴とする映像または音声伝送システム。 - デジタル化され蓄積装置に蓄積された映像または音声データを送信する送信装置と、上記送信装置からの上記映像または音声データを伝送路を介して受信する受信装置とを備えた映像または音声伝送システムであって、
上記送信装置は、
上記映像または音声データにおける上記伝送路へ送信する送信レートを送信中に制御し得るようにされたデータレート制御部と、上記データレート制御部によりレート制御された映像または音声データを一時的に蓄積する送信側バッファメモリと、上記送信側バッファメモリに蓄積された送信データを読み出して上記受信装置に送出するデータ送信部と、上記送信側バッファメモリに蓄積されたデータ量を検出し、その量に応じた上記送信レートによるレート制御を実行するための送信レート制御信号を発生し、上記データレート制御部に与えるデータ量検出部とを有し、
上記受信装置は、
上記送信装置からの映像または音声データを上記伝送路を介して受信する映像または音声データ受信部と、受信された映像または音声データを一時的に蓄積する受信側バッファメモリと、上記受信側バッファメモリに蓄積された映像または音声データを読み出して再生する映像表示部または音声再生部とを有し、
上記データレート制御部は、上記送信レート制御信号に応じて、上記映像または音声データの直交変換を実行し、上記直交変換における周波数帯域を変化させることを特徴とする映像または音声伝送システム。 - 上記レート制御要求部は、上記バッファメモリに蓄積された映像または音声データのデータ量及び上記送信レートの関係に基づいて、上記データ量に対応した上記映像または音声データの上記送信レートの所定値を指定する上記送信レート制御信号を生成することを特徴とする請求項１記載の映像または音声伝送システム。
- 上記応答計測部は、上記応答時間及び上記送信レートの関係に基づいて、上記応答時間に対応した上記映像または音声データの上記送信レートの所定値を指定する送信レート制御信号を生成し、上記データレート制御部に上記送信レート制御信号を与えることを特徴とする請求項２記載の映像または音声伝送システム。
- 上記データ量検出部は、上記送信側バッファメモリに蓄積された映像または音声データのデータ量及び上記送信レートの関係に基づいて、上記データ量に対応した上記映像または音声データの上記送信レートの所定値を指定する上記送信レート制御信号を生成することを特徴とする請求項３記載の映像または音声伝送システム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001120785A JP4705265B2 (ja) | 2001-04-19 | 2001-04-19 | 映像または音声伝送システム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001120785A JP4705265B2 (ja) | 2001-04-19 | 2001-04-19 | 映像または音声伝送システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002319991A JP2002319991A (ja) | 2002-10-31 |
| JP4705265B2 true JP4705265B2 (ja) | 2011-06-22 |
Family
ID=18970767
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001120785A Expired - Fee Related JP4705265B2 (ja) | 2001-04-19 | 2001-04-19 | 映像または音声伝送システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4705265B2 (ja) |
Families Citing this family (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7571246B2 (en) * | 2004-07-29 | 2009-08-04 | Microsoft Corporation | Media transrating over a bandwidth-limited network |
| KR100648654B1 (ko) | 2004-10-04 | 2006-11-23 | 주식회사 케이티프리텔 | 클라이언트를 고려하지 않는 데이터 전송률 제어 방법 및그 장치 |
| US8074248B2 (en) | 2005-07-26 | 2011-12-06 | Activevideo Networks, Inc. | System and method for providing video content associated with a source image to a television in a communication network |
| US9826197B2 (en) | 2007-01-12 | 2017-11-21 | Activevideo Networks, Inc. | Providing television broadcasts over a managed network and interactive content over an unmanaged network to a client device |
| US9042454B2 (en) | 2007-01-12 | 2015-05-26 | Activevideo Networks, Inc. | Interactive encoded content system including object models for viewing on a remote device |
| JP4701265B2 (ja) * | 2008-04-18 | 2011-06-15 | 株式会社エヌ・ティ・ティ・ドコモ | 送信端末及びデータ送信方法 |
| JP5538843B2 (ja) * | 2009-12-03 | 2014-07-02 | 三菱電機株式会社 | コンテンツ再生装置及び方法 |
| AU2011315950B2 (en) | 2010-10-14 | 2015-09-03 | Activevideo Networks, Inc. | Streaming digital video between video devices using a cable television system |
| WO2012138660A2 (en) | 2011-04-07 | 2012-10-11 | Activevideo Networks, Inc. | Reduction of latency in video distribution networks using adaptive bit rates |
| US10409445B2 (en) | 2012-01-09 | 2019-09-10 | Activevideo Networks, Inc. | Rendering of an interactive lean-backward user interface on a television |
| US9800945B2 (en) | 2012-04-03 | 2017-10-24 | Activevideo Networks, Inc. | Class-based intelligent multiplexing over unmanaged networks |
| US9123084B2 (en) | 2012-04-12 | 2015-09-01 | Activevideo Networks, Inc. | Graphical application integration with MPEG objects |
| WO2014145921A1 (en) | 2013-03-15 | 2014-09-18 | Activevideo Networks, Inc. | A multiple-mode system and method for providing user selectable video content |
| US9219922B2 (en) | 2013-06-06 | 2015-12-22 | Activevideo Networks, Inc. | System and method for exploiting scene graph information in construction of an encoded video sequence |
| EP3005712A1 (en) | 2013-06-06 | 2016-04-13 | ActiveVideo Networks, Inc. | Overlay rendering of user interface onto source video |
| US9294785B2 (en) | 2013-06-06 | 2016-03-22 | Activevideo Networks, Inc. | System and method for exploiting scene graph information in construction of an encoded video sequence |
| US9788029B2 (en) | 2014-04-25 | 2017-10-10 | Activevideo Networks, Inc. | Intelligent multiplexing using class-based, multi-dimensioned decision logic for managed networks |
| CN107613337B (zh) * | 2017-09-19 | 2019-12-13 | 盐城云睿网络科技有限公司 | 分配视频缓冲内存空间大小的方法、移动终端及装置 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07303117A (ja) * | 1994-05-06 | 1995-11-14 | Nippon Telegr & Teleph Corp <Ntt> | 輻輳防止方法およびパケット通信システム |
| JPH0818622A (ja) * | 1994-06-30 | 1996-01-19 | Toshiba Corp | 情報通信端末装置 |
| JPH11187367A (ja) * | 1997-12-19 | 1999-07-09 | Nec Corp | 映像送信装置，映像受信装置及びこれらを用いた映像伝送システム |
| JPH11308373A (ja) * | 1998-04-23 | 1999-11-05 | Sony Corp | 情報通信装置 |
-
2001
- 2001-04-19 JP JP2001120785A patent/JP4705265B2/ja not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07303117A (ja) * | 1994-05-06 | 1995-11-14 | Nippon Telegr & Teleph Corp <Ntt> | 輻輳防止方法およびパケット通信システム |
| JPH0818622A (ja) * | 1994-06-30 | 1996-01-19 | Toshiba Corp | 情報通信端末装置 |
| JPH11187367A (ja) * | 1997-12-19 | 1999-07-09 | Nec Corp | 映像送信装置，映像受信装置及びこれらを用いた映像伝送システム |
| JPH11308373A (ja) * | 1998-04-23 | 1999-11-05 | Sony Corp | 情報通信装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2002319991A (ja) | 2002-10-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4705265B2 (ja) | 映像または音声伝送システム | |
| US7051110B2 (en) | Data reception/playback method and apparatus and data transmission method and apparatus for providing playback control functions | |
| JP4944484B2 (ja) | 再生装置、再生方法及びプログラム | |
| US8139487B2 (en) | Strategies for selecting a format for data transmission based on measured bandwidth | |
| KR100832537B1 (ko) | 네트워크 대역폭 상태에 따라 전송량을 가변하는멀티미디어 데이터 스트리밍 서버 및 방법 | |
| US8185792B2 (en) | Data-transmission device data-reception device and data-transmission-and-reception system | |
| CN101499918A (zh) | 一种自适应流媒体播放方法、装置、系统及移动终端 | |
| JP2007057767A (ja) | コンテンツ受信装置およびコンテンツ受信方法 | |
| JPH11187367A (ja) | 映像送信装置，映像受信装置及びこれらを用いた映像伝送システム | |
| JP2020507235A (ja) | データバッファリング方法、ネットワーク機器、及び記憶媒体 | |
| JP3600567B2 (ja) | 映像配信装置 | |
| JPH10336626A (ja) | 映像データの転送方法および転送装置 | |
| JP2003209807A (ja) | 動画再生方法及び装置 | |
| JP3967443B2 (ja) | 画像データ送受信システムおよびその送信側装置およびその受信側装置並びにそのプログラムを記憶した記憶媒体 | |
| JP4430596B2 (ja) | 画像データ送受信システムの受信側装置及びそのプログラムを記憶した記憶媒体 | |
| KR20140105297A (ko) | 스트리밍 서비스를 제공하기 위한 동적 버퍼링 방법 및 그 장치 | |
| JP2004289295A (ja) | データ処理システム、データ処理装置及びデータ処理方法 | |
| CN103460697A (zh) | 显示控制装置、显示控制方法和程序 | |
| JP3812272B2 (ja) | データサーバシステム | |
| JP3512716B2 (ja) | 連続ａ／ｖデータの転送システム及び転送方法 | |
| CA2528331A1 (en) | Medium signal reception device, transmission device, and transmission/reception system | |
| RU2530344C2 (ru) | Способ и устройство для выбора видеокодека, подлежащего использованию между станциями | |
| US20050262123A1 (en) | Data communication terminal unit | |
| JP2007150407A (ja) | データ送信装置 | |
| JP5505591B2 (ja) | 動画像配信システム、動画像配信装置および動画像配信方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080328 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100630 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100713 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100909 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110308 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110311 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 4705265 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |