JP3259691B2 - マルチキャストシステム、及び受信装置 - Google Patents
マルチキャストシステム、及び受信装置Info
- Publication number
- JP3259691B2 JP3259691B2 JP26217698A JP26217698A JP3259691B2 JP 3259691 B2 JP3259691 B2 JP 3259691B2 JP 26217698 A JP26217698 A JP 26217698A JP 26217698 A JP26217698 A JP 26217698A JP 3259691 B2 JP3259691 B2 JP 3259691B2
- Authority
- JP
- Japan
- Prior art keywords
- packet
- information
- data
- unit
- continuity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
Description
【０００１】
【発明の属する技術分野】本発明は、送信装置と受信装
置とが、ネットワークを介して通信するマルチキャスト
システムに関する。
置とが、ネットワークを介して通信するマルチキャスト
システムに関する。
【０００２】
【従来の技術】従来のマルチキャスト（一斉同報）シス
テムは、ネットワークの伝送路が保証されているシステ
ムでの導入が一般的とされており、データの欠落などが
起きないことを前提に構築されている。しかし実際には
データの欠落などがあり、これを防止する技術として、
例えば、特開平９−２６１２５５号公報に記載された技
術がある。
テムは、ネットワークの伝送路が保証されているシステ
ムでの導入が一般的とされており、データの欠落などが
起きないことを前提に構築されている。しかし実際には
データの欠落などがあり、これを防止する技術として、
例えば、特開平９−２６１２５５号公報に記載された技
術がある。
【０００３】特開平９−２６１２５５号公報に記載され
た技術は、確認応答パケットを生成するときに、マルチ
キャストグループの各メンバーから受信したデータパケ
ットに対する確認応答番号を１つの確認応答パケットと
してマルチキャストする。というものであり、仮にデー
タの欠落が発生した時には再送を行うことによりパケッ
ト損失を防止するものである。
た技術は、確認応答パケットを生成するときに、マルチ
キャストグループの各メンバーから受信したデータパケ
ットに対する確認応答番号を１つの確認応答パケットと
してマルチキャストする。というものであり、仮にデー
タの欠落が発生した時には再送を行うことによりパケッ
ト損失を防止するものである。
【０００４】また、従来、マルチキャストをリアルタイ
ム放送に適応させる要求が少なかった。
ム放送に適応させる要求が少なかった。
【０００５】
【発明が解決しようとする課題】しかしながら、上記技
術はデータの欠落が発生した時には再送が行われるの
で、リアルタイムを要求されるマルチキャストによるリ
アルタイム放送には不向きであった。そこで、本発明の
目的は、上記問題点を解決し、映像や音声などの圧縮さ
れたデジタルデータをネットワークを通じて複数の端末
に同時に配信（放送）をし、端末側でデコードおよび再
生を行うマルチキャストシステムにおける制御方法に関
するものであり、特にネットワークやクライアント側の
端末における過負荷などの要因により発生するデータ遅
延や欠落に対する乱れを保護する技術を提供することを
目的とする。
術はデータの欠落が発生した時には再送が行われるの
で、リアルタイムを要求されるマルチキャストによるリ
アルタイム放送には不向きであった。そこで、本発明の
目的は、上記問題点を解決し、映像や音声などの圧縮さ
れたデジタルデータをネットワークを通じて複数の端末
に同時に配信（放送）をし、端末側でデコードおよび再
生を行うマルチキャストシステムにおける制御方法に関
するものであり、特にネットワークやクライアント側の
端末における過負荷などの要因により発生するデータ遅
延や欠落に対する乱れを保護する技術を提供することを
目的とする。
【０００６】
【課題を解決する為の手段】上記目的を達成する本発明
は、送信装置と受信装置とがネットワークを介して通信
するマルチキャストシステムであって、前記送信装置
は、送信するデータをパケットに変換し、各パケットに
パケットの連続性情報を付加する手段を有し、前記受信
装置は、パケットに付加された前記連続性情報から、パ
ケットで構成される所定の情報の復元可能性を判断し、
復元不可能な場合には復元不能情報を出力する判断手段
と、前記復元不能情報を受信すると、受信したパケット
のうち前記所定の情報を復元する為に用いられるパケッ
トを破棄する手段と、パケット受信のオーバーフローを
検出し、オーバーフロー情報を出力する手段と、前記オ
ーバーフロー情報を受信すると、受信したパケットのう
ち、オーバーフローによって情報の復元が不可能な情報
を構成するパケットを削除する手段とを有することを特
徴とする。
は、送信装置と受信装置とがネットワークを介して通信
するマルチキャストシステムであって、前記送信装置
は、送信するデータをパケットに変換し、各パケットに
パケットの連続性情報を付加する手段を有し、前記受信
装置は、パケットに付加された前記連続性情報から、パ
ケットで構成される所定の情報の復元可能性を判断し、
復元不可能な場合には復元不能情報を出力する判断手段
と、前記復元不能情報を受信すると、受信したパケット
のうち前記所定の情報を復元する為に用いられるパケッ
トを破棄する手段と、パケット受信のオーバーフローを
検出し、オーバーフロー情報を出力する手段と、前記オ
ーバーフロー情報を受信すると、受信したパケットのう
ち、オーバーフローによって情報の復元が不可能な情報
を構成するパケットを削除する手段とを有することを特
徴とする。
【０００７】また、前記判断手段は、前記パケットの連
続性情報に基づいて、デコード手段でデコードする最小
単位のパケットが受信されていないと判断した場合に
は、復元不能情報を出力することを特徴とする。また、
前記判断手段は、復元する情報が映像であって、前記パ
ケットの連続性情報に基づいて、受信したパケットによ
り１フレームを構成できないと判断した場合には、復元
不能情報を出力することを特徴とする。
続性情報に基づいて、デコード手段でデコードする最小
単位のパケットが受信されていないと判断した場合に
は、復元不能情報を出力することを特徴とする。また、
前記判断手段は、復元する情報が映像であって、前記パ
ケットの連続性情報に基づいて、受信したパケットによ
り１フレームを構成できないと判断した場合には、復元
不能情報を出力することを特徴とする。
【０００８】また、前記判断手段は、復元する情報が音
声であって、前記パケットの連続性情報に基づいて、受
信したパケットにより１音を構成できないと判断した場
合には、復元不能情報を出力することを特徴とする。ま
た、前記送信装置は、映像と音声とをデジタルデータに
変換するエンコード手段を有することを特徴とする。
声であって、前記パケットの連続性情報に基づいて、受
信したパケットにより１音を構成できないと判断した場
合には、復元不能情報を出力することを特徴とする。ま
た、前記送信装置は、映像と音声とをデジタルデータに
変換するエンコード手段を有することを特徴とする。
【０００９】また、前記受信装置は、パケットに付加さ
れた連続性情報から、連続性が無いと判断した場合で、
かつ喪失したパケットが置換可能な場合には、置換する
置換手段を有することを特徴とする。また、前記置換手
段は、置換するパケットが映像の場合は、フレームの置
換により映像を復元することを特徴とする。
れた連続性情報から、連続性が無いと判断した場合で、
かつ喪失したパケットが置換可能な場合には、置換する
置換手段を有することを特徴とする。また、前記置換手
段は、置換するパケットが映像の場合は、フレームの置
換により映像を復元することを特徴とする。
【００１０】また、前記置換手段は、置換するパケット
が音声の場合は、置換直前のデータで置換することを特
徴とする。
が音声の場合は、置換直前のデータで置換することを特
徴とする。
【００１１】また、前記受信装置は、パケット受信のア
ンダーフローを検出しアンダーフロー情報を出力する手
段と、前記アンダーフロー情報を受信し、かつ受信した
パケットでは所定の情報の復元が不可能な場合には、前
記受信したパケットを削除する手段と、デコード手段を
一時停止させる停止手段と、を有することを特徴とす
る。
ンダーフローを検出しアンダーフロー情報を出力する手
段と、前記アンダーフロー情報を受信し、かつ受信した
パケットでは所定の情報の復元が不可能な場合には、前
記受信したパケットを削除する手段と、デコード手段を
一時停止させる停止手段と、を有することを特徴とす
る。
【００１２】また、前記停止手段は、前記デコード手段
がデコードする情報が映像の場合は、現時点で表示して
いるフレームを連続してデコードし、静止画として停止
する手段を有することを特徴とする。また、前記停止手
段は、前記デコード手段がデコードする情報が音声の場
合は、デコードを停止する手段を有することを特徴とす
る。
がデコードする情報が映像の場合は、現時点で表示して
いるフレームを連続してデコードし、静止画として停止
する手段を有することを特徴とする。また、前記停止手
段は、前記デコード手段がデコードする情報が音声の場
合は、デコードを停止する手段を有することを特徴とす
る。
【００１３】
【００１４】又は、上記目的を達成する本発明は、マル
チキャストシステムで、送信装置がデータをパケットに
変換して送信し、前記パケットを受信する受信装置であ
って、前記受信装置は、パケット受信のオーバーフロー
を検出しオーバーフロー情報を出力する手段と、前記オ
ーバーフロー情報を受信すると、受信したパケットのう
ち、オーバーフローによって情報の復元が不可能な情報
を構成するパケットを削除する手段と、パケット受信の
アンダーフローを検出しアンダーフロー情報を出力する
手段と、前記アンダーフロー情報を受信し、かつ受信し
たパケットでは所定の情報の復元が不可能な場合には、
前記受信したパケットを削除する手段と、デコード手段
を一時停止させる停止手段とを有することを特徴とす
る。
チキャストシステムで、送信装置がデータをパケットに
変換して送信し、前記パケットを受信する受信装置であ
って、前記受信装置は、パケット受信のオーバーフロー
を検出しオーバーフロー情報を出力する手段と、前記オ
ーバーフロー情報を受信すると、受信したパケットのう
ち、オーバーフローによって情報の復元が不可能な情報
を構成するパケットを削除する手段と、パケット受信の
アンダーフローを検出しアンダーフロー情報を出力する
手段と、前記アンダーフロー情報を受信し、かつ受信し
たパケットでは所定の情報の復元が不可能な場合には、
前記受信したパケットを削除する手段と、デコード手段
を一時停止させる停止手段とを有することを特徴とす
る。
【００１５】
【００１６】また、前記停止手段は、前記デコード手段
がデコードする情報が映像の場合は、現時点で表示して
いるフレームを連続してデコードし、静止画として停止
する手段を有することを特徴とする。また、前記停止手
段は、前記デコード手段がデコードする情報が音声の場
合は、デコードを停止する手段を有することを特徴とす
る。
がデコードする情報が映像の場合は、現時点で表示して
いるフレームを連続してデコードし、静止画として停止
する手段を有することを特徴とする。また、前記停止手
段は、前記デコード手段がデコードする情報が音声の場
合は、デコードを停止する手段を有することを特徴とす
る。
【００１７】これらの手段により、復元可能な情報だけ
を再生することにより、再生の乱れを防げる。
を再生することにより、再生の乱れを防げる。
【００１８】
【００１９】
【００２０】 〔発明の詳細な説明〕
【００２１】
【発明の属する技術分野】本発明は、送信装置と受信装
置とが、ネットワークを介して通信するマルチキャスト
システムに関する。
置とが、ネットワークを介して通信するマルチキャスト
システムに関する。
【００２２】
【発明の実施の形態】本発明の実施の形態を説明する。
図１は本実施形態の構成図である。図１中、１０はサー
バである。サーバ１０は後述するエンコーダ部１１、及
びパケットヘッダ処理部１２を有する。そして、サーバ
１０は映像、及び音声をリアルタイムにエンコードし、
後述するネットワーク２０を介して複数のクライアント
端末３０に同時に配信（放送）するものである。
図１は本実施形態の構成図である。図１中、１０はサー
バである。サーバ１０は後述するエンコーダ部１１、及
びパケットヘッダ処理部１２を有する。そして、サーバ
１０は映像、及び音声をリアルタイムにエンコードし、
後述するネットワーク２０を介して複数のクライアント
端末３０に同時に配信（放送）するものである。
【００２３】１１はエンコーダ部である。エンコーダ部
１１は、映像及び音声をリアルタイムにエンコードし、
デジタルデータに変換するものである。１２はパケット
ヘッダ処理部である。パケットヘッダ処理部１２は、エ
ンコーダ部１１でエンコードしたデータをパケット化
し、そのパケットのヘッダに、パケットの順番を示す巡
回データを付加するものである。
１１は、映像及び音声をリアルタイムにエンコードし、
デジタルデータに変換するものである。１２はパケット
ヘッダ処理部である。パケットヘッダ処理部１２は、エ
ンコーダ部１１でエンコードしたデータをパケット化
し、そのパケットのヘッダに、パケットの順番を示す巡
回データを付加するものである。
【００２４】２０はネットワークである。尚、本実施形
態ではサーバ１０と、後述するクライアント端末３０と
は、ネットワーク２０を介して接続される。３０はクラ
イアント端末である。クライアント端末３０は、後述す
るデコーダ部３１、連続性判定処理部３２、パケット判
別処理部３３、データ破棄処理部３４、データ置換処理
部３５、データバッファ部３６、バッファ量管理部３
７、及びデコーダ制御処理部３８を有する。そしてクラ
イアント端末３０は、ネットワーク２０を介して、サー
バ１０から配信（放送）されるパケットを受信し、前記
パケットのデータをデコードし、映像の表示、及び音声
の再生を行うものである。
態ではサーバ１０と、後述するクライアント端末３０と
は、ネットワーク２０を介して接続される。３０はクラ
イアント端末である。クライアント端末３０は、後述す
るデコーダ部３１、連続性判定処理部３２、パケット判
別処理部３３、データ破棄処理部３４、データ置換処理
部３５、データバッファ部３６、バッファ量管理部３
７、及びデコーダ制御処理部３８を有する。そしてクラ
イアント端末３０は、ネットワーク２０を介して、サー
バ１０から配信（放送）されるパケットを受信し、前記
パケットのデータをデコードし、映像の表示、及び音声
の再生を行うものである。
【００２５】３１はデコーダ部である。デコーダ部３１
は前記データをデコードし、映像、及び音声の再生を行
なうものである。３２は連続性判定処理部である。連続
性判定処理部３２は、サーバ１０からネットワーク２０
を介して配信（放送）されたパケットを受信し、そのパ
ケットの巡回データに基づいて、パケットの連続性が保
たれているか否かの識別を行う。そして、パケットと、
識別結果とを後述するパケット判別処理部３３に転送す
る。
は前記データをデコードし、映像、及び音声の再生を行
なうものである。３２は連続性判定処理部である。連続
性判定処理部３２は、サーバ１０からネットワーク２０
を介して配信（放送）されたパケットを受信し、そのパ
ケットの巡回データに基づいて、パケットの連続性が保
たれているか否かの識別を行う。そして、パケットと、
識別結果とを後述するパケット判別処理部３３に転送す
る。
【００２６】３３はパケット判別処理部である。パケッ
ト判別処理部３３は前記識別結果に基づいて、パケット
に連続性が有る場合は、最小デコード（デコーダ部３１
が、デコードできる最小データ量）毎に後述するデータ
バッファ部３６に転送する。また、前記識別結果に基づ
いて、パケットに連続性が無い場合は、パケット判別処
理部３３は、喪失したパケットの構成を判別し、パケッ
トのデータ種類や喪失量の度合いにより、データ置換の
可否を識別する。前記識別の結果、データ置換が不可能
な場合は後述するバッファ量管理部３７、及びデコーダ
制御処理部３８に指示し（データが抜けたことを指示す
る）、デコーダ３７が不正なデータを再生しないように
制御させる。また、前記識別の結果、データ置換が可能
な場合は、パケットのデータを後述するデータ破棄処理
部３４に転送する。
ト判別処理部３３は前記識別結果に基づいて、パケット
に連続性が有る場合は、最小デコード（デコーダ部３１
が、デコードできる最小データ量）毎に後述するデータ
バッファ部３６に転送する。また、前記識別結果に基づ
いて、パケットに連続性が無い場合は、パケット判別処
理部３３は、喪失したパケットの構成を判別し、パケッ
トのデータ種類や喪失量の度合いにより、データ置換の
可否を識別する。前記識別の結果、データ置換が不可能
な場合は後述するバッファ量管理部３７、及びデコーダ
制御処理部３８に指示し（データが抜けたことを指示す
る）、デコーダ３７が不正なデータを再生しないように
制御させる。また、前記識別の結果、データ置換が可能
な場合は、パケットのデータを後述するデータ破棄処理
部３４に転送する。
【００２７】３４はデータ破棄処理部である。データ破
棄処理部３４は、映像データに対しては表示の最小単位
であるフレーム単位となるよう中途半端なデータを破棄
する。そして、フレーム単位のデータを後述するデータ
置換処理部３５に転送する。また、音声に対しても同様
に最小復号ユニット単位となるようデータの破棄を行な
う。そして、最小復号ユニット単位のデータを後述する
データ置換処理部３５に転送する。
棄処理部３４は、映像データに対しては表示の最小単位
であるフレーム単位となるよう中途半端なデータを破棄
する。そして、フレーム単位のデータを後述するデータ
置換処理部３５に転送する。また、音声に対しても同様
に最小復号ユニット単位となるようデータの破棄を行な
う。そして、最小復号ユニット単位のデータを後述する
データ置換処理部３５に転送する。
【００２８】３５はデータ置換処理部である。データ置
換処理部３５は、映像データの場合は、破棄されたフレ
ームに対して差分なしの同様フレームへの置換を行い、
データバッファ部３６へフレームデータの転送を行う。
音声の場合は前のデータと同一のデータへの置換を行
う。３６はデータバッファ部である。データバッファ部
３６は、パケット判別処理部３３、及びデータ置換処理
部３５より転送されたデータを格納するものである。そ
して、そのデータは一定時間ごとに後述するデコーダ部
３１により引き出される。
換処理部３５は、映像データの場合は、破棄されたフレ
ームに対して差分なしの同様フレームへの置換を行い、
データバッファ部３６へフレームデータの転送を行う。
音声の場合は前のデータと同一のデータへの置換を行
う。３６はデータバッファ部である。データバッファ部
３６は、パケット判別処理部３３、及びデータ置換処理
部３５より転送されたデータを格納するものである。そ
して、そのデータは一定時間ごとに後述するデコーダ部
３１により引き出される。
【００２９】３７はバッファ量管理部である。バッファ
量管理部３７は、データバッファ部３６のデータ量を監
視するものである。例えば、パケットの連続性は確保で
きるがネットワーク２０の過負荷によりデータ伝送に遅
延が発生した場合、データバッファ部３６が空になり、
後述するデコーダ部３１への再生データの供給が不十分
となる。このため、デコーダ部３１は完全なデコードが
できなく映像、及び音声の乱れが生じてしまう。そこ
で、バッファ量管理部３７は、データバッファ部３６を
監視し、データが再生単位より下回ったときには後述す
るデコーダ制御処理部３８に指示を出し、デコーダ部３
１を制御させて再生を中断し、再生可能な状態を待ちデ
コードの再開を実施する。また、端末側の負荷等により
データバッファ部３６が溢れる場合には、バッファ量管
理部３７は、データバッファ部３６が格納しているデー
タの破棄を行わせる。すなわち、映像、及び音声を飛ば
しオーバフローによるデータの乱れを防止する。
量管理部３７は、データバッファ部３６のデータ量を監
視するものである。例えば、パケットの連続性は確保で
きるがネットワーク２０の過負荷によりデータ伝送に遅
延が発生した場合、データバッファ部３６が空になり、
後述するデコーダ部３１への再生データの供給が不十分
となる。このため、デコーダ部３１は完全なデコードが
できなく映像、及び音声の乱れが生じてしまう。そこ
で、バッファ量管理部３７は、データバッファ部３６を
監視し、データが再生単位より下回ったときには後述す
るデコーダ制御処理部３８に指示を出し、デコーダ部３
１を制御させて再生を中断し、再生可能な状態を待ちデ
コードの再開を実施する。また、端末側の負荷等により
データバッファ部３６が溢れる場合には、バッファ量管
理部３７は、データバッファ部３６が格納しているデー
タの破棄を行わせる。すなわち、映像、及び音声を飛ば
しオーバフローによるデータの乱れを防止する。
【００３０】３８はデコーダ制御処理部である。デコー
ダ制御処理部３８はネットワーク２０の過負荷等により
データ伝送に遅延が発生した場合、デコーダ部３１を制
御し再生を中断させ、再生可能な状態を待ちデコードの
再開を指示する。次に本実施形態の動作について説明す
る。まず、サーバ１はエンコーダ部１１に、映像、及び
音声データを符号化させる。そして、エンコーダ部１１
は、符号化した映像、及び音声データをパケットヘッダ
処理部１２へ転送する。
ダ制御処理部３８はネットワーク２０の過負荷等により
データ伝送に遅延が発生した場合、デコーダ部３１を制
御し再生を中断させ、再生可能な状態を待ちデコードの
再開を指示する。次に本実施形態の動作について説明す
る。まず、サーバ１はエンコーダ部１１に、映像、及び
音声データを符号化させる。そして、エンコーダ部１１
は、符号化した映像、及び音声データをパケットヘッダ
処理部１２へ転送する。
【００３１】次に、パケットヘッダ処理部１２は符号化
された映像、及び音声データをパケット化する。この
際、パケットヘッダ処理部１２はパケット毎に順番を示
す巡回データを付加する。そして、パケットヘッダ処理
部１２は、パケットしたパケットデータをクライアント
端末３０にネットワーク２０を介して配信（放送）す
る。
された映像、及び音声データをパケット化する。この
際、パケットヘッダ処理部１２はパケット毎に順番を示
す巡回データを付加する。そして、パケットヘッダ処理
部１２は、パケットしたパケットデータをクライアント
端末３０にネットワーク２０を介して配信（放送）す
る。
【００３２】クライアント端末３０は、ネットワーク２
０を介して前記パケットデータを受信し、連続性判定処
理部３２へ転送する。連続性判定処理部３２は、転送さ
れたパケットデータ（以後、パケットデータＡと称す
る）の巡回データと、パケットデータＡの直前に転送さ
れたパケットデータ（以後、パケットデータＢと称す
る）の巡回データとを比較する。パケットデータに喪失
がなければ、巡回データはパケットデータ毎に順次変化
するものである。そのため、パケットデータに喪失が発
生すると、巡回データの値が連続せずに、途切れたパケ
ットデータがクライアント端末３０に送られる。連続性
判定処理部３２は前記比較に基づいて、パケットデータ
Ａと、パケットデータＢとの連続性の有無を判断する。
次に、連続性判定処理部３２はパケットデータＡと、前
記連続性の有無の結果とをパケット判別処理部３３に転
送する。
０を介して前記パケットデータを受信し、連続性判定処
理部３２へ転送する。連続性判定処理部３２は、転送さ
れたパケットデータ（以後、パケットデータＡと称す
る）の巡回データと、パケットデータＡの直前に転送さ
れたパケットデータ（以後、パケットデータＢと称す
る）の巡回データとを比較する。パケットデータに喪失
がなければ、巡回データはパケットデータ毎に順次変化
するものである。そのため、パケットデータに喪失が発
生すると、巡回データの値が連続せずに、途切れたパケ
ットデータがクライアント端末３０に送られる。連続性
判定処理部３２は前記比較に基づいて、パケットデータ
Ａと、パケットデータＢとの連続性の有無を判断する。
次に、連続性判定処理部３２はパケットデータＡと、前
記連続性の有無の結果とをパケット判別処理部３３に転
送する。
【００３３】パケット判別処理部３３は受け取ったパケ
ットデータが、連続性が有ると判断されている場合は、
映像、及び音声のデコード単位に構成し、データバッフ
ァ部３６に転送する。このデータバッファ部３６に蓄え
られたデータは逐次デコーダ部３１に転送され、デコー
ド処理を行う、そして映像の表示、及び音声の再生が行
われる。
ットデータが、連続性が有ると判断されている場合は、
映像、及び音声のデコード単位に構成し、データバッフ
ァ部３６に転送する。このデータバッファ部３６に蓄え
られたデータは逐次デコーダ部３１に転送され、デコー
ド処理を行う、そして映像の表示、及び音声の再生が行
われる。
【００３４】また、パケット判別処理部３３は受け取っ
たパケットデータが、連続性が無いと判断されている場
合は、そのパケットデータは後述する復元可能か否かの
判断を行う。復元可能か否かの判断は、パケットデータ
の喪失が映像のＢフレーム（Bidirectionally Predicti
ve-coded Picture）、Ｐフレーム（Predictive-codedPi
cture）、又は音声の復号ユニットである場合について
は、復元可能と判断する。また、パケットデータの喪失
が映像のＩフレーム（Intra coded Picture ）の場合、
またはパケットデータの喪失が複数発生した場合は復元
不可能と判断する。
たパケットデータが、連続性が無いと判断されている場
合は、そのパケットデータは後述する復元可能か否かの
判断を行う。復元可能か否かの判断は、パケットデータ
の喪失が映像のＢフレーム（Bidirectionally Predicti
ve-coded Picture）、Ｐフレーム（Predictive-codedPi
cture）、又は音声の復号ユニットである場合について
は、復元可能と判断する。また、パケットデータの喪失
が映像のＩフレーム（Intra coded Picture ）の場合、
またはパケットデータの喪失が複数発生した場合は復元
不可能と判断する。
【００３５】パケット判別処理部３３は復元可能と判断
したパケットデータはデータ破棄処理部３４に転送す
る。データ破棄処理部３４は前記パケットデータを再生
単位（フレーム）で識別し、喪失したパケットデータに
続く（映像、及び音声の時間的つながり）前記再生単位
（フレーム）の一部が喪失している場合は、その再生単
位（フレーム）を破棄する。つまりＢフレームの場合は
そのＢフレームのみ、Ｐフレームの場合は次のＩフレー
ムまでのデータの破棄を行う。そして、残りのパケット
データをデータ置換処理部３５に転送する。
したパケットデータはデータ破棄処理部３４に転送す
る。データ破棄処理部３４は前記パケットデータを再生
単位（フレーム）で識別し、喪失したパケットデータに
続く（映像、及び音声の時間的つながり）前記再生単位
（フレーム）の一部が喪失している場合は、その再生単
位（フレーム）を破棄する。つまりＢフレームの場合は
そのＢフレームのみ、Ｐフレームの場合は次のＩフレー
ムまでのデータの破棄を行う。そして、残りのパケット
データをデータ置換処理部３５に転送する。
【００３６】データ置換処理部３５は、破棄されたフレ
ームに対して差分なしの同様フレームへの置換を行い、
データバッファ部３６へ転送を行う。音声については前
のデータと同一のデータへの置換を行う。パケット判別
処理部３３は復元不可能と判断した場合には、バッファ
量管理部３７に指示し、データバッファ部３６に格納さ
れているデータを含めての破棄を行い、再生可能なデー
タの先頭からのデコード処理とする。
ームに対して差分なしの同様フレームへの置換を行い、
データバッファ部３６へ転送を行う。音声については前
のデータと同一のデータへの置換を行う。パケット判別
処理部３３は復元不可能と判断した場合には、バッファ
量管理部３７に指示し、データバッファ部３６に格納さ
れているデータを含めての破棄を行い、再生可能なデー
タの先頭からのデコード処理とする。
【００３７】この時画面の崩れ、及び音声の異音が無い
ようにデコーダ制御処理部３８に指示し、表示が途切れ
る前のフレームでの停止処理（静止画）、及び音声のミ
ュート処理を行う。これにより、デコーダ部３１は復号
可能なデータが入力されるまでの再生の乱れを防げる。
次に、本実施形態において映像、及び音声データの到達
の遅延や端末の処理（又はリソース）による映像、及び
音声データのオーバフロー、及びアンダフロー時の動作
について説明する。
ようにデコーダ制御処理部３８に指示し、表示が途切れ
る前のフレームでの停止処理（静止画）、及び音声のミ
ュート処理を行う。これにより、デコーダ部３１は復号
可能なデータが入力されるまでの再生の乱れを防げる。
次に、本実施形態において映像、及び音声データの到達
の遅延や端末の処理（又はリソース）による映像、及び
音声データのオーバフロー、及びアンダフロー時の動作
について説明する。
【００３８】映像、及び音声データのオーバーフロー、
及びアンダーフローについてはクライアント端末３０の
バッファ量管理部３７がデータバッファ部３６の状態を
監視することにより、判断する。それは、バッファ量管
理部３７がデータバッファ部３６の容量を見て、デコー
ド単位を下回ったならばアンダフローと判断し、デコー
ダ制御処理部３８に指示し、再生可能な状態と判断され
るまで画面を停止（静止画）し、音声をミュートする。
及びアンダーフローについてはクライアント端末３０の
バッファ量管理部３７がデータバッファ部３６の状態を
監視することにより、判断する。それは、バッファ量管
理部３７がデータバッファ部３６の容量を見て、デコー
ド単位を下回ったならばアンダフローと判断し、デコー
ダ制御処理部３８に指示し、再生可能な状態と判断され
るまで画面を停止（静止画）し、音声をミュートする。
【００３９】また、バッファ量管理部３７はデータバッ
ファ部３６がある容量を超えたときにはオーバフローと
判断し、データバッファ部３６に格納されているデータ
の破棄を行い、再生可能なデータの先頭からのデコード
処理とする。また、ネットワークのデータ量を削減する
ためにフレームを間引きし伝送されるデータは、パケッ
ト判別処理部３３によりデータ破棄処理部３４に転送さ
れる。そして、データ破棄処理部３４は前記データを、
データ置換処理部３５に転送する。
ファ部３６がある容量を超えたときにはオーバフローと
判断し、データバッファ部３６に格納されているデータ
の破棄を行い、再生可能なデータの先頭からのデコード
処理とする。また、ネットワークのデータ量を削減する
ためにフレームを間引きし伝送されるデータは、パケッ
ト判別処理部３３によりデータ破棄処理部３４に転送さ
れる。そして、データ破棄処理部３４は前記データを、
データ置換処理部３５に転送する。
【００４０】データ置換処理部３５は前記データを、間
引きされたフレームに対して差分なしの同様フレームへ
の置換を行い、データバッファ部３６へ転送を行う。次
に、他の実施形態について説明する。図２は他の実施形
態の構成図である。尚、他の実施形態の説明にあたっ
て、本実施形態と同様な部分については説明を省略し、
異なる部分についてのみ説明する。
引きされたフレームに対して差分なしの同様フレームへ
の置換を行い、データバッファ部３６へ転送を行う。次
に、他の実施形態について説明する。図２は他の実施形
態の構成図である。尚、他の実施形態の説明にあたっ
て、本実施形態と同様な部分については説明を省略し、
異なる部分についてのみ説明する。
【００４１】図２中、４０はクライアント端末である。
クライアント端末４０は、デコーダ部３１、データバッ
ファ部３６、バッファ量管理部３７、デコーダ制御処理
部３８、後述する連続性判定処理部４２、及び後述する
データ破棄処理部４３、を有する。クライアント端末４
０は、ネットワーク２０を介して、サーバ１０から配信
（放送）されるデータを受信し、前記データをデコード
処理して映像の表示および音声の再生を行うものであ
る。
クライアント端末４０は、デコーダ部３１、データバッ
ファ部３６、バッファ量管理部３７、デコーダ制御処理
部３８、後述する連続性判定処理部４２、及び後述する
データ破棄処理部４３、を有する。クライアント端末４
０は、ネットワーク２０を介して、サーバ１０から配信
（放送）されるデータを受信し、前記データをデコード
処理して映像の表示および音声の再生を行うものであ
る。
【００４２】４２は連続性判定処理部である。連続性判
定処理部４１は、サーバ１０からネットワーク２０を介
して配信（放送）されたパケットデータを受信し、その
パケットデータの先頭に、付加された連続性を示す情報
に基づいて、パケットデータの連続性が保たれているか
否かの識別を行う。そして、パケットデータの連続性が
保たれている場合は、そのパケットデータを最小デコー
ド（デコード部３１がデコードできる最小データ量）毎
にデータバッファ部３６に受け渡す。また、パケットデ
ータの連続性が保たれて無い場合は、前記パケットデー
タをデータ破棄処理部４３に転送する。
定処理部４１は、サーバ１０からネットワーク２０を介
して配信（放送）されたパケットデータを受信し、その
パケットデータの先頭に、付加された連続性を示す情報
に基づいて、パケットデータの連続性が保たれているか
否かの識別を行う。そして、パケットデータの連続性が
保たれている場合は、そのパケットデータを最小デコー
ド（デコード部３１がデコードできる最小データ量）毎
にデータバッファ部３６に受け渡す。また、パケットデ
ータの連続性が保たれて無い場合は、前記パケットデー
タをデータ破棄処理部４３に転送する。
【００４３】４３はデータ破棄処理部である。データ破
棄処理部４３は、映像データに対しては表示の最小単位
であるフレーム単位となるよう中途半端なデータを破棄
する。そして、フレーム単位のデータをデータバッファ
部３６に転送する。また、音声に対しても同様に最小復
号ユニット単位となるようデータの破棄を行ない、デー
タ置換処理３４に転送する。
棄処理部４３は、映像データに対しては表示の最小単位
であるフレーム単位となるよう中途半端なデータを破棄
する。そして、フレーム単位のデータをデータバッファ
部３６に転送する。また、音声に対しても同様に最小復
号ユニット単位となるようデータの破棄を行ない、デー
タ置換処理３４に転送する。
【００４４】次に、他の実施形態の動作について説明す
る。尚、通常動作およびネットワーク２０によるデータ
の遅延、クライアント端末３０による障害においては本
実施形態と同様の動作のため省略する。ここでは、ネッ
トワーク２０側での負荷等によりパケットデータの喪失
に関して、説明する。
る。尚、通常動作およびネットワーク２０によるデータ
の遅延、クライアント端末３０による障害においては本
実施形態と同様の動作のため省略する。ここでは、ネッ
トワーク２０側での負荷等によりパケットデータの喪失
に関して、説明する。
【００４５】まず、ネットワーク２０からの伝送される
パケットに喪失が発生すると、パケット毎に付加されて
いるパケット番号を示す巡回データの値が連続せずに、
途切れたパケットがクライアント端末４０に送られる。
このパケットは連続性判定処理部４２により、連続性が
ないと判断される。そして連続性判定処理部４２は、前
記パケットと、前記パケットに連続性が無い旨の情報を
データ破棄処理部４３に転送する。
パケットに喪失が発生すると、パケット毎に付加されて
いるパケット番号を示す巡回データの値が連続せずに、
途切れたパケットがクライアント端末４０に送られる。
このパケットは連続性判定処理部４２により、連続性が
ないと判断される。そして連続性判定処理部４２は、前
記パケットと、前記パケットに連続性が無い旨の情報を
データ破棄処理部４３に転送する。
【００４６】前記転送を受けたデータ破棄処理部４３
は、バッファ量管理部３７に指示し、データバッファ部
３６に格納されているデータを含めての破棄を行い、再
生可能なデータの先頭からのデコード処理とする。この
時画面の崩れ、及び音声の異音がないようにデコーダ制
御処理部３８により表示が途切れる前のフレームで表示
の停止処理（静止画）、及び音声のミュート処理を行
う。これにより、デコーダ部３１は復号可能なデータが
入力されるまでの再生の乱れを防げる。
は、バッファ量管理部３７に指示し、データバッファ部
３６に格納されているデータを含めての破棄を行い、再
生可能なデータの先頭からのデコード処理とする。この
時画面の崩れ、及び音声の異音がないようにデコーダ制
御処理部３８により表示が途切れる前のフレームで表示
の停止処理（静止画）、及び音声のミュート処理を行
う。これにより、デコーダ部３１は復号可能なデータが
入力されるまでの再生の乱れを防げる。
【００４７】つまり、欠落したデータを完全に復元する
事は難しいため復元処理を省き、映像が乱れない程度で
の処理を施すことにより構成の簡略化を行う。
事は難しいため復元処理を省き、映像が乱れない程度で
の処理を施すことにより構成の簡略化を行う。
【００４８】
【効果】第一の効果はマルチキャストで起こり得るネッ
トワークにおけるデータ伝送障害に対して映像や音声が
乱れることなく、表示および再生を行うことができるこ
とである。その理由は、端末側で転送パケットおよびデ
ータ構造の解析を行うことより、不具合を引き起こすア
ンダーフロー／オーバーフローを判別し、デコード処理
制御を行う手段を設けた為である。
トワークにおけるデータ伝送障害に対して映像や音声が
乱れることなく、表示および再生を行うことができるこ
とである。その理由は、端末側で転送パケットおよびデ
ータ構造の解析を行うことより、不具合を引き起こすア
ンダーフロー／オーバーフローを判別し、デコード処理
制御を行う手段を設けた為である。
【００４９】第二の効果は端末側での負荷やサーバ側と
の制御時間の不整合による障害に対しても、映像、及び
音声が乱れることなく、再生を行うことができることで
ある。その理由は、端末側で保有しているデータバッフ
ァを常に監視する処理を設けたことにより、デコードの
予測が可能となることによる。第三の効果は送信装置側
において、フレーム間引きを施したデータに関しても補
間により、再生を乱すことなくできることである。その
理由は、端末側においてフレームデータを置換できる手
段を設けた為である。
の制御時間の不整合による障害に対しても、映像、及び
音声が乱れることなく、再生を行うことができることで
ある。その理由は、端末側で保有しているデータバッフ
ァを常に監視する処理を設けたことにより、デコードの
予測が可能となることによる。第三の効果は送信装置側
において、フレーム間引きを施したデータに関しても補
間により、再生を乱すことなくできることである。その
理由は、端末側においてフレームデータを置換できる手
段を設けた為である。
【図１】本発明に係わる本実施形態の構成を示す図であ
る。
る。
【図２】本発明に係わる他の実施形態の構成を示す図で
ある。
ある。
１０ サーバ １１ エンコーダ部 １２ パケットヘッダ処理部 ２０ ネットワーク ３０ クライアント端末 ３１ デコーダ部 ３２ 連続性判定処理部 ３３ パケット判別処理部 ３４ データ破棄処理部 ３５ データ置換処理部 ３６ データバッファ部 ３７ バッファ量管理部 ３８ デコーダ制御処理部
フロントページの続き (58)調査した分野(Int.Cl.7，ＤＢ名) H04L 12/56 H04L 12/28
Claims (13)
- 【請求項１】 送信装置と受信装置とがネットワークを
介して通信するマルチキャストシステムであって、 前記送信装置は、 送信するデータをパケットに変換し、各パケットにパケ
ットの連続性情報を付加する手段を有し、 前記受信装置は、 パケットに付加された前記連続性情報から、パケットで
構成される所定の情報の復元可能性を判断し、復元不可
能な場合には復元不能情報を出力する判断手段と、 前記復元不能情報を受信すると、受信したパケットのう
ち前記所定の情報を復元する為に用いられるパケットを
破棄する手段と、 パケット受信のオーバーフローを検出し、オーバーフロ
ー情報を出力する手段と、 前記オーバーフロー情報を受信すると、受信したパケッ
トのうち、オーバーフローによって情報の復元が不可能
な情報を構成するパケットを削除する手段と、 パケット受信のアンダーフローを検出しアンダーフロー
情報を出力する手段と、 前記アンダーフロー情報を受信し、かつ受信したパケッ
トでは所定の情報の復元が不可能な場合には、前記受信
したパケットを削除する手段と、 デコード手段を一時停止させる停止手段 とを有すること
を特徴とするマルチキャストシステム。 - 【請求項２】 前記判断手段は、前記パケットの連続性
情報に基づいて、デコード手段でデコードする最小単位
のパケットが受信されていないと判断した場合には、復
元不能情報を出力することを特徴とする請求項１に記載
のマルチキャストシステム。 - 【請求項３】 前記判断手段は、復元する情報が映像で
あって、前記パケットの連続性情報に基づいて、受信し
たパケットにより１フレームを構成できないと判断した
場合には、復元不能情報を出力することを特徴とする請
求項１に記載のマルチキャストシステム。 - 【請求項４】 前記判断手段は、復元する情報が音声で
あって、前記パケットの連続性情報に基づいて、受信し
たパケットにより１音を構成できないと判断した場合に
は、復元不能情報を出力することを特徴とする請求項１
に記載のマルチキャストシステム。 - 【請求項５】 前記送信装置は、映像と音声とをデジタ
ルデータに変換するエンコード手段を有することを特徴
とする請求項１から請求項４のいずれかに記載のマルチ
キャストシステム。 - 【請求項６】 前記受信装置は、パケットに付加された
連続性情報から、連続性が無いと判断した場合で、かつ
喪失したパケットが置換可能な場合には、置換する置換
手段を有することを特徴とする請求項１に記載のマルチ
キャストシステム。 - 【請求項７】 前記置換手段は、置換するパケットが映
像の場合は、フレームの置換により映像を復元すること
を特徴とする請求項６に記載のマルチキャストシステ
ム。 - 【請求項８】 前記置換手段は、置換するパケットが音
声の場合は、置換直前のデータで置換することを特徴と
する請求項６又は請求項７に記載のマルチキャストシス
テム。 - 【請求項９】 前記停止手段は、前記デコード手段がデ
コードする情報が映像の場合は、現時点で表示している
フレームを連続してデコードし、静止画として停止する
手段を有することを特徴とする請求項１に記載のマルチ
キャストシステム。 - 【請求項１０】 前記停止手段は、前記デコード手段が
デコードする情報が音声の場合は、デコードを停止する
手段を有することを特徴とする請求項１又は請求項９に
記載のマルチキャストシステム。 - 【請求項１１】 マルチキャストシステムで、送信装置
がデータをパケットに変換して送信し、前記パケットを
受信する受信装置であって、 前記受信装置は、パケット受信のオーバーフローを検出
しオーバーフロー情報 を出力する手段と、 前記オーバーフロー情報を受信すると、受信したパケッ
トのうち、オーバーフローによって情報の復元が不可能
な情報を構成するパケットを削除する手段と、パケット
受信のアンダーフローを検出しアンダーフロー情報を出
力する手段と、 前記アンダーフロー情報を受信し、かつ受信したパケッ
トでは所定の情報の復元が不可能な場合には、前記受信
したパケットを削除する手段と、 デコード手段を一時停止させる停止手段とを有すること
を特徴とする受信装置。 - 【請求項１２】 前記停止手段は、前記デコード手段が
デコードする情報が映像の場合は、現時点で表示してい
るフレームを連続してデコードし、静止画として停止す
る手段を有することを特徴とする請求項１１に記載の受
信装置。 - 【請求項１３】 前記停止手段は、前記デコード手段が
デコードする情報が音声の場合は、デコードを停止する
手段を有することを特徴とする請求項１１又は請求項１
２に記載の受信装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP26217698A JP3259691B2 (ja) | 1998-09-17 | 1998-09-17 | マルチキャストシステム、及び受信装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP26217698A JP3259691B2 (ja) | 1998-09-17 | 1998-09-17 | マルチキャストシステム、及び受信装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2000092049A JP2000092049A (ja) | 2000-03-31 |
| JP3259691B2 true JP3259691B2 (ja) | 2002-02-25 |
Family
ID=17372132
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP26217698A Expired - Fee Related JP3259691B2 (ja) | 1998-09-17 | 1998-09-17 | マルチキャストシステム、及び受信装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3259691B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| USRE37836E1 (en) | 1996-04-26 | 2002-09-10 | Seiko Epson Corporation | Projector |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPWO2005060262A1 (ja) * | 2003-12-17 | 2007-12-13 | 三洋電機株式会社 | 無線映像送信装置、無線映像受信装置及び無線映像送受信システム並びに信号生成装置、信号訂正装置及び信号生成訂正装置 |
| JP2007080347A (ja) * | 2005-09-13 | 2007-03-29 | Funai Electric Co Ltd | 光ディスク再生装置 |
| JP2007208418A (ja) * | 2006-01-31 | 2007-08-16 | Nhk Engineering Services Inc | 検査情報生成装置、送信装置及び中継装置 |
| JP5224731B2 (ja) * | 2007-06-18 | 2013-07-03 | キヤノン株式会社 | 映像受信装置及び映像受信装置の制御方法 |
-
1998
- 1998-09-17 JP JP26217698A patent/JP3259691B2/ja not_active Expired - Fee Related
Non-Patent Citations (1)
| Title |
|---|
| 信学論 Ｖｏｌ．Ｊ８０−Ｂ−Ｉ Ｎｏ．１０ ｐ６７０−６７８ |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| USRE37836E1 (en) | 1996-04-26 | 2002-09-10 | Seiko Epson Corporation | Projector |
| USRE38306E1 (en) | 1996-04-26 | 2003-11-11 | Seiko Epson Corporation | Projector |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2000092049A (ja) | 2000-03-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100704134B1 (ko) | 스트리밍 비디오 수신기용 복호기 버퍼 | |
| JP4232209B2 (ja) | 圧縮画像データの編集装置及び圧縮画像データの編集方法 | |
| US7116714B2 (en) | Video coding | |
| JP3676979B2 (ja) | 電話回線による高速映像伝送 | |
| CN101536497B (zh) | 用于减少频道变化时间以及在频道变化期间同步音频/视频内容的方法 | |
| US8089514B2 (en) | Moving image communication device, moving image communication system and semiconductor integrated circuit used for communication of moving image | |
| JP2002503402A (ja) | 圧縮された情報ストリームを接続する方法及び装置 | |
| JP2009512265A (ja) | ネットワーク上の動画データ伝送制御システムとその方法 | |
| CN111147860B (zh) | 一种视频数据的解码方法及装置 | |
| EP1655960A2 (en) | Apparatus and method for transmitting/receiving image data in mobile communication system | |
| EP1679895A1 (en) | Medium signal transmission method, reception method, transmission/reception method, and device | |
| JP3259691B2 (ja) | マルチキャストシステム、及び受信装置 | |
| JP3591712B2 (ja) | 動画送信装置及び動画受信装置 | |
| JP3927486B2 (ja) | ストリーミング配信装置、ストリーミング配信システム、及びストリーミング配信方法 | |
| JP2001136205A (ja) | マルチキャストシステム、クライアント端末、送出装置 | |
| JPH11163934A (ja) | 伝送システム及び伝送装置及び受信装置及び実時間動画像及び音声送信システム及び装置及びその制御方法及び記憶媒体 | |
| KR100701032B1 (ko) | 네트워크 상의 동영상 데이터 전송 조절 시스템과 그 방법 | |
| JP2004349743A (ja) | 映像ストリーム切替システム、方法、映像ストリーム切替システムを含む映像監視、映像配信システム | |
| JP2005210160A (ja) | 通信状態表示を有する映像受信端末 | |
| EP1615439A2 (en) | Network receiving apparatus and network transmitting apparatus | |
| JP3169767B2 (ja) | 蓄積画像データ再生制御方法およびこれを用いたマルチメディア情報蓄積交換システム | |
| JP2004328353A (ja) | 逆転ストリームパケットの補正方法及び装置 | |
| JP4350638B2 (ja) | 映像記録装置 | |
| WO2007116839A1 (ja) | 映像受信装置及び映像配信システム並びに映像受信方法 | |
| JP2005295342A (ja) | 無線通信装置及び無線通信方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| LAPS | Cancellation because of no payment of annual fees |