JP4111732B2 - 映像データ多重化装置、映像データ表示装置及び映像データ多重化送受信システム - Google Patents
映像データ多重化装置、映像データ表示装置及び映像データ多重化送受信システム Download PDFInfo
- Publication number
- JP4111732B2 JP4111732B2 JP2002082850A JP2002082850A JP4111732B2 JP 4111732 B2 JP4111732 B2 JP 4111732B2 JP 2002082850 A JP2002082850 A JP 2002082850A JP 2002082850 A JP2002082850 A JP 2002082850A JP 4111732 B2 JP4111732 B2 JP 4111732B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- video
- unit
- video data
- list information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Time-Division Multiplex Systems (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、映像多重化システムに関するものであり、特に、複数の映像ストリームを多重化して受信側に送信する多重化装置と、該多重化装置から送信されたたデータを受信して、該受信したデータに基づいて複数の映像を表示する表示装置に関するものである。
【０００２】
【従来の技術】
一般に、ＭＰＥＧ符号化された複数の映像データを多重化して伝送する場合、ＭＰＥＧ−２トランスポートストリームのように、符号化されたそれぞれの映像データをパケットに分割し、識別子をつけた後に、多重化して伝送する方法が用いられる。そして、伝送されたパケットごとの映像データの中から特定の映像だけを復号し表示するには、伝送されたパケット列から特定の識別子のパケットだけを選択して、ＭＰＥＧ復号化処理を行い表示すればよい。
【０００３】
【発明が解決しようとする課題】
しかし、伝送されたＮ個の映像データを同時に表示したい場合には、パケットに付与されている識別子によって映像データを区別し、それぞれの映像データを独立に復号する必要がある。一般には、ＭＰＥＧの映像データを復号して表示する装置においては、ＭＰＥＧ復号器は１つしか設けられていないため、それぞれの映像データに対する復号処理を時分割で行うことになり、この場合、それぞれの映像データの復号を独立して行うために、復号に使用するバッファ等をそれぞれの映像ごとに独立に設けて、切り替えて復号を行う必要がある。特に、上記従来のようにパケットごとに分割した場合には、ＧＯＰ単位の途中でも分割されることがあるため、他のフレームとの参照関係のあるフレームが存在するＭＰＥＧの映像データでは、復号に使用するバッファ等をそれぞれ設ける必要がある。
【０００４】
このように、復号に使用するバッファ等をそれぞれの映像データごとに独立に設ける場合には、バッファの切換え処理の制御が煩雑になり、また、必要なバッファサイズが大きくなり、システム全体の小型化が図れず、また、低コストの要請にも応えることができないという問題があった。
【０００５】
そこで、本発明は、複数のＭＰＥＧの映像データを多重化して送信し、さらに、受信側において各映像データを同時に表示するシステムにおいて、システム全体の小型化、低コスト化を図ることができ、煩雑な制御の必要のない映像多重化送受信システムを提供することを目的とするものである。
【０００６】
【課題を解決するための手段】
本発明は上記問題点を解決するために創作されたものであって、第１には、複数の映像データを多重化する映像データ多重化装置であって、複数の符号化された映像データのそれぞれについて、独立して復号可能なデータの単位ごとに分割して、該独立して復号可能なデータの単位からなる個別映像データごとに出力する分割手段と、該分割手段から出力された個別映像データの少なくともいずれかに、複数の映像データについての送信順序を定めた情報である順序情報を付加する順序情報付加手段と、該個別映像データを、該順序情報に従って、個別映像データごとに順番に送信する処理を繰り返すことにより、該複数の映像データを多重化データに再構成して送信する映像データ再構成・送信手段と、を有することを特徴とする。
【０００７】
この第１の構成においては、分割手段により個別映像データごとに分割されて、順序情報を付加した上で、該順序情報に示す順序に従って順番に送信を行うので、受信側では、各個別映像データを該順序情報を見ながら複数の映像データの種別ごとに表示していけばよい。特に、独立して復号可能なデータの単位ごとに受信側に送られるので、１つの映像ストリームを復号するように処理できるので、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。
【０００８】
また、第２には、上記第１の構成において、上記順序情報付加手段は、送信される多重化データの先頭に位置する個別映像データに上記順序情報を付加し、また、上記順序情報付加手段は、上記映像データ再構成・送信手段による送信途中において、複数の映像データのうちの少なくともいずれかの映像データの送信が完了した場合には、該送信が完了した映像データについての情報を該順序情報から削除した新たな順序情報を個別映像データに付加して送信することを特徴とする。よって、複数の映像データのうちのいずれかが終了した場合には、新たな順序情報が受信側に送られるので、受信側における表示切換えを正確に行なうことが可能となる。
【０００９】
また、第３には、上記第１又は第２の構成において、上記独立して復号可能なデータが、ＧＯＰ単位のデータであり、上記順序情報は、ＧＯＰデータにおけるユーザデータに書き込まれることを特徴とする。
【００１０】
また、第４には、複数の映像データを多重化する映像データ多重化装置であって、複数のＭＰＥＧ符号化された映像データのそれぞれについて、ＧＯＰの単位ごとに分割して、ＧＯＰデータを出力する分割手段と、該分割手段から出力されたＧＯＰデータの少なくともいずれかに、複数の映像データについての送信順序を定めた情報である順序情報を付加する順序情報付加手段と、該順序情報に従って、ＧＯＰデータごとに順番に送信する処理を繰り返すことにより、該複数の映像データを多重化データに再構成して送信する映像データ再構成・送信手段と、を有することを特徴とする。
【００１１】
この第４の構成においては、分割手段によりＧＯＰごとに分割されて、順序情報を付加した上で、該順序情報に示す順序に従って順番に送信を行うので、受信側では、各ＧＯＰデータにおける映像データを、該順序情報を見ながら複数の映像データの種別ごとに表示していけばよい。特に、ＧＯＰの単位ごとに受信側に送られるので、１つの映像ストリームを復号するように処理できるので、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。
【００１２】
また、第５には、上記第４の構成において、上記順序情報付加手段は、送信される多重化データの先頭に位置するＧＯＰデータに上記順序情報を付加し、また、上記順序情報付加手段は、上記映像データ再構成・送信手段による送信途中において、複数の映像データのうちの少なくともいずれかの映像データの送信が完了した場合には、該送信が完了した映像データについての情報を該順序情報から削除した新たな順序情報をＧＯＰデータに付加して送信することを特徴とする。よって、複数の映像データのうちのいずれかが終了した場合には、新たな順序情報が受信側に送られるので、受信側における表示切換えを正確に行なうことが可能となる。
【００１３】
また、第６には、上記第１から第５までのいずれかの構成において、上記順序情報は、上記複数の映像データにおける各映像データを特定するための情報である特定情報に所定の順序がつけられた情報であることを特徴とする。
【００１４】
また、第７には、複数の映像データを多重化する映像データ多重化装置であって、複数の符号化された映像データのそれぞれについて、独立して復号可能なデータの単位ごとに分割して、該独立して復号可能なデータの単位からなる個別映像データごとに出力する分割手段と、該分割手段から出力された個別映像データのそれぞれに、上記複数の映像データにおけるいずれかの映像データから分割したものであるかを示す情報である種別情報を付加する順序情報付加手段と、該個別映像データを順次受信側に送信する送信手段と、を有することを特徴とする。
【００１５】
この第７の構成においては、分割手段により個別映像データごとに分割されて、各個別映像データに種別情報を付加した上で受信側に送信を行うので、受信側では、各個別映像データを該種別情報を見ながら複数の映像データの種別ごとに表示していけばよい。特に、独立して復号可能なデータの単位ごとに受信側に送られるので、１つの映像ストリームを復号するように処理できるので、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。
【００１６】
また、第８には、上記第７の構成において、上記送信手段は、上記複数の映像データについての予め定められた送信順序に従って、個別映像データごとに順番に送信する処理を繰り返すことにより、該複数の映像データを多重化データに再構成して送信することを特徴とする。
【００１７】
また、第９には、上記第７又は第８の構成において、上記独立して復号可能なデータが、ＧＯＰ単位のデータであり、上記種別情報は、各ＧＯＰにおけるユーザ領域に書き込まれることを特徴とする。
【００１８】
また、第１０には、上記第７又は第８の構成において、上記独立して復号可能なデータが、ＧＯＰ単位のデータであり、上記種別情報は、上記複数の映像データの種類に応じて設けられた画像データであり、該種別情報としての画像データは、各ＧＯＰにおける映像データに付加されることを特徴とする
また、第１１には、複数の映像データが多重化された受信データを表示するための映像データ表示装置であって、複数の符号化された映像データのそれぞれについて、独立して復号可能なデータの単位ごとに分割して、該独立して復号可能なデータの単位からなる個別映像データごとに送信された受信データで、該個別映像データの少なくともいずれかに、複数の映像データについての送信順序を定めた情報である順序情報が付加されている受信データで、送信側において、該順序情報に従って該個別映像データごとに順番に送信する処理を繰り返すことにより、該複数の映像データを多重化データに再構成して送信された受信データから該順序情報を抽出する抽出手段と、該個別映像データを順次復号する復号手段と、該複数の映像データを同時に表示するために、各映像データに対応して複数の表示領域を有する表示手段で、各個別映像データを各表示領域に切換え表示する表示手段と、該抽出手段により抽出された順序情報に基づき、複数の映像データが各表示領域に表示されるように、該表示手段の表示領域の切換えを指示する制御手段と、を有することを特徴とする。
【００１９】
よって、独立して復号可能なデータの単位ごとに映像データが受信されるので、１つの映像ストリームを復号するように処理でき、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。また、該順序情報に従って、表示を切り換えていくことにより、複数の映像データを同時に表示することができる。
【００２０】
また、第１２には、上記第１１の構成において、上記独立して復号可能なデータが、ＧＯＰ単位のデータであり、上記順序情報は、ＧＯＰデータにおけるユーザデータに書き込まれており、上記抽出手段は、該順序情報をＧＯＰデータにおけるユーザデータから抽出することを特徴とする。
【００２１】
また、第１３には、複数の映像データが多重化された受信データを表示するための映像データ表示装置であって、複数のＭＰＥＧ符号化された映像データのそれぞれについて、ＧＯＰの単位ごとに分割してＧＯＰデータごとに送信された受信データで、該ＧＯＰデータの少なくともいずれかに、複数の映像データについての送信順序を定めた情報である順序情報が付加されている受信データで、送信側において、該順序情報に従って、該ＧＯＰデータごとに順番に送信する処理を繰り返すことにより、該複数の映像データを多重化データに再構成して送信された受信データから該順序情報を抽出する抽出手段と、該ＧＯＰデータにおける映像データを順次復号する復号手段と、該複数の映像データを同時に表示するために、各映像データに対応して複数の表示領域を有する表示手段で、各ＧＯＰデータにおける映像データを各表示領域に切換え表示する表示手段と、該抽出手段により抽出された順序情報に基づき、複数の映像データが各表示領域に表示されるように、該表示手段の表示領域の切換えを制御する制御手段と、を有することを特徴とする。
【００２２】
よって、ＧＯＰの単位ごとに映像データが受信されるので、１つの映像ストリームを復号するように処理でき、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。また、該順序情報に従って、表示を切り換えていくことにより、複数の映像データを同時に表示することができる。
【００２３】
また、第１４には、上記第１１から第１３までのいずれかの構成において、上記受信データの表示途中において、新たな順序情報が上記抽出手段によって抽出された場合には、上記制御手段は、新たな順序情報に従って切換え制御を行なうことを特徴とする。よって、複数の映像データのうちのいずれかが終了した場合には、新たな順序情報が送られるので、表示切換えを正確に行なうことが可能となる。
【００２４】
また、第１５には、複数の映像データを多重化する映像データ多重化装置であって、複数の符号化された映像データのそれぞれについて、独立して復号可能なデータの単位ごとに分割して、該独立して復号可能なデータの単位からなる個別映像データごとに送信された受信データで、該個別映像データのそれぞれに、上記複数の映像データにおけるいずれかの映像データから分割したものであるかを示す情報である種別情報が付加された受信データから該種別情報を抽出する抽出手段と、該個別映像データを順次復号する復号手段と、該複数の映像データを同時に表示するために、各映像データに対応して複数の表示領域を有する表示手段で、各個別映像データを各表示領域に切換え表示する表示手段と、該抽出手段により抽出された順序情報に基づき、複数の映像データが各表示領域に表示されるように、該表示手段の表示領域の切換えを指示する制御手段と、を有することを特徴とする。
【００２５】
よって、独立して復号可能なデータの単位ごとに映像データが受信されるので、１つの映像ストリームを復号するように処理でき、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。また、該種別情報に従って、表示を切り換えていくことにより、複数の映像データを同時に表示することができる。
【００２６】
また、第１６には、上記第１５の構成において、上記独立して復号可能なデータが、ＧＯＰ単位のデータであり、上記種別情報は、各ＧＯＰにおけるユーザ領域に書き込まれることを特徴とする。
【００２７】
また、第１７には、上記第１５の構成において、上記独立して復号可能なデータが、ＧＯＰ単位のデータであり、上記種別情報は、上記複数の映像データの種類に応じて設けられた画像データであり、該種別情報としての画像データは、各ＧＯＰにおける映像データに付加されることを特徴とする。
【００２８】
また、第１８には、複数の映像データを多重化して送受信を行う映像データ多重化送受信システムであって、上記第１から第３までのいずれかの構成の映像データ多重化装置と、該映像データ多重化装置から送信された受信データを復号して表示する映像データ表示装置であって、該受信データから上記順序情報を抽出する抽出手段と、上記個別映像データを順次復号する復号手段と、上記複数の映像データを同時に表示するために、各映像データに対応して複数の表示領域を有する表示手段で、各個別映像データを各表示領域に切換え表示する表示手段と、該抽出手段により抽出された順序情報に基づき、複数の映像データが各表示領域に表示されるように、該表示手段の表示領域の切換えを指示する制御手段と、を有する映像データ表示装置と、を有することを特徴とする。
【００２９】
また、第１９には、複数の映像データを多重化して送受信を行う映像データ多重化送受信システムであって、上記第４から第６までのいずれかの構成の映像データ多重化装置と、該映像データ多重化装置から送信された受信データを復号して表示する映像データ表示装置であって、該受信データから該順序情報を抽出する抽出手段と、上記ＧＯＰデータにおける映像データを順次復号する復号手段と、上記複数の映像データを同時に表示するために、各映像データに対応して複数の表示領域を有する表示手段で、各ＧＯＰデータにおける映像データを各表示領域に切換え表示する表示手段と、該抽出手段により抽出された順序情報に基づき、複数の映像データが各表示領域に表示されるように、該表示手段の表示領域の切換えを制御する制御手段と、を有する映像データ表示装置と、を有することを特徴とする。
【００３０】
また、第２０には、複数の映像データを多重化して送受信を行う映像データ多重化送受信システムであって、上記第７から第１０までのいずれかの構成の映像データ多重化装置と、該映像データ多重化装置から送信された受信データを復号して表示する映像データ表示装置であって、該受信データから該種別情報を抽出する抽出手段と、上記個別映像データを順次復号する復号手段と、上記複数の映像データを同時に表示するために、各映像データに対応して複数の表示領域を有する表示手段で、各個別映像データを各表示領域に切換え表示する表示手段と、該抽出手段により抽出された順序情報に基づき、複数の映像データが各表示領域に表示されるように、該表示手段の表示領域の切換えを指示する制御手段と、を有する映像データ表示装置と、を有することを特徴とする。
【００３１】
【発明の実施の形態】
本発明の実施の形態としての実施例を図面を利用して説明する。本発明に基づく映像データ多重化送受信システムは、図１に示すように構成された映像多重化・送信装置（映像データ多重化装置）Ｐと、図２に示すように構成された映像受信・表示装置（映像データ表示装置）Ｑとを有している。
【００３２】
まず、上記映像多重化・送信装置Ｐについて説明する。上記映像多重化・送信装置Ｐは、図１に示すように、入力部１０と、記憶部２０と、分割部３０と、ストリーム再構成部４０と、操作部５０と、映像リスト情報記憶部６０と、送信部７０と、主制御部８０とを有している。
【００３３】
ここで、上記入力部１０は、複数の入力部を有し、図１に示す例では、入力部１０ａと、入力部１０ｂと、入力部１０ｃと、入力部１０ｄとを有している。入力部１０ａ〜１０ｄには、それぞれＭＰＥＧ符号化された映像ストリームデータが入力される。つまり、基本的には、各入力部には、異なる番組の映像ストリームデータが入力される。上記各入力部は、ＭＰＥＧ符号化された映像ストリームデータを入力するためのインターフェースその他の入力装置等により構成される。
【００３４】
また、上記記憶部２０は、複数の記憶部を有し、図１に示す例では、記憶部２０ａと、記憶部２０ｂと、記憶部２０ｃと、記憶部２０ｄとを有している。各記憶部は、入力された映像ストリームデータを一旦記憶しておくためのものであり、記憶装置により構成される。
【００３５】
また、上記分割部３０は、複数の分割部を有し、図１に示す例では、分割部３０ａと、分割部３０ｂと、分割部３０ｃと、分割部３０ｄとを有している。各分割部は、記憶部に記憶されている映像ストリームデータをＧＯＰの単位ごとに分割して、ストリーム再構成部４０に送る機能を有する装置である。このＧＯＰごとのデータが、上記個別映像データに当たる。
【００３６】
また、ストリーム再構成部４０は、分割部３０ａ〜３０ｄから送られる映像データを再構成して、新たなＭＰＥＧストリームを構成するための装置であり、切換部４２と、切換部４４と、映像リスト情報埋込部４６と、制御部４８とを有している。
【００３７】
ここで、切換部４２は、分割部３０ａ〜３０ｄのそれぞれに対応した４つの入力端子と、１つの出力端子とを有し、制御部４８の制御に基づいて、分割部３０ａ〜３０ｄのいずれかと、切換部４４との接続を切り換えるものである。
【００３８】
また、切換部４４は、１つの入力端子と、２つの出力端子とを有し、該制御部４８の制御に基づいて、該入力端子と、２つの出力端子のいずれかとの接続を切り換えるものである。
【００３９】
映像リスト情報埋込部４６は、制御部４８からの指示に基づいて、映像ストリームデータに映像リスト情報を埋め込むものである。つまり、映像リスト情報をＧＯＰデータにおけるユーザデータ内に書き込む。
【００４０】
また、制御部４８は、ストリーム再構成部４０における各部の動作を制御するものであり、特に、映像リスト情報記憶部６０に記憶された映像リスト情報に基づいて切換部４２、切換部４４、映像リスト情報埋込部４６の動作を制御する。
【００４１】
また、操作部５０は、映像リスト映像多重化・送信装置Ｐの操作を行うためのものであり、特に、映像リスト情報を初期設定する際には、この操作部５０が用いられる。
【００４２】
また、映像リスト情報記憶部６０は、映像リスト情報を記憶するための記憶装置である。また、送信部７０は、上記ストリーム再構成部４０において再構成されたＭＰＥＧストリームを送信する送信装置である。
【００４３】
さらに、主制御部８０は、上記映像多重化・送信装置Ｐにおける各部の動作を制御する制御装置である。
【００４４】
なお、上記映像多重化・送信装置Ｐを構成する上記各部については、上記のように各機能を有する装置として構成してもよいし、一部の構成を所定の処理を実行するためのプログラムと、該プログラムに基づき処理を実行するＣＰＵにより構成してもよい。
【００４５】
つまり、一部の構成を所定の処理を実行するためのプログラムと、該プログラムに基づき動作するＣＰＵにより構成する場合には、上記分割部３０や、ストリーム再構成部４０や、主制御部８０を、分割部３０が行なう処理を実行するためのプログラムや、ストリーム再構成部４０が行なう処理を実行するためのプログラムと、主制御部８０が行なう処理を実行するためのプログラムと、ＣＰＵにより構成することが考えられる。
【００４６】
なお、上記の説明では、入力部１０において入力部が４つ設けられている等、４つの映像データを多重化できるように構成されているが、４つには限られず、２以上の映像データが多重化できる構成であればよい。つまり、ｎ個（ｎは２以上）の映像データを多重化する場合には、入力部１０における入力部や、記憶部２０における記憶部や、分割部３０における分割部や、切換部４２の入力端子はｎ個設けられたものとなる。
【００４７】
次に、映像受信・表示装置Ｑの構成について説明する。映像受信・表示装置Ｑは、図２に示すように、受信部１００と、復号処理部１１０と、表示部１２０と、記憶部１３０と、監視部１４０と、操作部１５０と、主制御部１６０とを有している。
【００４８】
ここで、上記受信部１００は、上記映像多重化・送信装置Ｐにおける送信部７０から送信されたＭＰＥＧストリームを受信する受信装置である。
【００４９】
また、復号処理部１１０は、受信部１００で受信されたＭＰＥＧストリームを復号する復号装置である。
【００５０】
また、表示部１２０は、復号処理部１１０で復号処理されたＭＰＥＧストリームに基づいて、複数の映像データを同時に表示する表示装置であり、切換部１２２と、個別表示部１２４ａ、１２４ｂ、１２４ｃ、１２４ｄを有している。
【００５１】
ここで、該切換部１２２は、１つの入力端子と、個別表示部１２４ａ〜１２４ｄにおける各個別表示部に対応した４つの出力端子とを有し、該監視部１４０の制御に基づいて、該入力端子と、４つの出力端子のいずれかとの接続を切り換えるものである。
【００５２】
また、個別表示部１２４ａ〜１２４ｄは、表示画面における表示領域を示すものであり、映像データを表示する際に、図３に示すように、１つの表示画面Ｍに、個別表示部１２４ａと個別表示部１２４ｂと個別表示部１２４ｃと個別表示部１２４ｄの各表示領域が設けられる。ここで、個別表示部１２４ａは、記憶部２０ａに記憶された映像データに対応し、個別表示部１２４ｂは、記憶部２０ｂに記憶された映像データに対応し、個別表示部１２４ｃは、記憶部２０ｃに記憶された映像データに対応し、個別表示部１２４ｄは、記憶部２０ｄに記憶された映像データに対応している。
【００５３】
また、記憶部１３０は、主として、映像リスト情報を記憶するための記憶装置である。
【００５４】
また、監視部１４０は、復号処理部１１０において復号されたデータを監視する機能を有する装置であり、主として、ＧＯＰの開始を検出した場合には、これを表示部１２０に通知したり、映像リスト情報を検出した場合には、これを記憶部１３０に記憶する機能を有している。
【００５５】
また、操作部１５０は、上記映像受信・表示装置Ｑの操作を行うためのものである。また、主制御部１６０は、上記映像受信・表示装置Ｑにおける各部の動作を制御するためのものである。
【００５６】
なお、上記映像受信・表示装置Ｑを構成する上記各部については、上記のように各機能を有する装置として構成してもよいし、一部の構成を所定の処理を実行するためのプログラムと、該プログラムに基づき処理を実行するＣＰＵにより構成してもよい。
【００５７】
つまり、一部の構成を所定の処理を実行するためのプログラムと、該プログラムに基づき動作するＣＰＵにより構成する場合には、上記復号処理部１１０や、切換部１２２と個別表示部１２４ａ〜１２４ｄや、監視部１４０や、主制御部１６０を、復号処理部１１０が行なう処理を実行するためのプログラムや、切換部１２２と個別表示部１２４ａ〜１２４ｄが行なう処理を実行するためのプログラムと、監視部１４０が行なう処理を実行するためのプログラムと、主制御部１６０が行なう処理を実行するためのプログラムと、ＣＰＵにより構成することが考えられる。
【００５８】
なお、図２に示す構成は、切換部１２２における出力端子が４つ設けられ、個別表示部も４つ設けられていて、４つの映像データが多重化されたデータを復号して表示できるように構成されているが、４つには限られず、２以上の映像データが多重化できる構成であればよい。つまり、ｎ個（ｎは２以上）の映像データを多重化する場合には、切換部１２２における出力端子や、個別表示部は、ｎ個設けられたものとなる。
【００５９】
上記構成の映像データ多重化送受信システムの動作について説明する。まず、映像多重化・送信装置Ｐの動作について図５等を使用して説明する。
【００６０】
記憶部２０における各記憶部２０ａ〜２０ｄには、それぞれ映像データが記憶されているものとする。この映像データは、ＭＰＥＧ符号化された映像ストリームである。各記憶部に記憶されている映像データは、それぞれ単独で１つのコンテンツをなすものであり、それぞれ入力部から映像データを入力することにより、各記憶部に記憶されたものである。
【００６１】
そして、ユーザは操作部５０を用いて多重化する映像データの数についての情報を入力する。入力部２０ａ〜２０ｄに映像データが記憶されている場合には、映像データの数は４となるので、４つである旨の情報を入力する。すると、主制御部８０は、映像リスト情報を設定する（Ｓ１０）。つまり、入力された映像データの数についての情報に基づき、映像リスト情報を該映像リスト情報記憶部６０に書き込む。ここで、映像リスト情報としては、映像データを再構成する際の映像データの順序を示す情報とし、例えば、記憶部２０ａに記憶された映像データをＡ、記憶部２０ｂに記憶された映像データをＢ、記憶部２０ｃに記憶された映像データをＣ、記憶部２０ｄに記憶された映像データをＤとした場合には、「Ａ、Ｂ、Ｃ、Ｄ」という内容の情報となる。この「Ａ、Ｂ、Ｃ、Ｄ」は、Ａから順にＢ→Ｃ→Ｄというようにその順番も規定している。この映像リスト情報における各データ、つまり、映像リスト情報「Ａ、Ｂ、Ｃ、Ｄ」における「Ａ」、「Ｂ」、「Ｃ」、「Ｄ」の各データを映像リスト情報におえる個別データとする。
【００６２】
なお、仮に、記憶部２０ａ、記憶部２０ｂ、記憶部２０ｃのみに映像データが記憶されて、３つの映像データを多重化する場合には、映像リスト情報は「Ａ、Ｂ、Ｃ」となる。この映像リスト情報が、上記順序情報に当たる。
【００６３】
また、上記ユーザの入力操作により、映像多重化・送信装置Ｐ全体の動作が開始され、分割部３０ａ〜３０ｄは、それぞれ対応する記憶部に記憶された映像データをＧＯＰ単位で分割する処理を行う。具体的には、映像データにおいてＧＯＰヘッダを検出していくことにより、ＧＯＰごとに分割を行う。つまり、分割部３０ａ〜３０ｄは、上記分割手段として機能する。
【００６４】
また、制御部４８は、映像リスト情報６０に書き込まれた映像リスト情報を読み出して、この映像リスト情報に基づき映像種別を設定する。この映像種別の設定に際しては、ストリーム再構成部４０における切換部４２を設定するとともに、切換部４４の設定も行なう（Ｓ１１）。切換部４２の設定は、映像リスト情報の最初の情報に基づいて行う。つまり、映像リスト情報は「Ａ、Ｂ、Ｃ、Ｄ」となっている場合には、最初の情報はＡであるので、このＡに対応する記憶部２０ａ側、つまり、分割部３０ａ側に切換えを行なう。また、１番目のＧＯＰに、映像リスト情報を埋め込むために、切換部４４は、映像リスト情報埋込部４６側に切り換える。
【００６５】
そして、切換部４２は、分割部３０ａから最初のＧＯＰデータを読み出し、切換部４４を介して、映像リスト情報埋込部４６に送る。映像リスト情報埋込部４６では、制御部４８を介して映像リスト情報記憶部６０から映像リスト情報が送られるので、この映像リスト情報を該ＧＯＰデータにおけるユーザデータに埋め込む（Ｓ１２）。つまり、映像リスト情報埋込部４６が、上記順序情報付加手段として機能する。
【００６６】
映像リスト情報の埋込みが行われると、送信部７０に該ＧＯＰデータが読み出されて、送信部７０により受信側に送信される。
【００６７】
次に、映像リスト情報に従って、映像種別を切り換える（Ｓ１４）。つまり、映像リスト情報における個別データＡの次の個別データはＢであるので、制御部４８は、切換部４２を記憶部２０ｂ側、つまり、分割部３０ｂになるように切換え制御する。また、このステップＳ１４では、切換部４４は、映像リスト情報埋込部４６側とは異なる側に切り換える。この切換部４２、４４における設定は、制御部４８により行われる。
【００６８】
そして、切り換えた映像データについて、ＧＯＰデータが終了したか否かを判定して、終了した場合にはステップＳ１６に移行し、終了していない場合には、ステップＳ１３に戻る。ここで、ＧＯＰデータが終了したか否かについては、切換部４２が切換え後の分割部からＧＯＰデータを読み出すことができるか否かにより判定し、その判定結果は制御部４８に送られる。
【００６９】
上記のように、ストリーム再構成部４０や送信部７０は、映像リスト情報に従って、ＧＯＰデータごとに順番に送信する処理を繰り返すことにより、複数の映像データを多重化データに再構成して送信している。つまり、ストリーム再構成部４０や送信部７０は、上記映像データ再構成・送信手段として機能する。
【００７０】
そして、ステップＳ１５の判定において、切り換えた映像データについて、ＧＯＰが終了している場合には、映像リスト情報記憶部６０に記憶されている映像リスト情報を更新する。つまり、映像リスト情報記憶部６０に記憶されている映像リスト情報を削除して、新たな映像リスト情報を記憶させる。この映像リスト情報の更新は、上記制御部４８により行われる。ここで、新たな映像リスト情報の内容としては、ＧＯＰデータが終了した映像データに対応する個別データを削除するとともに、削除した個別データの次の順番の個別データが先頭になるようにし、また、削除した個別データの前位置に個別データがある場合で、かつ、削除した個別データの次の個別データがある場合には、該削除した個別データの前位置にある個別データはその順番で、最後位置の個別データの後ろになるようにする。例えば、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」となっている場合に、個別データＢに対応する映像データのＧＯＰデータが終了した場合には、「Ｃ、Ｄ、Ａ」とする。また、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」となっている場合に、個別データＣに対応する映像データのＧＯＰデータが終了した場合には、「Ｄ、Ａ、Ｂ」とする。また、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」となっている場合に、個別データＡに対応する映像データのＧＯＰデータが終了した場合には、「Ｂ、Ｃ、Ｄ」とする。また、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」となっている場合に、個別データＤに対応する映像データのＧＯＰデータが終了した場合には、「Ａ、Ｂ、Ｃ」とする。
【００７１】
そして、映像リスト情報記憶部６０が空になったか否かが判定される（Ｓ１７）。つまり、ステップＳ１６の処理を行う前の段階で映像リスト情報に１つのデータのみが含まれていた場合には、これを削除することにより、映像リスト情報記憶部６０が空になる。映像リスト情報記憶部６０が空になった場合には、一連の処理を終了し、空になっていない場合には、ステップＳ１１に戻る。
【００７２】
この図５のフローチャートに示す処理を具体的に説明すると、以下のようになる。図７（ａ）に示すように、映像データＡがＧＯＰデータＡ１〜ＧＯＰデータＡｎ＋１で構成され、映像データＢがＧＯＰデータＢ１〜ＧＯＰデータＢｎで構成され、映像データＣがＧＯＰデータＣ１〜ＧＯＰデータＣｎ＋２で構成され、映像データＤがＧＯＰデータＤ１〜ＧＯＰデータＤｎ＋３で構成されている場合に、これらを多重化するものとする。
【００７３】
すると、最初に映像リスト情報記憶部６０に記憶される映像リスト情報としては、「Ａ、Ｂ、Ｃ、Ｄ」が記憶され（Ｓ１０）、まず、切換部４２が分割部３０ａ側に切り換えられ、また、切換部４４が映像リスト情報埋込部４６側に切り換えられて（Ｓ１１）、ＧＯＰデータＡ１のユーザデータに映像リスト情報が埋め込まれた上で（Ｓ１２）、ＧＯＰデータＡ１が受信側に送信される（Ｓ１３）。
【００７４】
次には、切換部４２を分割部３０ｂ側に切り換えるとともに、切換部４４を映像リスト情報埋込部４６側とは異なる側、つまり、送信部７０に直接接続される側に切り換える（Ｓ１４）。そして、映像データＢはまだ終了していないので、ステップＳ１５からステップＳ１３に戻って、今後は、映像データＢにおけるＧＯＰデータＢ１が送信される。次には、分割部３０ｃ側に切り換えられて（Ｓ１４）、映像データＣにおけるＧＯＰデータＣ１が送信される。次には、分割部３０ｄ側に切り換えられて（Ｓ１４）、映像データＤにおけるＧＯＰデータＤ１が送信される。そして、次には、映像リスト情報「Ａ、Ｂ、Ｃ、Ｄ」において、個別データＤの次は個別データＡとなるので、再び切換部４２を分割部３０ａ側に切り換えて、映像データＡにおけるＧＯＰデータＡ２が送信される。このように、映像データＡ→映像データＢ→映像データＣ→映像データＤ→映像データＡ・・・の順序でＧＯＰデータごとに送信されていく。
【００７５】
そして、ＧＯＰデータＡｎ＋１の送信が終了すると（Ｓ１３）、映像リスト情報「Ａ、Ｂ、Ｃ、Ｄ」に従って切換部４２は分割部３０ｂ側に切り換えられるが、切り換えた映像データ、つまり、映像データＢは終了しているので、ステップＳ１６に移行し、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」から「Ｃ、Ｄ、Ａ」に更新され（Ｓ１６）、ステップＳ１１に戻る。そして、更新された映像リスト情報「Ｃ、Ｄ、Ａ」に従って、切換部４２は分割部３０ｃに切り換えられ、また、切換部４４も映像リスト情報埋込部４６に切り換えられて、ＧＯＰデータＣｎ＋１のユーザデータに更新された映像リスト情報が埋め込まれて、該ＧＯＰデータＣｎ＋１が送信される。
【００７６】
その後、ＧＯＰデータＤｎ＋１も送信されるが、その後に切り換えた映像データＡも終了しているので（Ｓ１５）、今後は、映像リスト情報が「Ｃ、Ｄ」に更新されて、更新された映像リスト情報がＧＯＰデータＣｎ＋２に埋め込まれて送信される。
【００７７】
その後、ＧＯＰデータＤｎ＋２も送信されるが、その後に切り換えた映像データＣも終了しているので（Ｓ１５）、今後は、映像リスト情報が「Ｄ」に更新されて、更新された映像リスト情報がＧＯＰデータＤｎ＋３に埋め込まれて送信される。
【００７８】
そして、ＧＯＰデータＤｎ＋３の送信が終わると、映像データＤのデータは終了するので（なお、ステップＳ１４で、映像リスト情報に個別データが１つしかない場合には、その個別データが示すデータを映像種別とすることになる）、ステップＳ１５からステップＳ１６に移行し、ステップＳ１６で、個別データＤを削除することにより、映像リスト情報記憶部６０が空になるので、処理を終了することになる。
【００７９】
以上のようにして、映像多重化・送信装置Ｐにおいて各映像データが多重化されて、多重化映像データが受信側に送信される。
【００８０】
なお、図１に示す構成では、最大４つの映像データを多重化することができるが、図１の構成において、４つよりも少ない数の映像データを多重化するようにしてもよい。
【００８１】
次に、映像受信・表示装置Ｑにおける動作を説明する。映像多重化・送信装置Ｐから送信された多重化映像データは受信部１００において受信され、復号処理部１１０に送られる。
【００８２】
復号処理部１１０では、順次送られてくるＧＯＰデータの開始位置を検出するとともに、各ＧＯＰデータの復号処理を行っていく。つまり、まず、ＧＯＰの開始位置を検出していき（Ｓ２０）、ＧＯＰデータの開始位置が検出された場合には、ステップＳ２１に移行し、そうでない場合には、ステップＳ２６に移行する。
【００８３】
そして、そのＧＯＰデータの中に、映像リスト情報があるか否かが判定される（Ｓ２１）。これは以下のようにして行なう。つまり、復号処理部１１０によりユーザデータがあるか否かが検出されて、ユーザデータがある場合には、ユーザデータを復号した結果を監視部１４０に送る。監視部１４０は、該復号結果に基づいて映像リスト情報であるか否かを判定する。
【００８４】
そして、映像リスト情報がある場合には、監視部１４０は、映像リスト情報を記憶部１３０に格納し（Ｓ２２）、表示部１２０における映像種別をリセットする（Ｓ２３）。このステップＳ２３において、すでに映像リスト情報が映像リスト情報記憶部１３０に記憶されている場合には、新たな映像リスト情報に書き換えることになる。また、ステップＳ２３での表示部１２０における映像種別のリセットにおいては、表示部１２０における切換部１２２を、映像リスト情報が示す最初の個別データに対応する位置に切り換える。例えば、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」の場合には、個別データＡに対応する個別表示部１２４ａ側に切り換える。なお、この場合、上記復号処理部１１０、監視部１４０は、上記抽出手段として機能する。
【００８５】
一方、ステップＳ２１において、映像リスト情報が検出されなかった場合には、すでに記憶部１３０に記憶されている映像リスト情報に従って映像種別を切り換える（Ｓ２４）。つまり、監視部１４０は、切換部１２２における切換え位置と映像リスト情報とを比較し、その切換え位置に対応する個別データの次の個別データに対応する切換え位置に切り換える。例えば、切換部１２２における切換え位置が映像データＡに対応する個別表示部１２４ａ側である場合で、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」の場合には、個別データＡの次の個別データである個別データＢに対応する個別表示部１２４ｂ側に切換えを行なう。
【００８６】
そして、ステップＳ２３及びステップＳ２４の次には、ステップＳ２５に移行して、対象となるＧＯＰデータの映像データを復号して、その映像種別に対応する表示位置に表示する（Ｓ２５）。つまり、対象となるＧＯＰデータの映像データを復号処理部１１０において復号し、復号された映像データを表示部１２０に送る。表示部１２０においては、切換部１２２の切換え状態に従って、所定の個別表示部に映像データが送られて表示される。この場合、上記復号処理部１１０が上記復号手段として機能し、上記表示部１２０が上記表示手段として機能する。
【００８７】
そして、データが終了したか否かが判定されて（Ｓ２６）、終了していない場合には、ステップＳ２０に戻り、終了している場合には、全体の処理を終了する。
【００８８】
なお、上記ステップＳ２３、Ｓ２４のように、上記監視部１４０が記憶部１３０に記憶された映像リスト情報に従って、切換部１２２を切換え制御している。つまり、上記監視部１４０や記憶部１３０は、上記制御手段として機能する。
【００８９】
この図６のフローチャートに示す処理を具体的に説明すると、以下のようになる。図７（ｂ）に示すような多重化映像データが、映像多重化・送信装置Ｐから送られると、受信部１００において受信される。
【００９０】
そして、ＧＯＰデータＡ１が復号処理部１１０に入力されると、映像リスト情報がＧＯＰデータＡ１に含まれているので（Ｓ２１）、映像リスト情報が映像リスト情報記憶部６０に記憶される（Ｓ２２）。つまり、この時点では、「Ａ、Ｂ、Ｃ、Ｄ」の映像リスト情報が記憶される。そして、切換部１２２は個別表示部１２４ａ側に切り換えられ（Ｓ２３）、該ＧＯＰデータＡ１の映像データが復号されて、表示部１２０では、個別表示部１２４ａに表示される（Ｓ２４）。
【００９１】
次に、ＧＯＰデータＢ１が復号処理部１１０に入力されると、このＧＯＰデータＢ１には、映像リスト情報が含まれていないため、映像リスト情報に従って切換部１２２が個別表示部１２４ｂ側に切り換えられた上で（Ｓ２４）、ＧＯＰデータＢ１が復号されて、個別表示部１２４ｂに表示される（Ｓ２５）。
【００９２】
以下同様に、入力されるＧＯＰデータが対応する個別表示部に表示されていく。例えば、ＧＯＰデータＣ１は、個別表示部１２４ｃに表示され、ＧＯＰデータＤ１は、個別表示部１２４ｄに表示され、ＧＯＰデータＡ２は、個別表示部１２４ａに表示されていく。このようにして、映像データＡは個別表示部１２４ａに表示され、映像データＢは個別表示部１２４ｂに表示され、映像データＣは個別表示部１２４ｃに表示され、映像データＤは個別表示部１２４ｄに表示されていく。
【００９３】
なお、図７の例で、ＧＯＰデータＣｎ＋１が入力された際には、映像リスト情報「Ｃ、Ｄ、Ａ」が含まれているので（Ｓ２１）、この新たな映像リスト情報に記憶内容が更新され（Ｓ２２）、切換部１２２も個別表示部１２４ｃ側に切り換えられる（Ｓ２３）。そして、ＧＯＰデータＣｎ＋１における映像データが復号されるので、これを個別表示部１２４ｃに表示するのである。その後は、ＧＯＰデータＤｎ＋１が復号されて個別表示部１２４ｄ表示される（Ｓ２４、Ｓ２５）。
【００９４】
さらに、ＧＯＰデータＣｎ＋２が入力された際には、映像リスト情報「Ｃ、Ｄ」が含まれているので（Ｓ２１）、この新たな映像リスト情報に記憶内容が更新され（Ｓ２２）、切換部１２２も個別表示部１２４ｃ側に切り換えられて（Ｓ２３）。ＧＯＰデータＣｎ＋２における映像データが個別表示部１２４ｃに表示されるのである（Ｓ２５）。その後は、ＧＯＰデータＤｎ＋２が復号されて個別表示部１２４ｄに表示される（Ｓ２４、Ｓ２５）。
【００９５】
さらに、ＧＯＰデータＤｎ＋３が入力された際には、映像リスト情報「Ｄ」が含まれているので（Ｓ２１）、この新たな映像リスト情報に記憶内容が更新され（Ｓ２２）、切換部１２２も個別表示部１２４ｄ側に切り換えられて（Ｓ２３）。ＧＯＰデータＤｎ＋３における映像データが個別表示部１２４ｄに表示されるのである。その後は、ＧＯＰデータＤｎ＋２が復号されて個別表示部１２４ｄ表示される（Ｓ２４、Ｓ２５）。
【００９６】
以上のように、本実施例の映像データ多重化送受信システムにおいては、複数の映像データにおける各映像データをＧＯＰ単位で分割して、該複数の映像データに予め設定された順番を示す映像リスト情報に従って、各ＧＯＰデータを該映像リスト情報とともに順次送信し、受信側では、送信されるＧＯＰデータを順次復号するとともに、該映像リスト情報に従って、複数の表示領域に表示していくので、復号に必要なバッファをそれぞれ設ける必要がなく、システム全体の小型化を図ることができ、それにより低コストの要請にも応えることができる。また、バッファをそれぞれ設ける必要がないため、バッファ切換え処理の制御が煩雑になることがない。
【００９７】
なお、上記の説明では、映像リスト情報をＧＯＰデータ内に埋め込んで送信し、いずれかの映像データが終了した場合には、映像リスト情報を更新して再度送信するものとして説明したが、各ＧＯＰデータのそれぞれに映像種別を示す情報を埋め込んで送信し、受信側では、該映像種別を示す情報に従って、所定の個別表示部に表示するようにしてもよい。
【００９８】
つまり、図８に示すように、各ＧＯＰデータにおけるユーザデータに、映像種別を示す情報を埋め込んで受信側に送信する。例えば、図７（ａ）の例では、ＧＯＰデータＡ１のユーザデータに映像データＡである旨の情報を書き込んだ上で該ＧＯＰデータＡ１を送信し、次には、ＧＯＰデータＢ１のユーザデータに映像データＢである旨の情報を書き込んだ上で該ＧＯＰデータＢ１を送信し、次には、ＧＯＰデータＣ１のユーザデータに映像データＣである旨の情報を書き込んだ上で該ＧＯＰデータＣ１を送信し、次には、ＧＯＰデータＤ１のユーザデータに映像データＤである旨の情報を書き込んだ上で該ＧＯＰデータＤ１を送信する。ＧＯＰデータＤ１の次には、ＧＯＰデータＡ２のユーザデータに映像データＡである旨の情報を書き込んだ上で該ＧＯＰデータＡ１を送信する。以下同様に、各ＧＯＰデータのユーザデータに映像種別を示す情報を書き込んで順番に映像データＡのＧＯＰデータ→映像データＢのＧＯＰデータ→映像データＣのＧＯＰデータ→映像データＤのＧＯＰデータの順番に送信する手順を繰り返していく。
【００９９】
このように各ＧＯＰデータのユーザデータに映像種別を示す情報を書き込む場合には、映像多重化・送信装置の構成は以下のようになるといえる。つまり、図１に示す構成と概ね同様の構成であるが、ストリーム再構成部４０には、切換部４２と、切換部４２からのデータを受信する映像種別情報埋込部と、切換部４２と映像種別情報埋込部とを制御する制御部が設けられているとともに、映像リスト情報記憶部６０の代わりに、各映像種別を示す情報を記憶する記憶部が設けられていて、該映像種別情報埋込部は、該記憶部から読み出した情報に基づいて、各ＧＯＰデータのユーザデータに、映像種別を示す情報を書き込んで送信部７０に送ることになる。この場合、該映像種別情報埋込部が、上記種別情報付加手段に当たる。また、受信側においては、図２における監視部１４０が各ＧＯＰデータにおけるユーザデータの内容を検出して、検出結果に従って切換部１２２を切り換えればよいことになる。例えば、映像データＡである旨の情報が検出された場合には、切換部１２２を個別表示部１２４ａ側に切り換え、また、映像データＢである旨の情報が検出された場合には、切換部１２２を個別表示部１２４ｂ側に切り換えるようにする。
【０１００】
また、上記図８の例では、各ＧＯＰデータにおけるユーザデータに映像種別を示す情報を書き込むものとして説明したが、ユーザデータではなく、各ＧＯＰデータにおける映像データ自体に、映像種別を示す情報としての画像データを書き込んで送信するようにしてもよい。この場合には、図９に示すように、映像種別を識別できるような識別画像を書き込んでおく。つまり、映像データの種別の数に応じて、異なる識別画像を書き込むようにする。
【０１０１】
このようにＧＯＰデータの映像データに識別画像を書き込む場合には、映像多重化・送信装置の構成は上記各ＧＯＰデータのユーザデータに映像種別を示す情報を書き込む場合の構成と略同様であるが、映像リスト情報記憶部の代わりに、各識別画像の情報を記憶する記憶部が設けられ、また、映像種別情報埋込部の代わりに、識別画像情報埋込部が設けられ、該識別画像情報埋込部が、各ＧＯＰデータの映像データに映像データの種別に対応する識別画像情報を埋め込むことになる。また、受信側においては、図２における監視部１４０が各ＧＯＰデータにおける識別画像情報の内容を検出して、検出結果に従って切換部１２２を切り換えればよいことになる。例えば、映像データＡである旨の識別画像情報が検出された場合には、切換部１２２を個別表示部１２４ａ側に切り換え、また、映像データＢである旨の識別画像情報が検出された場合には、切換部１２２を個別表示部１２４ｂ側に切り換えるようにする。
【０１０２】
【発明の効果】
本発明に基づく映像データ多重化装置、映像データ表示装置及び映像データ多重化送受信システムによれば、独立して復号可能なデータの単位、具体的には、ＧＯＰごとに映像データを受信側に送信するので、受信側では、１つの映像ストリームを復号するように処理でき、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。また、順序情報や種別情報に従って、表示を切り換えていくことにより、複数の映像データを同時に表示することができる。
【図面の簡単な説明】
【図１】本発明の実施例に基づく映像多重化・送信装置の構成を示すブロック図である。
【図２】本発明の実施例に基づく映像受信・表示装置の構成を示すブロック図である。
【図３】表示部における表示態様を示す説明図である。
【図４】映像リスト情報の具体例を示す説明図である。
【図５】映像多重化・送信装置の動作を説明するためのフローチャートである。
【図６】映像受信・表示装置の動作を説明するためのフローチャートである。
【図７】映像多重化・送信装置の動作の具体例を説明する説明図である。
【図８】他の実施例を説明するための説明図である。
【図９】他の実施例を説明するための説明図である。
【符号の説明】
Ｐ 映像多重化・送信装置
Ｑ 映像受信・表示装置
１０ 入力部
２０ 記憶部
３０ 分割部
４０ ストリーム再構成部
４２、４４ 切換部
４６ 映像リスト情報埋込部
４８ 制御部
５０ 操作部
６０ 映像リスト情報記憶部
７０ 送信部
８０ 主制御部
１００ 受信部
１１０ 復号処理部
１２０ 表示部
１２２ 切換部
１２４ａ、１２４ｂ、１２４ｃ、１２４ｄ 個別表示部
１３０ 記憶部
１４０ 監視部
１５０ 操作部
１６０ 主制御部
【発明の属する技術分野】
本発明は、映像多重化システムに関するものであり、特に、複数の映像ストリームを多重化して受信側に送信する多重化装置と、該多重化装置から送信されたたデータを受信して、該受信したデータに基づいて複数の映像を表示する表示装置に関するものである。
【０００２】
【従来の技術】
一般に、ＭＰＥＧ符号化された複数の映像データを多重化して伝送する場合、ＭＰＥＧ−２トランスポートストリームのように、符号化されたそれぞれの映像データをパケットに分割し、識別子をつけた後に、多重化して伝送する方法が用いられる。そして、伝送されたパケットごとの映像データの中から特定の映像だけを復号し表示するには、伝送されたパケット列から特定の識別子のパケットだけを選択して、ＭＰＥＧ復号化処理を行い表示すればよい。
【０００３】
【発明が解決しようとする課題】
しかし、伝送されたＮ個の映像データを同時に表示したい場合には、パケットに付与されている識別子によって映像データを区別し、それぞれの映像データを独立に復号する必要がある。一般には、ＭＰＥＧの映像データを復号して表示する装置においては、ＭＰＥＧ復号器は１つしか設けられていないため、それぞれの映像データに対する復号処理を時分割で行うことになり、この場合、それぞれの映像データの復号を独立して行うために、復号に使用するバッファ等をそれぞれの映像ごとに独立に設けて、切り替えて復号を行う必要がある。特に、上記従来のようにパケットごとに分割した場合には、ＧＯＰ単位の途中でも分割されることがあるため、他のフレームとの参照関係のあるフレームが存在するＭＰＥＧの映像データでは、復号に使用するバッファ等をそれぞれ設ける必要がある。
【０００４】
このように、復号に使用するバッファ等をそれぞれの映像データごとに独立に設ける場合には、バッファの切換え処理の制御が煩雑になり、また、必要なバッファサイズが大きくなり、システム全体の小型化が図れず、また、低コストの要請にも応えることができないという問題があった。
【０００５】
そこで、本発明は、複数のＭＰＥＧの映像データを多重化して送信し、さらに、受信側において各映像データを同時に表示するシステムにおいて、システム全体の小型化、低コスト化を図ることができ、煩雑な制御の必要のない映像多重化送受信システムを提供することを目的とするものである。
【０００６】
【課題を解決するための手段】
本発明は上記問題点を解決するために創作されたものであって、第１には、複数の映像データを多重化する映像データ多重化装置であって、複数の符号化された映像データのそれぞれについて、独立して復号可能なデータの単位ごとに分割して、該独立して復号可能なデータの単位からなる個別映像データごとに出力する分割手段と、該分割手段から出力された個別映像データの少なくともいずれかに、複数の映像データについての送信順序を定めた情報である順序情報を付加する順序情報付加手段と、該個別映像データを、該順序情報に従って、個別映像データごとに順番に送信する処理を繰り返すことにより、該複数の映像データを多重化データに再構成して送信する映像データ再構成・送信手段と、を有することを特徴とする。
【０００７】
この第１の構成においては、分割手段により個別映像データごとに分割されて、順序情報を付加した上で、該順序情報に示す順序に従って順番に送信を行うので、受信側では、各個別映像データを該順序情報を見ながら複数の映像データの種別ごとに表示していけばよい。特に、独立して復号可能なデータの単位ごとに受信側に送られるので、１つの映像ストリームを復号するように処理できるので、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。
【０００８】
また、第２には、上記第１の構成において、上記順序情報付加手段は、送信される多重化データの先頭に位置する個別映像データに上記順序情報を付加し、また、上記順序情報付加手段は、上記映像データ再構成・送信手段による送信途中において、複数の映像データのうちの少なくともいずれかの映像データの送信が完了した場合には、該送信が完了した映像データについての情報を該順序情報から削除した新たな順序情報を個別映像データに付加して送信することを特徴とする。よって、複数の映像データのうちのいずれかが終了した場合には、新たな順序情報が受信側に送られるので、受信側における表示切換えを正確に行なうことが可能となる。
【０００９】
また、第３には、上記第１又は第２の構成において、上記独立して復号可能なデータが、ＧＯＰ単位のデータであり、上記順序情報は、ＧＯＰデータにおけるユーザデータに書き込まれることを特徴とする。
【００１０】
また、第４には、複数の映像データを多重化する映像データ多重化装置であって、複数のＭＰＥＧ符号化された映像データのそれぞれについて、ＧＯＰの単位ごとに分割して、ＧＯＰデータを出力する分割手段と、該分割手段から出力されたＧＯＰデータの少なくともいずれかに、複数の映像データについての送信順序を定めた情報である順序情報を付加する順序情報付加手段と、該順序情報に従って、ＧＯＰデータごとに順番に送信する処理を繰り返すことにより、該複数の映像データを多重化データに再構成して送信する映像データ再構成・送信手段と、を有することを特徴とする。
【００１１】
この第４の構成においては、分割手段によりＧＯＰごとに分割されて、順序情報を付加した上で、該順序情報に示す順序に従って順番に送信を行うので、受信側では、各ＧＯＰデータにおける映像データを、該順序情報を見ながら複数の映像データの種別ごとに表示していけばよい。特に、ＧＯＰの単位ごとに受信側に送られるので、１つの映像ストリームを復号するように処理できるので、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。
【００１２】
また、第５には、上記第４の構成において、上記順序情報付加手段は、送信される多重化データの先頭に位置するＧＯＰデータに上記順序情報を付加し、また、上記順序情報付加手段は、上記映像データ再構成・送信手段による送信途中において、複数の映像データのうちの少なくともいずれかの映像データの送信が完了した場合には、該送信が完了した映像データについての情報を該順序情報から削除した新たな順序情報をＧＯＰデータに付加して送信することを特徴とする。よって、複数の映像データのうちのいずれかが終了した場合には、新たな順序情報が受信側に送られるので、受信側における表示切換えを正確に行なうことが可能となる。
【００１３】
また、第６には、上記第１から第５までのいずれかの構成において、上記順序情報は、上記複数の映像データにおける各映像データを特定するための情報である特定情報に所定の順序がつけられた情報であることを特徴とする。
【００１４】
また、第７には、複数の映像データを多重化する映像データ多重化装置であって、複数の符号化された映像データのそれぞれについて、独立して復号可能なデータの単位ごとに分割して、該独立して復号可能なデータの単位からなる個別映像データごとに出力する分割手段と、該分割手段から出力された個別映像データのそれぞれに、上記複数の映像データにおけるいずれかの映像データから分割したものであるかを示す情報である種別情報を付加する順序情報付加手段と、該個別映像データを順次受信側に送信する送信手段と、を有することを特徴とする。
【００１５】
この第７の構成においては、分割手段により個別映像データごとに分割されて、各個別映像データに種別情報を付加した上で受信側に送信を行うので、受信側では、各個別映像データを該種別情報を見ながら複数の映像データの種別ごとに表示していけばよい。特に、独立して復号可能なデータの単位ごとに受信側に送られるので、１つの映像ストリームを復号するように処理できるので、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。
【００１６】
また、第８には、上記第７の構成において、上記送信手段は、上記複数の映像データについての予め定められた送信順序に従って、個別映像データごとに順番に送信する処理を繰り返すことにより、該複数の映像データを多重化データに再構成して送信することを特徴とする。
【００１７】
また、第９には、上記第７又は第８の構成において、上記独立して復号可能なデータが、ＧＯＰ単位のデータであり、上記種別情報は、各ＧＯＰにおけるユーザ領域に書き込まれることを特徴とする。
【００１８】
また、第１０には、上記第７又は第８の構成において、上記独立して復号可能なデータが、ＧＯＰ単位のデータであり、上記種別情報は、上記複数の映像データの種類に応じて設けられた画像データであり、該種別情報としての画像データは、各ＧＯＰにおける映像データに付加されることを特徴とする
また、第１１には、複数の映像データが多重化された受信データを表示するための映像データ表示装置であって、複数の符号化された映像データのそれぞれについて、独立して復号可能なデータの単位ごとに分割して、該独立して復号可能なデータの単位からなる個別映像データごとに送信された受信データで、該個別映像データの少なくともいずれかに、複数の映像データについての送信順序を定めた情報である順序情報が付加されている受信データで、送信側において、該順序情報に従って該個別映像データごとに順番に送信する処理を繰り返すことにより、該複数の映像データを多重化データに再構成して送信された受信データから該順序情報を抽出する抽出手段と、該個別映像データを順次復号する復号手段と、該複数の映像データを同時に表示するために、各映像データに対応して複数の表示領域を有する表示手段で、各個別映像データを各表示領域に切換え表示する表示手段と、該抽出手段により抽出された順序情報に基づき、複数の映像データが各表示領域に表示されるように、該表示手段の表示領域の切換えを指示する制御手段と、を有することを特徴とする。
【００１９】
よって、独立して復号可能なデータの単位ごとに映像データが受信されるので、１つの映像ストリームを復号するように処理でき、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。また、該順序情報に従って、表示を切り換えていくことにより、複数の映像データを同時に表示することができる。
【００２０】
また、第１２には、上記第１１の構成において、上記独立して復号可能なデータが、ＧＯＰ単位のデータであり、上記順序情報は、ＧＯＰデータにおけるユーザデータに書き込まれており、上記抽出手段は、該順序情報をＧＯＰデータにおけるユーザデータから抽出することを特徴とする。
【００２１】
また、第１３には、複数の映像データが多重化された受信データを表示するための映像データ表示装置であって、複数のＭＰＥＧ符号化された映像データのそれぞれについて、ＧＯＰの単位ごとに分割してＧＯＰデータごとに送信された受信データで、該ＧＯＰデータの少なくともいずれかに、複数の映像データについての送信順序を定めた情報である順序情報が付加されている受信データで、送信側において、該順序情報に従って、該ＧＯＰデータごとに順番に送信する処理を繰り返すことにより、該複数の映像データを多重化データに再構成して送信された受信データから該順序情報を抽出する抽出手段と、該ＧＯＰデータにおける映像データを順次復号する復号手段と、該複数の映像データを同時に表示するために、各映像データに対応して複数の表示領域を有する表示手段で、各ＧＯＰデータにおける映像データを各表示領域に切換え表示する表示手段と、該抽出手段により抽出された順序情報に基づき、複数の映像データが各表示領域に表示されるように、該表示手段の表示領域の切換えを制御する制御手段と、を有することを特徴とする。
【００２２】
よって、ＧＯＰの単位ごとに映像データが受信されるので、１つの映像ストリームを復号するように処理でき、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。また、該順序情報に従って、表示を切り換えていくことにより、複数の映像データを同時に表示することができる。
【００２３】
また、第１４には、上記第１１から第１３までのいずれかの構成において、上記受信データの表示途中において、新たな順序情報が上記抽出手段によって抽出された場合には、上記制御手段は、新たな順序情報に従って切換え制御を行なうことを特徴とする。よって、複数の映像データのうちのいずれかが終了した場合には、新たな順序情報が送られるので、表示切換えを正確に行なうことが可能となる。
【００２４】
また、第１５には、複数の映像データを多重化する映像データ多重化装置であって、複数の符号化された映像データのそれぞれについて、独立して復号可能なデータの単位ごとに分割して、該独立して復号可能なデータの単位からなる個別映像データごとに送信された受信データで、該個別映像データのそれぞれに、上記複数の映像データにおけるいずれかの映像データから分割したものであるかを示す情報である種別情報が付加された受信データから該種別情報を抽出する抽出手段と、該個別映像データを順次復号する復号手段と、該複数の映像データを同時に表示するために、各映像データに対応して複数の表示領域を有する表示手段で、各個別映像データを各表示領域に切換え表示する表示手段と、該抽出手段により抽出された順序情報に基づき、複数の映像データが各表示領域に表示されるように、該表示手段の表示領域の切換えを指示する制御手段と、を有することを特徴とする。
【００２５】
よって、独立して復号可能なデータの単位ごとに映像データが受信されるので、１つの映像ストリームを復号するように処理でき、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。また、該種別情報に従って、表示を切り換えていくことにより、複数の映像データを同時に表示することができる。
【００２６】
また、第１６には、上記第１５の構成において、上記独立して復号可能なデータが、ＧＯＰ単位のデータであり、上記種別情報は、各ＧＯＰにおけるユーザ領域に書き込まれることを特徴とする。
【００２７】
また、第１７には、上記第１５の構成において、上記独立して復号可能なデータが、ＧＯＰ単位のデータであり、上記種別情報は、上記複数の映像データの種類に応じて設けられた画像データであり、該種別情報としての画像データは、各ＧＯＰにおける映像データに付加されることを特徴とする。
【００２８】
また、第１８には、複数の映像データを多重化して送受信を行う映像データ多重化送受信システムであって、上記第１から第３までのいずれかの構成の映像データ多重化装置と、該映像データ多重化装置から送信された受信データを復号して表示する映像データ表示装置であって、該受信データから上記順序情報を抽出する抽出手段と、上記個別映像データを順次復号する復号手段と、上記複数の映像データを同時に表示するために、各映像データに対応して複数の表示領域を有する表示手段で、各個別映像データを各表示領域に切換え表示する表示手段と、該抽出手段により抽出された順序情報に基づき、複数の映像データが各表示領域に表示されるように、該表示手段の表示領域の切換えを指示する制御手段と、を有する映像データ表示装置と、を有することを特徴とする。
【００２９】
また、第１９には、複数の映像データを多重化して送受信を行う映像データ多重化送受信システムであって、上記第４から第６までのいずれかの構成の映像データ多重化装置と、該映像データ多重化装置から送信された受信データを復号して表示する映像データ表示装置であって、該受信データから該順序情報を抽出する抽出手段と、上記ＧＯＰデータにおける映像データを順次復号する復号手段と、上記複数の映像データを同時に表示するために、各映像データに対応して複数の表示領域を有する表示手段で、各ＧＯＰデータにおける映像データを各表示領域に切換え表示する表示手段と、該抽出手段により抽出された順序情報に基づき、複数の映像データが各表示領域に表示されるように、該表示手段の表示領域の切換えを制御する制御手段と、を有する映像データ表示装置と、を有することを特徴とする。
【００３０】
また、第２０には、複数の映像データを多重化して送受信を行う映像データ多重化送受信システムであって、上記第７から第１０までのいずれかの構成の映像データ多重化装置と、該映像データ多重化装置から送信された受信データを復号して表示する映像データ表示装置であって、該受信データから該種別情報を抽出する抽出手段と、上記個別映像データを順次復号する復号手段と、上記複数の映像データを同時に表示するために、各映像データに対応して複数の表示領域を有する表示手段で、各個別映像データを各表示領域に切換え表示する表示手段と、該抽出手段により抽出された順序情報に基づき、複数の映像データが各表示領域に表示されるように、該表示手段の表示領域の切換えを指示する制御手段と、を有する映像データ表示装置と、を有することを特徴とする。
【００３１】
【発明の実施の形態】
本発明の実施の形態としての実施例を図面を利用して説明する。本発明に基づく映像データ多重化送受信システムは、図１に示すように構成された映像多重化・送信装置（映像データ多重化装置）Ｐと、図２に示すように構成された映像受信・表示装置（映像データ表示装置）Ｑとを有している。
【００３２】
まず、上記映像多重化・送信装置Ｐについて説明する。上記映像多重化・送信装置Ｐは、図１に示すように、入力部１０と、記憶部２０と、分割部３０と、ストリーム再構成部４０と、操作部５０と、映像リスト情報記憶部６０と、送信部７０と、主制御部８０とを有している。
【００３３】
ここで、上記入力部１０は、複数の入力部を有し、図１に示す例では、入力部１０ａと、入力部１０ｂと、入力部１０ｃと、入力部１０ｄとを有している。入力部１０ａ〜１０ｄには、それぞれＭＰＥＧ符号化された映像ストリームデータが入力される。つまり、基本的には、各入力部には、異なる番組の映像ストリームデータが入力される。上記各入力部は、ＭＰＥＧ符号化された映像ストリームデータを入力するためのインターフェースその他の入力装置等により構成される。
【００３４】
また、上記記憶部２０は、複数の記憶部を有し、図１に示す例では、記憶部２０ａと、記憶部２０ｂと、記憶部２０ｃと、記憶部２０ｄとを有している。各記憶部は、入力された映像ストリームデータを一旦記憶しておくためのものであり、記憶装置により構成される。
【００３５】
また、上記分割部３０は、複数の分割部を有し、図１に示す例では、分割部３０ａと、分割部３０ｂと、分割部３０ｃと、分割部３０ｄとを有している。各分割部は、記憶部に記憶されている映像ストリームデータをＧＯＰの単位ごとに分割して、ストリーム再構成部４０に送る機能を有する装置である。このＧＯＰごとのデータが、上記個別映像データに当たる。
【００３６】
また、ストリーム再構成部４０は、分割部３０ａ〜３０ｄから送られる映像データを再構成して、新たなＭＰＥＧストリームを構成するための装置であり、切換部４２と、切換部４４と、映像リスト情報埋込部４６と、制御部４８とを有している。
【００３７】
ここで、切換部４２は、分割部３０ａ〜３０ｄのそれぞれに対応した４つの入力端子と、１つの出力端子とを有し、制御部４８の制御に基づいて、分割部３０ａ〜３０ｄのいずれかと、切換部４４との接続を切り換えるものである。
【００３８】
また、切換部４４は、１つの入力端子と、２つの出力端子とを有し、該制御部４８の制御に基づいて、該入力端子と、２つの出力端子のいずれかとの接続を切り換えるものである。
【００３９】
映像リスト情報埋込部４６は、制御部４８からの指示に基づいて、映像ストリームデータに映像リスト情報を埋め込むものである。つまり、映像リスト情報をＧＯＰデータにおけるユーザデータ内に書き込む。
【００４０】
また、制御部４８は、ストリーム再構成部４０における各部の動作を制御するものであり、特に、映像リスト情報記憶部６０に記憶された映像リスト情報に基づいて切換部４２、切換部４４、映像リスト情報埋込部４６の動作を制御する。
【００４１】
また、操作部５０は、映像リスト映像多重化・送信装置Ｐの操作を行うためのものであり、特に、映像リスト情報を初期設定する際には、この操作部５０が用いられる。
【００４２】
また、映像リスト情報記憶部６０は、映像リスト情報を記憶するための記憶装置である。また、送信部７０は、上記ストリーム再構成部４０において再構成されたＭＰＥＧストリームを送信する送信装置である。
【００４３】
さらに、主制御部８０は、上記映像多重化・送信装置Ｐにおける各部の動作を制御する制御装置である。
【００４４】
なお、上記映像多重化・送信装置Ｐを構成する上記各部については、上記のように各機能を有する装置として構成してもよいし、一部の構成を所定の処理を実行するためのプログラムと、該プログラムに基づき処理を実行するＣＰＵにより構成してもよい。
【００４５】
つまり、一部の構成を所定の処理を実行するためのプログラムと、該プログラムに基づき動作するＣＰＵにより構成する場合には、上記分割部３０や、ストリーム再構成部４０や、主制御部８０を、分割部３０が行なう処理を実行するためのプログラムや、ストリーム再構成部４０が行なう処理を実行するためのプログラムと、主制御部８０が行なう処理を実行するためのプログラムと、ＣＰＵにより構成することが考えられる。
【００４６】
なお、上記の説明では、入力部１０において入力部が４つ設けられている等、４つの映像データを多重化できるように構成されているが、４つには限られず、２以上の映像データが多重化できる構成であればよい。つまり、ｎ個（ｎは２以上）の映像データを多重化する場合には、入力部１０における入力部や、記憶部２０における記憶部や、分割部３０における分割部や、切換部４２の入力端子はｎ個設けられたものとなる。
【００４７】
次に、映像受信・表示装置Ｑの構成について説明する。映像受信・表示装置Ｑは、図２に示すように、受信部１００と、復号処理部１１０と、表示部１２０と、記憶部１３０と、監視部１４０と、操作部１５０と、主制御部１６０とを有している。
【００４８】
ここで、上記受信部１００は、上記映像多重化・送信装置Ｐにおける送信部７０から送信されたＭＰＥＧストリームを受信する受信装置である。
【００４９】
また、復号処理部１１０は、受信部１００で受信されたＭＰＥＧストリームを復号する復号装置である。
【００５０】
また、表示部１２０は、復号処理部１１０で復号処理されたＭＰＥＧストリームに基づいて、複数の映像データを同時に表示する表示装置であり、切換部１２２と、個別表示部１２４ａ、１２４ｂ、１２４ｃ、１２４ｄを有している。
【００５１】
ここで、該切換部１２２は、１つの入力端子と、個別表示部１２４ａ〜１２４ｄにおける各個別表示部に対応した４つの出力端子とを有し、該監視部１４０の制御に基づいて、該入力端子と、４つの出力端子のいずれかとの接続を切り換えるものである。
【００５２】
また、個別表示部１２４ａ〜１２４ｄは、表示画面における表示領域を示すものであり、映像データを表示する際に、図３に示すように、１つの表示画面Ｍに、個別表示部１２４ａと個別表示部１２４ｂと個別表示部１２４ｃと個別表示部１２４ｄの各表示領域が設けられる。ここで、個別表示部１２４ａは、記憶部２０ａに記憶された映像データに対応し、個別表示部１２４ｂは、記憶部２０ｂに記憶された映像データに対応し、個別表示部１２４ｃは、記憶部２０ｃに記憶された映像データに対応し、個別表示部１２４ｄは、記憶部２０ｄに記憶された映像データに対応している。
【００５３】
また、記憶部１３０は、主として、映像リスト情報を記憶するための記憶装置である。
【００５４】
また、監視部１４０は、復号処理部１１０において復号されたデータを監視する機能を有する装置であり、主として、ＧＯＰの開始を検出した場合には、これを表示部１２０に通知したり、映像リスト情報を検出した場合には、これを記憶部１３０に記憶する機能を有している。
【００５５】
また、操作部１５０は、上記映像受信・表示装置Ｑの操作を行うためのものである。また、主制御部１６０は、上記映像受信・表示装置Ｑにおける各部の動作を制御するためのものである。
【００５６】
なお、上記映像受信・表示装置Ｑを構成する上記各部については、上記のように各機能を有する装置として構成してもよいし、一部の構成を所定の処理を実行するためのプログラムと、該プログラムに基づき処理を実行するＣＰＵにより構成してもよい。
【００５７】
つまり、一部の構成を所定の処理を実行するためのプログラムと、該プログラムに基づき動作するＣＰＵにより構成する場合には、上記復号処理部１１０や、切換部１２２と個別表示部１２４ａ〜１２４ｄや、監視部１４０や、主制御部１６０を、復号処理部１１０が行なう処理を実行するためのプログラムや、切換部１２２と個別表示部１２４ａ〜１２４ｄが行なう処理を実行するためのプログラムと、監視部１４０が行なう処理を実行するためのプログラムと、主制御部１６０が行なう処理を実行するためのプログラムと、ＣＰＵにより構成することが考えられる。
【００５８】
なお、図２に示す構成は、切換部１２２における出力端子が４つ設けられ、個別表示部も４つ設けられていて、４つの映像データが多重化されたデータを復号して表示できるように構成されているが、４つには限られず、２以上の映像データが多重化できる構成であればよい。つまり、ｎ個（ｎは２以上）の映像データを多重化する場合には、切換部１２２における出力端子や、個別表示部は、ｎ個設けられたものとなる。
【００５９】
上記構成の映像データ多重化送受信システムの動作について説明する。まず、映像多重化・送信装置Ｐの動作について図５等を使用して説明する。
【００６０】
記憶部２０における各記憶部２０ａ〜２０ｄには、それぞれ映像データが記憶されているものとする。この映像データは、ＭＰＥＧ符号化された映像ストリームである。各記憶部に記憶されている映像データは、それぞれ単独で１つのコンテンツをなすものであり、それぞれ入力部から映像データを入力することにより、各記憶部に記憶されたものである。
【００６１】
そして、ユーザは操作部５０を用いて多重化する映像データの数についての情報を入力する。入力部２０ａ〜２０ｄに映像データが記憶されている場合には、映像データの数は４となるので、４つである旨の情報を入力する。すると、主制御部８０は、映像リスト情報を設定する（Ｓ１０）。つまり、入力された映像データの数についての情報に基づき、映像リスト情報を該映像リスト情報記憶部６０に書き込む。ここで、映像リスト情報としては、映像データを再構成する際の映像データの順序を示す情報とし、例えば、記憶部２０ａに記憶された映像データをＡ、記憶部２０ｂに記憶された映像データをＢ、記憶部２０ｃに記憶された映像データをＣ、記憶部２０ｄに記憶された映像データをＤとした場合には、「Ａ、Ｂ、Ｃ、Ｄ」という内容の情報となる。この「Ａ、Ｂ、Ｃ、Ｄ」は、Ａから順にＢ→Ｃ→Ｄというようにその順番も規定している。この映像リスト情報における各データ、つまり、映像リスト情報「Ａ、Ｂ、Ｃ、Ｄ」における「Ａ」、「Ｂ」、「Ｃ」、「Ｄ」の各データを映像リスト情報におえる個別データとする。
【００６２】
なお、仮に、記憶部２０ａ、記憶部２０ｂ、記憶部２０ｃのみに映像データが記憶されて、３つの映像データを多重化する場合には、映像リスト情報は「Ａ、Ｂ、Ｃ」となる。この映像リスト情報が、上記順序情報に当たる。
【００６３】
また、上記ユーザの入力操作により、映像多重化・送信装置Ｐ全体の動作が開始され、分割部３０ａ〜３０ｄは、それぞれ対応する記憶部に記憶された映像データをＧＯＰ単位で分割する処理を行う。具体的には、映像データにおいてＧＯＰヘッダを検出していくことにより、ＧＯＰごとに分割を行う。つまり、分割部３０ａ〜３０ｄは、上記分割手段として機能する。
【００６４】
また、制御部４８は、映像リスト情報６０に書き込まれた映像リスト情報を読み出して、この映像リスト情報に基づき映像種別を設定する。この映像種別の設定に際しては、ストリーム再構成部４０における切換部４２を設定するとともに、切換部４４の設定も行なう（Ｓ１１）。切換部４２の設定は、映像リスト情報の最初の情報に基づいて行う。つまり、映像リスト情報は「Ａ、Ｂ、Ｃ、Ｄ」となっている場合には、最初の情報はＡであるので、このＡに対応する記憶部２０ａ側、つまり、分割部３０ａ側に切換えを行なう。また、１番目のＧＯＰに、映像リスト情報を埋め込むために、切換部４４は、映像リスト情報埋込部４６側に切り換える。
【００６５】
そして、切換部４２は、分割部３０ａから最初のＧＯＰデータを読み出し、切換部４４を介して、映像リスト情報埋込部４６に送る。映像リスト情報埋込部４６では、制御部４８を介して映像リスト情報記憶部６０から映像リスト情報が送られるので、この映像リスト情報を該ＧＯＰデータにおけるユーザデータに埋め込む（Ｓ１２）。つまり、映像リスト情報埋込部４６が、上記順序情報付加手段として機能する。
【００６６】
映像リスト情報の埋込みが行われると、送信部７０に該ＧＯＰデータが読み出されて、送信部７０により受信側に送信される。
【００６７】
次に、映像リスト情報に従って、映像種別を切り換える（Ｓ１４）。つまり、映像リスト情報における個別データＡの次の個別データはＢであるので、制御部４８は、切換部４２を記憶部２０ｂ側、つまり、分割部３０ｂになるように切換え制御する。また、このステップＳ１４では、切換部４４は、映像リスト情報埋込部４６側とは異なる側に切り換える。この切換部４２、４４における設定は、制御部４８により行われる。
【００６８】
そして、切り換えた映像データについて、ＧＯＰデータが終了したか否かを判定して、終了した場合にはステップＳ１６に移行し、終了していない場合には、ステップＳ１３に戻る。ここで、ＧＯＰデータが終了したか否かについては、切換部４２が切換え後の分割部からＧＯＰデータを読み出すことができるか否かにより判定し、その判定結果は制御部４８に送られる。
【００６９】
上記のように、ストリーム再構成部４０や送信部７０は、映像リスト情報に従って、ＧＯＰデータごとに順番に送信する処理を繰り返すことにより、複数の映像データを多重化データに再構成して送信している。つまり、ストリーム再構成部４０や送信部７０は、上記映像データ再構成・送信手段として機能する。
【００７０】
そして、ステップＳ１５の判定において、切り換えた映像データについて、ＧＯＰが終了している場合には、映像リスト情報記憶部６０に記憶されている映像リスト情報を更新する。つまり、映像リスト情報記憶部６０に記憶されている映像リスト情報を削除して、新たな映像リスト情報を記憶させる。この映像リスト情報の更新は、上記制御部４８により行われる。ここで、新たな映像リスト情報の内容としては、ＧＯＰデータが終了した映像データに対応する個別データを削除するとともに、削除した個別データの次の順番の個別データが先頭になるようにし、また、削除した個別データの前位置に個別データがある場合で、かつ、削除した個別データの次の個別データがある場合には、該削除した個別データの前位置にある個別データはその順番で、最後位置の個別データの後ろになるようにする。例えば、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」となっている場合に、個別データＢに対応する映像データのＧＯＰデータが終了した場合には、「Ｃ、Ｄ、Ａ」とする。また、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」となっている場合に、個別データＣに対応する映像データのＧＯＰデータが終了した場合には、「Ｄ、Ａ、Ｂ」とする。また、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」となっている場合に、個別データＡに対応する映像データのＧＯＰデータが終了した場合には、「Ｂ、Ｃ、Ｄ」とする。また、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」となっている場合に、個別データＤに対応する映像データのＧＯＰデータが終了した場合には、「Ａ、Ｂ、Ｃ」とする。
【００７１】
そして、映像リスト情報記憶部６０が空になったか否かが判定される（Ｓ１７）。つまり、ステップＳ１６の処理を行う前の段階で映像リスト情報に１つのデータのみが含まれていた場合には、これを削除することにより、映像リスト情報記憶部６０が空になる。映像リスト情報記憶部６０が空になった場合には、一連の処理を終了し、空になっていない場合には、ステップＳ１１に戻る。
【００７２】
この図５のフローチャートに示す処理を具体的に説明すると、以下のようになる。図７（ａ）に示すように、映像データＡがＧＯＰデータＡ１〜ＧＯＰデータＡｎ＋１で構成され、映像データＢがＧＯＰデータＢ１〜ＧＯＰデータＢｎで構成され、映像データＣがＧＯＰデータＣ１〜ＧＯＰデータＣｎ＋２で構成され、映像データＤがＧＯＰデータＤ１〜ＧＯＰデータＤｎ＋３で構成されている場合に、これらを多重化するものとする。
【００７３】
すると、最初に映像リスト情報記憶部６０に記憶される映像リスト情報としては、「Ａ、Ｂ、Ｃ、Ｄ」が記憶され（Ｓ１０）、まず、切換部４２が分割部３０ａ側に切り換えられ、また、切換部４４が映像リスト情報埋込部４６側に切り換えられて（Ｓ１１）、ＧＯＰデータＡ１のユーザデータに映像リスト情報が埋め込まれた上で（Ｓ１２）、ＧＯＰデータＡ１が受信側に送信される（Ｓ１３）。
【００７４】
次には、切換部４２を分割部３０ｂ側に切り換えるとともに、切換部４４を映像リスト情報埋込部４６側とは異なる側、つまり、送信部７０に直接接続される側に切り換える（Ｓ１４）。そして、映像データＢはまだ終了していないので、ステップＳ１５からステップＳ１３に戻って、今後は、映像データＢにおけるＧＯＰデータＢ１が送信される。次には、分割部３０ｃ側に切り換えられて（Ｓ１４）、映像データＣにおけるＧＯＰデータＣ１が送信される。次には、分割部３０ｄ側に切り換えられて（Ｓ１４）、映像データＤにおけるＧＯＰデータＤ１が送信される。そして、次には、映像リスト情報「Ａ、Ｂ、Ｃ、Ｄ」において、個別データＤの次は個別データＡとなるので、再び切換部４２を分割部３０ａ側に切り換えて、映像データＡにおけるＧＯＰデータＡ２が送信される。このように、映像データＡ→映像データＢ→映像データＣ→映像データＤ→映像データＡ・・・の順序でＧＯＰデータごとに送信されていく。
【００７５】
そして、ＧＯＰデータＡｎ＋１の送信が終了すると（Ｓ１３）、映像リスト情報「Ａ、Ｂ、Ｃ、Ｄ」に従って切換部４２は分割部３０ｂ側に切り換えられるが、切り換えた映像データ、つまり、映像データＢは終了しているので、ステップＳ１６に移行し、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」から「Ｃ、Ｄ、Ａ」に更新され（Ｓ１６）、ステップＳ１１に戻る。そして、更新された映像リスト情報「Ｃ、Ｄ、Ａ」に従って、切換部４２は分割部３０ｃに切り換えられ、また、切換部４４も映像リスト情報埋込部４６に切り換えられて、ＧＯＰデータＣｎ＋１のユーザデータに更新された映像リスト情報が埋め込まれて、該ＧＯＰデータＣｎ＋１が送信される。
【００７６】
その後、ＧＯＰデータＤｎ＋１も送信されるが、その後に切り換えた映像データＡも終了しているので（Ｓ１５）、今後は、映像リスト情報が「Ｃ、Ｄ」に更新されて、更新された映像リスト情報がＧＯＰデータＣｎ＋２に埋め込まれて送信される。
【００７７】
その後、ＧＯＰデータＤｎ＋２も送信されるが、その後に切り換えた映像データＣも終了しているので（Ｓ１５）、今後は、映像リスト情報が「Ｄ」に更新されて、更新された映像リスト情報がＧＯＰデータＤｎ＋３に埋め込まれて送信される。
【００７８】
そして、ＧＯＰデータＤｎ＋３の送信が終わると、映像データＤのデータは終了するので（なお、ステップＳ１４で、映像リスト情報に個別データが１つしかない場合には、その個別データが示すデータを映像種別とすることになる）、ステップＳ１５からステップＳ１６に移行し、ステップＳ１６で、個別データＤを削除することにより、映像リスト情報記憶部６０が空になるので、処理を終了することになる。
【００７９】
以上のようにして、映像多重化・送信装置Ｐにおいて各映像データが多重化されて、多重化映像データが受信側に送信される。
【００８０】
なお、図１に示す構成では、最大４つの映像データを多重化することができるが、図１の構成において、４つよりも少ない数の映像データを多重化するようにしてもよい。
【００８１】
次に、映像受信・表示装置Ｑにおける動作を説明する。映像多重化・送信装置Ｐから送信された多重化映像データは受信部１００において受信され、復号処理部１１０に送られる。
【００８２】
復号処理部１１０では、順次送られてくるＧＯＰデータの開始位置を検出するとともに、各ＧＯＰデータの復号処理を行っていく。つまり、まず、ＧＯＰの開始位置を検出していき（Ｓ２０）、ＧＯＰデータの開始位置が検出された場合には、ステップＳ２１に移行し、そうでない場合には、ステップＳ２６に移行する。
【００８３】
そして、そのＧＯＰデータの中に、映像リスト情報があるか否かが判定される（Ｓ２１）。これは以下のようにして行なう。つまり、復号処理部１１０によりユーザデータがあるか否かが検出されて、ユーザデータがある場合には、ユーザデータを復号した結果を監視部１４０に送る。監視部１４０は、該復号結果に基づいて映像リスト情報であるか否かを判定する。
【００８４】
そして、映像リスト情報がある場合には、監視部１４０は、映像リスト情報を記憶部１３０に格納し（Ｓ２２）、表示部１２０における映像種別をリセットする（Ｓ２３）。このステップＳ２３において、すでに映像リスト情報が映像リスト情報記憶部１３０に記憶されている場合には、新たな映像リスト情報に書き換えることになる。また、ステップＳ２３での表示部１２０における映像種別のリセットにおいては、表示部１２０における切換部１２２を、映像リスト情報が示す最初の個別データに対応する位置に切り換える。例えば、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」の場合には、個別データＡに対応する個別表示部１２４ａ側に切り換える。なお、この場合、上記復号処理部１１０、監視部１４０は、上記抽出手段として機能する。
【００８５】
一方、ステップＳ２１において、映像リスト情報が検出されなかった場合には、すでに記憶部１３０に記憶されている映像リスト情報に従って映像種別を切り換える（Ｓ２４）。つまり、監視部１４０は、切換部１２２における切換え位置と映像リスト情報とを比較し、その切換え位置に対応する個別データの次の個別データに対応する切換え位置に切り換える。例えば、切換部１２２における切換え位置が映像データＡに対応する個別表示部１２４ａ側である場合で、映像リスト情報が「Ａ、Ｂ、Ｃ、Ｄ」の場合には、個別データＡの次の個別データである個別データＢに対応する個別表示部１２４ｂ側に切換えを行なう。
【００８６】
そして、ステップＳ２３及びステップＳ２４の次には、ステップＳ２５に移行して、対象となるＧＯＰデータの映像データを復号して、その映像種別に対応する表示位置に表示する（Ｓ２５）。つまり、対象となるＧＯＰデータの映像データを復号処理部１１０において復号し、復号された映像データを表示部１２０に送る。表示部１２０においては、切換部１２２の切換え状態に従って、所定の個別表示部に映像データが送られて表示される。この場合、上記復号処理部１１０が上記復号手段として機能し、上記表示部１２０が上記表示手段として機能する。
【００８７】
そして、データが終了したか否かが判定されて（Ｓ２６）、終了していない場合には、ステップＳ２０に戻り、終了している場合には、全体の処理を終了する。
【００８８】
なお、上記ステップＳ２３、Ｓ２４のように、上記監視部１４０が記憶部１３０に記憶された映像リスト情報に従って、切換部１２２を切換え制御している。つまり、上記監視部１４０や記憶部１３０は、上記制御手段として機能する。
【００８９】
この図６のフローチャートに示す処理を具体的に説明すると、以下のようになる。図７（ｂ）に示すような多重化映像データが、映像多重化・送信装置Ｐから送られると、受信部１００において受信される。
【００９０】
そして、ＧＯＰデータＡ１が復号処理部１１０に入力されると、映像リスト情報がＧＯＰデータＡ１に含まれているので（Ｓ２１）、映像リスト情報が映像リスト情報記憶部６０に記憶される（Ｓ２２）。つまり、この時点では、「Ａ、Ｂ、Ｃ、Ｄ」の映像リスト情報が記憶される。そして、切換部１２２は個別表示部１２４ａ側に切り換えられ（Ｓ２３）、該ＧＯＰデータＡ１の映像データが復号されて、表示部１２０では、個別表示部１２４ａに表示される（Ｓ２４）。
【００９１】
次に、ＧＯＰデータＢ１が復号処理部１１０に入力されると、このＧＯＰデータＢ１には、映像リスト情報が含まれていないため、映像リスト情報に従って切換部１２２が個別表示部１２４ｂ側に切り換えられた上で（Ｓ２４）、ＧＯＰデータＢ１が復号されて、個別表示部１２４ｂに表示される（Ｓ２５）。
【００９２】
以下同様に、入力されるＧＯＰデータが対応する個別表示部に表示されていく。例えば、ＧＯＰデータＣ１は、個別表示部１２４ｃに表示され、ＧＯＰデータＤ１は、個別表示部１２４ｄに表示され、ＧＯＰデータＡ２は、個別表示部１２４ａに表示されていく。このようにして、映像データＡは個別表示部１２４ａに表示され、映像データＢは個別表示部１２４ｂに表示され、映像データＣは個別表示部１２４ｃに表示され、映像データＤは個別表示部１２４ｄに表示されていく。
【００９３】
なお、図７の例で、ＧＯＰデータＣｎ＋１が入力された際には、映像リスト情報「Ｃ、Ｄ、Ａ」が含まれているので（Ｓ２１）、この新たな映像リスト情報に記憶内容が更新され（Ｓ２２）、切換部１２２も個別表示部１２４ｃ側に切り換えられる（Ｓ２３）。そして、ＧＯＰデータＣｎ＋１における映像データが復号されるので、これを個別表示部１２４ｃに表示するのである。その後は、ＧＯＰデータＤｎ＋１が復号されて個別表示部１２４ｄ表示される（Ｓ２４、Ｓ２５）。
【００９４】
さらに、ＧＯＰデータＣｎ＋２が入力された際には、映像リスト情報「Ｃ、Ｄ」が含まれているので（Ｓ２１）、この新たな映像リスト情報に記憶内容が更新され（Ｓ２２）、切換部１２２も個別表示部１２４ｃ側に切り換えられて（Ｓ２３）。ＧＯＰデータＣｎ＋２における映像データが個別表示部１２４ｃに表示されるのである（Ｓ２５）。その後は、ＧＯＰデータＤｎ＋２が復号されて個別表示部１２４ｄに表示される（Ｓ２４、Ｓ２５）。
【００９５】
さらに、ＧＯＰデータＤｎ＋３が入力された際には、映像リスト情報「Ｄ」が含まれているので（Ｓ２１）、この新たな映像リスト情報に記憶内容が更新され（Ｓ２２）、切換部１２２も個別表示部１２４ｄ側に切り換えられて（Ｓ２３）。ＧＯＰデータＤｎ＋３における映像データが個別表示部１２４ｄに表示されるのである。その後は、ＧＯＰデータＤｎ＋２が復号されて個別表示部１２４ｄ表示される（Ｓ２４、Ｓ２５）。
【００９６】
以上のように、本実施例の映像データ多重化送受信システムにおいては、複数の映像データにおける各映像データをＧＯＰ単位で分割して、該複数の映像データに予め設定された順番を示す映像リスト情報に従って、各ＧＯＰデータを該映像リスト情報とともに順次送信し、受信側では、送信されるＧＯＰデータを順次復号するとともに、該映像リスト情報に従って、複数の表示領域に表示していくので、復号に必要なバッファをそれぞれ設ける必要がなく、システム全体の小型化を図ることができ、それにより低コストの要請にも応えることができる。また、バッファをそれぞれ設ける必要がないため、バッファ切換え処理の制御が煩雑になることがない。
【００９７】
なお、上記の説明では、映像リスト情報をＧＯＰデータ内に埋め込んで送信し、いずれかの映像データが終了した場合には、映像リスト情報を更新して再度送信するものとして説明したが、各ＧＯＰデータのそれぞれに映像種別を示す情報を埋め込んで送信し、受信側では、該映像種別を示す情報に従って、所定の個別表示部に表示するようにしてもよい。
【００９８】
つまり、図８に示すように、各ＧＯＰデータにおけるユーザデータに、映像種別を示す情報を埋め込んで受信側に送信する。例えば、図７（ａ）の例では、ＧＯＰデータＡ１のユーザデータに映像データＡである旨の情報を書き込んだ上で該ＧＯＰデータＡ１を送信し、次には、ＧＯＰデータＢ１のユーザデータに映像データＢである旨の情報を書き込んだ上で該ＧＯＰデータＢ１を送信し、次には、ＧＯＰデータＣ１のユーザデータに映像データＣである旨の情報を書き込んだ上で該ＧＯＰデータＣ１を送信し、次には、ＧＯＰデータＤ１のユーザデータに映像データＤである旨の情報を書き込んだ上で該ＧＯＰデータＤ１を送信する。ＧＯＰデータＤ１の次には、ＧＯＰデータＡ２のユーザデータに映像データＡである旨の情報を書き込んだ上で該ＧＯＰデータＡ１を送信する。以下同様に、各ＧＯＰデータのユーザデータに映像種別を示す情報を書き込んで順番に映像データＡのＧＯＰデータ→映像データＢのＧＯＰデータ→映像データＣのＧＯＰデータ→映像データＤのＧＯＰデータの順番に送信する手順を繰り返していく。
【００９９】
このように各ＧＯＰデータのユーザデータに映像種別を示す情報を書き込む場合には、映像多重化・送信装置の構成は以下のようになるといえる。つまり、図１に示す構成と概ね同様の構成であるが、ストリーム再構成部４０には、切換部４２と、切換部４２からのデータを受信する映像種別情報埋込部と、切換部４２と映像種別情報埋込部とを制御する制御部が設けられているとともに、映像リスト情報記憶部６０の代わりに、各映像種別を示す情報を記憶する記憶部が設けられていて、該映像種別情報埋込部は、該記憶部から読み出した情報に基づいて、各ＧＯＰデータのユーザデータに、映像種別を示す情報を書き込んで送信部７０に送ることになる。この場合、該映像種別情報埋込部が、上記種別情報付加手段に当たる。また、受信側においては、図２における監視部１４０が各ＧＯＰデータにおけるユーザデータの内容を検出して、検出結果に従って切換部１２２を切り換えればよいことになる。例えば、映像データＡである旨の情報が検出された場合には、切換部１２２を個別表示部１２４ａ側に切り換え、また、映像データＢである旨の情報が検出された場合には、切換部１２２を個別表示部１２４ｂ側に切り換えるようにする。
【０１００】
また、上記図８の例では、各ＧＯＰデータにおけるユーザデータに映像種別を示す情報を書き込むものとして説明したが、ユーザデータではなく、各ＧＯＰデータにおける映像データ自体に、映像種別を示す情報としての画像データを書き込んで送信するようにしてもよい。この場合には、図９に示すように、映像種別を識別できるような識別画像を書き込んでおく。つまり、映像データの種別の数に応じて、異なる識別画像を書き込むようにする。
【０１０１】
このようにＧＯＰデータの映像データに識別画像を書き込む場合には、映像多重化・送信装置の構成は上記各ＧＯＰデータのユーザデータに映像種別を示す情報を書き込む場合の構成と略同様であるが、映像リスト情報記憶部の代わりに、各識別画像の情報を記憶する記憶部が設けられ、また、映像種別情報埋込部の代わりに、識別画像情報埋込部が設けられ、該識別画像情報埋込部が、各ＧＯＰデータの映像データに映像データの種別に対応する識別画像情報を埋め込むことになる。また、受信側においては、図２における監視部１４０が各ＧＯＰデータにおける識別画像情報の内容を検出して、検出結果に従って切換部１２２を切り換えればよいことになる。例えば、映像データＡである旨の識別画像情報が検出された場合には、切換部１２２を個別表示部１２４ａ側に切り換え、また、映像データＢである旨の識別画像情報が検出された場合には、切換部１２２を個別表示部１２４ｂ側に切り換えるようにする。
【０１０２】
【発明の効果】
本発明に基づく映像データ多重化装置、映像データ表示装置及び映像データ多重化送受信システムによれば、独立して復号可能なデータの単位、具体的には、ＧＯＰごとに映像データを受信側に送信するので、受信側では、１つの映像ストリームを復号するように処理でき、複数の映像データごとに復号に使用するバッファをそれぞれ設ける必要がなく、システム全体の小型化、低コスト化を図ることができ、複数のバッファを設けることによる煩雑な制御の必要もない。また、順序情報や種別情報に従って、表示を切り換えていくことにより、複数の映像データを同時に表示することができる。
【図面の簡単な説明】
【図１】本発明の実施例に基づく映像多重化・送信装置の構成を示すブロック図である。
【図２】本発明の実施例に基づく映像受信・表示装置の構成を示すブロック図である。
【図３】表示部における表示態様を示す説明図である。
【図４】映像リスト情報の具体例を示す説明図である。
【図５】映像多重化・送信装置の動作を説明するためのフローチャートである。
【図６】映像受信・表示装置の動作を説明するためのフローチャートである。
【図７】映像多重化・送信装置の動作の具体例を説明する説明図である。
【図８】他の実施例を説明するための説明図である。
【図９】他の実施例を説明するための説明図である。
【符号の説明】
Ｐ 映像多重化・送信装置
Ｑ 映像受信・表示装置
１０ 入力部
２０ 記憶部
３０ 分割部
４０ ストリーム再構成部
４２、４４ 切換部
４６ 映像リスト情報埋込部
４８ 制御部
５０ 操作部
６０ 映像リスト情報記憶部
７０ 送信部
８０ 主制御部
１００ 受信部
１１０ 復号処理部
１２０ 表示部
１２２ 切換部
１２４ａ、１２４ｂ、１２４ｃ、１２４ｄ 個別表示部
１３０ 記憶部
１４０ 監視部
１５０ 操作部
１６０ 主制御部
Claims (2)
- 複数の個別表示部を備えた表示装置により同時に表示される複数の映像データを時分割多重化して送信する映像送信装置であって、
前記複数の映像データのそれぞれを入力する複数の入力手段と、
前記複数の入力手段から入力されたそれぞれの映像データを、独立して復号可能な分割データに分割する複数の分割手段と、
前記分割データが前記複数の表示部のいずれに表示されるべきかを示す映像リスト情報を記憶する映像リスト情報記憶手段と、
前記複数の分割手段のうち、１の分割手段から出力された分割データを前記映像リスト情報に基づいて選択し、選択した分割データを出力する切替手段と、
前記切替手段から出力されたデータに前記映像リスト情報を埋め込む映像リスト情報埋め込み手段と、
前記映像リスト情報埋め込み手段により、映像リスト情報が埋め込まれたデータを送信する送信手段を備えることを特徴とする、映像送信装置。 - 請求項１に記載の映像送信装置により送信されたデータを受信する映像受信装置であって、
前記映像送信装置からのデータを受信する受信手段と、
複数の個別表示部を備えた表示手段と、
前記受信手段が受信したデータから分割データと映像リスト情報を抽出する抽出手段と、
前記抽出手段で抽出した分割データを、前記抽出手段で抽出した映像リスト情報に基づいて、前記複数の個別表示部の１つに出力する切替部を備えることを特徴とする、映像受信装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002082850A JP4111732B2 (ja) | 2002-03-25 | 2002-03-25 | 映像データ多重化装置、映像データ表示装置及び映像データ多重化送受信システム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002082850A JP4111732B2 (ja) | 2002-03-25 | 2002-03-25 | 映像データ多重化装置、映像データ表示装置及び映像データ多重化送受信システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003284009A JP2003284009A (ja) | 2003-10-03 |
| JP4111732B2 true JP4111732B2 (ja) | 2008-07-02 |
Family
ID=29230879
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002082850A Expired - Fee Related JP4111732B2 (ja) | 2002-03-25 | 2002-03-25 | 映像データ多重化装置、映像データ表示装置及び映像データ多重化送受信システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4111732B2 (ja) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5047607B2 (ja) * | 2006-12-26 | 2012-10-10 | パナソニック株式会社 | ストリーム記録装置、ストリーム記録方法、記録システム、および記録再生システム |
| JP6238255B2 (ja) * | 2016-05-25 | 2017-11-29 | 株式会社Ｎｅｘｐｏｉｎｔ | 監視カメラシステムによる監視方法及び動画分割装置 |
-
2002
- 2002-03-25 JP JP2002082850A patent/JP4111732B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2003284009A (ja) | 2003-10-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN1117483C (zh) | 具有分包基本流解码器的活动图像专家组标准ⅱ系统 | |
| CA2528040C (en) | Decoding method and apparatus enabling fast channel change of compressed video | |
| US5991503A (en) | Moving picture data storing system and moving picture data decoding system | |
| US20020040481A1 (en) | Digital broadcast receiving apparatus | |
| US8594181B2 (en) | Multi-decoder and method | |
| UA124569C2 (uk) | Концепція кодування, яка дозволяє паралельну обробку даних, транспортний демультиплексор і відеобітовий потік | |
| KR20140007907A (ko) | 송신 장치, 송신 방법, 수신 장치, 수신 방법, 프로그램 및 방송 시스템 | |
| KR950022875A (ko) | 주화상에 부화상을 중첩하기 위한 다중화/디멀티플렉싱하는 방법 | |
| JPH1127641A (ja) | テレビジョン受信機 | |
| US6925097B2 (en) | Decoder, decoding method, multiplexer, and multiplexing method | |
| JPH1023375A (ja) | 順次ディジタルビデオ復号化装置 | |
| CN112995596B (zh) | 全景视频传输方法、装置、电子设备和存储介质 | |
| KR100335441B1 (ko) | 다중 비디오 디코딩 장치 및 그 방법 | |
| JP4111732B2 (ja) | 映像データ多重化装置、映像データ表示装置及び映像データ多重化送受信システム | |
| JP3591712B2 (ja) | 動画送信装置及び動画受信装置 | |
| US20020031330A1 (en) | Storage and reproduction system, transport stream storage method, and transport stream reproduction method | |
| KR100640885B1 (ko) | 듀얼 비디오 디코딩을 위한 비디오 버퍼 제어 장치 | |
| JP2001346206A (ja) | 復号装置、復号方法、多重化装置及び多重化方法 | |
| US6097758A (en) | Device for extracting parameters for decoding a video data flow coded according to an MPEG standard | |
| EP1755343A1 (en) | Signal reproducing device | |
| JP5672320B2 (ja) | デコーダ装置 | |
| KR100539524B1 (ko) | 양방향 데이터 송수신 방법 | |
| JPH11262002A (ja) | データ解析装置及びデータ解析方法 | |
| US9479823B2 (en) | Transmitting device and receiving device | |
| JP2001218190A (ja) | 遠隔監視装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20041119 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070228 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070313 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070514 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070911 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071112 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071211 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080212 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080311 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080408 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110418 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120418 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130418 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140418 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |