JP2015046708A - 通信システム、通信方法、送信側同期信号配信装置、送信側同期制御装置、受信側同期信号配信装置、受信側同期制御装置及びプログラム - Google Patents

Abstract

【課題】時間同期のための特別な制御機構の無い一般的な機器であっても、必要最低限の通信負荷で複数のメディア情報を時間同期させることができる通信システム、通信方法、送信側同期信号配信装置、送信側同期制御装置、受信側同期信号配信装置、受信側同期制御装置及びプログラムを提供することを目的とする。【解決手段】本発明は、マスタとなるメディア情報を含むＩＰパケットを受信し、時間情報をＩＰ配信する同期信号配信装置と、スレーブとなるメディア情報を含むＩＰパケットと同期信号配信装置から配信された時間情報を含むＩＰパケットを受信する同期制御装置を用いて、時間同期を実現することとした。【選択図】図７

Description

本発明は、一方の拠点で取得された映像、音声及び各種センサデータ等の複数の情報を、ＩＰネットワークを通して送信し、他方の拠点においてそれらの情報の時間的関係を正しく再現、あるいは必要に応じて制御し、処理または提示する通信システム、通信方法、送信側同期信号配信装置、送信側同期制御装置、受信側同期信号配信装置、受信側同期制御装置及びプログラムに関する。

遠隔地にいる人との間でコミュニケーションを取るために、映像と音声によって遠隔地の空間を再現することが試みられており、そのための映像コミュニケーション装置の代表例である会議システムは広く用いられている。しかし、近年ではセンサ技術の進歩により、環境内の様々な情報の取得が可能になった。さらに、これらのセンサを搭載したタブレットやスマートフォン等のスマートデバイスも急速に普及が進んでいる。以上のような背景から、今後は遠隔地とのコミュニケーションにおいて、映像と音声だけでなく各種センサの出力やデバイスに対する操作といった複数の情報を遠隔地に伝送して使用したいという要望が増えると考えられる。以降では、映像、音声、又は各種のセンサの出力又はデバイスに対する操作等の情報のことをメディア情報と呼ぶことにする。

一方の拠点から非同期網であるＩＰネットワークを通して複数のメディア情報が送信された場合、受信側ではメディア間の時間的な対応付けは失われる。一方で、複数のメディア情報を連携し何らかの処理を加える場合、あるいは複数のメディア情報を連携して提示する場合に、メディア情報間の時間的関係が正しく再現されていなければ、期待した処理の効果が得られない、不自然な提示になるといった問題が生じる。しかし、一方の拠点内で取得された映像、音声、及びセンサ出力等の複数のメディア情報を、他方の拠点に伝送した後に時間的関係を正しく再現するための汎用的な枠組みは無い。以降では、同時に取得された複数のメディア情報を同時に提示する場合だけでなく、各種のアプリケーションの必要に応じて時間差を与えて提示する等の制御を含めて時間同期と呼ぶことにする。提示を例に話を進める。

これまでの映像コミュニケーション装置においても、映像と音声の時間同期（リップシンク）は重要な設計要件であった。一般に、映像と音声で符号化や復号にかかる処理時間が異なるために、個別に符号化、伝送、及び提示したのではリップシンクが取れない。これを解決する方法として、図１のような構成でエンベッダと呼ばれる装置を用いて映像信号の中に音声を埋め込んで送る方法が挙げられる（例えば、非特許文献１を参照。）。送信側では、映像送信装置の前段にエンベッダを挿入し、映像信号に音声を埋め込む。受信側では映像受信装置の後段にディスエンベッダと呼ばれる装置を挿入し、再び映像と音声を分離する。この方法では、エンベッダからディスエンベッダまでの間で映像と音声の時間的関係を保存することができる。また、音声以外のメディア情報であってもエンベッダが対応する音声信号フォーマットに整形し、音声ケーブルを経由してエンベッダに入力すれば、音声と同様に映像信号に埋め込むことが可能である。

しかし、非特許文献１の方法ではメディア情報を取得したデバイスが音声ケーブルによってエンベッダに接続されていなければならない、メディア情報を映像と同じ経路で送らなければならないという制限がある。前者の制限はデバイスの使いやすさを著しく損ねるものであり、後者の制限はデータセンタ内のサーバといったネットワーク上に存在する計算資源を利用した処理を不可能にするものである。さらに、埋め込むメディア情報のサイズにも制約がある。

上記のような問題点を解決する方法として、メディア情報が取得された時刻を表す時間情報を利用する方法が考えられる。標準時あるいはいずれかのメディア情報を基準として、その基準に従って時間情報の打刻や、メディア情報の提示を行う。特許文献１はこのような仕組みを利用して複数の映像伝送装置の間で、再生する映像を同期させる発明である。マスタは自身が処理する映像フレームの時間情報をスレーブにＩＰ配信し、スレーブは受信した時刻情報を利用して処理フレームをマスタに同期することが可能である。

特開２０１０−２７８９８３号公報

ＳＭＰＴＥ ２９１Ｍ： Ａｎｃｉｌｌａｒｙ Ｄａｔａ Ｐａｃｋｅｔ ａｎｄ Ｓｐａｃｅ Ｆｏｒｍａｔｔｉｎｇ ＳＭＰＴＥ１２Ｍ−１、１２Ｍ−２

特許文献１の発明を映像以外のメディア情報の同期に適用するためには、全ての機器がこのような外部からＩＰ配信された時間情報を利用して自身を制御する機構を有していることが求められる。しかし、全ての機器が当該機構を有しているわけではなく、特にハードウェアで実現された装置にそのような機能を追加することは非常に困難である。また、計算処理能力の低いスマートデバイス等へ適用する場合を考慮すると、時間同期のための処理負荷は低く抑えることが必要である。つまり、特許文献１の発明には、すでに設置されている時間同期のための特別な制御機構の無い一般的な機器に適用できず、計算処理能力の低いスマートデバイス等へ適用が困難という課題がある。

そこで、本発明は、時間同期のための特別な制御機構の無い一般的な機器であっても、必要最低限の通信負荷で複数のメディア情報を時間同期させることができる通信システム、通信方法、送信側同期信号配信装置、送信側同期制御装置、受信側同期信号配信装置、受信側同期制御装置及びプログラムを提供することを目的とする。

上記目的を達成するために、本発明は、マスタとなるメディア情報を含むＩＰパケットを受信し、時間情報をＩＰ配信する同期信号配信装置と、スレーブとなるメディア情報を含むＩＰパケットと同期信号配信装置から配信された時間情報を含むＩＰパケットを受信する同期制御装置を用いて、時間同期を実現することとした。

具体的には、本発明に係る通信システムは、
第１メディア情報を受け取り、前記第１メディア情報に時間情報が含まれる場合は前記時間情報を第１時間情報として維持し、前記第１メディア情報に時間情報が含まれない場合は新たに第１時間情報を付与し、前記第１メディア情報をネットワークに送信する送信側同期信号配信装置と、
前記第１メディア情報に関連する第２メディア情報を受け取り、前記送信側同期信号配信装置から受け取った前記第１メディア情報の前記第１時間情報に関連する第２時間情報を前記第２メディア情報に付して前記ネットワークに送信する送信側同期制御装置と、
前記ネットワークから前記第１メディア情報を受信し、前記第１メディア情報に付与されている前記第１時間情報を抽出した後、前記第１メディア情報を第１端末へ出力する受信側同期信号配信装置と、
前記受信側同期信号配信装置から受け取った前記第１時間情報に基づいて、第２端末で提示する前記第２メディア情報と前記第１端末で提示する前記第１メディア情報とを同期させるための、前記第２メディア情報を出力する第３時間情報を生成し、前記ネットワークから受信する前記第２メディア情報に付されている前記第２時間情報と前記第３時間情報とを比較して前記第２メディア情報を第２端末へ出力する受信側同期制御装置と、
を備える。

また、本発明に係る通信方法は、
送信側同期信号配信装置で、第１メディア情報を受け取り、前記第１メディア情報に時間情報が含まれる場合は前記時間情報を第１時間情報として維持し、前記第１メディア情報に時間情報が含まれない場合は新たに第１時間情報を付与し、前記第１メディア情報をネットワークに送信する送信側同期信号配信手順と、
送信側同期制御装置で、前記第１メディア情報に関連する第２メディア情報を受け取り、前記送信側同期信号配信装置から受け取った前記第１メディア情報の前記第１時間情報に関連する第２時間情報を前記第２メディア情報に付して前記ネットワークに送信する送信側同期制御手順と、
受信側同期信号配信装置で、前記ネットワークから前記第１メディア情報を受信し、前記第１メディア情報に付与されている前記第１時間情報を抽出した後、前記第１メディア情報を第１端末へ出力する受信側同期信号配信手順と、
受信側同期制御装置で、前記受信側同期信号配信装置から受け取った前記第１時間情報に基づいて、第２端末で提示する前記第２メディア情報と前記第１端末で提示する前記第１メディア情報とを同期させるための、前記第２メディア情報を出力する第３時間情報を生成し、前記ネットワークから受信する前記第２メディア情報に付されている前記第２時間情報と前記第３時間情報とを比較して前記第２メディア情報を第２端末へ出力する受信側同期制御手順と、
を行う。

第１メディア情報に打刻されている時間情報又は送信側で第１メディア情報に付与した時間情報に基づいて第２メディア情報を第２端末へ出力する時刻を調整することで第１メディア情報及び第２メディア情報との時間同期を実現できる。また、当該時間同期をメディア情報を生成するデバイスやメディア情報を提示するデバイスで行うのではなく、ネットワークへの送出部及びネットワークからの受信部、あるいはネットワーク内で行うため、デバイスへ新たな機能の追加が不要である。

従って、本発明は、時間同期のための特別な制御機構の無い一般的な機器であっても、必要最低限の通信負荷で複数のメディア情報を時間同期させることができる通信システム及び通信方法を提供することができる。

詳細な動作としては、本発明に係る通信システムは、
前記第１時間情報をＴ１としたとき、
前記送信側同期制御装置は、前記第１メディア情報の生成元から前記送信側同期信号配信装置に到達するまでの遅延時間ＤＭ１と前記第２メディア情報の生成元から前記送信側同期制御装置に到達するまでの遅延時間ＤＳ１との差分を補償し、前記第２時間情報をＴ１＋ＤＭ１−ＤＳ１とし、
前記受信側同期制御装置は、受信した前記第２メディア情報を一時的にメディア情報バッファ部に蓄積するとともに、前記受信側同期信号配信装置が前記第１メディア情報から抽出した前記第１時間情報Ｔ１に前記第１メディア情報が前記受信側同期信号配信装置から前記第１端末まで伝送する遅延時間ＤＭ２と前記第２メディア情報が前記受信側同期制御装置から前記第２端末まで伝送する遅延時間ＤＳ２との差分を補償した前記第３時間情報Ｔ１−ＤＭ２＋ＤＳ２を生成し、前記第２時間情報にバッファ時間を加算して前記第３時間情報の所定時間範囲内となった前記第２メディア情報を前記メディア情報バッファ部から出力させることを特徴とする。

また、本発明に係る通信方法は、
前記第１時間情報をＴ１としたとき、
前記送信側同期制御手順で、前記第１メディア情報の生成元から前記送信側同期信号配信装置に到達するまでの遅延時間ＤＭ１と前記第２メディア情報の生成元から前記送信側同期制御装置に到達するまでの遅延時間ＤＳ１との差分を補償し、前記第２時間情報をＴ１＋ＤＭ１−ＤＳ１とし、
前記受信側同期制御手順で、受信した前記第２メディア情報を一時的に前記受信側同期制御装置のメディア情報バッファ部に蓄積するとともに、前記受信側同期信号配信装置が前記第１メディア情報から抽出した前記第１時間情報Ｔ１に前記第１メディア情報が前記受信側同期信号配信装置から前記第１端末まで伝送する遅延時間ＤＭ２と前記第２メディア情報が前記受信側同期制御装置から前記第２端末まで伝送する遅延時間ＤＳ２との差分を補償した前記第３時間情報Ｔ１−ＤＭ２＋ＤＳ２を生成し、前記第２時間情報にバッファ時間を加算して前記第３時間情報の所定時間範囲内となった前記第２メディア情報を前記メディア情報バッファ部から出力させることを特徴とする。

また、本発明に係る通信システムが備える送信側同期信号配信装置、送信側同期制御装置、受信側同期信号配信装置、及び受信側同期制御装置は、それぞれ次のような構成である。

本発明に係る送信側同期信号配信装置は、
第１メディア情報を受け取り、前記第１メディア情報に第１時間情報Ｔ１が含まれる場合、前記第１時間情報を取り出す時間情報抽出部と、
前記時間情報抽出部が受け取った前記第１メディア情報に時間情報が含まれない場合、前記第１メディア情報に第１時間情報Ｔ１を付与する時間情報付与部と、
前記時間情報抽出部又は前記時間情報付与部から前記第１時間情報付の前記第１メディア情報をネットワークへ出力するメディア情報転送部と、
前記時間情報抽出部が取り出した前記第１時間情報Ｔ１又は前記時間情報付与部が付与した前記第１時間情報Ｔ１に前記第１メディア情報の生成元から前記時間情報抽出部に到達するまでの遅延時間ＤＭ１を加えて修正時間情報Ｔ１＋ＤＭ１を生成する遅延補償部と、
前記遅延補償部で生成した前記修正時間情報Ｔ１＋ＤＭ１を出力する時間情報配信部と、
を備える。

本発明に係る送信側同期制御装置は、
第２メディア情報を受け取り、第２時間情報を付与してネットワークへ送信する時間情報付与部と、
外部から修正時間情報Ｔ１＋ＤＭ１を受け取る時間情報管理部と、
前記時間情報管理部が受け取った前記時間情報Ｔ１＋ＤＭ１から前記第２メディア情報の生成元から前記時間情報付与部に到達するまでの遅延時間ＤＳ１を減算して前記第２時間情報Ｔ１＋ＤＭ１−ＤＳ１を生成する遅延補償部と、
を備える。

本発明に係る受信側同期信号配信装置は、
ネットワークから第１メディア情報を受信し、前記第１メディア情報から第１時間情報Ｔ１を抽出する時間情報抽出部と、
前記時間情報抽出部が受信した前記第１メディア情報から前記第１時間情報Ｔ１を除去する時間情報除去部と、
前記時間情報抽出部又は前記時間情報除去部が出力する前記第１メディア情報を第１端末へ出力するメディア情報転送部と、
前記時間情報抽出部が抽出した前記第１時間情報Ｔ１から、前記第１メディア情報が前記メディア情報転送部から前記第１端末まで伝送する遅延時間ＤＭ２を減算して修正時間情報Ｔ１−ＤＭ２を生成する遅延補償部と、
前記遅延補償部で生成した前記修正時間情報Ｔ１−ＤＭ２を出力する時間情報配信部と、
を備える。

本発明に係る受信側同期制御装置は、
ネットワークから第２メディア情報を受信し、前記第２メディア情報を一時保管するメディア情報バッファ部と、
前記メディア情報バッファ部が出力する前記第２メディア情報に含まれる第２時間情報を除去し、第２端末へ出力する時間情報除去部と、
外部から修正時間情報Ｔ１−ＤＭ２を受け取る時間情報管理部と、
前記時間情報管理部が受け取った前記修正時間情報Ｔ１−ＤＭ２に前記第２メディア情報が前記時間情報除去部から前記第２端末まで伝送する遅延時間ＤＳ２を加算して第３時間情報Ｔ１−ＤＭ２＋ＤＳ２を生成する遅延補償部と、
を備え、
前記メディア情報バッファ部は、前記第２時間情報にバッファ時間を加算して前記第３時間情報の所定時間範囲内となった前記第２メディア情報を出力することを特徴とする。

また、それぞれの上記装置はコンピュータとプログラムによっても実現でき、プログラムを記録媒体に記録することも、ネットワークを通して提供することも可能である。すなわち、本発明に係るそれぞれのプログラムは、コンピュータに読み取らせることでコンピュータを送信側同期信号配信装置、送信側同期制御装置、受信側同期信号配信装置、又は受信側同期制御装置として機能させることができる。

本発明は、時間同期のための特別な制御機構の無い一般的な機器であっても、必要最低限の通信負荷で複数のメディア情報を時間同期させることができる通信システム、通信方法、送信側同期信号配信装置、送信側同期制御装置、受信側同期信号配信装置、受信側同期制御装置及びプログラムを提供することができる。

本発明は、一方の拠点で取得された映像、音声、各種のセンサの出力、及びデバイスに対する操作等のメディア情報を、他方の拠点にＩＰ伝送し、時間同期を取って処理及び提示する状況において、時間同期のための特別な制御機構の無い一般的な機器にも適用可能であり、かつ要求される精度に応じて必要最低限の通信負荷で複数メディア情報の時間同期が可能な方法および装置を提供することができる。

エンベッダを用いた映像と音声の同期伝送システムの構成を説明する図である。 本発明に係る送信側同期信号配信装置を説明する図である。 本発明に係る受信側同期信号配信装置を説明する図である。 本発明に係る送信側同期制御装置を説明する図である。 本発明に係る受信側同期制御装置を説明する図である。 本発明に係る通信システムを説明する図である。 本発明に係る通信システムを説明する図である。 本発明に係る通信システムを説明する図である。 本発明に係る通信システムを説明する図である。 本発明に係る通信システムを説明する図である。 本発明に係る通信方法を説明する図である。 本発明に係る通信システムを説明する図である。

添付の図面を参照して本発明の実施形態を説明する。以下に説明する実施形態は本発明の実施例であり、本発明は、以下の実施形態に制限されるものではない。なお、本明細書及び図面において符号が同じ構成要素は、相互に同一のものを示すものとする。また、本実施形態では、第１メディア情報をマスタとなるメディア情報（マスタメディア情報）とし、第２メディア情報をスレーブとなるメディア情報（スレーブメディア情報）として説明する。

［送信側同期信号配信装置］
図２は、本実施形態の送信側同期信号配信装置１０を説明する図である。送信側同期信号配信装置１０は、
第１メディア情報を受け取り、前記第１メディア情報に第１時間情報Ｔ１が含まれる場合、前記第１時間情報を取り出す時間情報抽出部１１と、
時間情報抽出部１１が受け取った前記第１メディア情報に時間情報が含まれない場合、前記第１メディア情報に第１時間情報Ｔ１を付与する時間情報付与部１２と、
時間情報抽出部１１又は時間情報付与部１２から前記第１時間情報付の前記第１メディア情報をネットワークへ出力するメディア情報転送部１３と、
時間情報抽出部１１が取り出した前記第１時間情報Ｔ１又は前記時間情報付与部１２が付与した前記第１時間情報Ｔ１に前記第１メディア情報の生成元から時間情報抽出部１１に到達するまでの遅延時間ＤＭ１を加えて修正時間情報Ｔ１＋ＤＭ１を生成する遅延補償部１４と、
遅延補償部１４で生成した前記修正時間情報Ｔ１＋ＤＭ１を出力する時間情報配信部１５と、
を備える。

送信側同期信号配信装置１０への入力は、マスタとなるメディア情報を含むＩＰパケットである。入力されたＩＰパケットは、時間情報抽出部１１において時間情報（第１時間情報Ｔ１）を読み取られる。例えば、マスタメディア情報が映像であれば、時間情報は、ＨＤ−ＳＤＩで定められたタイムコードという形式の時刻情報とすることができる。タイムコードはカメラで付与される場合や、カメラと送信側同期信号配信装置の間に入る装置（映像コーデックなど）において付与される場合がある。時間情報を読み取ることができた場合は、時間情報を遅延補償部１４に渡し、読み取り後のＩＰパケットをメディア情報転送部１３に渡す。

一方、カメラから送信側同期信号配信装置の間でタイムコードが付与されない場合もある。この場合、タイムコードは送信側同期信号配信装置で付与することになる。つまり、時間情報抽出部１１において時間情報（第１時間情報Ｔ１）を読み取ることができなかった場合は、ＩＰパケットを時間情報付与部１２に渡す。時間情報付与部１２では時間情報（第１時間情報Ｔ１）をＩＰパケットに付与した後に、ＩＰパケットをメディア情報転送部１３に渡すと同時に、付与した時間情報を遅延補償部１４に渡す。メディア情報転送部１３は、受け取ったＩＰパケットを受信側同期信号配信装置に転送する。時間情報付与部１２が付与する時間情報は、外部の標準時に同期したものでなくてもよい。時間情報の付与の方法は、受信側同期信号配信装置で読み取り可能であればどのような方法でもよい。例えば、ＩＰペイロードの先頭にＳＭＰＴＥタイムコードを付与してもよい（例えば、非特許文献２を参照。）。

遅延補償部１４では、時間情報抽出部１１または時間情報付与部１２のいずれかから時間情報（第１時間情報Ｔ１）を受け取り、マスタメディア情報が取得されたタイミングでの時間同期を取るために、マスタメディア情報の取得から送信側同期信号配信装置１０までの遅延ＤＭ１を補償する。すなわち、遅延補償部１４に渡された時間情報をＴ１とすると。Ｔ１＋ＤＭ１を出力して時間情報配信部１５に渡す。時間情報配信部１５は、受け取った時間情報を拠点内の同期制御装置にＩＰ配信するが、要求される同期精度に応じて配信頻度を調整することによって、通信負荷を抑えることが可能である。

［受信側同期信号配信装置］
図３は、本実施形態の受信側同期信号配信装置２０を説明する図である。受信側同期信号配信装置２０は、
ネットワークから第１メディア情報を受信し、前記第１メディア情報から第１時間情報Ｔ１を抽出する時間情報抽出部２１と、
時間情報抽出部２１が受信した前記第１メディア情報から前記第１時間情報Ｔ１を除去する時間情報除去部２２と、
時間情報抽出部２１又は時間情報除去部２２が出力する前記第１メディア情報を第１端末へ出力するメディア情報転送部２３と、
時間情報抽出部２１が抽出した前記第１時間情報Ｔ１から、前記第１メディア情報がメディア情報転送部２３から前記第１端末まで伝送する遅延時間ＤＭ２を減算して修正時間情報Ｔ１−ＤＭ２を生成する遅延補償部２４と、
遅延補償部２４で生成した前記修正時間情報Ｔ１−ＤＭ２を出力する時間情報配信部２５と、
を備える。

受信側同期信号配信装置２０は送信側同期信号配信装置１０と類似した構成であるため、送信側と同じ動作をする部分の説明は省略する。送信側同期信号配信装置１０において時間情報を付与していない場合（カメラ等で時間情報が付与されている場合）は、時間情報抽出部２１からメディア情報転送部２３にＩＰパケットを渡す。送信側同期信号配信装置１０において時間情報を付与した場合は、時間情報除去部２２にＩＰパケットを渡し、付与した時間情報を除去した後にメディア情報転送部２３に渡す。

遅延補償部２４では時間情報抽出部２１で抽出された時間情報（第１時間情報Ｔ１）を受け取り、マスタメディア情報が提示されるタイミングでの同期を取るために、受信側同期信号配信装置２０からメディア情報の提示までの遅延ＤＭ２を補償する。すなわち、遅延補償部２４は、修正時間情報Ｔ１−ＤＭ２を出力して時間情報配信部２５に渡す。

［送信側同期制御装置］
図４は、本実施形態の送信側同期制御装置３０を説明する図である。送信側同期制御装置３０は、
第２メディア情報を受け取り、第２時間情報を付与してネットワークへ送信する時間情報付与部３１と、
外部から修正時間情報Ｔ１＋ＤＭ１を受け取る時間情報管理部３２と、
時間情報管理部３２が受け取った前記時間情報Ｔ１＋ＤＭ１から前記第２メディア情報の生成元から前記時間情報付与部に到達するまでの遅延時間ＤＳ１を減算して前記第２時間情報Ｔ１＋ＤＭ１−ＤＳ１を生成する遅延補償部３３と、
を備える。

送信側同期制御装置３０は、スレーブとなるメディア情報と、送信側同期信号配信装置１０からの時間情報パケットを受け取る。時間情報パケットには、修正時間情報Ｔ１＋ＤＭ１が含まれる。時間情報管理部３２は受け取った時間情報（修正時間情報Ｔ１＋ＤＭ１）を遅延補償部３３に渡す。時間情報管理部３２は、新しい時間情報パケットの到着を待つ間、自身で時間を計算し、遅延補償部３３に渡す。送信側同期信号配信装置１０とのクロックの差のために時間が経つにつれて僅かずつ誤差が蓄積するが、新しい時間情報パケットが到着すれば誤差はリセットされる。遅延補償部３３では、スレーブメディア情報取得から送信側同期制御装置３０までの遅延ＤＳ１を補償し、第２時間情報として時間情報付与部３１に渡す。すなわち、受け取った修正時間情報をＴ１＋ＤＭ１とすると、第２時間情報Ｔ１＋ＤＭ１−ＤＳ１を渡す。時間情報付与部３１では、受け取ったスレーブメディア情報パケットに第２時間情報を付与し、出力する。付与の方法については、送信側同期信号配信装置１０と同様である。

ここで、マスタメディア情報の第１時間情報Ｔ１がカメラで付与される場合は、カメラ内部の時計に従って映像フレームを撮像した時刻（タイムコード）が打刻される。送信側同期信号配信装置１０は、受け取ったマスタメディア情報の第１時間情報Ｔ１に対して、遅延ＤＭ１だけ進んだ修正時間情報Ｔ１＋ＤＭ１を配信する。このため、送信側同期制御装置３０は、マスタメディア情報である映像フレームの撮影時刻（タイムコード）を知ることができ、マスタメディアと同時に取得されたスレーブメディア情報を対応づけることが可能となる。

一方、マスタメディア情報の第１時間情報Ｔ１がカメラ以外の装置である映像コーデックや送信側同期信号配信装置１０で打刻する場合においても、カメラでの撮像から送信側同期信号配信装置１０までの遅延時間ＤＭ１が既知であれば、送信側同期制御装置３０は、マスタメディア情報である映像フレームの撮影時刻（タイムコード）を知ることができる。つまり、送信側同期制御装置３０は、送信側同期信号配信装置１０が受信したマスタメディア情報の第１時間情報や送信側同期信号配信装置１０がマスタメディア情報に付与した第１時間情報を用い、第１時間情報Ｔ１に対して、遅延ＤＭ１だけ進んだ修正時間情報Ｔ１＋ＤＭ１からマスタメディア情報が生成された時刻を知ることができる。従って、この場合も、送信側同期制御装置３０は、マスタメディア情報である映像フレームの撮影時刻（タイムコード）を知ることができ、マスタメディアと同時に取得されたスレーブメディア情報を対応づけることが可能となる。

［受信側同期制御装置］
図５は、受信側同期制御装置４０を説明する図である。受信側同期制御装置４０は、
ネットワークから第２メディア情報を受信し、前記第２メディア情報を一時保管するメディア情報バッファ部４１と、
メディア情報バッファ部４１が出力する前記第２メディア情報に含まれる第２時間情報を除去し、第２端末へ出力する時間情報除去部４２と、
外部から修正時間情報Ｔ１−ＤＭ２を受け取る時間情報管理部４３と、
時間情報管理部４３が受け取った前記修正時間情報Ｔ１−ＤＭ２に前記第２メディア情報が時間情報除去部４２から前記第２端末まで伝送する遅延時間ＤＳ２を加算して第３時間情報Ｔ１−ＤＭ２＋ＤＳ２を生成する遅延補償部４４と、
を備え、
メディア情報バッファ部４１は、前記第２時間情報にバッファ時間を加算して前記第３時間情報の所定時間範囲内となった前記第２メディア情報を出力することを特徴とする。

受信側同期制御装置４０への入力と時間情報管理部４３の動作は送信側同期制御装置３０と同じである。遅延補償部４４では、受信側同期制御装置４０からそれぞれのメディアの提示装置（第２端末）による提示までの遅延ＤＳ２を補償する。すなわち、時間情報管理部が受け取った修正時間情報をＴ１−ＤＭ２とすると、第３時間情報Ｔ１−ＤＭ２＋ＤＳ２をメディア情報バッファ部４１に渡す。

メディア情報バッファ部４１は、受け取ったスレーブメディア情報パケットを一時的に蓄積する。そして、メディア情報バッファ部４１は、スレーブメディア情報に付与されている第２時間情報Ｔ１＋ＤＭ１−ＤＳ１が遅延補償部４４から配信された第３時間情報Ｔ１−ＤＭ２＋ＤＳ２に対して一定の範囲内に入ったときに、当該スレーブメディア情報を時間情報除去部４２に転送する。なお、「一定の範囲内に入ったとき」とは、次の意味である。理想として、メディア情報バッファ部４１は、スレーブメディア情報の第２時間情報にバッファ時間を加算し、第３時間情報に一致したときに当該スレーブメディア情報を出力する。しかし、サンプリングレートの相違等を考慮して完全一致ではなく、多少の許容時間を持たせ、第２時間情報にバッファ時間を加算した時刻が第３時間情報の許容時間内に入ったときに、メディア情報バッファ部４１は当該スレーブメディア情報を出力する。

時間情報除去部４２は、送信側同期制御装置３０で付与された時間情報を取り除き、出力する。

なお、第３時間情報Ｔ１−ＤＭ２＋ＤＳ２までに転送すべきスレーブメディア情報がメディア情報バッファ部４１まで到着している必要がある。マスタメディア情報の伝送に比較的大きな遅延を要する場合（マスタメディア情報が映像の場合は、符号化と復号に数百ｍｓ以上を要する）、スレーブメディア情報がバッファ部まで到着しているものと期待できる。一方、スレーブメディア情報の処理時間等の要因でスレーブメディア情報の到着が間に合わない場合は、受信側同期信号配信装置２０の時間情報抽出部２１の前段にバッファ部を設け、マスタメディア情報の到着に遅延を挿入するといった方法によって対応可能である。

ここで、修正時間情報、第２時間情報、及び第３時間情報について補足する。
修正時間情報Ｔ１＋ＤＭ１とは、第１時間情報Ｔ１が打刻されたマスタメディア情報を送信側同期信号配信装置１０が受け取ったときに生成され、その瞬間にカメラ等のマスタメディア情報の取得装置が取得する当該マスタメディア情報に打刻されるべき時刻を意味する。
修正時間情報Ｔ１−ＤＭ２とは、第１時間情報Ｔ１が打刻されたマスタメディア情報を受信側同期信号配信装置２０が受け取ったときに生成され、マスタメディア情報の提示装置が当該マスタメディア情報を提示する時刻を意味する。
第２時間情報Ｔ１＋ＤＭ１−ＤＳ１は、送信側同期信号配信装置１０から修正時間情報Ｔ１＋ＤＭ１という時刻情報を送信側同期制御装置３０が受け取ったときに生成され、送信側同期制御装置３０がスレーブメディア情報に打刻する時刻情報である。
第３時間情報Ｔ１−ＤＭ２＋ＤＳ２は、受信側同期信号配信装置２０から修正時間情報Ｔ１−ＤＭ２という時刻情報を受け取ったときに受信側同期制御装置４０が生成し、受信側同期制御装置４０がメディア情報バッファ部４１からスレーブメディア情報の提示装置に向けて送出すべきスレーブメディア情報の時刻情報である。

［通信システム］
図６は、本実施形態の通信システム１００を説明する図である。通信システム１００は、
第１メディア情報を受け取り、前記第１メディア情報に時間情報が含まれる場合は前記時間情報を第１時間情報として維持し、前記第１メディア情報に時間情報が含まれない場合は新たに第１時間情報を付与し、前記第１メディア情報をネットワーク５０に送信する送信側同期信号配信装置１０と、
前記第１メディア情報に関連する第２メディア情報を受け取り、送信側同期信号配信装置１０から受け取った前記第１メディア情報の前記第１時間情報に関連する第２時間情報を前記第２メディア情報に付してネットワーク５０に送信する送信側同期制御装置３０と、
ネットワーク５０から前記第１メディア情報を受信し、前記第１メディア情報に付与されている前記第１時間情報を抽出した後、前記第１メディア情報を第１端末（受信装置１２０Ａ）へ出力する受信側同期信号配信装置２０と、
受信側同期信号配信装置２０から受け取った前記第１時間情報に基づいて、第２端末（受信装置１２０Ｂ）で提示する前記第２メディア情報と前記第１端末で提示する前記第１メディア情報とを同期させるための、前記第２メディア情報を出力する第３時間情報を生成し、ネットワーク５０から受信する前記第２メディア情報に付されている前記第２時間情報と前記第３時間情報とを比較して前記第２メディア情報を第２端末へ出力する受信側同期制御装置４０と、
を備える。

通信システム１００が備える送信側同期信号配信装置１０、送信側同期制御装置３０、受信側同期信号配信装置２０、及び受信側同期制御装置４０は、図２から図５で説明した装置である。

図１１は、通信システム１００が行う通信方法を説明する図である。当該通信方法は、
送信側同期信号配信装置１０で、第１メディア情報を受け取り、前記第１メディア情報に時間情報が含まれる場合は前記時間情報を第１時間情報として維持し、前記第１メディア情報に時間情報が含まれない場合は新たに第１時間情報を付与し、前記第１メディア情報をネットワーク５０に送信する送信側同期信号配信手順と、
送信側同期制御装置３０で、前記第１メディア情報に関連する第２メディア情報を受け取り、送信側同期信号配信装置１０から受け取った前記第１メディア情報の前記第１時間情報に関連する第２時間情報を前記第２メディア情報に付してネットワーク５０に送信する送信側同期制御手順と、
受信側同期信号配信装置２０で、ネットワーク５０から前記第１メディア情報を受信し、前記第１メディア情報に付与されている前記第１時間情報を抽出した後、前記第１メディア情報を第１端末（受信装置１２０Ａ）へ出力する受信側同期信号配信手順と、
受信側同期制御装置４０で、受信側同期信号配信装置２０から受け取った前記第１時間情報に基づいて、第２端末（受信装置１２０Ｂ）で提示する前記第２メディア情報と前記第１端末で提示する前記第１メディア情報とを同期させるための、前記第２メディア情報を出力する第３時間情報を生成し、前記ネットワークから受信する前記第２メディア情報に付されている前記第２時間情報と前記第３時間情報とを比較して前記第２メディア情報を第２端末へ出力する受信側同期制御手順と、
を行う。

図６では、メディアＡを基準（マスタ）として、メディアＢ（スレーブ）を同期させる場合を表している。基準となるメディアＡの送信装置１１０Ａと受信装置１２０Ａの間のＩＰ経路上に、メディア情報の時間同期を実現するための同期信号配信装置（１０，２０）を設置する。同様に、スレーブとなるメディアＢの送信装置１１０Ｂと受信装置１２０Ｂの間のＩＰ経路上に同期制御装置（３０，４０）を設置する。同期信号配信装置（１０，２０）と同期制御装置（３０，４０）は、送信側と受信側にひとつずつ設置する。同期信号配信装置（１０，２０）と同期制御装置（３０，４０）は、メディア情報の送受信装置との間の遅延揺らぎが十分小さい範囲であれば、各々の拠点内だけでなくネットワーク５０上に設置することも可能である。

（実施例１）
図７は、通信システム１００の実施例１を説明する図である。図７の通信システム１００では、前記第１時間情報をＴ１としたとき、
送信側同期制御装置３０が、前記第１メディア情報の生成元（送信装置１１０Ａ）から送信側同期信号配信装置１０に到達するまでの遅延時間ＤＭ１と前記第２メディア情報の生成元（送信装置１１０Ｂ）から送信側同期制御装置３０に到達するまでの遅延時間ＤＳ１との差分を補償し、前記第２時間情報をＴ１＋ＤＭ１−ＤＳ１とし、
受信側同期制御装置４０が、受信した前記第２メディア情報を一時的にメディア情報バッファ部に蓄積するとともに、受信側同期信号配信装置２０が前記第１メディア情報から抽出した前記第１時間情報Ｔ１に前記第１メディア情報が受信側同期信号配信装置２０から第１端末（受信装置１２０Ａ）まで伝送する遅延時間ＤＭ２と前記第２メディア情報が受信側同期制御装置４０から第２端末（受信装置１２０Ｂ）まで伝送する遅延時間ＤＳ２との差分を補償した前記第３時間情報Ｔ１−ＤＭ２＋ＤＳ２を生成し、前記第２時間情報にバッファ時間を加算して前記第３時間情報の所定時間範囲内となった前記第２メディア情報を前記メディア情報バッファ部から出力させることを特徴とする。

本実施例は、映像を基準（第１メディア情報）とし、センサの出力（第２メディア情報）を同期して提示する通信システムである。カメラとエンコーダを送信通信装置１１０Ａ、センサとＰＣを送信通信装置１１０Ｂ、デコーダと映像ディスプレイを受信装置１３０ａ、ＰＣと提示装置を受信装置１２０Ｂとしている。

エンコーダが出力する映像パケット（第１メディア情報）を送信側同期信号配信装置１０に入力する。また、センサが出力するセンサ情報（第２メディア情報）はＰＣ内のセンサ情報処理プログラムで処理された後にＩＰパケット化され、送信側同期制御装置３０に送信される。

送信側同期信号配信装置１０及び送信側同期制御装置３０は、映像パケットに対応するセンサ情報のＩＰパケットを次のように認知する。送信側同期信号配信装置１０は、カメラから送信側同期信号配信装置１０までの遅延時間ＤＭ１（例えば、「５フレーム」）を知っており、現在受信している映像パケットが「第１５フレーム目」であれば、現在カメラが撮影している映像パケットが「第２０フレーム目」であると知る。そして、その情報（修正時間情報Ｔ１＋ＤＭ１）を送信側同期制御装置３０へ通知する。同様に送信側同期制御装置３０は、センサから送信側同期制御装置３０までの遅延時間ＤＳ１（例えば、「０．３０秒」）を知っており、現在取得中のセンサ情報が現在時刻から「０．３０秒」後に到着することを知る。このため、送信側同期制御装置３０は、「第２０フレーム目」の映像パケット（時間情報［Ｔ１＋ＤＭ１］）とこのセンサ情報とを対応付けることができる。

受信側では、受信側同期信号配信装置２０の出力をデコーダに送信し、受信側同期制御装置４０の出力をＰＣ内のセンサ情報処理プログラムに出力する。映像は最終的に映像の提示装置である映像ディスプレイによって提示される。

カメラから送信側同期信号配信装置１０まで、センサから送信側同期制御装置３０までを「拠点」とする。拠点内でのネットワーク伝送遅延が無視できるほどに小さいとすると、ＤＭ１はカメラとエンコーダの遅延時間の和であり、これらの値はほぼ一定かつ製品仕様として容易に知ることができる情報である。同様にＤＭ２、ＤＳ１、ＤＳ２の値も知ることができると考えられる。正確な値がわからない場合はおおよその値で代用する。ＤＭ１は送信側同期信号配信装置１０の遅延補償部１４に予め記憶させておく。同様に、ＤＭ２は受信側同期信号配信装置２０の遅延補償部２４、ＤＳ１は送信側同期制御装置３０の遅延補償部３３、ＤＳ２は受信側同期制御装置４０の遅延補償部４４にそれぞれ予め記憶させておく。

（実施例２）
実施例１では時間同期機能を持たない一般的なメディア情報送受信装置を使用する場合の方法を説明したが、新たにメディア送受信装置を設計する場合には、同期信号配信装置や同期制御装置の機能をプログラムに組み込むことが可能である。図８は、送信側で送信側同期制御装置３０の機能を同期制御部３０ａとしてセンサ情報処理プログラムの中に組み込み、送信側タブレットデバイス６１上で動作させる場合の例である。図８では、受信側も同様に受信側同期制御装置４０の機能を同期制御部４０ａとしてセンサ情報処理プログラムの中に組み込み、送信側タブレットデバイス６２上で動作させる。送信側同期制御部３０ａにおける時間情報付与の方法が既知であれば、受信側同期制御部４０ａにおいて時間情報除去部は不要である。送信側同期信号配信装置１０及び受信側同期信号配信装置３０における時間情報のパケット送信頻度は要求される同期精度に応じて調整可能である。このため、タブレットデバイスのような計算処理能力の低いデバイスにおいても通信負荷を抑えながら時間同期させることが可能である。

（実施例３）
これまでの実施例では、メディア情報毎に別々の提示装置を使用していたが、図９に複数のメディア情報でひとつの提示装置を使用する場合の構成例を示す。この例では、映像合成部６５を有するＰＣを使用し、デコーダの出力映像を映像合成部６５に入力する。実施例１で説明したようにセンサ情報処理部が出力したセンサ情報とデコーダからの映像とは時間同期している。このため、映像合成部６５が、センサ情報と映像を合成しても映像とセンサ情報のずれはない。

（実施例４）
図１２は、本実施例の通信ネットワークを説明する図である。本実施例では、送信拠点が複数存在し、受信拠点も複数存在し、送信拠点と受信拠点とが同一のネットワーク５０で接続された構成である。送信拠点１５１は受信拠点１６１へ、送信拠点１５２は受信拠点１６２へ、送信拠点１５３は受信拠点１６３へ、それぞれ時間同期した第１メディア情報と第２メディア情報を送信することができる。

（実施例５）
図１０は、実施例５の通信システムを説明する図である。本通信システムは、複数拠点から受け取ったメディア情報を、１つの提示装置に提示する。具体的には、本通信システムは、送信拠点１５１及び送信拠点１５２がネットワーク５０を介して受信拠点１６１と接続している。それぞれの送信拠点から送信されるマスタメディア情報はともに映像であり、受信拠点１６１では送信拠点１５１からの映像を表示する映像ディスプレイ１と、送信拠点１５２からの映像を表示する映像ディスプレイ２がある。また、送信拠点１５１と送信拠点１５２は、それぞれ２つのスレーブメディア情報を送信する。

そして、受信拠点１６１では、１のマスタメディア情報とそれぞれの送信拠点から受け取ったスレーブメディア情報とを合成し、映像ディスプレイに表示する。図１０では、２つの送信拠点から受け取ったセンサ情報と一方の送信拠点の映像とを合成して映像ディスプレイに提示する。さらに、本通信システムは、受信拠点１６１で映像合成部６５の前段で双方の映像のフレームレートを揃え、デコーダ間をＧｅｎＬｏｃｋ信号で同期させる。これにより、双方の映像ディスプレイのフレームの切り替わりのタイミングまで揃えることができる。このような構成により、それぞれの送信拠点から送られてきたメディア情報の提示を時間同期することが可能である。
なお、ＧｅｎＬｏｃｋとは映像信号のフレーム切り替えタイミングを同期させるための信号である。

（効果）
本発明によって、時間同期機能を持たない一般的な送受信機器を用いる場合、新たにメディア情報の送受信機器を設計する場合の両方で、送受信機器の間でＩＰ送受信される複数のメディア情報を時間同期させることが可能となる。また、タブレットデバイスのような計算処理能力の低いデバイスにおいても通信負荷を抑えながら時間同期させることが可能である。また、ＩＰネットワーク上での遅延やジッタに影響を受けないことから、ネットワーク上の計算機を利用して何らかの処理をする場合でも、提示時の時間同期を取ることが可能である。

１０：送信側同期信号配信装置
１１：時間情報抽出部
１２：時間情報付与部
１３：メディア情報転送部
１４：遅延補償部
１５：時間情報配信部
２０：受信側同期信号配信装置
２１：時間情報抽出部
２２：時間情報除去部
２３：メディア情報転送部
２４：遅延補償部
２５：時間情報配信部
３０：送信側同期制御装置
３０ａ：同期制御部
３１：時間情報付与部
３２：時間情報管理部
３３：遅延補償部
４０：受信側同期制御装置
４０ａ：同期制御部
４１：メディア情報バッファ部
４２：時間情報除去部
４３：時間情報管理部
４４：遅延補償部
５０：ネットワーク
６１、６２：タブレット
６５：映像合成部
１００：通信システム
１１０Ａ、１１０Ｂ：送信装置
１２０Ａ、１２０Ｂ：受信装置
１５１，１５２，１５３：送信拠点
１６１，１６２，１６３：受信拠点

Claims (12)

1. 第１メディア情報を受け取り、前記第１メディア情報に時間情報が含まれる場合は前記時間情報を第１時間情報として維持し、前記第１メディア情報に時間情報が含まれない場合は新たに第１時間情報を付与し、前記第１メディア情報をネットワークに送信する送信側同期信号配信装置と、
   前記第１メディア情報に関連する第２メディア情報を受け取り、前記送信側同期信号配信装置から受け取った前記第１メディア情報の前記第１時間情報に関連する第２時間情報を前記第２メディア情報に付して前記ネットワークに送信する送信側同期制御装置と、
   前記ネットワークから前記第１メディア情報を受信し、前記第１メディア情報に付与されている前記第１時間情報を抽出した後、前記第１メディア情報を第１端末へ出力する受信側同期信号配信装置と、
   前記受信側同期信号配信装置から受け取った前記第１時間情報に基づいて、第２端末で提示する前記第２メディア情報と前記第１端末で提示する前記第１メディア情報とを同期させるための、前記第２メディア情報を出力する第３時間情報を生成し、前記ネットワークから受信する前記第２メディア情報に付されている前記第２時間情報と前記第３時間情報とを比較して前記第２メディア情報を第２端末へ出力する受信側同期制御装置と、
   を備える通信システム。
2. 前記第１時間情報をＴ１としたとき、
   前記送信側同期制御装置は、前記第１メディア情報の生成元から前記送信側同期信号配信装置に到達するまでの遅延時間ＤＭ１と前記第２メディア情報の生成元から前記送信側同期制御装置に到達するまでの遅延時間ＤＳ１との差分を補償し、前記第２時間情報をＴ１＋ＤＭ１−ＤＳ１とし、
   前記受信側同期制御装置は、受信した前記第２メディア情報を一時的にメディア情報バッファ部に蓄積するとともに、前記受信側同期信号配信装置が前記第１メディア情報から抽出した前記第１時間情報Ｔ１に前記第１メディア情報が前記受信側同期信号配信装置から前記第１端末まで伝送する遅延時間ＤＭ２と前記第２メディア情報が前記受信側同期制御装置から前記第２端末まで伝送する遅延時間ＤＳ２との差分を補償した前記第３時間情報Ｔ１−ＤＭ２＋ＤＳ２を生成し、前記第２時間情報にバッファ時間を加算して前記第３時間情報の所定時間範囲内となった前記第２メディア情報を前記メディア情報バッファ部から出力させることを特徴とする請求項１に記載の通信システム。
3. 送信側同期信号配信装置で、第１メディア情報を受け取り、前記第１メディア情報に時間情報が含まれる場合は前記時間情報を第１時間情報として維持し、前記第１メディア情報に時間情報が含まれない場合は新たに第１時間情報を付与し、前記第１メディア情報をネットワークに送信する送信側同期信号配信手順と、
   送信側同期制御装置で、前記第１メディア情報に関連する第２メディア情報を受け取り、前記送信側同期信号配信装置から受け取った前記第１メディア情報の前記第１時間情報に関連する第２時間情報を前記第２メディア情報に付して前記ネットワークに送信する送信側同期制御手順と、
   受信側同期信号配信装置で、前記ネットワークから前記第１メディア情報を受信し、前記第１メディア情報に付与されている前記第１時間情報を抽出した後、前記第１メディア情報を第１端末へ出力する受信側同期信号配信手順と、
   受信側同期制御装置で、前記受信側同期信号配信装置から受け取った前記第１時間情報に基づいて、第２端末で提示する前記第２メディア情報と前記第１端末で提示する前記第１メディア情報とを同期させるための、前記第２メディア情報を出力する第３時間情報を生成し、前記ネットワークから受信する前記第２メディア情報に付されている前記第２時間情報と前記第３時間情報とを比較して前記第２メディア情報を第２端末へ出力する受信側同期制御手順と、
   を行う通信方法。
4. 前記第１時間情報をＴ１としたとき、
   前記送信側同期制御手順で、前記第１メディア情報の生成元から前記送信側同期信号配信装置に到達するまでの遅延時間ＤＭ１と前記第２メディア情報の生成元から前記送信側同期制御装置に到達するまでの遅延時間ＤＳ１との差分を補償し、前記第２時間情報をＴ１＋ＤＭ１−ＤＳ１とし、
   前記受信側同期制御手順で、受信した前記第２メディア情報を一時的に前記受信側同期制御装置のメディア情報バッファ部に蓄積するとともに、前記受信側同期信号配信装置が前記第１メディア情報から抽出した前記第１時間情報Ｔ１に前記第１メディア情報が前記受信側同期信号配信装置から前記第１端末まで伝送する遅延時間ＤＭ２と前記第２メディア情報が前記受信側同期制御装置から前記第２端末まで伝送する遅延時間ＤＳ２との差分を補償した前記第３時間情報Ｔ１−ＤＭ２＋ＤＳ２を生成し、前記第２時間情報にバッファ時間を加算して前記第３時間情報の所定時間範囲内となった前記第２メディア情報を前記メディア情報バッファ部から出力させることを特徴とする請求項３に記載の通信方法。
5. 第１メディア情報を受け取り、前記第１メディア情報に第１時間情報Ｔ１が含まれる場合、前記第１時間情報を取り出す時間情報抽出部と、
   前記時間情報抽出部が受け取った前記第１メディア情報に時間情報が含まれない場合、前記第１メディア情報に第１時間情報Ｔ１を付与する時間情報付与部と、
   前記時間情報抽出部又は前記時間情報付与部から前記第１時間情報付の前記第１メディア情報をネットワークへ出力するメディア情報転送部と、
   前記時間情報抽出部が取り出した前記第１時間情報Ｔ１又は前記時間情報付与部が付与した前記第１時間情報Ｔ１に前記第１メディア情報の生成元から前記時間情報抽出部に到達するまでの遅延時間ＤＭ１を加えて修正時間情報Ｔ１＋ＤＭ１を生成する遅延補償部と、
   前記遅延補償部で生成した前記修正時間情報Ｔ１＋ＤＭ１を出力する時間情報配信部と、
   を備える送信側同期信号配信装置。
6. 第２メディア情報を受け取り、第２時間情報を付与してネットワークへ送信する時間情報付与部と、
   外部から修正時間情報Ｔ１＋ＤＭ１を受け取る時間情報管理部と、
   前記時間情報管理部が受け取った前記時間情報Ｔ１＋ＤＭ１から前記第２メディア情報の生成元から前記時間情報付与部に到達するまでの遅延時間ＤＳ１を減算して前記第２時間情報Ｔ１＋ＤＭ１−ＤＳ１を生成する遅延補償部と、
   を備える送信側同期制御装置。
7. ネットワークから第１メディア情報を受信し、前記第１メディア情報から第１時間情報Ｔ１を抽出する時間情報抽出部と、
   前記時間情報抽出部が受信した前記第１メディア情報から前記第１時間情報Ｔ１を除去する時間情報除去部と、
   前記時間情報抽出部又は前記時間情報除去部が出力する前記第１メディア情報を第１端末へ出力するメディア情報転送部と、
   前記時間情報抽出部が抽出した前記第１時間情報Ｔ１から、前記第１メディア情報が前記メディア情報転送部から前記第１端末まで伝送する遅延時間ＤＭ２を減算して修正時間情報Ｔ１−ＤＭ２を生成する遅延補償部と、
   前記遅延補償部で生成した前記修正時間情報Ｔ１−ＤＭ２を出力する時間情報配信部と、
   を備える受信側同期信号配信装置。
8. ネットワークから第２メディア情報を受信し、前記第２メディア情報を一時保管するメディア情報バッファ部と、
   前記メディア情報バッファ部が出力する前記第２メディア情報に含まれる第２時間情報を除去し、第２端末へ出力する時間情報除去部と、
   外部から修正時間情報Ｔ１−ＤＭ２を受け取る時間情報管理部と、
   前記時間情報管理部が受け取った前記修正時間情報Ｔ１−ＤＭ２に前記第２メディア情報が前記時間情報除去部から前記第２端末まで伝送する遅延時間ＤＳ２を加算して第３時間情報Ｔ１−ＤＭ２＋ＤＳ２を生成する遅延補償部と、
   を備え、
   前記メディア情報バッファ部は、前記第２時間情報にバッファ時間を加算して前記第３時間情報の所定時間範囲内となった前記第２メディア情報を出力することを特徴とする受信側同期制御装置。
9. コンピュータを請求項５に記載の送信側同期信号配信装置として機能させるためのプログラム。
10. コンピュータを請求項６に記載の送信側同期制御装置として機能させるためのプログラム。
11. コンピュータを請求項７に記載の受信側同期信号配信装置として機能させるためのプログラム。
12. コンピュータを請求項８に記載の受信側同期制御装置として機能させるためのプログラム。

Images