JP5394307B2 - Synchronized playback system, synchronized playback method, and synchronized playback program - Google Patents
Synchronized playback system, synchronized playback method, and synchronized playback program Download PDFInfo
- Publication number
- JP5394307B2 JP5394307B2 JP2010094018A JP2010094018A JP5394307B2 JP 5394307 B2 JP5394307 B2 JP 5394307B2 JP 2010094018 A JP2010094018 A JP 2010094018A JP 2010094018 A JP2010094018 A JP 2010094018A JP 5394307 B2 JP5394307 B2 JP 5394307B2
- Authority
- JP
- Japan
- Prior art keywords
- playback
- terminal
- slave
- master
- reproduction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
本発明は、パノラマ映像の複数端末同期再生方法と他再生端末の選択領域映像再生方法に関する。 The present invention relates to a multi-terminal synchronized playback method of panoramic video and a selected region video playback method of other playback terminals.
従来から、複数のメンバーが共通した映像の配信を受けて再生すると共に、各メンバー間で、その共通の映像に基づいて音声や文字によるコミュニケーションを楽しむことができるシステムが考えられている。このようなシステムでは、複数のメンバーがお互いに同じ場面を共有しながらコミュニケーションを行うために、再生映像の同時性が重要となる。このため、情報の送信あるいは受信を行う各装置の電波時計の時刻を統一的に管理し、IP(internet protocol)マルチキャスト技術を用いて、共通の映像データを複数のメンバーにリアルタイムで配信し、映像データを含むパケットの、配信から到着までの時間を各端末装置毎に算出し、算出結果を相互に比較して最大の遅延時間を検出し、この最大遅延時間が経過するまで、各メンバーのIP端末装置における映像再生を待たせることにより、各メンバー間で映像の同時再生を可能とするシステムが知られている(特許文献1参照)。 2. Description of the Related Art Conventionally, there has been considered a system in which a plurality of members can receive and reproduce a common video and enjoy communication by voice or text between the members based on the common video. In such a system, since a plurality of members communicate while sharing the same scene with each other, the synchronism of the reproduced video is important. For this reason, the time of the radio clock of each device that sends or receives information is uniformly managed, and common video data is distributed to multiple members in real time using IP (internet protocol) multicast technology. The time from delivery to arrival of a packet including data is calculated for each terminal device, and the calculated results are compared with each other to detect the maximum delay time. Until this maximum delay time elapses, each member's IP A system is known that enables simultaneous playback of video among members by waiting for video playback in a terminal device (see Patent Document 1).
特許文献1の映像配信システムは、各端末が共有する映像データを、映像配信サーバからIPマルチキャストによって各端末に配送しているが、IPマルチキャストに対応するには、ネットワークに対応のプロトコルが必要であって、ほとんどのネットワークでは、単純な汎用性のあるユニキャストのみをサポートし、マルチキャストに対応していない。このため、従来から存在する映像配信サーバでは、一つの端末から指定された映像を指定された経過時間から配信する、いわゆるユニキャストの機能のみをサポートすることが一般的である。したがって、このような映像配信サーバでは、マルチキャストによる映像配信サービスの提供が困難であって端末間で映像を同期して共有することができないという問題がある。 In the video distribution system of Patent Document 1, video data shared by each terminal is delivered from the video distribution server to each terminal by IP multicast. To support IP multicast, a protocol corresponding to the network is required. Therefore, most networks only support simple and versatile unicast, not multicast. For this reason, a conventional video distribution server generally supports only a so-called unicast function of distributing a video specified from one terminal from a specified elapsed time. Therefore, in such a video distribution server, there is a problem that it is difficult to provide a video distribution service by multicast and the video cannot be shared in synchronization between terminals.
本発明は、このような事情に鑑みてなされたもので、ユニキャストのみをサポートする配信サーバにおいても、複数端末間で同一映像を同期して視聴することができる同期再生システム、同期再生方法及び同期再生プログラムを提供することを目的とする。 The present invention has been made in view of such circumstances, and a synchronized playback system, a synchronized playback method, and a synchronized playback system capable of synchronously viewing the same video among a plurality of terminals even in a distribution server that supports only unicast. An object is to provide a synchronized playback program.
本発明は、マスタ再生端末とスレーブ再生端末に分類された複数の再生端末と、ユニキャストで符号化コンテンツデータを前記再生端末へ配信する配信サーバとがネットワークを介して接続された同期再生システムであって、前記マスタ再生端末は、配信サーバに対して前記符号化コンテンツデータの配信要求を送信し、前記配信サーバからユニキャストにより配信された前記符号化コンテンツデータを受信するデータ受信手段と、前記配信要求した前記符号化コンテンツのURLを前記スレーブ再生端末に対して送信するURL送信手段と、前記スレーブ再生端末から再生開始準備完了情報を受信した際に、前記符号化コンテンツデータの復号化開始時刻を算出して、前記スレーブ再生端末に対して復号化開始時刻情報を送信する時刻送信手段と、前記復号化開始時刻になった際に、前記符号化コンテンツデータの復号化を行い、該符号化コンテンツデータを再生する再生手段とを備え、前記スレーブ再生端末は、前記マスタ再生端末から送信された前記符号化コンテンツのURLに基づき前記配信サーバからユニキャストにより配信された符号化コンテンツデータを受信するデータ受信手段と、前記符号化コンテンツデータを受信して、再生開始準備が完了した際に、前記マスタ再生端末に対して、再生開始準備完了情報を送信する準備完了情報送信手段と、前記マスタ再生端末から復号化開始時刻情報を受信し、前記復号化開始時刻になった際に、前記符号化コンテンツデータの復号化を行い、該符号化コンテンツデータを再生する再生手段とを備えたことを特徴とする。 The present invention is a synchronous reproduction system in which a plurality of reproduction terminals classified into a master reproduction terminal and a slave reproduction terminal and a distribution server that distributes encoded content data to the reproduction terminals by unicast are connected via a network. The master playback terminal transmits a distribution request for the encoded content data to a distribution server and receives the encoded content data distributed by unicast from the distribution server; and URL transmitting means for transmitting the URL of the encoded content requested for distribution to the slave playback terminal, and decoding start time of the encoded content data when receiving the playback start preparation completion information from the slave playback terminal Time transmission for calculating and transmitting the decoding start time information to the slave playback terminal And a playback means for decoding the encoded content data and playing back the encoded content data when the decoding start time is reached, the slave playback terminal from the master playback terminal Data reception means for receiving encoded content data distributed by unicast from the distribution server based on the transmitted URL of the encoded content, and when the encoded content data is received and playback start preparation is completed In addition, preparation completion information transmitting means for transmitting reproduction start preparation completion information to the master reproduction terminal, and decoding start time information from the master reproduction terminal, when the decoding start time is reached, And a reproducing means for decoding the encoded content data and reproducing the encoded content data.
本発明は、前記時刻送信手段は、前記再生開始準備完了情報を受信した時刻に前記復号化開始時刻情報が前記スレーブ再生端末に届くまでの最大時間を加算することにより前記復号化開始時刻を算出することを特徴とする。 In the present invention, the time transmitting means calculates the decoding start time by adding the maximum time until the decoding start time information reaches the slave playback terminal to the time when the playback start preparation completion information is received. It is characterized by doing.
本発明は、前記マスタ再生端末の再生手段は、前記マスタ再生端末の選択領域情報を基にメイン映像から切り出した選択領域映像と、前記マスタ再生端末の選択領域情報を基にナビゲーション映像からサムネイル化した前記マスタ再生端末のサムネイル映像と、前記スレーブ再生端末から送信された選択領域情報を基に、ナビゲーション映像からサムネイル化した前記スレーブ再生端末のサムネイル映像を再生することを特徴とする。 According to the present invention, the playback means of the master playback terminal generates a thumbnail from a selection area video cut out from a main video based on the selection area information of the master playback terminal and a navigation video based on the selection area information of the master playback terminal. Based on the thumbnail video of the master playback terminal and the selection area information transmitted from the slave playback terminal, the thumbnail video of the slave playback terminal thumbnailed from the navigation video is played back.
本発明は、前記スレーブ再生端末の再生手段は、前記スレーブ再生端末の選択領域情報を基にメイン映像から切り出した選択領域映像と、前記スレーブ再生端末の選択領域情報を基にナビゲーション映像からサムネイル化した前記スレーブ再生端末のサムネイル映像と、前記マスタ再生端末から送信された選択領域情報を基に、ナビゲーション映像からサムネイル化した前記マスタ再生端末のサムネイル映像を再生することを特徴とする。 According to the present invention, the playback means of the slave playback terminal generates a thumbnail from a selection area video cut out from a main video based on the selection area information of the slave playback terminal and a navigation video based on the selection area information of the slave playback terminal. Based on the thumbnail video of the slave playback terminal and the selected area information transmitted from the master playback terminal, the thumbnail video of the master playback terminal thumbnailed from the navigation video is played back.
本発明は、他の前記スレーブ再生端末の再生手段は、前記他のスレーブ再生端末の選択領域情報を基にメイン映像から切り出した選択領域映像と、前記他のスレーブ再生端末の選択領域情報を基にナビゲーション映像からサムネイル化した前記他のスレーブ再生端末のサムネイル映像と、前記マスタ再生端末から送信された選択領域情報を基に、ナビゲーション映像からサムネイル化した前記マスタ再生端末のサムネイル映像と、前記スレーブ再生端末から送信された選択領域情報を基に、ナビゲーション映像からサムネイル化した前記スレーブ再生端末のサムネイル映像を再生することを特徴とする。 According to the present invention, the playback means of the other slave playback terminal is based on the selection area video clipped from the main video based on the selection area information of the other slave playback terminal and the selection area information of the other slave playback terminal. The thumbnail video of the other slave playback terminal thumbnailed from the navigation video, the thumbnail video of the master playback terminal thumbnailed from the navigation video based on the selection area information transmitted from the master playback terminal, and the slave Based on the selection area information transmitted from the playback terminal, the thumbnail video of the slave playback terminal thumbnailed from the navigation video is played back.
本発明は、前記マスタ再生端末及び前記複数のスレーブ再生端末は、再生中の前記ナビゲーション映像から前記選択領域を選択操作する選択領域指定手段を備え、該選択領域指定手段によって選択された選択領域の選択領域情報を前記マスタ再生端末及び前記複数のスレーブ再生端末の間で共有して、前記選択領域映像を切り出すことを特徴とする。 In the present invention, the master playback terminal and the plurality of slave playback terminals include selection area specifying means for selecting and operating the selection area from the navigation video being played back, and the selection area selected by the selection area specifying means The selection area information is shared between the master reproduction terminal and the plurality of slave reproduction terminals, and the selection area image is cut out.
本発明は、前記マスタ再生端末及び前記複数のスレーブ再生端末は、複数の前記サムネイル映像の中から1つのサムネイル映像を選択するサムネイル選択手段を備え、該サムネイル選択手段によって選択されたサムネイル映像の選択情報を前記マスタ再生端末及び前記複数のスレーブ再生端末の間で共有して、前記サムネイル映像の再生を行うことを特徴とする。 In the present invention, the master playback terminal and the plurality of slave playback terminals include thumbnail selection means for selecting one thumbnail video from the plurality of thumbnail videos, and the selection of the thumbnail video selected by the thumbnail selection means The thumbnail video is played back by sharing information between the master playback terminal and the plurality of slave playback terminals.
本発明は、前記マスタ再生端末は、所定の時間間隔で前記再生手段による前記符号化コンテンツデータの再生時間と、測定時のマスタ再生端末の時刻とを取得し、該再生時間と測定時刻とを前記複数のスレーブ再生端末に対して送信する再生時間送信手段を備え、前記スレーブ再生端末は、前記再生時間と測定時のマスタ再生端末の時刻とを受信し、前記スレーブ再生端末上の前記再生手段で再生されている前記符号化コンテンツデータの再生時間と測定時刻と、前記受信した再生時刻と測定時刻とを比較し、前記スレーブ再生端末上の前記再生手段で再生されている前記符号化コンテンツデータの再生が前記マスタ再生端末上の再生手段で再生されている前記符号化コンテンツデータの再生より遅れている場合に、遅れている時間分読み飛ばして再生し、前記スレーブ再生端末上の前記再生手段で再生されている前記符号化コンテンツデータの再生が前記マスタ再生端末上の再生手段で再生されている前記符号化コンテンツデータの再生より進んでいる場合に、進んでいる時間分再生を停止した後に再生を再開する再生同期手段を備えることを特徴とする。 In the present invention, the master playback terminal acquires the playback time of the encoded content data by the playback means and the time of the master playback terminal at the time of measurement at a predetermined time interval, and obtains the playback time and the measurement time. Reproduction time transmitting means for transmitting to the plurality of slave reproduction terminals, wherein the slave reproduction terminal receives the reproduction time and the time of the master reproduction terminal at the time of measurement, and the reproduction means on the slave reproduction terminal The encoded content data being reproduced by the reproduction means on the slave reproduction terminal by comparing the reproduction time and measurement time of the encoded content data being reproduced with the received reproduction time and measurement time. When the playback of the encoded content data that is being played back by the playback means on the master playback terminal is delayed, the skipped reading is delayed And the reproduction of the encoded content data being reproduced by the reproduction means on the slave reproduction terminal is more advanced than the reproduction of the encoded content data being reproduced by the reproduction means on the master reproduction terminal. A playback synchronization means for restarting playback after stopping playback for the amount of time that is being advanced.
本発明は、前記マスタ再生端末及び前記複数のスレーブ再生端末は、再生停止を操作する再生停止操作手段を備え、該再生停止操作手段によって再生停止の操作情報を前記マスタ再生端末及び前記複数のスレーブ再生端末の間で共有して、前記マスタ再生端末及び前記複数のスレーブ再生端末それぞれの前記再生手段による前記符号化コンテンツデータの再生を停止することを特徴とする。 According to the present invention, the master playback terminal and the plurality of slave playback terminals include playback stop operation means for operating playback stop, and the playback stop operation information is transmitted to the master playback terminal and the plurality of slaves by the playback stop operation means. The reproduction of the encoded content data by the reproduction means of each of the master reproduction terminal and the plurality of slave reproduction terminals is stopped by sharing between reproduction terminals.
本発明は、マスタ再生端末とスレーブ再生端末に分類された複数の再生端末と、ユニキャストで符号化コンテンツデータを前記再生端末へ配信する配信サーバとがネットワークを介して接続された同期再生システムにおける同期再生方法であって、前記マスタ再生端末が、配信サーバに対して前記符号化コンテンツデータの配信要求を送信し、前記配信サーバからユニキャストにより配信された前記符号化コンテンツデータを受信するデータ受信ステップと、前記マスタ再生端末が、前記配信要求した前記符号化コンテンツのURLを前記スレーブ再生端末に対して送信するURL送信ステップと、前記スレーブ再生端末が、前記マスタ再生端末から送信された前記符号化コンテンツのURLに基づき前記配信サーバからユニキャストにより配信された符号化コンテンツデータを受信するデータ受信ステップと、前記スレーブ再生端末が、前記符号化コンテンツデータを受信して、再生開始準備が完了した際に、前記マスタ再生端末に対して、再生開始準備完了情報を送信する準備完了情報送信ステップと、前記マスタ再生端末が、前記スレーブ端末から再生開始準備完了情報を受信した際に、前記符号化コンテンツデータの復号化開始時刻を算出して、前記スレーブ再生端末に対して復号化開始時刻情報を送信する時刻送信ステップと、前記マスタ再生端末が、前記復号化開始時刻になった際に、前記符号化コンテンツデータの復号化を行い、該符号化コンテンツデータを再生する再生ステップと、前記スレーブ再生端末が、前記マスタ再生端末から復号化開始時刻情報を受信し、前記復号化開始時刻になった際に、前記符号化コンテンツデータの復号化を行い、該符号化コンテンツデータを再生する再生ステップとを有することを特徴とする。 The present invention relates to a synchronous playback system in which a plurality of playback terminals classified into a master playback terminal and a slave playback terminal, and a distribution server that delivers unicast encoded content data to the playback terminal are connected via a network. In the synchronous reproduction method, the master reproduction terminal transmits a distribution request for the encoded content data to the distribution server, and receives the encoded content data distributed by unicast from the distribution server. A URL transmission step in which the master reproduction terminal transmits a URL of the encoded content requested for distribution to the slave reproduction terminal; and the code transmitted from the master reproduction terminal by the slave reproduction terminal. Unicast from the distribution server based on the URL of the encrypted content A data receiving step for receiving the encoded content data received, and when the slave playback terminal receives the encoded content data and preparation for playback start is completed, the master playback terminal starts playback. A preparation completion information transmission step of transmitting preparation completion information; and when the master reproduction terminal receives reproduction start preparation completion information from the slave terminal, the decoding start time of the encoded content data is calculated, A time transmission step of transmitting decoding start time information to a slave playback terminal; and when the master playback terminal reaches the decoding start time, the encoded content data is decoded, A reproduction step of reproducing content data; and the slave reproduction terminal receives the decoding start time information from the master reproduction terminal. When it becomes the decoding start time, it performs decoding of the encoded contents data, and having a reproduction step of reproducing the encoded content data.
本発明は、マスタ再生端末とスレーブ再生端末に分類された複数の再生端末と、ユニキャストで符号化コンテンツデータを前記再生端末へ配信する配信サーバとがネットワークを介して接続された同期再生システムにおける前記マスタ再生端末上のコンピュータで動作する同期再生プログラムであって、前記配信サーバに対して前記符号化コンテンツデータの配信要求を送信し、前記配信サーバからユニキャストにより配信された前記符号化コンテンツデータを受信するデータ受信ステップと、前記配信要求した前記符号化コンテンツのURLを前記スレーブ再生端末に対して送信するURL送信ステップと、前記スレーブ端末から再生開始準備完了情報を受信した際に、前記符号化コンテンツデータの復号化開始時刻を算出して、前記スレーブ再生端末に対して復号化開始時刻情報を送信する時刻送信ステップと、前記復号化開始時刻になった際に、前記符号化コンテンツデータの復号化を行い、該符号化コンテンツデータを再生する再生ステップとを前記コンピュータに行わせることを特徴とする。 The present invention relates to a synchronous playback system in which a plurality of playback terminals classified into a master playback terminal and a slave playback terminal, and a distribution server that delivers unicast encoded content data to the playback terminal are connected via a network. A synchronized playback program that runs on a computer on the master playback terminal, transmits the encoded content data distribution request to the distribution server, and is distributed by unicast from the distribution server When receiving the reproduction start preparation completion information from the slave terminal, and a data transmission step for transmitting the URL of the encoded content requested for distribution to the slave reproduction terminal. Calculating the decryption start time of the encrypted content data, and A time transmission step for transmitting decoding start time information to the playback terminal, and a reproduction for decoding the encoded content data and reproducing the encoded content data when the decoding start time is reached And causing the computer to perform steps.
本発明は、マスタ再生端末とスレーブ再生端末に分類された複数の再生端末と、ユニキャストで符号化コンテンツデータを前記再生端末へ配信する配信サーバとがネットワークを介して接続された同期再生システムにおける前記スレーブ再生端末上のコンピュータで動作する同期再生プログラムであって、前記マスタ再生端末から送信された前記符号化コンテンツのURLに基づき前記配信サーバからユニキャストにより配信された符号化コンテンツデータを受信するデータ受信ステップと、前記符号化コンテンツデータを受信して、再生開始準備が完了した際に、前記マスタ再生端末に対して、再生開始準備完了情報を送信する準備完了情報送信ステップと、前記マスタ再生端末から復号化開始時刻情報を受信し、前記復号化開始時刻になった際に、前記符号化コンテンツデータの復号化を行い、該符号化コンテンツデータを再生する再生ステップとを前記コンピュータに行わせることを特徴とする。 The present invention relates to a synchronous playback system in which a plurality of playback terminals classified into a master playback terminal and a slave playback terminal, and a distribution server that delivers unicast encoded content data to the playback terminal are connected via a network. A synchronous playback program that operates on a computer on the slave playback terminal, and receives encoded content data distributed by unicast from the distribution server based on a URL of the encoded content transmitted from the master playback terminal A data reception step; a preparation completion information transmission step for transmitting reproduction start preparation completion information to the master reproduction terminal when reception of the encoded content data and completion of reproduction start is completed; and master reproduction The decoding start time information is received from the terminal, and the decoding start time is reached. When the, performs decoding of the encoded contents data, characterized in that to perform a regeneration step to the computer to reproduce the encoded content data.
本発明は、複数の再生端末と配信サーバとが広範囲ネットワークを介して接続され、前記配信サーバは、ユニキャストで符号化データを前記再生端末へ配信し、前記再生端末は、マスタ再生端末とスレーブ再生端末に分類され、前記マスタ再生端末とスレーブ再生端末は限られた範囲内のネットワークを介して接続され、前記スレーブ再生端末は、前記マスタ再生端末の支配下に置かれて同期再生を行う同期再生方法であって、マスタ再生端末が配信サーバに符号化データを広範囲ネットワークを介して配信要求し、マスタ再生端末は配信サーバからユニキャストで配信された符号化データを受信する。受信した符号化データをマスタ再生端末復号部に1GOPのみ送り、次に、マスタ再生端末は、全スレーブ再生端末にマスタ再生端末が配信要求したコンテンツURLを限られた範囲内のネットワークを介して通知する。スレーブ再生端末は、マスタ再生端末から受け取ったコンテンツURLを広範囲ネットワークを介して配信サーバに送信し、スレーブ再生端末は配信サーバからユニキャストで配信された符号化データを受信する。受信した符号化データをスレーブ再生端末復号部に1GOPのみ送り、スレーブ再生端末はマスタ再生端末へ再生開始準備完了を範限られた範囲内のネットワークを介して通知する。さらに、マスタ再生端末は全てのスレーブ端末から再生開始準備完了を受け取ると、マスタ再生端末は復号化開始時刻(T)を算出し、復号化開始時刻(T)を全てのスレーブ再生端末へ限られた範囲内のネットワークを介して送信し、マスタ再生端末、全スレーブ再生端末の時計が復号化開始時刻(T)になった時、マスタ再生端末、全スレーブ再生端末が一斉に復号化を開始する。また、マスタ再生端末、全スレーブ再生端末の受信部から復号部へ符号化データの送信を開始し、マスタ再生端末と全スレーブ再生端末の映像が同期して再生する。さらに、マスタ再生端末が再生停止を実行し、マスタ再生端末は全スレーブ再生端末に再生停止を通知し、全スレーブ再生端末が再生停止する。 In the present invention, a plurality of playback terminals and a distribution server are connected via a wide area network, the distribution server distributes encoded data to the playback terminal by unicast, and the playback terminal includes a master playback terminal and a slave The master playback terminal and the slave playback terminal are connected via a network within a limited range, and the slave playback terminal is under the control of the master playback terminal and performs synchronous playback. In the reproduction method, the master reproduction terminal requests the distribution server to distribute the encoded data via the wide-area network, and the master reproduction terminal receives the encoded data distributed by unicast from the distribution server. The received encoded data is sent to the master playback terminal decoding unit for only 1 GOP, and then the master playback terminal notifies the content playback URL requested by the master playback terminal to all slave playback terminals via a network within a limited range. To do. The slave reproduction terminal transmits the content URL received from the master reproduction terminal to the distribution server via the wide area network, and the slave reproduction terminal receives the encoded data distributed by unicast from the distribution server. The received encoded data is sent to the slave playback terminal decoding unit by only 1 GOP, and the slave playback terminal notifies the master playback terminal of completion of preparation for starting playback via a network within a limited range. Furthermore, when the master playback terminal receives the playback start preparation completion from all the slave terminals, the master playback terminal calculates the decoding start time (T) and limits the decoding start time (T) to all the slave playback terminals. When the clocks of the master playback terminal and all slave playback terminals reach the decoding start time (T), the master playback terminal and all slave playback terminals start decoding at the same time. . Also, transmission of encoded data is started from the receiving unit of the master playback terminal and all slave playback terminals to the decoding unit, and the videos of the master playback terminal and all slave playback terminals are played back in synchronization. Further, the master playback terminal executes playback stop, the master playback terminal notifies all slave playback terminals of playback stop, and all slave playback terminals stop playback.
本発明は、複数の再生端末と配信サーバとが広範囲ネットワークを介して接続され、前記配信サーバは、ユニキャストで符号化データを前記再生端末へ配信し、前記再生端末は、マスタ再生端末とスレーブ再生端末に分類され、前記マスタ再生端末とスレーブ再生端末は限られた範囲内のネットワークを介して接続され、前記スレーブ再生端末は、前記マスタ再生端末の支配下に置かれて同期再生を行う同期再生方法であって、マスタ再生端末が全再生端末に識別子を付与し、全スレーブ再生端末に限られた範囲のネットワークを介して各再生端末の識別子を通知する。各再生端末の識別子をマスタ再生端末同期再生制御部が保持している。マスタ再生端末再生要求部にコンテンツURLを入力し、マスタ再生端末再生要求部は、入力されたコンテンツURLをマスタ再生端末同期再生制御部に送り、マスタ再生端末同期再生制御部は、マスタ再生端末再生要求部から受け取ったコンテンツURLをマスタ再生端末送信部へ送る。マスタ再生端末送信部は、マスタ再生端末同期再生制御部から受け取ったコンテンツURLを広範囲ネットワークを介して配信サーバへ送信する。マスタ再生端末受信部は、符号化データをユニキャストで広範囲ネットワークを介して配信サーバから受け取り、マスタ再生端末受信部は、配信サーバから受信した符号化データを1GOPのみをマスタ再生端末復号部へ送る。一方、マスタ再生端末受信部は、マスタ再生端末同期再生制御部へ受信開始を通知し、マスタ再生端末同期再生制御部は、マスタ再生端末が配信要求したコンテンツURLを全スレーブ再生端末へ通知する指示をマスタ再生端末送信部へ送り、マスタ再生端末送信部は全スレーブ再生端末へマスタ再生端末が配信サーバへ配信要求したコンテンツURLを限られた範囲内のネットワークを介して送信する。また、マスタ再生端末受信部は、限られた範囲内のネットワークを介してスレーブ再生端末から再生開始準備完了通知を受け取り、受け取った再生開始準備完了通知をマスタ再生端末同期再生制御部へ送り、マスタ再生端末同期再生制御部は、再生開始準備完了通知を受け取ると、マスタ再生端末の時計を確認し、その確認した時刻(X)にマスタ再生端末からスレーブ再生端末へ復号化開始指示が届くまでの最大の時間(Y)を加えた復号化開始時刻(T)を算出し、さらに、マスタ再生端末送信部へ復号化開始時刻(T)を全スレーブ再生端末へ送る指示を出し、マスタ再生端末送信部は全スレーブ再生端末へ復号化開始時刻(T)を限られた範囲内のネットワークを介して送信する。さらに、マスタ再生端末同期再生制御部は、マスタ再生端末の時計を確認し、復号化開始時刻(T)になった時、マスタ再生端末復号部へ符号化データの復号化開始を指示し、さらに、マスタ再生端末同期再生制御部は、マスタ再生端末受信部にマスタ再生端末復号部へ符号化データの送信開始を指示する。また、マスタ再生端末同期再生制御部は、各再生端末の識別子をマスタ再生端末復号部へ送る。さらに、前記マスタ再生端末の復号部は、ナビゲーション符号化映像データと、マスタ再生端末の選択領域情報を元にメイン符号化映像データを復号化し、さらに復号化したメイン映像から選択領域情報を元に切り出した選択領域映像とを前記マスタ再生端末の表示部へ送るとともに、復号化したナビゲーション映像から、前記マスタ再生端末の選択領域情報を元に、前記マスタ再生端末の選択領域映像を切り出し、さらにサムネイル化し、サムネイル化した前記マスタ再生端末の選択領域映像を前記マスタ再生端末の表示部に送る。さらに、前記マスタ再生端末復号部は、前記サムネイル映像に識別子を付与し、前記マスタ再生端末、前記選択領域情報、前記サムネイル映像とを対応付けし、この対応情報を保持する。マスタ再生端末表示部にナビゲーション映像、マスタ再生端末の選択領域映像、サムネイル化したマスタ再生端末の選択領域映像を再生する。 In the present invention, a plurality of playback terminals and a distribution server are connected via a wide area network, the distribution server distributes encoded data to the playback terminal by unicast, and the playback terminal includes a master playback terminal and a slave The master playback terminal and the slave playback terminal are connected via a network within a limited range, and the slave playback terminal is under the control of the master playback terminal and performs synchronous playback. In this playback method, the master playback terminal assigns identifiers to all playback terminals, and notifies the identifiers of the playback terminals via a limited network to all slave playback terminals. The master playback terminal synchronized playback control unit holds the identifier of each playback terminal. The content playback URL is input to the master playback terminal playback request unit, the master playback terminal playback request unit sends the input content URL to the master playback terminal synchronized playback control unit, and the master playback terminal synchronized playback control unit performs master playback terminal playback. The content URL received from the request unit is sent to the master reproduction terminal transmission unit. The master reproduction terminal transmission unit transmits the content URL received from the master reproduction terminal synchronous reproduction control unit to the distribution server via the wide area network. The master playback terminal receiving unit receives encoded data from the distribution server via a wide area network in unicast, and the master playback terminal receiving unit sends only 1 GOP of the encoded data received from the distribution server to the master playback terminal decoding unit. . On the other hand, the master playback terminal receiving unit notifies the master playback terminal synchronized playback control unit of the start of reception, and the master playback terminal synchronized playback control unit instructs all slave playback terminals to notify the content URL requested by the master playback terminal for distribution. Is transmitted to the master reproduction terminal transmission unit, and the master reproduction terminal transmission unit transmits the content URL requested by the master reproduction terminal to the distribution server to all slave reproduction terminals via a network within a limited range. The master playback terminal receiving unit receives a playback start preparation completion notification from the slave playback terminal via a network within a limited range, and sends the received playback start preparation completion notification to the master playback terminal synchronized playback control unit. When receiving the playback start preparation completion notification, the playback terminal synchronized playback control unit checks the clock of the master playback terminal, and until the decoding start instruction arrives from the master playback terminal to the slave playback terminal at the checked time (X). The decoding start time (T) including the maximum time (Y) is calculated, and further, an instruction to send the decoding start time (T) to all the slave playback terminals is sent to the master playback terminal transmission unit, and the master playback terminal is transmitted. The unit transmits the decoding start time (T) to all slave playback terminals via a network within a limited range. Furthermore, the master playback terminal synchronized playback control unit checks the clock of the master playback terminal, and when the decoding start time (T) is reached, instructs the master playback terminal decoding unit to start decoding the encoded data, and The master reproduction terminal synchronous reproduction control unit instructs the master reproduction terminal reception unit to start transmission of encoded data to the master reproduction terminal decoding unit. Also, the master playback terminal synchronized playback control unit sends the identifier of each playback terminal to the master playback terminal decoding unit. Further, the decoding unit of the master playback terminal decodes the main encoded video data based on the navigation encoded video data and the selection region information of the master playback terminal, and further based on the selection region information from the decoded main video. The cut-out selection area video is sent to the display unit of the master reproduction terminal, and the selection area video of the master reproduction terminal is cut out from the decoded navigation video based on the selection area information of the master reproduction terminal. The selected area video of the master playback terminal converted into a thumbnail is sent to the display unit of the master playback terminal. Further, the master playback terminal decoding unit assigns an identifier to the thumbnail video, associates the master playback terminal, the selection area information, and the thumbnail video, and holds the correspondence information. The navigation video, the selection area video of the master playback terminal, and the thumbnail selection area video of the master playback terminal are played back on the master playback terminal display unit.
本発明は、複数の再生端末と配信サーバとが広範囲ネットワークを介して接続され、前記配信サーバは、ユニキャストで符号化データを前記再生端末へ配信し、前記再生端末は、マスタ再生端末とスレーブ再生端末に分類され、前記マスタ再生端末とスレーブ再生端末は限られた範囲内のネットワークを介して接続され、前記スレーブ再生端末は、前記マスタ再生端末の支配下に置かれて同期再生を行う同期再生方法であって、スレーブ再生端末は、マスタ再生端末から各再生端末の識別子を受け取り、受け取った各再生端末の識別子をスレーブ再生端末同期再生制御部が保持している。スレーブ再生端末受信部は、マスタ再生端末からマスタ再生端末が配信要求したコンテンツURLを限られた範囲内のネットワークを介して受け取り、スレーブ再生端末受信部は、受け取ったコンテンツURLをスレーブ再生端末同期再生制御部へ送り、スレーブ再生端末同期再生制御部は受け取ったコンテンツURLをスレーブ再生端末送信部へ送る。スレーブ再生端末送信部は、広範囲ネットワークを介して配信サーバへコンテンツURLを送信する。スレーブ再生端末の受信部は、符号化データをユニキャストで広範囲ネットワークを介して配信サーバから受け取り、スレーブ再生端末受信部は、配信サーバから受信した符号化データを1GOPのみをマスタ再生端末復号部へ送る。一方、スレーブ再生端末の受信部は、スレーブ再生端末同期再生制御部へ受信開始を通知し、スレーブ再生端末同期再生制御部は、受信開始を受け取ると、マスタ再生端末へ再生開始準備完了を通知する指示をスレーブ再生端末送信部へ送り、スレーブ再生端末送信部はマスタ再生端末へ再生開始準備完了を限られた範囲内のネットワークを介して通知する。また、スレーブ再生端末受信部は、マスタ再生端末から限られた範囲内のネットワークを介して復号化開始時刻(T)を受け取ると、スレーブ再生端末同期再生制御部へ復号化開始時刻(T)を送り、スレーブ再生端末同期再生制御部は、復号化開始時刻(T)を受け取ると、スレーブ再生端末の時計を確認し、復号化開始時刻(T)になった時、スレーブ再生端末復号部へ符号化データの復号化開始を指示し、さらに、スレーブ再生端末同期再生制御部は、スレーブ再生端末受信部にスレーブ再生端末復号部へ符号化データの送信開始を指示する。また、スレーブ再生端末同期再生制御部は、各再生端末の識別子をスレーブ再生端末復号部へ送る。さらに、前記スレーブ再生端末の復号部は、ナビゲーション符号化映像データと、スレーブ再生端末の選択領域情報を元にメイン符号化映像データを復号化し、さらに復号化したメイン映像から選択領域情報を元に切り出した選択領域映像とを前記マスタ再生端末の表示部へ送るとともに、復号化したナビゲーション映像から、前記スレーブ再生端末の選択領域情報を元に、前記スレーブ再生端末の選択領域映像を切り出し、さらにサムネイル化し、サムネイル化した前記スレーブ再生端末の選択領域映像を前記スレーブ再生端末の表示部に送る。さらに、前記スレーブ再生端末復号部は、前記サムネイル映像に識別子を付与し、前記スレーブ再生端末、前記選択領域情報、前記サムネイル映像とを対応付けし、この対応情報を保持する。前記スレーブ再生端末表示部にナビゲーション映像、スレーブ再生端末の選択領域映像、サムネイル化した前記スレーブ再生端末の選択領域映像を再生する。 In the present invention, a plurality of playback terminals and a distribution server are connected via a wide area network, the distribution server distributes encoded data to the playback terminal by unicast, and the playback terminal includes a master playback terminal and a slave The master playback terminal and the slave playback terminal are connected via a network within a limited range, and the slave playback terminal is under the control of the master playback terminal and performs synchronous playback. In the playback method, the slave playback terminal receives the identifier of each playback terminal from the master playback terminal, and the slave playback terminal synchronized playback control unit holds the received identifier of each playback terminal. The slave playback terminal receiving unit receives the content URL requested by the master playback terminal from the master playback terminal via a network within a limited range, and the slave playback terminal receiving unit synchronizes playback of the received content URL. The slave reproduction terminal synchronous reproduction control unit sends the received content URL to the slave reproduction terminal transmission unit. The slave playback terminal transmission unit transmits the content URL to the distribution server via the wide area network. The receiving unit of the slave playback terminal receives the encoded data from the distribution server via the wide area network in unicast, and the slave playback terminal receiving unit receives only 1 GOP of the encoded data received from the distribution server to the master playback terminal decoding unit. send. On the other hand, the receiving unit of the slave playback terminal notifies the slave playback terminal synchronized playback control unit of the start of reception, and upon receiving the reception start, the slave playback terminal synchronized playback control unit notifies the master playback terminal of completion of playback start preparation. The instruction is sent to the slave playback terminal transmission unit, and the slave playback terminal transmission unit notifies the master playback terminal of completion of playback start preparation via a network within a limited range. When the slave playback terminal receiving unit receives the decoding start time (T) from the master playback terminal via a network within a limited range, the slave playback terminal receiving unit sends the decoding start time (T) to the slave playback terminal synchronous playback control unit. When receiving the decoding start time (T), the slave playback terminal synchronous playback control unit checks the clock of the slave playback terminal, and when the decoding start time (T) is reached, the slave playback terminal synchronous playback control unit The slave playback terminal synchronous playback control unit instructs the slave playback terminal reception unit to start transmission of encoded data to the slave playback terminal decoding unit. The slave playback terminal synchronized playback control unit sends the identifier of each playback terminal to the slave playback terminal decoding unit. Further, the decoding unit of the slave playback terminal decodes the main encoded video data based on the navigation encoded video data and the selection region information of the slave playback terminal, and further, based on the selection region information from the decoded main video. The cut-out selection area video is sent to the display unit of the master playback terminal, and the selection area video of the slave playback terminal is cut out from the decoded navigation video based on the selection area information of the slave playback terminal, and further the thumbnail The selection area video of the slave playback terminal converted into a thumbnail is sent to the display unit of the slave playback terminal. Further, the slave playback terminal decoding unit assigns an identifier to the thumbnail video, associates the slave playback terminal, the selection area information, and the thumbnail video with each other, and holds the correspondence information. The slave reproduction terminal display unit reproduces a navigation image, a selection region image of the slave reproduction terminal, and a thumbnail selection region image of the slave reproduction terminal.
本発明は、複数の再生端末と配信サーバとが広範囲ネットワークを介して接続され、前記配信サーバは、ユニキャストで符号化データを前記再生端末へ配信し、前記再生端末は、マスタ再生端末とスレーブ再生端末に分類され、前記マスタ再生端末とスレーブ再生端末は限られた範囲内のネットワークを介して接続され、前記スレーブ再生端末は、前記マスタ再生端末の支配下に置かれて同期再生を行う同期再生方法であって、スレーブ再生端末は、マスタ再生端末から各再生端末の識別子を受け取り、受け取った各再生端末の識別子をスレーブ再生端末同期再生制御部が保持している。マスタ再生端末同期再生制御部は、マスタ再生端末再生要求部、または、マスタ再生端末復号部のいずれからかマスタ再生端末の選択領域情報を受け取り、受け取った選択領域情報とマスタ再生端末の識別子とを含めた再生情報をマスタ再生端末送信部に全スレーブ端末へ送る指示を出し、マスタ再生端末送信部は、全スレーブ再生端末へマスタ再生端末の再生情報を限られた範囲内のネットワークを介して送信する。スレーブ再生端末受信部は限られた範囲内のネットワークを介してマスタ再生端末からマスタ再生端末の再生情報を受け取り、スレーブ再生端末受信部は、受け取ったマスタ再生端末の再生情報をスレーブ再生端末同期再生制御部へ送り、スレーブ再生端末同期再生制御部は、受け取ったマスタ再生端末の再生情報をスレーブ再生端末復号部に送る。スレーブ再生端末復号部は、復号化したスレーブ再生端末のナビゲーション映像から受け取ったマスタ再生端末の選択領域情報を元に、マスタ再生端末の選択領域映像を切り出し、さらにサムネイル化し、サムネイル化したマスタ再生端末のサムネイル選択領域映像をスレーブ再生端末表示部へ送る。さらに、前記スレーブ再生端末復号部は、前記サムネイル映像に識別子を付与し、前記マスタ再生端末、前記選択領域情報、前記サムネイル映像とを対応付けし、この対応情報を保持する。スレーブ再生端末表示部は、スレーブ再生端末復号部から受け取ったマスタ再生端末のサムネイル化した選択領域映像をスレーブ再生端末表示部でストリーム再生する。スレーブ再生端末が、マスタ再生端末の選択領域映像をサムネイル映像でストリーム再生する。 In the present invention, a plurality of playback terminals and a distribution server are connected via a wide area network, the distribution server distributes encoded data to the playback terminal by unicast, and the playback terminal includes a master playback terminal and a slave The master playback terminal and the slave playback terminal are connected via a network within a limited range, and the slave playback terminal is under the control of the master playback terminal and performs synchronous playback. In the playback method, the slave playback terminal receives the identifier of each playback terminal from the master playback terminal, and the slave playback terminal synchronized playback control unit holds the received identifier of each playback terminal. The master playback terminal synchronized playback control unit receives the selection region information of the master playback terminal from either the master playback terminal playback request unit or the master playback terminal decoding unit, and receives the received selection region information and the identifier of the master playback terminal. Instruct the master playback terminal transmission unit to send the included playback information to all slave terminals, and the master playback terminal transmission unit transmits the playback information of the master playback terminal to all slave playback terminals via a network within a limited range. To do. The slave playback terminal receiving unit receives the playback information of the master playback terminal from the master playback terminal via a network within a limited range, and the slave playback terminal receiving unit synchronizes playback of the received playback information of the master playback terminal with the slave playback terminal. The slave playback terminal synchronous playback control unit sends the received playback information of the master playback terminal to the slave playback terminal decoding unit. The slave playback terminal decoding unit cuts out the master playback terminal selection area video based on the master playback terminal selection area information received from the decoded slave playback terminal navigation video, further thumbnails and thumbnails the master playback terminal Are sent to the slave playback terminal display unit. Further, the slave playback terminal decoding unit assigns an identifier to the thumbnail video, associates the master playback terminal, the selection area information, and the thumbnail video, and holds the correspondence information. The slave playback terminal display unit performs stream playback of the selected region video of the master playback terminal received from the slave playback terminal decoding unit on the slave playback terminal display unit. The slave playback terminal performs stream playback of the selected area video of the master playback terminal as a thumbnail video.
本発明は、複数の再生端末と配信サーバとが広範囲ネットワークを介して接続され、前記配信サーバは、ユニキャストで符号化データを前記再生端末へ配信し、前記再生端末は、マスタ再生端末とスレーブ再生端末に分類され、前記マスタ再生端末とスレーブ再生端末は限られた範囲内のネットワークを介して接続され、前記スレーブ再生端末は、前記マスタ再生端末の支配下に置かれて同期再生を行う同期再生方法であって、マスタ再生端末同期再生制御部は、各再生端末の識別子を保持している。また、スレーブ再生端末は、マスタ再生端末から各再生端末の識別子を受け取り、受け取った各再生端末の識別子をスレーブ再生端末同期再生制御部が保持している。スレーブ再生端末同期再生制御部は、スレーブ再生端末再生要求部、または、スレーブ再生端末復号部のいずれからかスレーブ再生端末の選択領域情報を受け取り、受け取った選択領域情報とスレーブ再生端末の識別子とをを含めた再生情報をスレーブ再生端末送信部にマスタ再生端末、他スレーブ再生端末へ送る指示を出し、スレーブ再生端末送信部はマスタ再生端末、他スレーブ再生端末へ限られた範囲のネットワークを介してスレーブ再生端末の再生情報を送信する。マスタ再生端末受信部は、限られた範囲のネットワークを介してスレーブ再生端末からスレーブ再生端末の再生情報を受け取り、マスタ再生端末受信部は、受け取ったスレーブ再生端末の再生情報をマスタ再生端末同期再生制御部へ送り、マスタ再生端末同期再生制御部は、受け取ったスレーブ再生端末の再生情報をマスタ再生端末復号部に送る。マスタ再生端末復号部は、受け取ったスレーブ再生端末の選択領域情報を元に、復号化したマスタ再生端末のナビゲーション映像からスレーブ再生端末の選択領域映像をサムネイル化して切り出し、切り出したスレーブ再生端末のサムネイル化した選択領域映像をマスタ再生端末表示部へ送る。さらに、前記マスタ再生端末復号部は、前記サムネイル映像に識別子を付与し、前記スレーブ再生端末、前記選択領域情報、前記サムネイル映像とを対応付けし、この対応情報を保持する。マスタ再生端末表示部は、マスタ再生端末復号部から受け取ったスレーブ再生端末のサムネイル化した選択領域映像をマスタ再生端末表示部でストリーム再生する。また、他スレーブ再生端末受信部は限られた範囲のネットワークを介してスレーブ再生端末からスレーブ再生端末の再生情報を受け取り、他スレーブ再生端末受信部は、受け取ったスレーブ再生端末の再生情報を他スレーブ再生端末同期再生制御部へ送り、他スレーブ再生端末同期再生制御部は、受け取ったスレーブ再生端末の再生情報を他スレーブ再生端末復号部に送る。他スレーブ再生端末復号部は、受け取ったスレーブ再生端末の選択領域情報を元に、復号化した他スレーブ再生端末のナビゲーション映像からスレーブ再生端末の選択領域映像をサムネイル化して切り出し、切り出したスレーブ再生端末のサムネイル化した選択領域映像を他スレーブ再生端末表示部へ送る。さらに、前記他スレーブ再生端末復号部は、前記サムネイル映像に識別子を付与し、前記スレーブ再生端末、前記選択領域情報、前記サムネイル映像とを対応付けし、この対応情報を保持する。他スレーブ再生端末表示部は、他スレーブ再生端末復号部から受け取ったスレーブ再生端末のサムネイル化した選択領域映像を他スレーブ再生端末表示部でストリーム再生する。マスタ再生端末、他スレーブ再生端末が、スレーブ再生端末の選択領域映像をサムネイル映像でストリーム再生する。 In the present invention, a plurality of playback terminals and a distribution server are connected via a wide area network, the distribution server distributes encoded data to the playback terminal by unicast, and the playback terminal includes a master playback terminal and a slave The master playback terminal and the slave playback terminal are connected via a network within a limited range, and the slave playback terminal is under the control of the master playback terminal and performs synchronous playback. In the reproduction method, the master reproduction terminal synchronized reproduction control unit holds an identifier of each reproduction terminal. The slave playback terminal receives the identifier of each playback terminal from the master playback terminal, and the slave playback terminal synchronized playback control unit holds the received identifier of each playback terminal. The slave playback terminal synchronized playback control unit receives the selection region information of the slave playback terminal from either the slave playback terminal playback request unit or the slave playback terminal decoding unit, and receives the received selection region information and the identifier of the slave playback terminal. Is sent to the slave playback terminal transmission unit to the master playback terminal and other slave playback terminals, and the slave playback terminal transmission unit is connected to the master playback terminal and other slave playback terminals via a limited network. Send the playback information of the slave playback terminal. The master playback terminal receiving unit receives the playback information of the slave playback terminal from the slave playback terminal via a limited network, and the master playback terminal receiving unit reproduces the received playback information of the slave playback terminal in the master playback terminal synchronized playback. The master playback terminal synchronous playback control unit sends the received playback information of the slave playback terminal to the master playback terminal decoding unit. The master playback terminal decoding unit extracts the slave playback terminal selection area video from the decoded master playback terminal navigation video based on the received slave playback terminal selection area information, and cuts out the thumbnail of the slave playback terminal cut out The selected selection area image is sent to the master reproduction terminal display unit. Further, the master playback terminal decoding unit assigns an identifier to the thumbnail video, associates the slave playback terminal, the selection area information, and the thumbnail video with each other, and holds the correspondence information. The master playback terminal display unit performs stream playback of the selected region video of the slave playback terminal received from the master playback terminal decoding unit on the master playback terminal display unit. The other slave playback terminal receiving unit receives the playback information of the slave playback terminal from the slave playback terminal via a limited range of network, and the other slave playback terminal receiving unit receives the playback information of the slave playback terminal received by the other slave playback terminal. The other slave playback terminal synchronized playback control unit sends the received playback information of the slave playback terminal to the other slave playback terminal decoding unit. The other slave playback terminal decoding unit extracts the slave playback terminal selection area video from the decoded navigation video of the slave playback terminal as a thumbnail based on the received slave playback terminal selection area information, and extracts the slave playback terminal The thumbnail selection area video is sent to the other slave playback terminal display unit. Further, the other slave playback terminal decoding unit assigns an identifier to the thumbnail video, associates the slave playback terminal, the selection area information, and the thumbnail video with each other, and holds the correspondence information. The other slave playback terminal display unit performs stream playback of the selected region video of the slave playback terminal received from the other slave playback terminal decoding unit as a stream on the other slave playback terminal display unit. The master playback terminal and other slave playback terminals stream-play the selected area video of the slave playback terminal as a thumbnail video.
本発明は、複数の再生端末と配信サーバとが広範囲ネットワークを介して接続され、前記配信サーバは、ユニキャストで符号化データを前記再生端末へ配信し、前記再生端末は、マスタ再生端末とスレーブ再生端末に分類され、前記マスタ再生端末とスレーブ再生端末は限られた範囲内のネットワークを介して接続され、前記スレーブ再生端末は、前記マスタ再生端末の支配下に置かれて同期再生を行う同期再生方法であって、マスタ再生端末同期再生制御部は、各再生端末の識別子を保持している。また、スレーブ再生端末は、マスタ再生端末から各再生端末の識別子を受け取り、受け取った各再生端末の識別子をスレーブ再生端末同期再生制御部が保持している。マスタ(スレーブ)再生端末の再生要求部は、ユーザが、マスタ(スレーブ)再生端末の表示部に再生中のナビゲーション映像から全体または部分的に見たい領域を選択すると、この選択した領域情報をマスタ(スレーブ)再生端末の同期再生制御部へ送る。マスタ(スレーブ)再生端末の同期再生制御部は、マスタ(スレーブ)再生端末の再生要求部から選択領域情報を受け取り、受け取った選択領域情報をマスタ(スレーブ)再生端末の復号部へ送る。また、マスタ(スレーブ)再生端末の同期再生制御部は、マスタ(スレーブ)再生端末の再生要求部から受け取った選択領域情報にマスタ再生端末IDを含めた再生情報(選択領域情報と再生端末ID)をスレーブ(マスタ)再生端末へ送る指示を出す。マスタ(スレーブ)再生端末の復号部は、マスタ(スレーブ)再生端末の同期再生制御部から選択領域情報を受け取り、選択領域情報を元にメイン符号化映像データを復号化し、さらに復号化したメイン映像から選択領域情報を元に切り出した選択領域映像を前記マスタ再生端末の表示部へ送る。また、マスタ(スレーブ)再生端末の復号部は、並列して復号化したナビゲーション映像から、受け取った選択領域情報を元に、選択領域映像を切り出し、さらにサムネイル化し、サムネイル化した選択領域映像をマスタ(スレーブ)再生端末の表示部に送る。この時、マスタ(スレーブ)再生端末の復号部は、サムネイル映像に識別子を付与し、前記再生端末、前記選択領域情報、前記サムネイル映像とを対応付けし、この対応情報を保持する。マスタ(スレーブ)再生端末の表示部は、マスタ(スレーブ)再生端末の復号部からナビゲーション映像、選択領域映像、サムネイル化した選択領域映像を受け取り、受け取ったナビゲーション映像、選択領域映像、サムネイル化した選択領域映像をマスタ(スレーブ)再生端末の表示部で再生する。選択した領域を同期して再生する。 In the present invention, a plurality of playback terminals and a distribution server are connected via a wide area network, the distribution server distributes encoded data to the playback terminal by unicast, and the playback terminal includes a master playback terminal and a slave The master playback terminal and the slave playback terminal are connected via a network within a limited range, and the slave playback terminal is under the control of the master playback terminal and performs synchronous playback. In the reproduction method, the master reproduction terminal synchronized reproduction control unit holds an identifier of each reproduction terminal. The slave playback terminal receives the identifier of each playback terminal from the master playback terminal, and the slave playback terminal synchronized playback control unit holds the received identifier of each playback terminal. When the user selects a region to be viewed in whole or in part from the navigation video being played on the display unit of the master (slave) playback terminal, the playback request unit of the master (slave) playback terminal displays the selected region information as a master. (Slave) Send to the playback control unit of the playback terminal. The synchronous playback control unit of the master (slave) playback terminal receives the selection region information from the playback request unit of the master (slave) playback terminal, and sends the received selection region information to the decoding unit of the master (slave) playback terminal. Further, the synchronous playback control unit of the master (slave) playback terminal includes playback information (selection region information and playback terminal ID) including the master playback terminal ID in the selection region information received from the playback request unit of the master (slave) playback terminal. Is sent to the slave (master) playback terminal. The decoding unit of the master (slave) playback terminal receives the selection area information from the synchronous playback control unit of the master (slave) playback terminal, decodes the main encoded video data based on the selection area information, and further decodes the main video The selected area image cut out based on the selected area information is sent to the display unit of the master playback terminal. In addition, the decoding unit of the master (slave) playback terminal cuts out the selection area video from the navigation video decoded in parallel based on the received selection area information, further thumbnails it, and converts the thumbnail selection area video to the master. (Slave) Send to playback terminal display. At this time, the decoding unit of the master (slave) playback terminal assigns an identifier to the thumbnail video, associates the playback terminal, the selection area information, and the thumbnail video with each other, and holds this correspondence information. The display unit of the master (slave) playback terminal receives the navigation video, selection area video, and thumbnailed selection area video from the decoding unit of the master (slave) playback terminal, and receives the received navigation video, selection area video, and thumbnailed selection. The area video is played back on the display unit of the master (slave) playback terminal. Play the selected area in sync.
本発明は、複数の再生端末と配信サーバとが広範囲ネットワークを介して接続され、前記配信サーバは、ユニキャストで符号化データを前記再生端末へ配信し、前記再生端末は、マスタ再生端末とスレーブ再生端末に分類され、前記マスタ再生端末とスレーブ再生端末は限られた範囲内のネットワークを介して接続され、前記スレーブ再生端末は、前記マスタ再生端末の支配下に置かれて同期再生を行う同期再生方法であって、マスタ再生端末同期再生制御部は、各再生端末の識別子を保持している。また、スレーブ再生端末は、マスタ再生端末から各再生端末の識別子を受け取り、受け取った各再生端末の識別子をスレーブ再生端末同期再生制御部が保持している。マスタ(スレーブ)再生端末再生要求部は、どのサムネイル映像を選択したかのサムネイル選択情報をマスタ(スレーブ)再生端末同期再生制御部へ送る。マスタ(スレーブ)再生端末同期再生制御部は、マスタ(スレーブ)再生端末再生要求部からサムネイル選択情報を受け取り、受け取ったサムネイル選択情報をマスタ(スレーブ)再生端末復号部へ送る。マスタ(スレーブ)再生端末復号部は、マスタ(スレーブ)再生端末同期再生制御部からサムネイル選択情報を受け取り、マスタ(スレーブ)再生端末復号部は、保持している対応情報とサムネイル選択情報を対照し、サムネイル情報と一致した選択領域情報を元にメイン符号化映像データを復号化する。さらに復号化したメイン映像から選択領域情報を元に切り出した選択領域映像と、メイン映像と並列して復号化したナビゲーション映像から、前記選択領域情報を元に、選択領域映像を切り出し、さらにサムネイル化し、サムネイル化した選択領域映像をマスタ(スレーブ)再生端末表示部に送る。また、マスタ(スレーブ)再生端末復号部は、サムネイル映像に識別子を付与し、前記マスタ(スレーブ)再生端末、新しい前記選択領域情報、サムネイル映像を対応付けし、この対応情報を保持する。また、マスタ(スレーブ)再生端末復号部は、新しい選択領域情報を他再生端末送信用にマスタ(スレーブ)再生端末同期再生制御部へ送る。マスタ(スレーブ)再生端末の同期再生制御部は、マスタ(スレーブ)再生端末の復号部から受け取った選択領域情報にマスタ再生端末IDを含めた再生情報(選択領域情報と再生端末ID)をスレーブ(マスタ)再生端末へ送る指示を出す。マスタ(スレーブ)再生端末表示部は、マスタ(スレーブ)再生端末復号部からナビゲーション映像、新しい選択領域映像、新しいサムネイル化した選択領域映像を受け取り、受け取ったナビゲーション映像、選択領域映像、サムネイル化した選択領域映像をマスタ(スレーブ)再生端末表示部で再生する。選択したサムネイル映像を選択領域映像(メイン映像)で再生する。 In the present invention, a plurality of playback terminals and a distribution server are connected via a wide area network, the distribution server distributes encoded data to the playback terminal by unicast, and the playback terminal includes a master playback terminal and a slave The master playback terminal and the slave playback terminal are connected via a network within a limited range, and the slave playback terminal is under the control of the master playback terminal and performs synchronous playback. In the reproduction method, the master reproduction terminal synchronized reproduction control unit holds an identifier of each reproduction terminal. The slave playback terminal receives the identifier of each playback terminal from the master playback terminal, and the slave playback terminal synchronized playback control unit holds the received identifier of each playback terminal. The master (slave) playback terminal playback request unit sends thumbnail selection information indicating which thumbnail video has been selected to the master (slave) playback terminal synchronized playback control unit. The master (slave) playback terminal synchronized playback control unit receives thumbnail selection information from the master (slave) playback terminal playback request unit, and sends the received thumbnail selection information to the master (slave) playback terminal decoding unit. The master (slave) playback terminal decoding unit receives thumbnail selection information from the master (slave) playback terminal synchronized playback control unit, and the master (slave) playback terminal decoding unit compares the correspondence information held with the thumbnail selection information. The main encoded video data is decoded based on the selection area information that matches the thumbnail information. Further, the selected area video is extracted from the decoded main video based on the selected area information and the navigation video decoded in parallel with the main video based on the selected area information, and further thumbnailed. Then, the thumbnail selection area video is sent to the master (slave) playback terminal display unit. The master (slave) playback terminal decoding unit assigns an identifier to the thumbnail video, associates the master (slave) playback terminal, the new selection area information, and the thumbnail video, and holds this correspondence information. The master (slave) playback terminal decoding unit sends new selection area information to the master (slave) playback terminal synchronized playback control unit for transmission to other playback terminals. The synchronous playback control unit of the master (slave) playback terminal slaves playback information (selection region information and playback terminal ID) including the master playback terminal ID in the selection region information received from the decoding unit of the master (slave) playback terminal. Master) Sends instructions to playback terminal. The master (slave) playback terminal display unit receives the navigation video, the new selection area video, and the new thumbnail selection area video from the master (slave) playback terminal decoding unit, and receives the received navigation video, selection area video, thumbnail selection The area video is played back on the master (slave) playback terminal display. Play the selected thumbnail video as the selected area video (main video).
本発明は、複数の再生端末と配信サーバとが広範囲ネットワークを介して接続され、前記配信サーバは、ユニキャストで符号化データを前記再生端末へ配信し、前記再生端末は、マスタ再生端末とスレーブ再生端末に分類され、前記マスタ再生端末とスレーブ再生端末は限られた範囲内のネットワークを介して接続され、前記スレーブ再生端末は、前記マスタ再生端末の支配下に置かれて同期再生を行う同期再生方法であって、マスタ(スレーブ)再生端末同期再生制御部は、電波時計を確認し、復号化開始時刻(T)になった時、マスタ(スレーブ)再生端末復号部へ復号化開始を送る。さらに、マスタ(スレーブ)再生端末同期再生制御部は、マスタ(スレーブ)再生端末受信部へ、マスタ(スレーブ)再生端末復号部への符号化データの送信開始を送る。マスタ(スレーブ)再生端末復号部は、マスタ(スレーブ)再生端末同期再生制御部から復号化開始を受け取り、ナビゲーション符号化映像データ、選択領域情報を基にメイン符号化映像データの復号化を開始する。マスタ(スレーブ)再生端末復復号部は、指定した時間毎に復号化した映像の再生時間を確認し、確認した時の電波時計時間とその時の映像の再生時間をマスタ(スレーブ)再生端末復同期再生制御部へ送る。マスタ再生端末の場合、マスタ再生端末同期再生制御部は、マスタ再生端末復号部から確認した時の電波時計の時間と映像の再生時間を受け取り、マスタ再生端末送信部へ送る。また、スレーブ再生端末の場合、スレーブ再生端末同期再生制御部は、スレーブ再生端末復号部から確認した時の電波時計の時間と映像の再生時間を受け取り、これを保持する。マスタ再生端末送信部は、マスタ再生端末同期再生制御部から確認した時の電波時計の時間と映像の再生時間を受け取り、限られた範囲のネットワークを介して全スレーブ再生端末へ送信する。全スレーブ再生端末受信部は、マスタ再生端末から限られた範囲のネットワークを介して確認した時の電波時計の時間とその時の映像の再生時間を受け取り、スレーブ再生端末同期再生制御部へ送る。全スレーブ再生端末同期再生制御部は、スレーブ再生端末受信部からマスタ再生端末の確認した時の電波時計の時間と映像の再生時間を受け取り、マスタ端末とスレーブ再生端末の確認した時の電波時計の時間から映像の再生時間を比較し、その結果をスレーブ再生端末復号部へ送る。スレーブ再生端末復号部は、比較結果を受け取り、受け取った比較結果がマスタ再生端末と再生時間が同じならば、そのまま復号化を続ける。また、比較結果がマスタ再生端末より再生遅れの場合、遅れている時間分ジャンプして復号化する。または、比較結果がマスタ再生端末より再生が進んでいる場合、先に進んでいる時間分停止し、その後、復号化を再開する。スレーブ再生端末表示部は以上の結果内容に応じて、ナビゲーション映像、選択領域映像、サムネイル化した選択領域映像を再生する。マスタ再生端末、スレーブ再生端末が同期してストリーム再生する。 In the present invention, a plurality of playback terminals and a distribution server are connected via a wide area network, the distribution server distributes encoded data to the playback terminal by unicast, and the playback terminal includes a master playback terminal and a slave The master playback terminal and the slave playback terminal are connected via a network within a limited range, and the slave playback terminal is under the control of the master playback terminal and performs synchronous playback. In this playback method, the master (slave) playback terminal synchronous playback control unit checks the radio clock and sends the decoding start to the master (slave) playback terminal decoding unit when the decoding start time (T) is reached. . Further, the master (slave) playback terminal synchronous playback control unit sends the master (slave) playback terminal reception unit the start of transmission of encoded data to the master (slave) playback terminal decoding unit. The master (slave) playback terminal decoding unit receives the decoding start from the master (slave) playback terminal synchronized playback control unit, and starts decoding the main encoded video data based on the navigation encoded video data and the selection area information. . The master (slave) playback terminal decoding unit checks the playback time of the decoded video every specified time, and synchronizes the radio clock time and the video playback time at that time with the master (slave) playback terminal. Send to playback controller. In the case of the master playback terminal, the master playback terminal synchronous playback control unit receives the time of the radio clock and the playback time of the video as confirmed from the master playback terminal decoding unit, and sends them to the master playback terminal transmission unit. In the case of a slave playback terminal, the slave playback terminal synchronized playback control unit receives the time of the radio clock and the playback time of the video as confirmed from the slave playback terminal decoding unit, and holds them. The master playback terminal transmission unit receives the time of the radio clock and the playback time of the video as confirmed from the master playback terminal synchronized playback control unit, and transmits them to all the slave playback terminals via a limited network. The all slave playback terminal receiving unit receives the time of the radio clock when confirmed from the master playback terminal via a limited network, and the playback time of the video at that time, and sends it to the slave playback terminal synchronized playback control unit. The all-slave playback terminal synchronized playback control unit receives the time of the radio clock and the video playback time when the master playback terminal is confirmed from the slave playback terminal reception unit, and the radio clock when the master terminal and the slave playback terminal are confirmed. The video playback time is compared with the time, and the result is sent to the slave playback terminal decoding unit. The slave playback terminal decoding unit receives the comparison result. If the received comparison result has the same playback time as the master playback terminal, the slave playback terminal decoding unit continues decoding. Further, when the comparison result is a reproduction delay from the master reproduction terminal, it is decoded by jumping by the delayed time. Alternatively, when the comparison result indicates that the reproduction has progressed from the master reproduction terminal, the comparison is stopped for the time that has been advanced, and then decoding is resumed. The slave playback terminal display unit plays back the navigation video, the selection area video, and the thumbnail selection area video according to the contents of the above result. The master playback terminal and slave playback terminal perform stream playback in synchronization.
本発明は、複数の再生端末と配信サーバとが広範囲ネットワークを介して接続され、前記配信サーバは、ユニキャストで符号化データを前記再生端末へ配信し、前記再生端末は、マスタ再生端末とスレーブ再生端末に分類され、前記マスタ再生端末とスレーブ再生端末は限られた範囲内のネットワークを介して接続され、前記スレーブ再生端末は、前記マスタ再生端末の支配下に置かれて同期再生を行う同期再生方法であって、マスタ再生端末再生要求部に再生停止を入力し、マスタ再生端末再生要求部は、入力された再生停止をマスタ再生端末同期再生制御部に送り、マスタ再生端末同期再生制御部は、マスタ再生端末受信部へ符号化データを復号部へ送信の停止を出す。一方、マスタ再生端末同期再生制御部は、再生停止をマスタ再生端末復号部へ送り、マスタ再生端末復号部は再生停止を受け取ると復号化を停止し、さらに、マスタ再生端末復号部は、マスタ再生端末表示部に再生停止を送り、マスタ再生端末表示部は、スレーブ再生端末復号部から再生停止を受け取るとストリーム再生を停止する。一方、マスタ再生端末同期再生制御部は、マスタ再生端末送信部に全スレーブ再生端末へ再生停止を送る指示と配信サーバへ配信停止指示を出し、マスタ再生端末送信部は、全スレーブ再生端末へ限られた範囲のネットワークを介して再生停止を送信し、また、マスタ再生端末送信部は、配信サーバへ広範囲ネットワークを介して符号化データ配信停止を送信し、また、スレーブ再生端末受信部は、マスタ再生端末から限られた範囲のネットワークを介して再生停止を受け取り、スレーブ再生端末受信部は、受け取った再生停止をスレーブ再生端末同期再生制御部へ送り、スレーブ再生端末同期再生制御部は、スレーブ再生端末受信部へ符号化データを復号部へ送信の停止を出す。一方、スレーブ再生端末同期再生制御部は、再生停止をスレーブ再生端末復号部へ送り、スレーブ再生端末復号部は、再生停止を受け取ると復号化を停止し、さらに、スレーブ再生端末復号部はスレーブ再生端末表示部に再生停止を送り、スレーブ再生端末表示部は、スレーブ再生端末復号部から再生停止を受け取るとストリーム再生を停止する。一方、スレーブ再生端末同期再生制御部は、スレーブ再生端末送信部に配信サーバへ符号化データ配信停止を送信する指示を出し、スレーブ再生端末送信部は、配信サーバへ符号化データ配信停止を広範囲ネットワークを介して送信する。 In the present invention, a plurality of playback terminals and a distribution server are connected via a wide area network, the distribution server distributes encoded data to the playback terminal by unicast, and the playback terminal includes a master playback terminal and a slave The master playback terminal and the slave playback terminal are connected via a network within a limited range, and the slave playback terminal is under the control of the master playback terminal and performs synchronous playback. A playback method, wherein a playback stop is input to a master playback terminal playback request unit, and the master playback terminal playback request unit sends the input playback stop to a master playback terminal synchronized playback control unit, and a master playback terminal synchronized playback control unit Stops sending the encoded data to the decoding unit. On the other hand, the master playback terminal synchronized playback control section sends a playback stop to the master playback terminal decoding section, and the master playback terminal decoding section stops the decoding upon receiving the playback stop, and further, the master playback terminal decoding section When the playback stop is sent to the terminal display unit, and the master playback terminal display unit receives the playback stop from the slave playback terminal decoding unit, the master playback terminal display unit stops the stream playback. On the other hand, the master playback terminal synchronized playback control unit issues an instruction to send playback stop to all slave playback terminals and a delivery stop instruction to the distribution server to the master playback terminal transmission unit, and the master playback terminal transmission unit is limited to all slave playback terminals. The master reproduction terminal transmission unit transmits the encoded data distribution stop to the distribution server via the wide-area network, and the slave reproduction terminal reception unit transmits the master signal to the distribution server. A playback stop is received from the playback terminal via a limited network, the slave playback terminal receiving unit sends the received playback stop to the slave playback terminal synchronized playback control unit, and the slave playback terminal synchronized playback control unit is slave playback. Stop transmission of the encoded data to the terminal receiving unit to the decoding unit. On the other hand, the slave playback terminal synchronized playback control unit sends a playback stop to the slave playback terminal decoding unit, and the slave playback terminal decoding unit stops the decoding upon receiving the playback stop, and the slave playback terminal decoding unit further performs slave playback. When the playback stop is sent to the terminal display unit and the slave playback terminal display unit receives the playback stop from the slave playback terminal decoding unit, the slave playback terminal display unit stops the stream playback. On the other hand, the slave playback terminal synchronous playback control unit instructs the slave playback terminal transmission unit to transmit the encoded data distribution stop to the distribution server, and the slave playback terminal transmission unit sends the encoded data distribution stop to the distribution server over a wide area network. To send through.
本発明によれば、ユニキャストのみをサポートする配信サーバにおいても、複数端末間で同一映像を同期して視聴することができる。また、他端末がどこの領域を視聴しているか知ることができるとともに、他端末の再生領域と同じ領域を再生することができる。また、1GOP(Group Of Picture)単位で復号するため、再生のずれが発生しにくく、限定範囲のネットワーク環境により、再生端末間再生制御が容易になるという効果が得られる。 According to the present invention, even in a distribution server that supports only unicast, the same video can be viewed synchronously among a plurality of terminals. In addition, it is possible to know which area the other terminal is viewing and to reproduce the same area as the reproduction area of the other terminal. Further, since decoding is performed in units of 1 GOP (Group Of Picture), it is difficult to cause a shift in reproduction, and reproduction control between reproduction terminals can be easily performed in a limited network environment.
以下、図面を参照して、本発明の一実施形態による情報再生システムを説明する。図1は同実施形態の構成を示すブロック図である。この図において、符号10は、日本に2箇所ある電波送信所の中の一の電波送信所(標準周波数局)であり、10万年に1秒の誤差といわれるセシウム原子電波時計をもとに標準電波を送信する。符号20は再生する情報の配信を行う配信サーバである。符号30はインターネット等の広域ネットワーク(以下、ネットワークA30と称する)である。符号40、50、Nは配信された情報の再生を行う再生端末である。再生端末は、マスタ再生端末40と、スレーブ再生端末(50,N)とに論理的に分類されており、マスタ再生端末40は1台で、スレーブ再生端末(50,N)は複数の場合もある。符号80は家庭LAN(Local Area Network)や社内LANの様な特定の建物内、敷地内で使用する限られた範囲内のネットワーク(以下、ネットワークB80と称する)である。配信サーバ20と再生端末(40,50,N)は、ネットワークA30を介して接続されている。符号60は、限定範囲ネットワークである。
Hereinafter, an information reproduction system according to an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram showing the configuration of the embodiment. In this figure,
配信サーバ20は、受信部21と、再生データ保存部22と、送信部23とで構成される。受信部21は、ネットワークA30を介して、再生端末(40,50,N)から要求を受信し、受信した要求を再生データ保存部22に通知する。再生データ保存部22は、受信部21からの要求を受け取り、受信部21から受け取った、要求された符号化データを再生データ保存部22から読み出し、送信部23に送る。符号化データには、見たい領域を全体または部分的に自由に選択するためのナビゲーション符号化映像データ、選択した領域を再生するためのメイン符号化映像データ、音声符号化データ(音声がない場合もある)の3つがあり、これらは、1つの符号化データとして再生データ保存部22に蓄積されている。なお、メイン符号化映像データは、ナビゲーション符号化映像データよりも解像度が高い映像データである。送信部23は、再生データ保存部22から読み出したデータを受け取り、ユニキャストでネットワークA30を介して再生端末(40,50,N)へ配信する。
The
マスタ再生端末40は、スレーブ再生端末(50,N)を支配し、スレーブ再生端末(50,N)との間との同期再生制御を行う。マスタ再生端末40は、再生開始、停止を行い、スレーブ再生端末(50,N)は、これに同期してマスタ再生端末40の動作に従う。ここでは、マスタ再生端末40、スレーブ再生端末(50,N)ともにジャンプ再生は行わないものとする。また、マスタ再生端末40、スレーブ再生端末(50,N)とも、映像全体を再生しているナビゲーション映像から見たい領域を選択することができる。
The
マスタ再生端末40、スレーブ再生端末(50,N)は、自再生端末の選択領域情報をネットワークB80を介してマルチキャストで他再生端末へ送信する。マスタ再生端末40、スレーブ再生端末(50,N)は、他の再生端末の選択領域映像を再生する。マスタ再生端末40、スレーブ再生端末(50,N)の電波時計(47,57)は、電波送信所10から発信される標準電波を自動受信して各再生端末の日時修正を行い、各端末は復号化開始時刻(T)になった時、一斉に復号化開始を行う。なお、自再生端末の選択領域情報とは、ナビゲーション映像の中から全体または部分的に選択した領域であるが、この自再生端末の選択領域情報については後述する。
The
また、復号化開始時刻(T)は、全てのスレーブ再生端末(50,N)から再生開始準備完了通知受領直後のマスタ再生端末40の電波時計時刻(T1)と、マスタ再生端末40からスレーブ再生端末(50,N)へ復号化開始指示が届くまでの最大の時間(T2)とを加算することにより得られる時刻である。マスタ再生端末40からスレーブ再生端末(50,N)へ復号化開始指示が届くまでの最大の時間(T2)は、予め設定されている。この設定方法としては、マスタ再生端末40からスレーブ再生端末(50,N)へテストパケットを送信し、各スレーブ再生端末(50,N)からマスタ再生端末40へ回答パケットが戻る時間を計測して設定すればよい。
Also, the decoding start time (T) is the radio clock time (T1) of the
マスタ再生端末40は、再生要求部41と、同期再生制御部42と、送信部43と、受信部44と、復号部45と、表示部46と、電波時計47とで構成される。マスタ再生端末40は、全スレーブ再生端末(50,N)とネットワークB80を介してTCP/IP接続を行う。これは、コンテンツURL、復号化開始時刻(T)、再生停止を送信、全スレーブ再生端末(50,N)からは、再生準備完了通知、受け取り返信を受信するために用いる。再生情報(選択領域情報と再生端末ID)、確認した再生時間はマルチキャストでスレーブ再生端末(50,N)へ送信する。マスタ再生端末40は、TCP/IP接続後、全再生端末の識別子(ID:identifier)を付与し、全スレーブ再生端末(50,N)に各再生端末の識別子(図16参照)を通知する。
The
ユーザは、マスタ再生端末40の再生要求部41から、コンテンツURLを入力する。マスタ再生端末40の再生要求部41は、入力されたコンテンツURLをマスタ再生端末40の同期再生制御部42へ送る。コンテンツURLは、ネットワーク上に存在する符号化データの場所を指している。また、マスタ再生端末40の再生要求部41は、ユーザが、表示部46に再生中のナビゲーション映像から選択した領域に関する選択領域情報をマスタ再生端末40の同期再生制御部42へ送る。選択領域情報については後述する。また、マスタ再生端末40の再生要求部41は、ユーザが、表示部46に再生中の自・他端末サムネイル映像の中からどのサムネイルを選んだかのサムネイル選択情報をマスタ再生端末40の同期再生制御部42へ送る。また、マスタ再生端末40の再生要求部41は、ユーザが実行した再生・停止を、マスタ再生端末40の同期再生制御部42へ送る。
The user inputs a content URL from the
マスタ再生端末40の同期再生制御部42は、再生要求部41と、受信部44と、復号部45からの要求制御と、受信部44と、復号部45と、送信部43への要求制御を行う。マスタ再生端末40の同期再生制御部42は、全スレーブ再生端末のIPアドレス一覧と、各再生端末IDを保持している。なお、同期再生制御部42の動作については後述する。
The synchronous
マスタ再生端末40の送信部43は、マスタ再生端末40の同期再生制御部42からの要求を受け取り、要求内容によって配信サーバ20、またはスレーブ再生端末(50,N)へ要求を送信する。配信サーバ20へは、ネットワークA30を介して、符号化データ配信要求、配信停止要求を送信する。また、全スレーブ再生端末(50,N)へは、ネットワークB80を介して、TCP/IPで少なくともコンテンツURL、復号化開始時刻(T)、再生停止を送信する。再生情報(選択領域情報と再生端末ID)、確認した再生時間は、ネットワークB80を介してマルチキャストでスレーブ再生端末へ送信する。
The
マスタ再生端末40の受信部44は、配信サーバ20と、スレーブ再生端末(50,N)からのデータを受信し、受信したデータが符号化データの場合はマスタ再生端末40の復号部45へ送り、それ以外はマスタ再生端末40の同期再生制御部42へ送る。
The receiving
マスタ再生端末40の復号部45は、マスタ再生端末40の受信部44から符号化データを受け取り、受け取った符号化データのナビゲーション符号化映像データとメイン符号化映像データ、音声符号化データ(音声がない場合もある)をそれぞれ1GOP(Group Of Picture)単位で並列して復号化し、復号化したナビゲーション映像と、復号化したメイン映像から選択領域情報を元に切り出した選択領域映像、音声をマスタ再生端末40の表示部46へ送る。なお、1GOPは、一般的に15フレーム、0.5秒であるが、必ずしもその必要はない。マスタ再生端末40の再生開始時の選択領域情報は、予め設定した値を用いる。
The
また、マスタ再生端末40の復号部45は、再生開始時のマスタ再生端末40のサムネイル映像として、復号化したナビゲーション映像から、予め設定した選択領域情報を元に、マスタ再生端末40の選択領域映像を切り出し、さらにサムネイル化し、サムネイル化したマスタ再生端末の選択領域映像をマスタ再生端末40の表示部46に送る。この時、マスタ再生端末40の復号部45は、サムネイル映像にIDを付与し、再生端末ID、選択領域情報、サムネイル映像とを対応付けし、この対応情報(図17参照)を保持する。対応情報には、少なくとも、端末ID、選択領域情報、サムネイルIDとが対応付けられて保存される。
In addition, the
また、マスタ再生端末40の復号部45は、スレーブ再生端末(50,N)の再生情報をマスタ再生端末40の同期再生制御部42から受け取り、復号化したナビゲーション映像から、受け取ったスレーブ再生端末(50,N)の再生情報の選択領域情報を元に、スレーブ再生端末(50,N)の選択領域映像を切り出し、さらにサムネイル化し、サムネイル化したスレーブ再生端末の選択領域映像をマスタ再生端末40の表示部46に送る。この時、マスタ再生端末40の復号部45は、サムネイル映像にIDを付与し、再生端末ID、選択領域情報、とサムネイル映像とを対応付けし、この対応情報(図17参照)を保持する。
The
また、マスタ再生端末40の復号部45は、どのサムネイルを選んだかのサムネイル選択情報をマスタ再生端末40の同期再生制御部42から受け取り、対応情報とサムネイル選択情報が一致する選択領域情報を基にメイン符号化映像データを復号化し、復号化したメイン映像から選択領域映像を切り出し、この選択領域映像をマスタ再生端末40の表示部46へ送る。これにより、選択したサムネイル映像をメイン映像で再生できる。この時、マスタ再生端末40の復号部45は、対応情報のマスタ再生端末の選択領域情報を更新する。
Further, the
マスタ再生端末40の表示部46は、マスタ再生端末40の復号部45から復号化したナビゲーション映像、選択領域映像、サムネイル化した選択領域映像、音声(音声が無い場合もある)を受け取り、ストリーム再生を行う。マスタ再生端末40の電波時計47は、電波送信所10から発信される標準電波を自動受信してマスタ再生端末40の電波時計の日時修正を行う。この日時を用いて復号化開始時刻(T)になった時、各端末ともに一斉に復号化を開始する。
The
スレーブ再生端末(50,N)は、再生要求部51と、同期再生制御部52と、送信部53と、受信部54と、復号部55と、表示部56と、電波時計57とで構成される。再生要求部51は、ユーザが表示部56に再生中のナビゲーション映像から選択した領域に関する選択領域情報を、スレーブ再生端末(50,N)の同期再生制御部52へ送る。また、再生要求部51は、ユーザが表示部56に再生中の自・他端末サムネイル映像の中からどのサムネイルを選んだかのサムネイル選択情報を、スレーブ再生端末(50,N)の同期再生制御部52へ送る。同期再生制御部52は、再生要求部51と、受信部54と、復号部55からの要求制御と、受信部54と、復号部55と、送信部53への要求制御を行う。なお、同期再生制御52の動作については後述する。
The slave reproduction terminal (50, N) includes a
スレーブ再生端末(50,N)の送信部53は、スレーブ再生端末(50,N)の同期再生制御部52からの要求を受け取り、要求内容によって配信サーバ20、マスタ再生端末40、他スレーブ再生端末へ要求を送信する。配信サーバ20へは、ネットワークA30を介して、符号化データ配信要求、配信停止要求を送信する。マスタ再生端末40へは、ネットワークB80を介してTCP/IPで再生準備完了通知、マスタ再生端末からの情報受け取り返信を送信する。再生情報(選択領域情報と再生端末ID)は、ネットワークB80を介してマルチキャストでマスタ再生端末、他スレーブ再生端末へ送信する。
The
スレーブ再生端末(50,N)の受信部54は、配信サーバ20、マスタ再生端末40、他スレーブ再生端末からのデータを受信し、受信したデータが符号化データの場合はスレーブ再生端末(50,N)の復号部55へ送り、それ以外はスレーブ再生端末(50,N)の同期再生制御部52へ送る。スレーブ再生端末(50,N)の復号部55は、スレーブ再生端末(50,N)の受信部54から符号化データを受け取り、受け取った符号化データのナビゲーション符号化映像データとメイン符号化映像データ、音声符号化データ(音声がない場合もある)をそれぞれ1GOP単位で並列して復号化し、復号化したナビゲーション映像、復号化したメイン映像から選択領域情報を元に切り出した選択領域映像、音声をスレーブ再生端末(50,N)の表示部56へ送る。スレーブ再生端末の再生開始時の選択領域情報は、予め設定した値を用いる。
The receiving
また、スレーブ再生端末(50,N)の復号部55は、再生開始時のスレーブ再生端末(50,N)のサムネイル映像として、復号化したナビゲーション映像から、予め設定した選択領域情報を元に、スレーブ再生端末(50,N)の選択領域映像を切り出し、さらにサムネイル化して、サムネイル化したスレーブ再生端末の選択領域映像をスレーブ再生端末(50,N)の表示部56に送る。この時、スレーブ再生端末(50,N)の復号部55は、サムネイル映像にIDを付与し、再生端末ID、選択領域情報、サムネイル映像とを対応付けし、この対応情報(図17参照)を保持する。対応情報には、少なくとも、端末ID、選択領域情報、サムネイルIDとが対応付けられて保存される。
In addition, the
また、スレーブ再生端末(50,N)の復号部55は、マスタ再生端末40、他スレーブ再生端末の(選択領域情報と再生端末ID)をスレーブ再生端末(50,N)の同期再生制御部52から受け取り、復号化したナビゲーション映像から、受け取ったマスタ再生端末40、他スレーブ再生端末(50,N)の再生情報の選択領域情報を元に、マスタ再生端末40、他スレーブ再生端末の選択領域映像をそれぞれ切り出し、さらにサムネイル化し、サムネイル化したマスタ再生端末、他スレーブ再生端末の選択領域映像をスレーブ再生端末(50,N)の表示部56に送る。この時、スレーブ再生端末(50,N)の復号部55は、サムネイル映像にIDを付与し、端末ID、選択領域情報、サムネイルIDとを対応付けし、この対応情報(図17参照)を保持する。
Also, the
また、スレーブ再生端末(50,N)の復号部55は、どのサムネイルを選んだかのサムネイル選択情報をスレーブ再生端末(50,N)の同期再生制御部52から受け取り、対応情報とサムネイル選択情報が一致する選択領域情報を基にメイン符号化映像データを復号化し、復号化したメイン映像から選択領域映像を切り出し、この選択領域映像をマスタ再生端末50の表示部56へ送る。これにより、選択したサムネイル映像をメイン映像で再生できる。この時、スレーブ再生端末50の復号部55は、対応情報のスレーブ再生端末(50,N)の選択領域情報を更新する。
The
スレーブ再生端末(50,N)の表示部56は、スレーブ再生端末(50,N)の復号部55から復号したナビゲーション映像、選択領域映像、サムネイル化した選択領域映像、音声(音声が無い場合もある)を受け取りストリーム再生を行う。スレーブ再生端末(50,N)の電波時計57は、電波送信所10から発信される標準電波を自動受信してスレーブ再生端末の電波時計の日時修正を行う。この日時を用いて復号化開始時刻(T)になった時、各端末ともに一斉に復号化を開始する。
The
次に、図2を参照して、図1に示す再生端末(40,50,N)の表示部(46,56)に表示される表示内容について説明する。マスタ再生端末40およびスレーブ再生端末(50,N)の表示部(46,56)には、自再生端末のナビゲーション映像、ナビゲーション映像から、全体または部分的に選択した領域に対応するメイン映像の選択領域映像と、自・他端末のサムネイル化した選択領域映像(サムネイル映像)が再生される。ナビゲーション映像は、映像の全体をストリーム再生する。図2において破線で示す破線の選択領域は、ナビゲーション映像の中から部分的に選択した領域を示しており、選択領域情報は、左上頂点座標0からの距離(X、Y)と、幅、高さで表される。自端末メイン映像(選択領域映像)は、破線で囲まれた選択領域の解像度の高い映像であり、表示部(46,56)のナビゲーション映像とは別の場所でストリーム再生される映像である。自・他端末のサムネイル化した選択領域映像(サムネイル映像)は、自・他端末の選択領域映像をサムネイル画像(多数の画像を一覧表示するために縮小された画像)でストリーム再生される映像である。
Next, the display content displayed on the display unit (46, 56) of the reproduction terminal (40, 50, N) shown in FIG. 1 will be described with reference to FIG. On the display unit (46, 56) of the
次に、図1を参照して、マスタ再生端末40の同期再生制御部42の動作を説明する。
<再生要求部41からの要求>
まず、マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の再生要求部41から入力されたコンテンツURLを受け取り、受け取ったコンテンツURLをマスタ再生端末40の送信部43に送る。マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の再生要求部41から、ユーザが再生中のナビゲーション映像から全体または部分的に選択した選択領域情報を受け取り、この選択領域情報をマスタ再生端末40の復号部45へ送る。また、同期再生制御部42は、再生要求部41から択領域情報を受け取り、マスタ再生端末40の送信部43に再生情報(選択領域情報と再生端末ID)をスレーブ再生端末へ送る指示を出す。
Next, the operation of the synchronous
<Request from
First, the synchronous
次に、マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の再生要求部41から、ユーザが表示部46に再生中の自・他端末サムネイル映像の中から選んだサムネイル選択情報を受け取り、マスタ再生端末40の復号部45へ送る。マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の再生要求部41から再生停止を受け取ると、再生停止を、マスタ再生端末40の受信部44と、復号部45へ送り、さらに、マスタ再生端末40の送信部43に全スレーブ再生端末(50,N)へ再生停止を送信する指示と、配信サーバ20へ符号化データの配信停止を送信する指示を出す。
Next, the synchronized
<受信部44からの要求>
まず、マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の受信部44から配信要求した符号化データの受信開始通知を受け取ると、マスタ再生端末40の送信部43に、再生要求部41から入力されたコンテンツURLと同じコンテンツURLをTCP/IP接続した全スレーブ再生端末(50,N)へ通知する指示を送る。また、各再生端末IDを復号部45へ送る。マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の受信部44から全てのスレーブ再生端末(50,N)から再生開始準備完了を受け取ると、電波時計47の時刻を確認し、その確認した時刻(T1)にマスタ再生端末40からスレーブ再生端末(50,N)へ復号化開始指示が届くまでの最大の時間(T2)を加えた復号化開始時刻(T=T1+T2)を算出し、さらに、マスタ再生端末40の送信部43へこの復号化開始時刻(T)を全スレーブ再生端末(50,N)へ送る指示を出す。
<Request from receiving
First, when the synchronous
さらに、電波時計47を確認し、復号化開始時刻(T)になった時、マスタ再生端末40の復号部45へナビゲーション符号化映像データ、メイン符号化映像データ、音声符号化データ(音声がない場合もある)を1GOP単位で並列して復号化を開始する指示を送る。一方、マスタ再生端末40の受信部44へ符号化データをマスタ再生端末40の復号部45へ送信開始の指示を出す。マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の受信部44からスレーブ再生端末の再生情報(選択領域情報と再生端末ID)を受け取り、この再生情報をマスタ再生端末40の復号部45へ送る。
Further, the
<復号部45からの要求>
マスタ再生端末40の同期再生制御部42は、選択したマスタ再生端末40の新しい選択領域情報を復号部45から受け取ると、マスタ再生端末40の送信部43にマスタ再生端末の再生情報(選択領域情報と再生端末ID)を全スレーブ再生端末(50,N)へ送る指示を出す。マスタ再生端末40の同期再生制御部42は、指定した時間毎に確認した時の電波時計時間とその時の復号化したメイン映像の再生時間を復号部から受け取り、マスタ再生端末送信部へ送る。
<Request from
When the synchronized
次に、図1を参照して、スレーブ再生端末(50,N)の同期再生制御部52の動作を説明する。
<再生要求部51からの要求>
まず、スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の再生要求部51から、ユーザが再生中のナビゲーション映像から全体または部分的に選択した選択領域情報を受け取り、この選択領域情報をスレーブ再生端末(50,N)の復号部45へ送る。同期再生制御部52は、再生要求部51から受け取った選択領域情報を、スレーブ再生端末(50,N)の送信部53に再生情報(選択領域情報と再生端末ID)をマスタ再生端末、他スレーブ再生端末へ送る指示を出す。スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の再生要求部51から、ユーザが再生中の自・他端末サムネイル映像の中から選んだサムネイル選択情報を受け取り、このサムネイル選択情報をスレーブ再生端末(50,N)の復号部55へ送る。
Next, the operation of the synchronized
<Request from
First, the synchronized
<受信部54からの要求>
まず、スレーブ再生端末(50,N)の同期再生制御部52は、マスタ再生端末40から送信されたコンテンツURLをスレーブ再生端末(50,N)の受信部54から受け取り、受け取ったコンテンツURLをスレーブ再生端末(50,N)の送信部53に送る。スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の受信部54から配信要求した符号化データの受信開始通知を受け取り、再生開始準備完了をスレーブ再生端末(50,N)の送信部53へ送る。また、各再生端末IDを復号部55へ送る。
<Request from receiving
First, the synchronous
次に、スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の受信部54から復号化開始時刻(T)を受け取ると、電波時計57を確認し、復号化開始時刻(T)になった時、スレーブ再生端末(50,N)の復号部55へナビゲーション符号化映像データ、メイン符号化映像データ、音声符号化データ(音声がない場合もある)を1GOP単位で並列して復号化を開始する指示を送る。一方、スレーブ再生端末(50,N)の受信部54へ、符号化データをスレーブ再生端末(50,N)の復号部55へ送信開始の指示を出す。スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末50(50,N)の受信部54からマスタ再生端末40、他のスレーブ再生端末の再生情報(選択領域情報と再生端末ID)を受け取り、この再生情報をスレーブ再生端末(50,N)の復号部55へ送る。
Next, when the synchronized
次に、スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の受信部54からマスタ再生端末の確認した時の電波時計の時間とその時のメイン映像の再生時間を受け取り、マスタ端末とスレーブ再生端末の確認した時の電波時計の時間からメイン映像の再生時間を比較し、その結果をスレーブ再生端末復号部へ送る。スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の受信部54から再生停止を受け取ると、再生停止を、スレーブ再生端末(50,N)の受信部54と、復号部55へ送り、さらに、スレーブ再生端末(50,N)の送信部53に配信サーバ20へ符号化データの配信停止を送る。
Next, the synchronized
<復号部55からの要求>
スレーブ再生端末(50,N)の同期再生制御部52は、選択したスレーブ再生端末(50,N)の新しい選択領域情報を復号部55から受け取り、スレーブ再生端末(50,N)の送信部53にスレーブ再生端末(50,N)の再生情報(選択領域情報と再生端末ID)をマスタ再生端末、他スレーブ再生端末へ送る指示を出す。スレーブ再生端末(50,N)の同期再生制御部52は、確認した時の電波時計時間とその時のメイン映像の再生時間を復号部55から受け取り、これを保持する。
<Request from
The synchronous
次に、図3〜図15を参照して、図1に示す同期再生システムの動作を説明する。始めに、図3〜図5を参照して、複数の再生端末(40,50,N)で同期して同一の映像を再生する処理動作を説明する。図3〜図5は、同期再生システムにおいて、複数の再生端末(40,50,N)で同期して同一の映像を再生する処理動作を示すフローチャートである。 Next, the operation of the synchronized playback system shown in FIG. 1 will be described with reference to FIGS. First, with reference to FIG. 3 to FIG. 5, a processing operation for reproducing the same video in synchronization with a plurality of reproduction terminals (40, 50, N) will be described. 3 to 5 are flowcharts showing processing operations for reproducing the same video in synchronization with a plurality of reproduction terminals (40, 50, N) in the synchronous reproduction system.
まず、マスタ再生端末40は、マスタ再生端末40の同期再生制御部42が保持しているスレーブ再生端末IPアドレス一覧表にあるスレーブ再生端末とネットワークB80を介してTCP/IP(Transmission Control Protocol/Internet Protocol)接続を行う。また、マスタ再生端末40は、TCP/IP接続後、全再生端末にID(identifier)を付与し、これをマスタ再生端末40の同期再生制御部42に保持する。また、マスタ再生端末40は、ネットワークB80を介してTCP/IPで全スレーブ再生端末(50,N)に各再生端末IDを通知する。各同期再生制御部は、各再生端末IDを保持する(ステップS501)。
First, the
次に、ユーザがコンテンツURLを入力すると、マスタ再生端末40の再生要求部41は、入力されたコンテンツURLをマスタ再生端末40の同期再生制御部42に送る(ステップS502)。マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の再生要求部41から入力されたコンテンツURLを受け取り、受け取ったコンテンツURLをマスタ再生端末40の送信部43へ送る(ステップS503)。マスタ再生端末40の送信部43は、マスタ再生端末40の同期再生制御部42からコンテンツURLを受け取り、受け取ったコンテンツURLを、ネットワークA30を介して配信サーバ20へ送信する(ステップS504)。
Next, when the user inputs the content URL, the
次に、配信サーバ20の受信部21は、ネットワークA30を介してマスタ再生端末40から送信されたコンテンツURLを受信し、受け取ったコンテンツURLを再生データ保存部22へ送る(ステップS505)。再生データ保存部22は、配信サーバ20の受信部21からコンテンツURLを受け取り、受け取ったコンテンツURLから符号化データを読み出し、読み出した符号化データを配信サーバ20の送信部23へ送る(ステップS506)。再生データ保存部22には、ナビゲーション符号化映像データ、メイン符号化映像データ、音声符号化データ(音声がない場合もある)が1つの符号化データで保存されている。配信サーバ20の送信部23は、再生データ保存部22から符号化データを受け取り、受け取った符号化データをネットワークA30を介してユニキャストでマスタ再生端末40へ送信する(ステップS507)。
Next, the receiving
次に、マスタ再生端末40の受信部44は、配信サーバ20の送信部23から送信された符号化データを、ネットワークA30を介して受け取り、マスタ再生端末40の受信部44は、符号化データ受信開始をマスタ再生端末40の同期再生制御部42へ通知する。さらに、マスタ再生端末40の受信部44は、マスタ再生端末40の復号部45へ符号化データのナビゲーション符号化映像データ、メイン符号化映像データ、音声符号化データ(音声がない場合もある)をそれぞれ1GOPのみ送る(ステップS508)。この時、マスタ再生端末40の復号部45は、まだ復号しない。また、マスタ再生端末40の受信部44はバッファ残量から配信制御を行っているため、受信バッファが溢れる事はない。
Next, the
次に、マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の受信部44から符号化データ受信開始通知を受け取ると、ステップS502と同じコンテンツURLをステップS501でTCP/IP接続した全スレーブ再生端末(50,N)へ通知する指示をマスタ再生端末40の送信部43へ送る(ステップS509)。また、同期再生制御部42は、全再生端末IDを復号部45へ送る。復号部45は、これを保持する。
Next, when the synchronous
次に、マスタ再生端末40の送信部43は、マスタ再生端末40の同期再生制御部42から(ステップS502と同じコンテンツURLをTCP/IP接続されている全スレーブ再生端末(50,N)へ通知する指示を受け取り、受け取ったコンテンツURLをネットワークB80を介してTCP/IPで全スレーブ再生端末(50,N)へ送信する(ステップS510)。
Next, the
次に、スレーブ再生端末(50,N)の受信部54は、ネットワークB80を介してマスタ再生端末40からコンテンツURLを受け取り、受け取ったコンテンツURLをスレーブ再生端末(50,N)の同期再生制御部52へ送る(ステップS511)。続いて、スレーブ再生端末(50,N)の同期再生制御部52は、コンテンツURLをスレーブ再生端末(50,N)の受信部54から受け取り、受け取ったコンテンツURLをスレーブ再生端末(50,N)の送信部53へ送る(ステップS512)。さらに、スレーブ再生端末(50,N)の送信部53は、スレーブ再生端末(50,N)の同期再生制御部52から受け取ったコンテンツURLをネットワークA30を介して配信サーバ20へ送る(ステップS513)。
Next, the receiving
次に、配信サーバ20の受信部21は、ネットワークA30を介して全スレーブ再生端末(50,N)からコンテンツURLを受信し、受け取ったコンテンツURLを再生データ保存部22へ送る(ステップS514)。続いて、再生データ保存部22は、配信サーバ20の受信部21からコンテンツURLを全スレーブ再生端末数受け取り、受け取ったコンテンツURLから符号化データを全スレーブ再生端末数読み出し、読み出した符号化データを配信サーバ20の送信部23へ全スレーブ再生端末数を送る(ステップS515)。また、配信サーバ20の送信部23は、再生データ保存部22から読み出した符号化データを全スレーブ再生端末数受け取り、受け取った全スレーブ再生端末数の符号化データをネットワークA30を介してユニキャストで配信要求元の全スレーブ再生端末(50,N)へそれぞれ送信する(ステップS516)。
Next, the receiving
次に、スレーブ再生端末(50,N)の受信部54は、配信サーバ20の送信部23から送信された符号化データを、ネットワークA30を介して受け取り、スレーブ再生端末(50,N)の受信部54は、符号化データの受信開始をスレーブ再生端末(50,N)の同期再生制御部52へ通知する。さらに、スレーブ再生端末(50,N)の受信部54は、スレーブ再生端末(50,N)の復号部55へ符号化データのナビゲーション符号化映像データ、メイン符号化映像データ、音声符号化データ(音声がない場合もある)それぞれ1GOPのみ送る(ステップS517)。この時、スレーブ再生端末(50,N)の復号部55は、まだ復号しない。また、スレーブ再生端末(50,N)の受信部54はバッファ残量から配信制御を行っているため、受信バッファが溢れる事はない。
Next, the
次に、スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の受信部54から符号化データ受信開始通知を受け取ると、再生開始準備完了をマスタ再生端末40へ通知する指示をスレーブ再生端末(50,N)の送信部53へ送る(ステップS518)。また、同期再生制御部52は、各再生端末IDを復号部55へ送る。復号部55は、これを保持する。続いて、スレーブ再生端末(50,N)の送信部53は、スレーブ再生端末(50,N)の同期再生制御部52から再生開始準備完了をマスタ再生端末40へ通知する指示を受け取り、受け取った再生開始準備完了をネットワークB80を介してTCP/IPでマスタ再生端末40へ送る(ステップS519)。
Next, when the synchronous
次に、マスタ再生端末40の受信部44は、スレーブ再生端末(50,N)からネットワークB80を介して再生開始準備完了を受け取り、受け取った再生開始準備完了をマスタ再生端末40の同期再生制御部42へ送る(ステップS520)。続いて、マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の受信部44からスレーブ再生端末(50,N)の再生開始準備完了を受け取り、マスタ再生端末40の同期再生制御部42は、全てのスレーブ再生端末(50,N)から再生開始準備完了を受け取ると、電波時計47の時刻を確認し、確認したその時刻(T1)にマスタ再生端末40からスレーブ再生端末(50,N)へ復号化開始指示が届くまでの最大の時間(T2)を加えた復号化開始時刻(T=T1+T2)を算出し、さらに、送信部43へ復号化開始時刻(T) を全スレーブ再生端末(50,N)へ送る指示を出す(ステップS521)。スレーブ再生端末(50,N)はステップS525へ移行する。
Next, the receiving
なお、マスタ再生端末40からスレーブ再生端末(50,N)へ復号化開始指示が届くまでの最大の時間(T2)は、予め設定されているものとする。この設定方法としては、マスタ再生端末40からスレーブ再生端末(50,N)へテストパケットを送信し、各スレーブ再生端末(50,N)からマスタ再生端末40へ回答パケットが戻る時間を計測して設定する。
It is assumed that the maximum time (T2) until the decoding start instruction arrives from the
次に、マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の電波時計47を確認し、復号化開始時刻(T)になった時、マスタ再生端末40の復号部45へ復号化を開始する指示を送る。さらに、マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の受信部44へ、符号化データの復号部45への送信開始指示を出す(ステップS522)。続いて、マスタ再生端末40の復号部45は、マスタ再生端末40の同期再生制御部42から復号化開始指示を受け取り、1GOP単位でナビゲーション符号化映像データ、選択領域情報を元にメイン符号化映像データ、音声符号化データ(音声がない場合もある)の復号化を並列して開始する。選択領域情報を元に復号化したメイン映像は、図2で示すX、Y、幅、高さより大きいサイズとなる。そのため、復号部45は、復号化したメイン映像から、さらに選択領域情報と同じサイズの選択領域映像を切り出し、この選択領域映像と、復号化したナビゲーション映像、音声(音声がない場合もある)をマスタ再生端末40の表示部46へ送る。再生開始時は、予め設定した選択領域情報を用いる。
Next, the synchronous
さらに、マスタ再生端末40の復号部45は、復号化したナビゲーション映像から、マスタ再生端末40の予め設定した選択領域情報を元に、マスタ再生端末40の選択領域映像を切り出し、さらにサムネイル化し、サムネイル化したマスタ再生端末の選択領域映像をマスタ再生端末40の表示部46に送る。この時、マスタ再生端末40の復号部45は、サムネイル映像にIDを付与し、再生端末ID、選択領域情報、サムネイル映像とを対応付けし、この対応情報(図17参照)を保持する(ステップS523)。続いて、マスタ再生端末40の表示部46は、マスタ再生端末40の復号部45から復号化したナビゲーション映像、選択領域映像、サムネイル化した選択領域映像、音声(音声がない場合もある)を受け取り、再生を開始する(ステップS524)。
Further, the
一方、マスタ再生端末40の送信部43は、マスタ再生端末40の同期再生制御部42から全再生端末(40,50,N)の電波時計47が、復号化開始時刻(T)になった時に復号化開始を復号部へ出す指示を受け取り、全再生端末(40,50,N)が復号化開始時刻(T)になった時に復号化開始を復号部へ出す指示をTCP/IPでネットワークB80を介して全スレーブ再生端末(50,N)へ送信する(ステップS525)。続いて、スレーブ再生端末(50,N)の受信部54は、マスタ再生端末40からネットワークB80を介して復号化開始時刻(T)になった時に復号化開始を復号部55へ出す指示を受け取り、受け取った前記指示をスレーブ再生端末(50,N)の同期再生制御部52へ送る(ステップS526)。スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の受信部54から復号化開始時刻(T)になった時に復号化開始を復号部55へ出す指示を受け取ると、スレーブ再生端末(50,N)の電波時計57を確認し、電波時計57が復号化開始時刻(T)になった時、スレーブ再生端末(50,N)の復号部55へ復号化を開始する指示を送る。さらに、スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の受信部54へ、符号化データの復号部55への送信開始指示を出す(ステップS527)。
On the other hand, the
次に、スレーブ再生端末(50,N)の復号部55は、スレーブ再生端末(50,N)の同期再生制御部52から復号化開始指示を受け取り、1GOP単位でナビゲーション符号化映像データと、選択領域情報を元にメイン符号化映像データ、音声符号化データ(音声がない場合もある)の復号化を並列して開始する。選択領域情報を元に復号化したメイン映像は、図2で示すX、Y、幅、高さより大きいサイズとなる。そのため、復号部55は、復号化したメイン映像から、さらに選択領域情報と同じサイズの選択領域映像を切り出し、この選択領域映像と、復号化したナビゲーション映像、音声(音声がない場合もある)をスレーブ再生端末(50,N)の表示部56へ送る。再生開始時は、予め設定した選択領域情報を用いる。
Next, the
また、スレーブ再生端末(50,N)の復号部55は、復号化したナビゲーション映像から、スレーブ再生端末(50,N)の予め設定した選択領域情報を元に、スレーブ再生端末(50,N)の選択領域映像を切り出し、さらにサムネイル化し、サムネイル化したスレーブ再生端末の選択領域映像をスレーブ再生端末(50,N)の表示部56に送る。この時、スレーブ再生端末(50,N)の復号部55は、サムネイル映像にIDを付与し、再生端末ID、選択領域情報、サムネイル映像とを対応付けし、この対応情報(図17参照)を保持する(ステップS528)。
Also, the
次に、スレーブ再生端末(50,N)の表示部56は、スレーブ再生端末(50,N)の復号部55から復号化したナビゲーション映像、選択領域映像、サムネイル化した選択領域映像、音声(音声がない場合もある)を受け取り、再生を開始する(ステップS529)。そして、マスタ再生端末40が再生停止を実行すると、全スレーブ再生端末(50,N)も再生を停止する(ステップS530)。
Next, the
次に、図6を参照して、選択した領域を同期して再生するための処理動作を説明する。図6は、同期再生システムにおいて、選択した領域を同期して再生するための処理動作を示すフローチャートである。 Next, a processing operation for reproducing the selected area in synchronization will be described with reference to FIG. FIG. 6 is a flowchart showing a processing operation for synchronously reproducing a selected area in the synchronous reproduction system.
まず、再生要求部(41,51)は、ユーザが、表示部(46,56)に再生中のナビゲーション映像から全体または部分的に見たい領域を選択すると、この選択した領域情報を同期再生制御部(42,52)へ送る(ステップS601)。同期再生制御部(42,52)は、再生要求部(41,51)から選択領域情報を受け取り、受け取った選択領域情報を復号部(45,55)へ送る(ステップS602)。続いて、復号部(45,55)は、同期再生制御部(42,52)から選択領域情報を受け取り、受け取った選択領域情報を元に、メイン符号化映像データを復号化する。選択領域情報を元に復号化したメイン映像は、図2で示すX、Y、幅、高さより大きいサイズとなる。そのため、復号部(45,55)は、復号化したメイン映像から、さらに選択領域情報と同じサイズの選択領域映像を切り出し、この選択領域映像を表示部(46,56)へ送る。 First, when the user selects an area that the user wants to view in whole or in part from the navigation video being reproduced on the display unit (46, 56), the reproduction request unit (41, 51) performs synchronous reproduction control on the selected area information. Part (42, 52) (step S601). The synchronized playback control unit (42, 52) receives the selected region information from the playback request unit (41, 51), and sends the received selected region information to the decoding unit (45, 55) (step S602). Subsequently, the decoding unit (45, 55) receives the selection region information from the synchronous reproduction control unit (42, 52), and decodes the main encoded video data based on the received selection region information. The main video decoded based on the selection area information has a size larger than X, Y, width, and height shown in FIG. Therefore, the decoding unit (45, 55) further cuts out a selection region video having the same size as the selection region information from the decoded main video, and sends this selection region video to the display unit (46, 56).
また、復号部(45,55)は、並列して復号化したナビゲーション映像から、受け取った選択領域情報を元に、選択領域映像を切り出し、さらにサムネイル化し、サムネイル化した選択領域映像を表示部(46,56)に送る。この時、復号部(45,55)は、サムネイル映像にIDを付与し、再生端末ID、選択領域情報、サムネイル映像とを対応付けし、この対応情報(図17参照)を保持する。既に、同じ再生端末の対応情報がある場合は、選択領域情報のみを更新する(ステップS603)。 In addition, the decoding unit (45, 55) cuts out the selection region video from the navigation video decoded in parallel based on the received selection region information, further converts it into a thumbnail, and displays the thumbnail selection region video. 46, 56). At this time, the decoding unit (45, 55) assigns an ID to the thumbnail video, associates the playback terminal ID with the selection area information, and the thumbnail video, and holds this correspondence information (see FIG. 17). If there is already correspondence information of the same playback terminal, only the selection area information is updated (step S603).
次に、表示部(46,56)は、復号部(45,55)からナビゲーション映像、選択領域映像、サムネイル化した選択領域映像、音声(音声がない場合もある)を受け取り、受け取ったナビゲーション映像、選択領域映像、サムネイル化した選択領域映像、音声(音声がない場合もある)を表示部(46,56)で再生する(ステップS604)。そして、マスタ再生端末40が再生停止を実行すると、全スレーブ再生端末(50,N)も再生を停止する(ステップS605)。
Next, the display unit (46, 56) receives the navigation video, the selection region video, the thumbnailed selection region video, and audio (there may be no audio) from the decoding unit (45, 55), and receives the received navigation video. Then, the selection area video, the thumbnail selection area video, and audio (there may be no audio) are reproduced on the display unit (46, 56) (step S604). When the
次に、図7を参照して、マスタ再生端末40の選択領域映像を、全スレーブ再生端末(50,N)で再生するための処理動作を説明する。図7は、同期再生システムにおいて、マスタ再生端末40の選択領域映像を、全スレーブ再生端末(50,N)で再生するための処理動作を示すフローチャートである。
Next, with reference to FIG. 7, the processing operation for reproducing the selected area video of the
まず、マスタ再生端末40の再生要求部41は、ユーザが、マスタ再生端末40の表示部46に再生中のナビゲーション映像から全体または部分的に見たい領域を選択すると、この選択した領域情報をマスタ再生端末40の同期再生制御部42へ送る(ステップS701)。マスタ再生端末40の同期再生制御部42は、再生要求部41から選択領域情報を受け取り、受け取った選択領域情報をマスタ再生端末40の復号部45へ送る。また、マスタ再生端末40の同期再生制御部42は、受け取った選択領域情報にマスタ再生端末IDを含めた再生情報(選択領域情報と再生端末ID)を全スレーブ再生端末へ送る指示をマスタ再生端末40の送信部43に出す(ステップS702)。
First, when the user selects a region to be viewed in whole or in part from the navigation video being reproduced on the
続いて、マスタ再生端末40の送信部43は、マスタ再生端末40の同期再生制御部42から再生情報を受け取り、受け取った再生情報をマルチキャストでネットワークB80を介して全スレーブ再生端末(50,N)へ送信する(ステップS703)。また、スレーブ再生端末(50,N)の受信部54は、ネットワークB80を介してマスタ再生端末40からマスタ再生端末40の再生情報を受け取り、受け取ったマスタ再生端末40の再生情報をスレーブ再生端末(50,N)の同期再生制御部52へ送る(ステップS704)。
Subsequently, the
次に、スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の受信部54からマスタ再生端末40の再生情報を受け取り、受け取った再生情報をスレーブ再生端末(50,N)の復号部55に送る(ステップS705)。続いて、スレーブ再生端末(50,N)の復号部55は、スレーブ再生端末(50,N)の同期再生制御部52からマスタ再生端末40の再生情報を受け取り、復号化したスレーブ再生端末(50,N)のナビゲーション映像から、受け取った再生情報の選択領域情報を元に、マスタ再生端末40の選択領域映像を切り出し、さらにサムネイル化し、サムネイル化したマスタ再生端末の選択領域映像をスレーブ再生端末(50,N)の表示部56に送る。この時、スレーブ再生端末(50,N)の復号部55は、サムネイル映像にIDを付与し、マスタ再生端末ID、選択領域情報、サムネイル映像とを対応付けし、この対応情報(図17参照)を保持する。既に、マスタ再生端末の対応情報がある場合は、選択領域情報のみを更新する(ステップS706)。また、スレーブ再生端末(50,N)の表示部56は、復号部55からマスタ再生端末40が再生しているのと同じ領域のサムネイル化した選択領域映像を受け取り、スレーブ再生端末(50,N)の表示部56に再生する(ステップS707)。そして、マスタ再生端末40が再生停止を実行すると、全スレーブ再生端末(50,N)も再生を停止する(ステップS708)。
Next, the synchronous
次に、図8を参照して、スレーブ再生端末50の選択領域映像を、マスタ再生端末40、他スレーブ再生端末Nで再生するための処理動作を説明する。図8は、同期再生システムにおいて、スレーブ再生端末50の選択領域映像を、マスタ再生端末40、他スレーブ再生端末Nで再生するための処理動作を示すフローチャートである。
Next, with reference to FIG. 8, the processing operation for reproducing the selected area video of the
まず、スレーブ再生端末50の再生要求部51は、ユーザが、スレーブ再生端末50の表示部56に再生中のナビゲーション映像から全体または部分的に見たい領域を選択すると、この選択した領域情報をスレーブ再生端末50の同期再生制御部52へ送る(ステップS801)。スレーブ再生端末50の同期再生制御部52は、スレーブ再生端末50の再生要求部51から選択領域情報を受け取り、受け取った選択領域情報をマスタ再生端末50の復号部55へ送る。また、受け取った選択領域情報にスレーブ再生端末50のIDを含めた再生情報(選択領域情報と再生端末ID)をマスタ再生端末40、他スレーブ再生端末Nへ送る指示を出す(ステップS802)。続いて、スレーブ再生端末50の送信部53は、スレーブ再生端末50の同期再生制御部52からスレーブ再生端末50の再生情報を受け取り、受け取った再生情報をネットワークB80を介してマルチキャストでマスタ再生端末40、他スレーブ再生端末Nへ送信する(ステップS803)。他スレーブ再生端末NはステップS808へ移行する。
First, when the user selects a region that the user wants to view in whole or in part from the navigation video being reproduced on the
次に、マスタ再生端末40の受信部44は、ネットワークB80を介してスレーブ再生端末50から、スレーブ再生端末50の再生情報(選択領域情報と再生端末ID)を受け取り、受け取ったスレーブ再生端末50の再生情報をマスタ再生端末40の同期再生制御部42へ送る(ステップS804)。マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の受信部44から、スレーブ再生端末50の再生情報を受け取り、受け取ったスレーブ再生端末50の再生情報をマスタ再生端末40の復号部45に送る(ステップS805)。
Next, the receiving
次に、マスタ再生端末40の復号部45は、マスタ再生端末40の同期再生制御部42からスレーブ再生端末50の再生情報を受け取り、復号化したマスタ再生端末40のナビゲーション映像から、受け取ったスレーブ再生端末50の再生情報の選択領域情報を元に、スレーブ再生端末50の選択領域映像を切り出し、さらにサムネイル化し、スレーブ再生端末50のサムネイル化した選択領域映像をマスタ再生端末40の表示部46に送る。この時、マスタ再生端末40の復号部45は、サムネイル映像にIDを付与し、スレーブ再生端末50のID、選択領域情報、サムネイル映像とを対応付けし、この対応情報(図17参照)を保持する。既に、スレーブ再生端末50の再生端末の対応情報がある場合は、選択領域情報のみを更新する(ステップS806)。続いて、マスタ再生端末40の表示部46は、マスタ再生端末40の復号部45からスレーブ再生端末50が再生しているのと同じ領域のサムネイル化した選択領域映像を受け取り、マスタ再生端末40の表示部46にストリーム再生する(ステップS807)。
Next, the
次に、他スレーブ再生端末Nの受信部は、ネットワークB80を介してスレーブ再生端末50から、スレーブ再生端末50の再生情報(選択領域情報と再生端末ID)を受け取り、受け取ったスレーブ再生端末50の再生情報を他スレーブ再生端末Nの同期再生制御部へ送る(ステップS808)。他スレーブ再生端末Nの同期再生制御部は、他スレーブ再生端末Nの受信部から、スレーブ再生端末50の再生情報を受け取り、受け取ったスレーブ再生端末50の再生情報を他スレーブ再生端末Nの復号部に送る(ステップS809)。
Next, the receiving unit of the other slave playback terminal N receives the playback information (selection area information and playback terminal ID) of the
次に、他スレーブ再生端末Nの復号部は、他スレーブ再生端末Nの同期再生制御部から、スレーブ再生端末50の再生情報を受け取り、復号化した他スレーブ再生端末Nのナビゲーション映像から、受け取ったスレーブ再生端末50の再生情報の選択領域情報を元に、スレーブ再生端末50の選択領域映像を切り出し、さらにサムネイル化し、スレーブ再生端末50のサムネイル化した選択領域映像を他スレーブ再生端末Nの表示部に送る。この時、他スレーブ再生端末Nの復号部は、サムネイル映像にIDを付与し、スレーブ再生端末50のID、選択領域情報、サムネイル映像とを対応付けし、この対応情報(図17参照)を保持する。既に、スレーブ再生端末50対応情報がある場合は、選択領域情報のみを更新する(ステップS810)。
Next, the decoding unit of the other slave playback terminal N receives the playback information of the
次に、他スレーブ再生端末Nの表示部は、他スレーブ再生端末Nの復号部からスレーブ再生端末50が再生しているのと同じ領域のサムネイル化した選択領域映像を受け取り、他スレーブ再生端末Nの表示部に再生する(ステップS811)。そして、マスタ再生端末40が再生停止を実行すると、全スレーブ再生端末(50,N)も再生を停止する(ステップS812)。
Next, the display unit of the other slave playback terminal N receives from the decoding unit of the other slave playback terminal N the selected area video that has been thumbnailed in the same area as the
次に、図9〜図11を参照して、選択したサムネイル映像をメイン映像(選択領域映像)で再生する動作を説明する。図9〜図11は、同期再生システムにおいて、選択したサムネイル映像をメイン映像(選択領域映像)で再生する動作を示すフローチャートである。ここでは、スレーブ再生端末50を例にして説明するが、他の再生端末でも処理動作は同じである。
Next, with reference to FIGS. 9 to 11, an operation of reproducing the selected thumbnail video as the main video (selected area video) will be described. 9 to 11 are flowcharts showing an operation of reproducing the selected thumbnail video as the main video (selected area video) in the synchronous playback system. Here, the
まず、ユーザが、スレーブ再生端末50の表示部56に再生中のサムネイル映像(自・他再生端末選択領域映像)の中から1つを選択すると、スレーブ再生端末50の再生要求部51は、どのサムネイル選択したかのサムネイル選択情報をスレーブ再生端末50の同期再生制御部52へ送る(ステップS901)。ここでは、マスタ再生端末40のサムネイル映像が選択されたものとする。
First, when the user selects one of the thumbnail videos (self / other playback terminal selection area video) being played on the
スレーブ再生端末50の同期再生制御部52は、スレーブ再生端末50の再生要求部51からマスタ再生端末40のサムネイルを選択した情報を受け取り、受け取ったサムネイル選択情報をスレーブ再生端末50の復号部55へ送る(ステップS902)。続いて、スレーブ再生端末50の復号部55は、スレーブ再生端末50の同期再生制御部52からサムネイル選択情報を受け取り、スレーブ再生端末50の復号部55は、保持している対応情報(図17参照)とサムネイル選択情報を対照する。本実施例では、対応情報のマスタ再生端末40に一致する。このマスタ再生端末40の選択領域情報を元にメイン符号化映像データを復号化する。選択領域情報を元に復号化したメイン映像は、図2で示すX、Y、幅、高さより大きいサイズとなる。そのため、スレーブ再生端末50の復号部55は、復号化したメイン映像から、さらに選択領域情報と同じサイズの選択領域映像を切り出し、この選択領域映像をスレーブ再生端末50の表示部56へ送る。
The synchronized
また、スレーブ再生端末50の復号部55は、並列して復号化したナビゲーション映像から、受け取った選択領域情報を元に、選択領域映像を切り出し、さらにサムネイル化し、サムネイル化した選択領域映像をスレーブ再生端末50の表示部56に送る。この時、スレーブ再生端末50の復号部55は、サムネイル映像にIDを付与し、対応情報のスレーブ再生端末50の選択領域情報を、一致したマスタ再生端末40の選択領域情報に更新し、この対応情報(図17参照)を保持する。スレーブ再生端末50とマスタ再生端末40の選択領域情報が同じになる。また、スレーブ再生端末50の新しい選択領域情報を他再生端末送信用にスレーブ再生端末50の同期再生制御部52へ送る(ステップS903)。マスタ再生端末40と他スレーブ再生端末は、ステップ905へ移行する。
Also, the
次に、スレーブ再生端末50の表示部56は、スレーブ再生端末50の復号部55からナビゲーション映像、マスタ再生端末40と同じ選択領域映像、サムネイル化した選択領域映像、音声(音声がない場合もある)を受け取り、受け取ったナビゲーション映像、マスタ再生端末40と同じ選択領域映像、サムネイル化した選択領域映像、音声(音声がない場合もある)をスレーブ再生端末50の表示部56で再生する(ステップS904)。また、スレーブ再生端末50の同期再生制御部52は、スレーブ再生端末50の送信部53へ受け取った選択領域情報にスレーブ再生端末50のIDを含めた再生情報(選択領域情報と再生端末ID)をマスタ再生端末40、他スレーブ再生端末Nへ送る指示を出す(ステップS905)。続いて、スレーブ再生端末50の送信部53は、スレーブ再生端末50の同期再生制御部52からスレーブ再生端末50の再生情報を受け取り、受け取った再生情報をネットワークB80を介してマルチキャストでマスタ再生端末40、他スレーブ再生端末Nへ送信する(ステップS906)。
Next, the
次に、マスタ再生端末40の受信部44は、ネットワークB80を介してスレーブ再生端末50から、スレーブ再生端末50の再生情報(選択領域情報と再生端末ID)を受け取り、受け取ったスレーブ再生端末50の再生情報をマスタ再生端末40の同期再生制御部42へ送る(ステップS907)。マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の受信部44から、スレーブ再生端末50の再生情報を受け取り、受け取ったスレーブ再生端末50の再生情報をマスタ再生端末40の復号部45に送る(ステップS908)。
Next, the receiving
次に、マスタ再生端末40の復号部45は、マスタ再生端末40の同期再生制御部42からスレーブ再生端末50の再生情報を受け取り、復号化したマスタ再生端末40のナビゲーション映像から、受け取ったスレーブ再生端末50の再生情報の選択領域情報を元に、スレーブ再生端末50の選択領域映像を切り出し、さらにサムネイル化し、スレーブ再生端末50のサムネイル化した選択領域映像をマスタ再生端末40の表示部46に送る。この時、マスタ再生端末40の復号部45は、サムネイル映像にIDを付与し、スレーブ再生端末50のID、選択領域情報、サムネイル映像とを対応付けし、この対応情報(図17参照)を保持する。既に、スレーブ再生端末50の再生端末の対応情報がある場合は、選択領域情報のみを更新する(ステップS909)。続いて、マスタ再生端末40の表示部46は、マスタ再生端末40の復号部45からスレーブ再生端末50が再生しているのと同じ領域のサムネイル化した選択領域映像を受け取り、マスタ再生端末40の表示部46にストリーム再生する(ステップS910)。
Next, the
次に、他スレーブ再生端末Nの受信部は、ネットワークB80を介してスレーブ再生端末50から、スレーブ再生端末50の再生情報(選択領域情報と再生端末ID)を受け取り、受け取ったスレーブ再生端末50の再生情報を他スレーブ再生端末Nの同期再生制御部へ送る(ステップS911)。他スレーブ再生端末Nの同期再生制御部は、他スレーブ再生端末Nの受信部から、スレーブ再生端末50の再生情報を受け取り、受け取ったスレーブ再生端末50の再生情報を他スレーブ再生端末Nの復号部に送る(ステップS912)。
Next, the receiving unit of the other slave playback terminal N receives the playback information (selection area information and playback terminal ID) of the
次に、他スレーブ再生端末Nの復号部は、他スレーブ再生端末Nの同期再生制御部から、スレーブ再生端末50の再生情報を受け取り、復号化した他スレーブ再生端末Nのナビゲーション映像から、受け取ったスレーブ再生端末50の再生情報の選択領域情報を元に、スレーブ再生端末50の選択領域映像を切り出し、さらにサムネイル化し、スレーブ再生端末50のサムネイル化した選択領域映像を他スレーブ再生端末Nの表示部に送る。この時、他スレーブ再生端末Nの復号部は、サムネイル映像にIDを付与し、スレーブ再生端末50のID、選択領域情報、サムネイル映像とを対応付けし、この対応情報(図17参照)を保持する。既に、スレーブ再生端末50対応情報がある場合は、選択領域情報のみを更新する(ステップS913)。
Next, the decoding unit of the other slave playback terminal N receives the playback information of the
次に、他スレーブ再生端末Nの表示部は、他スレーブ再生端末Nの復号部からスレーブ再生端末50が再生しているのと同じ領域のサムネイル化した選択領域映像を受け取り、他スレーブ再生端末Nの表示部に再生する(ステップS914)。そして、マスタ再生端末40が再生停止を実行すると、全スレーブ再生端末(50,N)も再生を停止する(ステップS915)。
Next, the display unit of the other slave playback terminal N receives from the decoding unit of the other slave playback terminal N the selected area video that is a thumbnail of the same area that the
次に、図12、図13を参照して、再生端末間の同期再生動作を説明する。図12、図13は、同期再生システムにおいて、再生端末間の同期再生動作を示すフローチャートである。 Next, the synchronized playback operation between playback terminals will be described with reference to FIGS. 12 and 13 are flowcharts showing the synchronized playback operation between playback terminals in the synchronized playback system.
まず、同期再生制御部(42,52)は、電波時計(47,57)を確認し、復号化開始時刻(T)になった時、復号部(45,55)へ復号化開始を送る。さらに、同期再生制御部(42,52)は、受信部(44,54)へ、符号化データの復号部への送信開始指示を送る(ステップS1001)。復号部(45,55)は、同期再生制御部(42,52)から復号化開始を受け取り、ナビゲーション符号化映像データ、選択領域情報を基にメイン符号化映像データ、音声符号化データ(音声がない場合もある)の復号化を1GOP単位で並列して開始する(ステップS1002)。そして、復号部(45,55)は、電波時計(47,57)を確認し、電波時計の指定した時間毎に復号化したメイン映像の再生時間を確認し、確認した時の電波時計時間とその時のメイン映像の再生時間を同期再生制御部(42,52)へ送る(ステップS1003)。確認時間の間隔は、事前に設定しておく。再生時間とは、指定時間の時に復号部(45,55)から表示部(46、56)へ送ったメイン映像の再生時間である。再生時間の確認は、ナビゲーション符号化映像データとメイン符号化映像データは1GOP単位で並列して復号化を行っているため、どちらの映像を用いてもよい。 First, the synchronous reproduction control unit (42, 52) confirms the radio clock (47, 57), and sends the decoding start to the decoding unit (45, 55) when the decoding start time (T) is reached. Furthermore, the synchronous reproduction control unit (42, 52) sends a transmission start instruction to the decoding unit of encoded data to the receiving unit (44, 54) (step S1001). The decoding unit (45, 55) receives the decoding start from the synchronous reproduction control unit (42, 52), and based on the navigation encoded video data and the selection area information, the main encoded video data and audio encoded data (audio In some cases, the decoding is started in parallel in units of 1 GOP (step S1002). Then, the decoding unit (45, 55) confirms the radio clock (47, 57), confirms the reproduction time of the main video decoded at each time specified by the radio clock, and the radio clock time at the time of confirmation. The reproduction time of the main video at that time is sent to the synchronous reproduction control unit (42, 52) (step S1003). The confirmation time interval is set in advance. The playback time is the playback time of the main video sent from the decoding unit (45, 55) to the display unit (46, 56) at the specified time. The playback time can be confirmed by decoding either the navigation encoded video data and the main encoded video data in parallel in units of 1 GOP.
次に、マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の復号部45から確認した時の電波時計の時間とメイン映像の再生時間を受け取り、マスタ再生端末40の送信部43へ送る。また、スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の復号部55から確認した時の電波時計の時間とメイン映像の再生時間を受け取り、これを保持する(ステップS1004)。続いて、マスタ再生端末40の送信部43は、マスタ再生端末40の同期再生制御部42から確認した時の電波時計の時間とメイン映像の再生時間を受け取り、ネットワークB80を介してマルチキャストで全スレーブ再生端末(50,N)へ送信する(ステップS1005)。スレーブ再生端末(50,N)の受信部54は、マスタ再生端末40からネットワークB80を介して確認した時の電波時計の時間とその時のメイン映像の再生時間を受け取り、スレーブ再生端末(50,N)の同期再生制御部52へ送る(ステップS1006)。
Next, the synchronized
次に、スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の受信部54からマスタ再生端末40の確認した時の電波時計の時間とメイン映像の再生時間を受け取ると、マスタ端末40とスレーブ再生端末(50,N)の確認した時の電波時計の時間からメイン映像の再生時間を比較し、その結果をスレーブ再生端末(50,N)の復号部55へ送る(ステップS1007)。スレーブ再生端末(50,N)の復号部55は、比較結果を受け取り、受け取った比較結果がマスタ再生端末と再生時間が同じならば、そのまま復号化を続ける。また、比較結果がマスタ再生端末より再生遅れの場合、遅れている時間分ジャンプして復号化する。または、比較結果がマスタ再生端末より再生が進んでいる場合、先に進んでいる時間分停止し、その後、復号化を再開する(ステップS1008)。
Next, the synchronous
次に、スレーブ再生端末(50,N)の表示部56はスレーブ再生端末(50,N)の復号部55から復号化したナビゲーション映像、選択領域映像、サムネイル化した選択領域映像、音声(音声がない場合もある)を受け取り、再生する(ステップS1009)。そして、ステップS1003へ戻るか、マスタ再生端末40が再生停止を実行すると、全スレーブ再生端末(50,N)も再生を停止する(ステップS1010)。
Next, the
次に、図14を参照して、マスタ再生端末40の再生停止の処理動作を説明する。図14は、同期再生システムにおいて、マスタ再生端末40の再生停止の処理動作を示すフローチャートである。
Next, with reference to FIG. 14, the playback stop processing operation of the
まず、ユーザは、マスタ再生端末40の再生要求部41に再生停止を入力し、マスタ再生端末40の再生要求部41は、入力された再生停止をマスタ再生端末40の同期再生制御部42に送る(ステップS1101)。続いて、マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の再生要求部41から再生停止を受け取ると、マスタ再生端末40の受信部44へ符号化データの復号部45への送信停止を送る(ステップS1102)。マスタ再生端末40の受信部44は、マスタ再生端末40の同期再生制御部42から復号部45へ符号化データの送信停止を受け取ると、マスタ再生端末40の受信部44は送信を停止する(ステップS1103)。
First, the user inputs a playback stop to the
一方、マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の復号部45へ再生停止を送る(ステップS1104)。マスタ再生端末40の復号部45は、再生停止を受け取ると復号化を停止し、さらに、マスタ再生端末40の復号部45はマスタ再生端末40の表示部46に再生停止を送る(ステップS1105)。マスタ再生端末40の表示部46は、マスタ再生端末40の復号部45から再生停止を受け取るとストリーム再生を停止する(ステップS1106)。
On the other hand, the synchronous
また、マスタ再生端末40の同期再生制御部42は、マスタ再生端末40の再生要求部41から再生停止を受け取ると、マスタ再生端末40の送信部43に全スレーブ再生端末(50,N)へ再生停止を送る指示と、配信サーバ20への符号化データの配信停止を送る指示を出す(ステップS1107)。マスタ再生端末40の送信部43は、全スレーブ再生端末(50,N)へネットワークB80を介してTCP/IPで再生停止を送信し、また、マスタ再生端末40の送信部43は、配信サーバ20へネットワークA30を介して符号化データの配信停止を送信する(ステップS1108)。そして、マスタ再生端末40は、符号化データの受信と再生を停止する(ステップS1109)。
When the synchronous
次に、図15を参照して、スレーブ再生端末(50,N)の再生停止の処理動作を説明する。図15は、同期再生システムにおいて、スレーブ再生端末(50,N)の再生停止の処理動作を示すフローチャートである。 Next, with reference to FIG. 15, the playback stop processing operation of the slave playback terminal (50, N) will be described. FIG. 15 is a flowchart showing the playback stop processing operation of the slave playback terminal (50, N) in the synchronous playback system.
まず、スレーブ再生端末(50,N)の受信部54は、マスタ再生端末40からネットワークB80を介して再生停止を受け取り、受け取った再生停止をスレーブ再生端末(50,N)の同期再生制御部52へ送る(ステップS1201)。スレーブ再生端末(50,N)の同期再生制御部52は、再生停止を受け取ると、スレーブ再生端末(50,N)の受信部54に、符号化データの復号部55への送信停止を出す(ステップS1202)。スレーブ再生端末(50,N)の受信部54は、スレーブ再生端末(50,N)の同期再生制御部52から復号部55へ符号化データの送信停止を受け取ると、マスタ再生端末(50,N)の受信部54は送信を停止する(ステップS1203)。
First, the receiving
一方、スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の復号部55へ再生停止を送る(ステップS1204)。スレーブ再生端末(50,N)の復号部55は、再生停止を受け取ると復号化を停止し、さらに、スレーブ再生端末(50,N)の復号部55はスレーブ再生端末(50,N)の表示部56に再生停止を送る(ステップS1205)。スレーブ再生端末(50,N)の表示部56は、スレーブ再生端末(50,N)の復号部55から再生停止を受け取るとストリーム再生を停止する(ステップS1206)。
On the other hand, the synchronous
また、スレーブ再生端末(50,N)の同期再生制御部52は、スレーブ再生端末(50,N)の送信部53に配信サーバ20への配信停止を送る指示を出す(ステップS1207)。スレーブ再生端末(50,N)の送信部53は、配信サーバ20へネットワークA30を介して符号化データの配信停止を送信する(ステップS1208)。スレーブ再生端末(50,N)は、符号化データ受信と再生を停止する(ステップS1209)。
Further, the synchronous
以上説明したように、配信サーバにマルチキャスト対応の手を加えずに、マスタ再生端末とスレーブ再生端末に分類し、スレーブ再生端末はマスタ再生端末の支配下に置かれるように構成し、電波時計を使って、各再生端末の電波時計を正確にあわせておき、各再生端末の電波時計が復号化開始時刻(T)になった時、各再生端末は一斉に復号化開始を実行するようにした。また、復号化開始時刻(T)は、全てのスレーブ再生端末から再生開始準備完了受領直後のマスタ再生端末の電波時計の時刻(X)+マスタ再生端末からスレーブ再生端末へ復号化開始指示が届くまでの最大の時間(Y)を加えたものである。また、ナビゲーション符号化映像データとメイン符号化映像データと音声符号化データ(音声がない場合もある)を1つの符号化データで配信する。ナビゲーション符号化映像データとメイン符号化映像データと音声符号化データ(音声がない場合もある)は、1GOP単位で復号する。コンテンツ配信は広域ネットワーク、再生端末間の再生制御は限定範囲内ネットワークに分ける。コンテンツ配信はユニキャストで行う。限定範囲内ネットワーク下の再生端末間再生制御は、マルチキャストに対応している。 As described above, the distribution server is categorized as a master playback terminal and a slave playback terminal without changing the multicast support, and the slave playback terminal is configured to be under the control of the master playback terminal. The radio clock of each playback terminal is accurately set, and when the radio clock of each playback terminal reaches the decoding start time (T), each playback terminal starts decoding simultaneously. . The decoding start time (T) is the time (X) of the radio clock of the master playback terminal immediately after the completion of the playback start preparation completion from all the slave playback terminals + the decoding start instruction reaches from the master playback terminal to the slave playback terminal. The maximum time (Y) until is added. Also, the navigation encoded video data, the main encoded video data, and the audio encoded data (there may be no audio) are distributed as one encoded data. Navigation encoded video data, main encoded video data, and audio encoded data (there may be no audio) are decoded in units of 1 GOP. Content distribution is divided into a wide area network, and reproduction control between reproduction terminals is divided into a limited range network. Content distribution is performed by unicast. Playback control between playback terminals in a network within a limited range supports multicast.
これにより、ユニキャストのみをサポートする配信サーバにおいても、複数端末間で同一映像を同期して視聴することができる。また、他端末がどこの領域を視聴しているか知ることができるとともに、他端末の再生領域と同じ領域を再生することができる。また、1GOP(Group Of Picture)単位で復号するため、再生のずれが発生しにくく、限定範囲のネットワーク環境により、再生端末間再生制御が容易になる。 Thereby, even in a distribution server that supports only unicast, the same video can be viewed synchronously among a plurality of terminals. In addition, it is possible to know which area the other terminal is viewing and to reproduce the same area as the reproduction area of the other terminal. Further, since decoding is performed in units of 1 GOP (Group Of Picture), reproduction deviation hardly occurs, and reproduction control between reproduction terminals is facilitated by a network environment in a limited range.
なお、図1における処理部の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより情報配信処理及び同期再生処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境(あるいは表示環境)を備えたWWWシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(RAM)のように、一定時間プログラムを保持しているものも含むものとする。 1 is recorded on a computer-readable recording medium, and the program recorded on the recording medium is read and executed by a computer system. Synchronous playback processing may be performed. Here, the “computer system” includes an OS and hardware such as peripheral devices. The “computer system” includes a WWW system having a homepage providing environment (or display environment). The “computer-readable recording medium” refers to a storage device such as a flexible medium, a magneto-optical disk, a portable medium such as a ROM and a CD-ROM, and a hard disk incorporated in a computer system. Further, the “computer-readable recording medium” refers to a volatile memory (RAM) in a computer system that becomes a server or a client when a program is transmitted via a network such as the Internet or a communication line such as a telephone line. In addition, those holding programs for a certain period of time are also included.
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)や電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであってもよい。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であってもよい。 The program may be transmitted from a computer system storing the program in a storage device or the like to another computer system via a transmission medium or by a transmission wave in the transmission medium. Here, the “transmission medium” for transmitting the program refers to a medium having a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line. The program may be for realizing a part of the functions described above. Furthermore, what can implement | achieve the function mentioned above in combination with the program already recorded on the computer system, what is called a difference file (difference program) may be sufficient.
ユニキャストのみをサポートする配信サーバによって配信された情報を、複数端末間で同一映像を同期して視聴することが不可欠な用途に適用できる。 Information distributed by a distribution server that supports only unicast can be applied to applications where it is indispensable to view and synchronize the same video among a plurality of terminals.
10・・・電波送信所、20・・・配信サーバ、21・・・受信部、22・・・再生データ保存部、23・・送信部、30・・・ネットワークA(広域ネットワーク)、40・・・マスタ再生端末、41・・・再生要求部、42・・・同期再生制御部、43・・・送信部、44・・・受信部、45・・・復号部、46・・・表示部、47・・・電波時計、50、N・・・スレーブ再生端末、51・・・再生要求部、52・・・同期再生制御部、53・・・送信部、54・・・受信部、55・・・復号部、56・・・表示部、57・・・電波時計、80・・・ネットワークB
DESCRIPTION OF
Claims (12)
前記マスタ再生端末は、
配信サーバに対して前記符号化コンテンツデータの配信要求を送信し、前記配信サーバからユニキャストにより配信された前記符号化コンテンツデータを受信するデータ受信手段と、
前記配信要求した前記符号化コンテンツのURLを前記スレーブ再生端末の全てに対して送信するURL送信手段と、
全ての前記スレーブ再生端末からの再生開始準備完了情報の受信が終了した時刻に対して前記スレーブ再生端末に復号化開始時刻情報が届くまでの時間を加算することにより前記符号化コンテンツデータの復号化開始時刻を算出して、全ての前記スレーブ再生端末に対して算出した前記復号化開始時刻を含む復号化開始時刻情報を同時に送信する時刻送信手段と、
算出した前記復号化開始時刻になった際に、受信した前記符号化コンテンツデータの復号化を行ってコンテンツデータの再生を行う再生手段とを備え、
前記スレーブ再生端末は、
前記マスタ再生端末から送信された前記符号化コンテンツのURLに基づき前記配信サーバに対して配信要求を送信し、前記配信サーバからユニキャストにより配信された符号化コンテンツデータを受信するデータ受信手段と、
前記符号化コンテンツデータを受信して、再生開始準備が完了した際に、前記マスタ再生端末に対して、再生開始準備完了情報を送信する準備完了情報送信手段と、
前記マスタ再生端末から復号化開始時刻情報を受信し、受信した前記復号化開始時刻になった際に、受信した前記符号化コンテンツデータの復号化を行ってコンテンツデータの再生を行う再生手段とを備えた
ことを特徴とする同期再生システム。 A synchronous reproduction system in which a master reproduction terminal, at least one slave reproduction terminal, and a distribution server that distributes encoded content data to the master terminal and the slave terminal by unicast are connected via a network. ,
The master playback terminal is
A data receiving means for transmitting a distribution request for the encoded content data to a distribution server and receiving the encoded content data distributed by unicast from the distribution server;
URL transmitting means for transmitting the URL of the encoded content requested for distribution to all of the slave playback terminals;
Decoding the encoded content data by adding the time until the decoding start time information reaches the slave playback terminal to the time when reception of the playback start preparation completion information from all the slave playback terminals is completed Time transmitting means for calculating a start time and simultaneously transmitting decoding start time information including the decoding start time calculated for all the slave playback terminals;
When it becomes calculated the decoded start time, and a reproduction means for reproducing the content data decoding of the encoded contents data received I line,
The slave playback terminal
Data receiving means for transmitting a distribution request to the distribution server based on the URL of the encoded content transmitted from the master reproduction terminal, and receiving encoded content data distributed by unicast from the distribution server;
When the encoded content data is received and when preparation for reproduction start is completed, preparation completion information transmission means for transmitting reproduction start preparation completion information to the master reproduction terminal;
Receiving decoding start time information from said master reproduction terminal, when it becomes the decoding start time of receiving, and reproducing means for reproducing the contents data by performing decoding of the encoded contents data received A synchronized playback system characterized by comprising.
見たい領域を部分的に選択するための前記コンテンツデータの映像全体を表示するナビゲーション映像と、
前記マスタ再生端末における選択領域情報に基づいて、前記ナビゲーション映像から前記見たい領域として全体または部分的に切り出して表示するメイン映像と、
前記マスタ再生端末における選択領域情報に基づいて、前記ナビゲーション映像から切り出した映像をサムネイル化して表示する第1のサムネイル映像と、
前記スレーブ再生端末から送信された前記スレーブ再生端末における選択領域情報に基づいて、前記ナビゲーション映像から切り出した映像をサムネイル化して表示する第2のサムネイル映像と
を再生することを特徴とする請求項1に記載の同期再生システム。 The reproduction means of the master reproduction terminal is
A navigation video displaying the entire video of the content data for partially selecting an area to be viewed;
Based on the selected area information in the master playback terminal, a main video that is cut out and displayed as a region to be viewed from the navigation video as a whole or a part,
A first thumbnail video for displaying a video clipped from the navigation video as a thumbnail based on the selection area information in the master playback terminal;
2. A second thumbnail image that displays a thumbnail image of a video clipped from the navigation video based on selection area information transmitted from the slave playback terminal in the slave playback terminal. The synchronized playback system described in 1.
見たい領域を部分的に選択するための前記コンテンツデータの映像全体を表示するナビゲーション映像と、
前記スレーブ再生端末における選択領域情報に基づいて、前記ナビゲーション映像から前記見たい領域として全体または部分的に切り出して表示するメイン映像と、
前記スレーブ再生端末における選択領域情報に基づいて、前記ナビゲーション映像から切り出した映像をサムネイル化して表示する第1のサムネイル映像と、
前記マスタ再生端末から送信された前記マスタ再生端末における選択領域情報に基づいて、前記ナビゲーション映像から切り出した映像をサムネイル化して表示する第2のサムネイル映像と
を再生することを特徴とする請求項1に記載の同期再生システム。 The playback means of the slave playback terminal includes:
A navigation video displaying the entire video of the content data for partially selecting an area to be viewed;
Based on the selected area information in the slave playback terminal, a main video that is cut out and displayed as the area to be viewed from the navigation video in whole or in part, and
A first thumbnail video that displays a thumbnail of the video clipped from the navigation video based on the selection area information in the slave playback terminal;
2. A second thumbnail image that displays a thumbnail image of a video clipped from the navigation video based on selection area information transmitted from the master playback terminal at the master playback terminal. The synchronized playback system described in 1.
前記スレーブ再生端末の再生手段は、
見たい領域を部分的に選択するための前記コンテンツデータの映像全体を表示するナビゲーション映像と、
自己のスレーブ再生端末における選択領域情報に基づいて、前記ナビゲーション映像から前記見たい領域として全体または部分的に切り出して表示するメイン映像と、
自己の前記スレーブ再生端末における選択領域情報に基づいて、前記ナビゲーション映像から切り出した映像をサムネイル化して表示する第1のサムネイル映像と、
前記マスタ再生端末から送信された前記マスタ再生端末における選択領域情報に基づいて、前記ナビゲーション映像から切り出した映像をサムネイル化して表示する第2のサムネイル映像と、
他のスレーブ再生端末から送信された他の前記スレーブ再生端末における選択領域情報に基づいて、前記ナビゲーション映像から切り出した映像をサムネイル化して表示する第3のサムネイル映像と
を再生することを特徴とする請求項1に記載の同期再生システム。 There are a plurality of slave playback terminals,
Reproducing means of said slave reproducing terminal,
A navigation video displaying the entire video of the content data for partially selecting an area to be viewed;
Based on the selection area information in its own slave playback terminal, a main video that is cut out as a whole or part of the area to be viewed from the navigation video and displayed,
A first thumbnail video that displays a thumbnail of the video clipped from the navigation video based on the selection area information in the slave playback terminal of the device;
A second thumbnail image for displaying a thumbnail of the video clipped from the navigation video based on the selection area information in the master playback terminal transmitted from the master playback terminal;
Based on selection area information in another slave playback terminal transmitted from another slave playback terminal, a third thumbnail video that displays the video clipped from the navigation video as a thumbnail is played back. The synchronized playback system according to claim 1.
前記選択領域指定手段によって選択された前記見たい領域の選択領域情報を前記マスタ再生端末または前記スレーブ再生端末に対して送信することを特徴とする請求項3から5のいずれか1項に記載の同期再生システム。 The master playback terminal and the slave reproducing terminal includes a selection area designation means for selecting operation of the area to be viewed from said said navigation image being reproduced,
According to any one of claims 3 to 5, characterized in that to transmit for a selected area information of the area you want to see the selected by said selection area designating means to the master reproduction terminal or the slave reproduction terminal Synchronous playback system.
前記サムネイル選択手段によって選択されたサムネイル映像を前記メイン映像として表示し、該メイン映像における選択領域情報を前記マスタ再生端末または前記スレーブ再生端末に送信することを特徴とする請求項3から5のいずれか1項に記載の同期再生システム。 The master playback terminal and before kissing slave reproducing terminal includes a thumbnail selection means for selecting one of the thumbnail images from a plurality of the thumbnail image,
6. The thumbnail video selected by the thumbnail selection means is displayed as the main video, and selection area information in the main video is transmitted to the master playback terminal or the slave playback terminal. synchronized playback system according to any one of claims.
前記スレーブ再生端末は、前記マスタ再生端末から受信した前記再生時間と、自己の再生時間とを比較し、
自己の前記再生時間が、前記マスタ再生端末から受信した前記再生時間より遅れている場合に、遅れている時間分読み飛ばして再生し、
自己の前記再生時間が、前記マスタ再生端末から受信した前記再生時間より進んでいる場合に、進んでいる時間分再生を停止した後に再生を再開する
ことを特徴とする請求項1または2に記載の同期再生システム。 The master playback terminal includes playback time transmitting means for acquiring a playback time that is an elapsed time from the start of playback and transmitting the acquired playback time to the slave playback terminal ,
The slave playback terminal compares the playback time received from the master playback terminal with its own playback time,
If the playback time of itself is delayed from the playback time received from the master playback terminal , skip and play back the delayed time,
3. The playback is resumed after stopping the playback for the advanced time when the playback time of the player is ahead of the playback time received from the master playback terminal. 4. Synchronized playback system.
前記マスタ再生端末が、配信サーバに対して前記符号化コンテンツデータの配信要求を送信し、前記配信サーバからユニキャストにより配信された前記符号化コンテンツデータを受信するデータ受信ステップと、
前記マスタ再生端末が、前記配信要求した前記符号化コンテンツのURLを前記スレーブ再生端末の全てに対して送信するURL送信ステップと、
前記マスタ再生端末が、全ての前記スレーブ再生端末からの再生開始準備完了情報の受信が終了した時刻に対して前記スレーブ再生端末に復号化開始時刻情報が届くまでの時間を加算することにより前記符号化コンテンツデータの復号化開始時刻を算出して、全ての前記スレーブ再生端末に対して算出した前記復号化開始時刻を含む復号化開始時刻情報を同時に送信する時刻送信ステップと、
前記マスタ再生端末が、算出した前記復号化開始時刻になった際に、受信した前記符号化コンテンツデータの復号化を行ってコンテンツデータの再生を行う再生ステップと、
前記スレーブ再生端末が、前記マスタ再生端末から送信された前記符号化コンテンツのURLに基づき前記配信サーバに対して配信要求を送信し、前記配信サーバからユニキャストにより配信された符号化コンテンツデータを受信するデータ受信ステップと、
前記スレーブ再生端末が、前記符号化コンテンツデータを受信して、再生開始準備が完了した際に、前記マスタ再生端末に対して、再生開始準備完了情報を送信する準備完了情報送信ステップと、
前記マスタ再生端末から復号化開始時刻情報を受信し、受信した前記復号化開始時刻になった際に、受信した前記符号化コンテンツデータの復号化を行ってコンテンツデータの再生を行う再生ステップと
を有することを特徴とする同期再生方法。 The master playback terminal, and at least one slave reproduction terminal, the encoded content data by unicast master terminal and synchronized playback system that a distribution server are connected via a network to be distributed to the slave terminal performs A synchronized playback method,
A data receiving step in which the master playback terminal transmits a distribution request for the encoded content data to a distribution server and receives the encoded content data distributed by unicast from the distribution server;
A URL transmission step in which the master reproduction terminal transmits the URL of the encoded content requested for distribution to all of the slave reproduction terminals;
The master playback terminal adds the time until the decoding start time information arrives at the slave playback terminal with respect to the time when reception of playback start preparation completion information from all the slave playback terminals is completed. A time transmission step of calculating the decryption start time of the encrypted content data and simultaneously transmitting the decryption start time information including the decryption start time calculated for all the slave playback terminals;
A reproduction step of reproducing the content data by decoding the received encoded content data when the master reproduction terminal reaches the calculated decoding start time;
The slave playback terminal transmits a distribution request to the distribution server based on the URL of the encoded content transmitted from the master reproduction terminal, and receives encoded content data distributed by unicast from the distribution server. A data receiving step to perform,
A preparation completion information transmission step of transmitting reproduction start preparation completion information to the master reproduction terminal when the slave reproduction terminal receives the encoded content data and the reproduction start preparation is completed;
A decoding step of receiving decoding start time information from the master reproduction terminal, and decoding the received encoded content data and reproducing the content data when the received decoding start time is reached ; A synchronized playback method comprising:
前記マスタ再生端末が、配信サーバに対して前記符号化コンテンツデータの配信要求を送信し、前記配信サーバからユニキャストにより配信された前記符号化コンテンツデータを受信するデータ受信ステップと、
前記マスタ再生端末が、前記配信要求した前記符号化コンテンツのURLを前記スレーブ再生端末の全てに対して送信するURL送信ステップと、
前記マスタ再生端末が、全ての前記スレーブ再生端末からの再生開始準備完了情報の受信が終了した時刻に対して前記スレーブ再生端末に復号化開始時刻情報が届くまでの時間を加算することにより前記符号化コンテンツデータの復号化開始時刻を算出して、全ての前記スレーブ再生端末に対して算出した前記復号化開始時刻を含む復号化開始時刻情報を同時に送信する時刻送信ステップと、
前記マスタ再生端末が、算出した前記復号化開始時刻になった際に、受信した前記符号化コンテンツデータの復号化を行ってコンテンツデータの再生を行う再生ステップと、
を前記コンピュータに行わせることを特徴とする同期再生プログラム。 The master in a synchronous reproduction system in which a master reproduction terminal, at least one slave reproduction terminal, and a distribution server that distributes encoded content data to the master terminal and the slave terminal by unicast are connected via a network. A synchronized playback program that runs on a computer on a playback terminal,
A data receiving step in which the master playback terminal transmits a distribution request for the encoded content data to a distribution server and receives the encoded content data distributed by unicast from the distribution server;
A URL transmission step in which the master reproduction terminal transmits the URL of the encoded content requested for distribution to all of the slave reproduction terminals;
The master playback terminal adds the time until the decoding start time information arrives at the slave playback terminal with respect to the time when reception of playback start preparation completion information from all the slave playback terminals is completed. A time transmission step of calculating the decryption start time of the encrypted content data and simultaneously transmitting the decryption start time information including the decryption start time calculated for all the slave playback terminals;
A reproduction step of reproducing the content data by decoding the received encoded content data when the master reproduction terminal reaches the calculated decoding start time;
A synchronized playback program that causes the computer to execute
前記スレーブ再生端末が、前記マスタ再生端末から送信された前記符号化コンテンツのURLに基づき前記配信サーバに対して配信要求を送信し、前記配信サーバからユニキャストにより配信された符号化コンテンツデータを受信するデータ受信ステップと、
前記スレーブ再生端末が、前記符号化コンテンツデータを受信して、再生開始準備が完了した際に、前記マスタ再生端末に対して、再生開始準備完了情報を送信する準備完了情報送信ステップと、
前記マスタ再生端末から復号化開始時刻情報を受信し、受信した前記復号化開始時刻になった際に、受信した前記符号化コンテンツデータの復号化を行ってコンテンツデータの再生を行う再生ステップと
を前記コンピュータに行わせることを特徴とする同期再生プログラム。 The slave in a synchronous reproduction system in which a master reproduction terminal, at least one slave reproduction terminal, and a distribution server that distributes encoded content data to the master terminal and the slave terminal by unicast are connected via a network A synchronized playback program that runs on a computer on a playback terminal,
The slave playback terminal transmits a distribution request to the distribution server based on the URL of the encoded content transmitted from the master reproduction terminal, and receives encoded content data distributed by unicast from the distribution server. A data receiving step to perform,
A preparation completion information transmission step of transmitting reproduction start preparation completion information to the master reproduction terminal when the slave reproduction terminal receives the encoded content data and the reproduction start preparation is completed;
A decoding step of receiving decoding start time information from the master reproduction terminal, and decoding the received encoded content data and reproducing the content data when the received decoding start time is reached ; A synchronized playback program that is executed by the computer.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010094018A JP5394307B2 (en) | 2010-04-15 | 2010-04-15 | Synchronized playback system, synchronized playback method, and synchronized playback program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010094018A JP5394307B2 (en) | 2010-04-15 | 2010-04-15 | Synchronized playback system, synchronized playback method, and synchronized playback program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011228784A JP2011228784A (en) | 2011-11-10 |
JP5394307B2 true JP5394307B2 (en) | 2014-01-22 |
Family
ID=45043670
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010094018A Expired - Fee Related JP5394307B2 (en) | 2010-04-15 | 2010-04-15 | Synchronized playback system, synchronized playback method, and synchronized playback program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5394307B2 (en) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5682533B2 (en) * | 2011-10-19 | 2015-03-11 | トヨタ自動車株式会社 | Communication terminal device and communication method |
JP5557939B2 (en) * | 2012-03-29 | 2014-07-23 | 株式会社Nttドコモ | Portable terminal, information reproduction system, and information reproduction method |
JP2014072608A (en) * | 2012-09-28 | 2014-04-21 | Brother Ind Ltd | Information processing system, information processing device, display device, and program |
JP6213181B2 (en) * | 2013-11-20 | 2017-10-18 | ヤマハ株式会社 | Synchronous playback system and synchronous playback method |
KR101682978B1 (en) * | 2016-07-26 | 2016-12-07 | 쿨사인 주식회사 | Precision Time Protocol . |
US11288032B2 (en) | 2017-07-28 | 2022-03-29 | National Institute Of Advanced Industrial Science And Technology | Platform for control in synchronization with music and control method therefor |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09198228A (en) * | 1996-01-17 | 1997-07-31 | Nippon Telegr & Teleph Corp <Ntt> | Shared view displaying method |
JP2003101991A (en) * | 2001-09-20 | 2003-04-04 | Fuji Xerox Co Ltd | Video processing method, device, and program |
JP2008096756A (en) * | 2006-10-12 | 2008-04-24 | Sharp Corp | Multi-screen display system and display method thereof |
JP5151211B2 (en) * | 2007-03-30 | 2013-02-27 | ソニー株式会社 | Multi-screen synchronized playback system, display control terminal, multi-screen synchronized playback method, and program |
-
2010
- 2010-04-15 JP JP2010094018A patent/JP5394307B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2011228784A (en) | 2011-11-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5727385B2 (en) | Synchronize presentation state across multiple applications | |
JP5394307B2 (en) | Synchronized playback system, synchronized playback method, and synchronized playback program | |
JP5979483B2 (en) | Content reproduction apparatus, content reproduction system, and content reproduction method | |
CN104244075B (en) | A kind of sharing media information method and system | |
JP2014519729A (en) | Control playback of content on display devices | |
US9055193B2 (en) | System and method of a remote conference | |
JP2007057767A (en) | Content receiving set and content receiving method | |
WO2018134660A1 (en) | Content streaming system and method | |
JP5183591B2 (en) | Synchronous playback method, other playback terminal selection area video playback method, synchronized playback stop method, synchronized playback system and program | |
US20240107087A1 (en) | Server, terminal and non-transitory computer-readable medium | |
JP5060649B1 (en) | Information reproducing apparatus and information reproducing method | |
JP2008085934A (en) | Remote reproduction system for video and method of resume reproduction | |
JP2011091754A (en) | Video processing device and method | |
JP5455594B2 (en) | Video division reproduction method, video division reproduction apparatus, and program | |
JP5420863B2 (en) | Thin client system, application server, terminal control server, communication method | |
JP4496926B2 (en) | Content distribution system | |
JP5121941B2 (en) | Program content viewing system and content reception recording / playback apparatus | |
JP5899738B2 (en) | Information processing system, information processing apparatus, and information processing program | |
JP2006279294A (en) | Content reproduction system, content reproduction method, and computer program | |
JP2008135985A (en) | Content reproducing device, content reproduction controller, content reproducing method | |
CN107852523B (en) | Method, terminal and equipment for synchronizing media rendering between terminals | |
JP2014127213A (en) | Synchronous reproduction control device, and synchronous reproduction control method | |
JP5899718B2 (en) | Information processing system, information processing apparatus, and information processing program | |
JP2012175178A (en) | Content reproduction method | |
JP2006285586A (en) | Content distribution system, content distribution device, content distribution program, and computer program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20121029 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20130605 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130716 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130723 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20130725 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130917 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20131008 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20131016 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5394307 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |