JP2012169739A - Video division reproduction method, video reproduction method, video division reproduction system and video division reproduction program - Google Patents
Video division reproduction method, video reproduction method, video division reproduction system and video division reproduction program Download PDFInfo
- Publication number
- JP2012169739A JP2012169739A JP2011027089A JP2011027089A JP2012169739A JP 2012169739 A JP2012169739 A JP 2012169739A JP 2011027089 A JP2011027089 A JP 2011027089A JP 2011027089 A JP2011027089 A JP 2011027089A JP 2012169739 A JP2012169739 A JP 2012169739A
- Authority
- JP
- Japan
- Prior art keywords
- playback
- slave
- terminal
- reproduction
- playback terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
本発明は、一つの映像を分割して複数の端末で再生する映像分割再生方法、映像再生方法、映像分割再生装置、及びプログラムに関するものである。 The present invention relates to a video division reproduction method, a video reproduction method, a video division reproduction device, and a program for dividing one video and reproducing it on a plurality of terminals.
複数の表示装置により一の画像を分割表示させる場合に、各表示装置の配置や数に応じて、適切な分割画像を作成して表示させるサーバ装置、表示装置及びその表示方法がある(例えば、特許文献1参照)。 In a case where one image is divided and displayed by a plurality of display devices, there are a server device, a display device, and a display method for generating and displaying an appropriate divided image according to the arrangement and number of display devices (for example, Patent Document 1).
特許文献1の従来技術では、サーバ装置が各表示装置から受信した情報を基に、各表示装置に表示させるための分割画像作成処理を行っている。そのため、サーバの負荷が増大するという問題がある。
In the prior art disclosed in
本発明は、このような事情を考慮してなされたものであり、その目的は、複数の表示装置により1つの画像を分割表示させる場合に、サーバの負荷を増大させること無く、また、各表示装置の配置や数に応じて、適切な分割画像を表示させることができる映像分割再生方法、映像再生方法、映像分割再生システム、及び映像分割再生プログラムを提供することにある。 The present invention has been made in consideration of such circumstances, and its object is to display each image without increasing the load on the server when one image is divided and displayed by a plurality of display devices. An object of the present invention is to provide a video division reproduction method, a video reproduction method, a video division reproduction system, and a video division reproduction program capable of displaying an appropriate divided image according to the arrangement and number of apparatuses.
上述の課題を鑑み、本発明に係る映像分割再生方法は、それぞれネットワークを介して通信可能に接続されている配信サーバと、マスタ再生端末と、少なくとも1つのスレーブ再生端末とを備え、前記マスタ再生端末のディスプレイの画面と前記スレーブ再生端末のディスプレイの画面から構成されるマルチ画面に映像を表示する映像分割再生システムにおける映像分割再生方法において、前記配信サーバが、前記マルチ画面に表示するコンテンツ映像の符号化映像データと、前記マルチ画面を構成する前記マスタ再生端末と前記スレーブ再生端末の数である分割数とを、前記マスタ再生端末および前記スレーブ再生端末に送信するステップと、前記マスタ再生端末が、前記マルチ画面における前記スレーブ再生端末のディスプレイの画面の位置を前記スレーブ再生端末のそれぞれに対して割り当てられた固有の情報で表わすスレーブ再生端末識別子を、それぞれ対応する前記スレーブ再生端末に送信するステップと、前記スレーブ再生端末が、前記コンテンツ映像における一部の領域である選択領域を示す選択領域情報、前記スレーブ再生端末識別子および前記分割数に基づき、前記マルチ画面において当該スレーブ再生端末が表示を担当する領域を示すスレーブ再生領域情報を生成し、当該スレーブ再生領域情報および前記選択領域情報に基づき、前記符号化映像データのコンテンツ映像における選択領域のうち、当該スレーブ再生端末が表示を担当する領域を示すスレーブ再生領域値を算出するステップと、前記マスタ再生端末が、前記マスタディスプレイにおける前記マスタ再生端末のディスプレイの位置を示すマスタ再生端末識別子、前記選択領域情報および前記分割数に基づき、前記マルチ画面において当該マスタ再生端末が表示を担当する領域を示すマスタ再生領域情報を生成し、当該マスタ再生領域情報および前記選択領域情報に基づき、前記符号化映像データのコンテンツ映像における選択領域のうち、当該マスタ再生端末が表示を担当する領域を示すマスタ再生領域値を算出するステップと、前記マスタ再生端末が、前記符号化映像データに基づき、前記マスタ再生領域値が示す領域のコンテンツ映像の一部を自身のディスプレイに表示するとともに、前記スレーブ再生端末が、前記マスタ再生端末の表示に同期して、前記符号化映像データに基づき、前記スレーブ再生領域値が示す領域のコンテンツ映像の一部を自身のディスプレイに表示するステップと、を備えることを特徴とする。 In view of the above-described problems, a video segmentation playback method according to the present invention includes a distribution server, a master playback terminal, and at least one slave playback terminal that are communicably connected via a network, and the master playback is provided. In a video split playback method in a video split playback system that displays video on a multi-screen configured from a display screen of a terminal and a display screen of the slave playback terminal, the distribution server displays content video to be displayed on the multi-screen. Transmitting the encoded video data and the division number which is the number of the master reproduction terminal and the slave reproduction terminal constituting the multi-screen to the master reproduction terminal and the slave reproduction terminal; The display screen of the slave playback terminal in the multi-screen Transmitting a slave playback terminal identifier representing unique information assigned to each of the slave playback terminals to the corresponding slave playback terminal; and Based on the selection area information indicating the selection area, the slave playback terminal identifier, and the number of divisions, the slave playback area information indicating the area that the slave playback terminal is responsible for display in the multi-screen is generated, and the slave A step of calculating a slave playback area value indicating an area that the slave playback terminal is responsible for display, of the selected areas in the content video of the encoded video data, based on the playback area information and the selection area information; A terminal is connected to the master display Based on the master playback terminal identifier indicating the display position of the playback terminal, the selection area information, and the number of divisions, master playback area information indicating an area that the master playback terminal is responsible for display on the multi-screen is generated, and the master Calculating a master playback area value indicating an area for which the master playback terminal is responsible for display among the selected areas in the content video of the encoded video data based on the playback area information and the selection area information; and Based on the encoded video data, the terminal displays a part of the content video in the area indicated by the master playback area value on its display, and the slave playback terminal synchronizes with the display of the master playback terminal. The content of the area indicated by the slave reproduction area value based on the encoded video data And displaying a part of the video on its own display.
上述の映像分割再生方法において、前記マスタ再生端末は、前記マルチ画面に表示している前記コンテンツ映像の選択領域を示す第1選択領域情報を異なる第2選択領域情報に変更することを示す情報を入力すると、当該第2選択領域情報を前記スレーブ再生端末に送信するとともに、当該第2選択領域情報、前記マスタ再生端末識別子および前記分割数に基づき前記マスタ再生領域情報を生成し、当該マスタ再生領域情報および前記第2選択領域情報に基づき前記マスタ再生領域値を算出するステップと、前記スレーブ再生端末が、前記マスタ再生端末から前記第2選択領域情報を受信すると、当該第2選択領域情報、前記スレーブ再生端末識別子および前記分割数に基づき前記スレーブ再生領域情報を生成し、当該スレーブ再生領域情報および前記第2選択領域情報に基づき前記スレーブ再生領域値を算出するステップと、を備えることを特徴とする。 In the video split reproduction method described above, the master reproduction terminal has information indicating that the first selection area information indicating the selection area of the content video displayed on the multi-screen is changed to different second selection area information. When input, the second selection area information is transmitted to the slave reproduction terminal, and the master reproduction area information is generated based on the second selection area information, the master reproduction terminal identifier, and the division number, and the master reproduction area Calculating the master reproduction area value based on the information and the second selection area information; and when the slave reproduction terminal receives the second selection area information from the master reproduction terminal, the second selection area information, The slave playback area information is generated based on the slave playback terminal identifier and the number of divisions, and the slave playback area information Calculating said slave reproducing area value based on the preliminary second selection region information, characterized in that it comprises a.
上述の映像分割再生方法において、前記符号化映像データには、前記コンテンツ映像を再生する順番を映像の再生時間によって表わす再生時間情報が含まれており、前記マスタ再生端末あるいは前記スレーブ再生端末は、前記符号化映像データに基づき前記コンテンツ映像の一部を表示した場合、当該表示したコンテンツ映像の符号化映像データに対応する前記再生時間情報を送信するとともに、前記マスタ再生端末あるいは他の前記スレーブ再生端末から前記再生時間情報を受信した場合、前記受信した再生時間情報が示すタイミングに合わせるようにして各自の前記ディスプレイに前記コンテンツ映像を表示することを特徴とする。 In the video split playback method described above, the encoded video data includes playback time information representing the playback order of the content video by the playback time of the video, and the master playback terminal or the slave playback terminal When a part of the content video is displayed based on the encoded video data, the playback time information corresponding to the encoded video data of the displayed content video is transmitted, and the master playback terminal or other slave playback is transmitted. When the playback time information is received from a terminal, the content video is displayed on the display of each device so as to match the timing indicated by the received playback time information.
上述の映像分割再生方法において、前記マスタ再生端末は、前記マスタ再生端末は、前記ディスプレイに表示している前記コンテンツ映像の選択領域を示す第1選択領域情報を異なる第2選択領域情報に変更することを示す情報が入力されたか否かを判定し、前記第1選択領域情報を入力した時点から第1指定時間経過前に前記第2選択領域情報を入力した場合、前記第1選択領域情報を送信した時点から前記第1指定時間経過後に前記第2選択領域情報を前記スレーブ再生端末に送信し、前記ディスプレイに表示している前記コンテンツ映像の選択領域を示す第1選択領域情報を異なる第2選択領域情報に変更することを示す情報が入力されたか否かを判定し、前記第1選択領域情報を入力した時点から前記第1指定時間よりも長い第2指定時間以上経過した場合、前記第1選択領域情報を送信した時点から前記第2指定時間経過後に前記第1選択領域情報を前記スレーブ再生端末に送信することを特徴とする。 In the above video split playback method, the master playback terminal changes the first selection area information indicating the selection area of the content video displayed on the display to different second selection area information. If the second selection area information is input before the first designated time elapses after the first selection area information is input, the first selection area information is The second selection area information is transmitted to the slave playback terminal after the first specified time has elapsed from the time of transmission, and the second selection area information indicating the selection area of the content video displayed on the display is different from the second selection area information. It is determined whether or not information indicating that the selection area information is to be changed is input, and a second finger longer than the first designated time from the time when the first selection area information is input. If older than time, and transmits the first selection region information after the second specified time from the point of sending the first selection region information to the slave reproduction terminal.
上述の課題を鑑み、本発明に係る映像再生方法は、それぞれネットワークを介して通信可能に接続されている配信サーバ、メインディスプレイを備えるメイン再生端末、および、前記メインディスプレイと画面サイズが異なるサブディスプレイを備えるサブ再生端末、を備える映像再生システムにおける映像再生方法において、前記配信サーバが、コンテンツ映像の符号化映像データを前記メイン再生端末および前記サブ再生端末に送信するステップと、前記メイン再生端末が、前記コンテンツ映像における一部の領域である選択領域を示す選択領域情報を入力するステップと、前記メイン再生端末が、前記選択領域情報を前記サブ再生に送信するステップと、前記メイン再生端末が、前記符号化映像データに基づき、前記選択領域情報が示す領域のコンテンツ映像の一部を前記メインディスプレイに表示するとともに、前記サブ再生端末が、前記メイン再生端末の表示に同期して、前記符号化映像データに基づき、前記選択領域情報が示す領域のコンテンツ映像の一部を前記サブディスプレイに表示するステップと、を備えることを特徴とする。 In view of the above-described problems, a video playback method according to the present invention includes a distribution server that is communicably connected via a network, a main playback terminal including a main display, and a sub-display having a screen size different from that of the main display. In the video playback method in the video playback system including the sub playback terminal, the distribution server transmits the encoded video data of the content video to the main playback terminal and the sub playback terminal, and the main playback terminal A step of inputting selection area information indicating a selection area which is a partial area in the content video, a step of the main playback terminal transmitting the selection area information to the sub-playback, and the main playback terminal, Based on the encoded video data, the selection area information indicates A part of the content video of the area is displayed on the main display, and the sub playback terminal synchronizes with the display of the main playback terminal, and the content of the area indicated by the selection area information based on the encoded video data And displaying a part of the video on the sub-display.
上述の課題を鑑み、本発明に係る映像分割再生システムは、それぞれネットワークを介して通信可能に接続されている配信サーバと、マスタ再生端末と、少なくとも1つのスレーブ再生端末とを備え、前記マスタ再生端末のディスプレイの画面と前記スレーブ再生端末のディスプレイの画面から構成されるマルチ画面に映像を表示する映像分割再生システムにおいて、前記配信サーバは、前記マルチ画面に表示するコンテンツ映像の符号化映像データと、前記マルチ画面を構成する前記マスタ再生端末と前記スレーブ再生端末の数である分割数とを、前記マスタ再生端末および前記スレーブ再生端末に送信する送信部を備え、前記マスタ再生端末は、前記マルチ画面における前記スレーブ再生端末のディスプレイの画面の位置を前記スレーブ再生端末のそれぞれに対して割り当てられた固有の情報で表わすスレーブ再生端末識別子を、それぞれ対応する前記スレーブ再生端末に送信する送信部と、前記マスタディスプレイにおける前記マスタ再生端末のディスプレイの位置を示すマスタ再生端末識別子、前記コンテンツ映像における一部の領域である選択領域を示す選択領域情報および前記分割数に基づき、前記マルチ画面において当該マスタ再生端末が表示を担当する領域を示すマスタ再生領域情報を生成するとともに、当該マスタ再生領域情報および前記選択領域情報に基づき、前記符号化映像データのコンテンツ映像における選択領域のうち、当該マスタ再生端末が表示を担当する領域を示すマスタ再生領域値を算出し、前記符号化映像データに基づき、前記マスタ再生領域値が示す領域のコンテンツ映像の一部を自身のディスプレイに表示させるマスタ復号部と、を備え、前記スレーブ再生端末は、前記選択領域情報、前記スレーブ再生端末識別子および前記分割数に基づき、前記マルチ画面において当該スレーブ再生端末が表示を担当する領域を示すスレーブ再生領域情報を生成するとともに、当該スレーブ再生領域情報および前記選択領域情報に基づき、前記符号化映像データのコンテンツ映像における選択領域のうち、当該スレーブ再生端末が表示を担当する領域を示すスレーブ再生領域値を算出し、前記マスタ再生端末の表示に同期して、前記符号化映像データに基づき、前記スレーブ再生領域値が示す領域のコンテンツ映像の一部を自身のディスプレイに表示させるスレーブ復号部と、を備えることを特徴とする。 In view of the above-described problems, a video split reproduction system according to the present invention includes a distribution server, a master reproduction terminal, and at least one slave reproduction terminal that are communicably connected to each other via a network. In a video split playback system that displays video on a multi-screen configured from a display screen of a terminal and a display screen of the slave playback terminal, the distribution server includes encoded video data of content video to be displayed on the multi-screen, A transmission unit that transmits the master playback terminal and the number of divisions that are the number of slave playback terminals that constitute the multi-screen to the master playback terminal and the slave playback terminal; The position of the display of the slave playback terminal on the screen is the slave A transmitter for transmitting a slave playback terminal identifier represented by unique information assigned to each of the live terminals to the corresponding slave playback terminal, and a master indicating the position of the display of the master playback terminal in the master display Based on the playback terminal identifier, the selection area information indicating a selection area that is a partial area in the content video, and the number of divisions, the master playback area information indicating the area that the master playback terminal is responsible for display in the multi-screen is generated. In addition, based on the master reproduction area information and the selection area information, a master reproduction area value indicating an area in which the master reproduction terminal is responsible for display among the selection areas in the content video of the encoded video data is calculated, Based on the encoded video data, the master reproduction area A master decoding unit that displays a part of the content video in the area indicated by the display on its own display, the slave playback terminal based on the selection area information, the slave playback terminal identifier, and the division number, Generating slave playback area information indicating an area in which the slave playback terminal is responsible for display, and based on the slave playback area information and the selection area information, among the selection areas in the content video of the encoded video data, A slave playback area value indicating an area in which the slave playback terminal is responsible for display is calculated, and in synchronization with the display of the master playback terminal, the content video in the area indicated by the slave playback area value is based on the encoded video data. A slave decoding unit that displays a part on its own display. It is a sign.
上述の課題を鑑み、本発明に係る映像分割再生プログラムは、それぞれネットワークを介して通信可能に接続されている複数の再生端末を備え、前記再生端末のディスプレイの画面から構成されるマルチ画面に映像を表示する映像分割再生システムに用いられるコンピュータに、前記マルチ画面に表示するコンテンツ映像の符号化映像データと、前記コンテンツ映像における一部の領域である選択領域を示す選択領域情報と、前記マルチ画面を構成する前記再生端末の数である分割数と、前記マルチ画面における自再生端末のディスプレイの位置を自再生端末のそれぞれに対して割り当てられた固有の情報で表わす再生端末識別子を受信するステップ、前記選択領域情報、前記再生端末識別子および前記分割数に基づき、前記マルチ画面において自再生端末が表示を担当する領域を示す再生領域情報を生成し、当該再生領域情報および前記選択領域情報に基づき、前記符号化映像データのコンテンツ映像における選択領域のうち、自再生端末が表示を担当する領域を示す再生領域値を算出するステップ、前記符号化映像データに基づき、前記再生領域値が示す領域のコンテンツ映像の一部を、他の再生端末の表示に同期して、自身のディスプレイに表示するステップ、を実行させるための映像分割再生プログラムであることを特徴とする。 In view of the above-described problems, a video segmentation playback program according to the present invention includes a plurality of playback terminals that are communicably connected via a network, and the video is displayed on a multi-screen composed of a display screen of the playback terminal. Encoded video data of content video to be displayed on the multi-screen, selection region information indicating a selection region that is a partial region in the content video, and the multi-screen Receiving a playback terminal identifier that represents the number of divisions that constitutes the playback terminal and the display position of the playback terminal on the multi-screen as unique information assigned to each of the playback terminals; Based on the selection area information, the playback terminal identifier, and the number of divisions, the multi-screen is displayed. Then, reproduction area information indicating an area for which the own reproduction terminal is responsible for display is generated, and the reproduction terminal displays the selected area in the content video of the encoded video data based on the reproduction area information and the selection area information. Calculating a reproduction area value indicating an area in charge of the content, a part of the content video in the area indicated by the reproduction area value based on the encoded video data in synchronization with the display of another reproduction terminal, A video division reproduction program for executing the step of displaying on a display.
本発明によると、複数の表示装置により1つの画像を分割表示させる場合に、サーバの負荷を増大させること無く、また、各表示装置の配置や数に応じて、適切な分割画像を表示させることができる。 According to the present invention, when one image is divided and displayed by a plurality of display devices, an appropriate divided image is displayed without increasing the load on the server and according to the arrangement and number of display devices. Can do.
[第1実施形態]
以下、本発明の一実施形態にかかる映像分割再生システムの一例について説明する。図1は、本実施形態にかかる映像分割再生システムの構成の一例を示すブロック図である。図2は、本実施形態に係る映像分割再生システムによって表示されるマルチ画面の一例を示す図である。このマルチ画面とは、複数のディスプレイの画面を組み合わせることによって形成される1つの画面のことである。
図1に示す本実施形態に係る映像分割再生システムは、図2に示す通り、各ディスプレイに表示する映像を制御することによって、複数のディスプレイによって構成されるマルチ画面に任意の映像を表示するシステムである。このマルチ画面は、図2に示す通り、例えば、1つのマスタ再生端末の表示部である第1ディスプレイD1の画面と、3つのスレーブ再生端末の表示部である第2ディスプレイD2、第3ディスプレイD3および第4ディスプレイD4のそれぞれの画面を含む。
[First Embodiment]
Hereinafter, an example of a video division reproduction system according to an embodiment of the present invention will be described. FIG. 1 is a block diagram illustrating an example of a configuration of a video division reproduction system according to the present embodiment. FIG. 2 is a diagram illustrating an example of a multi-screen displayed by the video split reproduction system according to the present embodiment. The multi-screen is a single screen formed by combining a plurality of display screens.
The video division reproduction system according to the present embodiment shown in FIG. 1 is a system that displays an arbitrary video on a multi-screen composed of a plurality of displays by controlling the video displayed on each display as shown in FIG. It is. As shown in FIG. 2, the multi-screen includes, for example, the screen of the first display D1 that is a display unit of one master playback terminal, the second display D2 and the third display D3 that are display units of three slave playback terminals. And the screens of the fourth display D4.
本実施形態に係る映像分割再生システムは、このマルチ画面に、例えば、表示対象となるコンテンツ映像からユーザによって選択された一部の映像(以下、選択映像という)を表示するものであり、ユーザによって選択された部分が変更された場合、このユーザの操作に応じて、変更後の映像を表示するものである。
例えば、コンテンツ映像が、図3に示すようなスポーツ映像である場合、矩形状のアイコンによって指定された部分が選択映像である。図3に示すスポーツ映像は、サッカーの試合を撮影した映像であって、キッカーがゴールに向かってシュートをするシーンの映像である。本実施形態に係る映像分割再生システムは、この選択領域として、図4に示すような映像(例えば、キッカーとゴールキーパーの周辺の映像)をマルチ画面に表示するものである。
The video split reproduction system according to the present embodiment displays, for example, a part of video selected by the user from the content video to be displayed (hereinafter referred to as “selected video”) on the multi-screen. When the selected portion is changed, the changed video is displayed according to the user's operation.
For example, when the content video is a sports video as shown in FIG. 3, the portion designated by the rectangular icon is the selected video. The sports video shown in FIG. 3 is a video of a soccer game, and is a video of a scene where the kicker shoots toward the goal. The video split reproduction system according to the present embodiment displays a video as shown in FIG. 4 (for example, video around the kicker and goalkeeper) on the multi-screen as the selection area.
以下、映像分割再生システムの構成の一例について、図1に戻って、詳細に説明する。
図1に示す通り、本実施形態に係る映像分割再生システムは、配信サーバ20と、マスタ再生端末40と、スレーブ再生端末50と、スレーブ再生端末60と、スレーブ再生端末70と、を備える。
Hereinafter, an example of the configuration of the video division reproduction system will be described in detail with reference to FIG.
As shown in FIG. 1, the video split playback system according to the present embodiment includes a
配信サーバ20と、マスタ再生端末40と、スレーブ再生端末50と、スレーブ再生端末60と、スレーブ再生端末70とは、ネットワーク(A)30を介して、それぞれ通信可能に接続されている。このネットワーク(A)30は、広範囲に接続されるネットワークを意味している。
The
本実施形態において、映像分割再生システムは、1台のマスタ再生端末40と、少なくとも1台以上のスレーブ再生端末として3台のスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70とを含む。
マスタ再生端末40は、第1ディスプレイD1を備える。スレーブ再生端末50は、第2ディスプレイD2を備える。スレーブ再生端末60は、第3ディスプレイD3を備える。スレーブ再生端末70は、第4ディスプレイD4を備える。
In the present embodiment, the video split playback system includes one
The
マスタ再生端末40は、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70を支配(統括的に制御)し、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70間での映像の再生制御を行う。
このマスタ再生端末40は、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に対する映像の再生開始および停止を制御する。スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、このマスタ再生端末40の制御に従って動作する。
また、マスタ再生端末40は、ユーザからの操作入力を受け付け、ユーザによって指定された選択領域を示す情報に基づき、コンテンツ映像の領域うち選択映像の領域の位置を示す選択領域情報を生成し、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70へ送信する。
The
The
Further, the
マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、マスタ再生端末40によって生成された選択領域情報に基づいて、1つの符号化映像データ(例えば選択映像)を、各ディスプレイD1〜D4が再生すべき領域に分割して再生する。つまり、1つの符号化映像データ(例えば選択映像)を、マスタ再生端末40、第1スレーブ再生端末50、第2スレーブ再生端末60、および第3スレーブ再生端末70の各ディスプレイD1〜4の画面によって構成されるマルチ画面において表示する。なお、再生開始時(つまり、初期状態からの最初の再生時)においては、再生設定ファイルに予め記載されている選択領域情報が示す初期位置を使用して、選択映像をマルチ画面に表示する。
Based on the selection area information generated by the
次に、配信サーバ20の構成について詳細に説明する。
配信サーバ20は、受信部21と、再生データ保存部22と、送信部23と、サーバ制御部24とを含む。
受信部21は、広域のネットワーク(A)30を介して、マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70のそれぞれから要求信号を受信し、受信した要求信号をサーバ制御部24に出力する。
サーバ制御部24は、再生データ保存部22を参照して、受信部21から入力する要求信号に基づき、要求信号に対応するデータを読み出し、送信部23に出力する。
Next, the configuration of the
The receiving
The
再生データ保存部22は、マルチビュー再生ファイルと、再生設定ファイルと、符号化映像データと、マルチビュー再生ファイルテーブルと、符号化映像データテーブルを蓄積している。
マルチビュー再生ファイルの一例を図5に示す。マルチビュー再生ファイルは、例えば、図5に示す通り、符号化映像データが格納されている存在場所を示すコンテンツURLと、マルチ画面における再生映像の分割数(縦、横)が記載されているテキストファイルである。なお、この再生映像の分割数(縦、横)は、言い換えると、マルチ画面を構成するマスタ再生端末40とスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70の配置を示す情報である。
図示の例では、コンテンツURL(符号化映像データが存在する場所「rtsp://XXX.XXX.XXX/符号化映像データ」)、縦分割数(選択領域の縦方向の分割数、図示の例では「2」)、横分割数(選択領域の横方向の分割数、図示の例では「2」)が記載されている。
The reproduction
An example of the multi-view playback file is shown in FIG. For example, as shown in FIG. 5, the multi-view playback file is a text in which a content URL indicating the location where the encoded video data is stored and a division number (vertical and horizontal) of the playback video on the multi-screen It is a file. In addition, the number of divisions (vertical and horizontal) of the reproduced video is, in other words, information indicating the arrangement of the
In the example shown in the figure, the content URL (location where the encoded video data exists “rtsp: //XXX.XXX.XXX/encoded video data”), the number of vertical divisions (the number of vertical divisions of the selected area, the example shown in the figure) "2"), the number of horizontal divisions (the number of horizontal divisions of the selected region, "2" in the illustrated example) is described.
再生設定ファイルの一例を図6に示す。再生設定ファイルには、例えば、図6に示す通り、初期値として用いる選択領域情報と、メイン映像の解像度と、ナビゲーション映像の解像度が記載されている。なお、選択領域情報の初期値は、ユーザによって選択されるコンテンツ映像における一部の領域である選択領域を示す情報として、予め決められているものである。 An example of the playback setting file is shown in FIG. In the reproduction setting file, for example, as shown in FIG. 6, selection area information used as initial values, the resolution of the main video, and the resolution of the navigation video are described. The initial value of the selection area information is predetermined as information indicating a selection area that is a partial area in the content video selected by the user.
符号化映像データは、コンテンツ映像を符号化したものであって、映像全体を再生するナビゲーション符号化映像データと、選択した領域を再生するメイン符号化映像データとの2つを含む。このナビゲーション符号化映像データとメイン符号化映像データは、同一のコンテンツ映像の符号化データであって、解像度が異なる点が異なる。メイン符号化映像データは、ナビゲーション符号化映像データより解像度が高い映像である。本実施形態において、ナビゲーション符号化映像データの解像度は、200×400=8万画素であり、メイン符号化映像データの解像度は、2000×4000=800万画素である。これらナビゲーション符号化映像データとメイン符号化映像データは、1つの符号化映像データとして再生データ保存部22に蓄積されている。
The encoded video data is obtained by encoding the content video, and includes two pieces of navigation encoded video data for reproducing the entire video and main encoded video data for reproducing the selected area. The navigation encoded video data and the main encoded video data are encoded data of the same content video, and are different in that the resolution is different. The main encoded video data is a video having a higher resolution than the navigation encoded video data. In the present embodiment, the resolution of navigation encoded video data is 200 × 400 = 80,000 pixels, and the resolution of main encoded video data is 2000 × 4000 = 8 million pixels. The navigation encoded video data and the main encoded video data are stored in the reproduction
マルチビュー再生ファイルテーブルの一例を図7に示す。このマルチビュー再生テーブルは、例えば、図7に示す通り、マルチビュー再生ファイルの所在を示すマルチビュー再生ファイルURLと、マルチビュー再生ファイルとを対応付けるテーブルである。
符号化映像データテーブルの一例を図8に示す。この符号化映像データテーブルは、例えば、図8に示す通り、符号化映像データの所在を示すコンテンツURLと、符号化映像データと、再生設定ファイルとを対応付けるテーブルである。
なお、マルチビュー再生ファイルテーブルと符号化映像データテーブルは、それぞれ予め管理者やユーザ等によって決められている。
An example of the multi-view playback file table is shown in FIG. For example, as shown in FIG. 7, this multi-view playback table is a table that associates a multi-view playback file URL indicating the location of a multi-view playback file with a multi-view playback file.
An example of the encoded video data table is shown in FIG. For example, as shown in FIG. 8, the encoded video data table is a table that associates a content URL indicating the location of the encoded video data, the encoded video data, and a reproduction setting file.
The multi-view playback file table and the encoded video data table are determined in advance by an administrator, a user, or the like.
送信部23は、サーバ制御部24によって再生データ保存部22から読み出されたデータを、ネットワーク(A)30を介して、マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に送信する。
The
マスタ再生端末40は、再生要求部41と、同期再生制御部42と、送信部43と、受信部44と、復号部45と、表示部46と、マスタ記憶部47を含む。
再生要求部41は、マルチビュー再生ファイルURLを入力し、同期再生制御部42に出力する。この再生要求部41は、例えば、ユーザからの操作入力を受け付ける入力部であって、ユーザが指定したコンテンツ映像の所在を示すマルチビュー再生ファイルURLの情報を受け付ける。
The
The
マスタ記憶部47は、ネットワーク(A)30を介して配信サーバ20と接続される全のスレーブ再生端末50,60,70のIPアドレスと各スレーブ再生端末と端末識別子とを対応付ける情報であるスレーブ再生端末識別一覧情報を保持している。
図9は、スレーブ再生端末識別一覧情報の一例を示す図である。
スレーブ再生端末識別一覧情報は、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に予め割り当てられているIPアドレスと、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に割り当てられるスレーブ再生端末識別子とを対応付ける情報である。
マスタ記憶部47は、図9に示すようなスレーブ再生端末のIPアドレス一覧を保持し、IPアドレス一覧の上から順番にスレーブ再生端末50、スレーブ再生端末60、スレーブ再生端末70と割り当て、スレーブ再生端末識別子として例えば、上から順にスレーブ再生端末50には“1”、スレーブ再生端末60には“2”、スレーブ再生端末70には“3”を付与する。
同期再生制御部42は、再生要求部41、受信部44および復号部45からの要求制御と、受信部44、復号部45および送信部43への要求制御を行う。
The master storage unit 47 is slave reproduction, which is information that associates the IP addresses of all the
FIG. 9 is a diagram illustrating an example of slave reproduction terminal identification list information.
The slave playback terminal identification list information is assigned to the IP address previously assigned to the
The master storage unit 47 holds a list of IP addresses of slave playback terminals as shown in FIG. 9 and assigns them in order from the top of the IP address list to the
The synchronized
マスタ再生端末40は、全てのスレーブ再生端末50、60、70とネットワーク(B)31を介してTCP/IP接続をする。これは、少なくとも、スレーブ再生端末識別子、マルチビュー再生ファイルURL、再生準備通知信号、再生開始通知信号、および指定した時間ごとに、その時の再生時間を示す情報を、それぞれ、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70へ送信するために用いる。
スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70からは、受信開始通知信号、再生準備完了通知信号、再生開始実行通知信号、マスタ再生端末40からの情報の受け取り返信に用いる。
The
The
また、マスタ再生端末40は、ネットワーク(B)31を介して、指定時間毎に選択領域情報を各スレーブ再生端末50、60、70へUDP(User Datagram Protocol)マルチキャスト(UDPブロードキャストでもよい)で送信する。
なお、UDPブロードキャストは、ネットワーク上の全員にメッセージを送る送信方法である。UDPマルチキャストは、ネットワーク上の特定グループにメッセージを送る送信方法である。TCPは、確実に相手にメッセージを届ける送信方法である。UDPは、転送速度は速いが相手に確実に届く保証はない送信方法である。
ネットワークBは、家庭LAN(Local Area Network)や、社内LANなどのような特定の建物内、敷地内で使用する限られた範囲内のネットワークを意味している。
Also, the
The UDP broadcast is a transmission method for sending a message to everyone on the network. UDP multicast is a transmission method for sending a message to a specific group on a network. TCP is a transmission method that reliably delivers a message to the other party. UDP is a transmission method that has a high transfer rate but is not guaranteed to reach the other party reliably.
The network B means a network within a limited range used in a specific building or site such as a home LAN (Local Area Network) or an in-house LAN.
マスタ再生端末40の送信部43は、同期再生制御部42からの要求信号を受け取り、要求内容に応じて、配信サーバ20、または、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に、要求信号を送信する。
より具体的には、送信部43は、配信サーバ20に対しては、ネットワーク(A)30を介して、マルチビュー再生ファイル、符号化映像データ配信要求信号を送信する。また、送信部43は、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に対しては、ネットワーク(B)31を介して、少なくともスレーブ再生端末識別子、マルチビュー再生ファイルURL、再生準備通知、再生開始通知、指定した時間ごとにその時の再生時間を示す情報をTCP/IPで送信する。また、送信部43は、指定時間毎に選択領域情報をUDPマルチキャスト(UDPブロードキャストでもよい)で送信する。
The
More specifically, the
受信部44は、配信サーバ20、スレーブ再生端末50、スレーブ再生端末60、あるいはスレーブ再生端末70からのデータを受信し、受信したデータが符号化映像データの場合には、復号部45へ出力し、それ以外の場合には、同期再生制御部42へ出力する。
The receiving
復号部45は、受信部44から符号化映像データを受け取り、受け取った符号化映像データに含まれるナビゲーション符号化映像データとメイン符号化映像データを並列して1GOP(Group Of Picture)単位で復号化する。
また、復号部45は、マルチ画面にナビゲーション映像を表示する場合のみ、ナビゲーション符号化映像データの復号化を行うものであってもよい。復号部45がナビゲーション符号化映像データの復号化を行わない場合には、以下で説明するナビゲーション映像と各端末の担当する映像サムネイル映像はマルチ画面に表示しないものとする。
The
The
なお、1GOPは、一般的に、15フレーム、0.5秒であるが、必ずしもその必要はない。復号部45は、選択領域情報と分割数からスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70が再生する選択担当領域の映像の位置を示す再生領域情報を作成し、選択領域情報と再生領域情報から再生領域値を作成する。
復号部45は、メイン符号化映像データの復号化において、選択領域情報とマスタ再生領域情報とを基にメイン符号化映像データを復号化し、さらに、マスタ再生領域値を基にマスタ再生領域映像をメイン符号化映像データから切り出す。さらに、復号部45は、復号化したナビゲーション映像とマスタ再生領域映像とを表示部46へ送る。
Note that 1 GOP is generally 15 frames and 0.5 seconds, but it is not always necessary. The
In decoding the main encoded video data, the
表示部46は、復号部45から復号化したナビゲーション映像とマスタ再生領域映像とを受け取り、再生を行う。この表示部46は、マルチ画面における第1ディスプレイD1に相当するものであって、本実施形態では、マスタ再生領域映像のみを全面に、第1ディスプレイD1の画面のサイズに合わせ表示する。なお、表示部46は、予め決められた位置において、マスタ再生領域映像の上に、ナビゲーション映像を重畳して表示するものであってもよい。
The
復号部45は、復号部45が復号化したナビゲーション映像から選択領域情報と再生領域値を基に各端末の再生領域映像を切り出し、さらにサムネイル化する。
表示部46は、サムネイル化された各再生端末の再生領域映像を受け取り、再生を行う。
The
The
次に、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70の構成について説明する。
スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、各々、同一の構成を有するものであるため、ここでは代表して、スレーブ再生端末50を例に説明し、他のスレーブ再生端末60およびスレーブ再生端末70についての説明は省略する。
Next, the configuration of the
Since the
スレーブ再生端末50は、同期再生制御部52と、送信部53と、受信部54と、復号部55と、表示部56と、スレーブ記憶部57とを含む。本実施形態では、スレーブ再生端末は、3台であるが、3台とは限らない。
同期再生制御部52は、受信部54、復号部55からの要求制御と、受信部54、復号部55、送信部53への要求制御を行う。
送信部53は、同期再生制御部52からの要求信号を受け取り、要求内容に応じて、配信サーバ20、または、マスタ再生端末40へ要求信号を送信する。この送信部53は、配信サーバ20に対して、ネットワーク(A)30を介して、マルチビュー再生ファイル配信要求、符号化映像データ配信要求信号を送信する。一方、送信部53は、マスタ再生端末40に対して、ネットワーク(B)31を介して、受信開始通知、再生準備完了通知、再生開始実行通知の送信、マスタ再生端末40からの情報受け取り返信をTCP/IPで行う。
The
The synchronized
The
受信部54は、配信サーバ20、マスタ再生端末40からのデータを受信し、同期再生制御部52へ出力する。この受信部54は、ネットワーク(B)31を介して、マスタ再生端末40からスレーブ再生端末識別子、マルチビュー再生ファイルURL、再生準備通知、再生開始通知、指定した時間毎の再生時間を示す情報、指定時間毎の選択領域情報を受け取る。
The receiving
復号部55は、受信部54から符号化映像データを受け取り、受け取った符号化映像データに含まれるナビゲーション符号化映像データとメイン符号化映像データとを1GOP単位で並列して復号化する。
また、ナビゲーション符号化映像データの復号化は必ずしも行わない場合もある。ナビゲーション符号化映像データの復号化を行わない場合には、以下で説明するナビゲーション映像、各端末の担当する映像サムネイル映像はないものとする。
なお、1GOPは、一般的に、15フレーム、0.5秒であるが、必ずしもその必要はない。復号部55は、選択領域情報と分割数から各再生端末が再生する再生領域情報を作成し、選択領域情報と再生領域情報から再生領域値を作成する。
The
In some cases, the navigation encoded video data is not necessarily decoded. When the navigation encoded video data is not decoded, it is assumed that there is no navigation video described below and video thumbnail video in charge of each terminal.
Note that 1 GOP is generally 15 frames and 0.5 seconds, but it is not always necessary. The
メイン符号化映像データの復号化は、選択領域情報と、スレーブ再生端末50(60、70)の再生領域情報とを元に復号化し、さらに、スレーブ再生端末50(60、70)の再生領域値に基づいて再生領域映像を切り出す。
さらに、復号部55は、復号化したナビゲーション映像とスレーブ再生端末50(60、70)の再生領域映像を表示部56へ送る。表示部56は、復号部55から復号化したナビゲーション映像とスレーブ再生端末50(60、70)の再生領域映像とを受け取り、再生を行う。
復号部55は、復号部55が復号化したナビゲーション映像から選択領域情報と再生領域値を基に各端末の再生領域映像を切り出し、さらにサムネイル化する。
表示部46は、サムネイル化された各再生端末の再生領域映像を受け取り、再生を行う。
The main encoded video data is decoded based on the selection area information and the reproduction area information of the slave reproduction terminal 50 (60, 70), and further, the reproduction area value of the slave reproduction terminal 50 (60, 70). Based on, the playback area video is cut out.
Further, the
The
The
次に、再生領域情報と再生領域値について説明する。
図10は、本実施形態による、再生領域情報と再生領域値を説明するための概念図である。
図11は、マルチ画面における再生担当領域の一例を説明するための概念図である。
本実施形態では、マルチビュー画面において、マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70のそれぞれが表示する画面の領域(以下、マルチ画面再生担当領域という)は、マルチビュー再生ファイルに記載されている分割数に基づいて、予め決められている。
Next, playback area information and playback area values will be described.
FIG. 10 is a conceptual diagram for explaining reproduction area information and reproduction area values according to the present embodiment.
FIG. 11 is a conceptual diagram for explaining an example of a playback charge area on a multi-screen.
In the present embodiment, on the multi-view screen, areas of the screen displayed by the
例えば、図11に示すように、マルチ画面において左上角の領域は、常にマスタ再生端末40に対して割り当てらえているマルチ画面再生担当領域である。なお、マルチ画面におけるその他の領域は、再生端末識別子に基づき、例えばラスタスキャンの順番に従って、識別子の数が小さい順に、各スレーブ再生端末の再生領域として割り当てられる。
本実施形態において、4等分割されたマルチ画面において右上のマルチ画面再生担当領域を、識別子“1”のスレーブ再生端末50とする。4等分割されたマルチ画面において左下のマルチ画面再生担当領域を、識別子“2”のスレーブ再生端末60とする。4等分割されたマルチ画面において右下のマルチ画面再生担当領域を、識別子“3”のスレーブ再生端末70とする。
For example, as shown in FIG. 11, the upper left corner area of the multi-screen is a multi-screen playback area that is always assigned to the
In the present embodiment, the multi-screen playback area in the upper right of the multi-screen divided into four equal parts is assumed to be the
図10に示す通り、メイン映像とナビゲーション映像は、それぞれ解像度が異なる同一のコンテンツ映像である。このコンテンツ映像は、例えば、図3に示したような、スポーツ映像である。また、メイン映像とナビゲーション映像は、このコンテンツ映像のうちの同じ一部を示す選択領域が指定されている。この選択領域は、図4に示したような、キッカーとゴールキーパーの映像である。 As shown in FIG. 10, the main video and the navigation video are the same content video having different resolutions. This content video is, for example, a sports video as shown in FIG. The main video and the navigation video are designated with a selection area indicating the same part of the content video. This selection area is an image of the kicker and goalkeeper as shown in FIG.
なお、メイン映像における選択領域に対応する画像を選択領域画像S1、ナビゲーション映像における選択領域に対応する画像を選択領域画像S2と記す。また、メイン映像における選択領域画像S1において、四分割された左上の画像領域を第1ディスプレイ再生担当領域R11、四分割された右上の画像領域を第2ディスプレイ再生担当領域R12、四分割された左下の画像領域を第3ディスプレイ再生担当領域R13、四分割された右下の画像領域を第4ディスプレイ再生担当領域R14と記す。なお、選択領域画像S2において同様に、四分割された左上の画像領域を第1ディスプレイ再生担当領域R21、四分割された右上の画像領域を第2ディスプレイ再生担当領域R22、四分割された左下の画像領域を第3ディスプレイ再生担当領域R23、四分割された右下の画像領域を第4ディスプレイ再生担当領域R24と記す。なお、第1〜4ディスプレイ再生担当領域R11〜R14は、それぞれ、マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70にそれぞれ対応する。また、第1〜4ディスプレイ再生担当領域R21〜R24は、それぞれ、マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に表示される映像を表示する領域である。この第1〜4ディスプレイ再生担当領域R21〜R24に相当する画像は、実際にナビゲーション映像を分割して生成する画像ではないが、説明便宜のためナビゲーション映像の選択領域画像S2を仮想的に分割したもとのとして定義するものである。
An image corresponding to the selected area in the main video is referred to as a selected area image S1, and an image corresponding to the selected area in the navigation video is referred to as a selected area image S2. In the selected area image S1 in the main video, the upper left divided image area R11 is the first display reproduction area R11, the upper right divided image area is the second display reproduction area R12, and the lower left area is divided into four. This image area is referred to as a third display reproduction responsible area R13, and the quadranted lower right image area is referred to as a fourth display reproduction responsible area R14. Similarly, in the selected area image S2, the upper left divided image area is the first display reproduction responsible area R21, the upper right divided image area is the second display reproduction responsible area R22, and the lower left divided quadrant is divided. The image area is referred to as a third display reproduction responsible area R23, and the lower right divided image area is referred to as a fourth display reproduction responsible area R24. The first to fourth display reproduction responsible areas R11 to R14 correspond to the
上述の通り、本実施形態では、ナビゲーション映像の解像度は、400×200=8万画素である。このナビゲーション映像において、選択領域S2を示す選択領域情報(X、Y、幅、高さ)は、例えば、(30,70,260,100)である。なお、このX,Yは、基準となる基準位置を示す座標である。本実施形態において、この基準位置P(X,Y)のXに幅を加算しYに高さを加算した座標(X+幅,Y+高さ)は、基準位置の対角線上の座標P´となる。よって、この(X、Y、幅、高さ)は、基準位置Pと対角線上の座標P´により規定される矩形領域を示す。
ナビゲーション映像において、選択領域情報(30,70,260,100)が示す選択領域S2を、ナビゲーション映像を表示することが設定されている再生端末の画面において、予め決められた位置に表示する。
また、上述の通り、メイン映像の解像度は、2000×4000=800万画素である。このメイン映像において選択領域S1を示す選択領域情報(X、Y、幅、高さ)は、(300,700,2600,1000)である。
なお、本実施形態において、選択領域情報は、メイン映像あるいはナビゲーション映像における座標により選択領域を示すものとして説明するが、本発明はこれに限定されず、メイン映像やナビゲーション映像全体における相対的な座標を示すものであってもよい。例えば、メイン映像における(X、Y、幅、高さ)=(300,700,2600,1000)で表わされる選択領域を、相対座標で表わした相対座標値(0.075,0.35,0.65,0.5)で示すものであってもよい。また、ナビゲーション映像における(X、Y、幅、高さ)=(30,70,260,100)で表わされる選択領域を、相対座標で表わした相対座標値(0.075,0.35,0.65,0.5)で示すものであってもよい。
As described above, in this embodiment, the resolution of the navigation video is 400 × 200 = 80,000 pixels. In this navigation video, the selection area information (X, Y, width, height) indicating the selection area S2 is, for example, (30, 70, 260, 100). X and Y are coordinates indicating a reference position serving as a reference. In the present embodiment, the coordinates (X + width, Y + height) obtained by adding the width to X and adding the height to Y of the reference position P (X, Y) are the coordinates P ′ on the diagonal line of the reference position. . Therefore, (X, Y, width, height) indicates a rectangular area defined by the reference position P and the coordinate P ′ on the diagonal line.
In the navigation video, the selection area S2 indicated by the selection area information (30, 70, 260, 100) is displayed at a predetermined position on the screen of the playback terminal set to display the navigation video.
As described above, the resolution of the main video is 2000 × 4000 = 8 million pixels. Selection area information (X, Y, width, height) indicating the selection area S1 in the main video is (300, 700, 2600, 1000).
In the present embodiment, the selection area information is described as indicating the selection area by coordinates in the main video or navigation video, but the present invention is not limited to this, and relative coordinates in the main video and the entire navigation video are described. May be shown. For example, a relative coordinate value (0.075, 0.35, 0) representing a selection area represented by (X, Y, width, height) = (300, 700, 2600, 1000) in the main video in relative coordinates. .65, 0.5). In addition, a relative coordinate value (0.075, 0.35, 0) representing a selection area represented by (X, Y, width, height) = (30, 70, 260, 100) in the navigation image in relative coordinates. .65, 0.5).
本実施形態において、マスタ再生端末40に対応する第1ディスプレイ再生担当領域R11を示す再生領域値は、(300,700,1300,500)である。スレーブ再生端末50に対応する第2ディスプレイ再生担当領域R12を示す再生領域値は、(1600,700,1300,500)である。スレーブ再生端末60に対応する第3ディスプレイ再生担当領域R13を示す再生領域値は、(300,1200,1300,500)である。スレーブ再生端末70に対応する第4ディスプレイ再生担当領域R14を示す再生領域値は、(1600,1200,1300,500)である。
メイン映像において、選択領域情報(300,700,2600,1000)が示す選択領域S1を4等分割した画像が、それぞれ、第1〜4ディスプレイ再生担当領域R11〜R14に対応するマスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に表示される。
In the present embodiment, the reproduction area value indicating the first display reproduction responsible area R11 corresponding to the
In the main video, images obtained by dividing the selection area S1 indicated by the selection area information (300, 700, 2600, 1000) into four equal parts are
次に、各ディスプレイ再生担当領域の復号化の一例について説明する。
図10に示す通り、本実施形態において、メイン映像およびナビゲーション映像は、それぞれ、10個に分割されており、分割数=10である。また、メイン映像およびナビゲーション映像は、それぞれ、上段に5つと下段に5つの分割映像を配置した配列で分割されている。各分割映像には、他の分割映像とを識別するための映像番号が割り当てられている。例えば、メイン映像およびナビゲーション映像の上段の左側の分割映像に対して“0”、下段の右側の分割映像に対して“9”が、それぞれ割り当てられている。その他の分割映像に対しては、左から右に向かって番号が大きくなるように、昇順に、“1”〜“8”が割り当てられている。
Next, an example of decoding of each display reproduction area will be described.
As shown in FIG. 10, in this embodiment, the main video and the navigation video are each divided into 10 pieces, and the division number = 10. Further, the main video and the navigation video are each divided in an arrangement in which five divided videos are arranged in the upper stage and five divided videos in the lower stage. Each divided video is assigned a video number for identifying the other divided video. For example, “0” is assigned to the upper left divided video of the main video and navigation video, and “9” is assigned to the lower right divided video. “1” to “8” are assigned to the other divided videos in ascending order so that the numbers increase from left to right.
なお、分割数は、図10に示す10に限られない。また、分割した場所の識別は、番号に限られない。
図10に示す例では、選択領域画像S1あるいは選択領域画像S2が、それぞれ、映像番号=“0”,“1”,“2”,“3”,“5”,“6”,“7”,“8”の分割映像の一部の映像を含んでいる。つまり、映像番号=“4”,“9”に対応する領域は、選択領域画像S1および選択領域画像S2のそれぞれの画像を含まない分割映像である。
例えば、マスタ再生端末40は、マスタ再生端末40の再生領域情報に基づき、メイン映像のうち、マスタ再生端末40の再生領域部分に対応する映像番号が“0”,“1”,“5”,“6”の映像の符号化データを復号化し、さらにマスタ再生端末40の再生領域値を基に、映像番号“0”,“1”,“5”,“6”の映像からマスタ再生端末40の再生領域値が示すその部分を切りだしてメイン映像を再生する。
スレーブ再生端末50は、スレーブ再生端末50の再生領域情報に基づき、“1”,“2”,“3”,“6”,“7”,“8”を復号化し、さらにスレーブ再生端末50の再生領域値を基にその部分を切りだしてメイン映像を再生する。
マスタ再生端末40は、サムネイル映像として、ナビゲーション映像から再生領域値を基に各再生端末の再生領域映像切りだして、さらにサムネイル化し、再生端末毎のサムネイル映像として再生する。
The number of divisions is not limited to 10 shown in FIG. Further, the identification of the divided places is not limited to numbers.
In the example shown in FIG. 10, the selection area image S1 or the selection area image S2 has video numbers = “0”, “1”, “2”, “3”, “5”, “6”, “7”, respectively. , “8” part of the divided image is included. That is, the areas corresponding to the video numbers = “4” and “9” are divided videos that do not include the selected area image S1 and the selected area image S2.
For example, the
The
The
図12、13は、本実施形態に係る映像分割再生システムによる処理について説明するためのシーケンス図である。具体的には、配信要求から再生開始処理、ユーザ操作選択領域の分割再生処理、再生停止までの処理について説明するためのシーケンス図である。
図12に示すシーケンスについて、以下説明する。
1.マスタ再生端末40は、全てのスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70とTCP/IP接続する。マスタ再生端末40は、全てのスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に対して、それぞれ固有のスレーブ再生端末識別子を送信する。本実施形態において、マスタ再生端末40は、スレーブ再生端末50にスレーブ再生端末識別子“001”を、スレーブ再生端末60にスレーブ再生端末識別子“002”を、スレーブ再生端末70にスレーブ再生端末識別子“003”を、それぞれ送信する。そして、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、それぞれ、受信したスレーブ再生端末識別子を記憶部に記憶する。
12 and 13 are sequence diagrams for explaining the processing by the video division reproduction system according to the present embodiment. Specifically, it is a sequence diagram for explaining a process from a distribution request to a reproduction start process, a user operation selection area divided reproduction process, and a reproduction stop.
The sequence shown in FIG. 12 will be described below.
1. The
2.マスタ再生端末40は、配信サーバ20へマルチビュー再生ファイルの配信要求を送る。マスタ再生端末40は、配信サーバ20からマルチビュー再生ファイルを受け取る。
3.マスタ再生端末40は、マルチビュー再生ファイルに記載されているコンテンツURLを配信サーバ20へ送る。マスタ再生端末40は、配信サーバ20から、コンテンツURLに対応する符号化映像データと、再生設定ファイルを受信して、マスタ記憶部47に保存する。ここでは、マスタ再生端末40の符号化映像データの再生開始は、まだ実行しない。なお、マスタ再生端末40は、符号化映像データの受信を開始するが、受信バッファ残量から配信制御を行うことにより、受信バッファが溢れる事態を回避している。配信サーバ20は、符号化映像データをマスタ再生端末40に対してストリーム配信している。
2. The
3. The
4.マスタ再生端末40は、マルチビュー再生ファイルURLを全てのスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に対して送信する。
5.このスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、配信サーバ20に対して、マルチビュー再生ファイルの配信要求を送る。そして、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、配信サーバ20からマルチビュー再生ファイルを受け取る。
4). The
5. The
6.スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、マルチビュー再生ファイルに記載されているコンテンツURLを配信サーバへ送る。スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、配信サーバ20から、コンテンツURLに対応する符号化映像データと、再生設定ファイルを受信して、スレーブ記憶部57に保存する。ここでは、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70の符号化映像データの再生開始は、まだ実行しない。なお、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、符号化映像データの受信を開始するが、受信バッファ残量から配信制御を行うことにより、受信バッファが溢れる事態を回避している。配信サーバ20は、符号化映像データをスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に対してストリーム配信している。
6).
7.スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、受信開始通知をマスタ再生端末40へ送信する。
8.マスタ再生端末40は、全てのスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70から受信開始通知を受け取ると、受信部44から符号化映像データを1GOP復号部45に出力する。また、マスタ再生端末40は、マスタ記憶部47から読み出した再生設定ファイルを復号部45に出力する。
9.そして、マスタ再生端末40は、全てのスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に対して、再生準備を通知する。
7). The
8). When receiving the reception start notification from all the
9. Then, the
10.スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、それぞれ、マスタ再生端末40から再生準備を受け取ると、受信部54から符号化映像データを1GOP復号部55に出力する。また、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、スレーブ記憶部57から読み出した再生設定ファイルを復号部55に出力する。
10. When the
11.スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、マスタ再生端末40へ再生準備完了を通知する。
12.マスタ再生端末40は、全てのスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70から再生準備完了を受け取ると、全てのスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に対して再生開始を通知する。
11. The
12 When the
13.スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、再生開始を受け取ると、それぞれの復号部55が、再生設定ファイルに記載されている分割数および初期選択領域情報と、再生端末識別子とに基づき、各スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に対応する再生担当領域を示す再生領域情報を作成する。また、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、初期選択領域情報と再生領域情報に基づき各スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に対応する再生担当領域を示す再生領域値を作成し、再生領域値を基に、スレーブ再生端末50、スレーブ再生端末60、あるいはスレーブ再生端末70のそれぞれに対応する第2ディスプレイ再生担当領域R22、第3ディスプレイ再生担当領域R23、第4ディスプレイ再生担当領域R24に、それぞれに対応する画像の再生を開始し、ナビゲーション映像を再生開始してもよい。
さらに、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、初期選択領域情報、再生領域情報、および再生領域値に基づき、全再生端末(マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70)のサムネイルの再生を開始してもよい。
13. When the
Further, the
14.スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、再生開始実行をマスタ再生端末40へ通知する。
15.マスタ再生端末40は、全てのスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70から再生開始実行を受け取ると、復号部45が、再生設定ファイルに記載されている分割数および初期選択領域情報と、再生端末識別子とに基づき、再生領域情報を作成する。そして、マスタ再生端末40は、この初期選択領域情報と再生領域情報に基づき、再生領域値を作成する。マスタ再生端末40は、再生領域値に基づき、マスタ再生端末40に対応する第1ディスプレイ再生担当領域に対応する画像の再生を開始する。また、マスタ再生端末40は、ナビゲーション映像の再生を開始してもよい。
さらに、マスタ再生端末40は、初期選択領域情報、再生領域情報、および再生領域値に基づき、全ての再生端末(マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70)のサムネイルの再生を開始してもよい。
14 The
15. When the
Furthermore, the
次に、図13に示すシーケンスについて、以下説明する。
ここで、マスタ再生端末40に対して、ユーザが選択領域の変更を指示する。
16.マスタ再生端末40は、ユーザが指定する変更後の選択領域の位置を示す新選択領域情報と再生領域情報に基づき、選択領域変更後の第1ディスプレイ再生担当領域R11を示す新再生領域値を作成する。
マスタ再生端末40は、新再生領域値に基づき、選択領域変更後の第1ディスプレイ再生担当領域R11に対応する画像の再生を開始する。また、マスタ再生端末40は、ナビゲーション映像の再生を開始してもよい。
さらに、マスタ再生端末40は、新選択領域情報、再生領域情報、および新再生領域値に基づき、全再生端末(マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70)のサムネイルを再生する。
Next, the sequence shown in FIG. 13 will be described below.
Here, the user instructs the
16. The
Based on the new playback area value, the
Furthermore, the
17.マスタ再生端末40は、指定時間毎に、全てのスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に対して新選択領域情報を送信する。
18.スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、マスタ再生端末40から選択領域情報を受け取る。そして、受け取った新選択領域情報と再生領域情報に基づき、新しい再生領域値を作成する。新再生領域値を基にスレーブ再生端末の再生領域を再生する。ナビゲーション映像を再生する。さらに、受け取った選択領域情報と再生領域情報、新再生領域値を基に全再生端末のサムネイルを再生開始する。
17. The
18. The
19.マスタ再生端末40は、指定時間毎に再生時間を確認する。このマスタ再生端末40は、再生時間を示す情報(以下、再生時間情報という)を全てのスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に送信する。この再生時間情報とは、コンテンツ映像を再生する順番を映像の再生時間によって表わす情報である。
20.スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、受け取ったマスタ再生端末の再生時間情報が示す再生時間に、自身が表示するコンテンツ映像の再生時間を合わせる。
21.マスタ再生端末40が再生停止を実行すると、マスタ再生端末40は、全てのスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に対して再生停止を通知する。
22.そして、全てのスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、再生停止を受信する。
23.マスタ再生端末40は、配信サーバ20へ配信停止を送信する。
24.マスタ再生端末40は再生を停止する。
25.スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、配信サーバ20へ配信停止を送信する。
26.スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、再生を停止する。
19. The
20. The
21. When the
22. All
23. The
24. The
25. The
26.
なお、本実施形態に係る映像分割再生システムは、マスタ再生端末40から再生開始通知を受け取ると、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70が、それぞれ、符号化データの再生を開始し、再生開始実行通知信号をマスタ再生端末40に送信する。このマスタ再生端末40は、全てのスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70から再生開始実行通知信号を受信した場合、符号化データの再生を開始する。その後、マスタ再生端末40は、各スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に対して指定時間ごとに再生時間情報を送信する。このスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、受信した再生時間情報に基づき、マスタ再生端末40において表示される映像の再生タイミングとスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70のそれぞれにおいて表示される映像の再生タイミングの同期をとっている。これにより、マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70によって構成されるマルチ画面において表示される映像のずれを低減することができる。
Note that when the video split playback system according to the present embodiment receives the playback start notification from the
ここで、指定時間とは、マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70において、それぞれ復号化される符号化データの長さを示すものであって、予め決められている。また、再生時間とは、符号化ファイルにおいて再生する順番を映像の長さを示す時間によって表わしたものである。例えば、100msecごとに分割された単位時間の映像に対して、再生時間は、この単位時間当たりの映像の並び順を示す情報である。よって、再生期間が示す情報が同じ単位時間当たりの映像は、同一の映像あるいは同一タイミングによって再生されるべき映像を示している。
また、本実施形態に係る映像分割再生システムは、メイン映像に同期してナビゲーション映像を表示するものである。この場合も、各ディスプレイD1〜D4に表示する映像を同期させる場合と同様に、再生時間情報に基づき、指定時間ごとに映像の再生タイミングを合わせる。
なお、図13に示すシーケンスにおいて、マスタ再生端末40のみが、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70に対して再生時間情報を送信することを例に説明したが、本発明はこれに限られない。つまり、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70のいずれかが、再生した符号化映像データに対応する再生時間情報を指定時間ごとにマスタ再生端末40、あるいは他のスレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70へ送信するものであってもよい。
Here, the designated time indicates the length of encoded data to be decoded in each of the
In addition, the video split reproduction system according to the present embodiment displays a navigation video in synchronization with the main video. Also in this case, similarly to the case of synchronizing the images displayed on the respective displays D1 to D4, the reproduction timing of the images is adjusted for each designated time based on the reproduction time information.
In the sequence shown in FIG. 13, only the
次に、本実施形態に係る映像分割再生システムの処理フローの一例について、図14〜図22を参照して説明する。
なお、以下では、スレーブ再生端末として、スレーブ再生端末50についてのみ説明する。しかし、本発明は、上述のとおり複数のスレーブ再生端末を備える構成であってもよく、他のスレーブ再生端末60、70もスレーブ再生端末50と同様の動作を行うため、スレーブ再生端末50の後ろに括弧で符号のみを示して、詳細な説明は省略する。
Next, an example of the processing flow of the video division reproduction system according to the present embodiment will be described with reference to FIGS.
Hereinafter, only the
図14〜図22は、本実施形態に係る映像分割再生システムによる映像分割再生方法の一例を説明するためのフローチャートである。
はじめに、図14を参照して、本実施形態に係る映像分割再生方法の一例を説明する。
マスタ再生端末40の同期再生制御部42は、マスタ記憶部47に保存されているスレーブ再生端末識別一覧情報を参照して、スレーブ再生端末50(60、70)とネットワーク(B)31を介して、TCP/IP(Transmission Control Protocol/Internet Protocol)接続を行う。このスレーブ再生端末識別テーブルは、事前に設定してある。
14 to 22 are flowcharts for explaining an example of the video division reproduction method by the video division reproduction system according to the present embodiment.
First, an example of a video division reproduction method according to the present embodiment will be described with reference to FIG.
The synchronous
次に、マスタ再生端末40の同期再生制御部42は、TCP/IP接続した全てのスレーブ再生端末50(60、70)に対して、各スレーブ再生端末50(60、70)を識別するためのスレーブ再生端末識別子を示す情報を送信する。つまり、同期再生制御部42は、スレーブ再生端末識別一覧情報を参照して、スレーブ再生端末50(60、70)に対して予め割り当てられているIPアドレスに基づき、スレーブ再生端末識別一覧情報においてIPアドレスと対応付けられている再生端末識別子を、スレーブ再生端末50(60、70)に対して送信する。
このスレーブ再生端末50(60、70)は、それぞれ、自身に割り当てられているIPアドレスに対応するスレーブ再生端末識別子を受信し、スレーブ記憶部57に保存する(ステップ701)。
Next, the synchronous
Each of the slave playback terminals 50 (60, 70) receives the slave playback terminal identifier corresponding to the IP address assigned to it, and stores it in the slave storage unit 57 (step 701).
ここで、ユーザによって、マルチビュー再生ファイルURLを示す情報が再生要求部41に対して入力されると、再生要求部41は、入力されたマルチビュー再生ファイルURLを示す情報を同期再生制御部42に出力する(ステップ702)。
同期再生制御部42は、再生要求部41から入力するマルチビュー再生ファイルURLを示す情報を受け取り、受け取ったマルチビュー再生ファイルURLを示す情報をマスタ記憶部47に保存するとともに、このマルチビュー再生ファイルURLを示す情報を送信部43へ出力する(ステップ703)。
そして、送信部43は、マルチビュー再生ファイルURLを示す情報を同期再生制御部42から受け取り、受け取ったマルチビュー再生ファイルURLが示すマルチビュー再生ファイルの配信を要求するマルチビュー再生ファイル配信要求信号を、ネットワーク(A)30を介して、配信サーバ20へ送信する(ステップ704)。
Here, when information indicating the multi-view playback file URL is input by the user to the
The synchronous
Then, the
配信サーバ20の受信部21は、ネットワーク(A)30を介して、マスタ再生端末40からマルチビュー再生ファイル配信要求信号を受信し、サーバ制御部24へ出力する(ステップ705)。
サーバ制御部24は、受信部21からマルチビュー再生ファイル配信要求信号を受け取り、再生データ保存部22のマルチビュー再生ファイルテーブルを参照して、受け取ったマルチビュー再生ファイル配信要求信号が示すマルチビュー再生ファイルURLに対応するマルチビュー再生ファイルを再生データ保存部22から読み出し、送信部23へ出力する(ステップ706)。
送信部23は、サーバ制御部24からマルチビュー再生ファイルを受け取り、受け取ったマルチビュー再生ファイルを、ネットワーク(A)30を介してマスタ再生端末40へ送信する(ステップ707)。
The receiving
The
The
マスタ再生端末40の受信部44は、ネットワーク(A)30を介して、配信サーバ20からマルチビュー再生ファイルを受信し、同期再生制御部42へ出力する(ステップ708)。
同期再生制御部42は、受信部44からマルチビュー再生ファイルを受け取ると、マルチビュー再生ファイルの中に記載されているコンテンツURLの符号化映像データの配信を要求する符号化映像データ配信要求信号を送信部43へ出力するとともに、受信したマルチビュー再生ファイルをマスタ記憶部45に保存する(ステップ709)。
送信部43は、同期再生制御部42から符号化映像データ配信要求信号を受け取り、受け取った符号化映像データ配信要求信号を、ネットワーク(A)30を介して配信サーバ20へ送信する(ステップ710)。
The receiving
When the synchronized
The
次に、図15を参照して、本実施形態に係る映像分割再生方法の続きを説明する。
配信サーバ20の受信部21は、ネットワーク(A)30を介して、マスタ再生端末40から符号化映像データ配信要求信号を受信し、受け取った符号化映像データ配信要求信号をサーバ制御部24へ出力する(ステップ711)。
次に、サーバ制御部24は、受信部21から符号化映像データ配信要求信号を受け取り、再生データ保存部22の符号化映像データテーブルを参照して、符号化映像データ配信要求信号が示すコンテンツURLに対応する符号化映像データの再生設定ファイルを再生データ保存部22から読み出し、送信部23へ出力する。
Next, with reference to FIG. 15, a continuation of the video divided reproduction method according to the present embodiment will be described.
The receiving
Next, the
配信サーバ20の送信部23は、サーバ制御部24から入力する再生設定ファイルを受け取り、受け取った再生設定ファイルを、ネットワーク(A)30を介してマスタ再生端末40へ送信する(ステップ712)。
また、サーバ制御部24は、再生データ保存部22の符号化映像データテーブルを参照して、符号化映像データ配信要求信号が示すコンテンツURLに対応する符号化映像データを再生データ保存部22から読み出し、送信部23へ出力する。この送信部23は、サーバ制御部24から送られた符号化映像データを受け取り、受け取った符号化映像データを、ネットワーク(A)30を介してマスタ再生端末40へ送信する(ステップ713)。
The
In addition, the
そして、マスタ再生端末40の受信部44は、配信サーバ20の送信部23から送信された再生設定ファイルと符号化映像データを、ネットワーク(A)30を介して受信すると、同期再生制御部42に出力する。この同期再生制御部42は、再生設定ファイルをマスタ記憶部47に保存する。また、受信部44は、再生設定ファイルと符号化映像データを受信すると、符号化映像データを受信したことを示す符号化映像データ受信開始通知信号を生成し、同期再生制御部42に出力する(ステップ714)。
なお、マスタ再生端末40は、この段階ではまだ、符号化映像データの再生処理を開始しない。受信部44は、バッファ残量から配信制御を行っているため、受信バッファが溢れることはない。
When receiving the reproduction setting file and the encoded video data transmitted from the
Note that the
そして、同期再生制御部42は、受信部44から符号化映像データ受信開始通知信号と再生設定ファイルを受け取ると、ステップ702と同じマルチビュー再生ファイルURLを全てのスレーブ再生端末50(60、70)に通知する。つまり、同期再生制御部42は、マスタ記憶部47に記憶されているマスタビュー再生ファイルURLを読み出し、このマスタビュー再生ファイルURLを示す情報を送信部43へ出力する(ステップ715)。
この送信部43は、同期再生制御部42からステップ702と同じマルチビュー再生ファイルURLを示す情報を受け取り、受け取ったマルチビュー再生ファイルURLを示す情報を、ネットワーク(B)31を介して、全てのスレーブ再生端末50(60、70)へ送信する(ステップ716)。
When the synchronized
The
スレーブ再生端末50(60、70)の受信部54は、ネットワーク(B)31を介して、マスタ再生端末40からマルチビュー再生ファイルURLを示す情報を受け取り、該マルチビュー再生ファイルURLを示す情報を同期再生制御部52へ出力する(ステップ717)。
このスレーブ再生端末50(60、70)の同期再生制御部52は、受信部54からマルチビュー再生ファイルURLを示す情報を受け取り、このマルチビュー再生ファイルURLを示す情報をスレーブ記憶部57に保存するとともに、このマルチビュー再生ファイルURLを示す情報を送信部53へ出力する(ステップ718)。
スレーブ再生端末50(60、70)の送信部53は、同期再生制御部52からマルチビュー再生ファイルURLを示す情報を受け取り、このマルチビュー再生ファイルURLの示すマルチビュー再生ファイルの配信を要求するマルチビュー再生ファイル配信要求信号を、ネットワーク(A)30を介して配信サーバ20へ送る(ステップ719)。
The receiving
The synchronous
The
次に、図16を参照して、本実施形態に係る映像分割再生方法の続きを説明する。
配信サーバ20の受信部21は、ネットワーク(A)30を介して、スレーブ再生端末50(60、70)からマルチビュー再生ファイル配信要求信号を受信し、サーバ制御部24に出力する(ステップ720)。
サーバ制御部24は、受信部21からマルチビュー再生ファイル配信要求信号を受け取り、再生データ保存部22のマルチビュー再生ファイルテーブルを参照して、受け取ったマルチビュー再生ファイル配信要求信号が示すマルチビュー再生ファイルURLと対応するマルチビュー再生ファイルを再生データ保存部22から要求された数だけ読み出し、送信部23へ出力する(ステップ721)。
送信部23は、サーバ制御部24からマルチビュー再生ファイルを要求された数だけ受け取り、受け取ったマルチビュー再生ファイルを、ネットワーク(A)30を介して、スレーブ再生端末50(60、70)へ送信する(ステップ722)。
Next, with reference to FIG. 16, a continuation of the video divided reproduction method according to the present embodiment will be described.
The receiving
The
The
そして、スレーブ再生端末50(60、70)の受信部54は、ネットワーク(A)30を介して、配信サーバ20からマルチビュー再生ファイルを受信し、同期再生制御部52へ出力する(ステップ723)。
次いで、スレーブ再生端末50(60、70)の同期再生制御部52は、受信部54からマルチビュー再生ファイルを受け取ると、マルチビュー再生ファイルの中に記載されているコンテンツURLの符号化映像データの配信を要求する符号化映像データ配信要求信号を、送信部53へ出力するとともに、受信したマルチビュー再生ファイルをスレーブ記憶部57に保存する(ステップ724)。
送信部53は、同期再生制御部52から符号化映像データ配信要求信号を受け取り、受け取った符号化映像データ配信要求信号を、ネットワーク(A)30を介して、配信サーバ20へ送信する(ステップ725)。
Then, the receiving
Next, when the synchronized
The
配信サーバ20の受信部21は、ネットワーク(A)30を介して、スレーブ再生端末50(60、70)から符号化映像データ配信要求信号を受信し、受け取った符号化映像データ配信要求信号をサーバ制御部24に出力する(ステップ726)。
サーバ制御部24は、受信部21から符号化映像データ配信要求信号を受け取り、再生データ保存部22の符号化映像データテーブルを参照して、符号化映像データ配信要求信号が示すコンテンツURLに対応する符号化映像データの再生設定ファイルを再生データ保存部22から要求された数だけ読み出し、送信部23へ出力する。この送信部23は、サーバ制御部24から出力された再生設定ファイルを要求された数だけ受け取り、この受け取った再生設定ファイルを、ネットワーク(A)30を介してスレーブ再生端末50(60、70)へ送信する(ステップ727)。
The receiving
The
次いで、サーバ制御部24は、再生データ保存部22の符号化映像データテーブルを参照して、符号化映像データ配信要求信号が示すコンテンツURLに対応する符号化映像データを再生データ保存部22から要求された数だけ読み出し、送信部23へ出力する。この送信部23は、サーバ制御部24から符号化映像データを要求された数だけ受け取り、受け取った符号化映像データを、ネットワーク(A)30を介してスレーブ再生端末50(60、70)へ送信する(ステップ728)。
Next, the
次に、図17を参照して、本実施形態に係る映像分割再生方法の続きを説明する。
スレーブ再生端末50(60、70)の受信部54は、ネットワーク(A)30を介して、配信サーバ20の送信部23から送信された再生設定ファイルと符号化映像データを受信すると、再生設定ファイルを同期再生制御部52に出力する。この同期再生制御部52は、再生設定ファイルをスレーブ記憶部57に保存する。また、受信部54は、再生設定ファイルと符号化映像データを受信すると、符号化映像データを受信したことを示す符号化映像データ受信開始通知信号を生成し、同期再生制御部52に出力する(ステップ729)。
なお、スレーブ再生端末50(60、70)は、この段階では、符号化映像データの再生処理を開始しない。スレーブ再生端末50(60、70)において、受信部54は、バッファ残量から配信制御を行っているため、受信バッファが溢れることはない。
Next, with reference to FIG. 17, a continuation of the video division reproduction method according to the present embodiment will be described.
When the
Note that the slave playback terminal 50 (60, 70) does not start the playback process of the encoded video data at this stage. In the slave playback terminal 50 (60, 70), the receiving
次に、スレーブ再生端末50(60、70)の同期再生制御部52は、受信部54から符号化映像データ受信開始通知信号を受け取り、受け取った符号化映像データ受信開始通知信号を、送信部53へ出力する(ステップ730)。
送信部53は、同期再生制御部52から符号化映像データ受信開始通知信号を受け取り、受け取った符号化映像データ受信開始通知信号を、ネットワーク(B)31を介して、マスタ再生端末40へ送信する(ステップ731)。
Next, the synchronous
The
マスタ再生端末40の受信部44は、スレーブ再生端末50(60、70)からネットワーク(B)31を介して符号化映像データ受信開始通知信号を受信し、受信した符号化映像データ受信開始通知信号を、同期再生制御部42へ出力する(ステップ732)。
同期再生制御部42は、受信部44からスレーブ再生端末50(60、70)の符号化映像データ受信開始通知信号を受け取る。この同期再生制御部42は、全てのスレーブ再生端末50(60、70)から符号化映像データ受信開始通知信号を受信したか否かを判定する。全てのスレーブ再生端末50(60、70)から符号化映像データ受信開始通知信号を受信した場合、同期再生制御部42は、符号化映像データを1GOPのみ復号部45へ送信する信号を受信部44へ送る。受信部44は、この符号化映像データ1GOPを復号部45へ出力する。
このとき、復号部45は、入力した符号化映像データ1GOPをまだ復号せずに、一時的に自身の記憶部に保存しておく。
また、同期再生制御部42は、全てのスレーブ再生端末50(60、70)から符号化映像データ受信開始通知信号を受信した場合、マスタ記憶部47から再生設定ファイルを読み出し、復号部45へこの再生設定ファイルを出力するとともに、再生準備通知信号を送信部43へ出力する(ステップ733)。
マスタ再生端末40の送信部43は、同期再生制御部42から各スレーブ再生端末50(60、70)に対して送信する再生準備通知信号を受け取り、各スレーブ再生端末50(60、70)に対して、ネットワーク(B)31を介して再生準備通知信号を送信する(ステップ734)。
The receiving
The synchronized
At this time, the
When the synchronized
The
スレーブ再生端末50(60、70)の受信部54は、マスタ再生端末40から再生準備通知信号をネットワーク(B)31を介して受信すると、受信した再生準備通知信号を同期再生制御部52へ出力する(ステップ735)。
同期再生制御部52は、再生準備通知信号を受け取ると、符号化映像データを1GOPのみ復号部55へ送信する信号を受信部54へ送る。受信部54は、この符号化映像データ1GOPを復号部55へ出力する。このとき、復号部55は、入力した符号化映像データ1GOPをまだ復号せずに、一時的に自身の記憶部に保存しておく。
同期再生制御部52は、スレーブ記憶部57から再生設定ファイルを読み出し、復号部55へ出力するとともに、スレーブ再生端末50(60、70)における符号化映像データの再生の準備が完了したことを示す再生準備完了通知信号を、送信部53へ出力する。(ステップ736)。
When receiving the reproduction preparation notification signal from the
When the synchronized
The synchronized
次に、図18を参照して、本実施形態に係る映像分割再生方法の続きを説明する。
この送信部53は、同期再生制御部52から再生準備完了通知信号を受け取り、マスタ再生端末40へ、ネットワーク(B)31を介して再生準備完了通知信号を送信する(ステップ737)。
マスタ再生端末40の受信部44は、スレーブ再生端末50(60、70)から再生準備完了通知信号を、ネットワーク(B)31を介して受信すると、受信した再生準備完了通知信号を、同期再生制御部42へ出力する(ステップ738)。この同期再生制御部42は、受信部44から再生準備完了通知信号を受け取り、全てのスレーブ再生端末50、60、70から再生準備完了通知信号を受信したか否かを判定する。全てのスレーブ再生端末50、60、70から再生準備完了通知信号を受信した場合、同期再生制御部42は、再生開始通知信号を全スレーブ再生端末50、60、70へ送る指示を、送信部43へ出力する(ステップ739)。
マスタ再生端末40の送信部43は、同期再生制御部42から再生開始通知信号を受け取ると、ネットワーク(B)31を介して、全てのスレーブ再生端末50、60、70へ再生開始通知信号を送信する(ステップ740)。
Next, with reference to FIG. 18, a continuation of the video division reproduction method according to the present embodiment will be described.
The transmitting
When receiving the reproduction preparation completion notification signal from the slave reproduction terminal 50 (60, 70) via the network (B) 31, the
When receiving the reproduction start notification signal from the synchronous
スレーブ再生端末50(60、70)において、受信部54は、再生開始通知信号をマスタ再生端末40からネットワーク(B)31を介して受信すると、受信した再生開始通知信号を、同期再生制御部52へ出力する(ステップ741)。
そして、同期再生制御部52は、受信部54から再生開始通知信号を受け取ると、復号部55に、一時保存されている符号化映像データの復号化を開始することを示す復号化開始指示信号を出力するとともに、受信部54へ符号化データの復号部55への送信開始を示す送信開始信号を送る。受信部54は、送信開始信号を受け取ると、復号部55へ符号化データの送信を開始する。
さらに、同期再生制御部52は、スレーブ再生端末50(60、70)の符号化映像データの復号化を開始したことを示す再生開始実行通知信号を作成し、送信部53に出力する(ステップ742)。
In the slave playback terminal 50 (60, 70), when the receiving
When the synchronized
Furthermore, the synchronized
スレーブ再生端末50(60、70)において、復号部55は、同期再生制御部52から復号化開始指示信号が入力すると、スレーブ記憶部57に保存されているスレーブ再生端末識別子と、再生設定ファイルに記載されている初期選択領域情報およびマルチビュー再生ファイルの分割数とに基づき、選択領域におけるスレーブ再生端末50(60、70)の再生担当領域の位置を示す再生領域情報を作成する。
例えば、スレーブ再生端末50のスレーブ記憶部57には、スレーブ再生端末識別子“2”が保存されている。また、スレーブ再生端末50のスレーブ記憶部57には、初期選択領域情報(X、Y、幅、高さ)=(300,700,2600,1000)、あるいは相対座標で表わした相対座標値(0.075,0.35,0.65,0.5)と、マルチビュー再生ファイルの分割数{縦分割数=2、横分割数=2}が記載されている。よって、同期再生制御部52は、初期選択領域情報(300,700,2600,1000)あるいは相対座標で表わした相対座標値(0.075,0.35,0.65,0.5)によって示される選択領域S1を4分割した場合、スレーブ再生端末識別子“1”に対応する領域が選択領域S1において右上側の領域であることを示す再生領域情報を作成する。なお、初期選択領域情報、分割数、およびスレーブ再生端末識別子の組み合わせに応じた再生領域は、予め決められており、これらの関係性を示す情報はプログラムとして事前に復号部55に搭載されている。
In the slave reproduction terminal 50 (60, 70), when the decoding start instruction signal is input from the synchronous
For example, the slave playback terminal identifier “2” is stored in the slave storage unit 57 of the
さらに、復号部55は、初期選択領域情報(300,700,2600,1000)、あるいは相対座標で表わした相対座標値(0.075,0.35,0.65,0.5)と、スレーブ再生端末50(60、70)の再生領域情報とに基づき、各スレーブ再生端末50(60、70)にそれぞれ対応する第2〜4ディスプレイ再生担当領域R12〜14を示す再生領域値を算出する。
例えば、スレーブ再生端末50の同期再生制御部52は、スレーブ再生端末50に対応する第2ディスプレイ再生担当領域R12を示す再生領域値=(1600,700,1300,500)を算出する。
なお、スレーブ再生端末60も同様にして、スレーブ再生端末60に対応する第3ディスプレイ再生担当領域R13を示す再生領域値=(300,1200,1300,500)を算出する。また、スレーブ再生端末70も同様にして、スレーブ再生端末70に対応する第4ディスプレイ再生担当領域R14を示す再生領域値=(1600,1200,1300,500)を算出する(ステップ743)。
Further, the
For example, the synchronous
Similarly, the
復号部55は、初期選択領域情報(300,700,2600,1000)、あるいは相対座標で表わした相対座標値(0.075,0.35,0.65,0.5)とステップ743において算出したスレーブ再生端末50(60、70)それぞれの自端末の再生領域値に基づき、符号化映像データに含まれるメイン符号化映像データの復号化と、ナビゲーション符号化映像データとの復号化を、1GOP単位で並列して開始する。なお、スレーブ再生端末50(60、70)において、ナビゲーション符号化映像データを表示しない場合、メイン符号化映像データの復号化のみを開始する。
初期選択領域情報と再生領域値とに基づいて復号化したメイン映像は、図10に示すスレーブ再生領域より大きいサイズとなる。そのため、スレーブ再生端末50(60、70)の再生領域値に基づいて、スレーブ50(60、70)再生領域映像を切り出し、このスレーブ50(60、70)再生領域映像とナビゲーション映像とを、表示部56へ送る。さらに、復号部55は、復号化したナビゲーション映像から、選択領域情報、再生領域情報、再生領域値に基づき、再生端末毎の再生領域を切り出し、さらにサムネイル化し、マスタ再生端末40、スレーブ再生端末50(60、70)の該サムネイル映像を表示部56に送る(ステップ744)。
The
The main video decoded based on the initial selection area information and the reproduction area value is larger in size than the slave reproduction area shown in FIG. Therefore, based on the playback area value of the slave playback terminal 50 (60, 70), the slave 50 (60, 70) playback area video is cut out, and the slave 50 (60, 70) playback area video and the navigation video are displayed. Send to
次に、図19を参照して、本実施形態に係る映像分割再生方法の続きを説明する。
一方、送信部53は、ステップ742において同期再生制御部52から受け取った再生開始実行通知信号を、ネットワーク(B)31を介してマスタ再生端末40へ送る(ステップ745)。
次に、マスタ再生端末40において、受信部44は、スレーブ再生端末50(60、70)からネットワーク(B)31を介して再生開始実行通知信号を受け取り、受け取った再生開始実行通知を、同期再生制御部42へ送る(ステップ746)。
Next, with reference to FIG. 19, the continuation of the video division reproduction method according to the present embodiment will be described.
On the other hand, the
Next, in the
この同期再生制御部42は、受信部44から再生開始実行通知を受け取る、この同期再生制御部42は、全てのスレーブ再生端末50(60、70)から再生開始実行通知信号を受信したか否かを判定する。全てのスレーブ再生端末50(60、70)から再生開始実行通知信号を受信した場合、同期再生制御部42は、復号部45に対して、一時保存されている符号化映像データの復号化を開始することを示す復号化開始指示信号を出力するとともに、受信部44へ符号化データの復号部45へ送信開始を示す送信開始信号を送る。受信部44は、送信開始信号を受け取ると、復号部45へ復号化データの送信を開始する(ステップ747)。
The synchronized
マスタ再生端末40において、復号部45は、同期再生制御部42から復号化開始指示信号を受け取ると、マスタ記憶部47に保存されているマスタ再生端末識別子と、再生設定ファイルに記載されている選択領域情報およびマルチビュー再生ファイルの分割数とに基づき、選択領域におけるマスタ再生端末40の再生担当領域の位置を示す再生領域情報を作成する。
例えば、マスタ再生端末40のマスタ記憶部47には、マスタ再生端末識別子“0”が保存されている。また、マスタ記憶部47には、初期選択領域情報(X、Y、幅、高さ)=(300,700,2600,1000)、あるいは相対座標で表わした相対座標値(0.075,0.35,0.65,0.5)と、マルチビュー再生ファイルの分割数{縦分割数=2、横分割数=2}が記載されている。よって、同期再生制御部42は、初期選択領域情報(300,700,2600,1000)、あるいは相対座標で表わした相対座標値(0.075,0.35,0.65,0.5)によって示される選択領域S1を4分割した場合、マスタ再生端末識別子“0”に対応する領域が選択領域S1において左上側の領域であることを示す再生領域情報を作成する。なお、初期選択領域情報、分割数、およびスレーブ再生端末識別子の組み合わせに応じた再生領域は、予め決められており、これらの関係性を示す情報はプログラムとして事前に復号部45に搭載されている。
さらに、復号部45は、初期選択領域情報(300,700,2600,1000)、あるいは相対座標で表わした相対座標値(0.075,0.35,0.65,0.5)と、マスタ再生端末40の再生領域情報から、マスタ再生端末40に対応する第1ディスプレイ再生担当領域R11を示す再生領域値を算出する。
例えば、マスタ再生端末40の同期再生制御部42は、マスタ再生端末40に対応する第1ディスプレイ再生担当領域R11を示す再生領域値(300,700,1300,500)を算出する(ステップ748)。
In the
For example, the master playback terminal identifier “0” is stored in the master storage unit 47 of the
Further, the
For example, the synchronous
復号部45は、初期選択領域情報(300,700,2600,1000)、あるいは相対座標で表わした相対座標値(0.075,0.35,0.65,0.5)と、ステップ748において算出したマスタ再生端末40の再生領域値とに基づき、復号化映像データに含まれるメイン符号化映像データの復号化と、ナビゲーション符号化映像データの復号化を、1GOP単位で並列して開始する。なお、マスタ再生端末40において、ナビゲーション符号化映像データを表示しない場合、メイン符号化映像データの復号化のみを開始する。
In
初期選択領域情報と再生領域値とに基づいて復号化したメイン映像は、図10に示すマスタ再生領域より大きいサイズとなる。そのため、マスタ再生端末40の再生領域値に基づいて、マスタ再生領域映像を切り出し、このマスタ再生領域映像とナビゲーション映像とを、表示部56へ送る。さらに、復号部45は、復号化したナビゲーション映像から、選択領域情報、再生領域情報、再生領域値に基づき、再生端末毎の再生領域を切り出し、さらにサムネイル化し、マスタ再生端末40、スレーブ再生端末50(60、70)の該サムネイル映像を表示部46に送る(ステップ749)。
The main video decoded based on the initial selection area information and the reproduction area value is larger than the master reproduction area shown in FIG. Therefore, based on the playback area value of the
ここで、マスタ再生端末40の操作手段(図示せず)において、ユーザの操作によりメイン映像あるいはナビゲーション映像の選択領域を変更する操作が入力された場合、再生要求部41は、同期再生制御部42に対して、変更後の選択領域を示す変更後選択領域情報を送る。同期再生制御部42は、受け取った変更後選択領域情報を復号部45へ送る(ステップ750)。
なお、再生要求部41は、ユーザ操作により選択領域を変更する操作が入力された場合に、選択領域情報を同期再生制御部42へ送る。例えば、この選択領域を変更する操作として、キーボードの「→」キーをユーザが1回押下することにより、再生要求部41は、画面内の画像を矢印の方向にNピクセル動かすという操作を受け付ける。つまり、再生要求部41は、選択領域情報として、現在の選択領域情報の各値を矢印の方向にNピクセル動かした場合の選択領域情報を生成し、同期再生制御部42に送る。
また、ユーザによって「→」キーが押下され続けた場合、再生要求部41は、連続して選択領域を変更する操作を入力する。
同期再生制御部42は、選択領域情報を送信部43へ送る。また、同期再生制御部42は、選択領域情報を復号部45に送る。送信部43は、同期再生制御部42から選択領域情報を受け取ったタイミングで、スレーブ再生端末50(60、70)にそれぞれ受け取った選択領域情報を送信する。
Here, when an operation for changing the selection area of the main video or the navigation video is input by an operation of a user through an operation unit (not shown) of the
Note that the
When the user continues to press the “→” key, the
The synchronized
ここで、図23を参照して、選択領域を変更する操作が入力されたタイミングとマスタ再生端末40がスレーブ再生端末50(60、70)に選択領域情報を送信するタイミングについて、説明する。図23は、本実施形態において、選択領域情報の送信タイミングについて説明するための図である。
同期再生制御部42は、内蔵するタイマーで選択領域情報が入力する時間間隔を計時しながら、再生要求部41からの次の選択領域情報の入力があるか否かを判定する。この同期再生制御部42は、再生要求部41から現在指定されている選択領域情報を入力した時点から第1指定時間以内に次の選択領域情報を入力するか否かを判定する。なお、本実施形態において、第1指定時間とは、例えば、1フレームの長さに相当する時間であって、33msecである。
再生要求部41から現在指定されている選択領域情報を入力した時点から第1指定時間未満に次の選択領域情報を入力した場合、同期再生制御部42は、再生要求部41から現在指定されている選択領域情報を入力した時点から第1指定時間後に、次の選択領域情報を送信部43と復号部45に出力する。
例えば、ユーザが「→」キーを押下し続けた場合、選択領域を変更する操作が連続して再生要求部41に入力される。この場合、再生要求部41は、1フレーム(33msec)未満の間隔で、変更後の選択領域情報を連続して同期再生制御部42に出力する。この同期再生制御部42は、再生が開始されるとタイマーを開始し、受け取った順に連続して再生要求部41から受け取った選択領域情報を第1指定時間(33msec)毎に送信部43と復号部45へ送る。つまり、同期再生制御部42は、33msecの間隔で、選択領域情報を送信部43と復号部45に出力する。よって、送信部43は、33msecの間隔で、選択領域情報をスレーブ再生端末50(60、70)に送信する。
Here, with reference to FIG. 23, the timing when the operation for changing the selection area is input and the timing when the
The synchronized
When the next selection area information is input within the first specified time from the time when the currently specified selection area information is input from the
For example, when the user continues to press the “→” key, an operation for changing the selected area is continuously input to the
一方、再生要求部41から現在指定されている選択領域情報を入力した時点から第1指定時間が経過した場合、同期再生制御部42は、再生要求部41から現在指定されている選択領域情報を入力した時点から第2指定時間以内に次の選択領域情報を入力するか否かを判定する。この第2指定時間とは、第1指定時間よりも長く、例えば、500msecである。
再生要求部41から現在指定されている選択領域情報を入力した時点から第2指定時間未満に次の選択領域情報を入力した場合、同期再生制御部42は、再生要求部41から選択領域情報を入力したタイミングでその都度、選択領域情報を送信部43および復号部45へ出力する。つまり、ユーザ操作により選択領域を変更する操作が、33msec以上500msec未満の間隔で入力された場合、送信部43は、同期再生制御部42から選択領域情報を入力したタイミングでその都度、選択領域情報をスレーブ再生端末50(60、70)に送信する。
On the other hand, when the first designated time has elapsed since the selection area information currently designated from the
When the next selection area information is input within the second specified time from the time when the currently specified selection area information is input from the
一方、再生要求部41から現在指定されている選択領域情報を入力した時点から第2指定時間以上に次の選択領域情報が入力されない場合、同期再生制御部42は、再生要求部41から現在指定されている選択領域情報を入力した時点から第2指定時間後に、現在指定されている選択領域情報を送信部43と復号部45に出力する。
つまり、ユーザ操作により選択領域を変更する操作が入力されない場合、再生要求部41は、選択領域情報を同期再生制御部42へ送信しない。そのため、同期再生制御部42は、選択領域情報を受け取らない。同期再生制御部42は、500msec以上、選択領域情報を再生要求41から受け取らない場合、現在指定されている選択領域情報を、第2指定時間(例えば、500msec)毎に、送信部43と復号部45へ送る。つまり、第2指定時間以上、ユーザ操作により選択領域を変更する操作が入力されない場合、送信部43は、再生要求部41から現在指定されている選択領域情報を入力した時点から第2指定時間後に、現在指定されている選択領域情報をスレーブ再生端末50(60、70)に送信する。
このように、ユーザ操作により、選択領域を変更する操作が入力されたタイミングに応じて、同期再生制御部42が選択領域情報を送信部43と復号部45に送信する間隔が異なる。ユーザ操作による入力がない場合の方が、選択領域を変更した場合よりも、選択領域情報を送信する間隔を長く取る。
On the other hand, when the next selection area information is not input for the second specified time or more from the time when the currently specified selection area information is input from the
That is, when an operation for changing the selection area is not input by a user operation, the
As described above, the interval at which the synchronized
復号部45は、変更後選択領域情報を同期再生制御部42から受け取り、受け取った変更後選択領域情報と、現在再生しているメイン映像(あるいはナビゲーション映像)に対して指定されている選択領域を示す選択領域情報(以下、変更前選択領域情報という)と比較する。この変更後選択領域情報が示す領域と、変更前選択領域情報が示す領域が一致しない場合、復号部45は、受け取った変更後選択領域情報と、各再生端末40、50(60、70)の再生領域情報から、新たに各再生端末の再生領域値を作成する。
The
なお、復号部45による変更後選択領域情報への切り替えは、今復号化しているフレームの次のフレームからとなる。復号部45は、受け取った変更後選択領域情報と、マスタ再生端末40の再生領域情報とに基づき、メイン符号化映像データの復号化と、ナビゲーション符号化映像データとの復号化とを、1GOP単位で並列して開始する。変更後選択領域情報と再生領域値とに基づいて復号化したメイン映像は、図10に示すマスタ再生領域より大きいサイズとなる。そのため、マスタ再生端末40の新しい再生領域値に基づいて、マスタ再生領域映像を切り出し、このマスタ再生領域映像とナビゲーション映像とを、表示部46へ送る。さらに、復号化したナビゲーション映像から、変更後選択領域情報と再生領域情報、新再生領域値に基づいて、再生端末毎の再生領域を切り出し、さらにサムネイル化し、マスタ再生端末40、スレーブ再生端末50(60、70)の該サムネイル映像を表示部46に送る(ステップ751)。
Note that the switching to the selected area information after change by the
次に、図20を参照して、本実施形態に係る映像分割再生方法の続きを説明する。
マスタ再生端末40において、同期再生制御部42は、指定時間毎に、変更後選択領域情報を復号部45から受け取り、受け取った変更後選択領域情報を送信部43へ出力する(ステップ752)。この送信部43は、受け取った変更後選択領域情報をネットワーク(B)31を介して、全てのスレーブ再生端末50、60、70に送信する(ステップ753)。
Next, with reference to FIG. 20, a continuation of the video division reproduction method according to the present embodiment will be described.
In the
スレーブ再生端末50(60、70)において、受信部54は、マスタ再生端末40から変更後選択領域情報をネットワーク(B)31を介して受け取り、受け取った変更後選択領域情報を同期再生制御部52へ出力する(ステップ754)。
この同期再生制御部52は、変更後選択領域情報を受け取ると、復号部55へ変更後選択領域情報を出力する(ステップ755)。
In the slave playback terminal 50 (60, 70), the receiving
Upon receiving the changed selection area information, the synchronized
復号部55は、受け取った変更後選択領域情報と今再生している変更前選択領域情報と比較する。この変更後選択領域情報が示す領域と、変更前選択領域情報が示す領域が一致しない場合、復号部55は、受け取った変更後選択領域情報と、各スレーブ再生端末50(60、70)の再生領域情報に基づき、それぞれ、スレーブ再生端末50(60、70)に対応する第2〜4ディスプレイ再生担当領域R12〜14を示す新たに再生領域値を算出する。
なお、復号部55による変更後選択領域情報への切り替えは、今復号化しているフレームの次のフレームからとなる。復号部55は、受け取った変更後選択領域情報と、スレーブ再生端末50(60、70)のそれぞれの自端末の再生領域情報とに基づき、メイン符号化映像データの復号化と、ナビゲーション符号化映像データとの復号化を、1GOP単位で並列して開始する。変更後選択領域情報と再生領域情報とに基づいて復号化したメイン映像は、図10に示すスレーブ再生領域より大きいサイズとなる。そのため、スレーブ再生端末50(60、70)の新しい再生領域値に基づいて、それぞれのスレーブ再生領域映像を切り出し、このスレーブ再生領域映像とナビゲーション映像とを、表示部56へ送る。さらに、復号化したナビゲーション映像から、選択領域情報と再生領域情報、新再生領域値に元づいて、再生端末毎の再生領域を切り出し、さらにサムネイル化し、マスタ再生端末40、スレーブ再生端末50(60、70)の該サムネイル映像を表示部56に送る(ステップ756)。
The
Note that the switching to the changed selected area information by the
マスタ再生端末40において、復号部45は、指定時間毎にその時の再生時間を確認する。メイン映像とナビゲーション映像は並列して復号化しているため、どちらの再生時間を用いてもよい。復号部45は、確認した再生時間を示す再生時間情報を同期再生制御部42へ出力する(ステップ757)。
同期再生制御部42は、復号部45から受け取った再生時間情報を送信部43へ出力する(ステップ758)。この送信部43は、同期再生制御部42から受け取った再生時間情報を、ネットワーク(B)31を介して、スレーブ再生端末50(60、70)に送信する(ステップ759)。
In the
The synchronized
次に、図21を参照して、本実施形態に係る映像分割再生方法の続きを説明する。
スレーブ再生端末50(60、70)において、受信部54は、マスタ再生端末40から再生時間情報をネットワーク(B)31を介して受け取り、受け取った再生時間情報を同期再生制御部52へ出力する(ステップ760)。なお、スレーブ再生端末50(60、70)は、マスタ再生端末40からの再生時間に必ず合わせる必要はなく、例えば、他のスレーブ再生端末50(60、70)から受け取った再生時間情報を同期再生制御部52へ出力するものであってもよい。なお、マスタ再生端末40も、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70のいずれから受け取った再生時刻情報を同期再生制御部42へ出力してもよい。
この同期再生制御部52は、受け取った再生時間情報を復号部55へ出力する(ステップ761)。
復号部55は、同期再生制御部52から受け取った再生時間情報が示す再生時間とスレーブ再生端末50(60、70)が比較するその時に表示部56に表示されるコンテンツ映像の再生時間とを比較し、同じならばそのまま再生する。スレーブ再生端末50(60、70)が進んでいた場合は、進んでいた時間分を停止する。スレーブ再生端末50(60、70)が遅れていた場合、遅れていた時間分を早送りして再生する(ステップ762)。
Next, with reference to FIG. 21, a continuation of the video division reproduction method according to the present embodiment will be described.
In the slave playback terminal 50 (60, 70), the receiving
The synchronous
The
マスタ再生端末40において、再生要求部41は同期再生制御部42へ再生停止を送る(ステップ763)。
同期再生制御部42は、再生停止を送信部43へ送る。また、復号部45へ再生停止を送る。受信部44へ符号化映像データの送信停止を送る(ステップ764)。
送信部43は、同期再生制御部42から再生停止を受け取ると、ネットワーク(B)31を介して、各スレーブ再生端末50、60、70へ再生停止を送信する。また、送信部43は、配信サーバ20へ配信停止をネットワーク(A)30を介して送る(ステップ765)。
In the
The synchronized
When the
マスタ再生端末40の受信部44は、同期再生制御部42から符号化映像データ送信停止を受けとると、復号部45へ符号化映像データ送信を停止する(ステップ766)。
復号部44は、復号化を停止し、表示部46へ再生停止を送る。表示部46は、再生を停止する(ステップ767)。
スレーブ再生端末50(60、70)において、受信部54は、マスタ再生端末40から再生停止をネットワーク(B)31を介して受け取り、受け取った再生停止を同期再生制御部52へ出力する(ステップ768)。
When receiving the encoded video data transmission stop from the synchronous
The
In the slave playback terminal 50 (60, 70), the receiving
次に、図22を参照して、本実施形態に係る映像分割再生方法の続きを説明する。
同期再生制御部52は、復号部55へ再生停止を送る。受信部54へ符号化映像データ送信停止を送る。送信部53へ配信停止を送る(ステップ769)。
送信部53は、同期再生制御部52から配信停止を受け取ると、配信サーバ20へ配信停止をネットワーク(A)30を介して送信する(ステップ770)。
受信部54は、同期再生制御部52から符号化映像データ送信停止を受けとると、復号部55への符号化で映像データ送信を停止する(ステップ771)。
復号部55は、同期再生制御部52から再生停止を受け取ると、復号化を停止し、表示部56へ再生停止を送る。表示部56は、再生を停止する(ステップ772)。
Next, with reference to FIG. 22, a continuation of the video division reproduction method according to the present embodiment will be described.
The synchronized
When the
When receiving the encoded video data transmission stop from the synchronous
When receiving the reproduction stop from the synchronous
上記構成により、本実施形態に係る映像分割再生システムは、解像度が高い映像を表示する場合であっても、映像を分割し、複数のディスプレイにより構成されるマルチ画面に分割した映像を表示させることにより、各再生端末の処理負荷を軽減させることができる。また、処理負荷が大きく1台の再生端末では再生が不可能な高解像度映像であっても、本実施形態に係る映像分割再生システムにより、複数のディスプレイにおいて分割した映像を同期して再生することができる。
また、上述の通り、高解像度コンテンツを配信する配信サーバ20と、マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70とは、広範囲に接続される広域ネットワークAを介して接続されている。また、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、特定の建物内、敷地内の限られた範囲内の限定範囲ネットワークBを介して接続される。
よって、本実施形態に係る映像分割再生システムは、コンテンツ映像の分割処理を、限定範囲ネットワークBの範囲で行うことができる。
With the above configuration, the video split playback system according to the present embodiment splits the video and displays the split video on a multi-screen composed of a plurality of displays even when displaying a video with high resolution. Thus, the processing load on each playback terminal can be reduced. In addition, even with high-resolution video that has a heavy processing load and cannot be played back by a single playback terminal, the video split playback system according to this embodiment can play back video that has been split on multiple displays in synchronization. Can do.
In addition, as described above, the
Therefore, the video division reproduction system according to the present embodiment can perform content video division processing within the range of the limited range network B.
<第2実施形態>
また、本発明に係る再生端末は、上記構成に限られず、図23に示すようなメイン再生端末80やサブ再生端末90を備えるシステムであってもよい。本実施形態は、選択映像を分割せずに、メイン再生端末80とサブ再生端末90において、同一の選択映像を表示させる点が、第1実施形態と異なる。
このメイン再生端末80は、例えば、サブ再生端末90の動作を制御するリモコンである。サブ再生端末90は、例えば、テレビ等である。よって、サブ再生端末90の表示部96の方が、メイン再生端末80の表示部86の画面よりも大きくかつ解像度も高い。
Second Embodiment
Further, the playback terminal according to the present invention is not limited to the above configuration, and may be a system including a
The
なお、図24に示す通り、メイン再生端末80は、マスタ再生端末40と同様の構成である再生要求部81と、同期再生制御部82と、送信部83と、受信部84と、復号部85と、表示部86と、記憶部87を含む。なお、各構成については、マスタ再生端末40の再生要求部41と、同期再生制御部42と、送信部43と、受信部44と、復号部45と、表示部46と、マスタ記憶部47と同様であるため、詳細な説明は省略する。
ここで、メイン再生端末80は、例えば、選択領域情報を相対座標値でサブ再生端末90へ送る。メイン再生端末80は、相対座標値の選択領域情報に基づき、復号化、再生をする。なお、メイン再生端末80は、マスタ再生端末40と異なり、再生領域情報を生成しない。
また、サブ再生端末90は、スレーブ再生端末50(60、70)と同様の構成である同期再生制御部92と、送信部93と、受信部94と、復号部95と、表示部96と、記憶部97とを含む。なお、各構成については、スレーブ再生端末50(60、70)のスレーブ再生端末50は、同期再生制御部52と、送信部53と、受信部54と、復号部55と、表示部56と、スレーブ記憶部57と同様であるため、詳細な説明は省略する。
ここで、サブ再生端末90は、例えば、選択領域情報を相対座標値でメイン再生端末80から受信すると、現在復元しているフレームの次のフレームから受け取った相対座標値の選択領域情報に基づき、復号化、再生をする。なお、サブ再生端末90は、スレーブ再生端末50(60、70)と異なり、再生領域情報を生成しない。
このように、メインディスプレイとサブディスプレイの解像度が異なる場合であっても、選択された同じ領域(映像)を示す選択映像を、メイン再生端末80のメインディスプレイには低解像度に、サブ再生端末90のサブディスプレイには高解像度に、それぞれ表示することができる。
As shown in FIG. 24, the
Here, for example, the
Further, the
Here, for example, when the
In this way, even when the resolutions of the main display and the sub display are different, the selected video indicating the same region (video) selected is displayed on the main display of the
図25、26は、本実施形態に係る映像分割再生システムによる処理について説明するためのシーケンス図である。具体的には、配信要求から再生開始処理、ユーザ操作選択領域の分割再生処理、再生停止までの処理について説明するためのシーケンス図である。
図25に示すシーケンスについて、以下説明する。
1.メイン再生端末80は、サブ再生端末90とTCP/IP接続する。メイン再生端末80は、ユーザから入力されたコンテンツURLを配信サーバ20へ送る。メイン再生端末80は、配信サーバ20から、コンテンツURLに対応する符号化映像データと再生設定ファイルを受信して、再生設定ファイルを記憶部87に保存する。ここでは、メイン再生端末80の符号化映像データの再生開始は、まだ実行しない。なお、メイン再生端末80は、符号化映像データの受信を開始するが、受信バッファ残量から配信制御を行うことにより、受信バッファが溢れる事態を回避している。配信サーバ20は、符号化映像データをメイン再生端末80に対してストリーム配信している。
25 and 26 are sequence diagrams for explaining processing by the video division reproduction system according to the present embodiment. Specifically, it is a sequence diagram for explaining a process from a distribution request to a reproduction start process, a user operation selection area divided reproduction process, and a reproduction stop.
The sequence shown in FIG. 25 will be described below.
1. The
2.メイン再生端末80は、コンテンツURLをサブ再生端末90に対して送信する。サブ再生端末90は、メイン再生端末80からコンテンツURLを受信する。
3.サブ再生端末90は、コンテンツURLを配信サーバ20へ送る。サブ再生端末90は、配信サーバ20から、コンテンツURLに対応する符号化映像データと再生設定ファイルを受信して、再生設定ファイルを記憶部97に保存する。ここでは、サブ再生端末90の符号化映像データの再生開始は、まだ実行しない。なお、サブ再生端末90は、符号化映像データの受信を開始するが、受信バッファ残量から配信制御を行うことにより、受信バッファが溢れる事態を回避している。配信サーバ20は、符号化映像データをサブ再生端末90に対してストリーム配信している。
2. The
3. The
4.サブ再生端末90は、受信開始通知をメイン再生端末80へ送信する。
5.メイン再生端末80は、サブ再生端末90から受信開始通知を受け取ると、受信部84から符号化映像データを1GOP復号部85に出力する。また、メイン再生端末80は、記憶部87から読み出した再生設定ファイルを復号部85に出力する。
6.そして、メイン再生端末80は、サブ再生端末90に対して、再生準備を通知する。
4). The
5. When the
6). Then, the
7.サブ再生端末90は、メイン再生端末80から再生準備を受け取ると、受信部94から符号化映像データを1GOP復号部95に出力する。また、サブ再生端末90は、記憶部97から読み出した再生設定ファイルを復号部95に出力する。
8.サブ再生端末90は、メイン再生端末80へ再生準備完了を通知する。
9.メイン再生端末80は、サブ再生端末90から再生準備完了を受け取ると、サブ再生端末90に対して再生開始を通知する。
7). When receiving the playback preparation from the
8). The
9. When the
10.サブ再生端末90は、再生開始を受け取ると、復号部95が、再生設定ファイルに記載されている初期選択領域情報に基づき、対応するメイン映像の復号化、再生を開始する。また、サブ再生端末90は、ナビゲーション映像を再生開始してもよい。
10. When the
11.サブ再生端末90は、再生開始実行をメイン再生端末80へ通知する。
12.メイン再生端末80は、サブ再生端末90から再生開始実行を受け取ると、復号部85が、再生設定ファイルに記載されている初期選択領域情報に基づき、対応するメイン映像の復号化、再生を開始する。また、メイン再生端末80は、ナビゲーション映像の再生を開始してもよい。
11. The
12 When the
次に、図26に示すシーケンスについて、以下説明する。
ここで、メイン再生端末80に対して、ユーザが選択領域の変更を指示する。
13.メイン再生端末80は、ユーザが指定する変更後の選択領域の位置を示す新選択領域情報に基づき、対応するメイン映像の復号化、再生を行う。また、メイン再生端末80は、ナビゲーション映像を再生してもよい。
Next, the sequence shown in FIG. 26 will be described below.
Here, the user instructs the
13. The
14.メイン再生端末80は、指定時間毎に、サブ再生端末90に対して新選択領域情報を送信する。
15.サブ再生端末90は、メイン再生端末80から新選択領域情報を受け取る。そして、サブ再生端末90は、受け取った新選択領域情報に基づき、メイン映像の復号化、再生を行う。サブ再生端末90は、ナビゲーション映像を再生してもよい。
14 The
15. The
16.メイン再生端末80は、指定時間毎に再生時間を確認する。このメイン再生端末80は、再生時間を示す情報(以下、再生時間情報という)をサブ再生端末90に送信する。この再生時間情報とは、コンテンツ映像を再生する順番を映像の再生時間によって表わす情報である。
17.サブ再生端末90は、受け取ったメイン再生端末80の再生時間情報が示す再生時間に、自身が表示するコンテンツ映像の再生時間を合わせる。なお、再生時間問い合わせは、サブ再生端末90からメイン再生端末80へ再生時間情報を送信して、メイン再生端末80が、サブ再生端末90の再生時間に合わせてもよい。
18.メイン再生端末80が再生停止を実行すると、メイン再生端末80は、サブ再生端末90に対して再生停止を通知する。
19.そして、サブ再生端末90は、再生停止を受信する。
20.メイン再生端末80は、配信サーバ20へ配信停止を送信する。
21.メイン再生端末80は再生を停止する。
22.サブ再生端末90は、配信サーバ20へ配信停止を送信する。
23.サブ再生端末90は、再生を停止する。
16. The
17. The
18. When the
19. Then, the
20. The
21. The
22. The
23. The
また、本実施形態に係る映像分割再生システムに係る映像分割再生方法は、再生端末と配信サーバは広域ネットワークを介して接続され、配信サーバからは符号化映像データを再生端末へ配信し、再生端末はマスタ再生端末とスレーブ再生端末に分類し、スレーブ再生端末はマスタ再生端末の支配下に置かれ、マスタ再生端末とスレーブ再生端末は限られた範囲内のネットワークで接続し、マスタ再生端末が選択領域情報をスレーブ再生端末へ送信し、マスタ再生端末の再生時間にスレーブ再生端末の再生時間を合わせ、一画像を複数の再生端末に分割して同期して再生を行う方法であって、マスタ再生端末は配信サーバにマルチビュー再生ファイルの配信要求し、マスタ再生端末は、受信したマルチビュー再生ファイルをマスタ再生端末復号部へ送るとともに、マルチビュー再生ファイルの中に記載されているコンテンツURLの符号化映像データの配信要求を配信サーバに行い、マスタ再生端末は符号化映像データと再生設定ファイルを受信すると、マスタ再生端末は、マスタ再生端末が配信要求したマルチビュー再生ファイルURLを全スレーブ再生端末に通知し、スレーブ再生端末は、マスタ再生端末から受け取ったマルチビュー再生ファイルの配信要求を配信サーバに送信し、スレーブ再生端末は、受信したマルチビュー再生ファイルをスレーブ再生端末復号部へ送るとともに、マルチビュー再生ファイルの中に記載されているコンテンツURLの符号化映像データの配信要求を配信サーバに行い、スレーブ再生端末は符号化映像データと再生設定ファイルを受信すると、マスタ再生端末へ符号化映像データ受信開始を通知し、マスタ再生端末は、全スレーブ端末から符号化映像データ受信開始通知を受け取ると、マスタ再生端末の復号部に符号化映像データを1GOP送るとともに再生設定ファイルを復号部へ送り、マスタ再生端末は、再生準備を全スレーブ再生端末に通知し、スレーブ再生端末は、再生準備を受け取るとスレーブ再生端末の復号部に符号化映像データを1GOP送るとともに再生設定ファイルを復号部へ送り、さらに、マスタ再生端末へ再生準備完了を通知する。 In addition, in the video division reproduction method according to the video division reproduction system according to the present embodiment, the reproduction terminal and the distribution server are connected via a wide area network, and the distribution server distributes the encoded video data to the reproduction terminal. Is classified into a master playback terminal and a slave playback terminal, the slave playback terminal is under the control of the master playback terminal, the master playback terminal and the slave playback terminal are connected by a network within a limited range, and the master playback terminal selects A method of transmitting region information to a slave playback terminal, matching the playback time of the slave playback terminal with the playback time of the master playback terminal, dividing one image into a plurality of playback terminals, and performing playback synchronously. The terminal requests the distribution server to distribute the multi-view playback file, and the master playback terminal restores the received multi-view playback file to the master playback terminal. When the master playback terminal receives the encoded video data and the playback setting file, the master playback terminal sends a request for distributing the encoded video data of the content URL described in the multi-view playback file to the distribution server. The terminal notifies all slave playback terminals of the multi-view playback file URL requested by the master playback terminal, and the slave playback terminal transmits a delivery request for the multi-view playback file received from the master playback terminal to the delivery server. The playback terminal sends the received multi-view playback file to the slave playback terminal decoding unit, sends a delivery request for the encoded video data of the content URL described in the multi-view playback file to the delivery server, and the slave playback terminal When the encoded video data and the playback setting file are received When the master playback terminal notifies the master playback terminal of the start of reception of the encoded video data and receives the encoded video data reception start notification from all the slave terminals, the master playback terminal sends the encoded video data to the decoding unit of the master playback terminal and plays it back. The setting file is sent to the decoding unit, and the master playback terminal notifies all the slave playback terminals of the playback preparation. When the slave playback terminal receives the playback preparation, the slave playback terminal sends the encoded video data to the decoding unit of the slave playback terminal and plays it back. The setting file is sent to the decoding unit, and the master playback terminal is notified of the completion of playback preparation.
マスタ再生端末は、全てのスレーブ再生端末から再生準備完了通知を受け取ると、全てのスレーブ再生端末へ再生開始を通知し、スレーブ再生端末は、再生開始通知を受け取ると、分割数、初期注視領域情報、スレーブ再生端末識別子を基に再生領域情報と再生領域値を作成し、初期選択領域情報と再生領域情報に基づいてメイン符号化映像データの担当する領域の復号化を開始し、さらに再生領域値を基づいて担当する分割映像を切り出し、メイン映像の担当する分割映像を再生開始する。さらに、マスタ再生端末へ再生開始実行を通知する。
マスタ再生端末は、全てのスレーブ再生端末から再生開始実行通知を受け取ると、分割数、初期注視領域情報、スレーブ再生端末識別子を基に再生領域情報と再生領域値を作成し、初期選択領域情報と再生領域情報に基づいてメイン符号化映像データの担当するマスタ領域の復号化を開始し、さらに再生領域値を基づいて担当するマスタ分割映像を切り出し、メイン映像の担当するマスタ分割映像を再生開始する。
以上のことにより、マスタ再生端末と全スレーブ再生端末間で分割メイン映像を同期して再生することができる。
When the master playback terminal receives the playback preparation completion notification from all the slave playback terminals, it notifies the playback start to all the slave playback terminals. When the slave playback terminal receives the playback start notification, the master playback terminal receives the number of divisions and the initial gaze area information. Then, the playback area information and the playback area value are created based on the slave playback terminal identifier, decoding of the area in charge of the main encoded video data is started based on the initial selection area information and the playback area information, and the playback area value Based on the above, the divided video in charge is cut out and reproduction of the divided video in charge of the main video is started. Further, the master playback terminal is notified of the start of playback.
When receiving the playback start execution notification from all slave playback terminals, the master playback terminal creates playback area information and playback area values based on the number of divisions, initial gaze area information, and slave playback terminal identifiers, and sets initial selection area information and Based on the playback area information, decoding of the master area in charge of the main encoded video data is started, and the master divided video in charge is cut out based on the playback area value, and playback of the master divided video in charge of the main video is started. .
As described above, the divided main video can be reproduced in synchronization between the master reproduction terminal and all slave reproduction terminals.
また、本実施形態に係る映像分割再生システムに係る映像分割再生方法は、再生端末と配信サーバは広域ネットワークを介して接続され、配信サーバからは符号化映像データを再生端末へ配信し、再生端末はマスタ再生端末とスレーブ再生端末に分類し、スレーブ再生端末はマスタ再生端末の支配下に置かれ、マスタ再生端末とスレーブ再生端末は限られた範囲内のネットワークで接続し、マスタ再生端末が選択領域情報をスレーブ再生端末へ送信し、マスタ再生端末の再生時間にスレーブ再生端末の再生時間を合わせ、一画像を複数の再生端末に分割して同期して再生を行う方法であって、マスタ再生端末表示部にストリーム再生中の映像上から選択領域を変更し、マスタ再生端末は、指定時間毎に前記変更した選択領域の選択領域情報を全スレーブ再生端末へ送信し、マスタ再生端末と全スレーブ再生端末は、前記選択領域情報と再生領域情報を基に新たに再生領域値を作成し、今復号化している次のフレームから、前記選択領域情報と再生領域情報に基づいて担当するメイン符号化映像データの復号化を行い、さらに前記再生領域値を基に担当する分割映像を切り出し、メイン映像の担当する分割映像を再生する。
以上のことにより、マスタ再生端末と全スレーブ再生端末間で分割メイン映像を同期して再生することができる。
In addition, in the video division reproduction method according to the video division reproduction system according to the present embodiment, the reproduction terminal and the distribution server are connected via a wide area network, and the distribution server distributes encoded video data to the reproduction terminal. Is classified into a master playback terminal and a slave playback terminal, the slave playback terminal is under the control of the master playback terminal, the master playback terminal and the slave playback terminal are connected by a network within a limited range, and the master playback terminal selects A method of transmitting region information to a slave playback terminal, matching the playback time of the slave playback terminal with the playback time of the master playback terminal, dividing one image into a plurality of playback terminals, and performing playback synchronously. The selection area is changed from the video that is being stream-reproduced to the terminal display unit, and the master reproduction terminal displays the selection area information of the changed selection area for each specified time. The master playback terminal and all slave playback terminals create a new playback area value based on the selected area information and the playback area information, and from the next frame being decoded, the selected area is transmitted to the slave playback terminal. Based on the information and the reproduction area information, the main encoded video data in charge is decoded, and the divided video in charge is cut out based on the reproduction area value to reproduce the divided video in charge of the main video.
As described above, the divided main video can be reproduced in synchronization between the master reproduction terminal and all slave reproduction terminals.
また、本実施形態に係る映像分割再生システムに係る映像分割再生方法は、再生端末と配信サーバは広域ネットワークを介して接続され、配信サーバからは符号化映像データを再生端末へ配信し、再生端末はマスタ再生端末とスレーブ再生端末に分類し、スレーブ再生端末はマスタ再生端末の支配下に置かれ、マスタ再生端末とスレーブ再生端末は限られた範囲内のネットワークで接続し、マスタ再生端末が選択領域情報をスレーブ再生端末へ送信し、マスタ再生端末の再生時間にスレーブ再生端末の再生時間を合わせ、一画像を複数の再生端末に分割して同期して再生を行う方法であって、マスタ再生端末は、指定時間毎にその時の再生時間を確認し、マスタ再生端末は確認した再生時間を示す再生時間情報を全スレーブ再生端末に送信し、スレーブ再生端末は、受け取った再生時間情報が示す再生時間情報と比較する時のスレーブ再生端末の再生時間とを比較し、比較結果がマスタ再生端末と再生時間が同じならば、そのまま再生を続け、また、比較結果がマスタ再生端末より再生遅れの場合、遅れている時間分だけ早送りして再生し、また、比較結果がマスタ再生端末より再生が進んでいる場合、先に進んでいる時間分再生を停止する。
以上の事によりマスタ再生端末と全スレーブ再生端末間で分割メイン映像を同期して再生することができる。
In addition, in the video division reproduction method according to the video division reproduction system according to the present embodiment, the reproduction terminal and the distribution server are connected via a wide area network, and the distribution server distributes the encoded video data to the reproduction terminal. Is classified into a master playback terminal and a slave playback terminal, the slave playback terminal is under the control of the master playback terminal, the master playback terminal and the slave playback terminal are connected by a network within a limited range, and the master playback terminal selects A method of transmitting region information to a slave playback terminal, matching the playback time of the slave playback terminal with the playback time of the master playback terminal, dividing one image into a plurality of playback terminals, and performing playback synchronously. The terminal checks the playback time at each specified time, and the master playback terminal sends playback time information indicating the confirmed playback time to all slave playback terminals. The slave playback terminal compares the playback time of the slave playback terminal when compared with the playback time information indicated by the received playback time information, and if the comparison result is the same playback time as the master playback terminal, continues playback as it is, Also, if the comparison result is a playback delay from the master playback terminal, playback is fast-forwarded by the delayed time, and if the comparison result is playback from the master playback terminal, playback is performed for the time that has been advanced. To stop.
As described above, the divided main video can be reproduced in synchronization between the master reproduction terminal and all slave reproduction terminals.
なお、上述の配信サーバ20、マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70は、内部にコンピュータシステムを有している。そして、配信サーバ20、マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70の動作の過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータシステムが読み出して実行することによって、上記処理が行われる。ここでいう「コンピュータシステム」とは、CPU及び各種メモリやOS、周辺機器等のハードウェアを含むものである。
また、「コンピュータシステム」は、WWWシステムを利用している場合であれば、ホームページ提供環境(あるいは表示環境)も含むものとする。
The
Further, the “computer system” includes a homepage providing environment (or display environment) if a WWW system is used.
また、各ステップを実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、また、配信サーバ20、マスタ再生端末40、スレーブ再生端末50、スレーブ再生端末60、およびスレーブ再生端末70はこの機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより、検出対象物の形状情報の推定値を算出する処理を行ってもよい。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、フラッシュメモリ等の書き込み可能な不揮発性メモリ、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。
Further, a program for realizing each step is recorded on a computer-readable recording medium, and the
The “computer-readable recording medium” means a flexible disk, a magneto-optical disk, a ROM, a writable nonvolatile memory such as a flash memory, a portable medium such as a CD-ROM, a hard disk built in a computer system, etc. This is a storage device.
さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(例えばDRAM(Dynamic Random Access Memory))のように、一定時間プログラムを保持しているものも含むものとする。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)や電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。
また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムに既に記録されているプログラムとの組合せで実現できるもの、いわゆる差分ファイル(差分プログラム)であっても良い。
Further, the “computer-readable recording medium” means a volatile memory (for example, DRAM (Dynamic DRAM) in a computer system that becomes a server or a client when a program is transmitted through a network such as the Internet or a communication line such as a telephone line. Random Access Memory)), etc., which hold programs for a certain period of time.
The program may be transmitted from a computer system storing the program in a storage device or the like to another computer system via a transmission medium or by a transmission wave in the transmission medium. Here, the “transmission medium” for transmitting the program refers to a medium having a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line.
The program may be for realizing a part of the functions described above. Furthermore, what can implement | achieve the function mentioned above in combination with the program already recorded on the computer system, and what is called a difference file (difference program) may be sufficient.
20・・・配信サーバ、21・・・受信部、22・・・再生データ保存部、23・・・送信部、24・・・サーバ制御部、40・・・マスタ再生端末、41・・・再生要求部、42・・・同期再生制御部、43・・・送信部、44・・・受信部、45・・・復号部、46・・・表示部、47・・・マスタ記憶部、50・・・スレーブ再生端末、52・・・同期再生制御部、53・・・送信部、54・・・受信部、55・・・復号部、56・・・表示部、57・・・スレーブ記憶部、60・・・スレーブ再生端末、70・・・スレーブ再生端末
DESCRIPTION OF
Claims (7)
前記配信サーバが、
前記マルチ画面に表示するコンテンツ映像の符号化映像データと、前記マルチ画面を構成する前記マスタ再生端末と前記スレーブ再生端末の数である分割数とを、前記マスタ再生端末および前記スレーブ再生端末に送信するステップと、
前記マスタ再生端末が、
前記マルチ画面における前記スレーブ再生端末のディスプレイの画面の位置を前記スレーブ再生端末のそれぞれに対して割り当てられた固有の情報で表わすスレーブ再生端末識別子を、それぞれ対応する前記スレーブ再生端末に送信するステップと、
前記スレーブ再生端末が、
前記コンテンツ映像における一部の領域である選択領域を示す選択領域情報、前記スレーブ再生端末識別子および前記分割数に基づき、前記マルチ画面において当該スレーブ再生端末が表示を担当する領域を示すスレーブ再生領域情報を生成し、当該スレーブ再生領域情報および前記選択領域情報に基づき、前記符号化映像データのコンテンツ映像における選択領域のうち、当該スレーブ再生端末が表示を担当する領域を示すスレーブ再生領域値を算出するステップと、
前記マスタ再生端末が、
前記マスタディスプレイにおける前記マスタ再生端末のディスプレイの位置を示すマスタ再生端末識別子、前記選択領域情報および前記分割数に基づき、前記マルチ画面において当該マスタ再生端末が表示を担当する領域を示すマスタ再生領域情報を生成し、当該マスタ再生領域情報および前記選択領域情報に基づき、前記符号化映像データのコンテンツ映像における選択領域のうち、当該マスタ再生端末が表示を担当する領域を示すマスタ再生領域値を算出するステップと、
前記マスタ再生端末が、前記符号化映像データに基づき、前記マスタ再生領域値が示す領域のコンテンツ映像の一部を自身のディスプレイに表示するとともに、前記スレーブ再生端末が、前記マスタ再生端末の表示に同期して、前記符号化映像データに基づき、前記スレーブ再生領域値が示す領域のコンテンツ映像の一部を自身のディスプレイに表示するステップと、
を備えることを特徴とする映像分割再生方法。 Each comprising a delivery server, a master playback terminal, and at least one slave playback terminal that are communicably connected via a network, each comprising a display screen of the master playback terminal and a display screen of the slave playback terminal In a video split playback method in a video split playback system that displays video on a multi-screen,
The distribution server is
The encoded video data of the content video to be displayed on the multi-screen and the division number that is the number of the master playback terminal and the slave playback terminal constituting the multi-screen are transmitted to the master playback terminal and the slave playback terminal. And steps to
The master playback terminal is
Transmitting a slave playback terminal identifier representing the position of the display of the slave playback terminal in the multi-screen with unique information assigned to each of the slave playback terminals to the corresponding slave playback terminal; ,
The slave playback terminal is
Based on selection area information indicating a selection area that is a partial area in the content video, the slave playback terminal identifier, and the number of divisions, slave playback area information indicating an area that the slave playback terminal is responsible for display in the multi-screen Based on the slave playback area information and the selection area information, a slave playback area value indicating an area in which the slave playback terminal is responsible for display among the selection areas in the content video of the encoded video data is calculated. Steps,
The master playback terminal is
Master playback area information indicating an area that the master playback terminal is responsible for display on the multi-screen based on a master playback terminal identifier indicating the display position of the master playback terminal on the master display, the selection area information, and the number of divisions Based on the master reproduction area information and the selection area information, a master reproduction area value indicating an area in which the master reproduction terminal is responsible for display among the selection areas in the content video of the encoded video data is calculated. Steps,
The master playback terminal displays a part of the content video in the area indicated by the master playback area value on its display based on the encoded video data, and the slave playback terminal displays the master playback terminal. Synchronously, based on the encoded video data, displaying a part of the content video in the area indicated by the slave playback area value on its own display;
A video division reproduction method comprising:
前記マルチ画面に表示している前記コンテンツ映像の選択領域を示す第1選択領域情報を異なる第2選択領域情報に変更することを示す情報を入力すると、当該第2選択領域情報を前記スレーブ再生端末に送信するとともに、当該第2選択領域情報、前記マスタ再生端末識別子および前記分割数に基づき前記マスタ再生領域情報を生成し、当該マスタ再生領域情報および前記第2選択領域情報に基づき前記マスタ再生領域値を算出するステップと、
前記スレーブ再生端末が、
前記マスタ再生端末から前記第2選択領域情報を受信すると、当該第2選択領域情報、前記スレーブ再生端末識別子および前記分割数に基づき前記スレーブ再生領域情報を生成し、当該スレーブ再生領域情報および前記第2選択領域情報に基づき前記スレーブ再生領域値を算出するステップと、
を備えることを特徴とする請求項1に記載の映像分割再生方法。 The master playback terminal is
When information indicating that the first selection area information indicating the selection area of the content video displayed on the multi-screen is changed to different second selection area information is input, the second selection area information is converted into the slave playback terminal. And generating the master reproduction area information based on the second selection area information, the master reproduction terminal identifier, and the number of divisions, and generating the master reproduction area based on the master reproduction area information and the second selection area information. Calculating a value;
The slave playback terminal is
Upon receiving the second selection area information from the master reproduction terminal, the slave reproduction area information is generated based on the second selection area information, the slave reproduction terminal identifier, and the division number, and the slave reproduction area information and the first 2 calculating the slave playback area value based on the selected area information;
The video divided reproduction method according to claim 1, further comprising:
前記マスタ再生端末あるいは前記スレーブ再生端末は、
前記符号化映像データに基づき前記コンテンツ映像の一部を表示した場合、当該表示したコンテンツ映像の符号化映像データに対応する前記再生時間情報を送信するとともに、前記マスタ再生端末あるいは他の前記スレーブ再生端末から前記再生時間情報を受信した場合、前記受信した再生時間情報が示すタイミングに合わせるようにして各自の前記ディスプレイに前記コンテンツ映像を表示することを特徴とする請求項1あるいは2に記載の映像分割再生方法。 The encoded video data includes playback time information that represents the playback order of the content video by the playback time of the video,
The master playback terminal or the slave playback terminal is
When a part of the content video is displayed based on the encoded video data, the playback time information corresponding to the encoded video data of the displayed content video is transmitted, and the master playback terminal or other slave playback is transmitted. 3. The video according to claim 1, wherein, when the playback time information is received from a terminal, the content video is displayed on the respective display so as to match the timing indicated by the received playback time information. Split playback method.
前記ディスプレイに表示している前記コンテンツ映像の選択領域を示す第1選択領域情報を異なる第2選択領域情報に変更することを示す情報が入力されたか否かを判定し、前記第1選択領域情報を入力した時点から第1指定時間経過前に前記第2選択領域情報を入力した場合、前記第1選択領域情報を送信した時点から前記第1指定時間経過後に前記第2選択領域情報を前記スレーブ再生端末に送信し、
前記ディスプレイに表示している前記コンテンツ映像の選択領域を示す第1選択領域情報を異なる第2選択領域情報に変更することを示す情報が入力されたか否かを判定し、前記第1選択領域情報を入力した時点から前記第1指定時間よりも長い第2指定時間以上経過した場合、前記第1選択領域情報を送信した時点から前記第2指定時間経過後に前記第1選択領域情報を前記スレーブ再生端末に送信することを特徴とする請求項1から3のうちいずれか一項に記載の映像分割再生方法。 The master playback terminal is
It is determined whether information indicating that the first selection area information indicating the selection area of the content video displayed on the display is changed to different second selection area information is input, and the first selection area information When the second selected area information is input before the first designated time elapses after the input of the first selected area information, the slave selects the second selected area information after the first designated time elapses from the time when the first selected area information is transmitted. Send to playback device,
It is determined whether information indicating that the first selection area information indicating the selection area of the content video displayed on the display is changed to different second selection area information is input, and the first selection area information When the second specified time longer than the first specified time has elapsed from the time when the first selected area has been input, the slave reproduces the first selected area information after the second specified time has elapsed since the transmission of the first selected area information. The video division reproduction method according to claim 1, wherein the video division reproduction method is transmitted to a terminal.
前記配信サーバが、
コンテンツ映像の符号化映像データを前記メイン再生端末および前記サブ再生端末に送信するステップと、
前記メイン再生端末が、
前記コンテンツ映像における一部の領域である選択領域を示す選択領域情報を入力するステップと、
前記メイン再生端末が、
前記選択領域情報を前記サブ再生に送信するステップと、
前記メイン再生端末が、
前記符号化映像データに基づき、前記選択領域情報が示す領域のコンテンツ映像の一部を前記メインディスプレイに表示するとともに、
前記サブ再生端末が、
前記メイン再生端末の表示に同期して、前記符号化映像データに基づき、前記選択領域情報が示す領域のコンテンツ映像の一部を前記サブディスプレイに表示するステップと、
を備えることを特徴とする映像再生方法。 A video playback method in a video playback system comprising: a distribution server that is communicably connected via a network; a main playback terminal including a main display; and a sub playback terminal including a sub display having a screen size different from that of the main display. In
The distribution server is
Transmitting encoded video data of content video to the main playback terminal and the sub playback terminal;
The main playback terminal is
Inputting selection area information indicating a selection area that is a partial area in the content video;
The main playback terminal is
Transmitting the selected area information to the sub-playback;
The main playback terminal is
Based on the encoded video data, a part of the content video in the area indicated by the selection area information is displayed on the main display,
The sub-playback terminal is
In synchronization with the display of the main playback terminal, based on the encoded video data, displaying a part of the content video in the area indicated by the selection area information on the sub-display;
A video playback method comprising:
前記配信サーバは、
前記マルチ画面に表示するコンテンツ映像の符号化映像データと、前記マルチ画面を構成する前記マスタ再生端末と前記スレーブ再生端末の数である分割数とを、前記マスタ再生端末および前記スレーブ再生端末に送信する送信部を備え、
前記マスタ再生端末は、
前記マルチ画面における前記スレーブ再生端末のディスプレイの画面の位置を前記スレーブ再生端末のそれぞれに対して割り当てられた固有の情報で表わすスレーブ再生端末識別子を、それぞれ対応する前記スレーブ再生端末に送信する送信部と、
前記マスタディスプレイにおける前記マスタ再生端末のディスプレイの位置を示すマスタ再生端末識別子、前記コンテンツ映像における一部の領域である選択領域を示す選択領域情報および前記分割数に基づき、前記マルチ画面において当該マスタ再生端末が表示を担当する領域を示すマスタ再生領域情報を生成するとともに、当該マスタ再生領域情報および前記選択領域情報に基づき、前記符号化映像データのコンテンツ映像における選択領域のうち、当該マスタ再生端末が表示を担当する領域を示すマスタ再生領域値を算出し、前記符号化映像データに基づき、前記マスタ再生領域値が示す領域のコンテンツ映像の一部を自身のディスプレイに表示させるマスタ復号部と、を備え、
前記スレーブ再生端末は、
前記選択領域情報、前記スレーブ再生端末識別子および前記分割数に基づき、前記マルチ画面において当該スレーブ再生端末が表示を担当する領域を示すスレーブ再生領域情報を生成するとともに、当該スレーブ再生領域情報および前記選択領域情報に基づき、前記符号化映像データのコンテンツ映像における選択領域のうち、当該スレーブ再生端末が表示を担当する領域を示すスレーブ再生領域値を算出し、前記マスタ再生端末の表示に同期して、前記符号化映像データに基づき、前記スレーブ再生領域値が示す領域のコンテンツ映像の一部を自身のディスプレイに表示させるスレーブ復号部と、
を備えることを特徴とする映像分割再生システム。 Each comprising a delivery server, a master playback terminal, and at least one slave playback terminal that are communicably connected via a network, each comprising a display screen of the master playback terminal and a display screen of the slave playback terminal In a split video playback system that displays video on a multi-screen,
The distribution server
The encoded video data of the content video to be displayed on the multi-screen and the division number that is the number of the master playback terminal and the slave playback terminal constituting the multi-screen are transmitted to the master playback terminal and the slave playback terminal. A transmission unit
The master playback terminal is
Transmitters for transmitting, to the corresponding slave playback terminals, slave playback terminal identifiers representing the position of the display screen of the slave playback terminal on the multi-screen as unique information assigned to each of the slave playback terminals When,
Based on the master playback terminal identifier indicating the display position of the master playback terminal on the master display, selection area information indicating a selection area that is a partial area in the content video, and the number of divisions, the master playback on the multi-screen The master playback area information indicating the area in which the terminal is responsible for display is generated, and the master playback terminal of the selected area in the content video of the encoded video data is based on the master playback area information and the selection area information. A master decoding unit that calculates a master playback area value indicating an area in charge of display, and displays a part of the content video in the area indicated by the master playback area value on its display based on the encoded video data; Prepared,
The slave playback terminal
Based on the selection area information, the slave playback terminal identifier, and the number of divisions, the slave playback area information indicating the area that the slave playback terminal is responsible for display in the multi-screen is generated, and the slave playback area information and the selection Based on the region information, among the selected regions in the content video of the encoded video data, calculate a slave playback region value indicating the region that the slave playback terminal is responsible for display, and in synchronization with the display of the master playback terminal, Based on the encoded video data, a slave decoding unit that displays a part of the content video in the area indicated by the slave playback area value on its own display;
A video segmentation playback system comprising:
前記マルチ画面に表示するコンテンツ映像の符号化映像データと、前記コンテンツ映像における一部の領域である選択領域を示す選択領域情報と、前記マルチ画面を構成する前記再生端末の数である分割数と、前記マルチ画面における自再生端末のディスプレイの位置を自再生端末のそれぞれに対して割り当てられた固有の情報で表わす再生端末識別子を受信するステップ、
前記選択領域情報、前記再生端末識別子および前記分割数に基づき、前記マルチ画面において自再生端末が表示を担当する領域を示す再生領域情報を生成し、当該再生領域情報および前記選択領域情報に基づき、前記符号化映像データのコンテンツ映像における選択領域のうち、自再生端末が表示を担当する領域を示す再生領域値を算出するステップ、
前記符号化映像データに基づき、前記再生領域値が示す領域のコンテンツ映像の一部を、他の再生端末の表示に同期して、自身のディスプレイに表示するステップ、
を実行させるための映像分割再生プログラム。 A computer used in a video split playback system that includes a plurality of playback terminals that are communicably connected via a network, and that displays video on a multi-screen configured from a display screen of the playback terminal,
Encoded video data of content video to be displayed on the multi-screen, selection region information indicating a selection region that is a partial region in the content video, and a division number that is the number of the playback terminals constituting the multi-screen Receiving a playback terminal identifier representing the position of the display of the playback terminal on the multi-screen with unique information assigned to each of the playback terminals;
Based on the selection area information, the playback terminal identifier, and the number of divisions, the playback area information indicating the area in which the playback terminal is responsible for display in the multi-screen is generated, and based on the playback area information and the selection area information, Calculating a playback area value indicating an area in which the playback terminal is responsible for display among the selected areas in the content video of the encoded video data;
Based on the encoded video data, displaying a part of the content video in the region indicated by the playback region value on its own display in synchronization with the display of another playback terminal;
Split video playback program to execute.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011027089A JP5461454B2 (en) | 2011-02-10 | 2011-02-10 | Video division reproduction method, video reproduction method, video division reproduction system, and video division reproduction program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011027089A JP5461454B2 (en) | 2011-02-10 | 2011-02-10 | Video division reproduction method, video reproduction method, video division reproduction system, and video division reproduction program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012169739A true JP2012169739A (en) | 2012-09-06 |
JP5461454B2 JP5461454B2 (en) | 2014-04-02 |
Family
ID=46973487
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011027089A Active JP5461454B2 (en) | 2011-02-10 | 2011-02-10 | Video division reproduction method, video reproduction method, video division reproduction system, and video division reproduction program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5461454B2 (en) |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014142467A (en) * | 2013-01-23 | 2014-08-07 | Canon Inc | Image output device and control method thereof, system, program, and storage medium |
JP2015022592A (en) * | 2013-07-19 | 2015-02-02 | 株式会社リコー | Set output system, terminal device and output program |
JP2016045445A (en) * | 2014-08-26 | 2016-04-04 | 三菱電機株式会社 | Multi screen display device |
JP2016045452A (en) * | 2014-08-26 | 2016-04-04 | 三菱電機株式会社 | Multi screen display device |
JP2016096496A (en) * | 2014-11-17 | 2016-05-26 | 株式会社アイ・オー・データ機器 | Video processing device |
WO2016147373A1 (en) * | 2015-03-19 | 2016-09-22 | 富士通株式会社 | Display method, information processing device, display control device, and program |
JP6081037B1 (en) * | 2016-03-29 | 2017-02-15 | 三菱電機株式会社 | Image receiving and reproducing apparatus, image generating and transmitting apparatus, display system, image receiving and reproducing method, image generating and transmitting method, image receiving and reproducing program, and image generating and transmitting program |
JP2017173763A (en) * | 2016-03-25 | 2017-09-28 | シャープ株式会社 | Image providing device, image display system, image providing method, and program |
KR101882016B1 (en) * | 2017-10-13 | 2018-07-25 | 주식회사 제노시스 | Video wall system control device using a plurality of decoder devices |
KR101969081B1 (en) * | 2017-11-13 | 2019-04-16 | 주식회사 카이 | Image apparatus and synchronization method of image apparatus |
WO2019093818A1 (en) * | 2017-11-13 | 2019-05-16 | 주식회사 카이 | Image device and operation method of image device |
JP2019109694A (en) * | 2017-12-18 | 2019-07-04 | 日本放送協会 | Terminal device |
US10674172B2 (en) | 2016-04-19 | 2020-06-02 | Mitsubishi Electric Corporation | Image processing apparatus, image processing method, and computer-readable recording medium |
JP2021090086A (en) * | 2019-12-02 | 2021-06-10 | フォレストデジタル株式会社 | Image system, program, and computer-readable storage medium |
CN114938463A (en) * | 2022-06-22 | 2022-08-23 | 深圳市泛联信息科技有限公司 | Video display system and method |
JP2023038156A (en) * | 2021-09-06 | 2023-03-16 | 緯創資通股▲ふん▼有限公司 | Image processing device and display control method for use in display wall system |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000020042A (en) * | 1998-07-01 | 2000-01-21 | Nec Corp | Video display system |
JP2003009101A (en) * | 2001-06-26 | 2003-01-10 | Nec Viewtechnology Ltd | Multi-screen reproducing equipment and method therefor |
JP2003153128A (en) * | 2001-11-14 | 2003-05-23 | Olympus Optical Co Ltd | Multidisplay device |
JP2003280624A (en) * | 2002-03-27 | 2003-10-02 | Sony Corp | Multidisplay device, image display device, image displaying method and computer program |
JP2008096756A (en) * | 2006-10-12 | 2008-04-24 | Sharp Corp | Multi-screen display system and display method thereof |
-
2011
- 2011-02-10 JP JP2011027089A patent/JP5461454B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000020042A (en) * | 1998-07-01 | 2000-01-21 | Nec Corp | Video display system |
JP2003009101A (en) * | 2001-06-26 | 2003-01-10 | Nec Viewtechnology Ltd | Multi-screen reproducing equipment and method therefor |
JP2003153128A (en) * | 2001-11-14 | 2003-05-23 | Olympus Optical Co Ltd | Multidisplay device |
JP2003280624A (en) * | 2002-03-27 | 2003-10-02 | Sony Corp | Multidisplay device, image display device, image displaying method and computer program |
JP2008096756A (en) * | 2006-10-12 | 2008-04-24 | Sharp Corp | Multi-screen display system and display method thereof |
Cited By (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014142467A (en) * | 2013-01-23 | 2014-08-07 | Canon Inc | Image output device and control method thereof, system, program, and storage medium |
JP2015022592A (en) * | 2013-07-19 | 2015-02-02 | 株式会社リコー | Set output system, terminal device and output program |
JP2016045445A (en) * | 2014-08-26 | 2016-04-04 | 三菱電機株式会社 | Multi screen display device |
JP2016045452A (en) * | 2014-08-26 | 2016-04-04 | 三菱電機株式会社 | Multi screen display device |
JP2016096496A (en) * | 2014-11-17 | 2016-05-26 | 株式会社アイ・オー・データ機器 | Video processing device |
JPWO2016147373A1 (en) * | 2015-03-19 | 2017-12-21 | 富士通株式会社 | Display method, information processing apparatus, display control apparatus, and program |
WO2016147373A1 (en) * | 2015-03-19 | 2016-09-22 | 富士通株式会社 | Display method, information processing device, display control device, and program |
US10203930B2 (en) | 2015-03-19 | 2019-02-12 | Fujitsu Limited | Display method and display control apparatus |
JP2017173763A (en) * | 2016-03-25 | 2017-09-28 | シャープ株式会社 | Image providing device, image display system, image providing method, and program |
WO2017163805A1 (en) * | 2016-03-25 | 2017-09-28 | シャープ株式会社 | Image providing apparatus, image display system, image providing method, and program |
CN108886633A (en) * | 2016-03-29 | 2018-11-23 | 三菱电机株式会社 | Image receives transcriber, image generates sending device, display system, image reception/reproduction method, image generate sending method, image receives reproduction program and image generates and sends program |
US10390076B2 (en) | 2016-03-29 | 2019-08-20 | Mitsubishi Electric Corporation | Image receiving/reproducing device, image generating/transmitting device, display system, image receiving/reproducing method, image generating/transmitting method, and computer readable medium |
WO2017168582A1 (en) * | 2016-03-29 | 2017-10-05 | 三菱電機株式会社 | Image reception and reproduction device, image generation and transmission device, display system, image reception and reproduction method, image generation and transmission method, image reception and reproduction program, and image generation and transmission program |
JP6081037B1 (en) * | 2016-03-29 | 2017-02-15 | 三菱電機株式会社 | Image receiving and reproducing apparatus, image generating and transmitting apparatus, display system, image receiving and reproducing method, image generating and transmitting method, image receiving and reproducing program, and image generating and transmitting program |
US10674172B2 (en) | 2016-04-19 | 2020-06-02 | Mitsubishi Electric Corporation | Image processing apparatus, image processing method, and computer-readable recording medium |
KR101882016B1 (en) * | 2017-10-13 | 2018-07-25 | 주식회사 제노시스 | Video wall system control device using a plurality of decoder devices |
WO2019093818A1 (en) * | 2017-11-13 | 2019-05-16 | 주식회사 카이 | Image device and operation method of image device |
KR101961841B1 (en) * | 2017-11-13 | 2019-07-17 | 주식회사 카이 | Image apparatus and operating method of image apparatus |
CN109788368A (en) * | 2017-11-13 | 2019-05-21 | 株式会社Kai | The method of operating of image documentation equipment and image documentation equipment |
KR101969081B1 (en) * | 2017-11-13 | 2019-04-16 | 주식회사 카이 | Image apparatus and synchronization method of image apparatus |
JP2019109694A (en) * | 2017-12-18 | 2019-07-04 | 日本放送協会 | Terminal device |
JP7075202B2 (en) | 2017-12-18 | 2022-05-25 | 日本放送協会 | Terminal device |
JP2021090086A (en) * | 2019-12-02 | 2021-06-10 | フォレストデジタル株式会社 | Image system, program, and computer-readable storage medium |
JP7273410B2 (en) | 2019-12-02 | 2023-05-15 | フォレストデジタル株式会社 | Video system, program, and computer-readable storage medium |
JP2023038156A (en) * | 2021-09-06 | 2023-03-16 | 緯創資通股▲ふん▼有限公司 | Image processing device and display control method for use in display wall system |
JP7289390B2 (en) | 2021-09-06 | 2023-06-09 | 緯創資通股▲ふん▼有限公司 | Image processing device for display wall system and display control method |
CN114938463A (en) * | 2022-06-22 | 2022-08-23 | 深圳市泛联信息科技有限公司 | Video display system and method |
Also Published As
Publication number | Publication date |
---|---|
JP5461454B2 (en) | 2014-04-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5461454B2 (en) | Video division reproduction method, video reproduction method, video division reproduction system, and video division reproduction program | |
US20240214540A1 (en) | Method for transmitting panoramic videos, terminal and server | |
JP6415468B2 (en) | Distribution of spatially segmented content | |
US11792444B2 (en) | Dynamic viewpoints of live event | |
CN115379244B (en) | 360-degree video playback space enhancement self-adaptive bit rate direct-play streaming method and device | |
KR101326739B1 (en) | Information processing system and information processing device | |
JP6515215B2 (en) | Movie playback method and apparatus | |
WO2019214371A1 (en) | Image display method and generating method, device, storage medium and electronic device | |
JP5916244B2 (en) | Video playback system | |
US20150082353A1 (en) | Method and apparatus for managing a presentation of media content | |
US9538140B2 (en) | Social television service | |
CN112188219B (en) | Video receiving method and device and video transmitting method and device | |
KR102542070B1 (en) | System and method for providing virtual reality contents based on iptv network | |
JP5940999B2 (en) | VIDEO REPRODUCTION DEVICE, VIDEO DISTRIBUTION DEVICE, VIDEO REPRODUCTION METHOD, VIDEO DISTRIBUTION METHOD, AND PROGRAM | |
EP3635958B1 (en) | Image processing device and system | |
KR20200141203A (en) | Apparatus and method for providing video contents | |
JP6623905B2 (en) | Server device, information processing method and program | |
JP6224522B2 (en) | Video distribution device, video distribution method, and video distribution program | |
JP6970143B2 (en) | Distribution server, distribution method and program | |
JP2021069100A (en) | Delivery system, program, and computer-readable storage medium | |
JP2022009636A (en) | Distribution server, distribution method, and program | |
JP2022066944A (en) | Information processing device, computer program, and information processing system | |
JP2011109175A (en) | Multi-screen playback method, multi-screen playback device, and program | |
JP5860862B2 (en) | VIDEO DISPLAY SYSTEM, VIDEO DISPLAY DEVICE, ITS CONTROL METHOD, AND PROGRAM | |
JP2021192470A (en) | Content distribution system and content distribution method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130123 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20130605 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20130726 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130918 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131015 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131203 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140107 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140115 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5461454 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |