JP2010192971A - Selected-area encoded video data distributing method, encoded video data decoding method, distribution server, reproduction terminal, program, and recording medium - Google Patents

Selected-area encoded video data distributing method, encoded video data decoding method, distribution server, reproduction terminal, program, and recording medium Download PDF

Info

Publication number
JP2010192971A
JP2010192971A JP2009032492A JP2009032492A JP2010192971A JP 2010192971 A JP2010192971 A JP 2010192971A JP 2009032492 A JP2009032492 A JP 2009032492A JP 2009032492 A JP2009032492 A JP 2009032492A JP 2010192971 A JP2010192971 A JP 2010192971A
Authority
JP
Japan
Prior art keywords
video data
encoded video
unit
distribution
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009032492A
Other languages
Japanese (ja)
Inventor
Yoshie Yamaguchi
好江 山口
Hideaki Kimata
英明 木全
Katsuhiko Fukazawa
勝彦 深澤
Original Assignee
Nippon Telegr & Teleph Corp <Ntt>
日本電信電話株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegr & Teleph Corp <Ntt>, 日本電信電話株式会社 filed Critical Nippon Telegr & Teleph Corp <Ntt>
Priority to JP2009032492A priority Critical patent/JP2010192971A/en
Publication of JP2010192971A publication Critical patent/JP2010192971A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To synchronously reproduce a panoramic video and a selected area which are reproduced on a streaming basis. <P>SOLUTION: Contents of a distribution request received from a reproduction terminal are confirmed. When the contents of the distribution request from the reproduction terminal show a request to distribute selected-area encoded video data for displaying the area selected from the panoramic video reproduced by the reproduction terminal on the streaming basis, the selected-area encoded video data requested by the reproduction terminal to be distributed are retrieved from an encoded video data storage unit, and the selected-area encoded video data retrieved from the encoded video data storage unit are read out from the same reproduction time as the panoramic encoded video data being distributed to the reproduction terminal of the panoramic video having the selected area extracted and put together with the panoramic encoded video data being distributed to be distributed to the reproduction terminal on the streaming basis. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、選択領域符号化映像データ配信方法、符号化映像データ復号方法、配信サーバ、再生端末、プログラムおよび記録媒体に係り、特に、ストリーム再生中のパノラマ映像(複数カメラ合成符号化映像データ)から選択した領域(以下、選択領域という)をストリーム再生中のパノラマ映像と同期して再生する技術に関する。   The present invention relates to a selection area encoded video data distribution method, an encoded video data decoding method, a distribution server, a playback terminal, a program, and a recording medium, and in particular, panoramic video during stream playback (multi-camera composite encoded video data). The present invention relates to a technique for reproducing an area selected from the above (hereinafter referred to as a selected area) in synchronization with a panoramic video being stream reproduced.
従来、ストリーム再生中のパノラマ映像(複数カメラ合成符号化映像データ)から選択した領域を表示する場合、以下の方法で行っていた。
(1)選択領域に必要な映像情報と一緒に、領域を選択した時の再生時間を配信サーバに送信し、その時間から選択領域符号化映像データを配信サーバから配信している。
(2)受信した各映像は、それぞれ時刻が違うため、バッファリングを行って同期を取って再生していた。
なお、前述した技術については、例えば、下記特許文献1に記載されている。
Conventionally, when displaying an area selected from panoramic video (multi-camera composite encoded video data) during stream playback, the following method is used.
(1) Along with the video information necessary for the selected area, the playback time when the area is selected is transmitted to the distribution server, and the selected area encoded video data is distributed from the distribution server from that time.
(2) Since each received video has a different time, it was buffered and played back in synchronization.
In addition, about the technique mentioned above, it describes in the following patent document 1, for example.
特開2005−223821号公報Japanese Patent Application Laid-Open No. 2005-223821
しかしながら、前述した従来の方法は、以下のような問題点があった。
(1)パノラマ映像は継続してストリーム再生をしているため、選択領域の映像は、パノラマ映像再生より数フレーム遅れた再生となる。
(2)バッファが溢れた場合、同期が取れない。バッファ溢れが起こらないようにするためには、大きいサイズのバッファが必要になる。
本発明は、前記従来技術の問題点を解決するためになされたものであり、本発明の目的は、選択領域符号化映像データ配信方法および配信サーバにおいて、ストリーム再生中のパノラマ映像と選択領域とを同期して再生することにある。
また、本発明の他の目的は、前述の選択領域符号化映像データ配信方法で配信された符号化データを復号する符号化映像データ復号方法と再生端末を提供することにある。
また、本発明の他の目的は、前述の選択領域符号化映像データ配信方法をコンピュータに実行させるプログラムと、当該プログラムが記述された記録媒体を提供することにある。
本発明の前記ならびにその他の目的と新規な特徴は、本明細書の記述及び添付図面によって明らかにする。
However, the conventional method described above has the following problems.
(1) Since the panoramic video is continuously played back as a stream, the video in the selected area is played back several frames later than the panoramic video.
(2) If the buffer overflows, synchronization cannot be achieved. To avoid buffer overflow, a large buffer is required.
The present invention has been made to solve the above-described problems of the prior art, and an object of the present invention is to provide a selection area encoded video data distribution method and a distribution server, and a panoramic image and a selection area during stream reproduction. Is to synchronize and play.
Another object of the present invention is to provide an encoded video data decoding method and a playback terminal for decoding encoded data distributed by the above-described selected region encoded video data distribution method.
Another object of the present invention is to provide a program for causing a computer to execute the above-described selected region encoded video data distribution method and a recording medium in which the program is described.
The above and other objects and novel features of the present invention will become apparent from the description of this specification and the accompanying drawings.
本願において開示される発明のうち、代表的なものの概要を簡単に説明すれば、下記の通りである。
(1)本発明は、再生端末からの配信要求を受信する受信部と、前記再生端末に前記配信要求のあった符号化映像データを送信する送信部と、パノラマ符号化映像データと選択領域符号化映像データを格納している符号化映像データ格納部とを備える配信サーバにおける選択領域符号化映像データ配信方法であって、前記再生端末から受信した配信要求の内容を確認するステップ1と、前記ステップ1において、前記再生端末からの配信要求内容が、前記再生端末において現在ストリーム再生中のパノラマ映像から選択した領域を表示する選択領域符号化映像データの配信要求である場合に、前記再生端末から配信要求のあった選択領域符号化映像データを前記符号化映像データ格納部から検索し、さらに、前記符号化映像データ格納部から検索した選択領域符号化映像データを、前記選択領域を抽出したパノラマ映像の前記再生端末に現在配信中のパノラマ符号化映像データと同じ再生時間から読み出し、現在配信中のパノラマ符号化映像データと同一映像にするステップ2と、前記送信部から前記再生端末に対して、同一映像である現在配信中のパノラマ符号化映像データと前記ステップ2で抽出した選択領域符号化映像データとをストリーム配信するステップ3とを有する。
(2)また、本発明は、前述の(1)の選択領域符号化映像データ配信方法を実行する配信サーバである。
Of the inventions disclosed in this application, the outline of typical ones will be briefly described as follows.
(1) The present invention relates to a receiving unit that receives a distribution request from a playback terminal, a transmission unit that transmits the encoded video data requested to be distributed to the playback terminal, panoramic encoded video data, and a selection area code. A method of distributing selected area encoded video data in a distribution server comprising an encoded video data storage unit storing encoded video data, the step 1 confirming the content of the distribution request received from the playback terminal; In step 1, when the content of the distribution request from the playback terminal is a distribution request of selected area encoded video data that displays an area selected from the panoramic video currently being streamed at the playback terminal, The selected area encoded video data requested to be distributed is retrieved from the encoded video data storage unit, and further from the encoded video data storage unit The retrieved selected area encoded video data is read from the same playback time as the panorama encoded video data currently being distributed to the playback terminal of the panoramic video from which the selected area has been extracted, and is the same as the panorama encoded video data currently being distributed Step 2 for converting to video, and step of streaming distribution of the panorama encoded video data currently being distributed and the selected area encoded video data extracted in Step 2 from the transmission unit to the playback terminal. 3.
(2) Moreover, this invention is a delivery server which performs the selection area | region encoding video data delivery method of above-mentioned (1).
(3)また、本発明は、映像を表示する表示部と、配信サーバへ配信要求を行う再生要求部と、前記配信要求を前記配信サーバへ送信する送信部と、前記配信サーバから符号化映像データを受信する受信部とを有する再生端末における符号化映像データ復号方法であって、前記配信サーバは、パノラマ符号化映像データと選択領域符号化映像データとを同一映像で配信し、前記同一映像で受信した符号化映像データを、振り分け部でそれぞれパノラマ符号化映像データと選択領域符号化映像データとに振り分け、前記振り分けた符号化映像データを、それぞれ2つの復号部で復号する。
(4)映像を表示する表示部と、配信サーバへ配信要求を行う再生要求部と、前記配信要求を前記配信サーバへ送信する送信部と、前記配信サーバから符号化映像データを受信する受信部とを有する再生端末における符号化映像データ復号方法であって、前記配信サーバは、パノラマ符号化映像データと選択領域符号化映像データとを同一映像で配信し、前記同一映像で受信した符号化映像データを、振り分け部でそれぞれパノラマ符号化映像データと選択領域符号化映像データとに振り分け、前記振り分けた符号化映像データを、1つの復号部で復号する。
(5)また、本発明は、前述の(3)の選択領域符号化映像データ配信方法を実行する再生端末である。
(6)また、本発明は、前述の(4)の選択領域符号化映像データ配信方法を実行する再生端末である。
(7)また、本発明は、前述の(1)の選択領域符号化映像データ配信方法を、コンピュータに実行させるためのプログラムである。
(8)また、本発明は、前述の(7)のプログラムを記録したコンピュータ読み取り可能な記録媒体である。
(3) Further, the present invention provides a display unit that displays video, a reproduction request unit that makes a distribution request to the distribution server, a transmission unit that transmits the distribution request to the distribution server, and encoded video from the distribution server. An encoded video data decoding method in a playback terminal having a receiving unit for receiving data, wherein the distribution server distributes panorama encoded video data and selected area encoded video data in the same video, and the same video The distribution unit distributes the encoded video data received in step 1 into panorama encoded video data and selection area encoded video data, respectively, and each of the distributed encoded video data is decoded by two decoding units.
(4) A display unit that displays video, a reproduction request unit that makes a distribution request to the distribution server, a transmission unit that transmits the distribution request to the distribution server, and a reception unit that receives encoded video data from the distribution server Encoded video data decoding method in a playback terminal, wherein the distribution server distributes panorama encoded video data and selected area encoded video data in the same video, and receives the encoded video received in the same video The distribution unit distributes the data into panorama encoded video data and selection area encoded video data, respectively, and the distributed encoded video data is decoded by one decoding unit.
(5) Further, the present invention is a playback terminal that executes the selection area encoded video data distribution method of (3) described above.
(6) Further, the present invention is a playback terminal for executing the selection area encoded video data distribution method of (4) described above.
(7) Moreover, this invention is a program for making a computer perform the selection area | region encoding video data delivery method of above-mentioned (1).
(8) Further, the present invention is a computer-readable recording medium on which the program (7) is recorded.
本願において開示される発明のうち代表的なものによって得られる効果を簡単に説明すれば、下記の通りである。
本発明によれば、パノラマ符号化映像データと選択領域符号化映像データを同一映像にして、パノラマ符号化映像データと選択領域符号化映像データを1つのストリームとして配信するようにしたので、ストリーム再生中のパノラマ映像と選択領域とを同期して再生することが可能となる。
The effects obtained by the representative ones of the inventions disclosed in the present application will be briefly described as follows.
According to the present invention, the panorama encoded video data and the selected area encoded video data are made the same video, and the panorama encoded video data and the selected area encoded video data are distributed as one stream. It is possible to reproduce the panoramic video in the middle and the selected area in synchronization.
本発明の実施例の配信サーバが適用される映像配信システムの一例の概略構成と、本発明の実施例の選択領域符号化映像データ配信方法を説明するためのブロック図である。It is a block diagram for demonstrating the schematic structure of an example of the video delivery system with which the delivery server of the Example of this invention is applied, and the selection area encoding video data delivery method of the Example of this invention. 本発明の実施例の配信サーバが適用される映像配信システムの他の例の概略構成と、本発明の実施例の選択領域符号化映像データ配信方法を説明するためのブロック図である。It is a block diagram for demonstrating the schematic structure of the other example of the video delivery system with which the delivery server of the Example of this invention is applied, and the selection area encoding video data delivery method of the Example of this invention. 図1に示す映像配信システムの符号化映像データ配信方法の処理手順を示すフローチャートである。It is a flowchart which shows the process sequence of the encoding video data delivery method of the video delivery system shown in FIG. 図2に示す映像配信システムの符号化映像データ配信方法の処理手順を示すフローチャートである。It is a flowchart which shows the process sequence of the encoding video data delivery method of the video delivery system shown in FIG. 本発明の実施例の選択領域符号化映像データの配信方法を説明するための図である。It is a figure for demonstrating the delivery method of the selection area | region encoding video data of the Example of this invention.
以下、図面を参照して本発明の実施例を詳細に説明する。
なお、実施例を説明するための全図において、同一機能を有するものは同一符号を付け、その繰り返しの説明は省略する。
図1は、本発明の実施例の配信サーバが適用される映像配信システムの一例の概略構成と、本発明の実施例の選択領域符号化映像データ配信方法を説明するためのブロック図である。同図において、10は符号化映像データを蓄積、ストリーム配信する配信サーバ、20は配信サーバに符号化映像データの配信要求と符号化映像デーを再生をする再生端末、30は配信サーバ10と再生端末20を接続するネットワークである。
配信サーバ10は、再生端末20からの配信要求を受信する受信部11と、符号化映像データを再生端末20へ配信する送信部12と、配信要求内容の判断、符号化映像データの検索と読み出し制御を行う要求判断部13と、パノラマ符号化映像データと選択領域符号化映像データを格納している符号化映像データ格納部14とを備えている。
再生端末20は、視聴したい映像の配信要求を行う再生要求部21と、配信サーバ10に配信要求を送信する送信部22と、配信サーバ10から符号化映像データを受信する受信部23と、受信した符号化映像データをパノラマ符号化映像データと選択領域符号化映像データとに分ける振り分け部24と、パノラマ符号化映像データと選択領域符号化映像データを復号する復号部25と、復号された映像を再生する表示部27とを備えている。
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
In all the drawings for explaining the embodiments, parts having the same functions are given the same reference numerals, and repeated explanation thereof is omitted.
FIG. 1 is a block diagram for explaining a schematic configuration of an example of a video distribution system to which a distribution server according to an embodiment of the present invention is applied and a selection area encoded video data distribution method according to an embodiment of the present invention. In the figure, 10 is a distribution server that stores and streamed encoded video data, 20 is a reproduction terminal that reproduces the distribution request of encoded video data and encoded video data to the distribution server, and 30 is a reproduction server and reproduction. A network to which the terminal 20 is connected.
The distribution server 10 includes a receiving unit 11 that receives a distribution request from the reproduction terminal 20, a transmission unit 12 that distributes encoded video data to the reproduction terminal 20, determination of distribution request contents, and search and readout of encoded video data. A request determination unit 13 that performs control, and an encoded video data storage unit 14 that stores panorama encoded video data and selected area encoded video data are provided.
The reproduction terminal 20 includes a reproduction request unit 21 that makes a distribution request for video to be viewed, a transmission unit 22 that transmits a distribution request to the distribution server 10, a reception unit 23 that receives encoded video data from the distribution server 10, and a reception A distribution unit 24 that divides the encoded video data into panorama encoded video data and selection region encoded video data, a decoding unit 25 that decodes the panorama encoded video data and the selection region encoded video data, and a decoded video Is displayed.
ユーザは、視聴したいパノラマ映像配信要求を配信要求信号51で、再生端末20の再生要求部21から送信部22を介して配信サーバ10ヘ送信する。
配信サーバ10は、受信部11で配信要求信号51を受信し、受信部11は、受信した配信要求信号51を要求判断部13へ送信する。
要求判断部13は、受信した配信要求信号51の配信要求内容を確認する。この場合、パノラマ映像配信要求と判断し、要求判断部13は、パノラマ読み出し信号52を符号化映像データ格納部14に送信し、配信要求のあったパノラマ符号化映像データを、符号化映像データ格納部14から検索、読み出し、映像データ配信信号54で、検索、読み出したパノラマ符号化映像データを送信部12に送信する。
送信部12は、パノラマ符号化映像データを、映像データ配信信号54で再生端末20ヘストリーム配信する。
再生端末20は、受信部23で映像データ配信信号54を受信し、受信部23は、映像データ配信信号54を振り分け部24に送信する。振り分け部24は、受信した映像データ配信信号54を確認する。この場合、パノラマ符号化映像データのみと判断し、パノラマ符号化映像データをパノラマ映像信号55で復号部25に送信する。復号部25は、パノラマ符号化映像データを復号し、復号したパノラマ映像をパノラマ映像信号55で表示部27に送信する。表示部27は、パノラマ映像をストリーム再生する。
The user transmits a panoramic video distribution request to be viewed with a distribution request signal 51 from the reproduction request unit 21 of the reproduction terminal 20 to the distribution server 10 via the transmission unit 22.
The distribution server 10 receives the distribution request signal 51 at the reception unit 11, and the reception unit 11 transmits the received distribution request signal 51 to the request determination unit 13.
The request determination unit 13 confirms the distribution request content of the received distribution request signal 51. In this case, it is determined that the request is a panoramic video distribution request, and the request determination unit 13 transmits a panorama read signal 52 to the encoded video data storage unit 14 and stores the panoramic encoded video data requested for distribution in the encoded video data storage. The searched and read panorama encoded video data is transmitted to the transmission unit 12 using the video data distribution signal 54 searched and read from the unit 14.
The transmission unit 12 distributes the panorama encoded video data to the playback terminal 20 using the video data distribution signal 54.
The playback terminal 20 receives the video data distribution signal 54 at the reception unit 23, and the reception unit 23 transmits the video data distribution signal 54 to the distribution unit 24. The distribution unit 24 confirms the received video data distribution signal 54. In this case, it is determined that only the panorama encoded video data is present, and the panorama encoded video data is transmitted to the decoding unit 25 as a panoramic video signal 55. The decoding unit 25 decodes the panorama encoded video data and transmits the decoded panoramic video to the display unit 27 as a panoramic video signal 55. The display unit 27 plays a panoramic video stream.
さらに、ユーザが、現在ストリーム再生中のパノラマ映像から領域を選択し、配信要求信号51で再生端末20の再生要求部21から送信部22を介して選択した領域を表示するために必要な情報である選択領域映像配信要求を配信サーバ10ヘ送信する。
配信サーバ10は、受信部11で配信要求信号51を受信し、受信部11は受信した配信要求信号51を要求判断部13へ送信する。
要求判断部13は、受信した配信要求信号51の配信要求内容を確認する。この場合、選択領域映像の配信要求と判断し、要求判断部13は、選択領域読み出し信号53を符号化映像データ格納部14に送信し、配信要求のあった選択領域符号化映像データを、符号化映像データ格納部14から検索し、さらに、符号化映像データ格納部14から検索した選択領域符号化映像データを、選択領域を抽出した現在ストリーム再生中(配信中)のパノラマ映像と同じ再生時間から読み出し、現在配信中の選択領域を抽出したパノラマ符号化映像データと選択領域符号化映像データを、同一映像にして映像データ配信信号54で送信部12に送信する。
送信部12は、映像データ配信信号54で、同一映像であるパノラマ符号化映像データと選択領域符号化映像データを再生端末20ヘストリーム配信する。
同一映像とは、現在配信中の選択領域を抽出したパノラマ符号化映像データと選択領域符号化映像データの2つを1つの符号化映像データにしたものである。
Further, information necessary for the user to select an area from the panoramic video currently being stream-reproduced and display the area selected from the reproduction request unit 21 of the reproduction terminal 20 via the transmission unit 22 by the distribution request signal 51. A certain area video distribution request is transmitted to the distribution server 10.
The distribution server 10 receives the distribution request signal 51 at the reception unit 11, and the reception unit 11 transmits the received distribution request signal 51 to the request determination unit 13.
The request determination unit 13 confirms the distribution request content of the received distribution request signal 51. In this case, it is determined that the selected area video is requested to be distributed, and the request determination unit 13 transmits the selected area read signal 53 to the encoded video data storage unit 14, and the selected area encoded video data requested for distribution is encoded. The same playback time as the panoramic video currently being played (distributed) from which the selected area encoded video data searched from the encoded video data storage unit 14 and further searched from the encoded video data storage unit 14 is extracted. The panorama encoded video data and the selected area encoded video data extracted from the selected area currently being distributed are converted into the same video and transmitted to the transmitting unit 12 by the video data distribution signal 54.
The transmission unit 12 stream-distributes the panorama encoded video data and the selected area encoded video data, which are the same video, to the playback terminal 20 using the video data distribution signal 54.
The same video is a single encoded video data obtained by extracting panorama encoded video data from which a currently selected selection area is extracted and selected area encoded video data.
再生端末20は、受信部23で映像データ配信信号54を受信し、受信部23は、映像データ配信信号54を振り分け部24に送信する。
振り分け部24は、受信した映像データ配信信号54を確認する。この場合、パノラマ符号化映像データと選択領域符号化映像データの両データを受信したと判断し、パノラマ符号化映像データと選択領域符号化映像データに振り分ける。さらに、パノラマ符号化映像データをパノラマ映像信号55で復号部25に送信し、また、選択領域符号化映像データを選択領域映像信号56で復号部25に送信する。
復号部25は、パノラマ映像信号55で受信したパノラマ符号化映像データと、選択領域映像信号56で受信した選択領域符号化映像データをそれぞれに復号する。さらに、復号したパノラマ映像をパノラマ映像信号55で復号部25から表示部27に送信し、また、復号した選択領域符号化映像を選択領域映像信号56で復号部25から表示部27に送信する。
表示部27は、パノラマ映像と選択領域映像の2映像を同じ再生時刻からストリーム再生を開始する。
The playback terminal 20 receives the video data distribution signal 54 at the reception unit 23, and the reception unit 23 transmits the video data distribution signal 54 to the distribution unit 24.
The distribution unit 24 confirms the received video data distribution signal 54. In this case, it is determined that both the panorama encoded video data and the selection area encoded video data have been received, and the data is distributed to the panorama encoded video data and the selection area encoded video data. Further, the panorama encoded video data is transmitted to the decoding unit 25 by the panoramic video signal 55, and the selection area encoded video data is transmitted to the decoding unit 25 by the selection area video signal 56.
The decoding unit 25 decodes the panorama encoded video data received by the panoramic video signal 55 and the selected area encoded video data received by the selection area video signal 56, respectively. Further, the decoded panoramic video is transmitted as a panoramic video signal 55 from the decoding unit 25 to the display unit 27, and the decoded selected area encoded video is transmitted as a selected area video signal 56 from the decoding unit 25 to the display unit 27.
The display unit 27 starts the stream playback of the two videos of the panoramic video and the selection area video from the same playback time.
図3は、図1に示す映像配信システムの選択領域符号化映像データ配信方法の処理手順を示すフローチャートである。
ステップ101で、ユーザは、視聴したいパノラマ映像配信要求を、再生端末20の再生要求部21から、配信要求信号51で送信部22に送信する。
ステップ102で、送信部22からパノラマ映像配信要求を、配信要求信号51で配信サーバ10ヘ送信する。
ステップ103で、配信サーバ10は、受信部11で配信要求信号51を受信し、受信部11は、受信した配信要求信号51を要求判断部13へ送信する。
ステップ104で、要求判断部13は、受信した配信要求信号51の配信要求内容を確認する。この場合、パノラマ映像配信要求と判断し、要求判断部13は、パノラマ読み出し信号52を符号化映像データ格納部14に送信する。
ステップ105で、要求判断部13は、パノラマ読み出し信号52により、符号化映像データ格納部14から配信要求のあったパノラマ符号化映像データを検索、読み出し、読み出したパノラマ符号化映像データを映像データ配信信号54で送信部12に送信する。
ステップ106で、送信部12は、映像データ配信信号54でパノラマ符号化映像データを再生端末20ヘストリーム配信する。
ステップ107で、再生端末20は、受信部23で映像データ配信信号54を受信し、受信部23は、映像データ配信信号54を振り分け部24に送信する。
ステップ108で、振り分け部24は受信した映像データ配信信号54を確認する。この場合、パノラマ符号化映像データのみと判断し、パノラマ符号化映像データをパノラマ映像信号55で復号部25に送信する。
ステップ109で、パノラマ符号化映像データを復号部25で復号し、パノラマ映像信号55で復号したパノラマ映像を表示部27に送信する。
ステップ110で、表示部27はパノラマ映像をストリーム再生する。
FIG. 3 is a flowchart showing the processing procedure of the selected area encoded video data delivery method of the video delivery system shown in FIG.
In step 101, the user transmits a panoramic video distribution request to be viewed from the reproduction request unit 21 of the reproduction terminal 20 to the transmission unit 22 using a distribution request signal 51.
In step 102, a panoramic video distribution request is transmitted from the transmission unit 22 to the distribution server 10 using a distribution request signal 51.
In step 103, the distribution server 10 receives the distribution request signal 51 at the reception unit 11, and the reception unit 11 transmits the received distribution request signal 51 to the request determination unit 13.
In step 104, the request determination unit 13 confirms the distribution request content of the received distribution request signal 51. In this case, it is determined that the request is a panoramic video distribution request, and the request determination unit 13 transmits a panoramic read signal 52 to the encoded video data storage unit 14.
In step 105, the request determination unit 13 searches and reads out the panorama encoded video data requested to be distributed from the encoded video data storage unit 14 by the panorama read signal 52, and distributes the read panorama encoded video data as video data. The signal 54 is transmitted to the transmitter 12.
In step 106, the transmission unit 12 distributes the panorama encoded video data to the playback terminal 20 using the video data distribution signal 54.
In step 107, the playback terminal 20 receives the video data distribution signal 54 at the reception unit 23, and the reception unit 23 transmits the video data distribution signal 54 to the distribution unit 24.
In step 108, the distribution unit 24 confirms the received video data distribution signal 54. In this case, it is determined that only the panorama encoded video data is present, and the panorama encoded video data is transmitted to the decoding unit 25 as a panoramic video signal 55.
In step 109, the panorama encoded video data is decoded by the decoding unit 25, and the panoramic video decoded by the panoramic video signal 55 is transmitted to the display unit 27.
In step 110, the display unit 27 plays back the panoramic video as a stream.
さらに、ステップ111で、現在ストリーム再生中のパノラマ映像から領域を選択し、配信要求信号51で再生要求部21から選択した領域を表示するために必要な情報である選択領域映像配信要求を送信部22に送信する。
ステップ102で、送信部22から選択領域映像配信要求を配信サーバ10ヘ送信する。
ステップ103で、配信サーバ10は、受信部11で配信要求信号51を受信し、受信部11は、受信した配信要求信号51を要求判断部13へ送信する。
ステップ104で、要求判断部13は、受信した配信要求信号51の配信要求内容を確認する。この場合、選択領域映像の配信要求と判断し、要求判断部13は、選択領域読み出し信号53を符号化映像データ格納部14に送信する。
ステップ112で、要求判断部13は、選択領域読み出し信号53により、配信要求のあった選択領域符号化映像データを符号化映像データ格納部14から検索し、さらに、符号化映像データ格納部14から検索した選択領域符号化映像データを、選択領域を抽出した現在ストリーム再生中(配信中)のパノラマ映像と同じ再生時間から読み出し、現在配信中の選択領域を抽出したパノラマ符号化映像データと選択領域符号化映像データとを同一映像にして映像データ配信信号54で送信部12へ送信する。
ステップ106で、送信部12は、映像データ配信信号54により、同一映像でパノラマ符号化映像データと選択領域符号化映像データを再生端末20ヘストリーム配信する。
Further, in step 111, a region is selected from the panoramic image currently being stream-reproduced, and a selected region image distribution request, which is information necessary for displaying the region selected from the reproduction request unit 21 by the distribution request signal 51, is transmitted. 22 to send.
In step 102, the selected area video distribution request is transmitted from the transmission unit 22 to the distribution server 10.
In step 103, the distribution server 10 receives the distribution request signal 51 at the reception unit 11, and the reception unit 11 transmits the received distribution request signal 51 to the request determination unit 13.
In step 104, the request determination unit 13 confirms the distribution request content of the received distribution request signal 51. In this case, it is determined that the selected area video is requested to be distributed, and the request determination unit 13 transmits a selection area read signal 53 to the encoded video data storage unit 14.
In step 112, the request determination unit 13 searches the encoded video data storage unit 14 for the selected region encoded video data requested for distribution by the selection region readout signal 53, and further, from the encoded video data storage unit 14. The retrieved selection area encoded video data is read from the same playback time as the panoramic video currently being played (distributed) from which the selection area is extracted, and the panorama encoded video data and selection area from which the selection area currently being distributed is extracted The encoded video data is converted into the same video and transmitted to the transmission unit 12 by the video data distribution signal 54.
In step 106, the transmission unit 12 distributes the panorama encoded video data and the selected area encoded video data to the playback terminal 20 in the same video by the video data distribution signal 54.
ステップ107で、再生端末20は受信部23で映像データ配信信号54を受信し、受信部23は、映像データ配信信号54を振り分け部24に送信する。
ステップ108で、振り分け部24は受信した映像データ配信信号54を確認する。この場合、パノラマ符号化映像データと選択領域符号化映像データの両データ受信と判断し、パノラマ符号化映像データと選択領域符号化映像データに振り分ける。さらに、パノラマ符号化映像データをパノラマ映像信号55で復号部25に送信し、また、選択領域符号化映像データを選択領域映像信号56で復号部25に送信する。
ステップ109で、復号部25は、パノラマ映像信号55で受信したパノラマ符号化映像データと、選択領域映像信号56で受信した選択領域符号化映像データをそれぞれに復号する。さらに、復号したパノラマ映像をパノラマ映像信号55で復号部25から表示部27に送信し、また、復号した選択領域符号化映像を選択領域映像信号56で復号部25から表示部27に送信する。
ステップ110で、表示部27は、パノラマ映像と選択領域映像の2映像を同じ再生時刻からストリーム再生を開始する。
In step 107, the playback terminal 20 receives the video data distribution signal 54 at the reception unit 23, and the reception unit 23 transmits the video data distribution signal 54 to the distribution unit 24.
In step 108, the distribution unit 24 confirms the received video data distribution signal 54. In this case, it is determined that both the panorama encoded video data and the selection area encoded video data are received, and the panorama encoded video data and the selection area encoded video data are distributed. Further, the panorama encoded video data is transmitted to the decoding unit 25 by the panoramic video signal 55, and the selection area encoded video data is transmitted to the decoding unit 25 by the selection area video signal 56.
In step 109, the decoding unit 25 decodes the panorama encoded video data received by the panoramic video signal 55 and the selected area encoded video data received by the selection area video signal 56, respectively. Further, the decoded panoramic video is transmitted as a panoramic video signal 55 from the decoding unit 25 to the display unit 27, and the decoded selected area encoded video is transmitted as a selected area video signal 56 from the decoding unit 25 to the display unit 27.
In step 110, the display unit 27 starts stream playback of the panoramic video and the selected area video from the same playback time.
図2は、本発明の実施例の配信サーバが適用される映像配信システムの他の例の概略構成と、本発明の実施例の選択領域符号化映像データ配信方法を説明するためのブロック図である。図2は、再生端末20に復号部が2つある場合の映像配信システムの構成図である。
図2において、10は符号化映像データを蓄積、ストリーム配信する配信サーバ、20は配信サーバに符号化映像データの配信要求と符号化映像データを再生をする再生端末、30は配信サーバ10と再生端末20を接続するネットワークである。
配信サーバ10は、再生端末20から配信要求を受け取る受信部11と、符号化映像データを再生端末20へ配信する送信部12と、配信要求内容の判断、符号化映像データの検索と読み出し制御を行う要求判断部13と、パノラマ符号化映像データと選択領域符号化映像データを格納している符号化映像データ格納部14とを備えている。
再生端末20は、視聴したい映像の配信要求をする再生要求部21と、配信サーバ10に配信要求を送信する送信部22と、配信サーバ10から符号化映像データを受信する受信部23と、受信した符号化映像データをパノラマ符号化映像データと選択領域符号化映像データとに分ける振り分け部24と、パノラマ符号化映像データを復号する復号部25と、選択領域符号化映像データを復号する復号部26と、復号された映像を再生する表示部27とを備えている。
FIG. 2 is a block diagram for explaining a schematic configuration of another example of a video distribution system to which a distribution server according to an embodiment of the present invention is applied, and a selection area encoded video data distribution method according to an embodiment of the present invention. is there. FIG. 2 is a configuration diagram of a video distribution system when the playback terminal 20 has two decoding units.
In FIG. 2, 10 is a distribution server that stores encoded video data and distributes the stream, 20 is a distribution server that requests the distribution server to distribute the encoded video data and reproduces the encoded video data, and 30 is a reproduction server and the distribution server 10. A network to which the terminal 20 is connected.
The distribution server 10 receives a distribution request from the reproduction terminal 20, a transmission unit 12 that distributes the encoded video data to the reproduction terminal 20, determination of the distribution request content, and search and readout control of the encoded video data. A request determination unit 13 to perform, and an encoded video data storage unit 14 that stores panorama encoded video data and selection area encoded video data are provided.
The reproduction terminal 20 includes a reproduction request unit 21 that requests distribution of a video that the user wants to view, a transmission unit 22 that transmits a distribution request to the distribution server 10, a reception unit 23 that receives encoded video data from the distribution server 10, and a reception A distribution unit 24 that divides the encoded video data into panoramic encoded video data and selection region encoded video data, a decoding unit 25 that decodes panoramic encoded video data, and a decoding unit that decodes the selected region encoded video data 26 and a display unit 27 for reproducing the decoded video.
ユーザは、視聴したいパノラマ映像配信要求を配信要求信号51で、再生端末20の再生要求部21から送信部22を介して配信サーバ10ヘ送信する。
配信サーバ10は、受信部11で配信要求信号51を受信し、受信部11は受信した配信要求信号51を要求判断部13へ送信する。
要求判断部13は、受信した配信要求信号51の配信要求内容を確認する。この場合、パノラマ映像配信要求と判断し、要求判断部13は、パノラマ読み出し信号52を符号化映像データ格納部14に送信し、符号化映像データ格納部14から配信要求のあったパノラマ符号化映像データを検索、読み出し、映像データ配信信号54で検索、読み出したパノラマ符号化映像データを送信部12に送信する。
送信部12は、映像データ配信信号54で、パノラマ符号化映像データを再生端末20ヘストリーム配信する。
再生端末20は、受信部23で映像データ配信信号54を受信し、受信部23は、映像データ配信信号54を振り分け部24に送信する。振り分け部24は、受信した映像データ配信信号54を確認する。この場合、パノラマ符号化映像データのみと判断し、パノラマ符号化映像データをパノラマ映像信号55で復号部25に送信する。復号部25は、パノラマ符号化映像データを復号し、復号したパノラマ映像をパノラマ映像信号55で表示部27に送信する。表示部27は、パノラマ映像をストリーム再生する。
The user transmits a panoramic video distribution request to be viewed with a distribution request signal 51 from the reproduction request unit 21 of the reproduction terminal 20 to the distribution server 10 via the transmission unit 22.
The distribution server 10 receives the distribution request signal 51 at the reception unit 11, and the reception unit 11 transmits the received distribution request signal 51 to the request determination unit 13.
The request determination unit 13 confirms the distribution request content of the received distribution request signal 51. In this case, it is determined that the request is a panoramic video distribution request, and the request determination unit 13 transmits a panorama read signal 52 to the encoded video data storage unit 14, and the panoramic encoded video requested to be distributed from the encoded video data storage unit 14. Data is retrieved and read, and the panorama encoded video data retrieved and read by the video data distribution signal 54 is transmitted to the transmission unit 12.
The transmission unit 12 distributes the panorama encoded video data to the playback terminal 20 using the video data distribution signal 54.
The playback terminal 20 receives the video data distribution signal 54 at the reception unit 23, and the reception unit 23 transmits the video data distribution signal 54 to the distribution unit 24. The distribution unit 24 confirms the received video data distribution signal 54. In this case, it is determined that only the panorama encoded video data is present, and the panorama encoded video data is transmitted to the decoding unit 25 as a panoramic video signal 55. The decoding unit 25 decodes the panorama encoded video data and transmits the decoded panoramic video to the display unit 27 as a panoramic video signal 55. The display unit 27 plays a panoramic video stream.
さらに、ユーザは、現在ストリーム再生中のパノラマ映像から領域を選択し、配信要求信号51で再生要求部21から送信部22を介して選択した領域を表示するために必要な情報である選択領域映像配信要求を配信サーバ10ヘ送信する。
配信サーバ10は、受信部11で配信要求信号51を受信し、受信部11は受信した配信要求信号51を要求判断部13へ送信する。
要求判断部13は、受信した配信要求信号51の配信要求内容を確認する。この場合、選択領域映像の配信要求と判断し、要求判断部13は、選択領域読み出し信号53を符号化映像データ格納部14に送信し、配信要求のあった選択領域符号化映像データを符号化映像データ格納部14から検索し、さらに、符号化映像データ格納部14から検索した選択領域符号化映像データを、選択領域を抽出した現在ストリーム再生中(配信中)のパノラマ映像と同じ再生時間から読み出し、現在配信中の選択領域を抽出したパノラマ符号化映像データと選択領域符号化映像データを、同一映像にして映像データ配信信号54で送信部12に送信する。
送信部12は、映像データ配信信号54により、同一映像でパノラマ符号化映像データと選択領域符号化映像データを再生端末20ヘストリーム配信する。
Further, the user selects a region from the panoramic image currently being stream-reproduced, and a selection region image which is information necessary for displaying the region selected from the reproduction request unit 21 via the transmission unit 22 by the distribution request signal 51. A distribution request is transmitted to the distribution server 10.
The distribution server 10 receives the distribution request signal 51 at the reception unit 11, and the reception unit 11 transmits the received distribution request signal 51 to the request determination unit 13.
The request determination unit 13 confirms the distribution request content of the received distribution request signal 51. In this case, the request determination unit 13 determines that the selected area video distribution request is received, and transmits the selection area read signal 53 to the encoded video data storage unit 14 to encode the selected area encoded video data requested to be distributed. The selected region encoded video data retrieved from the video data storage unit 14 and further retrieved from the encoded video data storage unit 14 is retrieved from the same playback time as the panoramic video currently being played (distributed) from which the selected region is extracted. The panorama encoded video data and the selected area encoded video data from which the selected area currently being read and extracted are converted into the same video and transmitted to the transmission unit 12 by the video data distribution signal 54.
The transmission unit 12 distributes the panorama encoded video data and the selected area encoded video data to the playback terminal 20 in the same video by the video data distribution signal 54.
再生端末20は、受信部23で映像データ配信信号54を受信し、受信部23は、映像データ配信信号54を振り分け部24に送信する。
振り分け部24は、受信した映像データ配信信号54を確認する。この場合、パノラマ符号化映像データと選択領域符号化映像データの両データを受信したと判断し、パノラマ符号化映像データと選択領域符号化映像データに振り分ける。さらに、パノラマ符号化映像データをパノラマ映像信号55で復号部25に送信し、また、選択領域符号化映像データを選択領域映像信号56で復号部26に送信する。
復号部25は、パノラマ映像信号55で受信したパノラマ符号化映像データを復号し、復号部26は、選択領域映像信号56で受信した選択領域符号化映像データを復号する。さらに、復号したパノラマ映像をパノラマ映像信号55で復号部25から表示部27に送信し、また、復号した選択領域符号化映像を選択領域映像信号56で復号部26から表示部27に送信する。
また、表示部27は、パノラマ映像と選択領域映像の2映像を同じ再生時刻からストリーム再生を開始する。
The playback terminal 20 receives the video data distribution signal 54 at the reception unit 23, and the reception unit 23 transmits the video data distribution signal 54 to the distribution unit 24.
The distribution unit 24 confirms the received video data distribution signal 54. In this case, it is determined that both the panorama encoded video data and the selection area encoded video data have been received, and the data is distributed to the panorama encoded video data and the selection area encoded video data. Further, the panorama encoded video data is transmitted to the decoding unit 25 by the panoramic video signal 55, and the selection area encoded video data is transmitted to the decoding unit 26 by the selection area video signal 56.
The decoding unit 25 decodes the panorama encoded video data received by the panoramic video signal 55, and the decoding unit 26 decodes the selection region encoded video data received by the selection region video signal 56. Further, the decoded panoramic video is transmitted as a panoramic video signal 55 from the decoding unit 25 to the display unit 27, and the decoded selection region encoded video is transmitted as a selection region video signal 56 from the decoding unit 26 to the display unit 27.
In addition, the display unit 27 starts the stream reproduction of the two images of the panoramic image and the selection area image from the same reproduction time.
図4は、図2に示す映像配信システムの選択領域符号化映像データ配信方法の処理手順を示すフローチャートである。
ステップ201で、ユーザは、視聴したいパノラマ映像配信要求を、再生端末20の再生要求部21から、配信要求信号51で送信部22に送信する。
ステップ202で、送信部22からパノラマ映像配信要求を配信要求信号51で配信サーバ10ヘ送信する。
ステップ203で、配信サーバ10は、受信部11で配信要求信号51を受信し、受信部11は受信した配信要求信号51を要求判断部13へ送信する。
ステップ204で、要求判断部13は受信した配信要求信号51の配信要求内容を確認する。この場合、パノラマ映像配信要求と判断し、要求判断部13は、パノラマ読み出し信号52を符号化映像データ格納部14に送信する。
ステップ205で、要求判断部13は、パノラマ読み出し信号52により、符号化映像データ格納部14から配信要求のあったパノラマ符号化映像データを検索、読み出し、読み出したパノラマ符号化映像データを映像データ配信信号54で送信部12に送信する。
ステップ206で、送信部12は、映像データ配信信号54でパノラマ符号化映像データを再生端末20ヘストリーム配信する。
ステップ207で、再生端末20は、受信部23で映像データ配信信号54を受信し、受信部23は、映像データ配信信号54を振り分け部24に送信する。
ステップ208で、振り分け部24は、受信した映像データ配信信号54を確認する。この場合、パノラマ符号化映像データのみと判断し、パノラマ符号化映像データをパノラマ映像信号55で復号部25に送信する。
ステップ209で、パノラマ符号化映像データを復号部25で復号し、パノラマ映像信号55で復号したパノラマ映像を表示部27に送信する。
ステップ211で、表示部27は、パノラマ映像をストリーム再生する。
FIG. 4 is a flowchart showing the processing procedure of the selected area encoded video data delivery method of the video delivery system shown in FIG.
In step 201, the user transmits a panoramic video distribution request to be viewed from the reproduction request unit 21 of the reproduction terminal 20 to the transmission unit 22 using a distribution request signal 51.
In step 202, a panoramic video distribution request is transmitted from the transmission unit 22 to the distribution server 10 using a distribution request signal 51.
In step 203, the distribution server 10 receives the distribution request signal 51 at the reception unit 11, and the reception unit 11 transmits the received distribution request signal 51 to the request determination unit 13.
In step 204, the request determination unit 13 confirms the distribution request content of the received distribution request signal 51. In this case, it is determined that the request is a panoramic video distribution request, and the request determination unit 13 transmits a panoramic read signal 52 to the encoded video data storage unit 14.
In step 205, the request determination unit 13 searches and reads out the panorama encoded video data requested to be distributed from the encoded video data storage unit 14 by the panorama read signal 52, and distributes the read panorama encoded video data as video data. The signal 54 is transmitted to the transmitter 12.
In step 206, the transmission unit 12 distributes the panorama encoded video data to the playback terminal 20 using the video data distribution signal 54.
In step 207, the playback terminal 20 receives the video data distribution signal 54 at the reception unit 23, and the reception unit 23 transmits the video data distribution signal 54 to the distribution unit 24.
In step 208, the distribution unit 24 confirms the received video data distribution signal 54. In this case, it is determined that only the panorama encoded video data is present, and the panorama encoded video data is transmitted to the decoding unit 25 as a panoramic video signal 55.
In step 209, the panorama encoded video data is decoded by the decoding unit 25, and the panoramic video decoded by the panoramic video signal 55 is transmitted to the display unit 27.
In step 211, the display unit 27 performs stream playback of the panoramic video.
さらに、ステップ212で、現在ストリーム再生中のパノラマ映像から領域を選択し、配信要求信号51で再生要求部21から選択した領域を表示するために必要な情報である選択領域映像配信要求を送信部22に送信する。
ステップ202で、送信部22から選択領域映像配信要求を配信サーバ10ヘ送信する。
ステップ203で、配信サーバ10は、受信部11で配信要求信号51を受信し、受信部11は受信した配信要求信号51を要求判断部13へ送信する。
ステップ204で、要求判断部13は、受信した配信要求信号51の配信要求内容を確認する。この場合、選択領域映像の配信要求と判断し、要求判断部13は、選択領域読み出し信号53を符号化映像データ格納部14に送信する。
ステップ213で、要求判断部13は、選択領域読み出し信号53により、配信要求のあった選択領域符号化映像データを符号化映像データ格納部14から検索し、さらに、符号化映像データ格納部14から検索した選択領域符号化映像データを、選択領域を抽出した現在ストリーム再生中(配信中)のパノラマ映像と同じ再生時間から読み出し、現在配信中の選択領域を抽出したパノラマ符号化映像データと選択領域符号化映像データとを、同一映像にして映像データ配信信号54で送信部12へ送信する。
ステップ206で、送信部12は、映像データ配信信号54により、同一映像でパノラマ符号化映像データと選択領域符号化映像データを再生端末20ヘストリーム配信する。
Further, in step 212, a region is selected from the panoramic video currently being played back by the stream, and a selection region video distribution request, which is information necessary for displaying the region selected from the reproduction request unit 21 by the distribution request signal 51, is transmitted. 22 to send.
In step 202, the selected area video distribution request is transmitted from the transmission unit 22 to the distribution server 10.
In step 203, the distribution server 10 receives the distribution request signal 51 at the reception unit 11, and the reception unit 11 transmits the received distribution request signal 51 to the request determination unit 13.
In step 204, the request determination unit 13 confirms the distribution request content of the received distribution request signal 51. In this case, it is determined that the selected area video is requested to be distributed, and the request determination unit 13 transmits a selection area read signal 53 to the encoded video data storage unit 14.
In step 213, the request determination unit 13 searches the encoded video data storage unit 14 for the selected region encoded video data requested for distribution by the selection region readout signal 53, and further from the encoded video data storage unit 14. The retrieved selection area encoded video data is read from the same playback time as the panoramic video currently being played (distributed) from which the selection area is extracted, and the panorama encoded video data and selection area from which the selection area currently being distributed is extracted The encoded video data is converted into the same video and transmitted to the transmission unit 12 by the video data distribution signal 54.
In step 206, the transmission unit 12 distributes the panorama encoded video data and the selected area encoded video data to the playback terminal 20 in the same video by the video data distribution signal 54.
ステップ207で、再生端末20は、受信部23で映像データ配信信号54を受信し、受信部23は、映像データ配信信号54を振り分け部24に送信する。
ステップ208で、振り分け部24は受信した映像データ配信信号54を確認する。この場合、パノラマ符号化映像データと選択領域符号化映像データの両データ受信と判断し、パノラマ符号化映像データと選択領域符号化映像データに振り分ける。さらに、パノラマ符号化映像データをパノラマ映像信号55で復号部25に送信し、また、選択領域符号化映像データを選択領域映像信号56で復号部26に送信する。
ステップ209で、復号部25は、パノラマ映像信号55で受信したパノラマ符号化映像データを復号し、復号したパノラマ映像をパノラマ映像信号55で復号部25から表示部27に送信する。
ステップ210で、復号部26は、選択領域映像信号56で受信した選択領域符号化映像データを復号し、復号した選択領域符号化映像を選択領域映像信号56で復号部26から表示部27に送信する。
ステップ211で、表示部27は、パノラマ映像と選択領域映像の2映像を同じ再生時刻からストリーム再生を開始する。
In step 207, the playback terminal 20 receives the video data distribution signal 54 at the reception unit 23, and the reception unit 23 transmits the video data distribution signal 54 to the distribution unit 24.
In step 208, the distribution unit 24 confirms the received video data distribution signal 54. In this case, it is determined that both the panorama encoded video data and the selection area encoded video data are received, and the panorama encoded video data and the selection area encoded video data are distributed. Further, the panorama encoded video data is transmitted to the decoding unit 25 by the panoramic video signal 55, and the selection area encoded video data is transmitted to the decoding unit 26 by the selection area video signal 56.
In step 209, the decoding unit 25 decodes the panorama encoded video data received by the panoramic video signal 55, and transmits the decoded panoramic video from the decoding unit 25 to the display unit 27 by the panoramic video signal 55.
In step 210, the decoding unit 26 decodes the selection region encoded video data received by the selection region video signal 56 and transmits the decoded selection region encoded video from the decoding unit 26 to the display unit 27 by the selection region video signal 56. To do.
In step 211, the display unit 27 starts the stream reproduction of the two images of the panoramic image and the selection region image from the same reproduction time.
図5は、本発明の実施例の選択領域符号化映像データの配信方法を説明するための図である。以下、図5を用いて、本発明の実施例の選択領域符号化映像データの配信方法について詳細に説明する。
(1)要求判断部13は、配信要求信号51で受信した配信要求をパノラマ映像配信要求と判断した場合、パノラマ読み出し信号52を符号化映像データ格納部14に送信する。
(2)要求されたパノラマ符号化映像を検索、読み出す。
(3)映像データ配信信号54でパノラマ符号化映像データを映像データ配信信号54で送信部12に送信する。
(4)送信部12は、映像データ配信信号54でパノラマ符号化映像データを再生端末20ヘストリーム配信する。
(5)要求判断部13は、配信要求信号51で受信した配信要求を選択領域映像配信要求と判断した場合、選択領域読み出し信号53を符号化映像データ格納部14に送信する。
(6)要求判断部13は、つぎに、選択領域読み出し信号53で配信要求のあった選択領域符号化映像データを符号化映像データ格納部14から検索する。
(7)要求判断部13は、つぎに、検索した選択領域符号化映像データを、選択領域を抽出した現在ストリーム再生中(配信中)のパノラマ符号化映像データと同じ再生時間から読み出す。
(8)要求判断部13は、さらに、現在配信中の選択領域を抽出したパノラマ符号化映像データと選択領域符号化映像データとを、同一映像にして映像データ配信信号54で送信部12に送信する。
(9)送信部12は、映像データ配信信号54により、同一映像でパノラマ符号化映像データと選択領域符号化映像データを再生端末20ヘストリーム配信する。
FIG. 5 is a diagram for explaining a method of distributing selected area encoded video data according to an embodiment of the present invention. Hereinafter, a method for distributing selected area encoded video data according to an embodiment of the present invention will be described in detail with reference to FIG.
(1) When the request determination unit 13 determines that the distribution request received by the distribution request signal 51 is a panoramic video distribution request, the request determination unit 13 transmits a panorama read signal 52 to the encoded video data storage unit 14.
(2) Search and read out the requested panorama encoded video.
(3) The panorama encoded video data is transmitted to the transmission unit 12 by the video data distribution signal 54 by the video data distribution signal 54.
(4) The transmission unit 12 stream-distributes the panorama encoded video data to the playback terminal 20 using the video data distribution signal 54.
(5) When the request determination unit 13 determines that the distribution request received by the distribution request signal 51 is a selection region video distribution request, the request determination unit 13 transmits a selection region read signal 53 to the encoded video data storage unit 14.
(6) Next, the request determination unit 13 searches the encoded video data storage unit 14 for selected area encoded video data requested to be distributed by the selection area read signal 53.
(7) Next, the request determination unit 13 reads the retrieved selected area encoded video data from the same reproduction time as the panorama encoded video data currently being played (distributed) from which the selected area is extracted.
(8) Further, the request determination unit 13 further converts the panorama encoded video data from which the currently distributed selection area is extracted and the selection area encoded video data into the same video and transmits the same video to the transmission unit 12 using the video data distribution signal 54. To do.
(9) The transmission unit 12 distributes the panorama encoded video data and the selected area encoded video data to the playback terminal 20 in the same video using the video data distribution signal 54.
以上説明したように、本実施例によれば、ストリーム再生中(配信中)の選択領域を抽出したパノラマ符号化映像データと同じ再生時間から選択領域符号化映像データを配信するとともに、パノラマ符号化映像データと選択領域符号化映像データとを1つのストリームとして配信するようにしたので、ストリーム再生中のパノラマ映像と選択領域とを同期して再生することが可能となる。
なお、本発明の配信サーバは、コンピュータで実行することも可能である。この場合、本発明の選択領域符号化映像データ配信方法は、コンピュータ内のハードディスクなどに格納されるプログラムを、コンピュータが実行することにより行われる。そして、このプログラムは、CD−ROM、あるいは、ネットワークを介したダウンロードにより供給される。
以上、本発明者によってなされた発明を、前記実施例に基づき具体的に説明したが、本
発明は、前記実施例に限定されるものではなく、その要旨を逸脱しない範囲において種々変更可能であることは勿論である。
As described above, according to the present embodiment, the selected area encoded video data is distributed from the same playback time as the panorama encoded video data from which the selected area during stream reproduction (distribution) is extracted, and panorama encoding is performed. Since the video data and the selected area encoded video data are distributed as one stream, it is possible to reproduce the panoramic video and the selected area during the stream reproduction in synchronization.
The distribution server of the present invention can also be executed by a computer. In this case, the selected area encoded video data distribution method of the present invention is performed by the computer executing a program stored in a hard disk or the like in the computer. This program is supplied by CD-ROM or download via a network.
As mentioned above, the invention made by the present inventor has been specifically described based on the above embodiments. However, the present invention is not limited to the above embodiments, and various modifications can be made without departing from the scope of the invention. Of course.
10 配信サーバ
11,23 受信部
12,22 送信部
13 要求判断部
14 符号化映像データ格納部
20 再生端末
21 再生要求部
24 振り分け部
25,26 復号部
27 表示部
30 ネットワーク
DESCRIPTION OF SYMBOLS 10 Distribution server 11,23 Reception part 12,22 Transmission part 13 Request judgment part 14 Encoded video data storage part 20 Playback terminal 21 Playback request part 24 Distribution part 25,26 Decoding part 27 Display part 30 Network

Claims (8)

  1. 再生端末からの配信要求を受信する受信部と、
    前記再生端末に前記配信要求のあった符号化映像データを送信する送信部と、
    パノラマ符号化映像データと選択領域符号化映像データを格納している符号化映像データ格納部とを備える配信サーバにおける選択領域符号化映像データ配信方法であって、
    前記再生端末から受信した配信要求の内容を確認するステップ1と、
    前記ステップ1において、前記再生端末からの配信要求内容が、前記再生端末において現在ストリーム再生中のパノラマ映像から選択した領域を表示する選択領域符号化映像データの配信要求である場合に、前記再生端末から配信要求のあった選択領域符号化映像データを前記符号化映像データ格納部から検索し、さらに、前記符号化映像データ格納部から検索した選択領域符号化映像データを、前記選択領域を抽出したパノラマ映像の前記再生端末に現在配信中のパノラマ符号化映像データと同じ再生時間から読み出し、現在配信中のパノラマ符号化映像データと同一映像にするステップ2と、
    前記送信部から前記再生端末に対して、同一映像である現在配信中のパノラマ符号化映像データと前記ステップ2で抽出した選択領域符号化映像データとをストリーム配信するステップ3とを有することを特徴とする選択領域符号化映像データ配信方法。
    A receiving unit for receiving a distribution request from the playback terminal;
    A transmitting unit that transmits the encoded video data requested to be distributed to the playback terminal;
    A selection area encoded video data distribution method in a distribution server comprising panoramic encoded video data and an encoded video data storage unit storing selection area encoded video data,
    Confirming the content of the distribution request received from the playback terminal;
    In the step 1, when the content of the distribution request from the reproduction terminal is a distribution request of selected area encoded video data for displaying an area selected from the panoramic video currently being stream reproduced at the reproduction terminal, the reproduction terminal The selected area encoded video data requested for distribution is retrieved from the encoded video data storage unit, and the selected area encoded video data retrieved from the encoded video data storage unit is extracted from the selected area. Reading out the panorama video from the same playback time as the panorama encoded video data currently distributed to the playback terminal, and making the same video as the panorama encoded video data currently distributed;
    And a step 3 of streaming transmitting the panorama encoded video data being currently distributed and the selected region encoded video data extracted in the step 2 from the transmitting unit to the playback terminal. A selection area encoded video data distribution method.
  2. 再生端末からの配信要求を受信する受信部と、
    前記再生端末に前記配信要求のあった符号化映像データを送信する送信部と、
    パノラマ符号化映像データと選択領域符号化映像データを格納している符号化映像データ格納部と、
    要求判断部とを備える配信サーバであって、
    前記要求判断部は、前記再生端末から受信した配信要求の内容を確認する機能1と、
    前記機能1において、前記再生端末からの配信要求内容が、前記再生端末において現在ストリーム再生中のパノラマ映像から選択した領域を表示する選択領域符号化映像データの配信要求である場合に、前記再生端末から配信要求のあった選択領域符号化映像データを前記符号化映像データ格納部から検索し、さらに、前記符号化映像データ格納部から検索した選択領域符号化映像データを、前記選択領域を抽出したパノラマ映像の前記再生端末に現在配信中のパノラマ符号化映像データと同じ再生時間から読み出し、現在配信中のパノラマ符号化映像データと前記抽出した選択領域符号化映像データとを同一映像にして前記送信部に送信する機能2とを有し、
    前記送信部は、前記再生端末に対して、前記要求判断部の前記機能2から送信された同一映像である現在配信中のパノラマ符号化映像データと前記選択領域符号化映像データとをストリーム配信することを特徴とする配信サーバ。
    A receiving unit for receiving a distribution request from the playback terminal;
    A transmitting unit that transmits the encoded video data requested to be distributed to the playback terminal;
    An encoded video data storage unit storing panorama encoded video data and selected area encoded video data;
    A distribution server comprising a request determination unit,
    The request determination unit includes a function 1 for confirming a content of a distribution request received from the playback terminal;
    In the function 1, when the content of the delivery request from the playback terminal is a delivery request of selected area encoded video data for displaying an area selected from the panoramic video currently being stream played at the playback terminal, the playback terminal The selected area encoded video data requested for distribution is retrieved from the encoded video data storage unit, and the selected area encoded video data retrieved from the encoded video data storage unit is extracted from the selected area. Read panorama video from the same playback time as the panorama encoded video data currently distributed to the playback terminal, and transmit the panorama encoded video data currently distributed and the extracted selected area encoded video data as the same video. And a function 2 for transmitting to the
    The transmitting unit streams to the playback terminal the panorama encoded video data being currently distributed and the selected region encoded video data that are the same video transmitted from the function 2 of the request determination unit. A distribution server characterized by that.
  3. 映像を表示する表示部と、
    配信サーバへ配信要求を行う再生要求部と、
    前記配信要求を前記配信サーバへ送信する送信部と、
    前記配信サーバから符号化映像データを受信する受信部とを有する再生端末における符号化映像データ復号方法であって、
    前記配信サーバは、パノラマ符号化映像データと選択領域符号化映像データとを同一映像で配信し、
    前記受信部において同一映像で受信した符号化映像データを、振り分け部でそれぞれパノラマ符号化映像データと選択領域符号化映像データとに振り分け、
    前記振り分けた符号化映像データを、それぞれ2つの復号部で復号することを特徴とする符号化映像データ復号方法。
    A display unit for displaying images;
    A playback request unit that makes a delivery request to the delivery server;
    A transmission unit for transmitting the distribution request to the distribution server;
    An encoded video data decoding method in a playback terminal having a receiving unit for receiving encoded video data from the distribution server,
    The distribution server distributes panorama encoded video data and selected area encoded video data in the same video,
    The encoded video data received as the same video in the receiving unit is distributed to the panoramic encoded video data and the selection area encoded video data in the distributing unit, respectively.
    2. The encoded video data decoding method, wherein each of the distributed encoded video data is decoded by two decoding units.
  4. 映像を表示する表示部と、
    配信サーバへ配信要求を行う再生要求部と、
    前記配信要求を前記配信サーバへ送信する送信部と、
    前記配信サーバから符号化映像データを受信する受信部とを有する再生端末における符号化映像データ復号方法であって、
    前記配信サーバは、パノラマ符号化映像データと選択領域符号化映像データとを同一映像で配信し、
    前記受信部において同一映像で受信した符号化映像データを、振り分け部でそれぞれパノラマ符号化映像データと選択領域符号化映像データとに振り分け、
    前記振り分けた符号化映像データを、1つの復号部で復号することを特徴とする符号化映像データ復号方法。
    A display unit for displaying images;
    A playback request unit that makes a delivery request to the delivery server;
    A transmission unit for transmitting the distribution request to the distribution server;
    An encoded video data decoding method in a playback terminal having a receiving unit for receiving encoded video data from the distribution server,
    The distribution server distributes panorama encoded video data and selected area encoded video data in the same video,
    The encoded video data received as the same video in the receiving unit is distributed to the panoramic encoded video data and the selection area encoded video data in the distributing unit, respectively.
    A coded video data decoding method, wherein the sorted coded video data is decoded by a single decoding unit.
  5. 映像を表示する表示部と、
    配信サーバへ配信要求を行う再生要求部と、
    前記配信要求を前記配信サーバへ送信する送信部と、
    前記配信サーバから符号化映像データを受信する受信部とを有する再生端末であって、
    前記配信サーバは、パノラマ符号化映像データと選択領域符号化映像データとを同一映像で配信し、
    前記受信部において同一映像で受信した符号化映像データを、それぞれパノラマ符号化映像データと選択領域符号化映像データとに振り分ける振り分け部と、
    前記振り分け部で振り分けられたパノラマ符号化映像データを復号する第1の復号部と、
    前記振り分け部で振り分けられた選択領域符号化映像データを復号する第2の復号部とを有することを特徴とする再生端末。
    A display unit for displaying images;
    A playback request unit that makes a delivery request to the delivery server;
    A transmission unit for transmitting the distribution request to the distribution server;
    A playback terminal having a receiving unit for receiving encoded video data from the distribution server,
    The distribution server distributes panorama encoded video data and selected area encoded video data in the same video,
    A distribution unit that distributes encoded video data received in the same video in the reception unit into panoramic encoded video data and selection region encoded video data, respectively;
    A first decoding unit for decoding the panorama encoded video data distributed by the distribution unit;
    A playback terminal comprising: a second decoding unit that decodes the selected area encoded video data distributed by the distribution unit.
  6. 映像を表示する表示部と、
    配信サーバへ配信要求を行う再生要求部と、
    前記配信要求を前記配信サーバへ送信する送信部と、
    前記配信サーバから符号化映像データを受信する受信部とを有する再生端末であって、
    前記配信サーバは、パノラマ符号化映像データと選択領域符号化映像データとを同一映像で配信され、
    前記同一映像で受信した符号化映像データを、それぞれパノラマ符号化映像データと選択領域符号化映像データとに振り分ける振り分け部と、
    前記振り分け部で振り分けられたパノラマ符号化映像データと選択領域符号化映像データとを、それぞれ復号する復号部を有することを特徴とする再生端末。
    A display unit for displaying images;
    A playback request unit that makes a delivery request to the delivery server;
    A transmission unit for transmitting the distribution request to the distribution server;
    A playback terminal having a receiving unit for receiving encoded video data from the distribution server,
    The distribution server distributes panorama encoded video data and selected area encoded video data in the same video,
    A distribution unit that distributes the encoded video data received in the same video into panoramic encoded video data and selection area encoded video data, respectively;
    A playback terminal comprising: a decoding unit that decodes panorama encoded video data and selection area encoded video data distributed by the distribution unit.
  7. 請求項1に記載の選択領域符号化映像データ配信方法を、コンピュータに実行させるためのプログラム。   A program for causing a computer to execute the selection area encoded video data distribution method according to claim 1.
  8. 請求項7に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。   A computer-readable recording medium on which the program according to claim 7 is recorded.
JP2009032492A 2009-02-16 2009-02-16 Selected-area encoded video data distributing method, encoded video data decoding method, distribution server, reproduction terminal, program, and recording medium Pending JP2010192971A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009032492A JP2010192971A (en) 2009-02-16 2009-02-16 Selected-area encoded video data distributing method, encoded video data decoding method, distribution server, reproduction terminal, program, and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009032492A JP2010192971A (en) 2009-02-16 2009-02-16 Selected-area encoded video data distributing method, encoded video data decoding method, distribution server, reproduction terminal, program, and recording medium

Publications (1)

Publication Number Publication Date
JP2010192971A true JP2010192971A (en) 2010-09-02

Family

ID=42818581

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009032492A Pending JP2010192971A (en) 2009-02-16 2009-02-16 Selected-area encoded video data distributing method, encoded video data decoding method, distribution server, reproduction terminal, program, and recording medium

Country Status (1)

Country Link
JP (1) JP2010192971A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012222399A (en) * 2011-04-04 2012-11-12 Nippon Telegr & Teleph Corp <Ntt> Video playback system, video playback method, and video playback device and program
JP2014150352A (en) * 2013-01-31 2014-08-21 Nippon Telegr & Teleph Corp <Ntt> Panorama video information reproduction method, panorama video information reproduction system and program
JP6322740B1 (en) * 2017-03-07 2018-05-09 株式会社ドワンゴ Image transmitting apparatus and image transmitting method, and image receiving apparatus and image receiving method
US10523980B2 (en) 2016-05-23 2019-12-31 Interdigital Vc Holdings, Inc. Method, apparatus and stream of formatting an immersive video for legacy and immersive rendering devices

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09116898A (en) * 1995-10-17 1997-05-02 Fujitsu Ltd Video signal transmission system
JP2003304525A (en) * 2002-04-10 2003-10-24 Ricoh Co Ltd Data distribution reproduction system, data distribution reproduction method, program, and storage medium
JP2004007283A (en) * 2002-05-31 2004-01-08 Ricoh Co Ltd Video distributing system, its program, and recording medium
JP2004088483A (en) * 2002-08-27 2004-03-18 Nagoya City Video information distribution system, video information distribution method, and server for them
JP2005333552A (en) * 2004-05-21 2005-12-02 Viewplus Inc Panorama video distribution system
JP2008005112A (en) * 2006-06-21 2008-01-10 Matsushita Electric Ind Co Ltd Stream encoder and stream decoder

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09116898A (en) * 1995-10-17 1997-05-02 Fujitsu Ltd Video signal transmission system
JP2003304525A (en) * 2002-04-10 2003-10-24 Ricoh Co Ltd Data distribution reproduction system, data distribution reproduction method, program, and storage medium
JP2004007283A (en) * 2002-05-31 2004-01-08 Ricoh Co Ltd Video distributing system, its program, and recording medium
JP2004088483A (en) * 2002-08-27 2004-03-18 Nagoya City Video information distribution system, video information distribution method, and server for them
JP2005333552A (en) * 2004-05-21 2005-12-02 Viewplus Inc Panorama video distribution system
JP2008005112A (en) * 2006-06-21 2008-01-10 Matsushita Electric Ind Co Ltd Stream encoder and stream decoder

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012222399A (en) * 2011-04-04 2012-11-12 Nippon Telegr & Teleph Corp <Ntt> Video playback system, video playback method, and video playback device and program
JP2014150352A (en) * 2013-01-31 2014-08-21 Nippon Telegr & Teleph Corp <Ntt> Panorama video information reproduction method, panorama video information reproduction system and program
US10523980B2 (en) 2016-05-23 2019-12-31 Interdigital Vc Holdings, Inc. Method, apparatus and stream of formatting an immersive video for legacy and immersive rendering devices
JP6322740B1 (en) * 2017-03-07 2018-05-09 株式会社ドワンゴ Image transmitting apparatus and image transmitting method, and image receiving apparatus and image receiving method
JP2018148443A (en) * 2017-03-07 2018-09-20 株式会社ドワンゴ Image transmission device and image transmission method, and image reception device and image reception method

Similar Documents

Publication Publication Date Title
CN101960844B (en) For the system and method strengthening track for the application be included in media file of encoding
JP2008005254A (en) Server device, client device, content reproduction system, content processing method, and program
JP2005136762A (en) High definition video reproduction method and apparatus
KR100744594B1 (en) Content reproduce system, reproduce device, reproduce method, and distribution server
CN100586176C (en) Apparatus and method for video synchronization
KR101257386B1 (en) System and Method for 3D Multimedia Contents Service using Multimedia Application File Format
JP2010192971A (en) Selected-area encoded video data distributing method, encoded video data decoding method, distribution server, reproduction terminal, program, and recording medium
JP4315914B2 (en) Image reproducing apparatus and image reproducing method
KR101142379B1 (en) Method and Apparatus of playing digital broadcasting and Method of recording digital broadcasting
US20150143445A1 (en) Production apparatus and content distribution system
JP3529679B2 (en) Recording / playback device
KR101731829B1 (en) Device and method for processing digital contents in digital video receiver
JP5154465B2 (en) File reading method, distribution server, program, and recording medium
JP5144771B2 (en) Image processing apparatus, image reproducing apparatus, image recording apparatus, image processing method, image reproducing method, and image recording method
JP2004343786A (en) Encoding method, reproducing method, and reproducing apparatus, of image information
JP2006246504A (en) Encode method, reproduction method, and reproduction apparatus for image information
JP2001346148A (en) Moving picture reproduction control method and picture reproducing device
JP2004343785A (en) Encoding method, reproducing method, and reproducing apparatus, of image information
JP2006067142A (en) Decoding device
JP2006074759A (en) Apparatus for browsing plural moving images, and distribution apparatus
JP2006270976A (en) Encode method, reproduction method, and reproducing apparatus for image information
KR101684705B1 (en) Apparatus and method for playing media contents
CN100484219C (en) Receiving apparatus and control method thereof
JP2000217075A (en) Moving picture reproducing device and moving picture reproducing method
KR100703002B1 (en) Signal process apparatus capable of selective encoding and method thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110223

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120919

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121023

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121214

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20130115