JP2021002811A - 配信サーバ、配信方法及びプログラム - Google Patents
配信サーバ、配信方法及びプログラム Download PDFInfo
- Publication number
- JP2021002811A JP2021002811A JP2019116711A JP2019116711A JP2021002811A JP 2021002811 A JP2021002811 A JP 2021002811A JP 2019116711 A JP2019116711 A JP 2019116711A JP 2019116711 A JP2019116711 A JP 2019116711A JP 2021002811 A JP2021002811 A JP 2021002811A
- Authority
- JP
- Japan
- Prior art keywords
- camera
- client
- request
- identification information
- panoramic image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 12
- 230000005540 biological transmission Effects 0.000 claims abstract description 5
- 238000002716 delivery method Methods 0.000 claims 1
- 230000000007 visual effect Effects 0.000 description 18
- 230000006854 communication Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 230000008859 change Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000002194 synthesizing effect Effects 0.000 description 3
- 238000009877 rendering Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Landscapes
- Stereoscopic And Panoramic Photography (AREA)
- Closed-Circuit Television Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
まず、本実施形態に係る映像配信システム1の説明に必要な従来技術等について説明する。
上述したように、パノラマ映像は、「パノラマ動画」や「360度パノラマ映像」、「VR映像」、「VR動画」等とも称される。パノラマ映像は、例えば、図1に示すように、全天周投影球で表現される。全天周投影球で表現されるパノラマ映像では、全天周投影球の中心を観測位置として、この観測位置にある疑似的なカメラが所定の画角で撮影した範囲が視野範囲(つまり、端末に表示される範囲)となる。また、全天周投影球で表現されるパノラマ映像は、垂直角度θが0〜π、水平角度φが0〜2πの正距円筒図法で表現することができる。このとき、例えば、上記の特許文献1に記載されている技術では、正距円筒図法で表現されたパノラマ映像の視野範囲を含む部分領域データを「高解像度タイル」、パノラマ映像全体を圧縮したデータを「低解像度タイル」として端末に配信する。言い換えれば、視野範囲を含む部分領域は高ビットレートの高解像度タイルとして、パノラマ映像全体はビットレートを下げた低ビットレートの低解像度タイルとして端末に配信する。
上述したように、HLSとは、配信サーバが映像をクライアントにストリーミング配信等するためのプロトコルである。例えば、図2に示すように、カメラから出力された映像信号がエンコードされてエンコード映像が作成され、配信サーバは、このエンコード映像を複数のセグメントファイルに分割すると共に、プレイリストファイルを生成して所定の場所に設置(格納)する。なお、セグメントファイルは「.ts」形式(つまり、MPEG−2 トランスポートストリーム形式)のファイルであり、プレイリストファイルは「.m3u8」形式のファイルである。図2では、一例として、エンコード映像が「TS−00.ts」〜「TS−NN.ts」に分割された場合を示している。
HLSによりパノラマ映像を配信する場合、配信サーバでは、所定の時間単位tc毎に、低解像度タイルと、所定の複数の視野範囲毎の高解像度タイルとをセグメントファイルとして格納している。例えば、図3に示すように、tc毎の低解像度タイルLT、第1の視野範囲におけるtc毎の高解像度タイルHT1、第2の視野範囲におけるtc毎の高解像度タイルHT2、第3の視野範囲におけるtc毎の高解像度タイルHT3等が格納されている。ここで、図3に示す例では、第1の視野範囲は視野範囲の左上の座標が(0,0)となる範囲、第2の視野範囲は視野範囲の左上の座標が(Sx,0)となる範囲、第3の視野範囲は視野範囲の左上の座標が(2Sx,0)となる範囲である。Sxは予め決められた水平角度(x軸方向)のシフト量である。
例えば、コンサートやスポーツ競技等では、複数のカメラをそれぞれ複数の地点に設置等した上で、これらの複数のカメラのそれぞれでパノラマ映像を撮影することが行われている。このとき、クライアントでは、これら複数のカメラのそれぞれで撮影されたパノラマ映像を切り替え可能に表示することができるのが一般的である。
本実施形態に係る映像配信システム1の全体構成について、図5を参照しながら説明する。図5は、本実施形態に係る映像配信システム1の全体構成の一例を示す図である。
次に、本実施形態に係る配信サーバ10の記憶部120に記憶されている映像コンテンツのデータ構成について説明する。
実施例1における映像コンテンツのデータ構成について、図6を参照しながら説明する。図6は、映像コンテンツのデータ構成の一例を説明するための図(その1)である。
実施例2における映像コンテンツのデータ構成について、図7を参照しながら説明する。図7は、映像コンテンツのデータ構成の一例を説明するための図(その2)である。
次に、本実施形態に係るパノラマ映像配信処理について、図8を参照しながら説明する。図8は、本実施形態に係るパノラマ映像配信処理の一例を示すシーケンス図である。なお、以降では、カメラ30を特定する情報をカメラ番号として、カメラ番号n=1のカメラ301をデフォルトのカメラ30とする。そして、クライアント20でパノラマ映像を再生する際には、デフォルトのカメラ301のパノラマ映像が最初に再生されるものとする。
10 配信サーバ
20 クライアント
30 カメラ
40 エンコード装置
110 配信処理部
120 記憶部
210 視聴処理部
Claims (7)
- HTTP Live Streamingによって複数のカメラの各々で撮影されたパノラマ映像をクライアントに配信する配信サーバであって、
前記カメラを識別するカメラ識別情報が含まれる第1の要求を前記クライアントから受信すると、前記複数のカメラの各々で撮影されたパノラマ映像を再生するためのプレイリストを前記クライアントに送信する送信手段と、
前記プレイリストを前記クライアントに送信すると、前記第1の要求に含まれるカメラ識別情報で識別されるカメラで撮影されたパノラマ映像を前記クライアントに配信する映像配信手段と、を有し、
前記映像配信手段は、
前記第1の要求に含まれるカメラ識別情報と異なるカメラ識別情報が含まれる第2の要求を受信すると、前記第2の要求に含まれるカメラ識別情報で識別されるカメラで撮影されたパノラマ映像を前記クライアントに配信する、ことを特徴とする配信サーバ。 - 前記送信手段は、
前記第1の要求に含まれるカメラ識別情報と異なるカメラ識別情報が含まれる第2の要求を受信した場合、前記プレイリストを前記クライアントに送信しない、ことを特徴とする請求項1に記載の配信サーバ。 - 前記第1の要求は、前記複数のカメラのうち、デフォルトとして設定されているカメラで撮影されたパノラマ映像の配信開始要求であり、
前記第2の要求は、前記カメラの切り替え要求である、ことを特徴とする請求項1又は2に記載の配信サーバ。 - 前記カメラ毎に、該カメラで撮影されたパノラマ映像のコンテンツをセグメントファイルとして記憶する記憶手段を有し、
前記映像配信手段は、
前記カメラ識別情報で識別されるカメラで撮影されたパノラマ映像のセグメントファイルを前記クライアントに配信する、ことを特徴とする請求項1乃至3の何れか一項に記載の配信サーバ。 - 前記セグメントファイルには、所定の時間幅のパノラマ映像を低解像度に圧縮したデータを示す低解像度データと、前記時間幅の前記パノラマ映像に含まれる所定の画像領域を示す高解像度データとが含まれる、ことを特徴とする請求項4に記載の配信サーバ。
- HTTP Live Streamingによって複数のカメラの各々で撮影されたパノラマ映像をクライアントに配信するコンピュータが、
前記カメラを識別するカメラ識別情報が含まれる第1の要求を前記クライアントから受信すると、前記複数のカメラの各々で撮影されたパノラマ映像を再生するためのプレイリストを前記クライアントに送信する送信手順と、
前記プレイリストを前記クライアントに送信すると、前記第1の要求に含まれるカメラ識別情報で識別されるカメラで撮影されたパノラマ映像を前記クライアントに配信する映像配信手順と、を実行し、
前記映像配信手順は、
前記第1の要求に含まれるカメラ識別情報と異なるカメラ識別情報が含まれる第2の要求を受信すると、前記第2の要求に含まれるカメラ識別情報で識別されるカメラで撮影されたパノラマ映像を前記クライアントに配信する、ことを特徴とする配信方法。 - コンピュータを、請求項1乃至5の何れか一項に記載の配信サーバにおける各手段として機能させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019116711A JP6970143B2 (ja) | 2019-06-24 | 2019-06-24 | 配信サーバ、配信方法及びプログラム |
JP2021176118A JP7319340B2 (ja) | 2019-06-24 | 2021-10-28 | 配信サーバ、配信方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019116711A JP6970143B2 (ja) | 2019-06-24 | 2019-06-24 | 配信サーバ、配信方法及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021176118A Division JP7319340B2 (ja) | 2019-06-24 | 2021-10-28 | 配信サーバ、配信方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021002811A true JP2021002811A (ja) | 2021-01-07 |
JP6970143B2 JP6970143B2 (ja) | 2021-11-24 |
Family
ID=73994368
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019116711A Active JP6970143B2 (ja) | 2019-06-24 | 2019-06-24 | 配信サーバ、配信方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6970143B2 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017123503A (ja) * | 2016-01-04 | 2017-07-13 | 日本電信電話株式会社 | 映像配信装置、映像配信方法及びコンピュータプログラム |
JP2017220703A (ja) * | 2016-06-03 | 2017-12-14 | キヤノン株式会社 | 通信装置、通信制御方法および通信システム |
JP2019033362A (ja) * | 2017-08-07 | 2019-02-28 | 日本放送協会 | 配信装置、受信装置及びプログラム |
-
2019
- 2019-06-24 JP JP2019116711A patent/JP6970143B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017123503A (ja) * | 2016-01-04 | 2017-07-13 | 日本電信電話株式会社 | 映像配信装置、映像配信方法及びコンピュータプログラム |
JP2017220703A (ja) * | 2016-06-03 | 2017-12-14 | キヤノン株式会社 | 通信装置、通信制御方法および通信システム |
JP2019033362A (ja) * | 2017-08-07 | 2019-02-28 | 日本放送協会 | 配信装置、受信装置及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP6970143B2 (ja) | 2021-11-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10880522B2 (en) | Hybrid media viewing application including a region of interest within a wide field of view | |
EP3459252B1 (en) | Method and apparatus for spatial enhanced adaptive bitrate live streaming for 360 degree video playback | |
JP6309749B2 (ja) | 画像データ再生装置および画像データ生成装置 | |
JP5920708B2 (ja) | 多視点映像ストリーム視聴システムおよび方法 | |
US20100253764A1 (en) | Method and system for customising live media content | |
JP2015187797A (ja) | 画像データ生成装置および画像データ再生装置 | |
US11539983B2 (en) | Virtual reality video transmission method, client device and server | |
KR102133207B1 (ko) | 통신장치, 통신 제어방법 및 통신 시스템 | |
JP2007150747A (ja) | 受信装置及び本線映像配信装置 | |
JP6541309B2 (ja) | 送信装置、送信方法、及びプログラム | |
JP2017123503A (ja) | 映像配信装置、映像配信方法及びコンピュータプログラム | |
JP5915604B2 (ja) | 情報処理装置、プログラム及び情報処理方法 | |
US9491447B2 (en) | System for providing complex-dimensional content service using complex 2D-3D content file, method for providing said service, and complex-dimensional content file therefor | |
JP6970143B2 (ja) | 配信サーバ、配信方法及びプログラム | |
JP7319340B2 (ja) | 配信サーバ、配信方法及びプログラム | |
KR102261242B1 (ko) | 360도 3차원 영상 재생시스템 | |
JP2019033362A (ja) | 配信装置、受信装置及びプログラム | |
JP5940999B2 (ja) | 映像再生装置、映像配信装置、映像再生方法、映像配信方法及びプログラム | |
US11134236B2 (en) | Image processing device and system | |
WO2018178510A2 (en) | Video streaming | |
JP5850012B2 (ja) | 情報処理装置、プログラム及び通信システム | |
JP2018142934A (ja) | 映像配信システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201029 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210812 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210928 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211028 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6970143 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |