JP2016197845A - 動画再生装置及びプログラム - Google Patents
動画再生装置及びプログラム Download PDFInfo
- Publication number
- JP2016197845A JP2016197845A JP2015077976A JP2015077976A JP2016197845A JP 2016197845 A JP2016197845 A JP 2016197845A JP 2015077976 A JP2015077976 A JP 2015077976A JP 2015077976 A JP2015077976 A JP 2015077976A JP 2016197845 A JP2016197845 A JP 2016197845A
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- video
- playback
- unit
- switching
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000001360 synchronised effect Effects 0.000 claims abstract description 9
- 238000000034 method Methods 0.000 description 34
- 230000008569 process Effects 0.000 description 32
- 238000012545 processing Methods 0.000 description 27
- 238000004891 communication Methods 0.000 description 11
- 238000005516 engineering process Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
このHTML5では、配信された動画をWebブラウザアプリケーションにより再生するためのAPI(Application Interface)であるMSE(Media Source Extensions)が規定されている。これにより、クライアントの動画再生装置は、HTTP(Hypertext Transfer Protocol)を用いて配信されるMPEG−4やMPEG−DASH(非特許文献1)の動画を、Webアプリによりプラグインを用いずに再生できるようになった。
〔動画配信システムの概要〕
以下、図面を参照しながら本発明の実施形態を詳細に説明する。
まず、本実施形態に係る動画配信システム1の概要について説明する。
本実施形態に係る動画配信システム1は、HTTPを用いて動画の配信を行うシステムである。HTTPを用いた動画配信方式には、HLS(HTTP Live Streaming)等のいくつかの方式があるが、一例として、MPEG−DASHを用いて動画が配信される場合について説明する。動画配信システム1では、動画配信装置30から配信される動画が、動画再生装置10により表示される。ユーザは、動画再生装置10を操作し、表示される動画を視聴する。以下では、ユーザとは、動画再生装置10のユーザである場合について説明する。
図1には、3種類の動画V10、V20、V31〜V34が示されている。
動画V10は、4K(例えば、3840×2160px)の解像度の動画である。
動画V20は、動画V10を2K(例えば、1920×1080px)の解像度にダウンコンバートした動画である。
動画V31〜V34は、動画V10を横方向の中央線と縦方向の中央線とにより4分割し、切り出した動画である。従って、動画V31〜V34の解像度は、2Kである。
以下では、表示部に表示される動画を切り替える処理を切替処理と称する。また、以下では、ユーザによる動画の切り替えを指示する操作を切替操作と称する。ここでは、一例として、上述した切替操作により切り替え先の動画を指定する場合について説明する。
まず、動画再生装置10は、同一の時間長を有する動画V20と動画V31とを再生する。ここで、再生とは、フォアグラウンドにおける再生と、バックグラウンドにおける再生とを含む。フォアグラウンドにおける再生では、動画が表示部に表示される。これに対して、バックグラウンドにおける再生では、動画は表示部に表示されない。フォアグラウンドとバックグラウンドとは、随時入れ替えることができる。上述した例では、切り替え元の動画V10がフォアグラウンドで再生・表示され、切り替え先の動画V31がバックグラウンドで再生される。
以下では、切替処理前に表示部に表示されている第1動画を切替元動画と称する。また、切替処理後に表示部に表示される第2動画を切替後動画と称する。
次に、動画配信システム1の構成について説明する。
図2は、本実施形態に係る動画配信システム1の全体構成を示す模式図である。
本実施形態に係る動画配信システム1は、1以上の動画再生装置10−1、10−2、10−3、…と、動画配信装置30とを備える。以下では、動画再生装置10−1、10−2、10−3、…を動画再生装置10と総称する。動画再生装置10と、動画配信装置30とは、それぞれ、ネットワークNに接続され、互いに情報を送受信することができる。
図3は、本実施形態に係るMPDファイルの構成を示す図である。
本実施形態に係るMPDファイルには、XML(Extensible Markup Language)形式の階層構造で、メディアファイル情報が記述される。MPDファイルは、1つ以上のPeriod要素を有する。
Period要素とは、動画を時間で区分したものである。動画の再生は、各Period要素に記述される開始時間の順に行われる。Period要素は、1つ以上のAdaptationSet要素を有する。
AdaptationSet要素には、映像・音声・字幕などの符号化関連情報が記述される。AdaptationSet要素は、1つ以上のRepresentation要素を有する。
次に、動画再生装置10の構成について説明する。
図4は、本実施形態に係る動画再生装置10の概略機能構成を示すブロック図である。
本実施形態に係る動画配信装置30は、入力部110と、通信部120と、表示部130と、音声出力部140と、記憶部150と、制御部160と、を備える。
表示部130は、液晶ディスプレイや有機EL(Electro-Luminescence)ディスプレイ等の表示装置を備える。表示部130は、動画配信装置30から配信された動画を表示する。
音声出力部140は、スピーカを備える。音声出力部140は、動画配信装置30から配信された動画の音声を再生する。
Webアプリは、Webブラウザアプリケーションプログラムにおいて動作する。Webアプリは、例えば、動画配信装置30から取得されるHTML5ファイルであり、その動作アルゴリズムはJavaScript(登録商標)により記述される。このHTML5ファイルには、切替元動画に対応するvideo要素と、切替先動画に対応するvideo要素とがそれぞれ記述されている。また、このHTML5ファイルには、各video要素に対して再生すべき切替元動画又は切替先動画のMPDファイルの割当てが記述されている。また、このHTML5ファイルには、切替元動画と切替先動画との取得先を示すURLが記述されている。また、このHTML5ファイルには、切替元動画と切替先動画との操作に応じた対応関係が記述されている。対応関係とは、例えば、切替元動画の表示時における切替操作(図1の動画V20の仮想4分割領域のいずれかの指定)と、切替操作に応じて表示される切替先動画(図1の動画V31〜V34)との関係である。本実施形態では、動画の拡大操作に対応する切替処理について、切替元動画の仮想的な分割領域と、切替先動画との関係が記述されている。また、動画の縮小操作に対応する切替処理の場合は、切替元動画に対応する切替先動画が記述されている。
制御部160は、動画再生部161と、動画決定部162と、MPD取得部163と、動画取得部164と、切替制御部165と、を備える。動画再生部161と、動画決定部162と、MPD取得部163と、動画取得部164と、切替制御部165とは、例えば、動画再生装置10が備えるCPUがWebアプリを実行することにより動作する。
MPD取得部163は、動画決定部162から通知された動画についてのMPDファイルを、通信部120を介して、動画配信装置30から取得する。MPD取得部163は、取得したMPDファイルを動画取得部164に出力する。
入力部110が受け付けた操作が動画の表示開始要求である場合、切替制御部165は、動画の再生要求を動画再生部161に出力し、動画をフォアグラウンドで再生させる。具体的には、例えば、CSSにおいて、フォアグラウンド再生する動画のvideo要素のvisiblityの値を「visible」に設定する。
また、切替元動画の再生時刻と切替後動画の再生時刻との時間差が所定範囲内でない場合、切替制御部165は、切替先動画の再生時刻を補正する。そして、切替制御部165は、補正後の再生時刻からの切替先動画を再生要求を、動画再生部161に出力する。そして、切替制御部165は、切替元動画の再生時刻と切替先動画の再生時刻との時間差が所定範囲内であるか否かの判定を行う。
まず、切替制御部165は、切替先動画の再生要求を動画再生部161に出力すると、その再生要求出力時刻を記録する。次に、切替制御部165は、再生要求に応じた再生開始の通知を動画再生部161から取得すると、その再生開始時刻を記録する。再生要求出力時刻と再生開始時刻とは、世界時間等の時間尺度における時刻であり、動画内の時刻とは異なる。次に、切替制御部165は、再生要求出力時刻と再生開始時刻との時間差(以下、「再生タイムラグ」と称する。)を算出する。そして、切替制御部165は、切替元動画の再生時刻と切替後動画の再生時刻との時間差が所定範囲内でない場合、切替先動画の再生時刻に再生タイムラグを加算する。これにより、動画再生部161は、切替先動画の再生時刻を補正する。
次に、動画配信システム1の動作について説明する。
図5は、本実施形態に係る動画配信システム1による処理の流れを示すシーケンスチャートである。
図5に示す処理は、動画再生装置10が、ユーザから表示開始操作を受け付ける場合における処理の流れを示す。
(ステップS102)動画再生装置10は、第1動画のMPDファイル取得要求を動画配信装置30に送信する。その後、動画配信システム1は、ステップS104に処理を進める。
(ステップS104)動画配信装置30は、動画再生装置10から要求されたMPDファイルを動画再生装置10に送信する。その後、動画配信システム1は、ステップS106に処理を進める。
(ステップS108)動画再生装置10は、MPDファイルの内容に基づいて、第1動画の動画ファイル取得要求を動画配信装置30に送信する。その後、動画配信システム1は、ステップS110に処理を進める。
(ステップS112)動画再生装置10は、第1動画の動画ファイルを取得し、取得した動画ファイルに基づいて第1動画をフォアグラウンドで再生する。そして、動画配信システム1は、図5に示す処理を終了する。
図6に示す処理は、動画再生装置10が、ユーザから切替操作を受け付ける場合における処理の流れを示す。
(ステップS202)動画再生装置10は、ユーザから受け付けた切替操作に応じて切替先動画(第2動画)を決定する。その後、動画配信システム1は、ステップS204に処理を進める。
(ステップS204)動画再生装置10は、第2動画のMPDファイル取得要求を動画配信装置30に送信する。その後、動画配信システム1は、ステップS206に処理を進める。
(ステップS208)動画再生装置10は、MPDファイルを取得し、取得したMPDファイルの内容を解釈する。その後、動画配信システム1は、ステップS210に処理を進める。
(ステップS212)動画配信装置30は、動画再生装置10から要求された第2動画の動画ファイルを動画再生装置10に送信する。その後、動画配信システム1は、ステップS214に処理を進める。なお、ステップS210、S212の処理は、第2動画の全ての動画ファイルが取得されるまで、又は、第2動画とは異なる他の動画への第2動画からの切替処理が完了するまでの間、繰り返し実行される。
(ステップS216)動画再生装置10は、第1動画と第2動画との同期処理を実行する。同期処理が完了するまでの間、動画再生装置10は、第1動画をフォアグラウンドで再生し、第2動画をバックグラウンドで再生する。その後、動画配信システム1は、ステップS218に処理を進める。
(ステップS220)動画再生装置10は、第1動画の再生を停止する。また、動画再生装置10は、第1動画の動画ファイルの取得を停止する。そして、動画配信システム1は、図6に示す処理を終了する。
図7に示す処理は、図6のステップS130の処理に相当する。
(ステップS300)制御部160の切替制御部165は、第2動画の再生時刻を初期値に設定する。具体的には、動画再生装置10は、例えば、第1動画の再生時刻と同一の再生時刻を第2動画の再生時刻として設定する。その後、制御部160は、ステップS302に処理を進める。
(ステップS304)切替制御部165は、再生要求を出力した再生要求出力時刻(Ta)を取得し、記録する。その後、制御部160は、ステップS306に処理を進める。
(ステップS306)切替制御部165は、第2動画の再生が開始されたか否かを判定する。具体的には、切替制御部165は、動画再生部161からPlayingイベントの発生が通知されたか否かを判定する。第2動画の再生が開始された場合(ステップS306;YES)、制御部160は、ステップS308に処理を進める。また、第2動画の再生が開始されていない場合(ステップS306;NO)、制御部160は、ステップS306の処理を繰り返す。
(ステップS310)切替制御部165は、再生要求を行ってから再生開始までの時間差、すなわち再生タイムラグ(Tb−Ta)を算出する。その後、制御部160は、ステップS312に処理を進める。
(ステップS314)切替制御部165は、第2動画の再生時刻(Tn)を取得する。具体的には、切替制御部165は、例えば、第2動画のビデオ要素におけるvideo.currentTimeの値を取得する。その後、制御部160は、ステップS316に処理を進める。
(ステップS318)切替制御部165は、第2動画の再生時刻を補正する。具体的には、切替制御部165は、第2動画の再生時刻として、現在の再生時刻(Tn)に再生タイムラグ(Tb−Ta)を加算した時刻を設定する。その後、制御部160は、ステップS302に処理を戻す。
以上説明したように、本実施形態に係る第1動画(例えば、切替元動画)及び第2動画(例えば、切替先動画)を再生する動画再生部161と、第1動画の表示から第2動画の表示に切り替える指示を受けると、第2動画の再生を開始するよう動画再生部161を制御するとともに、第1動画の再生と第2動画の再生とが同期するよう動画再生部161を制御し、第1動画の再生と第2動画の再生とが同期した後に、動画再生部161から表示出力させる動画を第1動画から第2動画に切り替える切替制御部165と、を備える。
従来、MPDファイルにおいて、複数の動画の配信順序や時間などの編成を予め記述しておくことで、これらの複数の動画を連続再生することができる。ユーザの操作に応じたインタラクティブな動画の切り替えを提供する場合、ユーザの操作が発生するタイミングも、切替先の動画もわからない。従って、この技術によりユーザの操作に応じたインタラクティブな動画の切り替えを提供するには、切替操作の発生タイミング、切替先等のあらゆる切り替えパターンを想定し、これらあらゆるパターンに対応するMPDファイルを予め用意しておかなくてはならない。このようなあらゆる切り替えパターンに対応するMPDファイルを用意することは現実的には困難であった。
10 動画再生装置
110 入力部
120 通信部
130 表示部
140 音声出力部
150 記憶部
151 ブラウザ記憶部
152 Webアプリ記憶部
160 制御部
161 動画再生部
162 動画決定部
163 MPD取得部
164 動画取得部
165 切替制御部
30 動画配信装置
N ネットワーク
Claims (5)
- 第1動画及び第2動画を再生する動画再生部と、
前記第1動画の表示から前記第2動画の表示に切り替える指示を受けると、前記第2動画の再生を開始するよう前記動画再生部を制御するとともに、前記第1動画の再生と前記第2動画の再生とが同期するよう前記動画再生部を制御し、前記第1動画の再生と前記第2動画の再生とが同期した後に、前記動画再生部から表示出力させる動画を前記第1動画から前記第2動画に切り替える切替制御部と、
を備えることを特徴とする動画再生装置。 - 前記切替制御部は、前記動画再生部に対して前記第2動画の再生を指示してから、前記動画再生部が前記第2動画の再生を開始するまでの時間差に基づいて、前記動画再生部における同期を制御する、
ことを特徴とする請求項1に記載の動画再生装置。 - 外部からの入力に基づいて前記第2動画を決定する動画決定部、
をさらに備えることを特徴とする請求項1又は請求項2に記載の動画再生装置。 - 前記第2動画は、前記第1動画の表示領域の一部を拡大した動画であり、
前記動画決定部は、表示出力されている前記第1動画の表示領域内を選択する入力に基づいて、前記第2動画を決定する、
ことを特徴とする請求項3に記載の動画再生装置。 - コンピュータに、
第1動画を再生する第1動画再生ステップと、
前記第1動画の表示から第2動画の表示に切り替える指示を受けると、前記第2動画の再生を開始する第2動画再生ステップと、
前記第1動画の再生と前記第2動画の再生とが同期するように制御する同期制御ステップと、
前記第1動画の再生と前記第2動画の再生とが同期した後に、表示出力させる動画を前記第1動画から前記第2動画に切り替える切替制御ステップと、
を実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015077976A JP6506084B2 (ja) | 2015-04-06 | 2015-04-06 | 動画再生装置及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015077976A JP6506084B2 (ja) | 2015-04-06 | 2015-04-06 | 動画再生装置及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019061178A Division JP2019106732A (ja) | 2019-03-27 | 2019-03-27 | 動画再生装置及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016197845A true JP2016197845A (ja) | 2016-11-24 |
JP6506084B2 JP6506084B2 (ja) | 2019-04-24 |
Family
ID=57358545
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015077976A Active JP6506084B2 (ja) | 2015-04-06 | 2015-04-06 | 動画再生装置及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6506084B2 (ja) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10145735A (ja) * | 1996-11-05 | 1998-05-29 | Toshiba Corp | 復号装置および画像/音声再生方法 |
US20020122430A1 (en) * | 2000-09-29 | 2002-09-05 | Seth Haberman | System and method for seamless switching |
JP2003189177A (ja) * | 2001-12-18 | 2003-07-04 | Sharp Corp | 端末装置 |
JP2004104704A (ja) * | 2002-09-12 | 2004-04-02 | Toshiba Solutions Corp | 映像再生装置、映像再生方法、プログラム |
WO2005006748A1 (ja) * | 2003-07-10 | 2005-01-20 | Fujitsu Limited | メディア再生装置 |
JP2010028232A (ja) * | 2008-07-15 | 2010-02-04 | Sony Corp | 通信制御装置および通信制御方法 |
JP2012105236A (ja) * | 2010-11-15 | 2012-05-31 | Renesas Electronics Corp | 同期制御装置、同期制御方法 |
JP2013125986A (ja) * | 2011-12-13 | 2013-06-24 | Sanyo Electric Co Ltd | デジタル放送受信装置 |
WO2015001985A1 (ja) * | 2013-07-02 | 2015-01-08 | ソニー株式会社 | コンテンツ供給装置、コンテンツ供給方法、プログラム、端末装置、およびコンテンツ供給システム |
-
2015
- 2015-04-06 JP JP2015077976A patent/JP6506084B2/ja active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10145735A (ja) * | 1996-11-05 | 1998-05-29 | Toshiba Corp | 復号装置および画像/音声再生方法 |
US20020122430A1 (en) * | 2000-09-29 | 2002-09-05 | Seth Haberman | System and method for seamless switching |
JP2003189177A (ja) * | 2001-12-18 | 2003-07-04 | Sharp Corp | 端末装置 |
JP2004104704A (ja) * | 2002-09-12 | 2004-04-02 | Toshiba Solutions Corp | 映像再生装置、映像再生方法、プログラム |
WO2005006748A1 (ja) * | 2003-07-10 | 2005-01-20 | Fujitsu Limited | メディア再生装置 |
JP2010028232A (ja) * | 2008-07-15 | 2010-02-04 | Sony Corp | 通信制御装置および通信制御方法 |
JP2012105236A (ja) * | 2010-11-15 | 2012-05-31 | Renesas Electronics Corp | 同期制御装置、同期制御方法 |
JP2013125986A (ja) * | 2011-12-13 | 2013-06-24 | Sanyo Electric Co Ltd | デジタル放送受信装置 |
WO2015001985A1 (ja) * | 2013-07-02 | 2015-01-08 | ソニー株式会社 | コンテンツ供給装置、コンテンツ供給方法、プログラム、端末装置、およびコンテンツ供給システム |
Also Published As
Publication number | Publication date |
---|---|
JP6506084B2 (ja) | 2019-04-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102087533B1 (ko) | 통신 장치, 통신 제어 방법, 및 컴퓨터 프로그램 | |
JP5267165B2 (ja) | ストリーミング配信システム、その動作制御方法及びプログラム | |
JP5461454B2 (ja) | 映像分割再生方法、映像再生方法、映像分割再生システム、及び映像分割再生プログラム | |
US10423320B2 (en) | Graphical user interface for navigating a video | |
US20140168277A1 (en) | Adaptive Presentation of Content | |
US20190149885A1 (en) | Thumbnail preview after a seek request within a video | |
CN106233745A (zh) | 向客户端提供瓦片视频流 | |
JP6642427B2 (ja) | 情報処理装置および方法 | |
JP2013134762A (ja) | 画像処理システム、画像提供サーバ、情報処理装置、および画像処理方法 | |
CN111556357B (zh) | 直播视频的播放方法、装置、设备及存储介质 | |
TW201942821A (zh) | 資訊處理裝置、資訊處理方法、及程式 | |
US10573198B2 (en) | Video playback device and method | |
TW201942713A (zh) | 資訊處理裝置、資料處理方法、及程式 | |
JP5780611B2 (ja) | 画像表示方法、映像処理システム、携帯端末、及び携帯端末の操作プログラム | |
JP6506084B2 (ja) | 動画再生装置及びプログラム | |
JP2019106732A (ja) | 動画再生装置及びプログラム | |
KR101930352B1 (ko) | 스마트 사이니지를 활용한 멀티비전 서비스 방법 | |
CN112118473B (zh) | 视频弹幕显示方法、装置、计算机设备及可读存储介质 | |
JP2019033362A (ja) | 配信装置、受信装置及びプログラム | |
JP6590433B2 (ja) | 動画再生管理方法、システムおよびプログラム | |
CN114731463A (zh) | 数据处理设备及其控制方法和程序 | |
JP6647131B2 (ja) | 配信装置及びプログラム | |
JP6623905B2 (ja) | サーバ装置、情報処理方法およびプログラム | |
KR101805302B1 (ko) | 멀티미디어 컨텐츠 재생 장치 및 방법 | |
JP7101336B2 (ja) | Cta表示プログラム、情報処理装置、cta表示方法、および動画再生システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180226 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180921 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181002 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20181026 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181116 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190226 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190328 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6506084 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |