JP6053180B2 - Video playback state estimation device, video playback state estimation method, and program - Google Patents

Video playback state estimation device, video playback state estimation method, and program Download PDF

Info

Publication number
JP6053180B2
JP6053180B2 JP2014028927A JP2014028927A JP6053180B2 JP 6053180 B2 JP6053180 B2 JP 6053180B2 JP 2014028927 A JP2014028927 A JP 2014028927A JP 2014028927 A JP2014028927 A JP 2014028927A JP 6053180 B2 JP6053180 B2 JP 6053180B2
Authority
JP
Japan
Prior art keywords
chunk
chunks
time
image quality
state estimation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2014028927A
Other languages
Japanese (ja)
Other versions
JP2015154422A (en
Inventor
泰理 本多
泰理 本多
山本 浩司
浩司 山本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2014028927A priority Critical patent/JP6053180B2/en
Publication of JP2015154422A publication Critical patent/JP2015154422A/en
Application granted granted Critical
Publication of JP6053180B2 publication Critical patent/JP6053180B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Description

本発明は、プログレッシブダウンロード型映像配信アプリケーションを対象として、網内もしくはヘッドエンドで取得したパケットキャプチャデータに基づく再生状態推定を行う技術に関するものである。   The present invention relates to a technique for estimating a reproduction state based on packet capture data acquired in a network or at a head end for a progressive download video distribution application.

スマートフォンやタブレット端末の普及を背景に、プログレッシブダウンロード型映像配信サービスの普及が著しい。一般にプログレッシブダウンロード型映像配信アプリケーションは、再生開始までに一定量のバッファリングを要することを特徴とし、ネットワーク条件の劣化に起因する再生品質劣化の軽減が可能である一方、ネットワーク条件の劣化等により再生バッファ内の蓄積データ量が低下した場合、再生が停止する場合がある(非特許文献1)。   With the spread of smartphones and tablet terminals, the progressive download video distribution service has become very popular. In general, progressive download video distribution applications require a certain amount of buffering before playback starts, and can reduce playback quality degradation due to degradation of network conditions, while playback due to degradation of network conditions, etc. When the amount of data stored in the buffer decreases, playback may stop (Non-Patent Document 1).

このため近年、サーバもしくはクライアント端末上のアプリケーションがネットワーク状態を観測し、その変化に応じて動的にコンテンツのビットレート(画質)を変更する方式(adaptive streaming)が普及している。例えばHTTP Live Streaming(HLS)、HTTP Dynamic Streaming(HDS)などがその代表例であるが、2012年7月にはこれらベンダ依存の方式を統合する形でISOにおいて国際標準規格MPEG-DASHが制定されている(非特許文献2)。Adaptive streamingに対する国際規格の整理はその周辺技術に関して現在も進行しており、今後も採用するアプリケーションが増大する傾向にあると考えられる。実際、近年、主要なプログレッシブダウンロード型映像配信サービスが、MPEG/DASHに準拠したadaptive streaming方式を採用している。   Therefore, in recent years, a method (adaptive streaming) in which an application on a server or a client terminal observes a network state and dynamically changes a content bit rate (image quality) in accordance with the change has become widespread. For example, HTTP Live Streaming (HLS) and HTTP Dynamic Streaming (HDS) are typical examples. In July 2012, the international standard MPEG-DASH was established in ISO by integrating these vendor-dependent methods. (Non-patent document 2). The organization of international standards for adaptive streaming is still in progress with regard to its peripheral technologies, and it is thought that the number of applications to be adopted will continue to increase. In fact, in recent years, major progressive download video distribution services have adopted an adaptive streaming system that complies with MPEG / DASH.

通信事業者としては、こうしたOTT(Over The Topの略。動画データや音声データなどのコンテンツを通信事業者のサービスによらずに提供すること。)系のサービスについても、ユーザのアプリケーション利用品質を把握することは、網設計・オペレーション双方の観点で重要である。   For telecommunications carriers, OTT (abbreviation of Over The Top. Providing content such as video data and audio data without relying on the services of telecommunications carriers.) Understanding this is important from the perspective of both network design and operation.

プログレッシブダウンロード型映像配信サービスについては、網内もしくはヘッドエンドで取得したキャプチャデータに基づき、プログレッシブダウンロード型映像サービスの品質推定を実現する技術がこれまでに提案されている(非特許文献1, 3, 4)。これらは、パケットキャプチャデータから端末の受信バイト量時系列を把握し、プレイアウトバッファモデルへ入力することで再生停止状態の推定を実現するものである。これらの技術を利用することにより、所与のパケットキャプチャデータから、個々のセッションの映像再生状態を推定可能である。また、再生停止回数、再生停止時間等のアプリケーションレベルの品質指標に基づきユーザ体感品質、すなわちQoE(Quality of Experience)の表現を求める手段については非特許文献5-7において提案されている。   With regard to progressive download video distribution services, technologies have been proposed to realize quality estimation of progressive download video services based on capture data acquired in the network or at the headend (Non-Patent Documents 1, 3, Four). In these methods, the received byte amount time series of the terminal is grasped from the packet capture data and input to the playout buffer model to realize the reproduction stop state estimation. By using these techniques, it is possible to estimate the video playback state of each session from given packet capture data. Further, Non-Patent Document 5-7 proposes means for obtaining user experience quality, that is, QoE (Quality of Experience) expression based on application level quality indicators such as the number of times playback is stopped and playback stop time.

なお、プログレッシブダウンロード型のコンテンツ配信では、単一のコンテンツであっても、複数の単位に分割して配信を行う形態が多い。分割された各単位をチャンクと呼び、このような配信方式をチャンク型のコンテンツ配信方式と呼ぶ。チャンク型のコンテンツ配信の動作イメージを図1に示す。図1に示すとおり、受信したパケットからチャンクを取得し、チャンク単位で再生バッファに格納され、再生(デコード)される。   In the progressive download type content distribution, even a single content is often distributed in a plurality of units. Each divided unit is called a chunk, and such a distribution method is called a chunk-type content distribution method. An operation image of chunk type content distribution is shown in FIG. As shown in FIG. 1, a chunk is acquired from the received packet, stored in a playback buffer in units of chunk, and played (decoded).

池上大介、本多泰理、山本浩司他:「プログレッシブダウンロード系サービスの停止時間推定法」信学技報, vol. 111, no. 278, CQ2011-59, pp. 91-96, 2011年11月.Daisuke Ikegami, Yasunori Honda, Koji Yamamoto et al .: "Progressive download service stop time estimation method" IEICE Technical Report, vol. 111, no. 278, CQ2011-59, pp. 91-96, November 2011 . ISO/IEC 23009-1:2012, Information technology -- Dynamic adaptive streaming over HTTP (DASH) -- Part 1: Media presentation description and segment formats, http://www.iso.org/iso/iso_catalogue/catalogue_tc/catalogue_detail.htm?csnumber=57623ISO / IEC 23009-1: 2012, Information technology-Dynamic adaptive streaming over HTTP (DASH)-Part 1: Media presentation description and segment formats, http://www.iso.org/iso/iso_catalogue/catalogue_tc/catalogue_detail .htm? csnumber = 57623 池上大介, 本多泰理, 山本浩司:「チャンク型映像配信サービスにおける再生状態推定法の検討」, 電子情報通信学会総合大会, B-11-24, 2012年3月.Daisuke Ikegami, Yasunori Honda, Koji Yamamoto: "Examination of playback state estimation method for chunked video distribution service", IEICE General Conference, B-11-24, March 2012. 本多泰理, 池上大介, 山本浩司:「Ack観測による映像再生状態推定法の検討」, 電子情報通信学会総合大会, B-11-25, 2012年3月.Yasutoshi Honda, Daisuke Ikegami, Koji Yamamoto: "Study of video playback state estimation method by Ack observation", IEICE General Conference, B-11-25, March 2012. ITU-T勧告P.1201.1.ITU-T recommendation P.1201.1. Tobias Hobfeld R. Schatz, E. Biersack, Internet Video Delivery in YouTube(登録商標): From Traffic Measurements to Quality of Experience, Data Traffic Monitoring and Analysis, Lecture notes in Computer Science 7754 (2013), 264?301.Tobias Hobfeld R. Schatz, E. Biersack, Internet Video Delivery in YouTube®: From Traffic Measurements to Quality of Experience, Data Traffic Monitoring and Analysis, Lecture notes in Computer Science 7754 (2013), 264? 301. R. K. P. Mok, Edmond W. W. Chan, and Rocky K. C. Chang, Measuring the Quality of Experience of HTTP Video Streaming, Proc. W-MUST 2011(2011).R. K. P. Mok, Edmond W. W. Chan, and Rocky K. C. Chang, Measuring the Quality of Experience of HTTP Video Streaming, Proc. W-MUST 2011 (2011).

しかしながら、非特許文献1, 3, 4に記載の従来技術は、端末のバッファモデルにおいて非常に小さい固定時間単位毎にシミュレーションを行い、各時刻においてバッファ内に蓄積されているデータ量を推定する。このため、シミュレーション実行時の計算量が膨大であるという課題を有していた。また、対象とするアプリケーションがadaptive streamingに対応している場合を勘案していない。このためadaptive streaming対応アプリケーションに適用した場合、実態と乖離した推定結果を出力する懸念が存在した。   However, the conventional techniques described in Non-Patent Documents 1, 3, and 4 perform simulation for each very small fixed time unit in the buffer model of the terminal, and estimate the amount of data stored in the buffer at each time. For this reason, the calculation amount at the time of simulation execution has a problem that it is enormous. In addition, the case where the target application supports adaptive streaming is not taken into consideration. For this reason, when applied to an application that supports adaptive streaming, there was a concern of outputting an estimation result that deviated from the actual situation.

本発明は上記の点に鑑みてなされたものであり、映像データをチャンク単位で端末に配信する映像配信方式における映像データの再生状態推定において、計算量を削減するための技術を提供することを目的とする。また、本発明は、adaptive streamingのように、映像データを配信中に画質の遷移がある場合においても、計算量を削減した再生状態推定を可能とする技術を提供することを目的としている。   The present invention has been made in view of the above points, and provides a technique for reducing the amount of calculation in estimating the reproduction state of video data in a video distribution method in which video data is distributed to terminals in units of chunks. Objective. Another object of the present invention is to provide a technique that enables estimation of a playback state with a reduced amount of calculation even when there is a transition in image quality during distribution of video data, such as adaptive streaming.

本発明の実施の形態によれば、配信サーバから映像データをチャンク単位で端末に配信する映像配信方式において、端末における映像データの再生状態を推定する映像再生状態推定装置であって、
ある時刻に到着した対象チャンクについて、当該対象チャンクの1つ前のチャンクの到着時刻の再生済みチャンク数に、当該対象チャンクの1つ前のチャンクの到着時刻から当該対象チャンクの到着時刻までに再生されたと推定される推定再生チャンク数を加えることにより仮再生済みチャンク数を算出する算出手段と、
前記仮再生済みチャンク数と、前記対象チャンクの1つ前のチャンクまでの累積受信チャンク数とを比較することにより再生状態を推定する推定手段とを備える映像再生状態推定装置が提供される。
According to an embodiment of the present invention, in a video distribution method for distributing video data from a distribution server to a terminal in units of chunks, a video playback state estimation device for estimating a playback state of video data in a terminal,
For the target chunk that arrived at a certain time, the number of regenerated chunks at the arrival time of the chunk before the target chunk is played back from the arrival time of the chunk immediately before the target chunk to the arrival time of the target chunk. Calculating means for calculating the number of provisionally played chunks by adding the estimated number of played chunks estimated to have been played,
There is provided a video playback state estimation device comprising estimation means for estimating a playback state by comparing the number of provisionally played chunks and the cumulative number of received chunks up to the chunk immediately before the target chunk.

本発明の実施の形態によれば、映像データをチャンク単位で端末に配信する映像配信方式における映像データの再生状態推定において、従来技術に比べて計算量を削減することが可能となる。   According to the embodiment of the present invention, it is possible to reduce the amount of calculation in the video data reproduction state estimation in the video distribution method in which the video data is distributed to the terminal in units of chunks as compared with the conventional technique.

本発明の実施の形態によれば、画質遷移表等を用いた構成を採用することで、adaptive streamingのように、映像データを配信中に画質の遷移がある場合においても、計算量を削減した再生状態推定を行うことが可能となる。   According to the embodiment of the present invention, by adopting a configuration using an image quality transition table or the like, the amount of calculation is reduced even when there is a transition in image quality during distribution of video data, such as adaptive streaming. It is possible to perform reproduction state estimation.

チャンク型配信の動作イメージを示す図である。It is a figure which shows the operation | movement image of chunk type | mold delivery. 本発明の実施の形態に係る映像再生状態推定装置10の構成図である。1 is a configuration diagram of a video playback state estimation device 10 according to an embodiment of the present invention. チャンク画質レベルマッピング表の例を示す図である。It is a figure which shows the example of a chunk image quality level mapping table. 画質遷移表の例を示す図である。It is a figure which shows the example of an image quality transition table. 映像再生状態推定装置10の動作を説明するためのフローチャートである。5 is a flowchart for explaining the operation of the video reproduction state estimation device 10. 画質遷移時のチャンク破棄動作のイメージを示す図である。It is a figure which shows the image of the chunk discard operation | movement at the time of image quality transition. 本実施の形態に係る映像再生状態推定装置10による推定値と、目視による観測値を示す図である。It is a figure which shows the estimated value by the video reproduction state estimation apparatus 10 concerning this Embodiment, and the observation value by visual observation.

以下、図面を参照して本発明の実施の形態を説明する。なお、以下で説明する実施の形態は一例に過ぎず、本発明が適用される実施の形態は、以下の実施の形態に限られるわけではない。例えば、本実施の形態では、プログレッシブダウンロード型映像配信サービスを対象としているが、本発明の適用先はこれに限られるわけではなく、他の方式のコンテンツ配信サービスにも適用可能である。   Embodiments of the present invention will be described below with reference to the drawings. The embodiment described below is only an example, and the embodiment to which the present invention is applied is not limited to the following embodiment. For example, in this embodiment, the progressive download video distribution service is targeted, but the application destination of the present invention is not limited to this, and the present invention can also be applied to other types of content distribution services.

(装置構成)
図2は、本発明の実施の形態に係る映像再生状態推定装置10の機能構成図である。図2に示すように、本実施の形態に係る映像再生状態推定装置10は、キャプチャデータを解析するキャプチャデータ解析部1、チャンクの時系列を解析するチャンク時系列解析部2、端末における再生状態を推定する再生状態推定部3を有する。
(Device configuration)
FIG. 2 is a functional configuration diagram of the video reproduction state estimation device 10 according to the embodiment of the present invention. As shown in FIG. 2, the video playback state estimation apparatus 10 according to the present embodiment includes a capture data analysis unit 1 that analyzes capture data, a chunk time series analysis unit 2 that analyzes the time series of chunks, and a playback state in a terminal A reproduction state estimation unit 3 for estimating.

なお、本実施の形態では、映像再生状態推定装置10の外部で、配信サーバから端末に配信される映像データのパケットをキャプチャし、当該キャプチャしたデータをパケットキャプチャデータとして入力しているが、映像再生状態推定装置10がパケットをキャプチャする機能を含んでもよい。また、映像再生状態推定装置10の各機能部は物理的には別々の筐体にて動作してもよい。   In this embodiment, a packet of video data distributed from the distribution server to the terminal is captured outside the video reproduction state estimation device 10, and the captured data is input as packet capture data. The reproduction state estimation device 10 may include a function of capturing a packet. Further, each functional unit of the video reproduction state estimation device 10 may physically operate in a separate casing.

本実施の形態に係る映像再生状態推定装置10は、例えば、1つ又は複数のコンピュータに、本実施の形態で説明する処理内容を記述したプログラムを実行させることにより実現可能である。すなわち、映像再生状態推定装置10が有する機能は、当該コンピュータに内蔵されるCPUやメモリ、ハードディスクなどのハードウェア資源を用いて、映像再生状態推定装置10で実施される処理に対応するプログラムを実行することによって実現することが可能である。また、上記プログラムは、コンピュータが読み取り可能な記録媒体(可搬メモリ等)に記録して、保存したり、配布したりすることが可能である。また、上記プログラムをインターネットや電子メールなど、ネットワークを通して提供することも可能である。   The video reproduction state estimation apparatus 10 according to the present embodiment can be realized by causing, for example, one or a plurality of computers to execute a program describing the processing contents described in the present embodiment. That is, the function of the video playback state estimation device 10 executes a program corresponding to the processing executed by the video playback state estimation device 10 using hardware resources such as a CPU, a memory, and a hard disk built in the computer. This can be realized by doing so. Further, the program can be recorded on a computer-readable recording medium (portable memory or the like), stored, or distributed. It is also possible to provide the program through a network such as the Internet or electronic mail.

上記の構成を備える本実施の形態に係る映像再生状態推定装置10における各機能部の概要は以下のとおりである。   The outline of each functional unit in the video reproduction state estimation device 10 according to the present embodiment having the above-described configuration is as follows.

<キャプチャデータ解析部1>
キャプチャデータ解析部1は、入力されたパケットキャプチャデータから、推定対象の映像フロー中に含まれるチャンクの到着時刻及びチャンク長情報(例:バイト量)を抽出し、チャンク時系列として出力する。このチャンクの時系列のデータ(到着時刻、チャンク長)は、例えば、チャンク番号と対応させた2次元の配列としてメモリ等の記憶手段に保持することができる。
<Capture data analysis unit 1>
The capture data analysis unit 1 extracts the arrival time and chunk length information (eg, byte amount) of the chunk included in the estimation target video flow from the input packet capture data, and outputs it as a chunk time series. The chunk time-series data (arrival time, chunk length) can be held in a storage unit such as a memory as a two-dimensional array corresponding to the chunk number, for example.

パケットキャプチャデータからチャンクの到着時刻(チャンクのダウンロードが完了した時刻)を推定する方法は特定の方法に限られないが、例えば、HTTP GETメッセージのレスポンスタイミングを用いる方法、TCPパケットのヘッダ情報を用いる方法等がある。   The method for estimating the arrival time of a chunk from the packet capture data (time when the downloading of the chunk is completed) is not limited to a specific method. For example, the method using the response timing of the HTTP GET message, the header information of the TCP packet is used. There are methods.

<チャンク時系列解析部2>
チャンク時系列解析部2は、キャプチャデータ解析部1により取得されたチャンク時系列のデータと、チャンク画質レベルマッピング表を入力として、各チャンクが属する画質レベルを判定し、チャンク画質時系列を出力する。チャンク画質時系列は、前述したチャンク時系列のデータにおいて、チャンク毎に画質が加えられたデータである。
<Chunk time series analysis unit 2>
The chunk time series analysis unit 2 receives the chunk time series data acquired by the capture data analysis unit 1 and the chunk image quality level mapping table, determines the image quality level to which each chunk belongs, and outputs the chunk image quality time series. . The chunk image quality time series is data in which image quality is added to each chunk in the above-described chunk time series data.

チャンク画質レベルマッピング表は、例えば図3に示すように、予め定めた画質レベル(例:高、中、低)と、チャンク長(図3では、チャンク長基本領域と記載)とを対応付た表である。つまり、チャンク長が長いほうが高画質と推定されることから、このようなマッピング表により、チャンク毎の画質を推定するものである。例えば、図3のマッピング表から、チャンク長が2MBのチャンクの画質は1(高画質)であると推定される。   For example, as shown in FIG. 3, the chunk image quality level mapping table associates a predetermined image quality level (eg, high, medium, low) with a chunk length (described as a chunk length basic area in FIG. 3). It is a table. That is, since the longer chunk length is estimated to be high image quality, the image quality for each chunk is estimated using such a mapping table. For example, from the mapping table in FIG. 3, it is estimated that the image quality of a chunk having a chunk length of 2 MB is 1 (high image quality).

また、チャンク時系列解析部2は、チャンク画質時系列に基づいて、チャンク毎に前のチャンクから画質が遷移したかどうかをチェックし、画質の遷移が発生したチャンクについては、当該チャンクの到着時刻、画質及び当該時点における累積受信チャンク数を画質遷移表に蓄積していく。画質遷移表は、映像再生状態推定装置10における記憶手段に格納されるテーブルデータである。図4に画質遷移表の一例を示す。画質遷移表の使用方法については後述する。   Also, the chunk time series analysis unit 2 checks whether the image quality has changed from the previous chunk for each chunk based on the chunk image quality time series, and for the chunk where the image quality transition has occurred, the arrival time of the chunk The image quality and the cumulative number of received chunks at that time are accumulated in the image quality transition table. The image quality transition table is table data stored in storage means in the video reproduction state estimation device 10. FIG. 4 shows an example of the image quality transition table. A method of using the image quality transition table will be described later.

<再生状態推定部3>
再生状態推定部3は、外部から入力される画質毎のチャンクあたり再生時間長、及びチャンク時系列解析部2からの出力であるチャンク画質時系列のデータと画質遷移表に基づいて、端末における再生状態を、再生時の画質レベルも含めて推定する。つまり、ある時刻において再生中であるのかそれとも再生停止中であるのか、再生中であれば、どの画質のチャンクを再生しているのかを推定できる。当該再生状態推定部3は、画質を含む再生状態を時系列で記録した再生状態推定結果を出力する。
<Playback state estimation unit 3>
The playback state estimation unit 3 performs playback on the terminal based on the playback time length per chunk for each image quality input from the outside, the chunk image quality time series data output from the chunk time series analysis unit 2, and the image quality transition table. The state is estimated including the image quality level at the time of reproduction. That is, it is possible to estimate which chunk of image quality is being played back if playback is in progress at a certain time, playback is stopped, or playback is in progress. The playback state estimation unit 3 outputs a playback state estimation result in which playback states including image quality are recorded in time series.

(映像再生状態推定装置10の動作)
次に、上記の構成を備える映像再生状態推定装置10の動作を詳細に説明する。図5は、映像再生状態推定装置10の動作を示すフローチャートである。
(Operation of video playback state estimation device 10)
Next, the operation of the video playback state estimation device 10 having the above configuration will be described in detail. FIG. 5 is a flowchart showing the operation of the video reproduction state estimation device 10.

本実施の形態に係る映像再生状態推定装置10における動作として、入力されたパケットキャプチャデータからチャンクの到着(チャンクのダウンロード完了)を識別する度に、キャプチャデータ解析部1により得られたチャンクのデータ(到着時刻、チャンク長)に基づいて画質判定及び再生状態推定を行うこととしてもよいし、キャプチャデータ解析部1によりパケットキャプチャデータからチャンク全部の時系列データを求め、それを記憶手段に格納しておき、当該記憶手段からチャンクのデータ(到着時刻、チャンク長)をチャンクの到着順に読み出すことで、画質判定及び再生状態推定を行うこととしてもよい。両者間に本質的な相違はないが、本実施の形態では、前者を想定している。   As an operation in the video reproduction state estimation device 10 according to the present embodiment, the chunk data obtained by the capture data analysis unit 1 each time the arrival of the chunk (chunk download completion) is identified from the input packet capture data. Image quality determination and reproduction state estimation may be performed based on (arrival time, chunk length), or time series data of all chunks is obtained from the packet capture data by the capture data analysis unit 1 and stored in the storage means. The image quality determination and the reproduction state estimation may be performed by reading out chunk data (arrival time, chunk length) from the storage unit in the order of arrival of the chunks. Although there is no essential difference between the two, in the present embodiment, the former is assumed.

図5のフローチャートにおいて、ステップ0で、キャプチャデータ解析部1がチャンクを識別するための処理を行い、ステップ1においてチャンクの到着が検知されると、当該チャンクについて、図5に示すステップ1以降の手順に従った処理が行われる。以降、チャンクの到着時刻毎に当該手順が繰り返し実行される。   In the flowchart of FIG. 5, in step 0, the capture data analysis unit 1 performs a process for identifying a chunk. When the arrival of the chunk is detected in step 1, the chunk is detected after step 1 shown in FIG. Processing according to the procedure is performed. Thereafter, the procedure is repeatedly executed for each arrival time of the chunk.

以下ではまず、チャンクの画質遷移がない場合における基本的な再生状態推定処理について説明し、その次に画質遷移がある場合の処理について説明する。画質遷移がない場合の処理は、図5のフローチャートにおけるステップ5もしくはステップ8に至る場合の処理に該当する。画質遷移がある場合の処理は、図5のフローチャートにおけるステップ9に至る場合の処理に該当する。図5のフローチャートに沿った説明は、画質遷移がある場合の処理の説明の中で行う。   In the following, a basic reproduction state estimation process when there is no chunk image quality transition will be described first, followed by a process when there is an image quality transition. The process when there is no image quality transition corresponds to the process when reaching step 5 or step 8 in the flowchart of FIG. The process when there is an image quality transition corresponds to the process when reaching step 9 in the flowchart of FIG. The description along the flowchart of FIG. 5 will be given in the description of the processing when there is an image quality transition.

<チャンクの画質遷移がない場合における基本的な再生状態推定処理>
まず、処理内容を分かり良く説明するために、1番目と2番目のチャンクについて述べる。
<Basic playback state estimation processing when there is no image quality transition of chunks>
First, the first and second chunks will be described in order to explain the processing details.

最初の到着時刻におけるチャンクについて、当該時刻における累積受信チャンク数を"1"として記録する。ここで、累積受信チャンク数を記録するとは、変数(具体的にはi)に累積受信チャンク数を格納することである。iへの累積受信チャンク数の格納は、チャンク到着の度に行われる。   For the chunk at the first arrival time, the cumulative number of received chunks at that time is recorded as “1”. Here, recording the cumulative number of received chunks means storing the cumulative number of received chunks in a variable (specifically, i). The number of accumulated received chunks in i is stored each time a chunk arrives.

次に、2番目のチャンクが到着したものとする。再生状態推定部3は、以下のようにしてこの時点での再生状態の推定を行う。   Now assume that the second chunk has arrived. The reproduction state estimation unit 3 estimates the reproduction state at this time as follows.

まず、再生状態推定部3は、第1チャンク到着時の再生済みチャンク数(本例では最初なので0である)に、下記の式(1)で算出される値を加算して現時刻(第2チャンク到着時刻)における仮再生済みチャンク数を算出する。
{(第2チャンク到着時刻)-(第1チャンク到着時刻)}
/(第1チャンクのチャンクあたり再生時間)・・・(1)
第2チャンク到着前に再生が停止している場合があるため、上記の式(1)で得られる値(正の実数値)は再生済みチャンク数よりも大きくなる場合があることから、上記の式(1)の値に第1チャンク到着時の再生済みチャンク数を加算して得られた値を「仮再生済みチャンク数」と呼んでいる。
First, the playback state estimation unit 3 adds the value calculated by the following equation (1) to the number of played back chunks at the time of arrival of the first chunk (in this example, 0 because it is the first), The number of provisionally reclaimed chunks at (2 chunk arrival time) is calculated.
{(Second chunk arrival time)-(First chunk arrival time)}
/ (Reproduction time per chunk of the first chunk) ... (1)
Since playback may stop before the second chunk arrives, the value (positive real value) obtained by the above equation (1) may be larger than the number of played chunks. A value obtained by adding the number of regenerated chunks when the first chunk arrives to the value of equation (1) is referred to as “temporarily regenerated chunk number”.

第2チャンク到着時刻において、(仮再生済みチャンク数)≦1であるとすると、再生状態推定部3は現在も再生が継続しているものと判断する。また、(仮再生済みチャンク数)>1の場合には、既に再生停止状態に遷移しているものと判断する。このようにして第2チャンク到着時刻において、再生状態を推定できる。また、チャンク時系列解析部2により第1チャンクの画質を判定するから、第2チャンク到着時刻において、再生中であれば、それがどの画質の再生中であるかも推定できる。再生状態推定部3は、これらの情報を第2チャンク到着時刻における再生状態推定結果として出力することができる。   If (number of provisionally played chunks) ≦ 1 at the second chunk arrival time, the playback state estimation unit 3 determines that the playback is still continuing. Further, when (the number of provisionally played chunks)> 1, it is determined that the playback has already been stopped. In this way, the playback state can be estimated at the second chunk arrival time. Further, since the image quality of the first chunk is determined by the chunk time series analysis unit 2, if it is being reproduced at the second chunk arrival time, it can be estimated which image quality is being reproduced. The reproduction state estimation unit 3 can output such information as a reproduction state estimation result at the second chunk arrival time.

上記のように再生停止状態に遷移しているものと判断した場合、再生状態推定部3は、再生中の状態から再生停止状態へ移行した時刻を次のようにして算出する。   When it is determined that the playback state has been changed to the playback stop state as described above, the playback state estimation unit 3 calculates the time when the playback state is changed to the playback stop state as follows.

まず、再生状態推定部3は、第2チャンク到着時刻における仮再生済みチャンク数を、式(1)に基づき算出する。そして、r1から第2チャンク到着時点の再生済みチャンク数(ここでは"1")を引いた値 (r1-1)を算出する。そして、再生停止発生時刻から現在時刻(第2チャンク到着時刻)までの経過時間dtを下記の式により算出する。   First, the reproduction state estimation unit 3 calculates the number of temporarily reproduced chunks at the second chunk arrival time based on the equation (1). Then, a value (r1-1) obtained by subtracting the number of regenerated chunks (here, “1”) at the time of arrival of the second chunk from r1 is calculated. Then, an elapsed time dt from the reproduction stop occurrence time to the current time (second chunk arrival time) is calculated by the following equation.

dt = (r1-1) × 第1チャンクのチャンクあたり再生時間
そして、再生停止発生時刻r2を下記の式により推定する。
dt = (r1-1) × reproduction time per chunk of the first chunk And reproduction stop occurrence time r2 is estimated by the following formula.

r2 = (現在時刻(ここでは第2チャンク到着時刻)) - dt
従って、時間区間[r2, r2+dt]が再生停止時間であると推定できる。再生状態推定部3は、第2チャンク到着時刻において再生停止状態である場合、当該時間区間[r2, r2+dt]を再生停止時間として出力することができる。
r2 = (current time (second chunk arrival time here))-dt
Therefore, it can be estimated that the time interval [r2, r2 + dt] is the reproduction stop time. When the reproduction state estimation unit 3 is in the reproduction stop state at the second chunk arrival time, the reproduction state estimation unit 3 can output the time interval [r2, r2 + dt] as the reproduction stop time.

以下、チャンク到着時刻毎に同様の処理を反復することで、最終チャンク到着時刻までの再生状態を推定、出力することができる。具体的には、以下にようにして、i番目のチャンク到着毎に再生状態を推定し、出力することができる。   Thereafter, it is possible to estimate and output the reproduction state up to the final chunk arrival time by repeating the same processing for each chunk arrival time. Specifically, the playback state can be estimated and output every time the i-th chunk arrives as follows.

第iチャンク到着時刻における仮再生済みチャンク数をri_preとして、これを
ri_pre = ri-1 + (arrivali - arrivali-1)/li-1・・・(2)
により算出する。ここでarrivaliは第iチャンクの到着時刻、li-1は第(i-1)チャンクのチャンクあたり再生時間を示す。ri-1は第(i-1)チャンク到着時刻における再生済みチャンク数を示す。ここで、riはri=min{i-1, ri_pre}により算出する。つまり、第iチャンク到着時刻における再生済みチャンク数は、i-1とri_preのうちの小さいほうと推定する。第iチャンク到着時刻における再生済みチャンク数は最大でもi-1だからである。ただし、後述するように、画質遷移が生じた場合には、再生済みチャンク数は画質遷移が生じた際の累積受信チャンク数Ci0となる。
The number of provisionally regenerated chunks at the i-th chunk arrival time is defined as r i _pre.
r i _pre = r i-1 + (arrival i -arrival i-1 ) / l i-1 (2)
Calculated by Here, arrival i represents the arrival time of the i- th chunk, and l i−1 represents the reproduction time per chunk of the (i−1) -th chunk. r i-1 indicates the number of regenerated chunks at the (i-1) th chunk arrival time. Here, r i is calculated by r i = min {i−1, r i _pre}. That is, the number of regenerated chunks at the i-th chunk arrival time is estimated to be the smaller of i−1 and r i _pre. This is because the number of regenerated chunks at the i-th chunk arrival time is at most i-1. However, as will be described later, when an image quality transition occurs, the number of reproduced chunks is the cumulative number of received chunks C i0 when the image quality transition occurs.

仮再生済みチャンク数ri_preは、第iチャンク到着時点において、仮にバッファ内チャンクが枯渇していない場合に視聴開始から当該時点までに消費したチャンクの数を実数値で示すものである。実際にはバッファ内チャンクが枯渇していることも想定されるため、以下の論理判断を行う。 The provisionally played chunk count r i _pre indicates, as a real value, the number of chunks consumed from the start of viewing to the relevant time point when the chunk in the buffer is not depleted when the i-th chunk arrives. In fact, it is assumed that the chunks in the buffer are exhausted, so the following logical judgment is made.

ri_pre > i-1・・・(3)
再生状態推定部3は、(3)がFALSEの場合、チャンクは枯渇していないと判断し再生中の状態が継続していると判定する。(3)がTRUEの場合、チャンクは既に枯渇していると判断し、以下の式により枯渇時刻(=再生停止発生時刻)を算出する。
r i _pre> i-1 (3)
When (3) is FALSE, the reproduction state estimation unit 3 determines that the chunk is not depleted and determines that the state being reproduced is continuing. If (3) is TRUE, it is determined that the chunk is already exhausted, and the exhaustion time (= regeneration stop occurrence time) is calculated by the following equation.

(再生停止発生時刻)= arrivali - (ri_pre - (i-1))
×第jチャンクのチャンクあたり再生時間・・・(4)
ここでjは当該時刻において再生中のチャンクの番号である。この場合、(4)で算出される再生停止発生時刻からarrivaliまでが再生停止時間と推定される。以上により、各チャンク到着時刻における再生状態を判定することができる。
(Playback stop time) = arrival i- (r i _pre-(i-1))
× Playing time per chunk of jth chunk (4)
Here, j is the number of the chunk being played at the time. In this case, the playback stop time is estimated from the playback stop occurrence time calculated in (4) to arrival i . As described above, the reproduction state at each chunk arrival time can be determined.

再生状態推定部3は、各チャンク到着時刻において推定した再生状態を記憶手段に記憶しておくこととしてもよいし、ディスプレイに表示してもよいし、外部の装置にネットワークを介して送信することしてもよく、出力の形態は特定の形態に限定されない。   The playback state estimation unit 3 may store the playback state estimated at each chunk arrival time in a storage unit, display it on a display, or send it to an external device via a network. The form of output is not limited to a specific form.

<画質遷移がある場合の処理>
次に、チャンクの画質遷移が発生する場合の処理について説明する。以下では、画質遷移のステップを含む図5のフローチャートに沿って説明する。
<Processing when there is image quality transition>
Next, processing when a chunk image quality transition occurs will be described. Below, it demonstrates along the flowchart of FIG. 5 including the step of image quality transition.

キャプチャデータ解析部1によりi番目のチャンクの到着が検出される(ステップ1)。チャンク時系列解析部2は、キャプチャデータ解析部1により得られた当該チャンクのチャンク長からチャンクの画質を判定し、当該画質が前回(i-1番目)のチャンクの画質から遷移したかどうか判定する(ステップ2)。   The capture data analysis unit 1 detects the arrival of the i-th chunk (step 1). The chunk time series analysis unit 2 determines the image quality of the chunk from the chunk length of the chunk obtained by the capture data analysis unit 1, and determines whether the image quality has changed from the image quality of the previous (i-1) th chunk. (Step 2).

チャンクの画質遷移を確認した場合、チャンク時系列解析部2は、当該チャンクの到着時刻、画質および当該時点における累積受信チャンク数を画質遷移表に蓄積する(ステップ3)。   When the chunk image quality transition is confirmed, the chunk time-series analysis unit 2 accumulates the arrival time, image quality, and cumulative number of received chunks at that time in the image quality transition table (step 3).

再生状態推定部3は、対象チャンクの再生状態(再生停止or再生中)を前述した手法で判定し(ステップ4)、再生停止状態であればステップ5に進み、再生停止状態でなければステップ6に進む。再生状態推定部3は、ステップ5において、前述したとおりの手法で再生停止発生時刻を推定して再生停止状態期間を算出し、出力を行う。   The reproduction state estimation unit 3 determines the reproduction state (reproduction stop or reproduction) of the target chunk using the method described above (step 4). If the reproduction stop state, the process proceeds to step 5. If not, the step 6 Proceed to In step 5, the reproduction state estimation unit 3 estimates the reproduction stop occurrence time by the method as described above, calculates the reproduction stop state period, and performs output.

ステップ6で、再生状態推定部3は、画質遷移表の要素が存在するか否かを判定し、要素が存在する場合はステップ7に進み、要素が存在しない場合はステップ8に進む。ここで、ステップ8では、再生状態推定部3は、現在の画質(例:直近で画質遷移した後の画質)で再生中(再生状態が継続)であると判定し、出力を行う。その後は、第(i+1)チャンクの確認へと移行する。   In step 6, the reproduction state estimation unit 3 determines whether or not an element of the image quality transition table exists. If the element exists, the process proceeds to step 7, and if the element does not exist, the process proceeds to step 8. Here, in step 8, the reproduction state estimation unit 3 determines that reproduction is in progress (the reproduction state continues) with the current image quality (eg, the image quality after the latest image quality transition), and performs output. Thereafter, the process proceeds to confirmation of the (i + 1) th chunk.

ステップ7、すなわち、画質遷移表の要素が存在する場合とは、バッファにおいて、ある画質のチャンクの上に、それとは異なる画質のチャンクが格納されており、再生が進むことで、再生するチャンクの画質遷移が生じるような場合に相当する。   Step 7, that is, when there is an image quality transition table element, a chunk having a different image quality is stored above a certain image quality chunk in the buffer. This corresponds to a case where image quality transition occurs.

ステップ7では、まず、再生状態推定部3は、画質遷移表の中の到着時刻が最小の要素(チャンク)の画質を確認する。到着時刻が最少の要素とは、画質遷移表に格納されている要素のうち、最も早く画質遷移を生じさせる要素である。   In step 7, the reproduction state estimation unit 3 first confirms the image quality of the element (chunk) having the minimum arrival time in the image quality transition table. The element with the shortest arrival time is the element that causes the image quality transition earliest among the elements stored in the image quality transition table.

いま、仮にその要素を(ti0, Ci0, qi0)とする。これはそれぞれ当該要素の(チャンク到着時刻、累積受信チャンク数、画質レベル)を表している。当該画質qi0は、現在の対象チャンクである第iチャンクの画質よりも高い場合と低い場合がある。高い場合は、高画質への遷移が生じる場合であり、低い場合は低画質への遷移が生じる場合である。 Now, assume that the element is (t i0 , C i0 , q i0 ). This represents (chunk arrival time, cumulative number of received chunks, image quality level) for each element. The image quality q i0 may be higher or lower than the image quality of the i-th chunk that is the current target chunk. A high case is a case where a transition to high image quality occurs, and a low case is a case where a transition to low image quality occurs.

画質qi0が第iチャンクの画質よりも高い場合において、再生状態推定部3は以下の条件式がTRUEの場合は画質遷移と判定し、再生済みチャンク数をCi0として更新するとともに、画質遷移表における当該要素を削除する(ステップ9)。また、ステップ9で出力する推定結果は、再生中、かつ、画質は画質遷移後の画質となる。
(第iチャンク到着時刻における再生済みチャンク数)> (Ci0-rh)
ここでrhは、高画質への遷移におけるパラメータである。また、第iチャンク到着時刻における再生済みチャンク数は、前述したとおり、i-1とri_preに基づいてriとして算出される値である。
When the image quality q i0 is higher than the image quality of the i-th chunk, the playback state estimation unit 3 determines that the image quality transitions when the following conditional expression is TRUE, updates the number of played chunks as C i0 , and changes the image quality Delete the element in the table (step 9). The estimation result output in step 9 is the image quality during reproduction and the image quality after the image quality transition.
(Number of played chunks at the i-th chunk arrival time)> (C i0 -rh)
Here, rh is a parameter in transition to high image quality. Further, the number of played chunks at the i-th chunk arrival time is a value calculated as r i based on i−1 and r i _pre as described above.

この式の意味は、第iチャンク到着時刻における再生済みチャンク数が、現在の累積受信チャンク数からrhを引いた値(閾値)に到達したか否かを調べることである。   The meaning of this expression is to check whether or not the number of regenerated chunks at the i-th chunk arrival time has reached a value (threshold value) obtained by subtracting rh from the current cumulative number of received chunks.

逆に、第iチャンク到着時刻において、画質遷移表の要素が存在し、その中の到着時刻が最小の要素の画質が、第iチャンクの画質よりも低い場合、再生状態推定部3は以下の条件式がTRUEの場合に画質遷移と判定し、再生済みチャンク数をCi0として更新するとともに、画質遷移表における当該要素を削除する(ステップ9)。 Conversely, when there is an element of the image quality transition table at the i-th chunk arrival time and the image quality of the element with the smallest arrival time is lower than the image quality of the i-th chunk, the playback state estimation unit 3 When the conditional expression is TRUE, it is determined that there is an image quality transition, the number of reproduced chunks is updated as C i0 , and the element in the image quality transition table is deleted (step 9).

(第iチャンク到着時刻における再生済みチャンク数)> (Ci0-rl)
ここでrlは、低画質への遷移におけるパラメータである。この式の意味は、第iチャンク到着時刻における再生済みチャンク数が、現在の累積受信チャンク数からrlを引いた値(閾値)に到達したか否かを調べることである。
(Number of played chunks at the i-th chunk arrival time)> (C i0 -rl)
Here, rl is a parameter in transition to low image quality. The meaning of this equation is to check whether or not the number of regenerated chunks at the i-th chunk arrival time has reached a value (threshold value) obtained by subtracting rl from the current cumulative received chunk number.

上記のようにrh、rlを現在の累積受信チャンク数から引くことは、画質遷移時に、遷移前の画質のチャンクをrh、rlだけ削除して、遷移後の画質のチャンクの再生を行うことを意味する。この画質遷移時の処理イメージを図6に示す。図6の上段は高画質から低画質への遷移時を表すものである。ここではrl =2としており、高画質から低画質への遷移時、高画質の2チャンクを破棄して低画質に遷移する動作としている。   As described above, subtracting rh and rl from the current cumulative number of received chunks means that at the time of image quality transition, only the rh and rl chunks with the image quality before the transition are deleted and the chunks with the image quality after the transition are played back. means. A processing image at the time of this image quality transition is shown in FIG. The upper part of FIG. 6 shows the transition from high image quality to low image quality. Here, rl = 2 is set, and at the time of transition from high image quality to low image quality, the operation of shifting to low image quality by discarding two high-quality chunks.

図6の下段は低画質から高画質への遷移時を表すものである。ここではrh=1としており、低画質から高画質への遷移時、低画質の1チャンクを破棄して高画質に遷移する動作としている。   The lower part of FIG. 6 shows the transition from low image quality to high image quality. Here, rh = 1 is set, and at the time of transition from low image quality to high image quality, an operation of discarding one chunk of low image quality and shifting to high image quality is performed.

このように、本実施の形態では、常に全チャンクの再生を完了してから次の画質に遷移するのではなく、所定数のチャンクを破棄して遷移するモデル化を行う。その閾値がrh、rlである。   As described above, in the present embodiment, instead of transitioning to the next image quality after the completion of reproduction of all the chunks, modeling is performed in which a predetermined number of chunks are discarded and transition is performed. The threshold values are rh and rl.

以上のように、再生状態推定部3とチャンク時系列解析部2が処理を行うことで各チャンク到着時刻における再生状態を、画質レベルも含めて推定することができる。上記処理を最終到着チャンクまで反復することで、画質レベルも含めた再生状態推定が最終チャンク到着時刻までは実現される。   As described above, the playback state estimation unit 3 and the chunk time series analysis unit 2 perform processing, so that the playback state at each chunk arrival time can be estimated including the image quality level. By repeating the above processing up to the final arrival chunk, reproduction state estimation including the image quality level is realized until the final chunk arrival time.

<全チャンク到着後>
ここで、全てのチャンクが到着した後、すなわち、全チャンクのダウンロード終了後について説明する。一般には、全チャンクのダウンロード終了後も、再生は継続する。そこで、本実施の形態では、再生状態推定部3が、最終チャンク到着時刻において、累積受信チャンク数(すなわち全チャンク数)が再生済みチャンク数を超過しているかどうかを判定し、超過している場合には、当該時点における残存再生時間rem_timeを以下の式により推定する。
<After arrival of all chunks>
Here, a description will be given after all chunks have arrived, that is, after all chunks have been downloaded. Generally, playback continues even after all chunks have been downloaded. Therefore, in the present embodiment, the reproduction state estimation unit 3 determines whether or not the cumulative number of received chunks (that is, the total number of chunks) exceeds the number of reproduced chunks at the final chunk arrival time. In this case, the remaining reproduction time rem_time at the time is estimated by the following equation.

rem_time = {(全チャンク数)-(当該時刻における再生済みチャンク数)}
×(当該時刻における再生中チャンクのチャンクあたり再生時間)
この式は、受信したが未再生の各チャンクが、最終チャンク到着時刻における再生中チャンクのチャンクあたり再生時間で再生されるものとして残存再生時間rem_timeを推定することを意味する。
rem_time = {(total number of chunks)-(number of played chunks at the time)}
× (Reproduction time per chunk of the chunk being played at the time)
This equation means that the remaining reproduction time rem_time is estimated on the assumption that each chunk that has been received but not reproduced is reproduced at the reproduction time per chunk of the chunk being reproduced at the final chunk arrival time.

再生状態推定部3は、最終チャンク到着時刻に上記rem_timeを加算することで、最終チャンクの再生が完了する時刻を算出することができる。以上により、各時刻における再生状態の推定が完了する。   The reproduction state estimation unit 3 can calculate the time when the reproduction of the final chunk is completed by adding the rem_time to the final chunk arrival time. Thus, the estimation of the playback state at each time is completed.

<出力例>
図7に、本実施の形態に係る映像再生状態推定装置10による再生状態の推定結果の出力例を示す。推定にあたっては、再生開始閾値を1とし、画質のレベル数を5とし、rh=2、rl=1としている。なお、再生開始閾値が1とは、チャンクが1つでもバッファにある場合にすぐにチャンクの再生を開始することを意味する。
<Output example>
FIG. 7 shows an output example of the estimation result of the reproduction state by the video reproduction state estimation device 10 according to the present embodiment. In the estimation, the reproduction start threshold is set to 1, the number of image quality levels is set to 5, and rh = 2 and rl = 1. Note that the reproduction start threshold value 1 means that the reproduction of a chunk is started immediately when even one chunk is in the buffer.

図7において、映像再生状態推定装置10による推定結果を点線で示し、目視による観測値を実線で示している。また、再生状態の0は停止を意味し、1〜5は再生中の画質を意味する。ただし、映像再生状態推定装置10による推定においては画質のレベル数を5としているが、目視による観測においては画質は高画質と低画質の2レベルとしており、便宜上、高画質を画質2とし、低画質を画質1としている。図7に示すように、各時刻において観測により視認された画質と映像再生状態推定装置10による推定画質の高低がほぼ合致しており、高い精度で再生状態の推定ができていることがわかる。   In FIG. 7, the estimation result by the video reproduction state estimation device 10 is indicated by a dotted line, and the visually observed value is indicated by a solid line. Also, 0 in the playback state means stop, and 1 to 5 mean the image quality during playback. However, in the estimation by the video playback state estimation device 10, the number of image quality levels is five, but in visual observation, the image quality is two levels of high image quality and low image quality. The image quality is set to image quality 1. As shown in FIG. 7, it can be seen that the image quality visually observed at each time and the level of the estimated image quality by the video reproduction state estimation device 10 substantially match, and the reproduction state can be estimated with high accuracy.

(実施の形態のまとめ)
以上、説明したように、本実施の形態では、配信サーバから映像データをチャンク単位で端末に配信する映像配信方式において、端末における映像データの再生状態を推定する映像再生状態推定装置であって、ある時刻に到着した対象チャンクについて、当該対象チャンクの1つ前のチャンクの到着時刻の再生済みチャンク数に、当該対象チャンクの1つ前のチャンクの到着時刻から当該対象チャンクの到着時刻までに再生されたと推定される推定再生チャンク数を加えることにより仮再生済みチャンク数を算出する算出手段と、前記仮再生済みチャンク数と、前記対象チャンクの1つ前のチャンクまでの累積受信チャンク数とを比較することにより再生状態を推定する推定手段とを備える映像再生状態推定装置が提供される。
(Summary of embodiment)
As described above, in the present embodiment, in a video distribution method for distributing video data from a distribution server to a terminal in units of chunks, a video playback state estimation device for estimating a playback state of video data in a terminal, For the target chunk that arrived at a certain time, the number of regenerated chunks at the arrival time of the chunk before the target chunk is played back from the arrival time of the chunk immediately before the target chunk to the arrival time of the target chunk. Calculating means for calculating the number of provisionally regenerated chunks by adding the estimated number of regenerated chunks estimated to have been obtained, the number of provisionally regenerated chunks, and the cumulative number of received chunks up to the chunk before the target chunk. There is provided a video reproduction state estimation device including estimation means for estimating a reproduction state by comparison.

前記算出手段は、前記対象チャンクの到着時刻から当該対象チャンクの1つ前のチャンクの到着時刻を減算した値を、チャンクの再生時間長で割ることにより、前記推定再生チャンク数を算出する。   The calculation means calculates the estimated number of replay chunks by dividing a value obtained by subtracting the arrival time of the chunk immediately before the target chunk from the arrival time of the target chunk by the reproduction time length of the chunk.

前記推定手段は、前記仮再生済みチャンク数が前記累積受信チャンク数よりも大きい場合に、再生停止中であると判定し、前記仮再生済みチャンク数が前記累積受信チャンク数よりも大きくない場合に、再生中であると判定する。   The estimating means determines that the playback is stopped when the number of provisionally played chunks is larger than the cumulative received chunk number, and when the number of provisionally played chunks is not larger than the cumulative received chunk number. It is determined that playback is in progress.

前記推定手段は、再生停止中であると判定した場合において、前記仮再生済みチャンク数から前記累積受信チャンク数を減算した値にチャンクの再生時間長を乗算することにより、再生停止発生時刻から前記対象チャンクの到着時刻までの経過時間を算出し、当該経過時間に基づき再生停止発生時刻を推定する。   When it is determined that the reproduction is stopped, the estimation unit multiplies the reproduction time length of the chunk by a value obtained by subtracting the cumulative received chunk number from the provisionally reproduced chunk number, thereby determining the reproduction stop time from the reproduction stop occurrence time. The elapsed time until the arrival time of the target chunk is calculated, and the reproduction stop occurrence time is estimated based on the elapsed time.

また、前記映像再生状態推定装置は、あるチャンクが到着したときに、当該チャンクの画質が前回到着のチャンクの画質と異なる場合に、当該時点における累積受信チャンク数を画質遷移表に記録する手段を備え、前記推定手段は、前記対象チャンクの到着時刻における再生済みチャンク数が、前記画質遷移表に記録された累積受信チャンク数から所定の値を減算して得られる閾値を超える場合に、再生するチャンクの画質が遷移したと判定する。   Further, the video reproduction state estimation device has a means for recording the number of accumulated received chunks at the time point in the image quality transition table when a certain chunk arrives and the image quality of the chunk is different from the image quality of the previously arrived chunk. And the estimation means reproduces when the number of reproduced chunks at the arrival time of the target chunk exceeds a threshold obtained by subtracting a predetermined value from the cumulative number of received chunks recorded in the image quality transition table. It is determined that the image quality of the chunk has changed.

また、本実施の形態により、配信サーバから映像データをチャンク単位で端末に配信する映像配信方式において、端末における映像データの再生状態を推定する映像再生状態推定装置が実行する映像再生状態推定方法であって、ある時刻に到着した対象チャンクについて、当該対象チャンクの1つ前のチャンクの到着時刻の再生済みチャンク数に、当該対象チャンクの1つ前のチャンクの到着時刻から当該対象チャンクの到着時刻までに再生されたと推定される推定再生チャンク数を加えることにより仮再生済みチャンク数を算出する算出ステップと、前記仮再生済みチャンク数と、前記対象チャンクの1つ前のチャンクまでの累積受信チャンク数とを比較することにより再生状態を推定する推定ステップとを備える映像再生状態推定方法が提供される。   Further, according to the present embodiment, in a video distribution method for distributing video data from a distribution server to a terminal in units of chunks, a video reproduction state estimation method executed by a video reproduction state estimation device that estimates a reproduction state of video data in a terminal. For the target chunk that arrived at a certain time, the arrival time of the target chunk from the arrival time of the chunk immediately before the target chunk is added to the number of regenerated chunks at the arrival time of the chunk immediately before the target chunk. A step of calculating the number of provisionally regenerated chunks by adding the estimated number of regenerated chunks estimated to have been regenerated before, the number of provisionally regenerated chunks, and the cumulative received chunks up to the chunk before the target chunk A video playback state estimation method comprising: an estimation step for estimating a playback state by comparing a number It is.

(実施の形態の技術の効果等)
本実施の形態に係る映像再生状態推定装置10では、各チャンク到着時刻における再生済みチャンク数を連続な値で計量し、これを各時刻における累積受信チャンク数に基づく値と比較することとで効率的に再生状態推定を行うことが可能である。
(Effects of the technology of the embodiment)
In the video reproduction state estimation device 10 according to the present embodiment, the number of reproduced chunks at each chunk arrival time is measured as a continuous value, and this is compared with a value based on the cumulative number of received chunks at each time. Thus, it is possible to estimate the reproduction state.

すなわち、本実施の形態では、プログレッシブダウンロード型映像配信サービスを対象として、細かい時間単位における端末の再生バッファ内のチャンク数を直接推定するのではなく、チャンク到着毎に再生済みチャンク数を連続値として算出する方式を採用する。これにより、シミュレーションを行う時刻がチャンク到着時刻のみとなり、既存の推定方式に比較して、計算量が大幅に削減される。   That is, in this embodiment, for the progressive download video distribution service, instead of directly estimating the number of chunks in the playback buffer of the terminal in a fine time unit, the number of played chunks as a continuous value for each chunk arrival The calculation method is adopted. As a result, the simulation time is only the chunk arrival time, and the amount of calculation is greatly reduced as compared with the existing estimation method.

また、映像再生状態推定装置10では、対象とするプログレッシブダウンロード型映像配信サービスがadaptive streamingを提供する場合においても、画質遷移の時刻、遷移後の画質及びチャンクの時間長等をスケジュール管理することで、画質変更を勘案した再生状態推定を実現することが可能である。   Also, the video playback state estimation device 10 can manage the schedule of the image quality transition time, the post-transition image quality, the chunk time length, etc., even when the target progressive download video distribution service provides adaptive streaming. It is possible to realize reproduction state estimation taking image quality changes into account.

すなわち、本実施の形態では、再生中の映像の画質の変化を勘案し、画質遷移時のバッファ閾値も勘案することで、adaptive streaming対応アプリケーションに対しても、再生状態推定が可能である。   That is, in the present embodiment, it is possible to estimate the playback state even for an application that supports adaptive streaming by taking into account the change in the image quality of the video being played back and taking into account the buffer threshold at the time of image quality transition.

以上、説明したように、本実施の形態の技術により、動的ビットレート変更を伴うプログレッシブダウンロード型映像配信アプリケーションを対象として、網内もしくはヘッドエンドで取得したキャプチャデータに基づき、動的ビットレート配信に対応した再生状態推定を実現することができる。   As described above, with the technology of the present embodiment, dynamic bit rate distribution based on captured data acquired in the network or at the head end is targeted for a progressive download video distribution application that involves dynamic bit rate change. Can be realized.

本発明は、上記の実施の形態に限定されることなく、特許請求の範囲内において、種々変更・応用が可能である。   The present invention is not limited to the above-described embodiments, and various modifications and applications are possible within the scope of the claims.

10 映像再生状態推定装置
1 キャプチャデータ解析部
2 チャンク時系列解析部
3 再生状態推定部
10 Video playback state estimation device
1 Capture data analysis unit
2 Chunk time series analysis part
3 Playback state estimation unit

Claims (7)

配信サーバから映像データをチャンク単位で端末に配信する映像配信方式において、端末における映像データの再生状態を推定する映像再生状態推定装置であって、
ある時刻に到着した対象チャンクについて、当該対象チャンクの1つ前のチャンクの到着時刻の再生済みチャンク数に、当該対象チャンクの1つ前のチャンクの到着時刻から当該対象チャンクの到着時刻までに再生されたと推定される推定再生チャンク数を加えることにより仮再生済みチャンク数を算出する算出手段と、
前記仮再生済みチャンク数と、前記対象チャンクの1つ前のチャンクまでの累積受信チャンク数とを比較することにより再生状態を推定する推定手段と
を備えることを特徴とする映像再生状態推定装置。
In a video distribution method for distributing video data from a distribution server to a terminal in units of chunks, a video playback state estimation device for estimating a playback state of video data in a terminal,
For the target chunk that arrived at a certain time, the number of regenerated chunks at the arrival time of the chunk before the target chunk is played back from the arrival time of the chunk immediately before the target chunk to the arrival time of the target chunk. Calculating means for calculating the number of provisionally played chunks by adding the estimated number of played chunks estimated to have been played,
An image reproduction state estimation device comprising: estimation means for estimating a reproduction state by comparing the number of provisionally reproduced chunks and the cumulative number of received chunks up to the chunk immediately before the target chunk.
前記算出手段は、前記対象チャンクの到着時刻から当該対象チャンクの1つ前のチャンクの到着時刻を減算した値を、チャンクの再生時間長で割ることにより、前記推定再生チャンク数を算出する
ことを特徴とする請求項1に記載の映像再生状態推定装置。
The calculation means calculates the estimated number of playback chunks by dividing a value obtained by subtracting the arrival time of the chunk immediately before the target chunk from the arrival time of the target chunk by the playback time length of the chunk. The video reproduction state estimation device according to claim 1, wherein
前記推定手段は、前記仮再生済みチャンク数が前記累積受信チャンク数よりも大きい場合に、再生停止中であると判定し、前記仮再生済みチャンク数が前記累積受信チャンク数よりも大きくない場合に、再生中であると判定する
ことを特徴とする請求項1又は2に記載の映像再生状態推定装置。
The estimating means determines that the playback is stopped when the number of provisionally played chunks is larger than the cumulative received chunk number, and when the number of provisionally played chunks is not larger than the cumulative received chunk number. The video reproduction state estimation device according to claim 1, wherein the video reproduction state estimation device determines that the reproduction is in progress.
前記推定手段は、再生停止中であると判定した場合において、前記仮再生済みチャンク数から前記累積受信チャンク数を減算した値にチャンクの再生時間長を乗算することにより、再生停止発生時刻から前記対象チャンクの到着時刻までの経過時間を算出し、当該経過時間に基づき再生停止発生時刻を推定する
ことを特徴とする請求項3に記載の映像再生状態推定装置。
When it is determined that the reproduction is stopped, the estimation unit multiplies the reproduction time length of the chunk by a value obtained by subtracting the cumulative received chunk number from the provisionally reproduced chunk number, thereby determining the reproduction stop time from the reproduction stop occurrence time. The video playback state estimation device according to claim 3, wherein an elapsed time until the arrival time of the target chunk is calculated, and a playback stop occurrence time is estimated based on the elapsed time.
前記映像再生状態推定装置は、あるチャンクが到着したときに、当該チャンクの画質が前回到着のチャンクの画質と異なる場合に、当該時点における累積受信チャンク数を画質遷移表に記録する手段を備え、
前記推定手段は、前記対象チャンクの到着時刻における再生済みチャンク数が、前記画質遷移表に記録された累積受信チャンク数から所定の値を減算して得られる閾値を超える場合に、再生するチャンクの画質が遷移したと判定する
ことを特徴とする請求項1ないし4のうちいずれか1項に記載の映像再生状態推定装置。
The video reproduction state estimation device comprises means for recording the number of received chunks received at the time point in the image quality transition table when the image quality of the chunk is different from the image quality of the previously arrived chunk when a certain chunk arrives,
The estimating means determines the number of chunks to be played when the number of played chunks at the arrival time of the target chunk exceeds a threshold obtained by subtracting a predetermined value from the cumulative number of received chunks recorded in the image quality transition table. The video reproduction state estimation device according to any one of claims 1 to 4, wherein it is determined that the image quality has transitioned.
配信サーバから映像データをチャンク単位で端末に配信する映像配信方式において、端末における映像データの再生状態を推定する映像再生状態推定装置が実行する映像再生状態推定方法であって、
ある時刻に到着した対象チャンクについて、当該対象チャンクの1つ前のチャンクの到着時刻の再生済みチャンク数に、当該対象チャンクの1つ前のチャンクの到着時刻から当該対象チャンクの到着時刻までに再生されたと推定される推定再生チャンク数を加えることにより仮再生済みチャンク数を算出する算出ステップと、
前記仮再生済みチャンク数と、前記対象チャンクの1つ前のチャンクまでの累積受信チャンク数とを比較することにより再生状態を推定する推定ステップと
を備えることを特徴とする映像再生状態推定方法。
In a video distribution method for distributing video data from a distribution server to a terminal in units of chunks, a video playback state estimation method executed by a video playback state estimation device that estimates a playback state of video data in a terminal,
For the target chunk that arrived at a certain time, the number of regenerated chunks at the arrival time of the chunk before the target chunk is played back from the arrival time of the chunk immediately before the target chunk to the arrival time of the target chunk. A calculation step of calculating the number of provisionally regenerated chunks by adding the estimated number of regenerated chunks estimated to have been played,
A video playback state estimation method comprising: an estimation step of estimating a playback state by comparing the number of provisionally played chunks and the cumulative number of received chunks up to the chunk immediately before the target chunk.
コンピュータを、請求項1ないし5のうちいずれか1項に記載の映像再生状態推定装置における各手段として機能させるためのプログラム。   The program for functioning a computer as each means in the image | video reproduction | regeneration state estimation apparatus of any one of Claims 1 thru | or 5.
JP2014028927A 2014-02-18 2014-02-18 Video playback state estimation device, video playback state estimation method, and program Expired - Fee Related JP6053180B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014028927A JP6053180B2 (en) 2014-02-18 2014-02-18 Video playback state estimation device, video playback state estimation method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014028927A JP6053180B2 (en) 2014-02-18 2014-02-18 Video playback state estimation device, video playback state estimation method, and program

Publications (2)

Publication Number Publication Date
JP2015154422A JP2015154422A (en) 2015-08-24
JP6053180B2 true JP6053180B2 (en) 2016-12-27

Family

ID=53896219

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014028927A Expired - Fee Related JP6053180B2 (en) 2014-02-18 2014-02-18 Video playback state estimation device, video playback state estimation method, and program

Country Status (1)

Country Link
JP (1) JP6053180B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023113466A (en) * 2022-02-03 2023-08-16 株式会社デンソー Communication device, communication method, and communication program

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2383999A1 (en) * 2010-04-29 2011-11-02 Irdeto B.V. Controlling an adaptive streaming of digital content
JP5780684B2 (en) * 2011-11-02 2015-09-16 日本電信電話株式会社 Content reproduction information estimation apparatus, method, and program
US9450997B2 (en) * 2012-02-27 2016-09-20 Qualcomm Incorporated Dash client and receiver with request cancellation capabilities

Also Published As

Publication number Publication date
JP2015154422A (en) 2015-08-24

Similar Documents

Publication Publication Date Title
US10305947B2 (en) Pre-buffering audio streams
WO2017161998A1 (en) Video processing method and device and computer storage medium
CN106792073B (en) Method, playback equipment and the system that the audio, video data of striding equipment is played simultaneously
KR101513119B1 (en) Variable bit video streams for adaptive streaming
JP5780684B2 (en) Content reproduction information estimation apparatus, method, and program
KR20130093675A (en) Variable bit video streams for adaptive streaming
JP2013219819A (en) Adaptive streaming for distribution of digital content
AU2012207151A1 (en) Variable bit video streams for adaptive streaming
JP5938015B2 (en) Chunk download completion determination device, chunk download completion determination method, and program
JP2011061533A (en) Content distribution system, sensory quality estimating apparatus, method, and program
CN109561347B (en) Internet video playing quality judgment method and system
JP6305738B2 (en) Media playback control device, media playback control method, and program
JP6053180B2 (en) Video playback state estimation device, video playback state estimation method, and program
JP5806982B2 (en) User pause operation time estimation apparatus, method, and program
WO2020170869A1 (en) Engagement estimation device, engagement estimation method and program
TWI523511B (en) Variable bit rate video panning method
JP5643242B2 (en) Media player parameter estimation apparatus, method, and program
WO2019194034A1 (en) Viewing behaviour estimation device, viewing behaviour estimation method, and program
JP5806981B2 (en) Playback state estimation apparatus, method and program
JP7255704B2 (en) Engagement estimation device, engagement estimation method and program
JP6148638B2 (en) Video reproduction state estimation device, method and program
JP5749693B2 (en) User pause time estimation apparatus, method and program
JP2013106323A (en) Content reproduction device, content reproduction method, program, and recording medium
JP2011010236A (en) Network quality management threshold calculation device and method
JP2012015965A (en) Contents replaying method and device and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160113

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20161013

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161122

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161128

R150 Certificate of patent or registration of utility model

Ref document number: 6053180

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees