WO2020158093A1 - 制御装置及び通信装置 - Google Patents
制御装置及び通信装置 Download PDFInfo
- Publication number
- WO2020158093A1 WO2020158093A1 PCT/JP2019/043653 JP2019043653W WO2020158093A1 WO 2020158093 A1 WO2020158093 A1 WO 2020158093A1 JP 2019043653 W JP2019043653 W JP 2019043653W WO 2020158093 A1 WO2020158093 A1 WO 2020158093A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- moving image
- reproduction
- data
- unit
- request
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
Definitions
- the communication device 101 communicates with another device, for example, the user device 20, via the network NW.
- the communication device 101 is also called, for example, a network device, a network controller, a network card, or a communication module.
- the reproduction log indicates a situation regarding the reproduction of the moving image
- sound and moving image a time difference between the reproduction timing of the sound to be reproduced together with the moving image (the sound reproduced based on the sound data) and the moving image (hereinafter referred to as “sound and moving image”).
- sound and moving image a time difference between the reproduction timings of the audio and the moving image means the discrepancy time between the reproduction timing of the audio and the actual reproduction timing of the moving image to be reproduced in synchronization with the reproduction timing of the audio.
- the time difference between the reproduction timings of the sound and the moving image is an example of the situation of the difference between the reproduction timings of the sound and the moving image.
- the communication device 301 communicates with another device, for example, the user device 20, via the network NW.
- the communication device 301 is also called, for example, a network device, a network controller, a network card, or a communication module.
- the processing device 303 is a processor that controls the QoE server 30.
- the processing device 303 is composed of, for example, one or more chips.
- the processing device 303 is configured by a central processing unit (CPU).
- CPU central processing unit
- Some or all of the functions of the processing device 303 may be realized by hardware such as DSP, ASIC, PLD, or FPGA.
- the processing device 303 executes various processes in parallel or sequentially.
- the processing device 303 reads the control program from the storage device 302, for example.
- the processing device 303 implements the receiving unit 310, the generating unit 320, and the providing unit 330 by executing the control program.
- the receiving unit 310, the generating unit 320, and the providing unit 330 are examples of functional blocks of the processing device 303. All or part of the receiving unit 310, the generating unit 320, and the providing unit 330 may be configured by hardware such as DSP, ASIC, PLD, or FPGA.
- the providing unit 330 provides the designation information generated by the generating unit 320 (specifically, the determining unit 322) from the communication device 301 to the user device 20.
- the operation control unit 220 transmits the request for distribution data to the distribution server 10 in response to the request from the user (step S100).
- the request for distribution data includes identification information of the distribution data.
- step S108 the determination unit 321 determines that the user device 20 has a problem based on either or both of the number of consecutive frame drops indicated in the reproduction log and the time difference between the reproduction timings of the audio and the moving image indicated in the reproduction log. It is determined whether or not the device.
- the device load status indicates, for example, a decoding time required for the user device 20 to decode the distribution data (hereinafter, simply referred to as “decoding time”).
- decoding time a decoding time required for the user device 20 to decode the distribution data
- the decoding time of moving image data is longer than the decoding time of audio data, the time required for decoding moving image data is used as the decoding time included in the load status of the device.
- the receiving unit 510 receives the reproduction log from the information processing device 4m via the communication device 504.
- the reproduction log received from the information processing device 4m will be referred to as a "learning reproduction log”.
- the playback log for learning includes the number of consecutive dropped frames, the time difference between the playback timings of audio and video, the bit rate of video data, the decoding time, the usage rate of the processing device 206, and the usage rate of the working memory. The situation of the decryption time is shown.
- reproduction information is added to the learning reproduction log.
- the receiving unit 510 receives a learning reproduction log voluntarily transmitted by the information processing device 4m.
- the receiving unit 510 may receive a request for a learning reproduction log to the information processing apparatus 4m, and may receive a learning reproduction log that the information processing apparatus 4m transmits in response to the request for the learning reproduction log. ..
- the reproduction log of the user device 20 and the learning reproduction log include not only one of the number of consecutive dropped frames and the time difference between the reproduction timings of the audio and the video, but also the bit rate of the video data, the decoding time, and the processing time. All or only part of the utilization of device 206, the working memory utilization, and the decryption time may be shown.
- the receiving unit 510 receives the learning reproduction log voluntarily transmitted by the second storage device.
- the receiving unit 510 may send a request for a learning reproduction log to the second storage device, and may receive a learning reproduction log that the second storage device transmits in response to the request for the learning reproduction log.
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Graphics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
Abstract
制御装置は、配信サーバから動画データを含む配信データを受信する受信装置における動画データが表す動画の再生に関する状況を示す状況情報を受け取る受取部と、受取部が受け取る状況情報に基づいて、受信装置が配信サーバに送信すべき要求として配信サーバが単位時間当たりに送信すべき動画データのデータ量に関する要求を指定する指定情報を生成する生成部と、生成部が生成した指定情報を受信装置に提供する提供部と、を含む。
Description
本発明は、制御装置及び通信装置に関する。
特許文献1には、動画データを受信装置に送信する配信サーバが記載されている。特許文献1に記載の配信サーバは、受信装置の種類と、今後の通信帯域の変動予測と、に基づいて、動画データのビットレートを決定する。
特許文献1に記載の配信サーバは、受信装置における動画データに基づく動画の再生状況にかかわらず、動画データのビットレートを決定する。このため、受信装置において動画を適切に再生できない状況が生じていても、特許文献1に記載の配信サーバは、受信装置にて適切に再生できない動画の動画データを送信してしまう。よって、特許文献1に記載の配信サーバが使用される場合、受信装置における動画の再生の品質に問題が生じるおそれがある。
本発明の目的は、受信装置における動画の再生の品質に問題が生じることを抑制可能な技術を提供することである。
本発明の一態様に係る制御装置は、配信サーバから動画データを含む配信データを受信する受信装置における前記動画データが表す動画の再生に関する状況を示す状況情報を受け取る受取部と、前記受取部が受け取る前記状況情報に基づいて、前記受信装置が前記配信サーバに送信すべき要求として、前記配信サーバが単位時間当たりに送信すべき前記動画データのデータ量に関する要求を指定する指定情報を生成する生成部と、前記生成部が生成した前記指定情報を前記受信装置に提供する提供部と、を含む。
本発明の一態様に係る通信装置は、配信サーバから送信される配信データに含まれる動画データが表す動画を再生する再生実行部と、前記再生実行部における前記動画の再生に関する状況に基づいて、前記配信サーバが単位時間当たりに送信すべき前記動画データのデータ量に関する要求の内容を決定する要求決定部と、前記要求決定部が決定した前記内容を示す前記要求を前記配信サーバに送信する要求部と、を含む。
本発明の一態様によれば、受信装置における動画の再生の品質に問題が生じることを抑制可能になる。
<A.第1実施形態>
図1は、第1実施形態に係る配信システム1の全体構成を示す図である。
図1は、第1実施形態に係る配信システム1の全体構成を示す図である。
<A1.配信システム1>
図1に例示されるように、配信システム1は、配信サーバ10、ユーザ装置20及びQoE(Quality of Experience)サーバ30を含む。配信サーバ10、ユーザ装置20及びQoEサーバ30は、ネットワークNWを介して相互に通信可能である。配信システム1において、配信サーバ10、ユーザ装置20及びQoEサーバ30の各々の数は「1」に限定されない。例えば、配信システム1は、複数の配信サーバ10、複数のユーザ装置20及び複数のQoEサーバ30を含んでもよい。ユーザ装置20は、受信装置および配信先装置の一例である。QoEサーバ30は、制御装置の一例である。
図1に例示されるように、配信システム1は、配信サーバ10、ユーザ装置20及びQoE(Quality of Experience)サーバ30を含む。配信サーバ10、ユーザ装置20及びQoEサーバ30は、ネットワークNWを介して相互に通信可能である。配信システム1において、配信サーバ10、ユーザ装置20及びQoEサーバ30の各々の数は「1」に限定されない。例えば、配信システム1は、複数の配信サーバ10、複数のユーザ装置20及び複数のQoEサーバ30を含んでもよい。ユーザ装置20は、受信装置および配信先装置の一例である。QoEサーバ30は、制御装置の一例である。
<A2.配信サーバ10>
配信サーバ10は、動画を示す動画データと音声を示す音声データとを含む配信データを、ユーザ装置20に送信する。配信データは、例えば、映画を表すデータである。配信データは、映画を表すデータに限らず、例えば、テレビ番組を表すデータでもよい。動画データと音声データの各々は、エンコードされたデータである。配信データにおいて、動画データに基づく動画の再生タイミングと、音声データに基づく音声の再生タイミングとは、予め規定されている。動画データの示す動画のフレームレートは、基準フレームレートに固定されている。基準フレームレートは、例えば、30fps(Frames Per Second)である。基準フレームレートは、30fpsに限らず30fpsよりも高くてもよく低くてもよい。なお、動画データの示す動画のフレームレートは変更されてもよい。
配信サーバ10は、動画を示す動画データと音声を示す音声データとを含む配信データを、ユーザ装置20に送信する。配信データは、例えば、映画を表すデータである。配信データは、映画を表すデータに限らず、例えば、テレビ番組を表すデータでもよい。動画データと音声データの各々は、エンコードされたデータである。配信データにおいて、動画データに基づく動画の再生タイミングと、音声データに基づく音声の再生タイミングとは、予め規定されている。動画データの示す動画のフレームレートは、基準フレームレートに固定されている。基準フレームレートは、例えば、30fps(Frames Per Second)である。基準フレームレートは、30fpsに限らず30fpsよりも高くてもよく低くてもよい。なお、動画データの示す動画のフレームレートは変更されてもよい。
配信サーバ10は、通信装置101、記憶装置102及び処理装置103を含むコンピュータシステムによって構成される。本明細書において、通信装置、記憶装置、処理装置、後述する入力装置、及び、後述する表示装置における「装置」という用語は、回路、デバイス又はユニット等の他の用語に読み替えられてもよい。配信サーバ10の各要素は、1又は2以上のバスによって相互に接続される。また、配信サーバ10の各要素は、単数又は複数の機器によって構成される。
通信装置101は、ネットワークNWを介して他の装置、例えば、ユーザ装置20と通信する。通信装置101は、例えば、ネットワークデバイス、ネットワークコントローラ、ネットワークカード又は通信モジュールとも称される。
記憶装置102は、処理装置103が読み取り可能な記録媒体である。記憶装置102は、処理装置103によって実行される制御プログラムを含む複数のプログラム、処理装置103によって使用される各種のデータ、及び、種々の配信データを記憶する。記憶装置102は、例えば、ROM(Read Only Memory)、EPROM(Erasable Programmable ROM)、EEPROM(Electrically Erasable Programmable ROM)及びRAM(Random Access Memory)等の記録媒体の少なくとも1つによって構成される。
処理装置103は、配信サーバ10を制御するプロセッサである。処理装置103は、例えば、1又は2以上のチップによって構成される。一例を挙げると、処理装置103は、周辺装置とのインタフェースと、中央処理装置(CPU:Central Processing Unit)とによって構成される。中央処理装置は、演算装置及びレジスタ等を含む。処理装置103の機能の一部又は全部は、DSP(Digital Signal Processor)、ASIC(Application Specific Integrated Circuit)、PLD(Programmable Logic Device)、FPGA(Field Programmable Gate Array)等のハードウェアによって実行されてもよい。処理装置103は、各種の処理を並列的又は逐次的に実行する。
処理装置103は、記憶装置102から制御プログラムを読み取る。処理装置103は、当該制御プログラムを実行することによって配信制御部110として機能する。
配信制御部110は、処理装置103の機能ブロックの一例である。配信制御部110は、DSP、ASIC、PLD又はFPGA等のハードウェアによって構成されてもよい。配信制御部110は、配信データの送信を制御する。例えば、配信制御部110は、ユーザ装置20の要求に応じて、ユーザ装置20に配信データを送信する。また、配信制御部110は、ユーザ装置20の要求に応じて、配信データに含まれる動画データのビットレートを調整する。動画データのビットレートは、1秒当たりに送信される動画データのデータ量を表す。1秒は、単位時間の一例である。単位時間は、1秒に限らず、1秒よりも長くてもよいし短くてもよい。
<A3.ユーザ装置20>
ユーザ装置20は、例えば、スマートフォンである。ユーザ装置20は、スマートフォンに限定されない。例えば、ユーザ装置20は、ノートパソコン、ウェアラブル端末、タブレット端末又はデスクトップパソコン等でもよい。ユーザ装置20は、配信サーバ10から配信データを受信する。
ユーザ装置20は、例えば、スマートフォンである。ユーザ装置20は、スマートフォンに限定されない。例えば、ユーザ装置20は、ノートパソコン、ウェアラブル端末、タブレット端末又はデスクトップパソコン等でもよい。ユーザ装置20は、配信サーバ10から配信データを受信する。
ユーザ装置20は、入力装置201、表示装置202、スピーカ203、通信装置204、記憶装置205及び処理装置206を含むコンピュータシステムによって構成される。ユーザ装置20の各要素は、1又は2以上のバスによって相互に接続される。また、ユーザ装置20の各要素は、1又は2以上の機器によって構成される。
入力装置201は、ユーザ装置20によって使用される情報をユーザ装置20に入力するための機器である。入力装置201は、ユーザからの指示又は質問等のユーザの入力を受け取る。例えば、入力装置201は、数字及び文字等の符号をユーザ装置20に入力するための操作と、表示装置202が表示するアイコンを選択するための操作と、を受け取る。入力装置201は、例えば、表示装置202の表示面に対する接触を検出するタッチパネルである。入力装置201は、タッチパネルに限定されない。例えば、入力装置201は、キーボード、マウス、スイッチ又はボタン等でもよい。
表示装置202は、処理装置206によって制御されることによって各種の画像を表示する。例えば、表示装置202は、アイコンと、配信データに含まれる動画データに基づく動画とを、同時に又は相互に異なるタイミングにおいて表示する。表示装置202は、例えば、液晶表示パネルである。表示装置202は、液晶表示パネルに限定されない。例えば、表示装置202は、有機EL(Electro Luminescence)表示パネル等でもよい。
スピーカ203は、処理装置206によって制御されることによって各種の音を出力する。例えば、スピーカ203は、配信データに含まれる音声データに基づく音声を出力する。
通信装置204は、ネットワークNWを介して他の装置、例えば、配信サーバ10及びQoEサーバ30の各々と通信する。通信装置204は、例えば、ネットワークデバイス、ネットワークコントローラ、ネットワークカード又は通信モジュールとも称される。
記憶装置205は、処理装置206が読み取り可能な記録媒体である。記憶装置205は、処理装置206によって実行される制御プログラムを含む複数のプログラム、及び、処理装置206が使用する各種のデータを記憶する。記憶装置205は、例えば、不揮発性メモリと揮発性メモリとによって構成される。不揮発性メモリは、例えば、ROM、EPROM又はEEPROMである。揮発性メモリは、例えば、RAMである。記憶装置205に含まれる揮発性メモリは、処理装置206の作業メモリとして用いられる。
処理装置206は、ユーザ装置20を制御するプロセッサである。処理装置206は、例えば、1又は2以上のチップによって構成される。一例を挙げると、処理装置206は、中央処理装置(CPU)によって構成される。処理装置206の機能の一部又は全部は、DSP、ASIC、PLD又はFPGA等のハードウェアによって実現されてもよい。処理装置206は、各種の処理を並列的又は逐次的に実行する。
処理装置206は、記憶装置205から制御プログラムを読み取る。処理装置206は、当該制御プログラムを実行することによって、再生実行部210及び動作制御部220として機能する。
再生実行部210及び動作制御部220は、それぞれ、処理装置206の機能ブロックの一例である。再生実行部210及び動作制御部220の両方又は一部は、DSP、ASIC、PLD又はFPGA等のハードウェアによって構成されてもよい。
再生実行部210は、配信データに基づいて動画及び音声を再生する。例えば、再生実行部210は、通信装置204によって配信サーバ10から受信される配信データ、具体的には、動画データ及び音声データの各々をデコードする。再生実行部210は、動画データのデコード結果である画像情報を表示装置202に提供することによって、表示装置202に、動画データの示す動画を表示させる。再生実行部210は、音声データのデコード結果である音声情報をスピーカ203に提供することによって、スピーカ203に、音声データの示す音声を出力させる。
動作制御部220は、ユーザ装置20の動作を制御する。例えば、動作制御部220は、ユーザ装置20における動画の再生に関する状況を示す再生ログを、通信装置204からQoEサーバ30に送信する。再生ログは、状況情報の一例である。
再生ログは、動画の再生に関する状況として、動画データに基づく動画を構成する連続する画像フレームのうち、再生されなかった画像フレーム(以下「不再生画像フレーム」と称する)の数の状況を示す。再生ログは、不再生画像フレームの数の状況として、例えば、連続する不再生画像フレームの数(以下「連続コマ落ち数」と称する)を示す。連続コマ落ち数は、「不再生画像フレームが連続する数」と称することもできる。一例を挙げると、インデックス番号「1」~「9」までの連続する9枚の画像フレームのうち、インデックス番号「3」~「8」までの画像フレームが再生されない場合、再生ログは、連続コマ落ち数として「6」を示す。
また、再生ログは、動画の再生に関する状況として、さらに、動画と共に再生されるべき音声(音声データに基づいて再生される音声)と、動画と、の再生タイミングのズレ時間(以下「音声と動画の再生タイミングのズレ時間」と称する)を示す。音声と動画の再生タイミングのズレ時間は、音声の再生タイミングと、当該音声の再生タイミングに同期して再生されるべき動画が実際に再生されるタイミングと、のズレ時間を意味する。音声と動画の再生タイミングのズレ時間は、音声と動画の再生タイミングのズレの状況の一例である。
不再生画像フレームの数の状況と、連続コマ落ち数と、音声と動画の再生タイミングのズレの状況と、音声と動画の再生タイミングのズレ時間と、の各々は、動画の再生の乱れに関する状況の一例である。
動作制御部220は、ユーザ装置20が配信サーバ10に送信すべき要求を指定する指定情報を、QoEサーバ30から通信装置204を介して受け取る。指定情報は、ユーザ装置20が配信サーバ10に送信すべき要求として、配信サーバ10が単位時間当たりに送信すべき動画データのデータ量に関する要求を指定する。具体的には、指定情報は、ユーザ装置20が配信サーバ10に送信すべき要求の内容、すなわち、配信サーバ10が単位時間当たりに送信すべき動画データのデータ量に関する要求の内容として、動画データのビットレートを指定する。
なお、動画のフレームレートが固定されている場合、動画の解像度の調整によって、配信サーバ10が単位時間当たりに送信する動画データのデータ量を調整できる。このため、動画のフレームレートが固定されている場合、指定情報において、動画の解像度が、ユーザ装置20が配信サーバ10に送信すべき要求の内容として指定されてもよい。
また、動画の解像度が固定されている場合、動画のフレームレートの調整によって、配信サーバ10が単位時間当たりに送信する動画データのデータ量を調整できる。このため、動画の解像度が固定されている場合、指定情報において、動画のフレームレートが、ユーザ装置20が配信サーバ10に送信すべき要求の内容として指定されてもよい。
動作制御部220は、QoEサーバ30から指定情報を受け取ると、指定情報において指定された要求を配信サーバ10に送信する。
<A4.QoEサーバ30>
QoEサーバ30は、指定情報、すなわち、ユーザ装置20が配信サーバ10に送信すべき要求を指定する指定情報を生成する。
QoEサーバ30は、指定情報、すなわち、ユーザ装置20が配信サーバ10に送信すべき要求を指定する指定情報を生成する。
QoEサーバ30は、通信装置301、記憶装置302及び処理装置303を含むコンピュータシステムによって構成される。QoEサーバ30の各要素は、1又は2以上のバスによって相互に接続される。また、QoEサーバ30の各要素は、1又は2以上の機器によって構成される。
通信装置301は、ネットワークNWを介して他の装置、例えば、ユーザ装置20と通信する。通信装置301は、例えば、ネットワークデバイス、ネットワークコントローラ、ネットワークカード又は通信モジュールとも称される。
記憶装置302は、処理装置303が読み取り可能な記録媒体である。記憶装置302は、処理装置303によって実行される制御プログラムを含む複数のプログラム、及び、処理装置303が使用する各種のデータを記憶する。記憶装置302は、例えば、ROM、EPROM、EEPROM及びRAM等の記録媒体のうち少なくとも1つによって構成される。
処理装置303は、QoEサーバ30を制御するプロセッサである。処理装置303は、例えば、1又は2以上のチップによって構成される。一例を挙げると、処理装置303は、中央処理装置(CPU)によって構成される。処理装置303の機能の一部又は全部は、DSP、ASIC、PLD又はFPGA等のハードウェアによって実現されてもよい。処理装置303は、各種の処理を並列的又は逐次的に実行する。
処理装置303は、例えば、記憶装置302から制御プログラムを読み取る。処理装置303は、当該制御プログラムを実行することによって、受取部310、生成部320及び提供部330を実現する。受取部310、生成部320及び提供部330は、処理装置303の機能ブロックの一例である。受取部310、生成部320及び提供部330の全部又は一部は、DSP、ASIC、PLD又はFPGA等のハードウェアによって構成されてもよい。
受取部310は、ユーザ装置20から再生ログ(ユーザ装置20が行う動画の再生に関する状況を示す再生ログ)を受け取る。例えば、受取部310は、ユーザ装置20が自発的に送信する再生ログを、通信装置301を介して受け取る。なお、受取部310は、通信装置301を介してユーザ装置20に再生ログの要求を送信し、ユーザ装置20が再生ログの要求に応じて送信する再生ログを、通信装置301を介して受け取ってもよい。
生成部320は、受取部310によって受け取られる再生ログに基づいて、ユーザ装置20が配信サーバ10に送信すべき要求を指定する指定情報を生成する。
図1に例示される通り、生成部320は、判定部321及び決定部322を含む。判定部321及び決定部322は、それぞれ、生成部320の機能ブロックの一例である。判定部321及び決定部322の全部又は一部は、DSP、ASIC、PLD又はFPGA等のハードウェアによって構成されてもよい。
判定部321は、ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が、基準データ量以上であるか否かを、受取部310によって受け取られる再生ログに基づいて判定する。基準データ量は予め定められる。
ユーザ装置20が単位時間当たりに処理できる動画データのデータ量は、例えば、不再生画像フレームが生じず音声と動画の再生タイミングのズレ時間が0.1秒以内という基準条件を満たしながら単位時間内にユーザ装置20が処理可能な動画データのデータ量の最大値を意味する。基準条件は、適宜変更可能である。例えば、基準条件は、不再生画像フレームが連続して生じず音声と動画の再生タイミングのズレ時間が0.2秒以内であるという条件でもよい。
以下においては、単位時間当たりに処理できる動画データのデータ量が基準データ量に満たない装置を「問題装置」と称する。
「問題装置」という文言を用いる場合、判定部321の動作は「受取部310が受け取る再生ログに基づいて、ユーザ装置20が問題装置であるか否かを判定する動作」を意味する。
さらに言えば、「ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量に満たないと判定部32が判定する場合」は、「ユーザ装置20が問題装置であると判定部32が判定する場合」を意味する。
また、「ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量以上であると判定部32が判定する場合」は、「ユーザ装置20が問題装置でないと判定部32が判定する場合」を意味する。
「問題装置」という文言を用いる場合、判定部321の動作は「受取部310が受け取る再生ログに基づいて、ユーザ装置20が問題装置であるか否かを判定する動作」を意味する。
さらに言えば、「ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量に満たないと判定部32が判定する場合」は、「ユーザ装置20が問題装置であると判定部32が判定する場合」を意味する。
また、「ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量以上であると判定部32が判定する場合」は、「ユーザ装置20が問題装置でないと判定部32が判定する場合」を意味する。
決定部322は、判定部321の判定結果に基づいて、指定情報の指定する要求の内容、すなわち、ユーザ装置20が配信サーバ10に送信すべき要求の内容、さらに言えば、配信サーバ10が単位時間当たりに送信すべき動画データのデータ量に関する要求の内容を決定する。
決定部322は、ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量に満たないと判定部321が判定する場合、配信サーバ10が単位時間当たりに送信すべき動画データのデータ量を、基準データ量よりも少ないデータ量にする、という要求の内容(動画データのビットレートの要求内容)を決定する。
ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量以上であると判定部321が判定する場合、決定部322は、配信サーバ10が単位時間当たりに送信すべき動画データのデータ量を、基準データ量以上のデータ量に設定する、という要求の内容(動画データのビットレートの要求内容)を決定する。
なお、決定部322は、基準データ量以上のデータ量を、再生ログに応じて変更してもよい。例えば、決定部322は、再生ログが示す連続コマ落ち数が少ないほど、基準データ量以上のデータ量を多くしてもよい。また、決定部322は、音声と動画の再生タイミングのズレ時間が少ないほど、基準データ量以上のデータ量を多くしてもよい。
なお、決定部322は、基準データ量以上のデータ量を、再生ログに応じて変更してもよい。例えば、決定部322は、再生ログが示す連続コマ落ち数が少ないほど、基準データ量以上のデータ量を多くしてもよい。また、決定部322は、音声と動画の再生タイミングのズレ時間が少ないほど、基準データ量以上のデータ量を多くしてもよい。
決定部322は、ユーザ装置20が配信サーバ10に送信すべき要求の内容を決定すると、決定した内容を示す要求を指定する指定情報を生成する。
提供部330は、生成部320(具体的には、決定部322)によって生成された指定情報を、通信装置301からユーザ装置20に提供する。
<A5.配信システム1の動作>
図2は、配信システム1の動作の一例を説明するためのシーケンス図である。以下、説明の簡略化のため、配信サーバ10、ユーザ装置20及びQoEサーバ30における通信において、通信装置101、204及び301についての言及を省略する。
図2は、配信システム1の動作の一例を説明するためのシーケンス図である。以下、説明の簡略化のため、配信サーバ10、ユーザ装置20及びQoEサーバ30における通信において、通信装置101、204及び301についての言及を省略する。
ユーザが、配信データの要求を、ユーザ装置20の入力装置201に入力すると、動作制御部220は、ユーザからの要求に応じて、配信サーバ10に配信データの要求を送信する(ステップS100)。なお、配信データの要求は、配信データの識別情報を含む。
配信サーバ10の配信制御部110は、配信データの要求を受信すると、配信データの要求に応じた配信データを記憶装置102から読み取る。配信データは、上述の通り、エンコードされたデータである。続いて、配信制御部110は、記憶装置102から読み取られた配信データをユーザ装置20へ送信し始める(ステップS102)。
ユーザ装置20の再生実行部210は、配信サーバ10から送信された配信データに基づいて、動画及び音声の再生を開始する(ステップS104)。
ステップS104の一例は、以下の通りである。
再生実行部210は、配信データに含まれる動画データをデコードすることによって画像情報を生成する。また、再生実行部210は、配信データに含まれる音声データをデコードすることによって音声情報を生成する。
再生実行部210は、配信データに含まれる動画データをデコードすることによって画像情報を生成する。また、再生実行部210は、配信データに含まれる音声データをデコードすることによって音声情報を生成する。
なお、配信データがDRM(Digital Rights Management)によって暗号化されている場合、再生実行部210は、まず、配信データをデクリプト(decrypt)する。続いて、再生実行部210は、デクリプトされた配信データをデコードすることによって、画像情報と音声情報とを生成する。
続いて、再生実行部210は、画像情報を表示装置202に提供する。表示装置202は、画像情報を受け取ると、画像情報に基づいて動画データの示す動画を表示する。また、再生実行部210は、音声情報をスピーカ203に提供する。スピーカ203は、音声情報を受け取ると、音声情報に基づいて音声データの示す音声を出力する。
以上がステップS104の一例である。
以上がステップS104の一例である。
続いて、動作制御部220は、動画の再生の開始時点から当該開始時点より後の第1時点までの期間における動画の再生に関する状況を示す再生ログ(以下「第1再生ログ」と称する)をQoEサーバ30に送信する(ステップS106)。第1再生ログは、第1状況情報の一例である。動画の再生の開始時点から第1時点までの期間(以下「第1期間」と称する)の長さは、例えば10秒である。第1期間の長さは、10秒よりも長くてもよいし短くてもよい。第1再生ログは、第1期間における連続コマ落ち数、及び、第1期間における音声と動画との再生タイミングのズレ時間、の両方を示す。
QoEサーバ30の受取部310が、再生ログとして、ユーザ装置20から第1再生ログを受け取ると、判定部321は、再生ログに基づいて、ユーザ装置20が問題装置であるか否かを判定する(ステップS108)。すなわち、判定部321は、再生ログに基づいて、ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量以上であるか否かを判定する。
ステップS108においては、判定部321は、再生ログに示される連続コマ落ち数と、再生ログに示される音声と動画の再生タイミングのズレ時間と、の両方又は一方に基づいて、ユーザ装置20が問題装置であるか否かを判定する。
例えば、判定部321は、連続コマ落ち数が第1判定値を超える場合、ユーザ装置20が問題装置であると判定する。第1判定値は、例えば「10」である。なお、第1判定値は、「10」に限らず、「10」よりも大きくてもよいし小さくてもよい。
また、判定部321は、音声と動画の再生タイミングのズレ時間が第2判定値を超える場合、ユーザ装置20が問題装置であると判定する。第2判定値は、例えば「1秒」である。なお、第2判定値は、「1秒」に限らず、「1秒」よりも長くてもよいし短くてもよい。
また、判定部321は、連続コマ落ち数が第1判定値を超えておらず、かつ、音声と動画の再生タイミングのズレ時間が第2判定値を超えていない場合、ユーザ装置20が問題装置でないと判定する。
なお、ステップS108における上述の判定手法の一例については、図3を参照して後述する。
続いて、決定部322は、判定部321の判定結果に基づいて、指定情報の指定する要求の内容、具体的には、ユーザ装置20が配信サーバ10に要求すべき動画データのビットレートを決定する。
決定部322は、ユーザ装置20が問題装置であると判定される場合、配信サーバ10が単位時間当たりに送信すべき動画データのデータ量を、基準データ量より少ないデータ量に設定する動画データのビットレートを、指定情報の指定する要求の内容として決定する。
決定部322は、ユーザ装置20が問題装置ではないと判定される場合、配信サーバ10が単位時間当たりに配信すべき動画データのデータ量を、基準データ量以上のデータ量に設定する動画データのビットレートを、指定情報の指定する要求の内容として決定する。
決定部322は、ユーザ装置20が問題装置であると判定される場合に決定する動画データのビットレートを、ユーザ装置20が問題装置でないと判定される場合に決定する動画データのビットレートよりも低くする。
続いて、決定部322は、ユーザ装置20が配信サーバ10に要求すべき動画データのビットレートを、ユーザ装置20が配信サーバ10に送信すべき要求の内容として指定する指定情報を生成する(ステップS110)。
決定部322は、ユーザ装置20が問題装置であると判定される場合、配信サーバ10が単位時間当たりに送信すべき動画データのデータ量を、基準データ量より少ないデータ量に設定する動画データのビットレートを、指定情報の指定する要求の内容として決定する。
決定部322は、ユーザ装置20が問題装置ではないと判定される場合、配信サーバ10が単位時間当たりに配信すべき動画データのデータ量を、基準データ量以上のデータ量に設定する動画データのビットレートを、指定情報の指定する要求の内容として決定する。
決定部322は、ユーザ装置20が問題装置であると判定される場合に決定する動画データのビットレートを、ユーザ装置20が問題装置でないと判定される場合に決定する動画データのビットレートよりも低くする。
続いて、決定部322は、ユーザ装置20が配信サーバ10に要求すべき動画データのビットレートを、ユーザ装置20が配信サーバ10に送信すべき要求の内容として指定する指定情報を生成する(ステップS110)。
続いて、提供部330は、決定部322が生成する指定情報をユーザ装置20に提供する(ステップS112)。
ユーザ装置20の動作制御部220は、指定情報を受信すると、指定情報に指定された要求を配信サーバ10に送信する(ステップS114)。
配信サーバ10の配信制御部110は、ユーザ装置20から要求を受信すると、要求されたビットレートにおいて動画データをユーザ装置20に送信する(ステップS116)。
例えば、配信制御部110は、配信データの一部を送信した時点において要求を受信すると、配信データのうち、今後に送信される部分に含まれる動画データのビットレートを、要求されたビットデータにする。
例えば、配信制御部110は、配信データの一部を送信した時点において要求を受信すると、配信データのうち、今後に送信される部分に含まれる動画データのビットレートを、要求されたビットデータにする。
このため、ユーザ装置20が行う動画の再生に関する状況に応じて、ユーザ装置20に送信される動画データの単位時間当たりのデータ量を調整可能になる。
したがって、例えば、ユーザ装置20のスペックの低さ(処理性能の低さ)に起因して連続コマ落ち数が第1判定値を超える場合、単位時間当たりにユーザ装置20に送信される動画データのデータ量が基準データ量よりも少なくなる。よって、スペックの低いユーザ装置20、すなわち、処理性能の低いユーザ装置20において動画の再生の品質に問題が生じることを抑制可能になる。
また、ユーザ装置20における不具合の発生に起因して連続コマ落ち数が第1判定値を超える場合、単位時間当たりにユーザ装置20に送信される動画データのデータ量が基準データ量よりも少なくなる。よって、不具合が生じているユーザ装置20において動画の再生の品質に問題が生じることを抑制可能になる。
また、ユーザ装置20における高い処理負荷に起因して連続コマ落ち数が第1判定値を超える場合も、単位時間当たりにユーザ装置20に送信される動画データのデータ量が基準データ量よりも少なくなる。よって、処理負荷が高いユーザ装置20において動画の再生の品質に問題が生じることを抑制可能になる。
ステップS116の後、ステップS106~ステップS116の一連の動作Aが、配信データの送信中に定期的に又は不定期に繰り返される。
例えば、動作制御部220は、ユーザ装置20が行う動画の再生の開始時点より後の第2時点から第2時点よりも後の第3時点までの期間における動画の再生に関する状況を示す再生ログを、QoEサーバ30に送信する。以下、第2時点から第3時点までの期間を「第2期間」と称する。第2期間の長さは、例えば10秒である。なお、第2期間の長さは、10秒よりも長くてもよいし短くてもよい。第2時点は、例えば、ユーザ装置20が行う動画の再生の開始時点から10分経過した時点である。第2時点は、ユーザ装置20が行う動画の再生の開始時点から10分経過した時点よりも前でもよいし後でもよい。本実施形態では、第2時点は、前回のステップS116が完了した時点よりも後の時点とする。以下、第2期間における動画の再生に関する状況を示す再生ログを「第2再生ログ」と称する。第2再生ログは、第2状況情報の一例である。受取部310は、再生ログとして、動作制御部220から第2再生ログを受け取る。
一連の動作Aが配信データの送信中に繰り返されるため、動画の再生の開始期間よりも後の期間でも、ユーザ装置20が行う動画の再生に関する状況に応じて、動画データの単位時間当たりのデータ量が調整される。なお、動画の再生の開始期間は、ステップS102の開始時点から、最初のステップS116の終了時点までの期間である。
一連の動作Aが配信データの送信中に繰り返されるため、例えば、動画の再生の開始期間の経過後に、ユーザ装置20の処理負荷が高くなっても、ユーザ装置20において動画の再生の品質に問題が生じることを抑制可能になる。
また、ユーザ装置20の処理負荷が、動画の再生の開始期間においては高く、動画の再生の開始期間の経過後においては低い場合、動画の再生の開始期間の経過後に、動画データの単位時間当たりのデータ量を多くできる。このため、一時的に問題装置となっていたユーザ装置20が問題装置でなくなる場合、配信サーバ10は、単位時間当たりにユーザ装置20に送信される動画データのデータ量を基準データ量以上にできる。
<A6.ステップS108の一例>
図3は、ステップS108の一例を説明するためのフローチャートである。
判定部321は、再生ログに示される連続コマ落ち数が第1判定値を超える場合(ステップS200:YES)、ユーザ装置20が問題装置であると判定する(ステップS202)。なお、再生ログが、連続コマ落ち数の推移を示す場合、ステップS200において、判定部321は、再生ログに示される連続コマ落ち数の最大値が第1判定値を超える場合、ユーザ装置20が問題装置であると判定する。
図3は、ステップS108の一例を説明するためのフローチャートである。
判定部321は、再生ログに示される連続コマ落ち数が第1判定値を超える場合(ステップS200:YES)、ユーザ装置20が問題装置であると判定する(ステップS202)。なお、再生ログが、連続コマ落ち数の推移を示す場合、ステップS200において、判定部321は、再生ログに示される連続コマ落ち数の最大値が第1判定値を超える場合、ユーザ装置20が問題装置であると判定する。
また、判定部321は、再生ログに示される音声と動画の再生タイミングのズレ時間が第2判定値を超える場合(ステップS204:YES)、ユーザ装置20が問題装置であると判定する(ステップS202)。なお、再生ログが、音声と動画の再生タイミングのズレ時間の推移を示す場合、ステップS204において、判定部321は、再生ログに示される音声と動画の再生タイミングのズレ時間の最大値が第2判定値を超える場合、ユーザ装置20が問題装置であると判定する。
一方、連続コマ落ち数が第1判定値を超えず(ステップS200:NO)、かつ、音声と動画の再生タイミングのズレ時間が第2判定値を超えない場合(ステップS204:NO)、判定部321は、ユーザ装置20が問題装置でないと判定する(ステップS206)。
図3に例示される処理において、ステップS200とステップS204は相互に入れ替わってもよい。
なお、再生ログが、音声と動画の再生タイミングのズレ時間を示すことなく、連続コマ落ち数を示す状況では、判定部321は、連続コマ落ち数が第1判定値を超える場合、ユーザ装置20が問題装置であると判定する。判定部321は、連続コマ落ち数が第1判定値を超えない場合、ユーザ装置20が問題装置でないと判定する。
再生ログが、連続コマ落ち数を示すことなく、音声と動画の再生タイミングのズレ時間を示す状況では、判定部321は、音声と動画の再生タイミングのズレ時間が第2判定値を超える場合、ユーザ装置20が問題装置であると判定する。判定部321は、音声と動画のズレ時間が第2判定値を超えない場合、ユーザ装置20が問題装置でないと判定する。
<A7.第1実施形態についてのまとめ>
第1実施形態においては、受取部310は、ユーザ装置20における動画データに基づく動画の再生に関する状況を示す再生ログを受け取る。生成部320は、受取部310が受け取る再生ログに基づいて、ユーザ装置20が配信サーバ10に送信すべき要求として、配信サーバ10が単位時間当たりに送信すべき動画データのデータ量に関する要求(例えば、動画データのビットレート)を指定する指定情報を生成する。提供部330は、生成部320が生成する指定情報をユーザ装置20に提供する。
このため、ユーザ装置20における動画の再生に関する状況に基づいて、ユーザ装置20に送信される動画データの単位時間当たりのデータ量を調整可能になる。よって、ユーザ装置20における動画の再生の品質に問題が生じることを抑制可能になる。
第1実施形態においては、受取部310は、ユーザ装置20における動画データに基づく動画の再生に関する状況を示す再生ログを受け取る。生成部320は、受取部310が受け取る再生ログに基づいて、ユーザ装置20が配信サーバ10に送信すべき要求として、配信サーバ10が単位時間当たりに送信すべき動画データのデータ量に関する要求(例えば、動画データのビットレート)を指定する指定情報を生成する。提供部330は、生成部320が生成する指定情報をユーザ装置20に提供する。
このため、ユーザ装置20における動画の再生に関する状況に基づいて、ユーザ装置20に送信される動画データの単位時間当たりのデータ量を調整可能になる。よって、ユーザ装置20における動画の再生の品質に問題が生じることを抑制可能になる。
判定部321は、受取部310が受け取る再生ログに基づいて、ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量以上であるか否かを判定する。決定部322は、判定部321の判定結果に基づいて、指定情報の指定する要求の内容(例えば、動画データのビットレート)を決定する。
このため、ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量以上であるか否かに応じて、つまり、ユーザ装置20が問題装置であるか否かに応じて、指定情報にて指定されるデータ量を変更できる。
このため、ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量以上であるか否かに応じて、つまり、ユーザ装置20が問題装置であるか否かに応じて、指定情報にて指定されるデータ量を変更できる。
決定部322は、ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量に満たないと判定部321が判定する場合、配信サーバ10が単位時間当たりに送信すべき動画データのデータ量を基準データ量よりも少ないデータ量に設定することを、指定情報の指定する要求の内容として決定する。
このため、ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量に満たない場合、つまり、ユーザ装置20が問題装置である場合、ユーザ装置20における再生の処理負荷を抑えることができ、ユーザ装置20において動画の再生の品質に問題が生じることを抑制できる。
このため、ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量に満たない場合、つまり、ユーザ装置20が問題装置である場合、ユーザ装置20における再生の処理負荷を抑えることができ、ユーザ装置20において動画の再生の品質に問題が生じることを抑制できる。
受取部310は、再生ログとして、第1再生ログを受け取る。第1再生ログは、ユーザ装置20が行う動画の再生の開始時点から開始時点よりも後の第1時点までの期間における動画の再生に関する状況を示す。このため、動画の再生の開始段階において、ユーザ装置20の動画再生に関する能力に適した単位時間当たりのデータ量の動画データを提供可能になる。
また、受取部310は、再生ログとして、第2再生ログを受け取る。第2再生ログは、ユーザ装置20が行う動画の再生の開始時点よりも後の第2時点から第2時点よりも後の第3時点までの期間における動画の再生に関する状況を示す。このため、第2時点以降の段階においてユーザ装置20の動画再生能力に適した単位時間当たりのデータ量の動画データを提供可能になる。
なお、受取部310は、第1再生ログと第2再生ログのうち一方のみを再生ログとして受け取ってもよい。
再生ログが示す動画の再生に関する状況は、動画の再生における乱れに関する状況を含む。このため、ユーザ装置20が行う動画の再生における乱れに応じて、ユーザ装置20に送信される動画データの単位時間当たりのデータ量を調整可能になる。よって、ユーザ装置20が行う動画の再生において乱れが生じている場合に単位時間当たりに送信される動画データのデータ量を、当該乱れが生じていない場合に単位時間当たりに送信される動画データのデータ量よりも少なくできる。したがって、ユーザ装置20における動画の再生の品質に問題が生じることを抑制可能になる。
再生ログが示す動画の再生に関する状況は、不再生画像フレームの数の状況を含む。このため、例えば、不再生画像フレームに起因する動画の乱れに応じて、ユーザ装置20に単位時間当たりに送信される動画データのデータ量を調整可能になる。
不再生画像フレームの数の状況の一例として、連続コマ落ち数が挙げられる。なお、不再生画像フレームの数の状況は、連続コマ落ち数に限定されない。例えば、不再生画像フレームの数の状況として、単位時間内における不再生画像フレームの数が用いられてもよい。
また、再生ログが示す動画の再生に関する状況は、音声データに基づいてユーザ装置20において再生される音声と、動画データに基づいてユーザ装置20において再生される動画と、の再生タイミングのズレの状況、さらに言えば、音声と動画の再生タイミングのズレ時間を含む。音声と動画の再生タイミングのズレが発生すると、音声と動画との同期が乱れる。音声と動画の再生タイミングのズレは、例えば、動画データに基づく動画の再生のための処理時間が、音声データに基づく音声の再生のための処理時間よりも長くなることが1つの原因となって生じる。
本実施形態においては、音声と動画との再生タイミングのズレに応じて、ユーザ装置20に単位時間当たりに送信される動画データのデータ量が調整される。このため、ユーザ装置20における動画の再生の品質に問題が生じることを抑制可能になる。
本実施形態においては、音声と動画との再生タイミングのズレに応じて、ユーザ装置20に単位時間当たりに送信される動画データのデータ量が調整される。このため、ユーザ装置20における動画の再生の品質に問題が生じることを抑制可能になる。
なお、動画の再生のおける乱れに関する状況は、不再生画像フレームの数の状況と、音声と動画の再生タイミングのズレの状況と、のうち一方のみを含んでもよい。この場合、再生ログが不再生画像フレームの数の状況と音声と動画の再生タイミングのズレの状況との両方を示す場合に比べて、再生ログの情報量を少なくできる。
<B.変形例>
以上に例示した態様に関する具体的な変形の態様を以下に例示する。以下の例示から任意に選択された2個以上の態様を、相互に矛盾しない範囲において適宜に併合してもよい。
以上に例示した態様に関する具体的な変形の態様を以下に例示する。以下の例示から任意に選択された2個以上の態様を、相互に矛盾しない範囲において適宜に併合してもよい。
<B1.第1変形例>
第1実施形態において、再生ログが示す動画の再生に関する状況は、動画の再生における乱れに関する状況に加えて、配信データに含まれる動画データに基づいて動画を再生している再生装置の負荷の状況を含んでもよい。以下、動画データに基づいて動画を再生している再生装置の負荷の状況を「装置の負荷状況」とも称する。
第1実施形態において、再生ログが示す動画の再生に関する状況は、動画の再生における乱れに関する状況に加えて、配信データに含まれる動画データに基づいて動画を再生している再生装置の負荷の状況を含んでもよい。以下、動画データに基づいて動画を再生している再生装置の負荷の状況を「装置の負荷状況」とも称する。
装置の負荷状況は、例えば、ユーザ装置20が配信データのデコードに要するデコード時間(以下、単に「デコード時間」と称する)を示す。一般的に、音声データのデコード時間よりも、動画データのデコード時間の方が長いため、装置の負荷状況に含まれるデコード時間として、動画データのデコードに要する時間が用いられる。
装置の負荷状況は、さらに、動画の再生時における処理装置(CPU)206の使用率(以下、単に「処理装置206の使用率」と称する)を示す。
装置の負荷状況は、さらに、動画の再生時における記憶装置205内の作業メモリの使用率(以下、単に「作業メモリの使用率」と称する)を示す。
装置の負荷状況は、さらに、ユーザ装置20が配信データの暗号化(例えば、DRMを用いる暗号化)の解除であるデクリプトに要する暗号解除時間(以下、デクリプト時間」と称する)を示す。なお、配信データの暗号化は、DRMを用いる暗号化に限らない。一般的に、音声データのデクリプト時間よりも、動画データのデクリプト時間の方が長いため、装置の負荷状況に含まれるデクリプト時間として、動画データのデクリプト時間が用いられる。
なお、装置の負荷状況は、デコード時間、処理装置206の使用率、作業メモリの使用率、及び、デクリプト時間の全部ではなく一部のみを示してもよい。
また、再生ログが示す動画の再生に関する状況は、動画データのビットレートを示してもよい。動画データのビットレートが高いほど、装置の負荷が高くなる。
以下においては、再生ログが、連続コマ落ち数と、音声と動画の再生タイミングのズレ時間と、動画データのビットレートと、デコード時間と、処理装置206の使用率と、作業メモリの使用率と、デクリプト時間と、を示す場合について説明する。
第1変形例においては、図2に例示されるステップS108は、例えば図4に示されるように実行される。
図4においては、ステップS108の一例として図3に示される処理と同一の処理には同一符号を付してある。以下、図4に例示される処理について、図3に示される処理と異なる点をメインに説明する。
図4においては、ステップS108の一例として図3に示される処理と同一の処理には同一符号を付してある。以下、図4に例示される処理について、図3に示される処理と異なる点をメインに説明する。
ステップS204において音声と動画の再生タイミングのズレ時間が第2判定値を超えない場合、判定部321は、動画データのビットレートが第3判定値を超えているか否かを判定する(ステップS300)。第3判定値は、予め設定された値である。なお、再生ログが、動画データのビットレートの推移を示す場合、ステップS300において、判定部321は、再生ログに示される動画データのビットレートの最大値が第3判定値を超えているか否かを判定する。
ステップS300において動画データのビットレートが第3判定値を超えていると判定される場合、連続コマ落ち数が第1判定値を超えず、かつ、音声と動画の再生タイミングのズレ時間が第2判定値を超えないと既に判定されている。すなわち、ステップS300において肯定の判定がなされる場合、動画データのビットレートが第3判定値よりも高くても、連続コマ落ち数が第1判定値を超えておらず、かつ、音声と動画の再生タイミングのズレ時間が第2判定値を超えないていない。このため、判定部321は、処理をステップS206に進める。すなわち、判定部321は、ユーザ装置20は問題装置でないと判定する。
ステップS300において動画データのビットレートが第3判定値を超えていない場合、判定部321は、デコード時間が第4判定値を超えているか否かを判定する(ステップS302)。第4判定値は、予め設定された値である。なお、再生ログが、デコード時間の推移を示す場合、ステップS302において、判定部321は、再生ログに示されるデコード時間の最大値が第4判定値を超えているか否かを判定する。
ステップS302においてデコード時間が第4判定値を超えている場合、判定部321は、処理をステップS202に進める。すなわち、動画データのビットレートが第3判定値よりも低いのにデコード時間が第4判定値を超えるので、判定部321は、ユーザ装置20が問題装置であると判定する。
ステップS302においてデコード時間が第4判定値を超えていない場合、判定部321は、デクリプト時間が第5判定値を超えているか否かを判定する(ステップS304)。第5判定値は、予め設定された値である。なお、再生ログが、デクリプト時間の推移を示す場合、ステップS304において、判定部321は、再生ログに示されるデクリプト時間の最大値が第5判定値を超えているか否かを判定する。
ステップS304においてデクリプト時間が第5判定値を超えている場合、判定部321は、処理をステップS202に進める。すなわち、動画データのビットレートが第3判定値よりも低いのにデクリプト時間が第5判定値を超えるので、判定部321は、ユーザ装置20が問題装置であると判定する。
ステップS304においてデクリプト時間が第5判定値を超えない場合、判定部321は、処理装置206の使用率が第6判定値を超えているか否かを判定する(ステップS306)。第6判定値は、予め設定された値である。なお、再生ログが、処理装置206の使用率の推移を示す場合、ステップS306において、判定部321は、再生ログに示される処理装置206の使用率の最大値が第6判定値を超えているか否かを判定する。
ステップS306において処理装置206の使用率が第6判定値を超えている場合、判定部321は、処理をステップS202に進める。すなわち、動画データのビットレートが第3判定値よりも低いのに処理装置206の使用率が第6判定値を超えるので、判定部321は、ユーザ装置20が問題装置であると判定する。
ステップS306において処理装置206の使用率が第6判定値を超えていない場合、判定部321は、作業メモリの使用率が第7判定値を超えているか否かを判定する(ステップS308)。第7判定値は、予め設定された値である。なお、再生ログが、作業メモリの使用率の推移を示す場合、ステップS308において、判定部321は、再生ログに示される作業メモリの使用率の最大値が第7判定値を超えているか否かを判定する。
ステップS308において作業メモリの使用率が第7判定値を超えている場合、判定部321は、処理をステップS202に進める。すなわち、動画データのビットレートが第3判定値よりも低いのに作業メモリの使用率が第7判定値を超えるので、判定部321は、ユーザ装置20は問題装置であると判定する。
ステップS308において作業メモリの使用率が第7判定値を超えていない場合、判定部321は、処理をステップS206に進める。すなわち、判定部321は、ユーザ装置20は問題装置でないと判定する。
図4に例示される処理のうち、ステップS200、S204及びS300の全部又は一部は省略されてもよい。ステップS200及びS204は相互に入れ替わってもよい。ステップS300は、ステップS200の前、又は、ステップS200とステップS204との間に移動されてもよい。ステップS302、S304、S306及びS308の順序は変更可能である。ステップS302、S304、S306及びS308の一部が省略されてもよい。
第1変形例によれば、再生ログが示す動画の再生に関する状況は、動画データに基づいて動画を再生している装置の負荷の状況を含む。このため、動画データに基づいて動画を再生しているユーザ装置20の負荷の状況に応じて、ユーザ装置20に送信される動画データの単位時間当たりのデータ量を調整可能になる。したがって、ユーザ装置20の負荷の状況に起因してユーザ装置20における動画の再生の品質に問題が生じることを抑制可能になる。
<B2.第2変形例>
第1実施形態及び第1変形例において、判定部321は、図5に例示される学習モデル302aを用いて判定を実行してもよい。図5において、図1において説明した要素と同一又は同様の要素については、同一の符号を付し、詳細な説明を省略する。
第1実施形態及び第1変形例において、判定部321は、図5に例示される学習モデル302aを用いて判定を実行してもよい。図5において、図1において説明した要素と同一又は同様の要素については、同一の符号を付し、詳細な説明を省略する。
学習モデル302aは、配信データに基づいて動画及び音声を再生する装置(以下「再生装置」と称する)における動画の再生に関する状況と、再生装置が単位時間当たりに処理できる動画データのデータ量が基準データ量以上であるか否かを示す判定結果と、の関係を示す関係データを学習した学習済みモデルである。学習モデル302aは、関係データの一例である教師データを利用した機械学習にて特定される複数の係数Kによって規定される。
再生装置は、例えば、スマートフォンである。なお、再生装置は、スマートフォンに限らず、例えば、ノートパソコン、ウェアラブル端末、タブレット端末又はデスクトップパソコンでもよい。
次に、学習モデル302aと学習モデル実行部321aについて詳述する。
学習モデル実行部321aは、学習モデル302aを実行する処理装置303によって実現される機能部である。学習モデル実行部321aは、判定部321に含まれる。なお、一般的に、学習モデル実行部321aが学習モデルと称されることもある。
学習モデル302aは、例えば、ニューラルネットワーク、典型的には、ディープニューラルネットワークを規定する。複数の係数Kは、教師データを利用した機械学習によって特定される。学習モデル実行部321aは、受取部310によって受け取られる再生ログに基づいて、ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量以上であるか否か、すなわち、ユーザ装置20が問題装置であるか否かを判定する。なお、学習モデル実行部321aに対して、再生ログが受取部310によって入力されてもよい。再生ログは、連続コマ落ち数と、音声と動画の再生タイミングのズレ時間と、動画データのビットレートと、デコード時間と、処理装置206の使用率と、作業メモリの使用率と、デクリプト時間と、を示す。
学習モデル実行部321aは、学習モデル302aを実行する処理装置303によって実現される機能部である。学習モデル実行部321aは、判定部321に含まれる。なお、一般的に、学習モデル実行部321aが学習モデルと称されることもある。
学習モデル302aは、例えば、ニューラルネットワーク、典型的には、ディープニューラルネットワークを規定する。複数の係数Kは、教師データを利用した機械学習によって特定される。学習モデル実行部321aは、受取部310によって受け取られる再生ログに基づいて、ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量以上であるか否か、すなわち、ユーザ装置20が問題装置であるか否かを判定する。なお、学習モデル実行部321aに対して、再生ログが受取部310によって入力されてもよい。再生ログは、連続コマ落ち数と、音声と動画の再生タイミングのズレ時間と、動画データのビットレートと、デコード時間と、処理装置206の使用率と、作業メモリの使用率と、デクリプト時間と、を示す。
次に、学習モデル302aと学習モデル実行部321aについて観点を変えて説明する。
学習モデル実行部321aは、処理装置(コンピュータの例示)303によって実現されるニューラルネットワーク、さらに言えば、機能ブロックである。学習モデル実行部321aは、入力Aに応じた出力Bを生成する。
学習モデル実行部321aは、処理装置(コンピュータの例示)303によって実現されるニューラルネットワーク、さらに言えば、機能ブロックである。学習モデル実行部321aは、入力Aに応じた出力Bを生成する。
学習モデル302aは、入力Aから出力Bを特定する演算を処理装置303に実行させるプログラム(例えば、人工知能ソフトウェアを構成するプログラムモジュール)において利用される。具体的には、学習モデル302aは、当該演算に適用される複数の係数Kを含む。当該演算には、所定の応答関数が用いられる。
複数の係数Kは、複数の教師データを含む関係データを利用した事前の機械学習(深層学習)によって最適化されている。複数の教師データの各々では、入力Aと出力Bとが相互に対応づけられている。すなわち、学習モデル302aは、入力Aと出力Bとの間の関係を示す関係データを学習した統計的モデルである。
処理装置303は、複数の係数Kと所定の応答関数とを適用した演算を未知の入力Aに対して実行することによって、複数の教師データから抽出される傾向(入力Aと出力Bとの間の関係)に基づく出力B、すなわち、入力Aに対して妥当な出力Bを生成する。
学習モデル302aでは、入力Aとして「再生ログ」(動画の再生に関する状況を示す情報)が用いられ、出力Bとして「ユーザ装置20が単位時間当たりに処理できる動画データのデータ量が基準データ量以上であるか否かの判定結果」が用いられる。
なお、学習モデル実行部321aは、例えば、Tensor Processing Unit(テンソルプロセッシングユニット)及びNeural Engine(ニューラルエンジン)等のニューラルネットワーク用のプロセッサによって実現されてもよい。
図6は、複数の係数Kによって規定される学習モデル302aを生成する学習モデル生成装置50の一例を示す図である。図6において、図1において説明した要素と同一又は同様の要素については、同一の符号を付し、詳細な説明を省略する。
学習モデル生成装置50は、学習モデル302a用の教師データと、学習モデル302aを規定する複数の係数Kと、を生成する。学習モデル302a用の教師データは、学習モデル生成装置50とは異なる装置によって生成されてもよい。学習モデル生成装置50は、ネットワークNWを介して、情報処理装置41~4n(nは1以上の整数)と通信する。
情報処理装置41~4nは、動画再生装置の一例である。情報処理装置41~4nは、動画及び音声を再現するための再生情報が付与されている再生ログを出力する点を除いて、ユーザ装置20と同一構成である。以下、情報処理装置41~4nの各々を、情報処理装置4m(mは1~nの整数)と称する。
再生情報は、情報処理装置4mが再生した動画及び音声を再現するために使用される。再生情報は、情報処理装置4mにおいて音声及び動画の再生に用いられた配信データの識別情報を含む。再生情報は、さらに、動画を構成する画像フレームのインデックス番号ごとに、当該インデックス番号の画像フレームの画質(解像度)、当該画像フレームの再生の有無、及び、当該画像フレームが同期すべき音声と当該画像フレームが示す動画との再生タイミングのズレ時間を示す。
情報処理装置41~4nは、動画再生装置の一例である。情報処理装置41~4nは、動画及び音声を再現するための再生情報が付与されている再生ログを出力する点を除いて、ユーザ装置20と同一構成である。以下、情報処理装置41~4nの各々を、情報処理装置4m(mは1~nの整数)と称する。
再生情報は、情報処理装置4mが再生した動画及び音声を再現するために使用される。再生情報は、情報処理装置4mにおいて音声及び動画の再生に用いられた配信データの識別情報を含む。再生情報は、さらに、動画を構成する画像フレームのインデックス番号ごとに、当該インデックス番号の画像フレームの画質(解像度)、当該画像フレームの再生の有無、及び、当該画像フレームが同期すべき音声と当該画像フレームが示す動画との再生タイミングのズレ時間を示す。
学習モデル生成装置50は、入力装置501、表示装置502、スピーカ503、通信装置504、記憶装置505及び処理装置506を含むコンピュータシステムによって構成される。学習モデル生成装置50の各要素は、1又は2以上のバスによって相互に接続される。また、学習モデル生成装置50の各要素は、1又は2以上の機器によって構成される。
入力装置501は、学習モデル生成装置50によって使用される情報を学習モデル生成装置50に入力するための機器である。入力装置501は、ユーザからの指示又は質問等のユーザの入力を受け取る。入力装置501は、例えば、キーボードである。なお、入力装置501は、キーボードに限らず、表示装置502の表示面に対する接触を検出するタッチパネル、マウス、スイッチ又はボタン等でもよい。
表示装置502は、処理装置506によって制御されることによって各種の画像を表示する。例えば、表示装置502は、配信データに含まれる動画データに基づく動画を表示する。表示装置502は、例えば、液晶表示パネル又は有機EL表示パネル等である。
スピーカ503は、処理装置506によって制御されることによって各種の音を出力する。例えば、スピーカ503は、配信データに含まれる音声データに基づく音声を出力する。
通信装置504は、ネットワークNWを介して他の装置、例えば、情報処理装置41~4nと通信する。通信装置504は、例えば、ネットワークデバイス、ネットワークコントローラ、ネットワークカード又は通信モジュールとも称される。
記憶装置505は、処理装置506が読み取り可能な記録媒体である。記憶装置505は、処理装置506によって実行される制御プログラム、及び、処理装置506が使用する各種のデータを記憶する。記憶装置505は、例えば、不揮発性メモリ(例えば、ROM、EPROM又はEEPROM)と、揮発性メモリ(例えば、RAM)とによって構成される。
処理装置506は、学習モデル生成装置50を制御するプロセッサである。処理装置506は、例えば、1又は2以上のチップによって構成される。一例を挙げると、処理装置506は、中央処理装置(CPU)によって構成される。処理装置506の機能の一部又は全部は、DSP、ASIC、PLD又はFPGA等のハードウェアによって実現されてもよい。処理装置506は、各種の処理を並列的又は逐次的に実行する。
処理装置506は、記憶装置505から制御プログラムを読み取る。処理装置506は、当該制御プログラムを実行することによって、受取部510、再現部520、評価入手部530、教師データ生成部540及び学習モデル生成部550として機能する。
受取部510、再現部520、評価入手部530、教師データ生成部540及び学習モデル生成部550は、処理装置506の機能ブロックの一例である。受取部510、再現部520、評価入手部530、教師データ生成部540及び学習モデル生成部550の全部又は一部は、DSP、ASIC、PLD又はFPGA等のハードウェアによって構成されてもよい。
受取部510は、通信装置504を介して、情報処理装置4mから再生ログを受け取る。以下、情報処理装置4mから受け取られる再生ログを「学習用の再生ログ」と称する。学習用の再生ログは、連続コマ落ち数と、音声と動画の再生タイミングのズレ時間と、動画データのビットレートと、デコード時間と、処理装置206の使用率と、作業メモリの使用率と、デクリプト時間の状況と、を示す。また、学習用の再生ログには、再生情報が付加されている。
例えば、受取部510は、情報処理装置4mが自発的に送信する学習用の再生ログを受け取る。なお、受取部510は、情報処理装置4mに学習用の再生ログの要求を送信し、情報処理装置4mが学習用の再生ログの要求に応じて送信する学習用の再生ログを受け取ってもよい。
例えば、受取部510は、情報処理装置4mが自発的に送信する学習用の再生ログを受け取る。なお、受取部510は、情報処理装置4mに学習用の再生ログの要求を送信し、情報処理装置4mが学習用の再生ログの要求に応じて送信する学習用の再生ログを受け取ってもよい。
再現部520は、学習用の再生ログごとに、再生情報に基づいて、情報処理装置4mにおける動画及び音声の再生の状況を、表示装置502及びスピーカ503を用いて再現する。例えば、再現部520は、まず、再生情報が示す配信データの識別情報によって特定される配信データを配信サーバ10から入手する。具体的には、再現部520は、再生情報において画像フレームのインデックス番号ごとに示される画質のうち最高の画質を有する動画を示す配信データを、配信サーバ10から入手する。なお、再現部520は、当該配信データを、配信サーバ10とは異なるサーバから入手してもよい。
続いて、再現部520は、配信データと再生情報とに基づいて、再生情報が示す動画及び音声の再生の状況を、表示装置502及びスピーカ503を用いて再現する。このため、各画像フレームの画質、各画像フレームの再生の有無、及び、各画像フレームの音声との再生タイミングのズレ時間が再現される。なお、画像フレームのインデックス番号ごとに示される画質のうち最高の画質を有する動画を示す配信データを用いるため、画像フレームのインデックス番号ごとに示されるいずれの画質への変換も可能である。
判定者は、再現部520が再現する動画及び音声の再生の状況に基づいて、情報処理装置4mが問題装置であるか否か、すなわち、情報処理装置4mが単位時間当たりに処理できる動画データのデータ量が基準データ量以上であるか否かを判定する。判定者は、判定結果を入力装置501に入力する。
評価入手部530は、学習用の再生ログごとに、判定者が行う判定の結果を入力装置501から受け取る。
教師データ生成部540は、学習用の再生ログごとに、教師データを生成する。教師データは、学習用の再生ログと、当該学習用の再生ログに基づいて再現された動画の再生に基づく判定結果(ラベル)との組である。具体的には、教師データ生成部540は、まず、学習用の再生ログから再生情報を削除する。次に、教師データ生成部540は、再生情報が削除された学習用の再生ログごとに、当該学習用の再生ログと、当該学習用の再生ログに基づいて再現された動画の再生に基づく判定結果と、の組を、教師データとして生成する。このため、教師データは、動画の再生に関する状況(再生ログが示す状況)と判定結果との関係を示す。
学習モデル生成部550は、教師データ生成部540にて生成される教師データを利用した機械学習(深層学習)を行うことによって、学習モデル302aを規定する複数の係数Kを特定する。学習モデル生成部550によって特定される複数の係数Kは、例えば、判定者によって、図1に示す記憶装置302に記憶される。記憶装置302に記憶される複数の係数Kに基づいて、QoEサーバ30は学習モデル実行部321aを実現する。
第2変形例においては、学習用の再生ログ及びユーザ装置20の再生ログは、連続コマ落ち数と、音声と動画の再生タイミングのズレ時間、動画データのビットレートと、デコード時間と、処理装置206の使用率と、作業メモリの使用率と、デクリプト時間の状況と、を示す。
連続コマ落ち数が多いほど、動画の再生品質は悪くなりやすい。音声と動画の再生タイミングのズレ時間が長いほど、動画の再生品質は悪くなりやすい。
デコード時間が長いほど、連続コマ落ち数が多くなりやすく、又、音声と動画の再生タイミングのズレ時間も長くなりやすい。よって、デコード時間が長いほど、動画の再生品質は悪くなりやすい。
処理装置206の使用率が高いほど、処理装置206における処理が滞りやすい。処理が滞りやすいと、連続コマ落ち数が多くなりやすい。処理が滞りやすいと、音声と動画の再生タイミングのズレ時間も長くなりやすい。よって、処理装置206の使用率が高いほど、動画の再生品質は悪くなりやすい。
作業メモリの使用率が高いほど、処理装置206における処理が滞りやすい。このため、作業メモリの使用率が高いほど、動画の再生品質は悪くなりやすい。
デクリプト時間が長いほど、連続コマ落ち数が多くなりやすい。デクリプト時間が長いほど、音声と動画の再生タイミングのズレ時間も長くなりやすい。よって、デクリプト時間が長いほど、動画の再生品質は悪くなりやすい。
動画データのビットレートが高いほど、処理装置206における処理が滞りやすい。このため、動画データのビットレートが高いほど、動画の再生品質は悪くなりやすい。
このように、ユーザ装置20の再生ログ及び学習用の再生ログが示す種々の情報は、動画の再生品質に影響すると考えられる。学習モデル302aにおいては、学習用の再生ログを用いた教師データに基づく機械学習がなされている。したがって、学習用の再生ログを用いた教師データに基づく機械学習がなされていない学習モデルを用いる判定の精度に比べて、学習モデル302aを用いる判定の精度を高くできる。
なお、ユーザ装置20の再生ログと学習用の再生ログは、連続コマ落ち数と、音声と動画の再生タイミングのズレ時間と、動画データのビットレートと、デコード時間と、処理装置206の使用率と、作業メモリの使用率と、デクリプト時間のうち一部のみを示してもよい。
一例を挙げると、ユーザ装置20の再生ログと学習用の再生ログは、連続コマ落ち数と、音声と動画の再生タイミングのズレ時間と、動画データのビットレートと、デコード時間と、処理装置206の使用率と、作業メモリの使用率と、デクリプト時間のうち、連続コマ落ち数と、音声と動画の再生タイミングのズレ時間と、の2つの要素のみ、又は2つの要素の一方のみを示してもよい。
連続コマ落ち数と、音声と動画の再生タイミングのズレ時間は、動画の再生品質に直接的に寄与するため、判定者が行う判定に影響を与えやすい。よって、ユーザ装置20の再生ログと学習用の再生ログが、連続コマ落ち数と、音声と動画の再生タイミングのズレ時間と、のうち、少なくとも一方を示す場合、いずれも示さない場合に比べて、学習モデル302aを用いる判定の結果の精度を向上できる。
連続コマ落ち数と、音声と動画の再生タイミングのズレ時間は、動画の再生品質に直接的に寄与するため、判定者が行う判定に影響を与えやすい。よって、ユーザ装置20の再生ログと学習用の再生ログが、連続コマ落ち数と、音声と動画の再生タイミングのズレ時間と、のうち、少なくとも一方を示す場合、いずれも示さない場合に比べて、学習モデル302aを用いる判定の結果の精度を向上できる。
また、ユーザ装置20の再生ログと学習用の再生ログは、連続コマ落ち数及び音声と動画の再生タイミングのズレ時間に加え、動画データのビットレートとデコード時間と処理装置206の使用率と作業メモリの使用率とデクリプト時間の一部のみを示してもよい。
また、ユーザ装置20の再生ログと学習用の再生ログは、連続コマ落ち数及び音声と動画の再生タイミングのズレ時間の状況の一方のみに加え、動画データのビットレートと、デコード時間と、処理装置206の使用率と、作業メモリの使用率と、デクリプト時間との全部又は一部のみを示してもよい。
動画データのビットレートと、デコード時間と、処理装置206の使用率と、作業メモリの使用率と、デクリプト時間は、上述の通り、動画の再生品質に影響すると考えられる。このため、ユーザ装置20の再生ログと学習用の再生ログが、連続コマ落ち数及び音声と動画の再生タイミングのズレ時間の全部又は一部に加え、動画データのビットレート、デコード時間と、処理装置206の使用率と、作業メモリの使用率と、デクリプト時間の全部又は一部を示す場合、学習モデル302aを用いる判定の結果の精度を高くできる。
なお、学習モデル302aは、ニューラルネットワーク又はディープニューラルネットワークによって表されるモデルに限定されない。例えばSVM(Support Vector Machine)又はHMM(Hidden Markov Model)によって、学習モデル302aが表されてもよい。
<B3.第3変形例>
第1実施形態、第1変形例及び第2変形例においては、QoEサーバ30が、ユーザ装置20の再生ログに基づいて、ユーザ装置20に単位時間当たりに送信される動画データのデータ量を制御するための要求の内容を決定する。第3変形例においては、QoEサーバ30ではなくユーザ装置20が、ユーザ装置20の再生ログに基づいて、ユーザ装置20に単位時間当たりに送信される動画データのデータ量を制御するための要求の内容を決定する。
第1実施形態、第1変形例及び第2変形例においては、QoEサーバ30が、ユーザ装置20の再生ログに基づいて、ユーザ装置20に単位時間当たりに送信される動画データのデータ量を制御するための要求の内容を決定する。第3変形例においては、QoEサーバ30ではなくユーザ装置20が、ユーザ装置20の再生ログに基づいて、ユーザ装置20に単位時間当たりに送信される動画データのデータ量を制御するための要求の内容を決定する。
図7は、第3変形例に係る配信システム1の一例を示すブロック図である。図7において、図1を用いて説明した要素と同一又は同様の要素については、同一の符号を付し、詳細な説明を省略する。
図7に例示される配信システム1は、QoEサーバ30を含まず、ユーザ装置20が要求決定部230と要求部240とを含む点において、図1に例示される配信システム1と異なる。
ユーザ装置20の処理装置206は、記憶装置205に記憶されているプログラムを読み取る。処理装置206は、当該プログラムを実行することによって、再生実行部210、動作制御部220、要求決定部230及び要求部240を実現する。
再生実行部210、動作制御部220、要求決定部230及び要求部240は、処理装置206の機能ブロックの一例である。再生実行部210、動作制御部220、要求決定部230及び要求部240の全部又は一部は、DSP、ASIC、PLD又はFPGA等のハードウェアによって構成されてもよい。
図7に例示される配信システム1においては、動作制御部220は、再生ログを要求決定部230に提供する。
要求決定部230は、再生ログが示す再生実行部210における動画の再生に関する状況に基づいて、配信サーバ10が単位時間当たりに送信すべき動画データのデータ量に関する要求の内容を決定する。要求決定部230は、上述の判定部321と、ユーザ装置要求決定部231を含む。
ユーザ装置要求決定部231は、判定部321の判定結果に基づいて、ユーザ装置20が配信サーバ10に送信すべき要求の内容、さらに言えば、配信サーバ10が単位時間当たりに送信すべき動画データのデータ量に関する要求の内容を決定する。ユーザ装置要求決定部231が要求の内容を決定する動作は、上述の決定部322が要求の内容を決定する動作と同様である。
要求部240は、要求決定部230が決定した内容を示す要求を配信サーバ10に送信する。
第3変形例によれば、ユーザ装置20が、ユーザ装置20の再生ログに基づいて、配信サーバ10への要求の内容を決定する。このため、QoEサーバ30を不要にでき構成の簡略化を図れる。
<B4.第4変形例>
第1実施形態及び第1変形例~第2変形例において、ユーザ装置20の動作制御部220は、最新の指定情報を記憶装置205に記憶してもよい。この場合、動作制御部220は、配信サーバ10に配信データを新たに要求する際、記憶装置205に記憶されている最新の指定情報の示す要求を配信サーバ10に送信してもよい。
第1実施形態及び第1変形例~第2変形例において、ユーザ装置20の動作制御部220は、最新の指定情報を記憶装置205に記憶してもよい。この場合、動作制御部220は、配信サーバ10に配信データを新たに要求する際、記憶装置205に記憶されている最新の指定情報の示す要求を配信サーバ10に送信してもよい。
また、第3変形例において、ユーザ装置20の動作制御部220は、要求決定部230の最新の決定結果を示す要求情報を記憶装置205に記憶してもよい。この場合、動作制御部220は、配信サーバ10に配信データを新たに要求する際、記憶装置205に記憶されているデータ量情報の示す要求を配信サーバ10に送信してもよい。
第4変形例によれば、ユーザ装置20は、配信データの送信の開始時から、ユーザ装置20のスペックに応じた単位時間当たりのデータ量の動画データに基づいて、動画を再生可能になる。このため、動画の再生品質の低下を抑制できる。
<B5.第5変形例>
第1実施形態及び第1変形例~第4変形例において、配信サーバ10は、ユーザ装置20から配信データの要求を受信する場合、先頭に広告を示す広告動画データが付加された配信データをユーザ装置20へ送信してもよい。
第1実施形態及び第1変形例~第4変形例において、配信サーバ10は、ユーザ装置20から配信データの要求を受信する場合、先頭に広告を示す広告動画データが付加された配信データをユーザ装置20へ送信してもよい。
ユーザにとって、広告の再生品質は、広告の後に再生される動画の再生品質よりも気にならない可能性が高い。このため、第5変形例によれば、単位時間当たりの動画データのデータ量が調整されるまでの間の動画再生の品質の低下が、ユーザに認識され難くなり、かつ、広告後の動画の再生品質の低下を抑制できる。
<B6.第6変形例>
第1実施形態、第1変形例、第2変形例、第4変形例及び第5変形例において、ユーザ装置20の再生ログを蓄積する装置(以下「第1蓄積装置」と称する)が存在する場合、受取部310は、第1蓄積装置から、ユーザ装置20の再生ログを受け取ってもよい。
第1実施形態、第1変形例、第2変形例、第4変形例及び第5変形例において、ユーザ装置20の再生ログを蓄積する装置(以下「第1蓄積装置」と称する)が存在する場合、受取部310は、第1蓄積装置から、ユーザ装置20の再生ログを受け取ってもよい。
例えば、受取部310は、第1蓄積装置が自発的に送信する再生ログを受け取る。受取部310は、第1蓄積装置に再生ログの要求を送信し、第1蓄積装置が再生ログの要求に応じて送信する再生ログを受け取ってもよい。
また、情報処理装置41~4nの各々の学習用の再生ログを蓄積する装置(以下「第2蓄積装置」と称する)が存在する場合、受取部510は、第2蓄積装置から、学習用の再生ログを受け取ってもよい。
例えば、受取部510は、第2蓄積装置が自発的に送信する学習用の再生ログを受け取る。受取部510は、第2蓄積装置に学習用の再生ログの要求を送信し、第2蓄積装置が学習用の再生ログの要求に応じて送信する学習用の再生ログを受け取ってもよい。
<C.その他>
(1)第1実施形態及び第1変形例~第6変形例の各々においては、記憶装置102、205及び302は、フレキシブルディスク、光磁気ディスク(例えば、コンパクトディスク、デジタル多用途ディスク、Blu-ray(登録商標)ディスク)、スマートカード、フラッシュメモリデバイス(例えば、カード、スティック、キードライブ)、CD-ROM(Compact Disc-ROM)、レジスタ、リムーバブルディスク、ハードディスク、フロッピー(登録商標)ディスク、磁気ストリップ、データベース、サーバその他の適切な記憶媒体を含んでもよい。また、プログラムは、電気通信回線を介してネットワークから送信されてもよい。
(1)第1実施形態及び第1変形例~第6変形例の各々においては、記憶装置102、205及び302は、フレキシブルディスク、光磁気ディスク(例えば、コンパクトディスク、デジタル多用途ディスク、Blu-ray(登録商標)ディスク)、スマートカード、フラッシュメモリデバイス(例えば、カード、スティック、キードライブ)、CD-ROM(Compact Disc-ROM)、レジスタ、リムーバブルディスク、ハードディスク、フロッピー(登録商標)ディスク、磁気ストリップ、データベース、サーバその他の適切な記憶媒体を含んでもよい。また、プログラムは、電気通信回線を介してネットワークから送信されてもよい。
(2)第1実施形態及び第1変形例~第6変形例の各々は、LTE(Long Term Evolution)、LTE-A(LTE-Advanced)、SUPER 3G、IMT-Advanced、4G、5G、FRA(Future Radio Access)、W-CDMA(登録商標)、GSM(登録商標)、CDMA2000、UMB(Ultra Mobile Broadband)、IEEE 802.11(Wi-Fi)、IEEE 802.16(WiMAX)、IEEE 802.20、UWB(Ultra-WideBand)、Bluetooth(登録商標)、その他の適切なシステムを利用するシステム及び/又はこれらに基づいて拡張された次世代システムに適用されてもよい。
(3)第1実施形態及び第1変形例~第6変形例の各々において説明した情報などは、様々な異なる技術のいずれかを使用して表されてもよい。例えば、上記の説明全体に渡って言及され得るデータ、情報、ビット、チップなどは、電圧、電流、電磁波、磁界、磁性粒子、光場、は光子、又はこれらの任意の組み合わせによって表されてもよい。なお、本明細書において説明した用語及び/又は本明細書の理解に必要な用語は、同一の又は類似する意味を有する用語と置き換えられてもよい。
(4)第1実施形態及び第1変形例~第6変形例の各々において、入出力された情報等は特定の場所(例えば、メモリ)に保存されてもよいし、管理テーブルによって管理されてもよい。入出力される情報等は、上書き、更新、又は追記され得る。出力された情報等は削除されてもよい。入力された情報等は他の装置へ送信されてもよい。
(5)第1実施形態及び第1変形例~第6変形例の各々において、判定は、1ビットによって表される値(0か1か)に基づいて行われてもよいし、真偽値(Boolean:true又はfalse)に基づいて行われてもよいし、数値の比較(例えば、所定の値との比較)に基づいて行われてもよい。
(6)第1実施形態及び第1変形例~第6変形例の各々において例示した処理手順、シーケンス、又はフローチャート等は、矛盾のない限り、順序を入れ替えてもよい。例えば、本明細書において説明した方法については、例示的な順序によって様々なステップの要素を提示しており、提示した特定の順序に限定されない。
(7)図1、図5、図6及又は図7に例示された各機能は、ハードウェア及びソフトウェアの任意の組み合わせによって実現される。また、各機能は、単体の装置によって実現されてもよいし、相互に別体にて構成された2個以上の装置によって実現されてもよい。
(8)第1実施形態及び第1変形例~第6変形例の各々において例示したプログラムは、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード又はハードウェア記述言語と呼ばれるか、他の名称によって呼ばれるかを問わず、命令、命令セット、コード、コードセグメント、プログラムコード、サブプログラム、ソフトウェアモジュール、アプリケーション、ソフトウェアアプリケーション、ソフトウェアパッケージ、ルーチン、サブルーチン、オブジェクト、実行可能ファイル、実行スレッド、手順又は機能等を意味するよう広く解釈されるべきである。
また、ソフトウェア、又は命令などは、伝送媒体を介して送受信されてもよい。例えば、ソフトウェアが、同軸ケーブル、光ファイバケーブル、ツイストペア及びデジタル加入者回線(DSL)などの有線技術及び/又は赤外線、無線及びマイクロ波などの無線技術を使用してウェブサイト、サーバ、又は他のリモートソースから送信される場合、これらの有線技術及び/又は無線技術は、伝送媒体の定義内に含まれる。
また、ソフトウェア、又は命令などは、伝送媒体を介して送受信されてもよい。例えば、ソフトウェアが、同軸ケーブル、光ファイバケーブル、ツイストペア及びデジタル加入者回線(DSL)などの有線技術及び/又は赤外線、無線及びマイクロ波などの無線技術を使用してウェブサイト、サーバ、又は他のリモートソースから送信される場合、これらの有線技術及び/又は無線技術は、伝送媒体の定義内に含まれる。
(9)第1実施形態及び第1変形例~第6変形例の各々において、「システム」及び「ネットワーク」という用語は、互換的に使用される。
(10)第1実施形態及び第1変形例~第6変形例の各々において、ユーザ装置20は、移動局でもよい。移動局は、当業者によって、加入者局、モバイルユニット、加入者ユニット、ワイヤレスユニット、リモートユニット、モバイルデバイス、ワイヤレスデバイス、ワイヤレス通信デバイス、リモートデバイス、モバイル加入者局、アクセス端末、モバイル端末、ワイヤレス端末、リモート端末、ハンドセット、ユーザエージェント、モバイルクライアント、クライアント、又はいくつかの他の適切な用語を用いて称される場合もある。
(11)本明細書において使用する「決定(determining)」という用語は、多種多様な動作を包含する場合がある。「決定」は、例えば、判定(judging)、計算(calculating)、算出(computing)、処理(processing)、導出(deriving)、調査(investigating)、探索(looking up)(例えば、テーブル、データベース又は別のデータ構造における探索)、確認(ascertaining)した事を「決定」したとみなす事などを含み得る。また、「決定」は、受信(receiving)(例えば、情報を受信すること)、送信(transmitting)(例えば、情報を送信すること)、入力(input)、出力(output)、アクセス(accessing)(例えば、メモリ中のデータにアクセスすること)した事を「決定」したとみなす事などを含み得る。また、「決定」は、解決(resolving)、選択(selecting)、選定(choosing)、確立(establishing)、比較(comparing)などした事を「決定」したとみなす事を含み得る。つまり、「決定」は、何らかの動作を「決定」したとみなす事を含み得る。
(12)第1実施形態及び第1変形例~第6変形例の各々において、「に基づいて」という記載は、別段に明記されていない限り、「のみに基づいて」を意味しない。言い換えれば、「に基づいて」という記載は、「のみに基づいて」と「に少なくとも基づいて」の両方を意味する。
(13)本明細書において使用する「第1」及び「第2」などの呼称を使用した要素へのいかなる参照も、それらの要素の量又は順序を全般的に限定しない。これらの呼称は、2つ以上の要素間を区別する便利な方法として本明細書において使用され得る。したがって、第1及び第2の要素への参照は、2つの要素のみが採用され得ること又は何らかの形において第1要素が第2要素に先行しなければならないことを意味しない。
(14)第1実施形態及び第1変形例~第6変形例の各々において「含む(including)」、「含んでいる(comprising)」、及びそれらの変形が、本明細書あるいは特許請求の範囲において使用されている限り、これら用語は、用語「備える」と同様に、包括的であることが意図される。さらに、本明細書あるいは特許請求の範囲において使用されている用語「又は(or)」は、排他的論理和ではないことが意図される。
(15)本願の全体において、例えば、英語におけるa、an及びtheのように、翻訳によって冠詞が追加された場合、これらの冠詞は、文脈から明らかにそうではないことが示されていなければ、複数を含む。
(16)本発明が本明細書中に説明した実施形態に限定されないことは当業者にとって明白である。本発明は、特許請求の範囲の記載に基づいて定まる本発明の趣旨及び範囲を逸脱することなく修正及び変更態様として実施できる。従って、本明細書の記載は、例示的な説明を目的とし、本発明に対して何ら制限的な意味を有さない。また、本明細書に例示した態様から選択された複数の態様を組み合わせてもよい。
1…配信システム、10…配信サーバ、101…通信装置、102…記憶装置、103…処理装置、110…配信制御部、20…ユーザ装置、201…入力装置、202…表示装置、203…スピーカ、204…通信装置、205…記憶装置、206…処理装置、210…再生実行部、220…動作制御部、230…要求決定部、231…ユーザ装置要求決定部、240…要求部、30…QoEサーバ、301…通信装置、302…記憶装置、302a…学習モデル、303…処理装置、310…受取部、320…生成部、321…判定部、322…決定部、330…提供部、321a…学習モデル実行部。
Claims (8)
- 配信サーバから動画データを含む配信データを受信する受信装置における前記動画データが表す動画の再生に関する状況を示す状況情報を受け取る受取部と、
前記受取部が受け取る前記状況情報に基づいて、前記受信装置が前記配信サーバに送信すべき要求として、前記配信サーバが単位時間当たりに送信すべき前記動画データのデータ量に関する要求を指定する指定情報を生成する生成部と、
前記生成部が生成した前記指定情報を前記受信装置に提供する提供部と、
を含む制御装置。 - 前記生成部は、
前記受取部が受け取る前記状況情報に基づいて、前記受信装置が前記単位時間当たりに処理できる前記動画データのデータ量が、基準データ量以上であるか否かを判定する判定部と、
前記判定部における判定結果に基づいて、前記要求の内容を決定する決定部と、
を含む、
請求項1に記載の制御装置。 - 前記決定部は、
前記受信装置が前記単位時間当たりに処理できる前記動画データの前記データ量が前記基準データ量に満たないと前記判定部が判定する場合、前記配信サーバが前記単位時間当たりに送信すべき前記動画データの前記データ量を前記基準データ量よりも少ないデータ量にすることを、前記要求の前記内容として決定する、
請求項2に記載の制御装置。 - 前記判定部は、
動画再生装置における動画の再生に関する状況と、前記動画再生装置が前記単位時間当たりに処理できる前記動画データのデータ量が前記基準データ量以上であるか否かを示す判定結果と、の関係を示す関係データを学習した学習モデルを用いて、前記状況情報に基づいて、前記受信装置が前記単位時間当たりに処理できる前記動画データの前記データ量が前記基準データ量以上であるか否かを判定する、
請求項2又は3に記載の制御装置。 - 前記受取部は、
前記状況情報として、
前記受信装置が行う前記動画の再生の開始時点から前記開始時点よりも後の第1時点までの期間における前記動画の再生に関する状況を示す第1状況情報、又は、
前記開始時点よりも後の第2時点から前記第2時点よりも後の第3時点までの期間における前記動画の再生に関する状況を示す第2状況情報
を受け取る、
請求項1から4のいずれか1項に記載の制御装置。 - 前記状況情報は、
前記動画の再生における乱れに関する状況、及び、
前記動画を再生している再生装置の負荷の状況
の両方又は一方を示す、
請求項1から5のいずれか1項に記載の制御装置。 - 前記配信データは、前記動画データに加えて、前記動画データが表す前記動画と共に再生されるべき音声を示す音声データを含み、
前記状況情報は、
前記動画を構成する連続する画像フレームのうち再生されなかった画像フレームの数の状況、及び、
前記音声データに基づいて前記受信装置において再生される前記音声と、前記動画データに基づいて前記受信装置において再生される前記動画と、の再生タイミングのズレの状況
の両方又は一方を示す、
請求項1から5のいずれか1項に記載の制御装置。 - 配信サーバから送信される配信データに含まれる動画データが表す動画を再生する再生実行部と、
前記再生実行部における前記動画の再生に関する状況に基づいて、前記配信サーバが単位時間当たりに送信すべき前記動画データのデータ量に関する要求の内容を決定する要求決定部と、
前記要求決定部が決定した前記内容を示す前記要求を前記配信サーバに送信する要求部と、
を含む通信装置。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019016760 | 2019-02-01 | ||
| JP2019-016760 | 2019-02-01 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2020158093A1 true WO2020158093A1 (ja) | 2020-08-06 |
Family
ID=71841257
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2019/043653 Ceased WO2020158093A1 (ja) | 2019-02-01 | 2019-11-07 | 制御装置及び通信装置 |
Country Status (1)
| Country | Link |
|---|---|
| WO (1) | WO2020158093A1 (ja) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2008108379A1 (ja) * | 2007-02-28 | 2008-09-12 | Nec Corporation | メディア配信システム、配信サーバ装置及びそれらに用いるメディア配信方法並びにそのプログラム |
| JP2015228648A (ja) * | 2011-11-02 | 2015-12-17 | 日本電信電話株式会社 | コンテンツ再生情報推定装置及び方法及びプログラム |
| JP2019016961A (ja) * | 2017-07-07 | 2019-01-31 | 日本電信電話株式会社 | 動画品質制御装置、ビットレート選択方法、及びプログラム |
-
2019
- 2019-11-07 WO PCT/JP2019/043653 patent/WO2020158093A1/ja not_active Ceased
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2008108379A1 (ja) * | 2007-02-28 | 2008-09-12 | Nec Corporation | メディア配信システム、配信サーバ装置及びそれらに用いるメディア配信方法並びにそのプログラム |
| JP2015228648A (ja) * | 2011-11-02 | 2015-12-17 | 日本電信電話株式会社 | コンテンツ再生情報推定装置及び方法及びプログラム |
| JP2019016961A (ja) * | 2017-07-07 | 2019-01-31 | 日本電信電話株式会社 | 動画品質制御装置、ビットレート選択方法、及びプログラム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US12321575B2 (en) | Remotely configuring windows displayed on a display device | |
| US20130195427A1 (en) | Method and apparatus for developing and utilizing multi-track video files | |
| US20150156557A1 (en) | Display apparatus, method of displaying image thereof, and computer-readable recording medium | |
| JP6033298B2 (ja) | 最適な表示のための、トランスコーディング検出およびコンテンツの調整 | |
| US11140463B2 (en) | Systems and methods for displaying interactive content item for a predetermined duration | |
| US9680904B2 (en) | Adaptive buffers for media players | |
| US20250126328A1 (en) | Systems and methods for providing timeline of content items on a user interface | |
| US20250071396A1 (en) | Personalized semantic fast-forward videos for next generation streaming platforms | |
| US20240323495A1 (en) | System and method for selection and transmission of personalized content tracks | |
| CN109076250B (zh) | 交互式音频元数据处置 | |
| CN104429090A (zh) | 内容发送装置、内容再生装置、内容分发系统、内容发送装置的控制方法、内容再生装置的控制方法、数据结构、控制程序以及记录介质 | |
| WO2020158095A1 (ja) | 評価装置 | |
| WO2020158093A1 (ja) | 制御装置及び通信装置 | |
| WO2020158094A1 (ja) | 情報処理装置、サーバ装置及び情報処理システム | |
| US20230138238A1 (en) | Methods, systems, and media for streaming video content using adaptive buffers | |
| US20230106992A1 (en) | Combined Media Capability for Multiple Media Devices | |
| JP7369604B2 (ja) | 情報処理システム | |
| JP2024041262A (ja) | 動画再生装置及びプログラム | |
| JP2020162138A (ja) | 情報処理装置及びプログラム | |
| CN112887755A (zh) | 用于播放视频的方法和装置 | |
| HK1201356B (zh) | 对在显示设备上显示的窗口进行远程配置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 19913519 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 19913519 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: JP |