JP5413364B2 - Content distribution system, feature distribution server, and content distribution method - Google Patents

Content distribution system, feature distribution server, and content distribution method Download PDF

Info

Publication number
JP5413364B2
JP5413364B2 JP2010501805A JP2010501805A JP5413364B2 JP 5413364 B2 JP5413364 B2 JP 5413364B2 JP 2010501805 A JP2010501805 A JP 2010501805A JP 2010501805 A JP2010501805 A JP 2010501805A JP 5413364 B2 JP5413364 B2 JP 5413364B2
Authority
JP
Japan
Prior art keywords
content
processing
feature amount
quality evaluation
feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010501805A
Other languages
Japanese (ja)
Other versions
JPWO2009110238A1 (en
Inventor
裕三 仙田
徹 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2010501805A priority Critical patent/JP5413364B2/en
Publication of JPWO2009110238A1 publication Critical patent/JPWO2009110238A1/en
Application granted granted Critical
Publication of JP5413364B2 publication Critical patent/JP5413364B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/29—Arrangements for monitoring broadcast services or broadcast-related services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209—Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44245—Monitoring the upstream path of the transmission network, e.g. its availability, bandwidth

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、ネットワークを利用して、映像コンテンツや音声コンテンツを配信するシステムに関し、特に配信品質の監視システムに関する。   The present invention relates to a system for distributing video content and audio content using a network, and more particularly to a distribution quality monitoring system.

関連する映像コンテンツや音声コンテンツを配信するシステムとしては、例えば特許文献１に記載されたものがある。同文献に記載された画像品質分析方法および装置を説明するためのブロック図を図５に示す。   As a system for distributing related video content and audio content, for example, there is one described in Patent Document 1. FIG. 5 is a block diagram for explaining the image quality analysis method and apparatus described in this document.

サーバ側とクライアント側の両方で、映像から品質パラメータと称する特徴量を算出し、それらを比較評価することで、ユーザが知覚したであろう品質を測定している。   On both the server side and the client side, feature quantities called quality parameters are calculated from the video, and the quality that the user would have perceived is measured by comparing and evaluating them.

また、特許文献２に記載された映像コンテンツ配信システムを図６に示す。この映像コンテンツ配信システムは、映像コンテンツの配信を行なう映像配信サーバ６００と、映像配信サーバ６００からの映像コンテンツを再生するクライアント７００と、映像配信サーバ６００とクライアント７００を互いに接続するネットワーク３００で構成されている。ネットワーク３００は、光ネットワーク、インターネット、電話網等、どのようなものでもよい。   FIG. 6 shows a video content distribution system described in Patent Document 2. This video content distribution system includes a video distribution server 600 that distributes video content, a client 700 that reproduces video content from the video distribution server 600, and a network 300 that connects the video distribution server 600 and the client 700 to each other. ing. The network 300 may be any network such as an optical network, the Internet, or a telephone network.

映像配信サーバ６００は、映像コンテンツを蓄積するコンテンツ蓄積部６０１と、品質評価の対象となる映像コンテンツを決定する評価対象決定部６０２と、映像コンテンツのなかで品質評価の対象となる位置を決定する評価位置決定部６０３、評価対象の映像コンテンツのなかで評価対象の位置について第１の品質パラメータを算出する品質パラメータ算出部６０４と、映像コンテンツをクライアント７００に配信するための処理を行う映像コンテンツ配信部６０５と、クライアント７００において算出した第２の品質パラメータを受信する品質パラメータ受信部６０６と、上述の第１の品質パラメータと第２のパラメータを比較し（両者の差異を求め）、その差異が許容値内にあるかにより、品質評価パラメータを算出する品質評価部６０７と、品質評価パラメータに基づいて所定の処理を行う利用部６０８とを含む。映像コンテンツ配信部６０５は、映像コンテンツに電子透かしを挿入する電子透かし処理や映像コンテンツを符号化する符号化処理を含む。   The video distribution server 600 determines a content accumulation unit 601 that accumulates video content, an evaluation target determination unit 602 that determines video content that is a target of quality evaluation, and a position that is a target of quality evaluation in the video content. Evaluation position determination unit 603, quality parameter calculation unit 604 that calculates a first quality parameter for the evaluation target position in the video content to be evaluated, and video content distribution that performs processing for distributing the video content to the client 700 Unit 605, quality parameter receiving unit 606 that receives the second quality parameter calculated in client 700, and the first quality parameter and the second parameter described above are compared (the difference between the two is obtained). A quality evaluation unit 6 that calculates a quality evaluation parameter depending on whether the value is within the allowable value. Including 7, and a usage unit 608 that performs a predetermined process based on the quality evaluation parameter. The video content distribution unit 605 includes digital watermark processing for inserting a digital watermark into video content and encoding processing for encoding video content.

クライアント７００は、映像配信サーバ６００から映像コンテンツを受信する映像コンテンツ受信部７０１と、映像コンテンツの配信先情報、配信期間、映像コンテンツの内容を入力し、これらと合致するコンテンツをデータベース（不図示）から選び出し、評価対象の映像コンテンツと判定する評価対象判定部７０２と、評価対象の映像コンテンツの中で評価対象の位置かどうかを、画像フレームのなかの特定フレームと１枚のフレームの中の画素領域の少なくとも一方に基づいて判定する評価位置判定部７０３と、映像コンテンツから第２の品質パラメータを算出する品質パラメータ算出部７０４と、算出した第２の品質パラメータを映像配信サーバ６００に送信する品質パラメータ送信部７０５とを含む。   The client 700 receives the video content receiving unit 701 that receives the video content from the video distribution server 600, the distribution destination information of the video content, the distribution period, and the content of the video content, and the content that matches these is a database (not shown). An evaluation target determination unit 702 that selects the video content to be evaluated and determines whether or not it is the position of the evaluation target in the video content to be evaluated. A specific frame in the image frame and a pixel in one frame An evaluation position determination unit 703 that determines based on at least one of the areas, a quality parameter calculation unit 704 that calculates a second quality parameter from video content, and a quality that transmits the calculated second quality parameter to the video distribution server 600 A parameter transmission unit 705.

評価対象位置の判定方法としては、最も簡単には利用者側から、フレーム位置およびフレーム内容の領域位置を入力する方法、映像コンテンツの中から符号化処理によって算出された動き補償データ量が所定の閾値より多い領域だけを動きのある部分フレームとみなして評価対象として抽出するという方法、別の方法として映像フレーム間に跨る動きベクトルを算出し、その大きさがある閾値以上の領域を評価対象位置とするという処理が用いられる。   As the evaluation target position determination method, the simplest method is to input the frame position and the area position of the frame content from the user side, and the motion compensation data amount calculated from the video content by the encoding process is a predetermined value. A method in which only an area larger than the threshold is regarded as a partial frame with motion and extracted as an evaluation target, or another method is used to calculate a motion vector that spans between video frames, and an area whose size is greater than or equal to the threshold is evaluated Is used.

そして特許文献３に記載された転送品質劣化付加装置８１０を説明するために図７を示す。この関連技術による転送品質劣化付加装置は、相手端末８３０と共にパケット網８２０に接続されており、転送品質劣化付加装置８１０から送信された転送品質劣化を含むパケットストリームが相手端末８３０に受信される状況、および、相手端末８３０が受信端末８３１における転送品質情報を転送品質劣化付加装置８１０に転送する状況を示している。
受信端８３１における転送品質を監視し、監視結果を転送品質情報として転送することができる端末の実現例としては、ＲＴＣＰ ＸＲプロトコルを搭載した端末がある。
特開２０００−９２５２２号公報 特開２００３−３１９４２０号公報 特開２００５−３０３４５１号公報 FIG. 7 is a diagram for explaining the transfer quality deterioration adding device 810 described in Patent Document 3. The transfer quality degradation adding device according to this related technique is connected to the packet network 820 together with the counterpart terminal 830, and the counterpart terminal 830 receives the packet stream including the transfer quality degradation transmitted from the transfer quality degradation addition device 810. And the counterpart terminal 830 transfers the transfer quality information at the receiving terminal 831 to the transfer quality deterioration adding device 810.
As an implementation example of a terminal that can monitor the transfer quality at the receiving end 831 and transfer the monitoring result as transfer quality information, there is a terminal equipped with the RTCP XR protocol.
JP 2000-92522 A JP 2003-319420 A Japanese Patent Laying-Open No. 2005-303451

しかしながら、上記文献記載の従来技術は、以下の点で改善の余地を有していた。
第１に、特許文献１では、特徴量をクライアントからサーバに送り、サーバ側で比較評価しているが、マルチキャスト型サービスのような大規模配信ではサーバ側の負荷が高くなってしまうという問題がある。
第２に、特許文献２では、クライアント側で品質評価を行うシステムの場合、品質評価手段と報告手段の多様性が再度問題となる。それぞれの処理を規格化して統一可能であるものの、個別の不具合については多様性が残ってしまう。たとえば、デコーダのバグで映像が乱れているのに、誤って「劣化無し」とか「合格」と報告してしまう場合、ユーザが自発的に連絡してこなければシステムの問題を発見できない。
第３に、特許文献３では、映像コンテンツや音声コンテンツの品質ではなく、ネットワークの品質、例えば遅延、ジッタ、パケットロスを扱っており、品質評価用パラメータの改変ではなくパケットストリームそのものを劣化させている。品質評価用パラメータは送信されておらず、評価手段の動作確認を行っていない。従って、評価手段の正常動作確認が得られないという問題がある。However, the prior art described in the above literature has room for improvement in the following points.
Firstly, in Patent Document 1, feature amounts are sent from a client to a server and compared on the server side. However, in large-scale distribution such as a multicast type service, the load on the server side becomes high. is there.
Secondly, in Patent Document 2, in the case of a system that performs quality evaluation on the client side, the diversity of quality evaluation means and reporting means becomes a problem again. Although each process can be standardized and unified, diversity remains for individual defects. For example, if the video is distorted due to a bug in the decoder, but reports “no deterioration” or “pass” by mistake, the system problem cannot be found unless the user contacts voluntarily.
Thirdly, Patent Document 3 deals with network quality, such as delay, jitter, and packet loss, rather than video content and audio content quality, and degrades the packet stream itself rather than modifying quality evaluation parameters. Yes. Quality evaluation parameters have not been transmitted, and the operation of the evaluation means has not been confirmed. Therefore, there is a problem that confirmation of normal operation of the evaluation means cannot be obtained.

本発明によれば、ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信するとともに、特徴量配信サーバがそのコンテンツの品質評価単位ごとに評価用特徴量をそのクライアントへ配信し、そのクライアントが、そのコンテンツのストリームから再生コンテンツを復号し、その評価用特徴量を用いてその再生コンテンツについて品質評価し、品質評価値を算出し、その品質評価値を監視サーバに報告するコンテンツ配信システムであって、その特徴量配信サーバは、その品質評価単位ごとに加工の有無を指定する加工情報を生成する加工情報生成手段と、そのコンテンツからコンテンツ特徴量を抽出する特徴量抽出手段と、そのコンテンツ特徴量を加工して加工特徴量を生成する加工手段と、その加工情報に従って、そのコンテンツ特徴量もしくはその加工特徴量を選択して、評価用特徴量とする選択手段と、その評価用特徴量をそのクライアントへ配信する配信手段と、を有し、その監視サーバは、その特徴量配信サーバのその加工情報生成手段が生成する加工情報と、そのクライアントから受信する品質評価値とを照合して、不整合時に警告する警告手段を有するコンテンツ配信システム、が提供される。   According to the present invention, the content distribution server distributes the content stream to the client via the network, and the feature distribution server distributes the evaluation feature quantity to the client for each quality evaluation unit of the content. Content distribution system in which a client decodes playback content from the content stream, evaluates the quality of the playback content using the evaluation feature, calculates a quality evaluation value, and reports the quality evaluation value to the monitoring server The feature amount distribution server includes processing information generation means for generating processing information for designating presence / absence of processing for each quality evaluation unit, feature amount extraction means for extracting content feature amounts from the contents, and Processing means for processing content feature values to generate processing feature values, According to the information, the content feature amount or the processing feature amount is selected, and the selection means is used as an evaluation feature amount, and the distribution feature is provided to distribute the evaluation feature amount to the client. And a content distribution system having warning means for collating the processing information generated by the processing information generation means of the feature quantity distribution server with the quality evaluation value received from the client and warning when there is a mismatch. .

この発明によれば、ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信するとともに、特徴量配信サーバがそのコンテンツの品質評価単位ごとに評価用特徴量をそのクライアントへ配信し、そのクライアントが、そのコンテンツのストリームから再生コンテンツを復号し、その評価用特徴量を用いてその再生コンテンツについて品質評価し、品質評価値を算出し、その品質評価値を監視サーバに報告するコンテンツ配信システムに用いられる特徴量配信サーバであって、その品質評価単位ごとのコンテンツ特徴量を抽出する特徴量抽出手段と、その品質評価単位ごとの加工の有無を指定する加工情報を生成する加工情報生成手段と、そのコンテンツ特徴量を加工して加工特徴量を生成する加工手段と、その加工情報に従い、加工無しの場合にはそのコンテンツ特徴量を、加工有りの場合にはその加工特徴量を選択して品質評価用特徴量とする選択手段と、その品質評価用特徴量をそのクライアントへ配信する配信手段と、を有する特徴量配信サーバ、が提供される。   According to the present invention, the content distribution server distributes the content stream to the client via the network, and the feature distribution server distributes the evaluation feature to each client for each quality evaluation unit of the content. Content distribution system in which a client decodes playback content from the content stream, evaluates the quality of the playback content using the evaluation feature, calculates a quality evaluation value, and reports the quality evaluation value to the monitoring server Feature quantity distribution server used for processing, a feature quantity extraction means for extracting a content feature quantity for each quality evaluation unit, and a processing information generation means for generating processing information for designating presence / absence of processing for each quality evaluation unit And processing means for processing the content feature amount to generate a processing feature amount In accordance with the processing information, a selection means for selecting the content feature amount when there is no processing, and selecting the processing feature amount when processing is used as a quality evaluation feature amount, and the quality evaluation feature amount And a distribution unit for distributing to the client.

この発明によれば、ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信するとともに、特徴量配信サーバがそのコンテンツの品質評価単位ごとに複数の評価用特徴量をそのクライアントへ配信し、そのクライアントが、そのコンテンツのストリームから再生コンテンツを復号し、その評価用特徴量を用いてその再生コンテンツについて品質評価し、品質評価値を算出し、その品質評価値を監視サーバに報告するコンテンツ配信システムに用いられるクライアントであって、そのストリームと品質評価単位ごとにその複数の評価用特徴量を受信する手段と、そのストリームからその再生コンテンツを復号する復号手段と、その再生コンテンツをその複数の評価用特徴量それぞれで品質評価して複数の品質評価値を算出する品質評価手段と、その複数の品質評価値を監視サーバに報告する報告手段と、を有するクライアント、が提供される。   According to the present invention, the content distribution server distributes the content stream to the client via the network, and the feature distribution server distributes a plurality of evaluation feature amounts to the client for each quality evaluation unit of the content. Content in which the client decodes the playback content from the content stream, evaluates the quality of the playback content using the evaluation feature, calculates a quality evaluation value, and reports the quality evaluation value to the monitoring server A client for use in a distribution system, the means for receiving the plurality of evaluation feature values for each stream and quality evaluation unit, the decoding means for decoding the playback content from the stream, and the playback content The quality of each feature for evaluation Client having a quality evaluation unit for calculating the quality evaluation value, and reporting means for reporting the plurality of quality evaluation values to the monitoring server, and is provided.

この発明によれば、ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信し、特徴量配信サーバがそのコンテンツの品質評価単位ごとに評価用特徴量をそのクライアントへ配信し、そのクライアントが、そのコンテンツのストリームから再生コンテンツを復号し、その評価用特徴量を用いてその再生コンテンツについて品質評価し、品質評価値を算出し、その品質評価値を監視サーバに報告するコンテンツ配信方法であって、その特徴量配信サーバは、その品質評価単位ごとに加工の有無を指定する加工情報を生成し、そのコンテンツからコンテンツ特徴量を抽出し、そのコンテンツ特徴量を加工して加工特徴量を生成し、その加工情報に従って、そのコンテンツ特徴量もしくはその加工特徴量を選択して評価用特徴量とし、その評価用特徴量をそのクライアントへ配信し、その監視サーバは、その特徴量配信サーバのその加工情報生成手段が生成するその加工情報と、そのクライアントから受信する品質評価値とを照合して不整合時に警告するコンテンツ配信方法、が提供される。   According to the present invention, a content distribution server distributes a stream of content to a client via a network, and a feature amount distribution server distributes an evaluation feature amount to the client for each quality evaluation unit of the content. Is a content distribution method that decodes playback content from the content stream, evaluates the quality of the playback content using the evaluation feature, calculates a quality evaluation value, and reports the quality evaluation value to the monitoring server. Then, the feature quantity distribution server generates processing information for specifying whether or not processing is performed for each quality evaluation unit, extracts the content feature quantity from the content, and processes the content feature quantity to obtain the processed feature quantity. Generate and select the content feature amount or the processing feature amount according to the processing information. The evaluation feature quantity is distributed to the client, and the monitoring server sends the processing information generated by the processing information generation means of the feature quantity distribution server and the quality received from the client. There is provided a content distribution method that compares an evaluation value and warns when there is a mismatch.

本発明によれば、クライアントにおける実際の劣化だけでなく、加工の有無を検出させることで、品質評価および報告手段が正常に動作していることが確認できる。   According to the present invention, it is possible to confirm that the quality evaluation and reporting unit is operating normally by detecting not only the actual deterioration in the client but also the presence or absence of processing.

上述した目的、およびその他の目的、特徴および利点は、以下に述べる好適な実施の形態、およびそれに付随する以下の図面によってさらに明らかになる。
本発明の第１の実施形態にかかるコンテンツ配信システムのブロック図である。 本発明の第１の実施形態にかかるコンテンツ配信システムの動作を示す図である。 本発明の第２の実施形態にかかるコンテンツ配信システムのブロック図である。 本発明の第２の実施形態にかかるコンテンツ配信システムの動作を示す図である。 従来例による画像品質分析方法および装置のブロック図である。 従来例による映像コンテンツ配信方法の構成図である。 従来例による転送品質劣化付加装置を示すブロック図である。 The above-described object and other objects, features, and advantages will become more apparent from the preferred embodiments described below and the accompanying drawings.
1 is a block diagram of a content distribution system according to a first embodiment of the present invention. It is a figure which shows operation | movement of the content delivery system concerning the 1st Embodiment of this invention. It is a block diagram of the content delivery system concerning the 2nd Embodiment of this invention. It is a figure which shows operation | movement of the content delivery system concerning the 2nd Embodiment of this invention. It is a block diagram of the image quality analysis method and apparatus by a prior art example. It is a block diagram of the video content delivery method by a prior art example. It is a block diagram which shows the transfer quality degradation addition apparatus by a prior art example.

以下、本発明の実施の形態について、図面を用いて説明する。尚、全ての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. In all the drawings, similar constituent elements are denoted by the same reference numerals, and description thereof will be omitted as appropriate.

（第１の実施の形態）
本実施の形態のコンテンツ配信システムは、ネットワーク１２０を介して、コンテンツ配信サーバ１１５がコンテンツのストリームをクライアント１３０へ配信するとともに、特徴量配信サーバ１４０がそのコンテンツの品質評価単位ごとに評価用特徴量をクライアント１３０へ配信し、クライアント１３０が、そのコンテンツのストリームから再生コンテンツを復号し、その評価用特徴量を用いてその再生コンテンツについて品質評価し、品質評価値を算出し、その品質評価値を監視サーバ１１７に報告するコンテンツ配信システムであって、特徴量配信サーバ１４０は、その品質評価単位ごとに加工の有無を指定する加工情報を生成する加工情報生成手段１４１と、そのコンテンツからコンテンツ特徴量を抽出する特徴量抽出手段１１２と、そのコンテンツ特徴量を加工して加工特徴量を生成する加工手段１４２と、その加工情報に従って、そのコンテンツ特徴量もしくはその加工特徴量を選択して、その評価用特徴量とする選択手段１４３と、その評価用特徴量をクライアント１３０へ配信する配信手段１４４と、を有し、監視サーバ１１７は、特徴量配信サーバ１４０の各情報生成手段１４１の生成する加工情報と、クライアント１３０から受信する品質評価値とを照合して、不整合時に警告する警告手段を有する。(First embodiment)
In the content distribution system of the present embodiment, the content distribution server 115 distributes a stream of content to the client 130 via the network 120, and the feature distribution server 140 evaluates the characteristic amount for evaluation for each quality evaluation unit of the content. To the client 130, the client 130 decodes the playback content from the stream of the content, evaluates the quality of the playback content using the evaluation feature amount, calculates a quality evaluation value, and calculates the quality evaluation value. A content distribution system for reporting to the monitoring server 117, wherein the feature amount distribution server 140 includes processing information generation means 141 for generating processing information for designating the presence or absence of processing for each quality evaluation unit, and a content feature amount from the content. Feature amount extraction means 112 for extracting A processing unit 142 that processes the content feature quantity to generate a processing feature quantity; a selection unit 143 that selects the content feature quantity or the processing feature quantity according to the processing information and sets it as the evaluation feature quantity; And the distribution unit 144 that distributes the evaluation feature quantity to the client 130, and the monitoring server 117 processes the processing information generated by each information generation unit 141 of the feature quantity distribution server 140 and the quality received from the client 130. There is a warning means for collating with the evaluation value and warning when there is a mismatch.

更に詳細な説明を図１の構成について行う。映像入力はエンコーダ１１１でストリームに変換され、得られた映像ストリームはコンテンツ配信サーバ１１５がクライアント１３０へ配信する。映像ストリームはデコーダ１１８で再生映像に変換される。特徴量配信サーバ１４０は、特徴量抽出手段１１２、加工情報生成手段１４１、加工手段１４２、選択手段１４３、配信手段１４４から構成される。特徴量抽出手段１１２は再生映像のフレームごとのコンテンツ特徴量を抽出する。加工情報生成手段１４１は、フレームごとに加工の有無や加工の種類を指定する加工情報を生成する。加工手段１４２は、コンテンツの特徴量を加工して加工特徴量を生成する。ここで加工とは、元のデータ内容を所定の割合で変更させることである。選択手段１４３は、加工情報に従って、コンテンツ特徴量もしくは加工特徴量を選択し、評価用特徴量とする。配信手段１４４は、評価用特徴量をクライアント１３０へ配信する。クライアント１３０はデコーダ１３１、品質評価手段１３２、報告手段１３３から構成される。デコーダ１３１はストリームをデコードして再生映像を得て出力する。品質評価手段１３２は受信した評価用特徴量を用いて、その再生映像のフレームの品質評価値を算出する。報告手段１３３は得られた品質評価値を、監視サーバ１１７に報告する。監視サーバ１１７は加工情報と品質評価値を照合し、不整合があれば警告する。加工情報と品質評価値とが整合するとは、当該加工情報の評価用特徴量と品質評価値とが必ずしも厳密に全ビットにおいて一致しているとは限らず、仮に完全には一致していなくても、不一致のビット数が所定の閾値以下である場合を含む。加工情報と品質評価値との整合、不整合を判定するための閾値は複数有り、それぞれ監視サーバに記憶されている。   A more detailed description will be given for the configuration of FIG. The video input is converted into a stream by the encoder 111, and the obtained video stream is distributed to the client 130 by the content distribution server 115. The video stream is converted into a playback video by the decoder 118. The feature amount distribution server 140 includes a feature amount extraction unit 112, a processing information generation unit 141, a processing unit 142, a selection unit 143, and a distribution unit 144. The feature amount extraction unit 112 extracts a content feature amount for each frame of the reproduced video. The processing information generation unit 141 generates processing information that specifies the presence / absence of processing and the type of processing for each frame. The processing unit 142 processes the feature amount of the content and generates a processing feature amount. Here, processing means changing the original data content at a predetermined rate. The selection unit 143 selects a content feature amount or a processing feature amount according to the processing information and sets it as an evaluation feature amount. The distribution unit 144 distributes the evaluation feature amount to the client 130. The client 130 includes a decoder 131, quality evaluation means 132, and reporting means 133. The decoder 131 decodes the stream to obtain a reproduced video and outputs it. The quality evaluation unit 132 calculates the quality evaluation value of the frame of the reproduced video using the received evaluation feature quantity. The reporting unit 133 reports the obtained quality evaluation value to the monitoring server 117. The monitoring server 117 collates the processing information with the quality evaluation value, and warns if there is a mismatch. The fact that the processing information and the quality evaluation value are consistent does not necessarily mean that the evaluation feature quantity and the quality evaluation value of the processing information are exactly the same in all bits. Includes a case where the number of mismatched bits is equal to or less than a predetermined threshold. There are a plurality of threshold values for determining consistency or inconsistency between the processing information and the quality evaluation value, and each is stored in the monitoring server.

加工手段１４２の加工には二種類あり、第一の加工では、デコーダ１３１がストリームを正常にデコードした場合に、品質評価手段１３２で得られる品質評価値が、品質基準外となるように特徴量を改変する。ここで「なるように」とは、下流で評価する場合、上流で品質基準外になる予想をたてて評価することである。第二の加工では、デコーダ１３１がストリームを正常にデコードした場合に、品質評価手段１３２で得られる品質評価値が、品質基準を満たす範囲内で特徴量を改変する。尚、第二の加工は正常な範囲内の評価であるので、用いなくても課題は解決できる。   There are two types of processing by the processing means 142. In the first processing, when the decoder 131 decodes the stream normally, the feature quantity is set so that the quality evaluation value obtained by the quality evaluation means 132 is outside the quality standard. Is modified. Here, “to become” means to make an evaluation out of quality standards in the upstream when evaluating downstream. In the second processing, when the decoder 131 normally decodes the stream, the quality evaluation value obtained by the quality evaluation unit 132 modifies the feature amount within a range that satisfies the quality standard. Since the second processing is an evaluation within a normal range, the problem can be solved without using it.

本実施の形態において、品質評価値には複数の形式が考えられる。まず、品質評価値を所定の品質基準に満たしたか否かの２値とする場合、監視サーバ１１７で品質評価値が劣化を示しているか否かは、この２値そのものが表すことになる。２値以外にも、絶対的な品質や劣化量を表すスカラー値や、いくつかの品質項目を表すベクトル値を用いることも可能であり、その場合には監視サーバ１１７でそれらの値が品質基準を満たすか否かの判断を行い、品質評価値が劣化を示しているか否かを決定する。   In the present embodiment, a plurality of formats can be considered for the quality evaluation value. First, when the quality evaluation value is a binary value indicating whether or not a predetermined quality standard is satisfied, whether or not the quality evaluation value indicates deterioration in the monitoring server 117 represents the binary value itself. In addition to binary values, scalar values representing absolute quality and degradation amount, and vector values representing several quality items can be used. In such a case, these values are used as quality standards by the monitoring server 117. Judgment is made as to whether or not the condition is satisfied, and it is determined whether or not the quality evaluation value indicates deterioration.

監視サーバ１１７での照合では、各フレームにおいて、加工情報と品質評価値の組み合わせが、加工無しで劣化無し、第一の加工で劣化有り、第二の加工で劣化無しの場合に整合していると判断する。それ以外は不整合である。加工無しの評価用特徴量に対する品質評価値が劣化を示していれば、実際に映像の品質劣化が発生したと警告する。第一の加工の評価用特徴量に対する品質評価値が劣化を示していなければ、クライアント１３０内の品質評価手段１３２もしくは報告手段１３３が不具合を内包している可能性があるとして警告する。加工無しのフレームが品質基準値外と報告される率に比べて、第二の加工後のフレームが品質基準外と報告される率がここで所定の閾値を超えて高くなる場合、デコーダ１３１に起因する劣化の可能性ありとして警告する。   In the verification by the monitoring server 117, in each frame, the combination of the processing information and the quality evaluation value is consistent when there is no deterioration without processing, there is deterioration with the first processing, and there is no deterioration with the second processing. Judge. Otherwise it is inconsistent. If the quality evaluation value for the evaluation feature quantity without processing indicates deterioration, a warning is given that the image quality has actually deteriorated. If the quality evaluation value for the evaluation feature quantity of the first processing does not indicate deterioration, a warning is given that the quality evaluation means 132 or the reporting means 133 in the client 130 may contain a defect. If the rate at which the second processed frame is reported to be out of the quality standard is higher than a predetermined threshold here compared to the rate at which the unprocessed frame is reported to be out of the quality standard value, the decoder 131 Warning of possible deterioration.

加工情報生成手段１４１は、ほとんどのフレームを加工無しに指定し、残りの少数を第一の加工や第二の加工に指定する。たとえば、平均１分間に１回の頻度で第一の加工と第二の加工を指定し、残りを全て加工無しに指定する。その理由としては、加工無しは映像の品質劣化の検出、第一の加工と第二の加工はクライアント内の不具合の検出が目的であり、いつ起きるかわからない品質劣化は漏らさず検出せねばならず、定常に検出できる不具合はたまに検査すればよいからである。従って、加工情報生成手段１４１は、所定のパラメータから一意に定まる系列で表せるようにしても良い。   The processing information generation unit 141 specifies most frames without processing, and specifies the remaining few for the first processing and the second processing. For example, the first process and the second process are designated at a frequency of once per minute on average, and the rest are designated without any process. The reason for this is that without processing, video quality deterioration is detected, and the first processing and second processing are for the purpose of detecting defects in the client. This is because defects that can be detected in a steady state may be inspected occasionally. Therefore, the processing information generation unit 141 may be able to represent a series that is uniquely determined from a predetermined parameter.

この構成において、コンテンツ配信サーバ１１５、特徴量配信サーバ１４０、監視サーバ１１７は物理的には同一のマシンであっても構わない。また、加工手段１４２は、常に加工を行っていてもよいし、選択手段１４３から要求された時だけ加工を行ってもよい。論理的には等価であり、本発明の効果が損なわれることは無い。   In this configuration, the content distribution server 115, the feature amount distribution server 140, and the monitoring server 117 may be physically the same machine. Further, the processing unit 142 may always perform processing, or may perform processing only when requested by the selection unit 143. It is logically equivalent, and the effect of the present invention is not impaired.

図２を用いて、本実施の形態の動作を説明する。横方向は時間の進行を表しており、各列がフレームに相当する。加工情報の行は各フレームの加工情報を表しており、Ａが加工無し、Ｂが第一の加工、Ｃが第二の加工を示している。ネットワークエラーの行はＯが正常、Ｘがエラーありを、クライアントからの報告の行はＯが品質基準内、Ｘが品質基準外を表している。正常なクライアントは、加工情報が第一の加工となっているフレームと、ネットワークエラーの発生したフレームで、品質基準外と報告している。初めのＸは第一の加工に対するものなのでクライアントの正常動作確認であり、他方のＸは実際の品質劣化の発生を検出している。異常なクライアントは常に品質基準内と報告してきており、第一の加工のフレームを見落としていて、報告に信頼性が無いことが分かる。不完全なクライアントは、第二の加工のフレームについても品質基準外と報告しているが、これだけではネットワークエラーとデコーダエラーの見分けがつかない。そのため、加工無しに対する報告からネットワークエラーに起因する品質基準外となる発生頻度を推定し、それよりも第二の加工のフレームで品質基準外となる発生頻度が統計的に多ければデコーダに起因する何らかの劣化があるものとする。   The operation of this embodiment will be described with reference to FIG. The horizontal direction represents the progress of time, and each column corresponds to a frame. The processing information row represents processing information of each frame, where A indicates no processing, B indicates the first processing, and C indicates the second processing. The network error line indicates that O is normal and X is error, and the report line from the client indicates that O is within the quality standard and X is outside the quality standard. A normal client reports out of quality standards for a frame whose processing information is the first processing and a frame in which a network error has occurred. Since the first X is for the first processing, it is a normal operation confirmation of the client, and the other X detects the occurrence of actual quality deterioration. Anomalous clients have always reported that they are within quality standards, and overlooked the first processing frame, indicating that the report is unreliable. The imperfect client reports that the second processed frame is also out of quality standards, but this alone does not distinguish between network errors and decoder errors. Therefore, the occurrence frequency outside the quality standard due to the network error is estimated from the report for no processing, and if the occurrence frequency outside the quality standard in the second processing frame is statistically higher than that, it is due to the decoder. Assume that there is some degradation.

（第２の実施形態）
次に本発明の第２の実施の形態を、配信システムの全体構成を表す図３を参照して説明する。映像入力はエンコーダ１１１でストリームに変換され、得られた映像ストリームはコンテンツ配信サーバ１１５がクライアント４３０へ配信する。映像ストリームはデコーダ１１８で再生映像に変換される。特徴量配信サーバ４４０は、特徴量抽出手段１１２、加工情報生成手段４４１、加工手段１４２、選択手段４４３、配信手段４４４から構成される。特徴量抽出量１１２は再生映像のフレームごとのコンテンツ特徴量を抽出する。加工情報生成手段４４１は、フレームごとに配信される２つの評価用特徴量のそれぞれの加工有無や種類を指定する加工情報を生成する。加工手段１４２は、コンテンツの特徴量を加工して加工特徴量を生成する。選択手段４４３は、加工情報に従って、コンテンツ特徴量もしくは加工特徴量を選択し、評価用特徴量とする。配信手段４４４は、評価用特徴量をクライアント４３０へ配信する。クライアント４３０はデコーダ１３１、品質評価手段４３２、報告手段４３３から構成される。デコーダ１３１はストリームをデコードして再生映像を得て出力する。品質評価手段４３２は評価用特徴量ごとに、その再生映像のフレームの品質評価値を算出する。報告手段４３３は得られた２つの品質評価値を、監視サーバ４１７に報告する。監視サーバ４１７は加工情報と品質評価値を照合し、不整合があれば警告する。(Second Embodiment)
Next, a second embodiment of the present invention will be described with reference to FIG. 3 showing the entire configuration of the distribution system. The video input is converted into a stream by the encoder 111, and the obtained video stream is distributed to the client 430 by the content distribution server 115. The video stream is converted into a playback video by the decoder 118. The feature amount distribution server 440 includes a feature amount extraction unit 112, a processing information generation unit 441, a processing unit 142, a selection unit 443, and a distribution unit 444. The feature amount extraction amount 112 extracts a content feature amount for each frame of the reproduced video. The processing information generation unit 441 generates processing information that specifies the presence / absence and type of each of the two evaluation feature quantities distributed for each frame. The processing unit 142 processes the feature amount of the content and generates a processing feature amount. The selection unit 443 selects a content feature amount or a processing feature amount according to the processing information and sets it as an evaluation feature amount. The distribution unit 444 distributes the evaluation feature amount to the client 430. The client 430 includes a decoder 131, quality evaluation means 432, and reporting means 433. The decoder 131 decodes the stream to obtain a reproduced video and outputs it. The quality evaluation unit 432 calculates the quality evaluation value of the frame of the reproduced video for each evaluation feature amount. The reporting unit 433 reports the obtained two quality evaluation values to the monitoring server 417. The monitoring server 417 collates the processing information with the quality evaluation value and warns if there is a mismatch.

加工情報生成手段４４１は、各フレームの２つの加工情報のうち、ランダムにどちらかで加工無しを指定し、他方で第一の加工もしくは第二の加工を指定する。各フレームの品質評価値には、必ず加工無しに対するものが含まれているので、品質劣化の見落としは起きない。   The processing information generating unit 441 specifies no processing at random among the two processing information of each frame, and specifies the first processing or the second processing on the other hand. Since the quality evaluation values of each frame always include those for no processing, there is no oversight of quality degradation.

監視サーバ４１７での照合では、各フレームにおいて、加工情報と品質評価値の組み合わせが、加工無しで劣化無し、第一の加工で劣化有り、第二の加工で劣化無しの場合に整合していると判断する。それ以外は不整合であり、加工無しの評価用特徴量に対する品質評価値が劣化を示していれば、実際に映像の品質劣化が発生したと警告する。第一の加工の評価用特徴量に対する品質評価値が劣化を示していなければ、クライアント４３０内の品質評価手段４３２もしくは報告手段４３３が不具合を内包している可能性があるとして警告する。加工無しで劣化無しの時に、第二の加工が劣化有りとなっていれば、デコーダに起因する劣化ありとして警告する。   In the verification by the monitoring server 417, in each frame, the combination of the processing information and the quality evaluation value is consistent when there is no deterioration without processing, there is deterioration with the first processing, and there is no deterioration with the second processing. Judge. Other than that, it is inconsistent, and if the quality evaluation value for the evaluation feature value without processing indicates deterioration, a warning is given that the image quality actually deteriorated. If the quality evaluation value for the evaluation feature quantity of the first processing does not indicate deterioration, a warning is given that the quality evaluation means 432 or the reporting means 433 in the client 430 may contain a defect. If there is no deterioration without processing, if the second processing has deterioration, a warning is given that there is deterioration due to the decoder.

この構成において、コンテンツ配信サーバ１１５、特徴量配信サーバ４４０、監視サーバ４１７は物理的には同一のマシンであっても構わない。論理的には等価であり、本発明の効果が損なわれることは無い。加工の種類および品質評価値の形式についての説明は、第１の実施の形態と同じである。   In this configuration, the content distribution server 115, the feature amount distribution server 440, and the monitoring server 417 may be physically the same machine. It is logically equivalent, and the effect of the present invention is not impaired. The description of the type of processing and the format of the quality evaluation value is the same as in the first embodiment.

図４を用いて、第２の実施形態の動作を説明する。図４では、横方向は時間の進行を表しており、各列がフレームに相当する。加工情報の行は各フレームの２つの加工情報を表しており、Ａが加工無し、Ｂが第一の加工、Ｃが第二の加工を示している。ネットワークエラーの行はＯが正常、Ｘがエラーありを、クライアントからの報告の行はＯが品質基準内、Ｘが品質基準外を表している。正常なクライアントは、第一の加工となっているフレームと、ネットワークエラーの発生したフレームで、品質基準外と報告している。第一の加工に対するＸはクライアントの正常動作確認であり、加工無しに対するＸは実際の品質劣化の発生を検出している。異常なクライアントは常に品質基準内と報告してきており、第一の加工のフレームを見落としていて、報告に信頼性が無いことが分かる。不完全なクライアントは、第二の加工についても品質基準外と報告しており、同じフレームで報告される加工無しの結果と一致しないことから、デコーダに起因する何らかの劣化があると分かる。   The operation of the second embodiment will be described with reference to FIG. In FIG. 4, the horizontal direction represents the progress of time, and each column corresponds to a frame. The row of processing information represents two pieces of processing information for each frame. A indicates no processing, B indicates the first processing, and C indicates the second processing. The network error line indicates that O is normal and X is error, and the report line from the client indicates that O is within the quality standard and X is outside the quality standard. A normal client reports that it is out of quality standards for the first processed frame and the frame in which the network error occurred. X for the first processing is a normal operation check of the client, and X for no processing detects the actual occurrence of quality degradation. Anomalous clients have always reported that they are within quality standards, and overlooked the first processing frame, indicating that the report is unreliable. The imperfect client reports that the second processing is also outside the quality standard and does not match the no processing result reported in the same frame, so it can be seen that there is some degradation due to the decoder.

本発明で用いられる品質評価方式として、いくつか例をあげて説明する。ある品質評価方式では、サーバ側で所定の画素の輝度値を抽出し、これらの値をまとめて特徴量としてクライアント側に配信し、クライアントで復号したフレームの中で対応する画素の輝度値と特徴量内の値との差分を求めて品質を評価する。別の品質評価方法では、サーバ側である輝度値を決めて、その輝度値も持つ画素マップを作成し、これらをまとめて特徴量とし、クライアント側では特徴量内の画素マップから復号したフレームの該当する画素の輝度値と特徴量内の値との差分を求めて品質を評価する。   Some examples of the quality evaluation method used in the present invention will be described. In a certain quality evaluation method, the luminance value of a predetermined pixel is extracted on the server side, and these values are collectively delivered to the client side as feature values, and the luminance value and the characteristic of the corresponding pixel in the frame decoded by the client The quality is evaluated by obtaining the difference from the value in the quantity. In another quality evaluation method, a luminance value on the server side is determined, a pixel map having the luminance value is created, and these are collectively used as a feature amount. On the client side, a frame decoded from the pixel map in the feature amount is generated. The quality is evaluated by obtaining the difference between the luminance value of the corresponding pixel and the value in the feature amount.

これらの品質評価方式を用いる場合、特徴量内の輝度値を所定の範囲内で増加または減少させることが、第一の加工や第二の加工の一つの実施の形態となる。つまり、第一の加工では劣化有りとなる範囲に、第二の加工では劣化無しとなる範囲で増減する。別の実施の形態として、ランダムな値に置換し、品質評価手段４３２と同じ評価を行って、所望の結果となっていない場合にはやり直すとしてもよい。   When using these quality evaluation methods, increasing or decreasing the luminance value within the feature amount within a predetermined range is one embodiment of the first processing and the second processing. That is, it increases / decreases within a range where there is deterioration in the first processing and within a range where there is no deterioration in the second processing. As another embodiment, a random value may be substituted and the same evaluation as that performed by the quality evaluation unit 432 may be performed.

加工方法は、ここに記載したものに限るものではない。他の品質評価方式を用いる場合、抽出した特徴量に対して、品質基準から外れる程度の改変をおこなうことで第一の加工を実現し、品質基準を満たす範囲内で改変をおこなうことで第二の加工を実現する。品質基準に対する合否は、特徴量から直接求めても良いし、品質評価手段４３２と同じ評価を行って判断してもよい。   The processing method is not limited to the one described here. When other quality evaluation methods are used, the first processing is realized by modifying the extracted feature quantity so as not to meet the quality standard, and the second modification is performed within the range that satisfies the quality standard. Realize machining. The acceptance / rejection with respect to the quality standard may be determined directly from the feature quantity or may be determined by performing the same evaluation as the quality evaluation unit 432.

本発明の実施の形態では、映像ストリームをデコードして再生映像を求め、再生映像の特徴量を抽出していたが、従来技術と同様に、映像入力から直接特徴量を抽出してもよい。   In the embodiment of the present invention, a video stream is decoded to obtain a playback video, and the feature amount of the playback video is extracted. However, the feature amount may be directly extracted from the video input as in the conventional technique.

これまで各フレームに対して１つもしくは２つの評価用特徴量を配信すると説明しているが、第２の実施の形態の拡張として３つ以上とすることが容易なことは明らかである。加工についても２種類としているが、これも品質基準から外れる度合いを可変することで３種類以上に拡張できる。   Although it has been described so far that one or two evaluation feature values are distributed for each frame, it is obvious that it is easy to increase the number to three or more as an extension of the second embodiment. There are two types of processing, but this can also be expanded to three or more types by changing the degree of deviation from the quality standard.

（第３の実施の形態）
次に本発明の第３の実施の形態を、配信システムの全体構成を表す図１を参照して説明する。
本発明によるコンテンツ配信方法は、ネットワークを介して、コンテンツ配信サーバ１１５がコンテンツのストリームをクライアント１３０へ配信し、特徴量配信サーバ１４０がそのコンテンツの品質評価単位ごとに評価用特徴量をクライアント１３０へ配信し、クライアント１３０が、そのコンテンツのストリームから再生コンテンツを復号し、その評価用特徴量を用いてその再生コンテンツについて品質評価し、品質評価値を算出し、その品質評価値を監視サーバ１１７に報告するコンテンツ配信方法であって、特徴量配信サーバ１４０は、その品質評価単位ごとに加工の有無を指定する加工情報を生成し、そのコンテンツからコンテンツ特徴量を抽出し、そのコンテンツ特徴量を加工して加工特徴量を生成し、その加工情報に従って、そのコンテンツ特徴量もしくはその加工特徴量を選択して評価用特徴量とし、その評価用特徴量をそのクライアント１３０へ配信し、その監視サーバ１１７は、特徴量配信サーバ１４０の加工情報生成手段１１４が生成するその加工情報と、そのクライアント１３０から受信する品質評価値とを照合して不整合時に警告するコンテンツ配信方法、が提供される。(Third embodiment)
Next, a third embodiment of the present invention will be described with reference to FIG. 1 showing the entire configuration of the distribution system.
In the content distribution method according to the present invention, the content distribution server 115 distributes the content stream to the client 130 via the network, and the feature amount distribution server 140 sends the evaluation feature amount to the client 130 for each quality evaluation unit of the content. The client 130 decodes the playback content from the content stream, evaluates the quality of the playback content using the evaluation feature, calculates a quality evaluation value, and sends the quality evaluation value to the monitoring server 117. A content distribution method for reporting, wherein the feature quantity distribution server 140 generates processing information for designating the presence or absence of processing for each quality evaluation unit, extracts the content feature quantity from the content, and processes the content feature quantity To generate machining features and according to the machining information, The content feature amount or its processing feature amount is selected as an evaluation feature amount, and the evaluation feature amount is distributed to the client 130. The monitoring server 117 is processed by the processing information generation unit 114 of the feature amount distribution server 140. There is provided a content distribution method for collating the processing information to be generated with the quality evaluation value received from the client 130 to warn when there is a mismatch.

映像入力はエンコーダ１１１でストリームに変換され、得られた映像ストリームはコンテンツ配信サーバ１１５がクライアント１３０へ配信する。映像ストリームはデコーダ１１８で再生映像に変換される。特徴量配信サーバ１４０は、特徴量抽出手段１１２、加工情報生成手段１４１、加工手段１４２、選択手段１４３、配信手段１４４から構成される。特徴量抽出手段１１２は再生映像のフレームごとのコンテンツ特徴量を抽出する。加工情報生成手段１４１は、フレームごとに加工の有無や加工の種類を指定する加工情報を生成する。加工手段１４２は、コンテンツの特徴量を加工して加工特徴量を生成する。選択手段１４３は、加工情報に従って、コンテンツ特徴量もしくは加工特徴量を選択し、評価用特徴量とする。配信手段１４４は、評価用特徴量をクライアント１３０へ配信する。クライアント１３０はデコーダ１３１、品質評価手段１３２、報告手段１３３から構成される。デコーダ１３１はストリームをデコードして再生映像を得て出力する。品質評価手段１３２は受信した評価用特徴量を用いて、その再生映像のフレームの品質評価値を算出する。報告手段１３３は得られた品質評価値を、監視サーバ１１７に報告する。監視サーバ１１７は加工情報と品質評価値を照合し、不整合があれば警告する。   The video input is converted into a stream by the encoder 111, and the obtained video stream is distributed to the client 130 by the content distribution server 115. The video stream is converted into a playback video by the decoder 118. The feature amount distribution server 140 includes a feature amount extraction unit 112, a processing information generation unit 141, a processing unit 142, a selection unit 143, and a distribution unit 144. The feature amount extraction unit 112 extracts a content feature amount for each frame of the reproduced video. The processing information generation unit 141 generates processing information that specifies the presence / absence of processing and the type of processing for each frame. The processing unit 142 processes the feature amount of the content and generates a processing feature amount. The selection unit 143 selects a content feature amount or a processing feature amount according to the processing information and sets it as an evaluation feature amount. The distribution unit 144 distributes the evaluation feature amount to the client 130. The client 130 includes a decoder 131, quality evaluation means 132, and reporting means 133. The decoder 131 decodes the stream to obtain a reproduced video and outputs it. The quality evaluation unit 132 calculates the quality evaluation value of the frame of the reproduced video using the received evaluation feature quantity. The reporting unit 133 reports the obtained quality evaluation value to the monitoring server 117. The monitoring server 117 collates the processing information with the quality evaluation value, and warns if there is a mismatch.

加工手段１４２の加工には二種類あり、第一の加工では、デコーダ１３１がストリームを正常にデコードした場合に、品質評価手段１３２で得られる品質評価値が、品質基準外となるように特徴量を改変する。第二の加工では、デコーダ１３１がストリームを正常にデコードした場合に、品質評価手段１３２で得られる品質評価値が、品質基準を満たす範囲内で特徴量を改変する。尚、第二の加工は正常な範囲内の評価であるので、用いなくても課題は解決できる。   There are two types of processing by the processing means 142. In the first processing, when the decoder 131 decodes the stream normally, the feature quantity is set so that the quality evaluation value obtained by the quality evaluation means 132 is outside the quality standard. Is modified. In the second processing, when the decoder 131 normally decodes the stream, the quality evaluation value obtained by the quality evaluation unit 132 modifies the feature amount within a range that satisfies the quality standard. Since the second processing is an evaluation within a normal range, the problem can be solved without using it.

以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。
たとえば、第１の実施形態乃至第３の実施形態にかかる映像コンテンツの配信に限られるものではない。映像コンテンツをオーディオコンテンツ、フレームをオーディオフレームと読み替えるだけで、本発明はオーディオコンテンツ配信にも実施できる。As mentioned above, although embodiment of this invention was described with reference to drawings, these are the illustrations of this invention, Various structures other than the above are also employable.
For example, the present invention is not limited to the distribution of video content according to the first to third embodiments. The present invention can also be implemented for audio content distribution by simply replacing the video content with audio content and the frame with audio frame.

また、以下のように構成にしても良い。
（１）ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信するとともに、特徴量配信サーバが品質評価単位ごとに評価用特徴量を前記クライアントへ配信し、前記クライアントが、前記コンテンツのストリームから再生コンテンツを復号し、前記評価用特徴量を用いて前記再生コンテンツについて品質評価し、品質評価値を算出し、前記品質評価値を監視サーバに報告するコンテンツ配信システムであって、前記特徴量配信サーバは、前記品質評価単位ごとに加工の有無を示す加工情報を生成する加工情報生成手段と、前記コンテンツからコンテンツ特徴量を抽出する特徴量抽出手段と、前記コンテンツ特徴量を加工して加工特徴量を生成する加工手段と、前記加工情報に従って、前記コンテンツ特徴量もしくは前記加工特徴量を選択して、評価用特徴量とする選択手段と、前記評価用特徴量を前記クライアントへ配信する配信手段と、を有し、前記監視サーバは、前記特徴量配信サーバの前記加工情報生成手段が生成する加工情報と、前記クライアントから受信する品質評価値とを照合して、不整合時に警告する警告手段を有するコンテンツ配信システム。Moreover, you may make it the following structures.
(1) The content distribution server distributes the content stream to the client via the network, the feature distribution server distributes the evaluation feature to each client for each quality evaluation unit, and the client A content distribution system that decodes playback content from a stream, evaluates the quality of the playback content using the evaluation feature value, calculates a quality evaluation value, and reports the quality evaluation value to a monitoring server, The quantity distribution server includes a processing information generation unit that generates processing information indicating whether processing is performed for each quality evaluation unit, a feature amount extraction unit that extracts a content feature amount from the content, and processes the content feature amount. A processing means for generating a processing feature amount, and the content according to the processing information A selection unit that selects a collection amount or the processed feature amount and sets it as an evaluation feature amount; and a distribution unit that distributes the evaluation feature amount to the client, wherein the monitoring server distributes the feature amount A content distribution system comprising warning means for collating processing information generated by the processing information generation means of a server with a quality evaluation value received from the client, and warning when there is a mismatch.

（２）上記のコンテンツ配信システムにおいて、前記加工情報生成手段は、加工の有無に加えて、加工の種類が第一か第二かを示す加工情報を生成し、前記加工手段は、正常な再生コンテンツの品質評価値が品質基準外を示すように前記コンテンツ特徴量を改変した第一の加工特徴量と、正常な再生コンテンツの品質評価値が品質基準内を示す範囲で前記コンテンツ特徴量を改変した第二の加工特徴量を生成し、前記選択手段は、前記加工情報が加工無しの場合には前記コンテンツ特徴量を、加工有りで前記第一の種類の場合には前記第一の加工特徴量を、加工有りで前記第二の種類の場合には前記第二の加工特徴量を選択するコンテンツ配信システム。 (2) In the above content distribution system, the processing information generation unit generates processing information indicating whether the type of processing is first or second in addition to the presence or absence of processing, and the processing unit performs normal reproduction. The first processing feature amount that has been modified so that the content quality evaluation value is outside the quality standard, and the content feature amount is modified within a range in which the quality evaluation value of normal playback content is within the quality standard. A second processing feature amount is generated, and the selecting means displays the content feature amount when the processing information is not processed, and the first processing feature when the processing information is the first type. A content distribution system that selects the second processing feature amount in the case of the second type with processing.

（３）ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信するとともに、特徴量配信サーバが品質評価単位ごとに評価用特徴量を前記クライアントへ配信し、前記クライアントが、前記コンテンツのストリームから再生コンテンツを復号し、前記評価用特徴量を用いて前記再生コンテンツについて品質評価し、品質評価値を算出し、前記品質評価値を監視サーバに報告するコンテンツ配信システムに用いられる特徴量配信サーバであって、前記品質評価単位ごとのコンテンツ特徴量を抽出する特徴量抽出手段と、前記品質評価単位ごとの加工の有無を示す加工情報を生成する加工情報生成手段と、前記コンテンツ特徴量を加工して加工特徴量を生成する加工手段と、前記加工情報に従い、加工無しの場合には前記コンテンツ特徴量を、加工有りの場合には前記加工特徴量を選択して品質評価用特徴量とする選択手段と、前記品質評価用特徴量を前記クライアントへ配信する配信手段とを有する特徴量配信サーバ。 (3) The content distribution server distributes the content stream to the client via the network, the feature distribution server distributes the evaluation feature to each client for each quality evaluation unit, and the client Feature amount distribution used in a content distribution system that decodes reproduced content from a stream, evaluates the quality of the reproduced content using the evaluation feature amount, calculates a quality evaluation value, and reports the quality evaluation value to a monitoring server A feature quantity extraction unit that extracts a content feature amount for each quality evaluation unit; a processing information generation unit that generates processing information indicating whether or not processing is performed for each quality evaluation unit; and the content feature amount Processing means for generating processing feature values by processing, and no processing according to the processing information Selecting means for selecting the content feature amount in the case of processing, selecting the processing feature amount in the case of processing to be used as a quality evaluation feature amount, and distributing means for distributing the quality evaluation feature amount to the client. A feature quantity distribution server.

（４）ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信するとともに、特徴量配信サーバが品質評価単位ごとに複数の評価用特徴量を前記クライアントへ配信し、前記クライアントが、前記コンテンツのストリームから再生コンテンツを復号し、前記評価用特徴量を用いて前記再生コンテンツについて品質評価し、品質評価値を算出し、前記品質評価値を監視サーバに報告するコンテンツ配信システムに用いられるクライアントであって、前記ストリームと品質評価単位ごとに前記複数の評価用特徴量を受信する手段と、前記ストリームから再生コンテンツを復号する復号手段と、前記再生コンテンツを前記複数の評価用特徴量それぞれで品質評価して複数の品質評価値を算出する品質評価手段と、前記複数の品質評価値を監視サーバに報告する報告手段と、を有するクライアント。 (4) The content distribution server distributes the content stream to the client via the network, the feature amount distribution server distributes a plurality of evaluation feature amounts for each quality evaluation unit to the client, and the client Client used in a content distribution system that decodes playback content from a content stream, evaluates the quality of the playback content using the evaluation feature, calculates a quality evaluation value, and reports the quality evaluation value to a monitoring server A means for receiving the plurality of evaluation feature values for each stream and quality evaluation unit, a decoding means for decoding the playback content from the stream, and the playback content for each of the plurality of evaluation feature values. Quality evaluation means for calculating multiple quality evaluation values by quality evaluation , The client having a reporting section that reports the plurality of quality evaluation values to the monitoring server.

（５）ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信し、特徴量配信サーバが品質評価単位ごとに評価用特徴量を前記クライアントへ配信し、前記クライアントが、前記コンテンツのストリームから再生コンテンツを復号し、前記評価用特徴量を用いて前記再生コンテンツについて品質評価し、品質評価値を算出し、前記品質評価値を監視サーバに報告するコンテンツ配信方法であって、前記特徴量配信サーバは、前記品質評価単位ごとに加工の有無を示す加工情報を生成し、前記コンテンツからコンテンツ特徴量を抽出し、前記コンテンツ特徴量を加工して加工特徴量を生成し、前記加工情報に従って、前記コンテンツ特徴量もしくは前記加工特徴量を選択して評価特徴量とし、前記評価用特徴量を前記クライアントへ配信し、前記監視サーバは、前記特徴量配信サーバの前記加工情報生成手段が生成する前記加工情報と、前記クライアントから受信する品質評価値とを照合して不整合時に警告するコンテンツ配信方法。 (5) The content distribution server distributes the content stream to the client via the network, the feature distribution server distributes the evaluation feature quantity to each client for each quality evaluation unit, and the client stream the content stream. A content distribution method for decoding the playback content from the content, evaluating the quality of the playback content using the evaluation feature amount, calculating a quality evaluation value, and reporting the quality evaluation value to a monitoring server, the feature amount The distribution server generates processing information indicating presence / absence of processing for each quality evaluation unit, extracts a content feature amount from the content, processes the content feature amount, generates a processing feature amount, and according to the processing information , Selecting the content feature amount or the processing feature amount as an evaluation feature amount, for the evaluation The monitoring server delivers the collected amount to the client, and the monitoring server compares the processing information generated by the processing information generation means of the feature amount distribution server with the quality evaluation value received from the client and warns when there is a mismatch Content delivery method.

この出願は、２００８年３月７日に出願された日本特許出願２００８−０５８７３８号を基礎とする優先権を主張し、その開示の全てをここに取り込む。
以下、参考形態の例を付記する。
１． ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信するとともに、
特徴量配信サーバが前記コンテンツの品質評価単位ごとに評価用特徴量を前記クライアントへ配信し、
前記クライアントが、前記コンテンツのストリームから再生コンテンツを復号し、前記評価用特徴量を用いて前記再生コンテンツについて品質評価し、品質評価値を算出し、前記品質評価値を監視サーバに報告するコンテンツ配信システムであって、
前記特徴量配信サーバは、前記品質評価単位ごとに加工の有無を指定する加工情報を生成する加工情報生成手段と、
前記コンテンツからコンテンツ特徴量を抽出する特徴量抽出手段と、
前記コンテンツ特徴量を加工して加工特徴量を生成する加工手段と、
前記加工情報に従って、前記コンテンツ特徴量もしくは前記加工特徴量を選択して、評価用特徴量とする選択手段と、
前記評価用特徴量を前記クライアントへ配信する配信手段と、
を有し、
前記監視サーバは、前記特徴量配信サーバの前記加工情報生成手段が生成する加工情報と、前記クライアントから受信する品質評価値とを照合して、不整合時に警告する警告手段を有するコンテンツ配信システム。
２． １に記載のコンテンツ配信システムにおいて、
前記加工手段は、正常な再生コンテンツの品質評価値が品質基準外を示すように前記コンテンツ特徴量を改変した加工特徴量を生成するコンテンツ配信システム。
３． １に記載のコンテンツ配信システムにおいて、
前記加工情報生成手段は、加工の有無に加えて、加工の種類が第一か第二かを指定する加工情報を生成し、
前記加工手段は、正常な再生コンテンツの品質評価値が品質基準外を示すように前記コンテンツ特徴量を改変した第一の加工特徴量と、正常な再生コンテンツの品質評価値が品質基準内を示す範囲で前記コンテンツ特徴量を改変した第二の加工特徴量を生成し、
前記選択手段は、前記加工情報が加工無しの場合には前記コンテンツ特徴量を、加工有りで前記第一の種類の場合には前記第一の加工特徴量を、加工有りで前記第二の種類の場合には前記第二の加工特徴量を選択するコンテンツ配信システム。
４． ２に記載のコンテンツ配信システムにおいて、
前記警告手段は、前記加工情報が加工有りの場合に前記品質評価値が品質基準内となった場合に不整合と判断するコンテンツ配信システム。
５． ３に記載のコンテンツ配信システムにおいて、
前記警告手段は、前記加工情報が加工無しの場合に前記品質評価値が基準外となる比率と、
前記加工情報が加工有りで第二の種類の場合に前記品質評価値が基準外となる比率を比較し、
後者が統計的に有意に大きい場合に不整合と判断するコンテンツ配信システム。
６． ２または３に記載のコンテンツ配信システムにおいて、
前記加工情報生成手段は、前記品質評価単位ごとに複数の加工情報を生成し、
前記配信手段は、前記品質評価単位ごとに前記複数の加工情報に対応した複数の評価用特徴量をクライアントに配信し、
前記クライアントは、前記ストリームを受信して再生コンテンツを再生する復号手段と、前記複数の評価用特徴量を受信して、前記再生コンテンツを前記複数の評価用特徴量のそれぞれで評価して、複数の品質評価値を算出する品質評価手段と、前記複数の品質評価値を前記監視サーバに報告する報告手段を有するコンテンツ配信システム。
７． ６に記載のコンテンツ配信システムにおいて、
前記品質評価単位ごとの前記複数の加工情報の中で少なくとも一つは加工無しであるコンテンツ配信システム。
８． １に記載のコンテンツ配信システムにおいて、
前記加工手段は前記コンテンツ特徴量の中の輝度値を改変するコンテンツ配信システム。
９． １に記載のコンテンツ配信システムにおいて、
前記加工情報生成手段は、所定の確率で加工無しと、加工有りと、を生成するコンテンツ配信システム。
１０． ３に記載のコンテンツ配信システムにおいて、
前記加工情報生成手段は、所定の確率で、加工無し、加工有りで第一の種類、加工有りで第二の種類を生成するコンテンツ配信システム。
１１． １に記載のコンテンツ配信システムにおいて、
前記加工情報は、所定のパラメータから一意に定まる系列で表されるコンテンツ配信システム。
１２． ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信するとともに、
特徴量配信サーバが前記コンテンツの品質評価単位ごとに評価用特徴量を前記クライアントへ配信し、
前記クライアントが、前記コンテンツのストリームから再生コンテンツを復号し、前記評価用特徴量を用いて前記再生コンテンツについて品質評価し、品質評価値を算出し、前記品質評価値を監視サーバに報告するコンテンツ配信システムに用いられる特徴量配信サーバであって、
前記品質評価単位ごとのコンテンツ特徴量を抽出する特徴量抽出手段と、
前記品質評価単位ごとの加工の有無を指示する加工情報を生成する加工情報生成手段と、
前記コンテンツ特徴量を加工して加工特徴量を生成する加工手段と、
前記加工情報に従い、加工無しの場合には前記コンテンツ特徴量を、加工有りの場合には前記加工特徴量を選択して品質評価用特徴量とする選択手段と、
前記品質評価用特徴量を前記クライアントへ配信する配信手段と
を有する特徴量配信サーバ。
１３． ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信するとともに、
特徴量配信サーバが前記コンテンツの品質評価単位ごとに複数の評価用特徴量を前記クライアントへ配信し、
前記クライアントが、前記コンテンツのストリームから再生コンテンツを復号し、前記評価用特徴量を用いて前記再生コンテンツについて品質評価し、品質評価値を算出し、前記品質評価値を監視サーバに報告するコンテンツ配信システムに用いられるクライアントであって、
前記ストリームと品質評価単位ごとに前記複数の評価用特徴量を受信する手段と、
前記ストリームから前記再生コンテンツを復号する復号手段と、
前記再生コンテンツを前記複数の評価用特徴量それぞれで品質評価して複数の品質評価値を算出する品質評価手段と、
前記複数の品質評価値を監視サーバに報告する報告手段と、
を有するクライアント。
１４． ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信し、
特徴量配信サーバが前記コンテンツの品質評価単位ごとに評価用特徴量を前記クライアントへ配信し、
前記クライアントが、前記コンテンツのストリームから再生コンテンツを復号し、前記評価用特徴量を用いて前記再生コンテンツについて品質評価し、品質評価値を算出し、前記品質評価値を監視サーバに報告するコンテンツ配信方法であって、
前記特徴量配信サーバは、前記品質評価単位ごとに加工の有無を指定する加工情報を生成し、前記コンテンツからコンテンツ特徴量を抽出し、前記コンテンツ特徴量を加工して加工特徴量を生成し、前記加工情報に従って、前記コンテンツ特徴量もしくは前記加工特徴量を選択して評価用特徴量とし、前記評価用特徴量を前記クライアントへ配信し、
前記監視サーバは、前記特徴量配信サーバの前記加工情報生成手段が生成する前記加工情報と、前記クライアントから受信する品質評価値とを照合して不整合時に警告するコンテンツ配信方法。 This application claims priority based on Japanese Patent Application No. 2008-058838 filed on Mar. 7, 2008, the entire disclosure of which is incorporated herein.
Hereinafter, examples of the reference form will be added.
1. The content distribution server distributes the content stream to the client via the network,
The feature quantity distribution server delivers the evaluation feature quantity to the client for each quality evaluation unit of the content,
Content distribution in which the client decodes the playback content from the content stream, evaluates the quality of the playback content using the evaluation feature, calculates a quality evaluation value, and reports the quality evaluation value to a monitoring server A system,
The feature quantity distribution server includes processing information generation means for generating processing information for specifying the presence or absence of processing for each quality evaluation unit;
Feature amount extraction means for extracting content feature amounts from the content;
Processing means for processing the content feature value to generate a processing feature value;
A selection unit that selects the content feature amount or the processing feature amount according to the processing information and sets it as an evaluation feature amount;
Distribution means for distributing the evaluation feature quantity to the client;
Have
The content distribution system, wherein the monitoring server includes a warning unit that collates processing information generated by the processing information generation unit of the feature amount distribution server with a quality evaluation value received from the client and warns when there is a mismatch.
2. In the content distribution system according to 1,
The content distribution system, wherein the processing means generates a processed feature amount by modifying the content feature amount so that a quality evaluation value of a normal reproduction content is out of a quality standard.
3. In the content distribution system according to 1,
In addition to the presence or absence of processing, the processing information generation means generates processing information that specifies whether the type of processing is first or second,
The processing means includes a first processing feature amount obtained by modifying the content feature amount so that a quality evaluation value of normal reproduction content is out of a quality standard, and a quality evaluation value of normal reproduction content is within the quality standard. Generating a second processing feature amount by modifying the content feature amount in a range;
The selection means includes the content feature amount when the processing information is not processed, the first processing feature amount when the processing type is the first type, and the second type when processing is performed. In this case, the content distribution system selects the second processing feature amount.
4). In the content distribution system according to 2,
The content distribution system in which the warning means determines that there is inconsistency when the quality evaluation value falls within a quality standard when the processing information is processed.
5). 3, the content distribution system according to
The warning means includes a ratio at which the quality evaluation value is out of a standard when the processing information is not processed,
When the processing information is processed and the second type, the ratio at which the quality evaluation value is out of the standard is compared,
A content distribution system that judges inconsistencies when the latter is statistically significant.
6). In the content distribution system according to 2 or 3,
The processing information generating means generates a plurality of processing information for each quality evaluation unit,
The distribution means distributes a plurality of evaluation feature amounts corresponding to the plurality of pieces of processing information to the client for each of the quality evaluation units,
The client receives the stream and reproduces the reproduction content, receives the plurality of evaluation feature amounts, evaluates the reproduction content with each of the plurality of evaluation feature amounts, A content distribution system comprising quality evaluation means for calculating a quality evaluation value of the image and reporting means for reporting the plurality of quality evaluation values to the monitoring server.
7). 6. The content distribution system according to 6,
A content distribution system in which at least one of the plurality of pieces of processing information for each quality evaluation unit is not processed.
8). In the content distribution system according to 1,
The content distribution system in which the processing means modifies a luminance value in the content feature amount.
9. In the content distribution system according to 1,
The processing information generation means is a content distribution system that generates no processing and processing with a predetermined probability.
10. 3, the content distribution system according to
The processing information generating means generates a first type without processing, with processing, and a second type with processing with a predetermined probability.
11. In the content distribution system according to 1,
The content distribution system in which the processing information is represented by a series uniquely determined from predetermined parameters.
12 The content distribution server distributes the content stream to the client via the network,
The feature quantity distribution server delivers the evaluation feature quantity to the client for each quality evaluation unit of the content,
Content distribution in which the client decodes the playback content from the content stream, evaluates the quality of the playback content using the evaluation feature, calculates a quality evaluation value, and reports the quality evaluation value to a monitoring server A feature amount distribution server used in the system,
Feature quantity extraction means for extracting content feature quantities for each quality evaluation unit;
Processing information generating means for generating processing information for instructing the presence or absence of processing for each quality evaluation unit;
Processing means for processing the content feature value to generate a processing feature value;
In accordance with the processing information, a selection means for selecting the content feature amount when there is no processing, and selecting the processing feature amount when there is processing to be a quality evaluation feature amount;
Distribution means for distributing the quality evaluation feature quantity to the client;
A feature amount distribution server.
13. The content distribution server distributes the content stream to the client via the network,
The feature quantity distribution server delivers a plurality of evaluation feature quantities to the client for each quality evaluation unit of the content,
Content distribution in which the client decodes the playback content from the content stream, evaluates the quality of the playback content using the evaluation feature, calculates a quality evaluation value, and reports the quality evaluation value to a monitoring server A client used in the system,
Means for receiving the plurality of evaluation features for each stream and quality evaluation unit;
Decoding means for decoding the reproduced content from the stream;
Quality evaluation means for evaluating the quality of the reproduced content with each of the plurality of evaluation feature quantities and calculating a plurality of quality evaluation values;
Reporting means for reporting the plurality of quality evaluation values to a monitoring server;
Having clients.
14 The content distribution server distributes the content stream to the client via the network,
The feature quantity distribution server delivers the evaluation feature quantity to the client for each quality evaluation unit of the content,
Content distribution in which the client decodes the playback content from the content stream, evaluates the quality of the playback content using the evaluation feature, calculates a quality evaluation value, and reports the quality evaluation value to a monitoring server A method,
The feature amount distribution server generates processing information for designating presence / absence of processing for each quality evaluation unit, extracts a content feature amount from the content, processes the content feature amount, and generates a processing feature amount, According to the processing information, the content feature amount or the processing feature amount is selected as an evaluation feature amount, and the evaluation feature amount is distributed to the client,
The content distribution method, wherein the monitoring server compares the processing information generated by the processing information generation unit of the feature amount distribution server with a quality evaluation value received from the client and warns when there is a mismatch.

Claims (13)

ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信するとともに、
特徴量配信サーバが前記コンテンツの品質評価単位ごとに評価用特徴量を前記クライアントへ配信し、
前記クライアントが、前記コンテンツのストリームから再生コンテンツを復号し、前記評価用特徴量を用いて前記再生コンテンツについて品質評価し、品質評価値を算出し、前記品質評価値を監視サーバに報告するコンテンツ配信システムであって、
前記特徴量配信サーバは、前記品質評価単位ごとに加工の有無を指定する加工情報を生成する加工情報生成手段と、
前記コンテンツからコンテンツ特徴量を抽出する特徴量抽出手段と、
前記コンテンツ特徴量を加工して加工特徴量を生成する加工手段と、
前記加工情報に従って、前記コンテンツ特徴量もしくは前記加工特徴量を選択して、評価用特徴量とする選択手段と、
前記評価用特徴量を前記クライアントへ配信する配信手段と、
を有し、
前記監視サーバは、前記特徴量配信サーバの前記加工情報生成手段が生成する加工情報と、前記クライアントから受信する品質評価値とを照合して、不整合時に警告する警告手段を有するコンテンツ配信システム。 The content distribution server distributes the content stream to the client via the network,
The feature quantity distribution server delivers the evaluation feature quantity to the client for each quality evaluation unit of the content,
Content distribution in which the client decodes the playback content from the content stream, evaluates the quality of the playback content using the evaluation feature, calculates a quality evaluation value, and reports the quality evaluation value to a monitoring server A system,
The feature quantity distribution server includes processing information generation means for generating processing information for specifying the presence or absence of processing for each quality evaluation unit;
Feature amount extraction means for extracting content feature amounts from the content;
Processing means for processing the content feature value to generate a processing feature value;
A selection unit that selects the content feature amount or the processing feature amount according to the processing information and sets it as an evaluation feature amount;
Distribution means for distributing the evaluation feature quantity to the client;
Have
The content distribution system, wherein the monitoring server includes a warning unit that collates processing information generated by the processing information generation unit of the feature amount distribution server with a quality evaluation value received from the client and warns when there is a mismatch. 請求項１記載のコンテンツ配信システムにおいて、
前記加工手段は、正常な再生コンテンツの品質評価値が品質基準外を示すように前記コンテンツ特徴量を改変した加工特徴量を生成するコンテンツ配信システム。 The content distribution system according to claim 1,
The content distribution system, wherein the processing means generates a processed feature amount by modifying the content feature amount so that a quality evaluation value of a normal reproduction content is out of a quality standard. 請求項１記載のコンテンツ配信システムにおいて、
前記加工情報生成手段は、加工の有無に加えて、加工の種類が第一か第二かを指定する加工情報を生成し、
前記加工手段は、正常な再生コンテンツの品質評価値が品質基準外を示すように前記コンテンツ特徴量を改変した第一の加工特徴量と、正常な再生コンテンツの品質評価値が品質基準内を示す範囲で前記コンテンツ特徴量を改変した第二の加工特徴量を生成し、
前記選択手段は、前記加工情報が加工無しの場合には前記コンテンツ特徴量を、加工有りで前記第一の種類の場合には前記第一の加工特徴量を、加工有りで前記第二の種類の場合には前記第二の加工特徴量を選択するコンテンツ配信システム。 The content distribution system according to claim 1,
In addition to the presence or absence of processing, the processing information generation means generates processing information that specifies whether the type of processing is first or second,
The processing means includes a first processing feature amount obtained by modifying the content feature amount so that a quality evaluation value of normal reproduction content is out of a quality standard, and a quality evaluation value of normal reproduction content is within the quality standard. Generating a second processing feature amount by modifying the content feature amount in a range;
The selection means includes the content feature amount when the processing information is not processed, the first processing feature amount when the processing type is the first type, and the second type when processing is performed. In this case, the content distribution system selects the second processing feature amount. 請求項２記載のコンテンツ配信システムにおいて、
前記警告手段は、前記加工情報が加工有りの場合に前記品質評価値が品質基準内となった場合に不整合と判断するコンテンツ配信システム。 The content distribution system according to claim 2, wherein
The content distribution system in which the warning means determines that there is inconsistency when the quality evaluation value falls within a quality standard when the processing information is processed. 請求項３記載のコンテンツ配信システムにおいて、
前記警告手段は、前記加工情報が加工無しの場合に前記品質評価値が基準外となる比率と、
前記加工情報が加工有りで第二の種類の場合に前記品質評価値が基準外となる比率を比較し、
後者が統計的に有意に大きい場合に不整合と判断するコンテンツ配信システム。 The content distribution system according to claim 3, wherein
The warning means includes a ratio at which the quality evaluation value is out of a standard when the processing information is not processed,
When the processing information is processed and the second type, the ratio at which the quality evaluation value is out of the standard is compared,
A content distribution system that judges inconsistencies when the latter is statistically significant. 請求項２または３記載のコンテンツ配信システムにおいて、
前記加工情報生成手段は、前記品質評価単位ごとに複数の加工情報を生成し、
前記配信手段は、前記品質評価単位ごとに前記複数の加工情報に対応した複数の評価用特徴量をクライアントに配信し、
前記クライアントは、前記ストリームを受信して再生コンテンツを再生する復号手段と、前記複数の評価用特徴量を受信して、前記再生コンテンツを前記複数の評価用特徴量のそれぞれで評価して、複数の品質評価値を算出する品質評価手段と、前記複数の品質評価値を前記監視サーバに報告する報告手段を有するコンテンツ配信システム。 The content distribution system according to claim 2 or 3,
The processing information generating means generates a plurality of processing information for each quality evaluation unit,
The distribution means distributes a plurality of evaluation feature amounts corresponding to the plurality of pieces of processing information to the client for each of the quality evaluation units,
The client receives the stream and reproduces the reproduction content, receives the plurality of evaluation feature amounts, evaluates the reproduction content with each of the plurality of evaluation feature amounts, A content distribution system comprising quality evaluation means for calculating a quality evaluation value of the image and reporting means for reporting the plurality of quality evaluation values to the monitoring server. 請求項６記載のコンテンツ配信システムにおいて、
前記品質評価単位ごとの前記複数の加工情報の中で少なくとも一つは加工無しであるコンテンツ配信システム。 The content distribution system according to claim 6, wherein
A content distribution system in which at least one of the plurality of pieces of processing information for each quality evaluation unit is not processed. 請求項１記載のコンテンツ配信システムにおいて、
前記加工手段は前記コンテンツ特徴量の中の輝度値を改変するコンテンツ配信システム。 The content distribution system according to claim 1,
The content distribution system in which the processing means modifies a luminance value in the content feature amount. 請求項１に記載のコンテンツ配信システムにおいて、
前記加工情報生成手段は、所定の確率で加工無しと、加工有りと、を生成するコンテンツ配信システム。 The content distribution system according to claim 1,
The processing information generation means is a content distribution system that generates no processing and processing with a predetermined probability. 請求項３記載のコンテンツ配信システムにおいて、
前記加工情報生成手段は、所定の確率で、加工無し、加工有りで第一の種類、加工有りで第二の種類を生成するコンテンツ配信システム。 The content distribution system according to claim 3, wherein
The processing information generating means generates a first type without processing, with processing, and a second type with processing with a predetermined probability. 請求項１に記載のコンテンツ配信システムにおいて、
前記加工情報は、所定のパラメータから一意に定まる系列で表されるコンテンツ配信システム。 The content distribution system according to claim 1,
The content distribution system in which the processing information is represented by a series uniquely determined from predetermined parameters. ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信するとともに、
特徴量配信サーバが前記コンテンツの品質評価単位ごとに評価用特徴量を前記クライアントへ配信し、
前記クライアントが、前記コンテンツのストリームから再生コンテンツを復号し、前記評価用特徴量を用いて前記再生コンテンツについて品質評価し、品質評価値を算出し、前記品質評価値を監視サーバに報告するコンテンツ配信システムに用いられる特徴量配信サーバであって、
前記品質評価単位ごとのコンテンツ特徴量を抽出する特徴量抽出手段と、
前記品質評価単位ごとの加工の有無を指示する加工情報を生成する加工情報生成手段と、
前記コンテンツ特徴量を加工して加工特徴量を生成する加工手段と、
前記加工情報に従い、加工無しの場合には前記コンテンツ特徴量を、加工有りの場合には前記加工特徴量を選択して品質評価用特徴量とする選択手段と、
前記品質評価用特徴量を前記クライアントへ配信する配信手段と
を有する特徴量配信サーバ。 The content distribution server distributes the content stream to the client via the network,
The feature quantity distribution server delivers the evaluation feature quantity to the client for each quality evaluation unit of the content,
Content distribution in which the client decodes the playback content from the content stream, evaluates the quality of the playback content using the evaluation feature, calculates a quality evaluation value, and reports the quality evaluation value to a monitoring server A feature amount distribution server used in the system,
Feature quantity extraction means for extracting content feature quantities for each quality evaluation unit;
Processing information generating means for generating processing information for instructing the presence or absence of processing for each quality evaluation unit;
Processing means for processing the content feature value to generate a processing feature value;
In accordance with the processing information, a selection means for selecting the content feature amount when there is no processing, and selecting the processing feature amount when there is processing to be a quality evaluation feature amount;
A feature quantity distribution server comprising: a distribution means for distributing the quality evaluation feature quantity to the client. ネットワークを介して、コンテンツ配信サーバがコンテンツのストリームをクライアントへ配信し、
特徴量配信サーバが前記コンテンツの品質評価単位ごとに評価用特徴量を前記クライアントへ配信し、
前記クライアントが、前記コンテンツのストリームから再生コンテンツを復号し、前記評価用特徴量を用いて前記再生コンテンツについて品質評価し、品質評価値を算出し、前記品質評価値を監視サーバに報告するコンテンツ配信方法であって、
前記特徴量配信サーバは、前記品質評価単位ごとに加工の有無を指定する加工情報を生成し、前記コンテンツからコンテンツ特徴量を抽出し、前記コンテンツ特徴量を加工して加工特徴量を生成し、前記加工情報に従って、前記コンテンツ特徴量もしくは前記加工特徴量を選択して評価用特徴量とし、前記評価用特徴量を前記クライアントへ配信し、
前記監視サーバは、前記特徴量配信サーバの前記加工情報生成手段が生成する前記加工情報と、前記クライアントから受信する品質評価値とを照合して不整合時に警告するコンテンツ配信方法。 The content distribution server distributes the content stream to the client via the network,
The feature quantity distribution server delivers the evaluation feature quantity to the client for each quality evaluation unit of the content,
Content distribution in which the client decodes the playback content from the content stream, evaluates the quality of the playback content using the evaluation feature, calculates a quality evaluation value, and reports the quality evaluation value to a monitoring server A method,
The feature amount distribution server generates processing information for designating presence / absence of processing for each quality evaluation unit, extracts a content feature amount from the content, processes the content feature amount, and generates a processing feature amount, According to the processing information, the content feature amount or the processing feature amount is selected as an evaluation feature amount, and the evaluation feature amount is distributed to the client,
The content distribution method, wherein the monitoring server compares the processing information generated by the processing information generation unit of the feature amount distribution server with a quality evaluation value received from the client and warns when there is a mismatch.
JP2010501805A 2008-03-07 2009-03-05 Content distribution system, feature distribution server, and content distribution method Expired - Fee Related JP5413364B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010501805A JP5413364B2 (en) 2008-03-07 2009-03-05 Content distribution system, feature distribution server, and content distribution method

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2008058738 2008-03-07
JP2008058738 2008-03-07
PCT/JP2009/000993 WO2009110238A1 (en) 2008-03-07 2009-03-05 Content delivery system, feature quantity delivery server, client, and content delivery method
JP2010501805A JP5413364B2 (en) 2008-03-07 2009-03-05 Content distribution system, feature distribution server, and content distribution method

Publications (2)

Publication Number Publication Date
JPWO2009110238A1 JPWO2009110238A1 (en) 2011-07-14
JP5413364B2 true JP5413364B2 (en) 2014-02-12

Family

ID=41055803

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010501805A Expired - Fee Related JP5413364B2 (en) 2008-03-07 2009-03-05 Content distribution system, feature distribution server, and content distribution method

Country Status (6)

Country Link
US (1) US8676935B2 (en)
EP (1) EP2252072A4 (en)
JP (1) JP5413364B2 (en)
KR (1) KR20100108613A (en)
CN (1) CN101960863A (en)
WO (1) WO2009110238A1 (en)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120278441A1 (en) * 2011-04-28 2012-11-01 Futurewei Technologies, Inc. System and Method for Quality of Experience Estimation
JP5623333B2 (en) * 2011-05-12 2014-11-12 株式会社日立製作所 Monitoring server and monitoring evaluation method
WO2012174711A1 (en) * 2011-06-21 2012-12-27 Technicolor (China) Technology Co., Ltd. User terminal device, server device, system and method for assessing quality of media data
JP5829590B2 (en) * 2012-09-10 2015-12-09 日本電信電話株式会社 Fatigue evaluation device, fatigue evaluation method, and program
JP6360281B2 (en) * 2013-01-07 2018-07-18 日本放送協会 Synchronization information generating apparatus and program thereof, synchronous data reproducing apparatus and program thereof
CN105144711B (en) * 2014-01-14 2017-10-10 华为技术有限公司 A kind of method and relevant device for assessing video quality
CN104050964A (en) * 2014-06-17 2014-09-17 公安部第三研究所 Audio signal reduction degree detecting method and system
US20170364647A1 (en) * 2014-12-19 2017-12-21 Koninklijke Philips N.V. Automated derivation of quality assurance rules
US20170126538A1 (en) * 2015-10-28 2017-05-04 Fastly, Inc. Testing in a content delivery network
JP7075064B2 (en) * 2018-03-09 2022-05-25 日本電気株式会社 Signal source identification device, signal source identification method, program
CN110636380A (en) * 2018-06-21 2019-12-31 中国电信股份有限公司 Set top box and method for detecting video playing abnormity and abnormity detection system

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003298554A (en) * 2002-04-02 2003-10-17 Hitachi Ltd Method and apparatus for evaluating quality of received data in data distribution
JP2007019802A (en) * 2005-07-07 2007-01-25 Nippon Telegr & Teleph Corp <Ntt> Image quality estimation device, and image quality estimation method

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5446492A (en) * 1993-01-19 1995-08-29 Wolf; Stephen Perception-based video quality measurement system
US6246435B1 (en) 1998-09-08 2001-06-12 Tektronix, Inc. In-service realtime picture quality analysis
US6496221B1 (en) * 1998-11-02 2002-12-17 The United States Of America As Represented By The Secretary Of Commerce In-service video quality measurement system utilizing an arbitrary bandwidth ancillary data channel
JP3622840B2 (en) * 2000-08-25 2005-02-23 Ｋｄｄｉ株式会社 Transmission image quality evaluation device and transmission image quality remote monitoring device
US6943827B2 (en) * 2001-04-16 2005-09-13 Kddi Corporation Apparatus for monitoring quality of picture in transmission
JP3844445B2 (en) 2002-04-19 2006-11-15 日本電信電話株式会社 Video content distribution method, apparatus, and video content distribution program
JP2005064679A (en) * 2003-08-08 2005-03-10 Kddi Corp Image feature value extracting method and image quality evaluating method
JP2005303451A (en) 2004-04-07 2005-10-27 Nippon Telegr & Teleph Corp <Ntt> Transfer quality deterioration attaching method, transfer quality deterioration attaching apparatus, and transfer quality deterioration attaching program
US7474724B1 (en) * 2004-10-13 2009-01-06 Cirrus Logic, Inc. Method and system for video-synchronous audio clock generation from an asynchronously sampled video signal
JP2008058738A (en) 2006-08-31 2008-03-13 Nidec Sankyo Corp Optical element and manufacturing method therefor

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003298554A (en) * 2002-04-02 2003-10-17 Hitachi Ltd Method and apparatus for evaluating quality of received data in data distribution
JP2007019802A (en) * 2005-07-07 2007-01-25 Nippon Telegr & Teleph Corp <Ntt> Image quality estimation device, and image quality estimation method

Also Published As

Publication number Publication date
EP2252072A4 (en) 2012-12-26
EP2252072A1 (en) 2010-11-17
WO2009110238A1 (en) 2009-09-11
US20100318635A1 (en) 2010-12-16
US8676935B2 (en) 2014-03-18
JPWO2009110238A1 (en) 2011-07-14
CN101960863A (en) 2011-01-26
KR20100108613A (en) 2010-10-07

Similar Documents

Publication Publication Date Title
JP5413364B2 (en) Content distribution system, feature distribution server, and content distribution method
US7975063B2 (en) Informative data streaming server
EP2615833B1 (en) A method for determining video quality
US20030121053A1 (en) Video distribution test system for evaluating image quality by determining spread of frame loss within refreshment interval
US20130148741A1 (en) Method, System and Apparatus for Enhanced Video Transcoding
JP5427238B2 (en) Method and system for determining the quality value of a video stream
Staelens et al. No-reference bitstream-based visual quality impairment detection for high definition H. 264/AVC encoded video sequences
JP4460506B2 (en) User experience quality estimation apparatus, method, and program
US8661122B2 (en) Method for monitoring access networks
Barkowsky et al. Hybrid video quality prediction: reviewing video quality measurement for widening application scope
CN106162109A (en) A kind of remote monitoring method and monitoring device
JP4460523B2 (en) User experience quality estimation apparatus, method, and program
AU2014280116B2 (en) System and method for remote maintenance of user units
EP2525586A1 (en) Method and arrangement for supporting quality estimation of streamed video
JP4634339B2 (en) User experience quality estimation apparatus, method, and program
De Pessemier et al. Exploring the acceptability of the audiovisual quality for a mobile video session based on objectively measured parameters
DE102016207785B4 (en) Method and device for quality assessment of a video stream in the transmission of video telephony
JP4573301B2 (en) Video signal frame synchronization method
JP2009171023A (en) Image quality evaluation apparatus, image quality evaluation method, program for image quality evaluation, and video reception terminal
Riker et al. A hybrid prediction and assessment quality of experience approach for videostreaming applications over wireless mesh networks
JP3785384B2 (en) Delivery service quality degradation estimation method and apparatus
JP2007329778A (en) Apparatus, method and program for estimating user&#39;s sensory quality
Davis et al. Quality assurance for IPTV
Mu et al. Multimodal QoE evaluation in P2P-based IPTV systems
EP2745518B1 (en) Estimating user-perceived quality of an encoded video stream

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130604

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130704

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131015

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131028

R150 Certificate of patent or registration of utility model

Ref document number: 5413364

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees