JP2015528226A - コンテンツ要素に対する閲覧者の反応を決定する方法、装置及びシステム - Google Patents

コンテンツ要素に対する閲覧者の反応を決定する方法、装置及びシステム Download PDF

Info

Publication number
JP2015528226A
JP2015528226A JP2015517422A JP2015517422A JP2015528226A JP 2015528226 A JP2015528226 A JP 2015528226A JP 2015517422 A JP2015517422 A JP 2015517422A JP 2015517422 A JP2015517422 A JP 2015517422A JP 2015528226 A JP2015528226 A JP 2015528226A
Authority
JP
Japan
Prior art keywords
viewer
content
signal
content metadata
feedback signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2015517422A
Other languages
English (en)
Other versions
JP2015528226A5 (ja
Inventor
ジョルジ シルベイラ−フィリオ,フェルナンド
ジョルジ シルベイラ−フィリオ,フェルナンド
シェス,アンモル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of JP2015528226A publication Critical patent/JP2015528226A/ja
Publication of JP2015528226A5 publication Critical patent/JP2015528226A5/ja
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/29Arrangements for monitoring broadcast services or broadcast-related services
    • H04H60/33Arrangements for monitoring the users' behaviour or opinions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H04H60/46Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for recognising users' preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Social Psychology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Neurosurgery (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Investigating Or Analysing Biological Materials (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
  • Information Transfer Between Computers (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

コンテンツ要素に対する閲覧者の反応を決定する方法、装置及びシステムは、閲覧されたコンテンツに対する閲覧者の反応のバイオメトリック測定を記録することにより、閲覧者フィードバック信号を生成し、閲覧されたコンテンツのコンテンツメタデータ信号と、閲覧者フィードバック信号とを同期させ、コンテンツの各要素に対する閲覧者反応スコアを決定するために、コンテンツメタデータ信号の各要素と、閲覧者フィードバック信号のバイオメトリック測定とを関連付けることを含む。

Description

この出願は、2012年6月14日に出願された米国仮出願第61/659756号の優先権を主張し、その全内容を援用する。
本発明の原理は、エンドユーザへのマルチメディアコンテンツの配信に関し、特に閲覧されたコンテンツにおいて閲覧者の反応を詳細に定義された要素に関連付ける方法及び装置に関する。
典型的には、1つのコンテンツについての閲覧者の関心及び意見は、粗い/集約したフィードバックの形式(例えば、星評価、ソーシャルネットワークへのポスト、ウェブブラウジング及び検索履歴)を通じて得られる。NETFLIXのようなVoDサービスの推奨システム、ウェブ上のターゲティングした広告(例えば、GOOGLE.COM)、及びブランド人気分析サービス(例えば、FIZZIOLOGY.COM)を含む、現在のターゲティングしたコンテンツシステムの複数の例は、この種類のフィードバックに依存する。しかし、コンテンツに対するリアルタイムの閲覧者の反応の細かい記録は、更に豊富なターゲティングしたコンテンツアプリケーションを可能にすることができると考えられる。
コンテンツに対する細かい閲覧者のフィードバックを取得する1つの方法は、カメラ/マイクロフォンから閲覧者を監視し、笑い及び驚きのような感情的反応を見ることである。このようなシステムは、TVの前で他の行為を行っている間に撮影又は記録されていることを心配する閲覧者からのプライバシー問題をもたらす可能性がある。感受性の低い他の形式の細かいフィードバックデータは、コンテンツを再生するアプリケーションとの閲覧者の相互作用のログ(すなわち、再生、一時停止及び早送りのようなDVR操作の記録)である。このデータは、映画の特定の部分に対する閲覧者の関心を取得するのに有用になり得るが、閲覧者のグループがリモコンを共有している場合、どの閲覧者がどの操作を生成したかを識別することが困難になる可能性がある。
過去10年間に、感情コンピューティング(affective computing)と呼ばれるもの(すなわち、関心及び感情を推測するための閲覧者データの測定及び適用)についてかなりの研究が存在している。
本発明の実施例は、コンテンツ要素に対する閲覧者の反応を決定する方法、装置及びシステムを提供することにより、従来技術の欠点に対処する。
本発明の一実施例では、コンテンツの要素に対する閲覧者の反応を決定する方法は、閲覧されたコンテンツに対する閲覧者の反応のバイオメトリック測定を記録することにより、閲覧者フィードバック信号を生成し、閲覧されたコンテンツのコンテンツメタデータ信号と、閲覧者フィードバック信号とを同期させ、コンテンツの各要素に対する閲覧者反応スコアを決定するために、コンテンツメタデータ信号の各要素と、閲覧者フィードバック信号のバイオメトリック測定とを関連付けることを含む。
本発明の別の実施例では、コンテンツの要素に対する閲覧者の反応を決定するシステムは、閲覧者がコンテンツを見ているときに閲覧者のバイオメトリック測定を記録し、バイオメトリック測定を使用して閲覧者フィードバック信号を生成するように構成されたバイオメトリックセンサと、閲覧されたコンテンツのコンテンツメタデータ信号と、閲覧者フィードバック信号とを同期させ、コンテンツの各要素に対する閲覧者反応スコアを決定するために、コンテンツメタデータ信号の各要素と、閲覧者フィードバック信号のバイオメトリック測定とを関連付けるように構成された装置とを含む。
本発明の実施例に従ってコンテンツ要素に対する閲覧者の反応を決定するシステム及び装置のハイレベルのブロック図 本発明の実施例に従ってコンテンツメタデータと閲覧者フィードバック信号とを関連付ける方法のハイレベルのフローチャート 本発明の実施例に従って図2の方法を実施可能な関連付けブロックのハイレベルのブロック図 本発明の実施例に従って図3の関連付けブロック内で再サンプリングする処理のハイレベルの概略ブロック図 本発明の実施例に従ってコンテンツの要素に閲覧者の反応を関連付ける方法のフローチャート
本発明の教示は、添付図面と共に以下の詳細な説明を検討することにより、容易に理解できる。
有利なことに、本発明の実施例は、閲覧者へのコンテンツのターゲティング又は広告を支援するために使用され得る、コンテンツ要素に対する閲覧者の反応を決定する方法、装置及びシステムを提供する。本発明は、主に映画コンテンツに関して記載されるが、本発明の特定の実施例は、本発明の範囲を限定するものとして扱われるべきではない。本発明の概念は、有利なことに、同様の機能を有する如何なるデバイス内にも適用可能であり、実質的に如何なるコンテンツにも適用可能であることが、当業者に分かり、本発明の教示により導かれる。
図面に示す様々な要素の機能は、専用ハードウェアと、適切なソフトウェアと関連してソフトウェアを実行可能なハードウェアとの使用を通じて提供されてもよい。プロセッサにより提供される場合、機能は、単一の専用プロセッサ、単一の共用プロセッサ、又は複数の個々のプロセッサ(いくつかは共用されてもよい)により提供されてもよい。更に、“プロセッサ”又は“コントローラ”という用語の明示的な使用は、専らソフトウェアを実行可能なハードウェアを示すものとして解釈されるべきではなく、非限定的に、デジタルシグナルプロセッサ(DSP:digital signal processor)ハードウェア、ソフトウェアを格納する読み取り専用メモリ(ROM:read-only memory)、ランダムアクセスメモリ(RAM:random access memory)及び不揮発性記憶装置を暗示的に含んでもよい。更に、本発明の原理、態様及び実施例を記載するここでの全ての言及、並びにその特定の例は、構造的及び機能的な等価物を含むことを意図する。更に、このような等価物は、現在知られている等価物と、将来開発される等価物(すなわち、構造に拘わらず同じ機能を実行するように開発されたいずれかの要素)との双方を含むことを意図する。
従って、例えば、ここに提示するブロック図は、本発明の原理を具現した例示的なシステムコンポーネント及び/又は回路の概念図を表すことが、当業者により分かる。同様に、いずれかのフローチャート、フロー図、状態遷移図、擬似コード等は、コンピュータ読み取り可能媒体に実質的に表されて、コンピュータ又はプロセッサが明示的に示されていても示されていなくても、このようなコンピュータ又はプロセッサにより実行され得る様々な処理を表すことが分かる。
更に、添付図面に示す構成要素のシステムコンポーネント及び方法のいくつかはソフトウェアに実装されてもよいため、システムコンポーネント又は処理機能ブロックの間の実際の接続は、本発明の原理がプログラムされる方法に応じて異なってもよい。ここでの教示を前提として、当業者は本発明の原理のこれら及び同様の実装又は構成を検討することができる。
明細書において本発明の“一実施例”又は“実施例”への言及及びその他の変形は、実施例に関して記載した特定の機能、構造、特徴等が本発明の少なくとも1つの実施例に含まれることを意味する。従って、“一実施例では”又は“実施例では”という用語が表れること、及び明細書を通じて様々な場所に表れる他の変更は、必ずしも同じ実施例を示しているとは限らない。
簡潔には、本発明の様々な実施例によれば、閲覧者の反応をコンテンツの特定の要素に詳細に関連付けるために、詳細に定義されて測定された閲覧者フィードバック/反応データを、詳細に定義されたコンテンツメタデータに関連付ける方法及び装置が提供される。本発明の方法及び装置は、コンテンツの推奨及び広告の配置のようなコンテンツの使用の異なる側面をパーソナライズするアプリケーションを可能にし、コンテンツに対する閲覧者/視聴者の反応についてコンテンツ制作者に細かい分析を提供する。
図1は、本発明の実施例に従ってコンテンツ要素に対する閲覧者の反応を決定するシステムのハイレベルのブロック図を示している。図1のシステムは、少なくとも1つのプロセッサ12と、データ/記憶装置14と、少なくとも1つのメモリデバイス16とを例示的に含む装置10を含む。図1の装置10は、例示的に、データ同期ブロック22と、関連付けブロック26と、再サンプリングブロック32と、ランダム化ブロック40と、統計有意性ブロック38とを更に含む。図1のシステムは、装置10において使用するために、閲覧されたコンテンツに対する閲覧者の反応のバイオメトリック測定を取得するバイオメトリックセンサ20を更に含む。図1の装置10のプロセッサ12は、メモリを備えた複数のプロセッサ等を含んでもよい処理手段を構成する。図1は、装置10への入力としてコンテンツメタデータ信号18を更に示している。これは以下に更に詳細に説明する。図1では、データ同期ブロック22、関連付けブロック26、再サンプリングブロック32、ランダム化ブロック40及び統計有意性ブロック38はブロックとして示されているが、このような機能は、専用ハードウェアと、適切なソフトウェアと関連してソフトウェアを実行可能なハードウェア又はその等価物とを使用して実行されてもよい点に留意すべきである。同じことがここに提示される全ての図面に当てはまる。
図1の実施例のような本発明の様々な実施例では、バイオメトリックセンサは、様々な人間の反応を監視する。これらの監視される人間の反応のいくつかの例は、例えば、心拍数、皮膚コンダクタンス(skin conductance)、脳波測定データ等を含んでもよい。当業者は、本発明の意図した範囲を逸脱することなく、他のバイオメトリックセンサが実行されてもよいことを認識する。例えば、1つ以上のバイオメトリックセンサにより測定可能ないくつかの他の人間の動作は、体温、脳波活動、目の動き、瞳孔拡張等を含んでもよい。バイオメトリックセンサは、ここで説明するようにコンテンツメタデータで定義されたコンテンツの要素に対する閲覧者の反応の決定における様々な他の計算及び検討を実行するために使用される、閲覧されたコンテンツに対する閲覧者の反応のバイオメトリック測定の閲覧者フィードバック信号を提供する。以下に詳細に説明するこのような計算及び検討の例は、例えば、データ同期22、関連付け26、再サンプリング32、ランダム化40及び統計有意性38を含む。
図2は、本発明の実施例に従ってコンテンツメタデータと閲覧者フィードバックデータとを関連付ける処理のハイレベルの概略図を示している。図2の実施例では、閲覧者フィードバック信号19は、データ同期ブロック22においてコンテンツメタデータ信号18と同期する。本発明の一実施例では、閲覧者フィードバック信号は、生の形式でバイオメトリックセンサ20から収集されたデータポイント(バイオメトリック測定)の時系列を有する。本発明の別の実施例では、閲覧者フィードバック信号は、1つ以上の閲覧者フィードバック信号から計算された後処理された特徴を有する。生のバイオメトリックセンサデータの例は、心拍数、皮膚コンダクタンス及び脳波測定データを含む。後処理された特徴の例は、(例えば、雑音又は孤立したピークを除去するために)前述の生の信号のフィルタリングされたもの、及び複数の閲覧者からのデータの組み合わせ(例えば、映画セッションの時間帯を通じた映画館における視聴者からの平均心拍数)を含む。
本発明の様々な実施例では、コンテンツメタデータ信号18は、コンテンツの特定の特徴を記述すると共に、コンテンツから計算された時系列(スペクトル係数又は色ヒストグラムのようなオーディオ/ビデオ変数)、又は俳優が現れるコンテンツの位置及び/又はコンテンツにおける特定の物の出現及び/又はコンテンツにおける特定の位置の出現のようなコンテンツのハイレベルの特徴から計算された時系列を有する。当業者は、ほとんどのコンテンツがコンテンツメタデータと共に送信されるが、このようなコンテンツメタデータの詳細はコンテンツのプロバイダ又はコンテンツがだれに対して対象としているかに応じて変化する可能性があることを認識する。従って、本発明の実施例の方法、装置及びシステムは、コンテンツの特定の特徴を記述した時系列として構成されたコンテンツメタデータ信号と共に使用されることを意図する。例えば、本発明のコンテンツメタデータは、コンテンツのどのポイント/時間に俳優又は物が出現するか及び/又はコンテンツのどのポイント/時間に特定の位置が示されるかに関する情報を含んでもよい。しかし、ここでは、コンテンツメタデータ信号18がコンテンツの複数の特定の特徴を記述した複数の時系列を含んでもよいことが考えられる。
本発明の実施例では、2つの信号(すなわち、閲覧者フィードバック信号19及びコンテンツメタデータ18)がデータ同期ブロック22を使用して同期される。このことは、閲覧者フィードバック19及びコンテンツメタデータ18信号のタイムスタンプが同じ基準点を有して同期していることを確保する。本発明の一実施例では、このことは、映画又は他のマルチメディアコンテンツのようなコンテンツの開始後に生じた閲覧者フィードバック信号の第1のデータポイントを識別することにより実現されてもよい。データ同期ブロック22の出力は、同期した閲覧者フィードバック及びコンテンツメタデータ信号24の対である。
関連付けブロック26は、同期した信号24を受信し、閲覧者反応スコア28を計算する。閲覧者反応スコア28は、どのくらい閲覧者がコンテンツメタデータ信号により識別されたコンテンツ要素に対して反応したかを測定するために使用されてもよい。本発明の様々な実施例では、閲覧者反応スコア28は、ある範囲内の位置を示す数若しくは全体の割合、又は可能な出力の範囲の中で比較を示す他の形式のスコアを有してもよい。
図3は、本発明の実施例による関連付けブロック26のハイレベルのブロック図を示している。本発明の一実施例では、同期した閲覧者フィードバック信号及びコンテンツメタデータ信号24は、図3の関連付けブロック26の相関関数ブロック30及び再サンプリング法ブロック32に通信される。相関関数ブロック30は、相関値34を計算する。本発明の様々な実施例では、相関関数ブロック30は、2つの信号の間の単純な畳み込みを含む異なる関数を適用してもよい。信号が等しい大きさのベクトルとして表される場合、これは、2つのベクトルの間の内積に等しい。本発明の一実施例では、相関値34は、閲覧者の反応とコンテンツ信号との間の相関の大きさを示す実数である。しかし、閲覧者の反応の生のメトリックとして相関値34を解釈することにいくつかの課題が存在する。第1に、シーリング(sealing)の問題が存在する。相関関数30の値の範囲は、閲覧者及びコンテンツ信号の統計的特性に依存する可能性があるため、閲覧者の反応とコンテンツ信号との異なる対の相関値を比較することは不可能であることがある。第2に、所与の相関値が統計的に有意であるか否かを決定することは困難である可能性がある。例えば、明らかに大きい相関値は、単に入力信号のランダム性及び雑音の結果ではない。
本発明の実施例では、相関値34の統計的有意性を評価するために、閲覧者フィードバック及びコンテンツメタデータ信号は、再サンプリングブロック32に通信され、再サンプリングブロック32は、相関基礎分布(correlation baseline distribution)36の非パラメトリック推定値(non-parametric estimate)を計算する再サンプリング法を実行する。この基礎分布36を用いて、相関基礎分布値36が相関関数ブロック30において計算された基準相関値34を超える確率推定値を計算することにより、統計有意性テスト38が実行される。この確率推定値が小さいほど、観測された相関値が雑音により生じたものである可能性が低くなる。従って、閲覧者の反応及びコンテンツ信号が実際に相互に関連している可能性が高くなる。この値は、低い確率推定値が高い閲覧者反応スコアに対応し、その逆も同様であるように、統計有意性テスト38で生成された確率推定値の非増加関数を使用して閲覧者反応スコア28を計算するために使用される。
図4は、本発明の実施例に従って図3の関連付けブロック内で再サンプリングする処理のハイレベルの概略ブロック図を示している。同期した閲覧者フィードバック/コンテンツメタデータ信号24は、ランダム化されたコンテンツメタデータ信号24を出力するランダム化関数ブロック40に通信される。ランダム化関数ブロック40の目的は、閲覧者及びコンテンツ信号の間のいずれか既存の関連付けを壊すことである。これにより、相関関数が再評価される場合、基礎相関値44の推定値が取得される。本発明の様々な実施例では、ランダム化関数ブロック40は、信号におけるデータポイントのランダムな並び替え、又は循環的並び替え(固定数のデータポイントが信号の始めから除去され、信号の終わりに再び追加される)等を含む異なる方法で実施されてもよい。本発明の一実施例では、基礎相関値の全分布を推定するために、ランダム化関数ブロック40は、コンテンツメタデータの異なる並び替えをを生成するため、従って、相関値の異なる基礎値を生成するため、異なるランダムなシード値を使用して複数回適用されなければならない。このような実施例では、相関基礎分布36を推定するために、相関関数44により生成されたランダムな標本の経験的な累積分布(CDF:cumulative distribution function)がランダム化関数ブロック40の繰り返し反復の後に計算される。
本発明の概念は、例えば、パーソナライズされたサービス又は映画視聴者フィードバック分析のための閲覧者プロファイリングを含む様々な用途で使用されてもよい。パーソナライズされたサービス(例えば、推奨システム及びターゲティングされた広告)は、一般的には閲覧者の嗜好及びコンテンツの嗜好についてのデータを必要とする。例えば、閲覧者の反応が特定の俳優を含む映画又は所与の位置で撮影された映画に肯定的に反応することを推奨システムが認識した場合、このようなシステムは同様の特徴を有する他の映画を推奨してもよい。閲覧者が映画の異なる要素に反応する量の細かいスコアを取得することは、これらのパーソナライズされたサービスのためのより良い閲覧者プロファイルを可能にすることができる。
一実施例では、閲覧者フィードバック信号は、閲覧者が家で映画を見る間にバイオメトリックセンサを含む装着可能デバイスにより監視される。例えば、心拍数及び皮膚コンダクタンスは、例えばこのようなセンサを含む腕時計を使用して閲覧者の手首から都合よく測定されてもよい。閲覧者フィードバックデータは、パーソナライズサービスにより管理されるコントロールポイント(例えば、ホームゲートウェイ又はクラウド)に転送されて格納される。コントロールポイントは、コンテンツ内の異なる俳優、物及び位置の存在を含む細かいコンテンツメタデータ信号の予め計算されたデータベースを有する。
本発明の実施例に従って閲覧者フィードバック及びコンテンツメタデータ信号を関連付ける方法は、コントロールポイントに含まれる情報を使用して実行され、従って、コンテンツの各メタデータ信号(例えば、配役の各俳優等)の閲覧者反応スコアを割り当てる。コンテンツ(例えば、映画)からの各メタデータ信号は、各閲覧者反応スコアと共に閲覧者のプロファイルに追加される。
映画スタジオは、例えば映画の編集及びマーケティングについての決定を行うことに役立てるため、ポストプロダクション中に、また、例えば特定の映画の続編を作ること及び続編に含まれるものについての決定を行うことに役立てるため、映画がリリースされた後に、映画視聴者からのフィードバックを測定することに関心を有する。典型的には、この種類の閲覧者フィードバックテストは、映画館で配られたテキスト調査及び映画についてのソーシャルメディアのポストにおける感情分析のような明示的なフィードバック手段を通じて行われる。ここに記載するように本発明の実施例に従って細かい暗示的なフィードバックを使用して、映画スタジオは、映画のどのシーン及びどの要素が視聴者メンバの反応を引き起こしたかについての更に正確な情報を取得することができる。
映画のリリースの前のテスト上映において、スタジオは、映画のターゲットの人口統計のような基準に従って視聴者から参加者を選択する。本発明の実施例の適用において、バイオメトリックセンサを用いた装着可能なデバイスは、視聴参加者に配布されてもよく、任意選択で参加者はテキスト調査も与えられてもよい。上記のように、上映の後、バイオメトリックセンサデータは、各視聴参加者のバイオメトリックセンサから収集され、本発明のデバイスに通信される。閲覧者フィードバックデータは、視聴参加者の各反応の大きさを決定するために、コンテンツメタデータと関連付けられる。各閲覧者の反応スコアの計算に加えて、本発明によれば、映画に対する全体の視聴者の反応を測定するために、視聴者を通じた平均フィードバック信号のような閲覧者フィードバックの集計の指標が決定されてもよい。どのように反応が視聴参加者の年齢、グループ及び位置を通じて変化したかを識別するために、個々の閲覧者反応スコアもまた、視聴者からの人口統計と関連付けられてもよい。
有利なことに、本発明の実施例は、全体の映画又は他のマルチメディアコンテンツについての粗い形式のフィードバック(例えば、調査における星評価)を取得する代わりに、コンテンツの詳細な要素に対する閲覧者の反応を決定及び定量化するために使用されてもよい。
図5は、本発明の実施例に従ってコンテンツの要素に対する閲覧者の反応を決定する方法のフローチャートを示している。図5の方法500は、例示的に502において始まり、閲覧者フィードバック信号は、閲覧されたコンテンツに対する閲覧者の反応のバイオメトリック読み取り値を記録することにより生成される。より具体的には、前述のように、本発明の一実施例では、コンテンツの要素に対する閲覧者の反応を表す閲覧者フィードバック信号を生成するために、バイオメトリックセンサがコンテンツの閲覧者に取り付けられ、バイオメトリック測定がビデオコンテンツを見ている間に閲覧者から取得される。次に、方法500はステップ504に進む。
ステップ504において、閲覧者フィードバック信号は、閲覧されたコンテンツのコンテンツメタデータ信号と同期される。より具体的には、前述のように、コンテンツメタデータ信号は、コンテンツについて提供され、コンテンツメタデータは、俳優、物及び/又は位置のような特定の要素がコンテンツに現れる間のコンテンツの位置/時間を識別する。次に、方法500はステップ506に進む。
ステップ506において、閲覧者フィードバック信号のバイオメトリック測定は、コンテンツの各要素についての閲覧者反応スコアを決定するために、コンテンツメタデータ信号の各要素と関連付けられる。次に、方法500は終了してもよい。
コンテンツ要素に対する閲覧者の反応を決定するための方法、装置及びシステムの様々な実施例(これらは例示的であり限定的ではないことを意図する)について説明したが、前述の教示を鑑みて、変更及び変形が当業者により行われてもよい点に留意すべきである。従って、本発明の範囲及び要旨内にある開示された本発明の特定の実施例において変更が行われてもよいことが分かる。前述は本発明の様々な実施例を対象としているが、本発明の他の実施例及び更なる実施例は、この基本範囲を逸脱することなく考えられ得る。

Claims (18)

  1. コンテンツの要素に対する閲覧者の反応を決定するシステムであって、
    閲覧者が前記コンテンツを見ているときに前記閲覧者のバイオメトリック測定を記録し、前記バイオメトリック測定を使用して閲覧者フィードバック信号を生成するように構成されたバイオメトリックセンサと、
    閲覧されたコンテンツのコンテンツメタデータ信号と、前記閲覧者フィードバック信号とを同期させ、前記コンテンツの各要素に対する閲覧者反応スコアを決定するために、前記コンテンツメタデータ信号の各要素と、前記閲覧者フィードバック信号の前記バイオメトリック測定とを関連付けるように構成された装置と
    を有するシステム。
  2. 前記バイオメトリック測定は、前記閲覧者の心拍数、皮膚コンダクタンス及び脳波測定データのうち少なくとも1つを有する、請求項1に記載のシステム。
  3. 前記閲覧者フィードバック信号及びコンテンツメタデータ信号の同期は、前記閲覧者フィードバック信号及び前記コンテンツメタデータ信号のタイムスタンプを識別し、同じ基準点を有するように前記タイムスタンプを位置合わせすることを有する、請求項1に記載のシステム。
  4. 前記コンテンツメタデータ信号の各要素と前記閲覧者フィードバック信号の前記バイオメトリック測定との関連付けは、
    前記閲覧者フィードバック信号と前記コンテンツメタデータ信号との間の相関の大きさを示す相関値を計算し、
    前記閲覧者フィードバック信号及び前記コンテンツメタデータ信号の相関基礎分布値を計算し、
    前記相関値及び前記相関基礎分布値を使用して、前記閲覧者反応スコアを決定する統計有意性テストを実行することを有する、請求項1に記載のシステム。
  5. 前記相関基礎分布値の計算は、前記同期した閲覧者フィードバック信号及び前記コンテンツメタデータ信号を再サンプリングすることを有する、請求項4に記載のシステム。
  6. 前記同期した閲覧者フィードバック信号及び前記コンテンツメタデータ信号の再サンプリングは、
    i)前記閲覧者フィードバック信号と前記コンテンツメタデータ信号との間のいずれか既存の関連付けを壊すために、前記コンテンツメタデータ信号について、ランダム化されたコンテンツメタデータ信号を決定するランダム化関数を実行し、
    ii)前記ランダム化されたコンテンツメタデータ及び前記閲覧者フィードバック信号で相関関数を実行し、
    iii)前記ランダム化関数について異なるシード値を使用してステップi)及びii)を繰り返すことを有する、請求項5に記載のシステム。
  7. 前記再サンプリングは、前記相関基礎分布値の非パラメトリック推定値を生じる、請求項6に記載のシステム。
  8. コンテンツの要素に対する閲覧者の反応を決定する方法であって、
    閲覧されたコンテンツに対する閲覧者の反応のバイオメトリック測定を記録することにより、閲覧者フィードバック信号を生成するステップと、
    前記閲覧されたコンテンツのコンテンツメタデータ信号と、前記閲覧者フィードバック信号とを同期させるステップと、
    前記コンテンツの各要素に対する閲覧者反応スコアを決定するために、前記コンテンツメタデータ信号の各要素と、前記閲覧者フィードバック信号の前記バイオメトリック測定とを関連付けるステップと
    を有する方法。
  9. 閲覧者フィードバック信号を生成するステップは、バイオメトリックセンサを使用してコンテンツに対する閲覧者の反応を監視することを有する、請求項8に記載の方法。
  10. 前記閲覧者フィードバック信号は、前記閲覧者の心拍数、皮膚コンダクタンス及び脳波測定データのうち少なくとも1つのバイオメトリック測定を有する、請求項9に記載の方法。
  11. 前記同期させるステップは、前記閲覧者フィードバック信号及び前記コンテンツメタデータ信号のタイムスタンプを識別し、同じ基準点を有するように前記タイムスタンプを位置合わせすることを有する、請求項9に記載の方法。
  12. 前記関連付けるステップは、
    前記閲覧者フィードバック信号と前記コンテンツメタデータ信号との間の相関の大きさを示す相関値を計算し、
    前記閲覧者フィードバック信号及び前記コンテンツメタデータ信号の相関基礎分布値を計算し、
    前記相関値及び前記相関基礎分布値を使用して、前記閲覧者反応スコアを決定する統計有意性テストを実行することを有する、請求項8に記載の方法。
  13. 前記相関基礎分布の計算は、前記同期した閲覧者フィードバック信号及び前記コンテンツメタデータ信号を再サンプリングすることを有する、請求項12に記載の方法。
  14. 前記再サンプリングは、
    i)前記閲覧者フィードバック信号と前記コンテンツメタデータ信号との間のいずれか既存の関連付けを壊すために、前記コンテンツメタデータ信号について、ランダム化されたコンテンツメタデータ信号を決定するランダム化関数を実行し、
    ii)前記ランダム化されたコンテンツメタデータ及び前記閲覧者フィードバック信号で相関関数を実行し、
    iii)前記ランダム化関数について異なるシード値を使用してステップi)及びii)を繰り返すことを有する、請求項13に記載の方法。
  15. コンテンツの要素に対する閲覧者の反応を決定する装置であって、
    閲覧されたコンテンツのコンテンツメタデータ信号と、閲覧者フィードバック信号とを同期させるデータ同期手段と、
    前記コンテンツの各要素に対する閲覧者反応スコアを決定するために、前記コンテンツメタデータ信号の各要素と、前記閲覧者フィードバック信号のバイオメトリック測定とを関連付ける関連付け手段と
    を有する装置。
  16. i)前記閲覧者フィードバック信号と前記コンテンツメタデータ信号との間のいずれか既存の関連付けを壊すために、前記コンテンツメタデータ信号について、ランダム化されたコンテンツメタデータ信号を決定するランダム化関数を実行し、
    ii)前記ランダム化されたコンテンツメタデータ及び前記閲覧者フィードバック信号で相関関数を実行し、
    iii)前記ランダム化関数について異なるシード値を使用してステップi)及びii)を繰り返すように構成された再サンプリング手段を有する、請求項15に記載の装置。
  17. 前記閲覧者フィードバック信号と前記コンテンツメタデータ信号との間の相関の大きさを示す相関値を計算し、
    前記閲覧者フィードバック信号及び前記コンテンツメタデータ信号の相関基礎分布値を計算し、
    前記相関値及び前記相関基礎分布値を使用して、前記閲覧者反応スコアを決定する統計有意性テストを実行するように構成された統計有意性手段を有する、請求項15に記載の装置。
  18. 前記データ同期手段は、前記閲覧者フィードバック信号及び前記コンテンツメタデータ信号のタイムスタンプを識別し、同じ基準点を有するように前記タイムスタンプを位置合わせする、請求項15に記載の装置。
JP2015517422A 2012-06-14 2013-06-13 コンテンツ要素に対する閲覧者の反応を決定する方法、装置及びシステム Withdrawn JP2015528226A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261659756P 2012-06-14 2012-06-14
US61/659,756 2012-06-14
PCT/US2013/045639 WO2013188656A1 (en) 2012-06-14 2013-06-13 Method, apparatus and system for determining viewer reaction to content elements

Publications (2)

Publication Number Publication Date
JP2015528226A true JP2015528226A (ja) 2015-09-24
JP2015528226A5 JP2015528226A5 (ja) 2016-07-28

Family

ID=48699973

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015517422A Withdrawn JP2015528226A (ja) 2012-06-14 2013-06-13 コンテンツ要素に対する閲覧者の反応を決定する方法、装置及びシステム

Country Status (7)

Country Link
US (1) US20150143392A1 (ja)
EP (1) EP2862361A1 (ja)
JP (1) JP2015528226A (ja)
KR (1) KR20150021039A (ja)
CN (1) CN104769954A (ja)
BR (1) BR112014031288A2 (ja)
WO (1) WO2013188656A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021177362A (ja) * 2020-05-08 2021-11-11 ヤフー株式会社 情報処理装置、情報処理方法、情報処理プログラム及び端末装置

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9998789B1 (en) * 2012-07-27 2018-06-12 Dp Technologies, Inc. Audience interaction system
US10542315B2 (en) * 2015-11-11 2020-01-21 At&T Intellectual Property I, L.P. Method and apparatus for content adaptation based on audience monitoring
US9525912B1 (en) * 2015-11-20 2016-12-20 Rovi Guides, Inc. Systems and methods for selectively triggering a biometric instrument to take measurements relevant to presently consumed media
US10142702B2 (en) * 2015-11-30 2018-11-27 International Business Machines Corporation System and method for dynamic advertisements driven by real-time user reaction based AB testing and consequent video branching
CN105554531A (zh) * 2015-12-16 2016-05-04 江苏惠通集团有限责任公司 媒体内容推送方法及系统
US11146865B2 (en) 2016-03-03 2021-10-12 Comcast Cable Communications, Llc Determining points of interest in a content item
US10311918B1 (en) 2016-04-19 2019-06-04 Space Projects Ltd. System, media, and method for synchronization of independent sensors and recording devices
WO2018018595A1 (zh) * 2016-07-29 2018-02-01 王晓光 具有响应操作的视频文件的统计方法及系统
WO2018018592A1 (zh) * 2016-07-29 2018-02-01 王晓光 视频广告的用户观看数据统计方法及系统
WO2018023341A1 (zh) * 2016-08-01 2018-02-08 王晓光 基于视频广告的观看人数统计方法及系统
WO2018023342A1 (zh) * 2016-08-01 2018-02-08 王晓光 观看次数在视频广告中的统计方法及系统
US10798451B2 (en) * 2017-02-24 2020-10-06 Rovi Guides, Inc. Systems and methods for detecting a reaction by a user to a media asset to which the user previously reacted at an earlier time, and recommending a second media asset to the user consumed during a range of times adjacent to the earlier time
US10158919B1 (en) 2017-12-21 2018-12-18 Rovi Guides, Inc. Systems and methods for dynamically enabling and disabling a biometric device
CN109961303B (zh) * 2017-12-22 2021-09-21 新华网股份有限公司 一种比较观众反应的方法和装置
CN110062283A (zh) * 2018-01-18 2019-07-26 深圳光峰科技股份有限公司 一种播放影片的方法、影片播放机及影片服务器
GB201809388D0 (en) * 2018-06-07 2018-07-25 Realeyes Oue Computer-Implemented System And Method For Determining Attentiveness of User
US11373213B2 (en) 2019-06-10 2022-06-28 International Business Machines Corporation Distribution of promotional content based on reaction capture
US11496802B2 (en) 2019-11-29 2022-11-08 International Business Machines Corporation Media stream delivery
DE102020123554A1 (de) 2020-09-09 2022-03-10 Imagine AG Prüfung eines Filmvorprodukts
CN113221850B (zh) * 2021-06-09 2023-02-03 上海外国语大学 基于观众特征、LPP和θ波的影视剧演员选取方法
WO2023278586A1 (en) * 2021-06-30 2023-01-05 Screen Engine/ASI, LLC System and method for facilitating a virtual screening

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6211919B1 (en) * 1997-03-28 2001-04-03 Tektronix, Inc. Transparent embedment of data in a video signal
US6134531A (en) * 1997-09-24 2000-10-17 Digital Equipment Corporation Method and apparatus for correlating real-time audience feedback with segments of broadcast programs
CA2364425A1 (en) * 2001-12-05 2003-06-05 Algorithmics International Corp. A system for calculation of operational risk capital
US6928472B1 (en) * 2002-07-23 2005-08-09 Network Physics Method for correlating congestion to performance metrics in internet traffic
US8230457B2 (en) * 2007-03-07 2012-07-24 The Nielsen Company (Us), Llc. Method and system for using coherence of biological responses as a measure of performance of a media
US20080295126A1 (en) * 2007-03-06 2008-11-27 Lee Hans C Method And System For Creating An Aggregated View Of User Response Over Time-Variant Media Using Physiological Data
US8782681B2 (en) * 2007-03-08 2014-07-15 The Nielsen Company (Us), Llc Method and system for rating media and events in media based on physiological data
US7889073B2 (en) * 2008-01-31 2011-02-15 Sony Computer Entertainment America Llc Laugh detector and system and method for tracking an emotional response to a media presentation
KR101554159B1 (ko) * 2008-10-08 2015-09-21 삼성전자주식회사 데이터 저장 장치 및 이를 포함하는 데이터 저장 시스템

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021177362A (ja) * 2020-05-08 2021-11-11 ヤフー株式会社 情報処理装置、情報処理方法、情報処理プログラム及び端末装置
JP7260505B2 (ja) 2020-05-08 2023-04-18 ヤフー株式会社 情報処理装置、情報処理方法、情報処理プログラム及び端末装置

Also Published As

Publication number Publication date
WO2013188656A1 (en) 2013-12-19
US20150143392A1 (en) 2015-05-21
EP2862361A1 (en) 2015-04-22
CN104769954A (zh) 2015-07-08
KR20150021039A (ko) 2015-02-27
BR112014031288A2 (pt) 2017-06-27

Similar Documents

Publication Publication Date Title
JP2015528226A (ja) コンテンツ要素に対する閲覧者の反応を決定する方法、装置及びシステム
US9536329B2 (en) Method and apparatus for performing sentiment analysis based on user reactions to displayable content
US10839350B2 (en) Method and system for predicting audience viewing behavior
Sinno et al. Large-scale study of perceptual video quality
JP7018312B2 (ja) ウェブベースのコンテンツとの対話中におけるコンピュータユーザデータの収集および処理方法
JP6338456B2 (ja) ユーザの感情に基づいてコンテンツをレコメンドする装置、プログラム及び方法
US8296172B2 (en) Method and system for determining audience response to a sensory stimulus
US20150020086A1 (en) Systems and methods for obtaining user feedback to media content
US20140137144A1 (en) System and method for measuring and analyzing audience reactions to video
US20080189733A1 (en) Content rating systems and methods
US20120072936A1 (en) Automatic Customized Advertisement Generation System
CN106604050A (zh) 一种直播视频的评估方法及装置
US20140325542A1 (en) System and method for providing a dataset of annotations corresponding to portions of a content item
US10638197B2 (en) System and method for segment relevance detection for digital content using multimodal correlations
US8832721B2 (en) Video efficacy measurement
CN108319643A (zh) 多媒体信息的评测方法和系统
JP2013218638A (ja) コンテンツ配信システムおよびリコメンド方法
US10390096B2 (en) Collecting media consumer data
So et al. Between-subject correlation of heart rate variability predicts movie preferences
Liu et al. Frame rate and perceptual quality for HD video
Donley et al. Analysing the Quality of Experience of multisensory media from measurements of physiological responses
Oh et al. Viewer engagement in movie trailers and box office revenue
Guillotel et al. On the Fly User's Emotion Capture
EP2824630A1 (en) Systems and methods for obtaining user feedback to media content
KR101380963B1 (ko) 관련 정보 제공 시스템 및 제공 방법

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160609

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160609

A761 Written withdrawal of application

Free format text: JAPANESE INTERMEDIATE CODE: A761

Effective date: 20170324