JP4208614B2

JP4208614B2 - 映像コンテンツの評価装置

Info

Publication number: JP4208614B2
Application number: JP2003072010A
Authority: JP
Inventors: 隆史河合; 哲理井上; 裕代大和久; 剛花村
Original assignee: 亀山渉
Priority date: 2003-03-17
Filing date: 2003-03-17
Publication date: 2009-01-14
Anticipated expiration: 2023-03-17
Also published as: JP2004282471A

Description

【０００１】
【発明の属する技術分野】
本発明は、映像コンテンツの評価装置に関し、さらに詳しく言えば、ディスプレイに所定の映像を呈示し、その映像を観察している被検者の生理反応の一つである眼球運動に基づいて映像コンテンツを評価する技術に関するものである。
【０００２】
【従来の技術】
テレビ放送を例にして説明すると、現在のところ、そのコンテンツ（番組）の評価はもっぱら視聴率に頼っている。視聴率は、契約したモニタ宅に測定器を設置し、そのモニタ宅で特定の時間帯に選択されたテレビチャンネルを集計することにより得られる。
【０００３】
しかしながら、視聴率だけでは、テレビチャンネルを合わせたとしても、その人が実際に視聴したかどうか、また、視聴したとしてもどのような感じを受けたかといった問題に対する回答は得られない。加えて、信頼性を向上させるには、莫大な被検者数が必要とされる。
【０００４】
そればかりでなく、インターネットに代表されるブロードバンド（高速大容量通信）などにより配信されるコンテンツについては、視聴率を測定すること自体がきわめて困難であり、従来の評価技術では、こういった新たなメディアによるコンテンツには、ほとんど対応することができない。
【０００５】
これとは別に、視聴覚刺激の生体反応に与える影響の研究は、心理学，生理学，人間工学などの各分野で広く行われており、興味や関心，情動それに操作性などを生体反応を指標として評価する手法は、すでに確立されている。
【０００６】
しかしながら、これらの手法による評価実験の立案・実施および解析などの一連の作業は、高度の専門知識が必要とされることから、一般人が行うことは困難で、現在のところ専門家に委ねなければならないのが実情である。
【０００７】
また、生体反応を測定するにしても、被検者にセンサやマーカなどを装着するようにしているため、その場の雰囲気により被検者に緊張感などの特定の意識を抱かせることがあり、評価の信頼性が損なわれるおそれがある。
【０００８】
さらに、生理反応を指標とした評価を行う場合、従来では、刺激呈示装置，生体反応の測定装置および解析装置といった複数の装置を別々に用意する必要があり、使用に際しては各装置に関する専門的な知識も要求される。このようなことが、生理反応を指標とした評価から一般人を遠ざけている。
【０００９】
【発明が解決しようとする課題】
したがって、本発明の課題は、評価対象である映像コンテンツの呈示から、それによる生体反応の測定，解析，評価指標の可視化に至る諸機能を１台の装置に集約して、解析処理を自動化し、かつ、簡易なユーザーインタフェイスを付加することにより、専門家の評価手法を広く一般に利用できるようにすることにある。
【００１０】
【課題を解決するための手段】
本発明は、被検者に対して評価すべき映像（刺激映像）を呈示し、その生理反応の一つである眼球運動を測定，解析するもので、特にブロードバンドコンテンツの評価に好適である。
【００１１】
具体的には、被検者に自然な姿勢でのコンテンツの視聴を求め、その際の興味の度合いを瞬目頻度の変化から、情動の変化を自律神経系反応である瞳孔反応から、それぞれ評価する。また、双方向性を備えたコンテンツにおいては、その操作性を視線運動の運動パターンの変化から評価する。
【００１２】
その根拠として、まず、人間の興味を反映する指標では、生理心理学の分野において、瞬目の変化が知られている。すなわち、興味ある対象を視聴している際には瞬目回数は減少し、その前後に増加する。次に、情動の変化は、自律神経系との深い関わりがあり、簡易に測定できる指標としては、瞳孔反応が知られている。さらに、ユーザーインタフェースの操作性の客観評価では、人間工学の分野において、視線運動の軌跡および視点の停留時間を手がかりに分析される場合が多い。
【００１３】
本発明は、上記の知見に基づいてなされたもので、ディスプレイに所定の映像を呈示し、その映像を観察している被検者の生理反応を検出して、その検出データに基づいて上記映像コンテンツを評価するにあたって、評価すべき映像としての刺激映像を上記ディスプレイに呈示する映像呈示手段と、上記刺激映像を観察中の被検者の眼球反応を撮像する撮像手段と、上記映像呈示手段および上記撮像手段を同期的に制御する制御手段とを含み、上記制御手段は、上記撮像手段により得られた眼球画像信号を２値化処理して所定の眼球運動データを得るとともに、上記制御手段が備える表示手段に時間軸を設定し、その時間軸上に、上記刺激映像と、それに対応する上記眼球運動データとを併せて表示することを特徴としている。
【００１４】
これによれば、まず、被検者に測定用センサやマーカを装着する必要がないため、測定に伴う被検者の負担が軽減され、自然な視聴での反応データの取得が期待される。次に、刺激映像の呈示から測定，解析および表示までの各機能が１台の装置に集約されているため、特に高度な専門知識を必要とすることなく、映像コンテンツの評価を行うことができる。
【００１５】
例えば、ブロードバンドにて映像を配信する場合、情報量の多い高解像度の映像と、情報量の少ない低解像度の映像とを用意し、その各映像を同一の被検者に別々に視聴してもらい眼球運動データを得る。その結果、眼球運動データにさほどの違いがなければ、わざわざ情報量の多い高解像度映像を配信する必要がなく、情報量の少ない低解像度映像を配信すればよいことが分かる。同様にして、例えば商品広告の映像などについても、その複数案の中から、最適とされる広告映像を選択することができる。
【００１６】
また、動画コンテンツについては、被検者の瞬目の発生頻度を測定，解析することにより、呈示した動画コンテンツの中から、どのコンテンツが興味を持たれたか、どのコンテンツがあまり関心を抱かれなかったか、などを評価することができる。
【００１７】
また、ブロードバンドやデジタル放送時代における一種のテレビゲームに近い双方向性を備えたコンテンツについては、被検者（操作者）の視線運動や瞳孔面積の時系列変化を測定することにより、被検者の注視箇所および自律系反応の変化から、その操作性や情動の変化を推測ないし評価することができる。
【００１８】
本発明により得る眼球運動データには、瞬目発生頻度，瞳孔面積および視線運動の３つが含まれることが好ましいが、本発明は、そのうちのいずれか一つのみのデータを得る場合を排除するものではない。例えば、瞬目発生頻度のみを測定してもよい。
【００１９】
撮像手段については、例えば瞬目発生頻度のみを測定するのであれば、通常のカメラを使用してもよいが、瞳孔面積や視線運動を測定するには、赤外線カメラが好ましく採用される。赤外線カメラによれば、虹彩に写り込んだ外部映像を排除した高コントラスト画像が得られるため、画像処理およびデータ解析を安定かつ高速に実行することができる。
【００２０】
また、測定前の準備作業として、あらかじめ被検者に呈示する刺激映像が編集されるが、その刺激映像を映像呈示手段より所定の順序でディスプレイに呈示する際、順序効果を排除するため、本発明では、刺激映像の呈示順序モードの一つとしてランダム呈示モードを備えている。
【００２１】
また、被検者に刺激画像を呈示するに先立って、ディスプレイに上下左右に移動する視標を含む動画を呈示し、その際の被検者の眼球運動を撮像手段により撮像し、これらのデータに基づいて座標系を設定するキャリブレーションを実行することが好ましい。
【００２２】
本発明によれば、同一時間軸上に刺激映像と、それに対応する眼球運動データとが併せて表示されるが、眼球運動の前後関係を知るうえで、複数の刺激映像ないし眼球運動データが時系列的に表示され、しかも所定期間にわたってスクロール可能であることが好ましい。
【００２３】
また、評価の解析により高い信頼性を持たせるため、本発明によれば、眼球運動データから被検者の注視点位置を算出し、その注視点を刺激画像にスーパーインポーズして表示手段に表示させることもできる。
【００２４】
【発明の実施の形態】
次に、図面を参照しながら、本発明の実施形態について説明するが、本発明はこれに限定されるものではない。
【００２５】
図１に示すように、この映像コンテンツの評価装置は、その基本的な構成要素として、刺激映像呈示用のディスプレイ１００と、被検者Ｐの眼球を撮像するカメラ２００と、制御手段３００およびその表示手段としてのモニタ画面４００とを備えている。
【００２６】
刺激映像呈示用のディスプレイ１００は、通常のブラウン管受像器のほかにプロジェクタのスクリーン画面それに液晶表示パネルなどを使用できる。カメラ２００は、赤外線ランプ２１０を備えた赤外線カメラであることが好ましく、この例では、赤外線カメラとして説明する。
【００２７】
一例として、赤外線カメラ２００は被検者Ｐから５０〜１００ｃｍほど離れた位置において、被検者Ｐの眼球を撮像するようにスタンドなどを用いてセットされる。なお、被検者Ｐの頭部の位置を特定するため顎台２２０を用意することが好ましい。これとは別に、ヘッドセットを用いて赤外線カメラ２００を被検者Ｐの頭部に装着させることも可能である。
【００２８】
制御手段３００は、ディスプレイ１００に対する刺激映像の出力，赤外線カメラ２００からの眼球画像の取り込みを同期して行うとともに、データ解析およびモニタ表示などを行う。この制御手段３００は、パーソナルコンピュータ（パソコン）クラスのものであってよい。
【００２９】
本発明によると、映像コンテンツの評価を行うため、次の（１）〜（５）の各ステップが実行される。
（１）プロジェクトの設定；
測定に関するデータ入力，データ保存用フォルダの作成。
（２）刺激フェーズ；
呈示動画像データの選択，呈示時間，呈示順序の設定など。
（３）測定フェーズ；
動画像の出力，眼球画像列の取り込みなど。
（４）解析フェーズ；
眼球画像列からの瞬目回数，眼球運動，瞳孔面積の変化の計測，表示など。
（５）表現フェーズ；
瞬目回数，眼球運動，瞳孔面積変化データから各種評価値の算出・表示など。
【００３０】
以下、各ステップを順を追って説明する。まず、（１）プロジェクトの設定では、本発明のアプリケーションを起動すると、モニタ画面４００に図２に示すようなプロジェクト設定ダイアログ４１０が表示され、ここでユーザは例えば測定名，測定日時，被検者名などの各種の情報を入力する。
【００３１】
なお、「読み込み」ボタンをクリックすることにより、ファイル選択ダイアログが表示され、そこから前回行った既存のプロジェクトを選択して読み込むこともできる。この場合には、前回までに行った処理の各種データが以降のフェーズに反映される。「ＯＫ」ボタンをクリックすると、プロジェクト用フォルダが作成され、同フォルダへの測定ファイルの保存が行われ、次の刺激フェーズに移る。
【００３２】
（２）刺激フェーズでは、測定時に表示する刺激映像の選択および呈示順序などの設定を行う。図３（ａ）に刺激フェーズでの概略的なフローチャートを示し、図３（ｂ）に刺激フェーズでのグラフィックユーザインタフェイス（ＧＵＩ）画面４２０を示す。
【００３３】
この刺激フェーズ用ＧＵＩ画面４２０は、上部欄にあるフェーズ選択用タグの「刺激フェーズ」タグをクリックすることにより開かれる。次に、刺激選択用ボタンのうちの「読み込み」ボタン４２２をクリックして、ダイアログボックスで読み込み対象ファイルを選択する。選択された刺激映像は刺激情報表示部４２４に表示される。
【００３４】
この例では、ＧＵＩ画面４２０内に４つの刺激情報表示部４２４がペイン（ｐａｎｅ；ウィンドウ）形式で設定され、その各々に「読み込み」ボタン４２２にて選択された刺激映像（動画像）ファイルが割り当てられる。なお、不要なファイルを選択した場合には、刺激選択用ボタンのうちの「削除」ボタン４２３をクリックして除去すればよい。
【００３５】
各刺激情報表示部４２４内には、「再生」ボタン４２５ａおよび「停止」ボタン４２５ｂを含むプレビュー画面４２５のほかに、ファイル情報表示部４２６と呈示順序選択部４２７とが用意されている。「再生」ボタン４２５ａをクリックすることにより、出力する動画をプレビューすることができる。
【００３６】
ファイル情報表示部４２６には、ファイル名，呈示時間，解像度，ファイルサイズなどが表示される。呈示順序選択部４２７は、動画データの出力順序を指定する箇所で、プルダウンメニューにより「数値」指定と「ランダム」指定とが表示される。決められた順序で出力したい場合には「数値」指定を選択して、その並び順を指定する。順序効果を排除したい場合には、「ランダム」指定を選択すればよい。
【００３７】
ＧＵＩ画面４２０の下欄には、総呈示時間表示部４２８とインターバル時間指定部４２９とが設けられている。インターバル時間指定部４２９は、各動画像呈示後に挿入する例えば黒画面の表示時間を設定する部分で、デフォルトは０である。総呈示時間表示部４２８には、各動画データ再生時間と、動画データ間の各インターバル時間の合計時間が表示される。
【００３８】
刺激フェーズが終了したら、フェーズ選択用タグの「測定フェーズ」タグをクリックして、（３）測定フェーズに移る。図４（ａ）に、この測定フェーズで使用する測定フェーズ用ＧＵＩ画面４３０を示す。
【００３９】
測定フェーズ用ＧＵＩ画面４３０には、「キャリブレーション」ボタン４３１，「測定開始」ボタン４３２および「測定キャンセル」ボタン４３３を含む測定操作用ボタンが設けられており、また、画像表示部として、刺激画像表示部４３４と測定画像表示部４３５とがペイン形式で用意されている。
【００４０】
なお、刺激画像表示部４３４には、「ファイル名」表示と「呈示時間」表示のための表示フィールド４３４ａが含まれており、また、測定画像表示部４３５には、「測定時間」表示と「残り時間」表示のための表示フィールド４３５ａが含まれている。
【００４１】
この測定フェーズでは、まず、「キャリブレーション」ボタン４３１をクリックしてキャリブレーションを実行する。このキャリブレーションでは、被検者Ｐに上下左右に移動する視標が記録された動画ファイルをディスプレイ１００上に呈示し、その際の被検者Ｐの眼球運動を測定する。このとき、動画ファイルは刺激画像表示部４３４に表示され、また、眼球運動は測定画像表示部４３５に表示される。
【００４２】
測定終了後に、データ処理が自動的に行われ、例えば視標が動いた範囲とそれに追随する眼球運動の範囲とから測定時の座標系が決められる。このキャリブレーションは測定ごとに実行される。参考として、図４（ｂ）にキャリブレーションの概略的なフローチャートを示す。なお、キャリブレーション用動画ファイルは、あらかじめ制御手段３００の所定の領域にインストールされているが、ユーザは必要に応じて、そのキャリブレーション用動画ファイルを差し替えることができるようにしてもよい。
【００４３】
キャリブレーション終了後、「測定開始」ボタン４３２をクリックすることにより、実際の測定が開始される。この測定時には、上記（２）の刺激フェーズで設定された刺激画像がディスプレイ１００に表示されるとともに、その刺激画像と赤外線カメラ２００で撮像された被検者Ｐの眼球画像とが、刺激画像表示部４３４と測定画像表示部４３５とにそれぞれリアルタイムで表示される。
【００４４】
また、一方の表示フィールド４３４ａには、刺激画像のファイル名と呈示時間が表示され、他方の表示フィールド４３５ａには、測定時間と刺激画像の総呈示時間に対する残存時間が表示される。
【００４５】
測定開始後は、刺激画像がすべて呈示されるまで測定が継続され、刺激画像の呈示終了と同期して自動的に測定も終了する。なお、なんらかの理由によって、測定を途中で終了したい場合には、「測定キャンセル」ボタン４３３をクリックする。測定した眼球運動の動画ファィル（測定データ）は、プロジェクト用ディリクトリ下に所定のファイル名で格納される。
【００４６】
測定フェーズが終了したら、フェーズ選択用タグの「解析フェーズ」タグをクリックして、（４）解析フェーズに移る。この解析フェーズでは、測定された眼球画像列データとキャリブレーションデータとから、視線位置（水平，垂直），瞳孔面積，瞬目を自動的に計測し、時間波形変化として表示する。また、異常値データがある場合には、その修正・削除を手動で行うことができる。図５（ａ）に、この解析フェーズの大まかなフローチャートを示し、図５（ｂ）に、ここで使用する解析フェーズ用ＧＵＩ画面４４０を示す。
【００４７】
この解析フェーズ用ＧＵＩ画面４４０には、マーカ選択用ボタンとして、「眼球運動用マーカ」ボタン４４１ａ，「瞳孔面積用マーカ」ボタン４４１ｂおよび「瞬目判定用マーカ」ボタン４４１ｃの３つのボタンが設けられている。これらのマーカはデータ修正時に使用する。その下に画面の横軸を時間軸として、その時間軸に沿って「フレーム選択用」ボタン４４２と、「タイムコード表示」フィールド４４３とが設けられている。
【００４８】
また、表示部として、刺激画像表示部４４４，測定画像表示部４４５，水平眼球運動表示部４４６ａ，垂直眼球運動表示部４４６ｂ，瞳孔面積表示部４４７および瞬目発生頻度表示部４４８の６つのウィンドウが時間軸に沿って平行に設定されている。また、画面の一番下には水平スクロールバー４４９が設けられている。
【００４９】
各表示部について説明すると、刺激画像表示部４４４には、ディスプレイ１００に表示されたのと同じ刺激画像（動画像）の各フレームが時系列に表示される。なお、刺激画像ファイルの形式がＭＰＥＧ（ＭｏｔｉｏｎＰｉｃｔｕｒｅｓＥｘｐｅｒｔｓＧｒｏｕｐ）の場合には、ＭＰＥＧの輝度ベクトルまたは動きベクトルも選択的に表示される。
【００５０】
測定画像表示部４４５には、測定された眼球運動画像の各フレームが時系列に表示される。水平眼球運動表示部４４６ａには、上記眼球運動画像から計測された眼球中心の位置の水平方向の変化が時間関数波形として表示され、また、垂直眼球運動表示部４４６ｂには、上記眼球中心の位置の垂直方向の変化が時間関数波形として表示される。
【００５１】
瞳孔面積表示部４４７には、上記眼球運動画像から計測された眼球瞳孔の面積変化が時間関数波形として表示され、瞬目発生頻度表示部４４８には、上記眼球運動画像から計測された瞬目発生頻度が時間関数波形として表示される。
【００５２】
なお、瞳孔面積表示部４４７および瞬目発生頻度表示部４４８については、その表示形態を波形ではなく、図形や数値表示としてもよい。また、いずれの表示部も、水平スクロールバー４４９を操作することにより、全フレームを閲覧することができる。
【００５３】
異常値データがある場合には、次のようにして補正できる。例えば、眼球運動データの第３フレーム目にどう見ても不自然なところがある場合には、「眼球運動用マーカ」ボタン４４１ａをクリックし、引き続いて「フレーム選択用」ボタン４４２の第３フレームボタンをクリックすると、水平眼球運動表示部４４６ａと垂直眼球運動表示部４４６ｂの第３フレーム目にマーカ（図示省略）が現れ、そのマーカが示す位置のデータを修正もしくは削除することができる。
【００５４】
同様にして、瞳孔面積データの修正には「瞳孔面積用マーカ」ボタン４４１ｂをクリックし，また、瞬目頻度データの修正には「瞬目判定用マーカ」ボタン４４１ｃをクリックすることにより、各データを修正もしくは削除することができる。
【００５５】
次に、この解析フェーズにおいて、制御手段３００が行うデータ処理について図６を参照して説明する。制御手段３００は、赤外線カメラ２００にて撮像された眼球画像列データの１フレームごとに、眼球中心位置，瞳孔面積および瞬目判定を行う。
【００５６】
なお、眼球中心位置については、キャリブレーションデータを用いて、画像位置→視線方向の変換を行う。キャリブレーションデータは、先にも説明したように、上下左右に移動する視標位置と、それを追って見る視線方向（単位；角度）との対応を示すデータである。
【００５７】
この解析フェーズでのデータ処理手順として、制御手段３００は、まずステップＳＴ１として、眼球運動画像を１フレーム単位（この例では、８ビットのモノクロ）で読み込む。
【００５８】
そして、ステップＳＴ２で、その１フレームの画像全体に２値化処理を施したのち、ステップＳＴ３で、画像中の眼球の周りに設定された計測用ウィンドウＷ内の瞳孔部分（黒領域）の面積を求める。なお、計測用ウィンドウＷは、上記測定フェーズの最初の段階で、初期フレームのみに手動により設定されたものである。
【００５９】
このようにして、瞳孔面積を求めたのち、ステップＳＴ４ａ，ＳＴ４ｂを実行する。すなわち、ステップＳＴ４ａでは、瞳孔面積と所定の閾値とを比較し、瞳孔面積が閾値以下であれば瞬目と判定する。
【００６０】
また、ステップＳＴ４ｂでは、例えばテンプレートマッチングにより円を抽出して、瞳孔の中心位置（ｘ，ｙ）を求め、上記キャリブレーションデータを用いて、その中心の水平方向および垂直方向の各位置を視線位置に変換する。
【００６１】
そして、次のフレームを読み込み、そのフレームの眼球中心に合わせて計測用ウィンドウＷを移動させたのち、上記ステップＳＴ１〜ＳＴ４を実行し、これを最終フレームまで繰り返す。
【００６２】
解析フェーズが終了したら、フェーズ選択用タグの「表現フェーズ」タグをクリックして、（５）表現フェーズに移る。この表現フェーズでは、解析フェーズで計測された眼球（視線）運動の時間変化データから各フレームごとに注視点データを算出し、その注視点を被検者に呈示した刺激画像にスーパーインポーズして表現する。
【００６３】
また、眼球運動，瞳孔面積，瞬目発生頻度の時間変化データから瞬目回数，瞳孔径変化，反応時間，眼球移動速度，眼球停留時間，停留回数およびその場所を算出し、ユーザの求めに応じて表示する。図７（ａ）に、この表現フェーズでの大まかなフローチャートを示し、図７（ｂ）に、この表現フェーズ用ＧＵＩ画面４５０を示す。
【００６４】
この表現フェーズ用ＧＵＩ画面４５０には、被検者に呈示した刺激画像を表示する刺激画像表示部４５１と、解析フェーズで計測された各データをグラフとして表示するグラフ表示部４５５の２つのウィンドウが設けられている。
【００６５】
刺激画像表示部４５１に関連して、「注視点表示／消去」ボタン４５２ａ，「デュレーション」指示部４５２ｂ，「タイムコード」表示部４５３ａおよび「画像保存」ボタン４５３ｂが設けられている。
【００６６】
「注視点表示／消去」ボタン４５２ａは二者択一式のトグルスイッチで、「注視点表示」側を選択し、「デュレーション」指示部４５２ｂで、例えば１〜１０フレームまでのように、その表示フレームの範囲を指定すると、眼球運動データから各フレームごとに算出された注視点が刺激画像にスーパーインポースされた状態で、刺激画像表示部４５１に表示される。
【００６７】
この例において、刺激画像表示部４５１に表示される刺激画像は、指定された先頭のフレームの固定画像であり、この画像内にその他のフレームの各注視点が眼の動きを追うように線で結ばれた分布状態で表示される。「タイムコード」表示部４５３ａには、表示されている刺激画像のタイムコードが表示され、「画像保存」ボタン４５３ｂをクリックすることにより、表示されているスーパーインポース画像が所定のファイルに保存される。
【００６８】
グラフ表示部４５５については、「眼球運動」表示ボタン４５６ａ，「瞳孔面積」表示ボタン４５６ｂおよび「瞬目頻度」表示ボタン４５６ｃを含む表現データ選択部４５６と、グラフ表示するデータの時間範囲（ＩＮとＯＵＴ）を指定するスライダ４５７と、その表示範囲の先頭データのタイムコードを表示するタイムコード表示部４５７ａと、「眼球運動」保存ボタン４５８ａ，「瞳孔面積」保存ボタン４５８ｂおよび「瞬目頻度」保存ボタン４５８ｃを含む「データ」保存ボタン４５８が設けられている。
【００６９】
表現データ選択部４５６のうちの例えば「眼球運動」表示ボタン４５６ａをクリックすると、先に説明した図５（ｂ）のＧＵＩ画面４４０と同じく、そのデータがグラフ表示部４５５に時間変化波形として表示される。その時間範囲（表示範囲）はスライダ４５７で指定する。また、複数表示が可能で、例えば眼球運動と瞳孔面積とを同時に表示させることができる。
【００７０】
また、グラフ表示部４５５に表示されているデータを保存したい場合には、「データ」保存ボタン４５８内のデータ保存ボタンをクリックする。これにより、スライダ４５７で指定された範囲内のデータがテキスト形式で所定のファイルに保存される。
【００７１】
なお、今までプリンタ出力については説明していないが、当然に各画像およびフォルダ内に格納されている各データをプリンタにより適宜プリントアウトすることができる。また、制御手段３００に、上記各フェーズで使用するファイルを必ずしも常駐させておく必要もない。
【００７２】
すなわち、例えば別途にホストコンピュータを設置して、そこに上記各フェーズで使用するファイルを持たせ、測定する際に、制御手段３００を通信回線を介してホストコンピュータにつなげて必要なファイルなどをダウンロードするようにしてもよく、このような態様も本発明に含まれる。
【００７３】
また、本発明は、大型のディスプレイを備えた例えばディスクトップ型のコンピュータばかりでなく、カメラを備えた携帯電話機をはじめとする携帯情報端末にも適用可能である。一例として、上記の各フェーズ機能を備えた制御手段としてのパソコンとカメラ付き携帯情報端末とをインターネット回線を介して接続し、パソコン側から刺激画像を送信して、携帯情報端末側からそれに反応する眼球画像を受信するようにしてもよい。
【００７４】
【発明の効果】
以上説明したように、本発明によれば、被検者に評価すべき映像を呈示し、それを視聴した被検者の生理反応の一つである眼球運動を撮像し、得られたデータ（視線の動き，瞳孔面積，瞬目発生頻度）から刺激映像のコンテンツを評価するようにしたことにより、少ない被検者数で、従来テレビ放送で行われていた視聴率を指標とする評価手法よりも、はるかに信頼性のある高次な評価を行うことができ、特にブロードバンドコンテンツの評価に好適である。
【００７５】
また、評価対象である映像コンテンツの呈示から、それによる生体反応の測定，解析，評価指標の可視化に至るまでを１台の装置でほぼ自動的に実施することができるため、特別高度な専門知識を備えていない一般人でも、映像コンテンツの評価を短時間かつ低コストにて行うことができる。
【図面の簡単な説明】
【図１】本発明による映像コンテンツの評価装置の基本的な構成を示す模式図。
【図２】プロジェクト設定用ダイアログの画面図。
【図３】（ａ）刺激フェーズで実行される動作の概略的なフローチャート，（ｂ）同刺激フェーズで用いられるグラフィックユーザインターフェース画面。
【図４】（ａ）測定フェーズで用いられるグラフィックユーザインターフェース画面，（ｂ）同測定フェーズで実行されるキャリブレーションの概略的な動作フローチャート。
【図５】（ａ）解析フェーズで実行される動作の概略的なフローチャート，（ｂ）同解析フェーズで用いられるグラフィックユーザインターフェース画面。
【図６】解析フェーズで実行される画像処理を説明するための模式図。
【図７】（ａ）表現フェーズで実行される動作の概略的なフローチャート，（ｂ）同表現フェーズで用いられるグラフィックユーザインターフェース画面。
【符号の説明】
１００刺激呈示用ディスプレイ
２００赤外線カメラ
２１０赤外線ランプ
３００制御手段
４００モニタ画面

Claims

ディスプレイに所定の映像を呈示し、その映像を観察している被検者の生理反応を検出して、その検出データに基づいて上記映像コンテンツを評価する映像コンテンツの評価装置であって、
評価すべき映像としての刺激映像を上記ディスプレイに呈示する映像呈示手段と、上記刺激映像を観察中の被検者の眼球反応を撮像する撮像手段と、上記映像呈示手段および上記撮像手段を同期的に制御する制御手段とを含み、
上記制御手段は、上記撮像手段により得られた眼球画像信号を２値化処理して所定の眼球運動データを得るとともに、上記制御手段が備える表示手段に時間軸を設定し、その時間軸上に、上記刺激映像と、それに対応する上記眼球運動データとを併せて表示することを特徴とする映像コンテンツの評価装置。
上記制御手段は、上記眼球画像信号から少なくとも上記被検者の瞬目発生頻度，瞳孔面積，視線運動のいずれか一つのデータを上記眼球運動データとして算出する請求項１に記載の映像コンテンツの評価装置。
上記撮像手段が、赤外線カメラである請求項１または２に記載の映像コンテンツの評価装置。
上記制御手段は、あらかじめ編集されている複数の上記刺激映像を上記映像呈示手段より上記ディスプレイに呈示する際、その呈示順序モードの一つとしてランダム呈示モードを備えている請求項１，２または３に記載の映像コンテンツの評価装置。
上記制御手段は、上記被検者に上記刺激画像を呈示するに先立って、上記ディスプレイに上下左右に移動する視標を含む動画を呈示し、その際の上記被検者の眼球運動を上記撮像手段により撮像し、これらのデータに基づいて座標系を設定するキャリブレーションを実行する請求項１ないし４のいずれか１項に記載の映像コンテンツの評価装置。
上記制御手段は、上記表示手段に設定した時間軸上に、上記刺激映像と、それに対応する上記眼球データとを時系列的に表示する請求項１ないし５のいずれか１項に記載の映像コンテンツの評価装置。
上記制御手段は、上記眼球運動データから上記被検者の注視点位置を算出し、その注視点を上記刺激画像にスーパーインポーズして上記表示手段に表示する請求項１ないし６のいずれか１項に記載の映像コンテンツの評価装置。