JP2009530071A - 視覚的注意および感情反応の検出表示システム - Google Patents

Abstract

本発明は、視覚的注意を判定するためのシステムおよび方法であり、感情などの他の生理信号の測定とともに視線追跡の測定をサポートする。本発明のシステムおよび方法は、視線追跡データからの刺激関連感情を登録することが可能である。システムの視線追跡装置および他のセンサが、眼球特性および／または他の生理的特性を収集し、これが、刺激に関連する対象者の感情的および視覚的注意の観察および分析を可能にする。

Description

（関連出願データ）
本出願は、２００６年３月１３日に出願された米国仮出願第６０／７８１，３２１号の優先権を主張する。上記出願の教示全体が参考として取り入れられる。

本発明は、眼球運動、他の眼球特性、および／または他のデータを収集および分析することにより、視覚的注意および他の生理信号測定値（提示された刺激に対する人間の感情反応情報など）を判定および表示するための、コンピュータ利用システムおよび方法に関する。

視線追跡システムは概して周知である。感情反応検出システムは概して周知である。しかし、これら周知のシステムには様々な制限および欠点が存在する。

視覚的注意データの表示は概して周知である。しかし周知のシステムには様々な制限および欠点が存在する。加えて、視覚的注意データと対応の感情反応との同時表示は、これまで使用されていない。

周知のシステムには他の欠点および制限が存在する。

本発明の一態様は、対象者（検査を受ける人）に提示される刺激に関連する視覚的注意情報および感情反応情報を判定および表示するシステムおよび方法に関連する。本発明の一態様によれば、視覚的注意情報（例えば注視ポイントおよびサッカード）が判定され、例えばスポットライト特徴を持つゲイズプロットを用いて表示される。注視ポイントは、対象者が少なくとも最短時間量注目した刺激（視覚的イメージなど）のポイントまたはエリアである。ここで使用される場合、注視ポイントは多数の注視ポイントおよびサッカードにより特定される注視エリアも指す。スポットライトは、刺激に重ねられたブラックマスク（または他のタイプのマスク）上に透明度の統合によって視覚化された注視ポイントの統合体である。例えば、選択可能な閾値（管理ユーザが選択した閾値など）および／または他のパラメータに基づいて、一つ以上の注視ポイントを示すのにスポットライト特徴が使用される。注意ポイントを形成するため、統合注視ポイントが時間順で使用されてもよい。注視ポイントの統合体（スポットライトなど）の時間順を示すため、番号付けによって注意ポイントが視覚化されてもよい。所望であれば、他のポイントまたはエリア（閾値または他のパラメータを満たさないもの）が、注視ポイントと選択的に区別されてもよい。

この長所の一つは、スポットライト特徴を持つゲイズプロットは、対象者が注視した刺激の部分（および、所望であれば対象者が注視しなかったあいまいエリア）をグラフィック表示できることである。こうして、所与の刺激について、対象者が注視した刺激部分および／または対象者が注視しなかった部分が、当事者（マーケティングコンサルタントその他の実体）には容易に分かるのである。この情報はそれだけで有益ではあるが、対象者が刺激全体に感情反応を持ったかどうか、ましてや一つ以上の所与の注視ポイントに関連する感情反応を持ったかどうかを示すことはない。また、感情反応があったかどうか、感情の種類（肯定的感情か否定的感情かなど）、感情がどれくらいの強さかを示すこともない。

本発明の別の態様によれば、所与の刺激について、および／または刺激の注視ポイントについて、対象者の感情反応が判定および表示される。感情反応に関連すると判定された注視ポイントは、関心ポイントとして示される。感情反応情報（感情の種類および／または強度など）が、視覚的注意情報（ゲイズプロットまたは他の視覚的注意情報表示と同時に感情反応情報を表示する）と同時に表示される。関心ポイントは、単独で、または視覚的注意および／または感情反応情報と同時に表示される。

表示される感情反応情報は、一つ以上の感情価および／または感情喚起の表示を含む。この情報は、感情の種類（肯定的なものか否定的なものかなど）および／または感情の強度を示す。関心ポイントについては、感情反応（その他）の種類と強度が測定および／または表示される。異なる注視ポイント、注意ポイント、時間順、関心ポイント、および／または感情の種類および強度を区別するため、表示では異なる表示特徴を用いる。

感情反応情報は、いくつかの方法のいずれかで判定される。様々な感情検出技術が周知である（顔表情運動、皮膚電気反応の読み取り、様々な他の技術など）。本発明の相乗作用的な一実施例によれば、対象者の眼球特性（眼球運動、まばたき速度、瞳孔拡張、および／または他の眼球特性）に少なくとも部分的に基づいて、感情反応情報が検出される。有利なことに、これにより（所望であれば）視覚的注意データを収集するのに使用されるのと同じ視線追跡装置によって感情反応データを収集できる。眼球特性検出とともに、またはこれに代わって、様々な他の感情検出技術が使用されてもよい。

発明の範囲内において、様々な構造、特徴、機能が様々な組合せで使用されてもよい。例示目的であって限定のためではないが、ほんのいくつかの例を説明する。一実施例によれば、システムは、準備モジュール（検査パラメータ、対象者プロフィール、刺激パラメータ、校正および／または他の準備パラメータのうち一つ以上の準備を可能にするためなど）、刺激提示モジュール（刺激の記憶および提示を管理するためなど）、データ収集モジュール、分析モジュール（視覚的注意および／または感情反応を判定するために収集データを分析するためなど）、および、判定された視覚的注意および／または感情反応情報その他に関連する情報を含む情報を選択的に出力するための出力モジュールその他を含む。出力はいくつかの異なる形のいずれかを取っても良く、様々な種類の情報を含むことができ、様々な詳細レベルを含むことができる。

本発明の一態様によれば、出力モジュールにより、スポットライト特徴および／または注意ポイント（上で説明したものなど）を持つゲイズプロットなど、視覚的注意情報の出力が可能である。本発明の別の態様によれば、出力モジュールは、対象者の感情反応情報および／または移動中の関心ポイントの出力を可能にする。他の種類および組合せの出力が選択されてもよい。

出力のいずれかは、単一の対象者（人間など）に提示される単一の刺激、同じ対象者に提示されるいくつかの刺激のための統合出力、対象者グループに提示される単一の刺激の統合出力、および／または対象者グループに提示されるいくつかの刺激のためのものである。出力のいずれかは、「スナップショット」ビュー（特定時間のサンプリングにより判定された情報についての単一の結果など）および／または時間順表示（時間順の一連のスナップショット）、動画、および／または映像（ある時間にわたる対象者の眼球運動および／または他の情報を示す比較的連続した動きの表示など）を含む。本発明の一態様によれば、視覚的注意情報および／または感情反応情報は、映像再生モードで対象者の視覚的注意および／または感情反応を提示するため、記録および再生が可能である。再生制御が設けられてもよい。

一実施例では、本発明のシステムおよび方法は、一つ以上の指定の刺激および／または刺激の様々な部分（選択エリアなど）に関する対象者の視覚的注意を判定するように構成されている。

必要なおよび／または望ましい準備（対象者の年齢、住所、性別および／または他の個体群統計学的情報を含む背景変数の集合）および／または校正のステップが実施されると、眼球特性（例えば眼球位置、眼球運動、眼球運動の速度、および／または他の眼球特性に関するデータの収集を含む）を追跡することにより少なくとも部分的に、視覚的注意情報（コンピュータディスプレイに提示される視覚的刺激に関する注視および／またはサッカードなど）などが判定される。判定される視覚的注意情報は、注視ポイント（凝視）およびサッカード（注視ポイントの間の経路など）、および／または他の情報を含む。本発明の一態様によれば、こうして、ディスプレイ装置座標に合わせて予め校正された対象者の眼球運動を、視覚的刺激またはその一部と相関させることが可能となる。概して、視覚的注意情報は、一つ以上の時点で対象者が見ているのは刺激のどの部分であるかに関連する。対象者が見ている刺激のすべてまたはいくつかのポイント／エリアが特定および表示されるか、一定の基準を満たすポイント／エリアのみが表現される。例えば、少なくとも所定の最短時間にわたって対象者が注視したポイント／エリアのみ、または対象者が何度か戻ったポイント／エリアのみを表示するように閾値が設定されてもよい。他の基準は、注視として特定された刺激のポイント／エリアの時間順を含む。ビジネスの観点からは、サービスプロバイダは、対象者が訪れる検査センターを運営するためのソフトウェア／システムを使用する。このシナリオでは、検査に関して対象者を補助／案内するのに一人以上の検査リーダー（および／または管理ユーザ）が用いられる。検査リーダーを伴うにしろ伴わないにしろ、自動または半自動検査センター（キオスク、ＰＣなど）が使用されてもよい。遠隔監督検査が実行されてもよい。

検査単位料金、刺激単位料金、対象者単位、人口割合単位、および／または他の基準を含むがこれに限定されない多様な基準で、サービスプロバイダは料金を回収する。加えて、料金の金額は、出力の種類および／または詳細によって変化してもよい。例えば、単純な出力（ゲイズプロットのみなど）は、第１料金で提供される。スポットライト特徴を含むゲイズプロットは、第２料金で提供される。ゲイズプロットと基本的感情反応情報との同時表現は、第３料金である。より詳細な感情反応情報が追加されると、第４料金である。このようなサービスプロバイダのための他のビジネスモデルが実行されてもよい。

別のビジネス方法によれば、サービスプロバイダは対象者が遠隔操作によって対話する（インターネットまたは他のネットワークを介して）遠隔アクセス可能な検査施設をサービスプロバイダが運営する。対象者は、検査センター、キオスク、家庭または職場のコンピュータ、モバイル無線装置その他などを介した方法を含むがこれに限定されないいくつかの方法で、遠隔アクセス可能な検査施設にアクセスできる。上記のようにまたは他の方法で料金が請求される。

別のビジネスモデルによれば、ソフトウェアがライセンス許諾される。後述するように、ライセンス許諾はモジュール単位である。例えば、視覚的注意モジュールおよび／または感情反応モジュールはそれぞれ、コア視覚的反応エンジンとコア感情反応エンジンとを含む。コアエンジンはそれぞれ、基本料金でライセンス許諾を受ける。機能の強化および／または高い詳細レベルを提供する独立したプラグイン（または他のモジュール）が別料金で提供されてもよい。また別のビジネスモデルでは、ソフトウェアを伴う所定の種類の装置がライセンス許諾される必要がある。例えば、連続するいくつかの視線追跡装置は、ソフトウェア機能へのアクセスが認められる前の許容範囲の装置であると判断される。他のライセンス許諾モデルが使用されてもよい。必要であるか望ましいインボイスの作成・送付を容易にするため、インボイスモジュールがシステムの作業を監視してもよい。

以上および他のビジネス方法に対応するため、検査の準備／校正、および／または実施は手動、自動、および／または半自動で行われる。所望であれば、結果のリアルタイム監視が局所的にまたは遠隔操作で利用可能である。

本発明の一つ以上の態様とともに、他の様々な特徴および機能が使用されてもよい。ここに記す特徴および機能のすべてが、あらゆる場合に使用される必要があるわけではない。所望であれば、特徴および／または機能の組合せが使用されてもよい。以下に挙げる例は、理解を容易にするためのものである。本発明は特定の実行例に限定されない。

本発明のシステムおよび方法は、広範囲の適用可能性を持つ。明瞭化のため、これらの特徴が有益である一つのシナリオについて説明する。例を挙げると、一つのシナリオは、（例えば広告、新製品、製品の新特徴および／または製品の包装、その他に対する対象者の反応を判定するために）刺激および／または調査質問を対象者に提示することによって対象者（個人など）が検査を受けるという状況に関連している。簡便性のため、主としてこのような検査について本発明を論じる。これは本発明を限定することを意図したものではない。本発明は、多様な他のシナリオおよび用途において同様に使用することができる。

ここで使用する場合、「検査」および／または「研究／調査」は、（新製品、新特徴、新包装についての広告またはマーケティングの研究または調査、または他の検査または研究など）多様な活動を広く指す。「対象者」は、例えば検査を受ける人間、動物、他の検査対象を含む。刺激は、五感（視覚、聴覚、嗅覚、触覚、味覚）のうち一つ以上に対応する何らかの種類の感覚刺激、および／または他の刺激を含む。視覚的刺激は（例えば単一のイメージ、連続または同時の二つ以上のイメージとして、映像またはその他として）ディスプレイに提示される。

視覚的刺激の例は、例えば写真、芸術作品、図、グラフ、文章、映画、マルチメディアプレゼンテーション、対話式コンテンツ（ビデオゲームなど）、他の視覚的刺激を含む。刺激は（何らかの種類のメディアに）記録される、および／または刺激はライブシナリオ（車を運転するか乗車するなど）である。様々な刺激および／または刺激の種類が組み合わされてもよい。検査または他のシナリオの場合には、目的と必要に基づいて刺激が選択される。例えば、広告の場合には、刺激（広告）およびより詳細な情報に対する全般的反応を判定するため、刺激は製品広告に対応する（対象者の注意が広告のどこに向けられるか、そして刺激またはその一部を知覚する際にどんな感情が起こるか）。

ここで使用される際には、（用いられる場合に）「管理者」または「管理ユーザ」は、検査（および／または他の機能）に関連する準備作業の少なくともいくつかを実施する人間を指す。例えば、管理者はシステムと対話して、例えば刺激パラメータ、対象参加者、背景変数（年齢、性別、居住地など）および／またはパラメータを含む検査準備に不可欠なパラメータを入力する。

研究／調査リーダーは、（用いられる場合には）実際の検査の実施を補助する。管理者およびリーダーは同じ人間であっても違う人間であってもよい。

図１は、本発明の一実施例に係る方法の高レベル図の一例を示す。様々な準備／校正ステップが実施される（ステップ２）。準備および校正の技術は概して周知である。これらのステップの例は、検査の準備、対象者の準備、刺激の準備、様々な校正ステップおよび／または他のステップなどを含む。新規性を持つ本発明の一態様によれば、細分化の準備は、独立と従属の両方の背景変数を収集することを含む。対象者に刺激が提示される（ステップ４）。所望であれば、調査質問が対象者に提示される。調査の提示および調査結果の収集は、概して周知である。しかし、新規性を持つ本発明の一態様によれば、調査の反応、視覚的注意情報、感情反応情報が相関する。

刺激に対する対象者の反応に関するデータ（視覚的注意データおよび／または感情反応データ）が収集される（ステップ６）。刺激提示の間および／または後に、収集されたデータ（および／または他の所望の情報）が分析される（ステップ８）。分析は、視覚注意情報（ステップ１０）、感情反応情報（ステップ１２）、関心ポイント（ステップ１４）、および／または他の情報（提示された一つ以上の刺激に関する対象者に関連の生理情報など）を判定することを含む。次に、分析データが記憶され、および／または選択的に出力される（ステップ１６）。出力は、コンピュータ表示のレポートまたは他の種類の出力を含む多様な形のいずれかで行なわれる。本発明の一態様は、後で詳述する特定種類の出力に関連する。

図２は、本発明のいくつかの態様を実施するのに使用できるシステムの簡単な概要の一部についての一例を示す。図示されているように、システムは、視線追跡装置１２０とディスプレイ装置１３０とコンピュータ装置１１０のうち少なくとも一つ以上を含む。コンピュータ１１０は、刺激提示モジュール２０３、視覚的注意エンジン２０５ａ、および／または感情反応エンジン２０５ｂのうち少なくとも一つ以上でプログラムされている（またはプログラムされたコンピュータ／サーバにアクセスする）。出力ジュール２０６は出力１１８を発生させるのに使用される。一つ以上の記憶装置（単純化のため図２には示されていない）は、刺激、データ、分析結果、および／または他の情報を記憶する。

実施時に、対象者５０は、ディスプレイ装置１３０の近くに位置する。刺激提示モジュール２０３が選択された刺激をディスプレイ装置１３０に表示して、一つ以上の視覚的（または他の）刺激（ディスプレイ装置１３０および／または他の装置に表示される刺激など）を対象者５０に与える。一つ以上のデータ収集装置（視線追跡装置１２０および／または他のデータ収集装置）が、対象者の反応に関するデータを収集および／または情報を記録する。収集されたデータは、所定の時間または可変時間（１〜３秒または他の時間）にわたる所望の数の個別サンプル（毎秒５０〜６０個のサンプルまたは他の所望の頻度で）を含む。代替的に、または付加的に、収集されたデータが一定または可変時間の連続サンプル（映像など）を含んでもよい。収集されたデータは、眼球運動または他の眼球特性、生理データ、環境データ、および／または様々な刺激に対する対象者の反応に関する他のデータを含む。ユーザからの直接入力も受理される。

本発明の有利な一態様によれば、視線追跡装置１２０はディスプレイ装置１３０と一体化され、および／またはディスプレイ装置の上または中に取り付けられる。しかし、様々な検出環境およびシナリオに基づいて、これらの装置が独立したユニットとして実行されてもよい。ディスプレイ装置１３０は、モニタ、タッチスクリーン、ＬＣＤスクリーン、および／または他のディスプレイ装置を含む。所望であれば、単純なＵＳＢ型ビデオカメラが視線追跡装置１２０として使用されてもよい。これ（または他の視線追跡装置）は、利用可能なディスプレイと一体化されるか、これに取り付けられる。一体型の視線追跡・ディスプレイ装置の一例は、Ｔｏｂｉｉ Ｔｅｃｈｎｏｌｏｇｙ ＡＢから市販されているＴｏｂｉｉ １７５０ Ｅｙｅ−ｔｒａｃｋｅｒ（アイ・トラッカ）である。

視線追跡装置は、アイ・トラッカを制御することでデータを収集するソフトウェアプログラムを含むか、これと対話する。例えば視線追跡装置は、（Ｔｏｂｉｉによる）Ｃｌｅａｒｖｉｅｗ^ＴＭソフトウェアを含む。他の視線追跡ソフトウェアを使用することもできる。このソフトウェアはスタンドアロンアプリケーションであるか、ここで記す他のソフトウェアモジュールのうち一つ以上と抱き合わされるかその一部である。視線追跡ソフトウェアは、他のソフトウェアモジュールの一つ以上を取り入れている。他の視線追跡装置、ディスプレイ、および／または技術が、ここで説明する様々な部品の代わりに、または様々な部品とともに使用されてもよい。

図３は、本発明の一実施例によるシステム（および他の特徴）の、より詳細な機能ブロック図を示す。図３には、一つ以上の入力装置１００、一つ以上の提示装置１０１、および／または一つ以上の出力装置１０２とインタフェースするための一つ以上のインタフェース１１４を有するコンピュータ１１０が図示されている。コンピュータ１１０はさらに、刺激データベース２４０、データ収集データベース２４１、対象者プロフィールデータベース２４２、分析結果データベース２４３、および／または他の記憶装置など、一つ以上の記憶装置と通信する。刺激情報、収集データ、対象者プロフィール情報、分析結果、および／または他のデータを記憶するため、一つ以上のデータベース２４０，２４１，２４２，２４３が設けられる。これらのデータベースは明瞭化のために示されたように独立したデータベースであるか、一つ以上が組み合わされて、アプリケーションシステムデータを記憶するための単一のデータベースとなることもある。

入力装置１００（視線追跡装置１２０、タッチスクリーン１３５、キーボード１４０、マウス１５０、マイクロフォン１６０、センサ１７０、および／または他の入力装置のうち一つ以上など）は、入力（対象者５０からのもの、または他の入力など）を受け取るために使用される。入力は、刺激に対する対象者の視覚的注意、感情反応、および／または他の反応を含むが、これらに限定されない。他の入力は、準備／校正手順で受理されたユーザ情報、調査反応および／または他のユーザ入力、他の所望の入力を含む。嗅覚センサ、触覚センサ、音センサ、および／または他のセンサなどのセンサが、入力装置として使用されてもよい。

提示装置は、例えばディスプレイ装置１３０、スピーカ１８０、他の提示装置のうち一つ以上を含む。ディスプレイ装置１３０は、視覚的刺激を対象者に視覚的に表示および提示するために使用される。

出力装置１０２は、例えばディスプレイ装置１３０（または他のディスプレイ）、スピーカ１８０、プリンタ１９０、およびまたは他の出力装置のうち一つ以上を含む。ディスプレイ装置１３０は、収集データまたは収集データの処理バージョンの再生映像を表示するための映像ディスプレイを含む。コンピュータ１１０は、ここに記す機能を実施するソフトウェアアプリケーション（図３に図示されたアプリケーション２００など）でプログラムされるか、このソフトウェアアプリケーションでプログラムされたコンピュータ（リモートサーバなど）と通信状態にある。コンピュータ１１０は、単一のコンピュータでも多数のコンピュータでもよい。一つ以上のコンピュータ１１０が（検査対象５０の付近に）局所的に設けられても、一つ以上が検査対象者５０から離れて（中央検査施設などに）遠隔配置されて、対象者の遠隔検査および／または検査の遠隔監視を可能にする。一つ以上のコンピュータ１１０は、アプリケーション２００を実行するスタンドアロンコンピュータである。一つ以上のコンピュータ１１０が（ネットワークインタフェース２０９などを介して）、相互に、および／または第三者装置２６０にネットワーク接続されて、間のネットワーク通信を可能にする。これにより、１台のコンピュータからアプリケーション２００を実行している中央コンピュータ１１０へのブラウザベースのアクセスなどが可能となる。コンピュータ１１０は、有線および／または無線通信リンクを介してネットワーク２５０（インターネット、イントラネット、ＷＡＮ、ＬＡＮなど）を通してアプリケーション２００にアクセスできる。

アプリケーション２００は、ここに示す機能その他を実施する一つ以上のコンピュータソフトウェアプログラムおよび／またはモジュールを含む。例えば、アプリケーション２００は、準備／校正、検査、刺激提示、データ収集、分析、出力、生成、および／またはフォーマット、インボイス作成送付、データマイニング、その他のうち一つ以上を含む機能を実施する。

簡便性のため、例えば図３に示されているように、様々なモジュール２０１〜２０９により様々な機能が実行される。一つ以上のモジュールが組み合わされるか、単一モジュールとして示されたモジュールが二つ以上のモジュールを含んでもよい。例を挙げると、モジュールは、インタフェース制御装置モジュール２０１、準備モジュール２０２、刺激提示モジュール２０３ａ、データ収集モジュール２０４、分析モジュール２０５、出力モジュール２０６、インボイスモジュール２０７、データマイニングモジュール２０８、および／または他のモジュールのうち少なくとも一つ以上を含む。すべての状況においてすべてのモジュールが使用される必要があるわけではない。

一つ以上のインタフェース制御装置モジュール２０１が、一つ以上の入力装置１００、提示装置１０１、出力装置１０２と、周知の方法で関連し、および／または通信してもよい。一つ以上の制御装置２０１は、コンピュータ１１０のハードウェア（および／またはソフトウェア）要素として実行され、コンピュータ１１０に装着された装置との通信を可能にするのに使用されてもよい。通信はいかなる種類の有線または無線通信リンクによって行なわれてもよい。所望であれば、安全通信プロトコルを使用できる。

準備モジュール２０２は、対象者の準備２０２ａ、刺激の準備２０２ｂ、校正２０２ｃ、および／または他の準備／校正手順のうち一つ以上のためのサブモジュールを含む。これらの手順は、図１のステップ２に関して言及されたものなどを含む。準備／校正中にシステムによって受理されたデータ（背景変数、検査パラメータ、刺激パラメータ、対象者パラメータなど）は、刺激データベース２４０、対象者プロフィールデータベース２４２、および／または他のデータベースの一つに記憶される。

刺激準備情報、記憶された刺激、および／または他の刺激提示特性にしたがった刺激の提示を容易にするため、刺激提示モジュール２０３が設けられる。刺激提示モジュール２０３は、管理ユーザその他により刺激が管理されること（記憶、消去、修正、アップロード／ダウンロード、または他の管理など）を可能にするため、グラフィックユーザインタフェース（不図示）を含むか、これと対話する。加えて、ユーザインタフェースは、特定の検査または他の用途で使用するため、一つ以上の刺激および刺激提示特性の選択を可能にする。

データ収集モジュール２０４は、刺激提示中（または他の時）に（入力装置１００または他の入力装置などの一つ以上からの）データを収集する。データ収集モジュール２０４は、後で（またはリアルタイムで）分析するため、収集されたデータを、データ収集データベース２４１または他のデータベースに記憶させる。

分析は、分析モジュール２０５および／または他のプロセッサによって行なわれる。分析モジュール２０５は、視覚的注意処理２０５ａ、感情反応処理２０５ｂのためのサブモジュール、および／または他のサブモジュールを含む。所望の場合には、コア感情反応エンジンおよび／または視覚的注意エンジンの機能性を高めるために様々なプラグイン２０５ｃが使用される。

分析結果は、分析データベース２４３または他のデータベースに記憶される。分析モジュール２０５は、一つ以上のエラー検出および補正（データクレンジング）技術を用いて収集データを処理する。このように、信号ノイズおよび他のエラーを減少させるため、収集されたデータは精製およびフィルタリングされる。クリーンデータは、分析がより容易および／または正確である。

様々なプラグイン２０５ｃは、視覚的注意および／または感情反応の処理に関する高レベルの詳細および／または付加的機能を提供するのに使用される。例えば、収集されたデータから関心ポイントが判定される。詳細は、詳細な関心ポイント、感情価の判定、感情喚起の判定、感情の名称および種類を含む。

出力モジュール２０６は、様々なタイプの出力を、アプリケーション２００から一つ以上の出力装置１０２へ選択的に出力させる。例えば、分析結果に基づいてレポートを作成するのに、出力モジュール２０６が使用される。例えば、レポート出力１１８では、視覚的注意情報および感情反応情報が実際の刺激に関して出力および提示される。様々な電子および／または印刷出力タイプは、若干の例を挙げると、グラフ、文章、イラストレーション、ゲイズプロット、感情メータ、音声、および／または映像再生の表現を含むが、これらに限定されない。出力のさらなる詳細および例を、図６〜８に関連して示す。他の出力タイプおよびフォーマットを使用してもよい。

図４は、本発明の一実施例の様々な態様を実行するための方法の例を示す。図４は、研究／調査準備段階、研究／調査実行段階、研究／調査分析段階を示す。これらの段階および／または他の段階は、テストセンター、キオスク、家庭または職場のコンピュータ、モバイル無線装置その他を介した方法を含むがこれらに限定されないいくつかの方法のいずれかによって、検査施設（または検査施設の外部）で実行される。検査は、監督下、半監督下、無監督で行なわれる。検査施設では、各対象者に対して直接に、研究／調査リーダーによって検査が実行される。検査施設の外部で、対象者５０が研究／調査リーダーを伴って、または伴わずに研究／調査を実行してもよい。研究／調査リーダーを伴わない場合、対象者の感情状態は変化せず、研究／調査リーダーの存在によって影響されない。代替的に、検査施設からおよび検査施設の外部からの態様の組合せが、図４に図示された段階で使用されてもよい。他の検査環境も本発明の範囲に含まれる。

一部またはすべての検査環境では、研究／調査準備段階が設けられる。この段階では、管理者（または他の個人）が、刺激および／または調査データと他の準備パラメータ（背景変数など）を入力または選択する。この情報は、刺激データベース２４０および／または他のデータベースに記憶される（ステップ５０１）。

研究／調査中に提示される刺激は、準備モジュール２０２の研究／調査準備サブモジュール２０２ｂを用いて選択される。選択された刺激は、コンピュータ１１０にロードされ、および／または刺激データベース２４０または他のデータベースに記憶される。様々な刺激ソースが使用される。広告データベースなどの遠隔ソースから刺激をダウンロードするため、ネットワーク２５０（インターネット、イントラネットなど）を通し、ネットワークインタフェース２０９を介して遠隔刺激（不図示）にアクセスされてもよい。別の刺激ソースは、刺激の生成および／またはカスタマイズを可能にする刺激生成アプリケーションである。生成アプリケーションは、マルチメディア刺激生成を可能にする。

他の刺激提示特性も選択される。例えば、所与の検査／研究について、一つ以上の刺激の一つ以上の刺激持続時間、刺激の提示順序（刺激のランダム提示など）、刺激を同時に提示すべきかどうか、および／または他の刺激特性が選択される。注視ポイントを特定するためのパラメータは、刺激特性の準備中（または他の時）に提供される。例えば、これは少なくともドエル時間または他のパラメータの閾値に基づく。スポットライトの視覚的表示は、注視ポイントのいくつかの統合体または他の要因に基づくように準備される。注意ポイントは、特定されたスポットライトに関する統合注視ポイントの時間的順序（半透明の数字インジケータなど）を示すように準備される。注視ポイント（選択された基準によって決定されるものなど）と、注視ポイントでの感情反応（選択された基準により規定されるもの）とに基づいて、関心ポイントが特定される。例えば、特定の種類および／または強度の感情反応が一つ以上の注視ポイントと関連する場合には、これによって関心ポイントが特定されると明記してもよい。これらの態様については、後述する。

出力提示特性は、準備モジュール２０２を用いて特定されてもよい。出力提示特性は、どのような分析が行なわれるか、出力の種類および／または形式、出力を誰が受け取るべきか、および／または出力がどのように受け取られるかなどを特定する。例えば、出力レポートに含まれる情報のレベルは、例えば所定のテンプレートを含む提示フォーマットを用いて指定される。出力情報を受け取る側と関連の送信手段も、出力提示特性の一部として指定されてもよい。例えば、所定の送信手段（Ｅメール、電話、ＦＴＰなど）を用いて、出力が指定のユーザ／装置に送信される。出力提示特性は、管理者、リーダー、対象者、および／または他の一人以上の人物によって入力されてもよい。

図４の方法は、対象者に関するプロフィール（および／または他の）情報（年齢、性別、居住地などを含む背景変数など）も含む。検査施設においてリーダーは、参加対象者の詳細を入力するか、対象者に入力するよう導く（ステップ５０２）。これは、準備モジュール２０２の対象者準備サブモジュール２０２ａの使用を含む。情報は、対象者プロフィールデータベース２４２または他のデータベースに記憶される。対象者の校正も、手動、自動、および／または半自動で実施される（ステップ５０４）。実行段階では、対象者への表示のため刺激および／または調査質問が提示される（ステップ５０６）。対象者は、調査質問に手動またはその他で回答する（ステップ５０８）。他の箇所で説明するように、視覚的注意データおよび感情反応データが収集される。他の検査環境では、これらのステップのうち様々なものがリーダーなしで実行される（ステップ５１２〜５１４，５１６，５１８）。

研究／調査の刺激提示が完了すると、別の参加対象者がいるかどうかが判定される（ステップ５１０，５２０）。もしいれば、別の対象者でプロセスが繰り返される。いなければ、一連の研究が終了する、および／または分析が実施される（ステップ５５０）。

検査／研究の終了時、および／またはデータが収集される際にリアルタイムで、分析が実施される。分析は、収集データを処理して、視覚的注意情報および／または感情反応情報などを判定することその他を含む。視覚的注意の処理および／または感情反応の処理のいくつかの態様は、概して周知である。他の態様については、他の箇所で説明する。

視線追跡、感情反応（および他の）校正技術は概して周知である。本発明に使用される校正ルーチンのいくつかの態様の例を提示する。他の校正技術が使用されてもよい。校正サブモジュール２０２ｃは、対象者／装置の校正を含む校正作業を実施する。環境設定およびシナリオに基づいて、視線追跡装置１２０および他の入力装置が校正される。校正中にも、対象者に固有の校正のため、校正サブモジュール２０２ｃは、ディスプレイ装置の所定箇所または対象者の視界に設けられたいくつかの校正ポイントを、対象者に提示する。校正ポイントは、対象者が注目するように促されるディスプレイ装置の座標に対応し、ディスプレイ装置座標（ｘ，ｙ，ｚ座標など）に対する対象者の視線の動きを視線追跡装置が校正するまで、その間を移動する。任意で、今後の一連の検査のため、ポイント校正情報が対象者プロフィールデータとともに記録および記憶される。

感情校正も、記録および記憶される。眼球特性に関する対象者感情反応を観察するため、ある感情を起こすのに使用される所定の刺激が対象者に提示される。肯定的（楽しいなど）、中間的、否定的（不快など）な反応を誘うことが知られている刺激が、対象者に提示されてもよい。例を挙げると、まばたき速度パターン、瞳孔反応、サッカード運動、および／または他の特性を記録して中間的刺激に対する対象者の反応を特徴付けるため、感情的に中間的な刺激が対象者に提示されてもよい。代替的に、対象者の個体群統計学的および他の個人データに基づいて一定の感情を引き起こすことが知られている刺激が、対象者に提示されてもよい。様々な感情の感情基準を設定するため、感情反応が使用されてもよい。こうして、感情価の大きさを理解するため、研究／調査刺激が対象者の基準と比較される。

検査の実行に関して、様々なデータが収集される。収集されたデータは、リアルタイムで、または後で処理される。出力提示特性について述べたように、収集および処理が行なわれたデータは、視覚的注意、感情反応および／または他の情報を多様な形式で提示するための出力情報として提示される。一つの出力タイプは、ディスプレイへの視覚的出力、視覚的印刷、他の視覚的出力である。非視覚的出力が設けられてもよい。

出力は、一つ以上の刺激についての視覚的注意情報（一つ以上のゲイズプロットなど）および／または感情反応情報（一つ以上の感情メータなど）を含むグラフィック表現を含む。ゲイズプロット（スポットライト、注意ポイント、関心ポイントなど）が、関連の刺激（二つ以上が同時に表現される場合には複数の刺激）に重ねられる。ゲイズプロットは、統合された注視ポイントを強調するためのスポットライト特徴、統合された注視ポイントの時間的順序を強調するための注意ポイント、および感情反応を強調するための関心ポイントを含む。

図５は、本発明の実施例による視覚的刺激の例を示す図である。図６は、図５の刺激に関する、本発明の一態様による出力の例である。示された出力は、視覚的刺激（図５の刺激７００など）に対する対象者の反応に関する視覚的注意情報８００と感情反応情報８１０（感情メーターなど）の同時表現を含む。図のように、視覚的注意情報８００は、スポットライト特徴を持つゲイズプロットと、注意ポイントとを含む。スポットライト特徴は、視覚的刺激７００の一つ以上の注視ポイントおよび／または関心ポイントを強調する（または他の方法で示す）。スポットライト特徴の一実施例では、刺激（視覚的イメージ７００など）のすべてまたはいくつかにバーチャルマスクが重ねられ、一つ以上の注視ポイント（最短注視時間に基づくものなど）に対応するマスクの一部分が効果的に除去されるか、刺激の下地部分を明らかにするため透明にされる。別の方法は、刺激全体を明らかにして非注視ポイントを選択的に被覆することである。

概して、マスク（使用される場合）は、第１次の光学特性を有し、除去部分は第２次の光学特性（一つ以上の注視ポイントを刺激の残部と区別することなど）を有する。一実施例によれば、マスクは少なくとも比較的不透明で（刺激の下地部分を完全または部分的に隠し）、注視ポイントに対応する除去部分は、注視ポイント（例えば８０１〜８０４で示されたもの）を強調（つまりスポットライトを当てる）ため少なくとも比較的透明にされる。８０１，８０２，８０３，８０４で示されたエリアは、注視の時間的順序にしたがって番号付けするための注目ポイントも含む。所望であれば、刺激の被覆部分を分かりやすくするため、実際の刺激がゲイズプロットの近くに表現されてもよい。

別の実施例によれば、注視ポイントは他のポイントよりもより明るく表現される。注視ポイントと非注視ポイントとの間の区別を視覚的に表現するための他の技術が使用されてもよい。

注視ポイントの大きさを示すために光学的特性の相対的相違が用いられる。例えば、対象者が第２注視ポイントよりも第１注視ポイントに長い時間とどまる場合には、第１注視ポイントは第２注視ポイントよりも相対的により透明となるが、それでも各々は非注視ポイントよりも透明である。注視ポイントを区別するとともに注視ポイントを非注視ポイントと区別するため、他の光学的特性を使用できる。

ユーザが特定の時間順序で異なるポイントまたはエリアを注視する限り、注意ポイントを用いて注視ポイントの順序が視覚的に静的または動的に示される。静的な場合、一つ以上の注視ポイントの時間順序と整合させるため、注視ポイントには数字（または他のインジケータ）が付けられる。動的な場合、第１注視ポイントは、他の注視ポイントと比較して強調される（より透明またはより明るく表現されるなど）。次に第２および他の注視ポイントが順に強調される。

本発明の別の態様によれば、感情反応に対応すると判定された注視ポイントは、関心ポイントと呼ばれる。一つ以上の関心ポイントは、感情反応と関連しない注視ポイントとは異なる形で表現される。加えて、一つの関心ポイントは、そのポイントまたは他の相違と関連する感情価および／または喚起に基づいて、別の関心ポイントと異なる形で表現される。例えば、関心ポイントに対応する一つ以上の視覚的刺激のポイント／エリアを強調するのに、スポットライト特徴が使用される。関心ポイントスポットライトの特徴は、注視ポイントと関連する対象者の感情反応の種類および／または強度を示すため、変化させてもよい。

感情反応情報８１０は、視覚的注意情報８００と同時に表示されてもよい。感情反応情報８１０は、一つ以上の刺激の一部に対応する刺激（複数の刺激）および／またはエリア関連の感情反応情報に対する対象者の反応に基づく全般的感情反応を含む。例えば、一つ以上の注視ポイントについての感情反応情報を個別に表現することにより、より詳細なレベルの感情反応が提示される。例示のみのため図６に示されているように、感情反応メータは、一つ以上の注視ポイントについて感情価および／または喚起を示す。感情価は、関心ポイント、スポットライト、および／または注意ポイントについて表示されてもよい。

所望であれば、レポートの様々な箇所に文章情報が含まれてもよい。

図７は、視覚的注意情報および感情反応情報の表示についてのいくつかのオプションを示す。これらの特徴を様々に並べ替えたものが使用されてもよい。すべての場合にすべての特徴が使用される必要があるわけではない。

例えば、視覚的注意情報は、（スポットライト特徴、注意ポイント、関心ポイントを含み、または含まない）ゲイズプロットを含む。使用される場合にゲイズプロットは、対象者の眼球運動、注視ポイント、および／または関心ポイントに対応する走査経路を示す。視覚的注意情報は、ある時点での一つ以上の刺激についてのものである。視覚的注意情報は静的または動的である。動的表示は、個々の表示の連続（スライドショーモードなど）、動画再生、一つ以上の映像、および／または他の動的表示を含む。

一つ以上のテンプレートに従って一部の出力（レポートなど）が自動的に生成されてもよい。様々なテンプレートおよび／またはテンプレートパラメータがシステムに予め記憶されてもよい。予め記憶されたテンプレートは、（管理ユーザ、検査・研究リーダー、他の実体などにより）選択および／または修正される。新しいテンプレートが作成および記憶されてもよい。

レポートおよび他の出力１１８は、一人以上の受取者および／または一つ以上の受取装置に自動的に送られる。例えば、対象者５０、第三者装置２５０、研究／調査リーダー、管理者、および／または他の受取者である。出力１１８は、後の検索、送信、および／またはデータ保管のために記憶される。出力およびレポートは、ＪＰＥＧ，Ｗｏｒｄ、ＰＤＦ，ＸＭＬ、他の便利な出力フォーマットを含むがこれらに限定されてないいくつかのフォーマットのいずれかである。

本発明の一態様によれば、感情を引き起こした刺激と同時に、また同期して、感情マップが表現されてもよい。例えば、図８に図示されているように、第１刺激９００ａについてのスポットライト特徴を持つ第１ゲイズプロットが、刺激９００ａに対する対象者の感情反応を示す対応の感情マップ９００ｂの付近に表示される。同様に、第２刺激９０４ａのスポットライト特徴を持つ第２ゲイズプロットが、刺激９０４ａに対する対象者の感情反応を示す対応の感情マップ９０４ｂの付近に表示されるといったふうである。異なる表示フォーマットが利用されてもよい。

データマイニングを目的として、データベース（２４０〜２４３）からのデータとともにレポート情報がさらに分析されてもよい。これらのデータベース内のデータその他は、収集データ、対象者データ、および／または分析結果に含まれるパターンおよび関係を明らかにするのに使用される。年齢、性別、居住地その他を含む背景変数（準備または他の時に収集されたものなど）が、データマイニングに使用されてもよい。一つ以上のデータベースでは、データの全部または一部にわたって、マイニングモジュール２０８を介してデータマイニングが手動または自動で行われる。

さらに説明するため、本発明の様々な態様に関する付加的情報および例をここに示す。調査質問は、使用される場合、一度に一つ提示されるか、いくつかの調査質問が単一のスクリーンに一度に示される。刺激の順序、タイミング、表示形態は、管理者が何を分析したいかに基づいて、管理者および／または対象者／調査リーダーによって準備時に決定される。別の例として、管理者が、二つ以上の競合市場ブランドに対する対象者の反応を研究しようとすることがある。刺激を同時に並列表示することで、連続ディスプレイとは異なる、二つ以上のブランドに関する視覚的注意情報および感情反応を誘発する。他の比較研究が実施されてもよい。

研究／調査が実行されると、視線追跡装置および／または他のセンサにより監視される対象者の眼球特性および他の特性が、収集、記憶、および／または分析される。収集されたデータは、後の分析および／または再生のためタイマと同期化される。収集データは眼球特性データ、他の生理データ、環境データ、および／または他のデータを包含する。収集される眼球特性データは、対象者の瞳孔のサイズ、まばたき特性、眼球位置（ゲイズ）特性、他の眼球特性に関するデータを含む。収集された瞳孔データは、瞳孔サイズ、変化速度（収縮または拡張）、加速度（速度から導出される）、他の瞳孔データを包含する。収集されるまばたきデータは、例えば、まばたき頻度、まばたき持続時間、まばたきポテンション、まばたきの大きさ、他のまばたきデータを含む。収集されるゲイズデータは、例えば、サッカード、急速サッカード、眼振、他のゲイズデータを包含する。顔面筋（一般には表情筋）の運動に関するデータも収集される。対象者に刺激が提示されると、収集データは提示された刺激と同期化される。

視覚的注意情報成分は、視覚キュー（収集された眼球特性データなど）から解読される。これは例えば、視覚的注意分析サブモジュール２０５ａからの一つ以上のルールを印加することにより行なわれる。視覚的注意の判定および分析は、関心ポイントおよび関心追跡を含む様々な態様を伴う。関心ポイントは、眼球特性により判定される感情反応と結合された、視覚的刺激の一つまたは複数の部分に対する注視（ゲイズ）速度およびサッカードの種類に基づく。ゲイズ（眼球運動データなど）の処理は、例えば、サッカード、急速サッカード（ほぼ毎秒１００度を超える速度でのサッカードなど）、眼振（眼球の素早い不随意運動）、他のデータの分析を包含する。関心の特徴は、眼球運動の速度（ｄｅｇ／ｓ）および方向、注視時間（眼球がどれくらいの長さ、一つのポイントに注目しているか、など）、スペース（ｘ，ｙ，ｚまたは他の座標により画定されるエリアなど）内での注視の位置、注視ポイントへの戻り、関連性、奥行評価のための離接運動、走査作業を含む他の特徴を含む。

調節可能な注視／ゲイズ閾値を設定することによって、視覚的注意が判定される。対象者が最低４００ｍｓの間、凝視したのは視覚的刺激のどのポイントまたはエリアであるかを判定するため、ミリ秒（または他の時間単位）で測定されるスライドウィンドウが、例えば４００ｍｓの閾値として設定される。ユーザが少なくともこの時間ウィンドウの間、そのエリアを注視したままである場合には、この視覚的刺激のエリアが注視ポイントとして特定される。

注視ポイントに対応する感情反応（あれば喚起、価など）は、その注視ポイントでの関心のレベルを決定する。例えば、判定された注視ポイントが、所定の感情閾値を超える感情反応も誘発する場合には、この注視ポイントは関心ポイントと特定される。こうして、所定の時間（選択可能な閾値）にわたって対象者が凝視または注視して、測定可能な感情反応（感情閾値）を誘発する視覚的刺激のエリアによって、関心ポイント／エリアが特定される。

スライドウィンドウ閾値が例えば１００ｍｓと小さくなると、視覚的刺激に対する対象者の走査経路全体が明白になる。こうして管理者または分析者は、それでも視覚的刺激の特定の特徴が見られているかどうかと、どれほどの長さかを知ることができる。

対象者の視覚的注意のグラフィック表現は、ゲイズプロットの形で行なわれてもよい。

感情反応要素は、例えば感情価、感情喚起、感情カテゴリ、および／または感情タイプを含む。他の要素が判定されてもよい。感情価は、所与の刺激に対する対象者の感情反応が肯定的感情反応（楽しい、「好き」など）、否定的感情反応（不快、「嫌い」など）、中間的感情反応であるかどうかを示す。感情喚起は、校正された感情基準に基づいて所定の規模の反応対象の強度または感情強度の指標を含む。対象者の感情価および喚起と、瞳孔サイズ、まばたき特性、顔表情、眼球運動などの物理的特性との間には、周知の関係が存在する。

瞳孔サイズは、ほぼ１．５ｍｍから９ｍｍ以上までの範囲である。瞳孔データの処理はさらに、変化速度、刺激を受けてどれくらいの速さで拡張または収縮が起こるか、そして速度から導出される加速度を判定することを含む。瞳孔基準レベルと基準距離とを含む他の瞳孔関連データが、例えば最小および最大の瞳孔サイズとともに判定されてもよい。

まばたきデータの処理は、例えば、まばたき頻度、まばたき持続時間、まばたきポテンション、まばたき規模、他のまばたきデータを包含する。まばたき頻度測定は、素早いまばたき活動の間の時間枠を判定することを含む。

注意まばたきを生理的まばたきと区別するため、まばたき持続時間（例えばミリ秒）も処理される。まばたきパターンのファイルは、その持続時間に基づいて区別される。中間的まばたきは、校正中に測定されたまばたきに対応するものと分類される。長いまばたき間隔は注意の高まりを示し、一方、短いまばたきは、対象者が情報を探していることを示す。非常に短いまばたき間隔は混同を示すのに対して、半分のまばたきは強い警告の意味を指す働きがある。まばたき速度は、眼球視界量がどれほどの速さで変化するかを示し、まばたきの大きさはまばたき中に眼球がどれくらい見えるかを指す。

本発明の別の態様によれば、分析モジュール２０５は、感情反応分析サブモジュール２０５ｂからの一つ以上の規則を収集データに適用して一つ以上の感情要素を判定することにより、抽出された特徴データから感情キューを解読する。

ビジネスモデル
本発明の特徴および長所を利用するため、多様なビジネスモデルが使用される。例えば、サービスプロバイダは、対象者が実際に訪れる検査センターを運営するソフトウェア／システムを使用する。第三者（消費者製品会社など）に代わって検査／研究が実施される。このシナリオでは、検査について対象者を補助／案内するのに一人以上の検査リーダーが用いられる。リーダーがいる、またはいない自動運営検査センター（キオスクなど）が使用されてもよい。サービスプロバイダは、多様な基準で第三者から料金を回収する。例を挙げると、対象者単位の単位検査料金、複数の対象者についての単位検査料金、刺激単位料金、対象者割合単位、および／または他の基準を含む。加えて、出力のタイプ／詳細に応じて料金の額が変化してもよい。例えば、単純な視覚的注意出力（ゲイズプロットのみなど）は第１料金で提供される。より詳細な情報（スポットライト特徴を持つゲイズプロットなど）は第２料金で提供される。視覚的注意応報（スポットライト特徴がある場合とない場合のゲイズプロットなど）を基本的感情反応応報とともに同時に表現するのは、第３料金である。より詳細な感情反応情報（一つ以上の注視ポイントに対する感情反応など）を追加すると、第４料金である。他のタイプの出力、映像、動画などは、他の料金に値する。このようなサービスプロバイダについて、他のビジネスモデルが実行されてもよい。

別のビジネスモデルによれば、対象者が遠隔操作で相互作用を行なう（インターネットまたは他のネットワークを介した）遠隔アクセス可能な検査施設を、サービスプロバイダが運営する。対象者は、検査センター、キオスク、家庭または職場のコンピュータ、モバイル無線装置、他の方法のいずれかで、遠隔アクセス可能な検査施設にアクセスできる。料金は上記のように、または他の方法で請求される。

本発明の別の態様によれば、請求書作成発行プロセスを少なくとも部分的に自動化するのに、インボイスモジュール（インボイスモジュール２０７など）が使用される。インボイスモジュール２０７は、システム情報を監視して、料金を自動的に判断し、インボイスを作成する。料金情報は、準備段階または他で入力される。監視される情報は、実行される検査、検査を受ける対象者、提示される刺激、出力の詳細のタイプおよび／またはレベル、および／または料金の基準となる他の情報を含む。

以上の明細書では、特定の実施例について本発明を説明した。発明の広い趣旨および範囲から逸脱することなく、様々な変形および変更を行なってもよい。したがって、明細書および図面は、限定的ではなく例示的な意味で検討されるべきである。

本発明の一実施例による方法の高レベル表現の例である。 本発明の実施例による、対象者に提示された刺激に関する視覚的注意および感情反応情報を判定するためのシステムの一部分の例についての機能ブロック図を概略的に示す。 本発明の一実施例によるシステムの一部分の機能的ブロック図の例を示す図である。 本発明の様々な実施例による、検査を準備および実行して検査結果を分析するための方法の高レベル流れ図の例である。 本発明の実施例による視覚的刺激の例を示す図である。 本発明の実施例による、システムによって発生される出力の一例を示す図である。 本発明のいくつかの態様によるいくつかの出力要素の例を示す。 本発明の実施例による、システムによって発生される出力を示す図である。

符号の説明

８００ 視覚的注意情報
８０１〜８０５ 注視ポイント
８１０ 感情反応情報
９００ａ 第１刺激
９００ｂ 感情マップ
９０４ａ 第２刺激
９０４ｂ 感情マップ

Claims (48)

1. 少なくとも一つの刺激を対象者に提示することと、
   前記少なくとも一つの刺激が前記対象者に提示されている間に該対象者から生理データを収集して感情反応の判定を可能にすることと、
   プロセッサを介して前記生理データを処理して視覚的注意情報を判定することと、
   前記少なくとも一つの刺激に応じた感情反応情報を生成することと、
   前記少なくとも一つの刺激について、前記判定された視覚的注意情報の表現と、前記生成された感情反応情報の表現とを生成することと、
   から成る、一つ以上の刺激に対する対象者の感情反応を検出するためのコンピュータ利用方法。
2. 前記少なくとも一つの刺激が視覚的刺激である、請求項１に記載の方法。
3. 前記視覚的刺激が、文章、写真、芸術作品、映画、マルチメディアプレゼンテーション、および対話式コンテンツの少なくとも一つを包含する、請求項２に記載の方法。
4. 前記視覚的刺激が広告または宣伝の少なくとも一つを包含する、請求項２に記載の方法。
5. 前記視覚的刺激が製品の説明を包含する、請求項２に記載の方法。
6. 前記視覚的刺激が製品パッケージを包含する、請求項２に記載の方法。
7. 前記少なくとも一つの刺激が視覚的刺激と少なくとも一つの非視覚的刺激を包含する、請求項１に記載の方法。
8. 前記生理データが瞳孔データ、まばたきデータ、または凝視データの一つ以上を含む、請求項１に記載の方法。
9. 視線追跡装置を介して前記生理データが収集される、請求項１に記載の方法。
10. 判定された前記視覚的注意情報の前記表現と判定された前記感情反応情報の前記表現とがディスプレイまたはプリンタに出力される、請求項１に記載の方法。
11. 前記視覚的注意情報の判定が、
    前記少なくとも一つの刺激と関連する一つ以上の注視ポイントを判定することであって、注視ポイントが、少なくとも所定の時間量にわたって前記対象者が視覚的に注目するエリアを包含することと、
    を包含する、請求項１に記載の方法。
12. 判定された前記視覚的注意情報の前記示が、前記対象者に提示される少なくとも一つの刺激に重ねられたゲイズプロットを包含し、前記一つ以上の注視ポイントを前記少なくとも一つの刺激の残部と区別するように該一つ以上の注視ポイントが強調される、請求項１１に記載の方法。
13. 生成された前記感情反応情報の前記表現が、前記一つ以上の強調注視ポイントに対応する感情情報を含む、請求項１２に記載の方法。
    
14. さらに、
    一つ以上の注意ポイントを特定するように前記一つ以上の注視ポイントを統合すること、
    を包含する、請求項１１に記載の方法。
15. さらに、
    一つ以上の注意ポイントを特定するように前記一つ以上の注視ポイントを時間順に統合すること、
    を包含する、請求項１４に記載の方法。
16. さらに、
    特定された前記一つ以上の注意ポイントに番号を付けて時間順を示すこと、
    を包含する、請求項１５に記載の方法。
17. さらに、
    一つ以上の関心ポイントを特定するように前記感情反応情報が前記一つ以上の注視ポイントのいずれかに対応するかどうかを判定することと、
    を包含する、請求項１１に記載の方法。
18. 生成された前記感情反応情報の前記表現が、特定された各関心ポイントについての感情価および感情喚起の指標を含む、請求項１７に記載の方法。
19. 感情反応情報が、感情価要素と感情喚起要素の少なくとも一方を含む、請求項１に記載の方法。
20. 生成された前記感情反応情報の前記表現が、前記少なくとも一つの刺激に対する全般的感情反応を示す感情情報を含む、請求項１に記載の方法。
21. 前記対象者に提示される少なくとも一つの刺激に対応する一つ以上の調査質問に回答するように該対象者を促すこと、
    を包含する、請求項１に記載の方法。
22. 前記対象者への前記少なくとも一つの刺激の提示と該対象者からの前記生理データの収集とがキオスクで行なわれ、視覚的注目情報を判定するための該生理データの処置と感情反応情報の生成とが該キオスクから遠隔位置に設けられた処理センターで行なわれる、請求項１に記載の方法。
23. 前記少なくとも一つの刺激が実体により提供される広告を包含し、判定された前記視覚的注目情報の前記表現と生成された前記感情反応情報の表現とが評価のため該実体に提供される、請求項１に記載の方法。
24. 前記少なくとも一つの刺激が複数の対象者に提示され、判定された前記視覚的注意情報の前記表現と生成された前記感情反応情報の前記表現とがそれぞれ、該複数の対象者について判定された前記視覚的注意情報と感情反応情報の統合体を示す、請求項１に記載の方法。
25. 少なくとも一つの刺激を対象者に提示するための手段と、
    前記少なくとも一つの刺激が前記対象者に提示されている間に該対象者から生理データを収集して感情反応の判定を可能にするための手段と、
    前記生理データを処理して視覚的注意情報を判定するための手段と、
    前記少なくとも一つの刺激に応じた感情反応情報を生成するための手段と、
    前記少なくとも一つの刺激について、判定された前記視覚的注意情報の表現と、生成された前記感情反応情報の表現とを生成するための手段と、
    から成る、一つ以上の刺激に対する対象者の感情反応を検出するためのコンピュータ利用
    システム。
26. 前記少なくとも一つの刺激が視覚的刺激である、請求項２５に記載のシステム。
27. 前記視覚的刺激が、文章、写真、芸術作品、映画、マルチメディアプレゼンテーション、または対話式コンテンツの少なくとも一つを包含する、請求項２６のシステム。
28. 前記視覚的刺激が広告または宣伝の少なくとも一方を包含する、請求項２６に記載のシステム。
29. 前記視覚的刺激が製品の説明を包含する、請求項２６に記載のシステム。
30. 前記視覚的刺激が製品パッケージを包含する、請求項２６に記載のシステム。
31. 前記少なくとも一つの刺激が視覚的刺激と少なくとも一つの非視覚的刺激とを包含する、請求項２５に記載のシステム。
32. 前記生理データが瞳孔データ、まばたきデータ、または凝視データのうち一つ以上を含む、請求項２５に記載のシステム。
33. 前記生理データが視線追跡装置を介して収集される、請求項２５に記載のシステム。
34. 判定された前記視覚的注意情報の前記表現と判定された前記感情反応情報の前記表現とがディスプレイまたはプリンタに出力される、請求項２５に記載のシステム。
35. 前記生理データを処理して視覚的注意情報を判定するための前記手段がさらに、前記少なくとも一つの刺激と関連する一つ以上の注視ポイントを判定するための手段を包含し、注視ポイントが、少なくとも所定の時間量にわたって前記対象者が視覚的に注目するエリアを包含する、請求項２５に記載のシステム。
36. 判定された前記視覚的注意情報の前記表現が、前記対象者に提示される前記少なくとも一つの刺激に重ねられるゲイズプロットを包含し、前記一つ以上の注視ポイントを該少なくとも一つの刺激の残部と区別するように該一つ以上の注視ポイントが強調される、請求項３５に記載のシステム。
37. 生成された前記感情反応情報の前記表現が、前記一つ以上の強調注視ポイントの各々に対応する感情情報を含む、請求項３６に記載のシステム。
38. さらに、
    一つ以上の注意ポイントを特定するように前記一つ以上の注視ポイントを統合するための手段、
    を包含する、請求項３５に記載のシステム。
39. さらに、
    一つ以上の注意ポイントを特定するように前記一つ以上の注視ポイントを時間順に統合するための手段、
    を包含する、請求項３８に記載のシステム。
40. さらに、
    前記時間順を示すため、特定された前記一つ以上の注意ポイントに番号を付けるための手段、
    を包含する、請求項３９に記載のシステム。
41. さらに、
    一つ以上の関心ポイントを特定するように、前記感情反応情報が前記一つ以上の注視ポイントのいずれかに対応するかどうかを判定するための手段、
    を包含する、請求項３５に記載のシステム。
42. 生成された前記感情反応情報の前記表現が、特定された各関心ポイントについての感情価および感情喚起の指標を含む、請求項４１に記載のシステム。
43. 感情反応情報が、感情価要素または感情喚起要素の少なくとも一方を含む、請求項２５に記載のシステム。
44. 生成された前記感情反応情報の前記表現が前記少なくとも一つの刺激への全般的感情反応を示す感情情報を含む、請求項２５に記載のシステム。
45. さらに、
    前記対象者に提示される前記少なくとも一つの刺激に対応する一つ以上の調査質問に回答するように該対象者を促すための手段、
    を包含する、請求項２５に記載のシステム。
46. 前記少なくとも一つの刺激を前記対象者に提示するための手段と、前記対象者から前記生理データを収集するための前記手段とがキオスクに配置され、前記生理データを処理して視覚的注意情報を判定するための手段と感情反応情報を生成するための前記手段とが該キオスクから遠隔位置の処理センターに配置される、請求項２５に記載のシステム。
47. 前記少なくとも一つの刺激が実体によって提供される広告を包含し、判定された前記視覚的注意情報の前記表現と生成された前記感情反応情報の前記表現とが、評価のため該実体に提供される、請求項２５に記載のシステム。
48. 前記少なくとも一つの刺激が複数の対象者に提示され、判定された前記視覚的注意情報の表現と生成された前記感情反応情報の表現とがそれぞれ、該複数の対象者について判定された該視覚的注意情報と感情反応情報との統合体を示す、請求項２５に記載のシステム。

Images