以下、本発明に係る評価装置、評価方法、及び評価プログラムの実施形態を図面に基づいて説明する。なお、この実施形態によりこの発明が限定されるものではない。また、下記実施形態における構成要素には、当業者が置換可能かつ容易なもの、あるいは実質的に同一のものが含まれる。
以下の説明においては、三次元グローバル座標系を設定して各部の位置関係について説明する。所定面の第1軸と平行な方向をX軸方向とし、第1軸と直交する所定面の第2軸と平行な方向をY軸方向とし、第1軸及び第2軸のそれぞれと直交する第3軸と平行な方向をZ軸方向とする。所定面はXY平面を含む。
(視線検出装置)
図1は、第1実施形態に係る視線検出装置100の一例を模式的に示す斜視図である。視線検出装置100は、認知症などの認知機能障害および脳機能障害の評価を行う評価装置として用いられる。図1に示すように、視線検出装置100は、表示装置101と、ステレオカメラ装置102と、照明装置103とを備える。
表示装置101は、液晶ディスプレイ(liquid crystal display:LCD)又は有機ELディスプレイ(organic electroluminescence display:OLED)のようなフラットパネルディスプレイを含む。本実施形態において、表示装置101は、表示画面101Sを有する。表示画面101Sは、画像を表示する。本実施形態において、表示画面101Sは、例えば被験者の視機能を評価するための指標を表示する。表示画面101Sは、XY平面と実質的に平行である。X軸方向は表示画面101Sの左右方向であり、Y軸方向は表示画面101Sの上下方向であり、Z軸方向は表示画面101Sと直交する奥行方向である。
ステレオカメラ装置102は、第1カメラ102A及び第2カメラ102Bを有する。ステレオカメラ装置102は、表示装置101の表示画面101Sよりも下方に配置される。第1カメラ102Aと第2カメラ102BとはX軸方向に配置される。第1カメラ102Aは、第2カメラ102Bよりも−X方向に配置される。第1カメラ102A及び第2カメラ102Bはそれぞれ、赤外線カメラを含み、例えば波長850[nm]の近赤外光を透過可能な光学系と、その近赤外光を受光可能な撮像素子とを有する。
照明装置103は、第1光源103A及び第2光源103Bを有する。照明装置103は、表示装置101の表示画面101Sよりも下方に配置される。第1光源103Aと第2光源103BとはX軸方向に配置される。第1光源103Aは、第1カメラ102Aよりも−X方向に配置される。第2光源103Bは、第2カメラ102Bよりも+X方向に配置される。第1光源103A及び第2光源103Bはそれぞれ、LED(light emitting diode)光源を含み、例えば波長850[nm]の近赤外光を射出可能である。なお、第1光源103A及び第2光源103Bは、第1カメラ102Aと第2カメラ102Bとの間に配置されてもよい。
照明装置103は、検出光である近赤外光を射出して、被験者の眼球111を照明する。ステレオカメラ装置102は、第1光源103Aから射出された検出光が眼球111に照射されたときに第2カメラ102Bで眼球111の一部(以下、これを含めて「眼球」とする)を撮影し、第2光源103Bから射出された検出光が眼球111に照射されたときに第1カメラ102Aで眼球111を撮影する。
第1カメラ102A及び第2カメラ102Bの少なくとも一方からフレーム同期信号が出力される。第1光源103A及び第2光源103Bは、フレーム同期信号に基づいて検出光を射出する。第1カメラ102Aは、第2光源103Bから射出された検出光が眼球111に照射されたときに、眼球111の画像データを撮影する。第2カメラ102Bは、第1光源103Aから射出された検出光が眼球111に照射されたときに、眼球111の画像データを撮影する。
眼球111に検出光が照射されると、その検出光の一部は瞳孔112で反射し、その瞳孔112からの光がステレオカメラ装置102に入射する。また、眼球111に検出光が照射されると、角膜の虚像である角膜反射像113が眼球111に形成され、その角膜反射像113からの光がステレオカメラ装置102に入射する。
第1カメラ102A及び第2カメラ102Bと第1光源103A及び第2光源103Bとの相対位置が適切に設定されることにより、瞳孔112からステレオカメラ装置102に入射する光の強度は低くなり、角膜反射像113からステレオカメラ装置102に入射する光の強度は高くなる。すなわち、ステレオカメラ装置102で撮影される瞳孔112の画像は低輝度となり、角膜反射像113の画像は高輝度となる。ステレオカメラ装置102は、撮影される画像の輝度に基づいて、瞳孔112の位置及び角膜反射像113の位置を検出することができる。
図2は、本実施形態に係る視線検出装置100のハードウェア構成の一例を示す図である。図2に示すように、視線検出装置100は、表示装置101と、ステレオカメラ装置102と、照明装置103と、コンピュータシステム20と、入出力インターフェース装置30と、駆動回路40と、出力装置50と、入力装置60とを備える。
コンピュータシステム20と、駆動回路40と、出力装置50と、入力装置60とは、入出力インターフェース装置30を介してデータ通信する。コンピュータシステム20は、演算処理装置20A及び記憶装置20Bを含む。演算処理装置20Aは、CPU(central processing unit)のようなマイクロプロセッサを含む。記憶装置20Bは、ROM(read only memory)及びRAM(random access memory)のようなメモリ又はストレージを含む。演算処理装置20Aは、記憶装置20Bに記憶されているコンピュータプログラム20Cに従って演算処理を実施する。
駆動回路40は、駆動信号を生成して、表示装置101、ステレオカメラ装置102、及び照明装置103に出力する。また、駆動回路40は、ステレオカメラ装置102で撮影された眼球111の画像データを、入出力インターフェース装置30を介してコンピュータシステム20に供給する。
出力装置50は、フラットパネルディスプレイのような表示装置を含む。なお、出力装置50は、印刷装置を含んでもよい。入力装置60は、操作されることにより入力データを生成する。入力装置60は、コンピュータシステム用のキーボード又はマウスを含む。なお、入力装置60が表示装置である出力装置50の表示画面に設けられたタッチセンサを含んでもよい。
本実施形態においては、表示装置101とコンピュータシステム20とは別々の装置である。なお、表示装置101とコンピュータシステム20とが一体でもよい。例えば視線検出装置100がタブレット型パーソナルコンピュータを含む場合、そのタブレット型パーソナルコンピュータに、コンピュータシステム20、入出力インターフェース装置30、駆動回路40、及び表示装置101が搭載されてもよい。
図3は、本実施形態に係る視線検出装置100の一例を示す機能ブロック図である。図3に示すように、入出力インターフェース装置30は、入出力部302を有する。駆動回路40は、表示装置101を駆動するための駆動信号を生成して表示装置101に出力する表示装置駆動部402と、第1カメラ102Aを駆動するための駆動信号を生成して第1カメラ102Aに出力する第1カメラ入出力部404Aと、第2カメラ102Bを駆動するための駆動信号を生成して第2カメラ102Bに出力する第2カメラ入出力部404Bと、第1光源103A及び第2光源103Bを駆動するための駆動信号を生成して第1光源103A及び第2光源103Bに出力する光源駆動部406とを有する。また、第1カメラ入出力部404Aは、第1カメラ102Aで撮影された眼球111の画像データを、入出力部302を介してコンピュータシステム20に供給する。第2カメラ入出力部404Bは、第2カメラ102Bで撮影された眼球111の画像データを、入出力部302を介してコンピュータシステム20に供給する。
コンピュータシステム20は、視線検出装置100を制御する。コンピュータシステム20は、表示制御部202と、光源制御部204と、画像データ取得部206と、入力データ取得部208と、位置検出部210と、曲率中心算出部212と、注視点検出部214と、領域設定部216と、判定部218と、演算部220と、記憶部222と、評価部224と、出力制御部226とを有する。コンピュータシステム20の機能は、演算処理装置20A及び記憶装置20Bによって発揮される。
表示制御部202は、表示画面101Sに特定対象物を表示する第1表示動作と、第1表示動作を行った後に特定対象物と前記特定対象物とは異なる複数の比較対象物とを表示画面101Sに表示する第2表示動作と、を含む表示動作を行う。特定対象物は、被験者に記憶させるための対象物である。複数の比較対象物は、被験者に特定対象物を見つけさせるために、特定対象物と並べて表示画面101Sに表示する対象物である。また、表示制御部202は、第1表示動作で表示される特定対象物を覚えるように被験者に指示するための表示を表示画面101Sに表示させてもよい。また、表示制御部202は第2表示動作で表示される特定対象物と複数の比較対象物との中から特定対象物を注視するように被験者に指示するための表示を表示画面101Sに表示させてもよい。
光源制御部204は、光源駆動部406を制御して、第1光源103A及び第2光源103Bの作動状態を制御する。光源制御部204は、第1光源103Aと第2光源103Bとが異なるタイミングで検出光を射出するように第1光源103A及び第2光源103Bを制御する。
画像データ取得部206は、第1カメラ102A及び第2カメラ102Bを含むステレオカメラ装置102によって撮影された被験者の眼球111の画像データを、入出力部302を介してステレオカメラ装置102から取得する。
入力データ取得部208は、入力装置60が操作されることにより生成された入力データを、入出力部302を介して入力装置60から取得する。
位置検出部210は、画像データ取得部206で取得された眼球111の画像データに基づいて、瞳孔中心の位置データを検出する。また、位置検出部210は、画像データ取得部206で取得された眼球111の画像データに基づいて、角膜反射中心の位置データを検出する。瞳孔中心は、瞳孔112の中心である。角膜反射中心は、角膜反射像113の中心である。位置検出部210は、被験者の左右それぞれの眼球111について、瞳孔中心の位置データ及び角膜反射中心の位置データを検出する。
曲率中心算出部212は、画像データ取得部206で取得された眼球111の画像データに基づいて、眼球111の角膜曲率中心の位置データを算出する。
注視点検出部214は、画像データ取得部206で取得された眼球111の画像データに基づいて、被験者の注視点の位置データを検出する。本実施形態において、注視点の位置データとは、三次元グローバル座標系で規定される被験者の視線ベクトルと表示装置101の表示画面101Sとの交点の位置データをいう。注視点検出部214は、眼球111の画像データから取得された瞳孔中心の位置データ及び角膜曲率中心の位置データに基づいて、被験者の左右それぞれの眼球111の視線ベクトルを検出する。視線ベクトルが検出された後、注視点検出部214は、視線ベクトルと表示画面101Sとの交点を示す注視点の位置データを検出する。
領域設定部216は、第2表示動作が行われる表示期間において、表示装置101の表示画面101Sのうち特定対象物に対応した特定領域と、それぞれの比較対象物に対応した比較領域とを設定する。
判定部218は、第2表示動作が行われる表示期間において、視点の位置データに基づいて、注視点が特定領域及び比較領域に存在するか否かをそれぞれ判定し、判定データを出力する。判定部218は、例えば一定時間毎に注視点が特定領域及び比較領域に存在するか否かを判定する。一定時間としては、例えば第1カメラ102A及び第2カメラ102Bから出力されるフレーム同期信号の周期(例えば20[msec]毎)とすることができる。
演算部220は、判定部218の判定データに基づいて、表示期間における注視点の移動の経過を示す移動経過データ(注視点データと表記する場合がある)を算出する。移動経過データは、表示期間の開始時点から注視点が最初に特定領域に到達した到達時点までの到達時間データと、注視点が最初に特定領域に到達するまでに複数の比較領域の間で注視点の位置が移動する回数を示す移動回数データと、表示期間に注視点が特定領域または比較領域に存在した存在時間を示す存在時間データと、特定領域及び比較領域のうち表示時間において注視点が最後に存在していた領域を示す最終領域データと、を含む。
なお、演算部220は、映像の再生時間を管理する管理タイマと、表示画面101Sに映像が表示されてからの経過時間を検出する検出タイマT1を有する。演算部220は、特定領域について、注視点が存在すると判定された判定回数をカウントするカウンタを有する。
評価部224は、移動経過データに基づいて、被験者の評価データを求める。評価データは、表示動作において表示画面101Sに表示される特定対象物を被験者が注視できているかを評価するデータである。
記憶部222は、上記の判定データ、移動経過データ(存在時間データ、移動回数データ、最終領域データ、到達時間データ)、及び評価データを記憶する。また、記憶部222は、画像を表示する処理と、表示画面を観察する被験者の注視点の位置を検出する処理と、表示画面に特定対象物を表示する第1表示動作と、第1表示動作を行った後に特定対象物と特定対象物とは異なる複数の比較対象物とを表示画面に表示する第2表示動作と、を含む表示動作を行う処理と、表示画面において、特定対象物に対応した特定領域と、それぞれの比較対象物に対応した比較領域とを設定する処理と、注視点の位置データに基づいて、第2表示動作が行われる表示期間に注視点が特定領域及び比較領域に存在するか否かをそれぞれ判定し、判定データを出力する処理と、判定データに基づいて、表示期間における注視点の移動の経過を示す移動経過データを算出する処理と、移動経過データに基づいて、被験者の評価データを求める処理と、評価データを出力する処理とをコンピュータに実行させる評価プログラムを記憶する。
出力制御部226は、表示装置101及び出力装置50の少なくとも一方にデータを出力する。
次に、本実施形態に係る曲率中心算出部212の処理の概要について説明する。曲率中心算出部212は、眼球111の画像データに基づいて、眼球111の角膜曲率中心の位置データを算出する。図4及び図5は、本実施形態に係る角膜曲率中心110の位置データの算出方法を説明するための模式図である。図4は、1つの光源103Cで眼球111が照明される例を示す。図5は、第1光源103A及び第2光源103Bで眼球111が照明される例を示す。
まず、図4に示す例について説明する。光源103Cは、第1カメラ102Aと第2カメラ102Bとの間に配置される。瞳孔中心112Cは、瞳孔112の中心である。角膜反射中心113Cは、角膜反射像113の中心である。図4において、瞳孔中心112Cは、眼球111が1つの光源103Cで照明されたときの瞳孔中心を示す。角膜反射中心113Cは、眼球111が1つの光源103Cで照明されたときの角膜反射中心を示す。角膜反射中心113Cは、光源103Cと角膜曲率中心110とを結ぶ直線上に存在する。角膜反射中心113Cは、角膜表面と角膜曲率中心110との中間点に位置付けられる。角膜曲率半径109は、角膜表面と角膜曲率中心110との距離である。角膜反射中心113Cの位置データは、ステレオカメラ装置102によって検出される。角膜曲率中心110は、光源103Cと角膜反射中心113Cとを結ぶ直線上に存在する。曲率中心算出部212は、その直線上において角膜反射中心113Cからの距離が所定値となる位置データを、角膜曲率中心110の位置データとして算出する。所定値は、一般的な角膜の曲率半径値などから事前に定められた値であり、記憶部222に記憶されている。
次に、図5に示す例について説明する。本実施形態においては、第1カメラ102A及び第2光源103Bと、第2カメラ102B及び第1光源103Aとは、第1カメラ102Aと第2カメラ102Bとの中間位置を通る直線に対して左右対称の位置に配置される。第1カメラ102Aと第2カメラ102Bとの中間位置に仮想光源103Vが存在するとみなすことができる。角膜反射中心121は、第2カメラ102Bで眼球111を撮影した画像における角膜反射中心を示す。角膜反射中心122は、第1カメラ102Aで眼球111を撮影した画像における角膜反射中心を示す。角膜反射中心124は、仮想光源103Vに対応する角膜反射中心を示す。角膜反射中心124の位置データは、ステレオカメラ装置102で撮影された角膜反射中心121の位置データ及び角膜反射中心122の位置データに基づいて算出される。ステレオカメラ装置102は、ステレオカメラ装置102に規定される三次元ローカル座標系において角膜反射中心121の位置データ及び角膜反射中心122の位置データを検出する。ステレオカメラ装置102について、事前にステレオ較正法によるカメラ較正が実施され、ステレオカメラ装置102の三次元ローカル座標系を三次元グローバル座標系に変換する変換パラメータが算出される。その変換パラメータは、記憶部222に記憶されている。曲率中心算出部212は、ステレオカメラ装置102で撮影された角膜反射中心121の位置データ及び角膜反射中心122の位置データを、変換パラメータを使って、三次元グローバル座標系における位置データに変換する。曲率中心算出部212は、三次元グローバル座標系で規定される角膜反射中心121の位置データ及び角膜反射中心122の位置データに基づいて、三次元グローバル座標系における角膜反射中心124の位置データを算出する。角膜曲率中心110は、仮想光源103Vと角膜反射中心124とを結ぶ直線123上に存在する。曲率中心算出部212は、直線123上において角膜反射中心124からの距離が所定値となる位置データを、角膜曲率中心110の位置データとして算出する。所定値は、一般的な角膜の曲率半径値などから事前に定められた値であり、記憶部222に記憶されている。
このように、光源が2つある場合でも、光源が1つである場合の方法と同様の方法で、角膜曲率中心110が算出される。
角膜曲率半径109は、角膜表面と角膜曲率中心110との距離である。したがって、角膜表面の位置データ及び角膜曲率中心110の位置データが算出されることにより、角膜曲率半径109が算出される。
次に、本実施形態に係る視線検出方法の一例について説明する。図6は、本実施形態に係るキャリブレーション処理の一例を説明するための模式図である。キャリブレーション処理では、被験者に注視させるため、目標位置130が設定される。目標位置130は、三次元グローバル座標系において規定される。本実施形態において、目標位置130は、例えば表示装置101の表示画面101Sの中央位置に設定される。なお、目標位置130は、表示画面101Sの端部位置に設定されてもよい。出力制御部226は、設定された目標位置130に目標画像を表示する。直線131は、仮想光源103Vと角膜反射中心113Cとを結ぶ直線である。直線132は、目標位置130と瞳孔中心112Cとを結ぶ直線である。角膜曲率中心110は、直線131と直線132との交点である。曲率中心算出部212は、仮想光源103Vの位置データと、目標位置130の位置データと、瞳孔中心112Cの位置データと、角膜反射中心113Cの位置データとに基づいて、角膜曲率中心110の位置データを算出することができる。
次に、注視点検出処理について説明する。注視点検出処理は、キャリブレーション処理の後に実施される。注視点検出部214は、眼球111の画像データに基づいて、被験者の視線ベクトル及び注視点の位置データを算出する。図7は、本実施形態に係る注視点検出処理の一例を説明するための模式図である。図7において、注視点165は、一般的な曲率半径値を用いて算出された角膜曲率中心から求めた注視点を示す。注視点166は、キャリブレーション処理で求められた距離126を用いて算出された角膜曲率中心から求めた注視点を示す。瞳孔中心112Cは、キャリブレーション処理において算出された瞳孔中心を示し、角膜反射中心113Cは、キャリブレーション処理において算出された角膜反射中心を示す。直線173は、仮想光源103Vと角膜反射中心113Cとを結ぶ直線である。角膜曲率中心110は、一般的な曲率半径値から算出した角膜曲率中心の位置である。距離126は、キャリブレーション処理により算出した瞳孔中心112Cと角膜曲率中心110との距離である。角膜曲率中心110Hは、距離126を用いて角膜曲率中心110を補正した補正後の角膜曲率中心の位置を示す。角膜曲率中心110Hは、角膜曲率中心110が直線173上に存在すること、及び瞳孔中心112Cと角膜曲率中心110との距離が距離126であることから求められる。これにより、一般的な曲率半径値を用いる場合に算出される視線177は、視線178に補正される。また、表示装置101の表示画面101S上の注視点は、注視点165から注視点166に補正される。
[評価方法]
次に、本実施形態に係る評価方法について説明する。本実施形態に係る評価方法では、上記の視線検出装置100を用いることにより、被験者の視機能として、認知症などの認知機能障害および脳機能障害を評価する。
図8は、本実施形態に係る評価方法において、表示画面101Sに表示する指示情報I1の一例を示す図である。図8に示すように、表示制御部202は、次に表示する特定対象物(M1:図9参照)を被験者に記憶させるための指示情報I1を表示画面101Sに表示する。
表示制御部202は、指示情報I1を表示画面101Sに表示させた後、第1表示動作として、特定対象物を表示画面101Sに表示する。図9は、表示画面101Sに表示する特定対象物M1の一例を示す図である。図9に示すように、表示制御部202は、第1表示動作において、例えば円形と三角形とを組み合わせた形状の特定対象物M1を表示させているが、これに限定されない。表示制御部202は、特定対象物M1を所定時間(例えば、数秒程度)表示画面101Sに表示することにより、被験者に特定対象物M1を注視させて、当該特定対象物M1を記憶させる。
図10は、表示画面101Sに表示する指示情報I2の一例を示す図である。図10に示すように、表示制御部202は、第1表示動作を所定時間行った後、次に表示する画面において特定対象物M1を注視するように被験者に指示するための指示情報I2を表示画面101Sに表示する。
図11は、表示画面101Sに複数の対象物を表示する場合の一例を示す図である。表示制御部202は、指示情報I2を表示画面101Sに表示させた後、第2表示動作として、図11に示すように、特定対象物M1と複数の比較対象物M2〜M4を表示画面101Sに表示する。
比較対象物M2〜M4は、特定対象物M1と類似する形状を有してもよいし、特定対象物M1とは非類似の形状を有してもよい。図11に示す例では、比較対象物M2は台形と円形とを組み合わせた形状、比較対象物M3は正方形と円形を組み合わせた形状、比較対象物M4は円形と正六角形とを組み合わせた形状をそれぞれ有している。表示制御部202は、特定対象物M1と比較対象物M2〜M4とを含む複数の対象物を表示画面101Sに表示することにより、被験者に特定対象物M1を見つけさせると共に、見つけさせた特定対象物M1を注視させる。
なお、図11では、表示画面101Sにおいて、例えば計測後に結果表示される注視点Pの一例を示しているが、当該注視点Pは、実際には表示画面101Sには表示されない。注視点の位置データの検出は、例えば第1カメラ102A及び第2カメラ102Bから出力されるフレーム同期信号の周期で(例えば20[msec]毎に)実施される。第1カメラ102A及び第2カメラ102Bは、同期して撮像する。
また、第2表示動作が行われる表示期間において、領域設定部216は、特定対象物M1に対応した特定領域A1を設定する。また、領域設定部216は、比較対象物M2〜M4のそれぞれに対応した比較領域A2〜A4を設定する。なお、特定領域A1及び比較領域A2〜A4は、表示画面101Sには表示されない。
領域設定部216は、例えば特定対象物M1を含む矩形の範囲に特定領域A1を設定する。同様に、領域設定部216は、例えば比較対象物M2〜M4を含む矩形の範囲にそれぞれ比較領域A2〜A4を設定する。なお、特定領域A1、比較領域A2〜A4の形状については、矩形に限定されず、円形、楕円形、多角形等、他の形状であってもよい。
認知機能障害および脳機能障害の症状は、記憶力に影響することが知られている。被験者が認知機能障害および脳機能障害者ではない場合、第2表示動作において表示画面101Sに表示される比較対象物M2〜M4を1つ1つ見て、第1表示動作において記憶した特定対象物M1と比べた上で同一ではないと判定し、最終的には特定対象物M1を発見して注視することができる。一方、被験者が認知機能障害および脳機能障害者である場合、特定対象物M1を記憶することができない場合、または記憶しても直ぐに忘れてしまう場合がある。そのため、上記のような比較ができず、特定対象物M1を注視できないことがある。
このため、例えば以下の手順を行うことにより、被験者を評価することが可能である。まず、第1表示動作として、表示画面101Sに特定対象物M1を表示させて被験者に記憶させる。その後、第2表示動作として、表示画面101Sに特定対象物M1と複数の比較対象物M2〜M4とを表示させた状態とする。第2表示動作では、被験者に特定対象物M1に視点を合わせるように指示する。この場合に、被験者が複数の比較対象物M2〜M4を1つ1つ注視しているか否か、被験者が最終的に正解となる特定対象物M1に到達できるか否か、被験者が特定対象物M1に到達するまでに要する時間の長さはどれだけか、被験者が特定対象物M1を注視できているか否か、等の観点から被験者を評価することが可能である。
第2表示動作において、被験者の注視点Pの位置データが検出された場合、判定部218は、被験者の注視点が特定領域A1、及び複数の比較領域A2〜A4に存在するかを判定し、判定データを出力する。
演算部220は、判定データに基づいて、表示期間における注視点Pの移動の経過を示す移動経過データを算出する。演算部220は、移動経過データとして、存在時間データと、移動回数データと、最終領域データと、到達時間データとを算出する。
存在時間データは、注視点Pが特定領域A1に存在した存在時間を示す。本実施形態では、判定部218により注視点が特定領域A1に存在すると判定された回数が多いほど、特定領域A1に注視点Pが存在した存在時間が長いと推定することができる。したがって、存在時間データは、特定領域A1に注視点が存在すると判定部218に判定された回数とすることができる。つまり、演算部220は、カウンタにおけるカウント値CNTAを存在時間データとすることができる。
また、移動回数データは、注視点Pが最初に特定領域A1に到達するまでに複数の比較領域A2〜A4の間で注視点Pの位置が移動する移動回数を示す。したがって、演算部220は、特定領域A1及び比較領域A2〜A4の領域間で注視点Pが何回移動したかをカウントし、注視点Pが特定領域A1に到達するまでのカウント結果を移動回数データとすることができる。
また、最終領域データは、特定領域A1及び比較領域A2〜A4のうち表示時間において注視点Pが最後に存在していた領域、つまり被験者が回答として最後に注視していた領域を示す。演算部220は、注視点Pが存在する領域を当該注視点Pの検出毎に更新することにより、表示期間が終了した時点における検出結果を最終領域データとすることができる。
また、到達時間データは、表示期間の開始時点から注視点が特定領域A1に最初に到達した到達時点までの時間を示す。したがって、演算部220は、表示期間の開始からの経過時間をタイマT1によって測定し、注視点が最初に特定領域A1に到達した時点でフラグ値を1としてタイマT1の測定値を検出することで、当該タイマT1の検出結果を到達時間データとすることができる。
本実施形態において、評価部224は、存在時間データ、移動回数データ、最終領域データ、及び到達時間データに基づいて評価データを求める。
ここで、最終領域データのデータ値をD1、存在時間データのデータ値をD2、到達時間データのデータ値をD3、移動回数データのデータ値をD4とする。ただし、最終領域データのデータ値D1は、被験者の最終的な注視点Pが特定領域A1に存在していれば(つまり、正解であれば)1、特定領域A1に存在していなければ(つまり、不正解であれば)0とする。また、存在時間データのデータ値D2は、特定領域A1に注視点Pが存在した秒数とする。なお、データ値D2は、表示期間よりも短い秒数の上限値が設けられてもよい。また、到達時間データのデータ値D3は、到達時間の逆数(例えば、1/(到達時間)÷10)(10:到達時間の最小値を0.1秒として到達時間評価値を1以下とするための係数)とする。また、移動回数データのデータ値D4は、カウンタ値をそのまま用いることとする。なお、データ値D4は、適宜上限値が設けられてもよい。
この場合、評価値ANSは、例えば、
ANS=D1・K1+D2・K2+D3・K3+D4・K4
と表すことができる。なお、K1〜K4は、重みづけのための定数である。定数K1〜K4については、適宜設定することができる。
上記式で示される評価値ANSは、最終領域データのデータ値D1が1である場合、存在時間データのデータ値D2が大きい場合、到達時間データのデータ値D3が大きい場合、移動回数データのデータ値D4の値が大きい場合に、値が大きくなる。つまり、最終的な注視点Pが特定領域A1に存在し、特定領域A1における注視点Pの存在時間が長く、表示期間の開始時点から特定領域A1に注視点Pが到達する到達時間が短く、注視点Pが各領域を移動する移動回数が多いほど、評価値ANSが大きくなる。
一方、評価値ANSは、最終領域データのデータ値D1が0である場合、存在時間データのデータ値D2が小さい場合、到達時間データのデータ値D3が小さい場合、移動回数データのデータ値D4が小さい場合に、値が小さくなる。つまり、最終的な注視点Pが特定領域A1に存在せず、特定領域A1における注視点Pの存在時間が短く、表示期間の開始時点から特定領域A1に注視点Pが到達する到達時間が長く、注視点Pが各領域を移動する移動回数が少ないほど、評価値ANSが小さくなる。
したがって、評価部224は、評価値ANSが所定値以上か否かを判断することで評価データを求めることができる。例えば評価値ANSが所定値以上である場合、被験者が認知機能障害および脳機能障害者である可能性は低いと評価することができる。また、評価値ANSが所定値未満である場合、被験者が認知機能障害および脳機能障害者である可能性は高いと評価することができる。
また、評価部224は、評価値ANSの値を記憶部222に記憶させておくことができる。例えば、同一の被験者についての評価値ANSを累積的に記憶し、過去の評価値と比較した場合の評価を行ってもよい。例えば、評価値ANSが過去の評価値よりも高い値となった場合、脳機能が前回の評価に比べて改善されている旨の評価を行うことができる。また、評価値ANSの累積値が徐々に高くなっている場合等には、脳機能が徐々に改善されている旨の評価を行うことができる。
また、評価部224は、存在時間データ、移動回数データ、最終領域データ、及び到達時間データを個別又は複数組み合わせて評価を行ってもよい。例えば、多くの対象物を見ている間に、偶発的に特定領域A1に注視点Pが到達した場合には、移動回数データのデータ値D4は小さくなる。この場合には、上述した存在時間データのデータ値D2と併せて評価を行うことができる。例えば、移動回数が少ない場合であっても存在時間が長い場合には、正解となる特定領域A1を注視できていると評価することができる。また、移動回数が少ない場合であって存在時間も短い場合、偶発的に注視点Pが特定領域A1を通過したものがあると評価することができる。
また、移動回数が少ない場合において、最終領域が特定領域A1であれば、例えば正解の特定領域A1に注視点移動が少なくて到達したと評価することができる。一方、上述した移動回数が少ない場合において、最終領域が特定領域A1でなければ、例えば偶発的に注視点Pが特定領域A1を通過したものあると評価することができる。
本実施形態において、出力制御部226は、評価部224が評価データを出力した場合、評価データに応じて、例えば「被験者は認知機能障害および脳機能障害者である可能性が低いと思われます」の文字データや、「被験者は認知機能障害および脳機能障害者である可能性が高いと思われます」の文字データ等を出力装置50に出力させることができる。また、出力制御部226は、同一の被験者についての評価値ANSが過去の評価値ANSに比べて高くなっている場合、「脳機能が改善されています」等の文字データ等を出力装置50に出力させることができる。
図12は、表示画面101Sに特定対象物及び指示情報I3を同時に表示する場合の例を示す図である。また、図13は、表示画面101Sに特定対象物及び複数の比較対象物を表示する場合の他の例を示す図である。図12に示すように、表示制御部202は、第1表示動作において、表示画面101Sに特定対象物M5を表示すると共に、当該特定対象物M5と同一の図形を注視するように被験者に指示するための指示情報I3を表示画面101Sに同時に表示させてもよい。表示制御部202は、第1表示動作の後、第2表示動作においては、図13に示すように特定対象物M5と比較対象物M6、M7とを表示することができる。この場合、表示制御部202は、例えば特定対象物M5と比較対象物M6、M7とのように、同一の形状(例、五角形)を用いて形成された図形を表示させてもよい。このように、特定対象物M5と比較対象物M6、M7とを類似する図形として表示することにより、被験者の図形認識機能についても評価することができる。また、領域設定部216は、特定対象物M5に対応した特定領域A5を設定し、比較対象物M6、M7に対応した比較領域A6、A7を設定することができる。このように、特定対象物M5と指示情報I3とを表示画面101Sに同時に表示することにより、検査時間の短縮化を図ることができる。
図14は、表示画面101Sに特定対象物及び指示情報I4を表示する場合の他の例を示す図である。図15は、表示画面101Sに特定対象物及び複数の比較対象物を表示する場合の他の例を示す図である。図14に示すように、表示制御部202は、第1表示動作において、特定対象物M8として、人物の顔を表示することができる。なお、この場合においても、表示制御部202は、特定対象物M8と指示情報I4とを同時に表示させてもよい。また、図14に示す指示情報のように、被験者に特定対象物M8の人物を覚えるように指示する内容であってもよい。
第1表示動作の後、第2表示動作において、表示制御部202は、図15に示すように特定対象物M8と、当該特定対象物M8とは異なる人物の顔である比較対象物M9〜M11とを表示することができる。また、領域設定部216は、特定対象物M8に対応した特定領域A8を設定し、比較対象物M9〜M11に対応した比較領域A9〜A11を設定することができる。なお、図15に示すように、表示制御部202は、第2表示動作において、特定対象物M8及び比較対象物M9〜M11と指示情報I5とを同時に表示させてもよい。このように、表示制御部202は、第1表示動作及び第2表示動作のそれぞれについて、指示情報を表示させてもよい。これにより、検査時間の更なる短縮化を図ることができる。
次に、本実施形態に係る評価方法の一例について、図16を参照しながら説明する。図16は、本実施形態に係る評価方法の一例を示すフローチャートである。本実施形態においては、表示制御部202は、映像の再生を開始させる(ステップS101)。表示画面101Sには、評価用映像部分までの待ち時間を経過した後(ステップS102)、タイマT1をリセットし(ステップS103)、カウンタのカウント値CNTAをリセットし(ステップS104)、フラグ値を0にする(ステップS105)。
注視点検出部214は、表示装置101に表示された映像を被験者に見せた状態で、規定のサンプリング周期(例えば20[msec])毎に、表示装置101の表示画面101Sにおける被験者の注視点の位置データを検出する(ステップS106)。位置データが検出された場合(ステップS107のNo)、判定部218は、位置データに基づいて注視点Pが存在する領域を判定する(ステップS108)。
注視点Pが特定領域A1に存在すると判定された場合(ステップS109のYes)、演算部220は、フラグ値が1であるか否か、つまり、注視点Pが特定領域A1に到達したのが最初か否か(1:到達済み、0:未到達)を判定する(ステップS110)。フラグ値が1である場合(ステップS110のYes)、演算部220は、以下のステップS111からステップS113を飛ばして後述するステップS114の処理を行う。
また、フラグ値が1ではない場合、つまり、特定領域A1に注視点Pが到達したのが最初である場合(ステップS110のNo)、演算部220は、タイマT1の計測結果を到達時間データとして抽出する(ステップS111)。また、演算部220は、特定領域Aに到達するまでに注視点Pが領域間の移動を何回行ったかを示す移動回数データを記憶部222に記憶させる(ステップS112)。その後、演算部220は、フラグ値を1に変更する(ステップS113)。
次に、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が特定領域A1であるか否かを判定する(ステップS114)。演算部220は、最終領域が特定領域A1であると判定した場合(ステップS114のYes)、以下のステップS115及びステップS116を飛ばして後述するステップS117の処理を行う。また、最終領域が特定領域A1ではないと判定した場合(ステップS114のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数を+1とし(ステップS115)、最終領域を特定領域A1に変更する(ステップS116)。また、演算部220は、特定領域A1での存在時間データを示すカウント値CNTAを+1とする(ステップS117)。その後、演算部220は、後述するステップS130以降の処理を行う。
また、注視点Pが特定領域A1に存在しないと判定された場合(ステップS109のNo)、演算部220は、注視点Pが比較領域A2に存在するか否かを判定する(ステップS118)。注視点Pが比較領域A2に存在すると判定された場合(ステップS118のYes)、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が比較領域A2であるか否かを判定する(ステップS119)。演算部220は、最終領域が比較領域A2であると判定した場合(ステップS119のYes)、以下のステップS120及びステップS121を飛ばして後述するステップS130の処理を行う。また、最終領域が比較領域A2ではないと判定した場合(ステップS119のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数を+1とし(ステップS115)、最終領域を比較領域A2に変更する(ステップS120)。その後、演算部220は、後述するステップS130以降の処理を行う。
また、注視点Pが比較領域A2に存在しないと判定された場合(ステップS118のNo)、演算部220は、注視点Pが比較領域A3に存在するか否かを判定する(ステップS122)。注視点Pが比較領域A3に存在すると判定された場合(ステップS122のYes)、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が比較領域A3であるか否かを判定する(ステップS123)。演算部220は、最終領域が比較領域A3であると判定した場合(ステップS123のYes)、以下のステップS124及びステップS125を飛ばして後述するステップS130の処理を行う。また、最終領域が比較領域A3ではないと判定した場合(ステップS123のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数を+1とし(ステップS123)、最終領域を比較領域A3に変更する(ステップS125)。その後、演算部220は、後述するステップS130以降の処理を行う。
また、注視点Pが比較領域A3に存在しないと判定された場合(ステップS122のNo)、演算部220は、注視点Pが比較領域A3に存在するか否かを判定する(ステップS122)。注視点Pが比較領域A4に存在すると判定された場合(ステップS126のYes)、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が比較領域A4であるか否かを判定する(ステップS127)。演算部220は、最終領域が比較領域A4であると判定した場合(ステップS127のYes)、以下のステップS128及びステップS129を飛ばして後述するステップS130の処理を行う。また、最終領域が比較領域A4ではないと判定した場合(ステップS127のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数を+1とし(ステップS128)、最終領域を比較領域A3に変更する(ステップS129)。その後、演算部220は、後述するステップS130以降の処理を行う。
その後、演算部220は、検出タイマT1の検出結果に基づいて、映像の再生が完了する時刻に到達したか否かを判断する(ステップS130)。演算部220により映像の再生が完了する時刻に到達していないと判断された場合(ステップS130のNo)、上記のステップS106以降の処理を繰り返し行う。
演算部220により映像の再生が完了する時刻に到達したと判断された場合(ステップS130のYes)、表示制御部202は、映像の再生を停止させる(ステップS131)。映像の再生が停止された後、評価部224は、上記の処理結果から得られる存在時間データと、移動回数データと、最終領域データと、到達時間データに基づいて、評価値ANSを算出し(ステップS132)、評価値ANSに基づいて評価データを求める。その後、出力制御部226は、評価部224で求められた評価データを出力する(ステップS133)。
以上のように、本実施形態に係る評価装置は、表示画面101Sに表示される画像を観察する被験者の注視点の位置を検出する注視点検出部214と、表示画面101Sに特定対象物M1を表示する第1表示動作と、第1表示動作を行った後に特定対象物M1と特定対象物M1とは異なる比較対象物M2〜M4とを表示画面101Sに表示する第2表示動作と、を含む表示動作を行う表示制御部202と、表示画面101Sにおいて、特定対象物M1に対応した特定領域A1と、比較対象物M2〜M4に対応した比較領域A2〜A4とを設定する領域設定部216と、注視点Pの位置データに基づいて、第2表示動作が行われる表示期間に注視点Pが特定領域A1及び比較領域A2〜A4に存在するか否かをそれぞれ判定する判定部218と、判定結果に基づいて、表示期間における注視点Pの移動の経過を示す移動経過データを算出する演算部220と、移動経過データに基づいて、被験者の評価データを求める評価部224とを備える。
また、本実施形態に係る評価方法は、表示画面101Sに表示される画像を観察する被験者の注視点の位置を検出することと、表示画面101Sに特定対象物M1を表示する第1表示動作と、第1表示動作を行った後に特定対象物M1と特定対象物M1とは異なる比較対象物M2〜M4とを表示画面101Sに表示する第2表示動作と、を含む表示動作を行うことと、表示画面101Sにおいて、特定対象物M1に対応した特定領域A1と、比較対象物M2〜M4に対応した比較領域A2〜A4とを設定することと、注視点Pの位置データに基づいて、第2表示動作が行われる表示期間に注視点Pが特定領域A1及び比較領域A2〜A4に存在するか否かをそれぞれ判定することと、判定結果に基づいて、表示期間における注視点Pの移動の経過を示す移動経過データを算出することと、移動経過データに基づいて、被験者の評価データを求める評価部224と、評価データを出力することとを含む。
また、本実施形態に係る評価プログラムは、表示画面101Sに表示される画像を観察する被験者の注視点の位置を検出する処理と、表示画面101Sに特定対象物M1を表示する第1表示動作と、第1表示動作を行った後に特定対象物M1と特定対象物M1とは異なる比較対象物M2〜M4とを表示画面101Sに表示する第2表示動作と、を含む表示動作を行う処理と、表示画面101Sにおいて、特定対象物M1に対応した特定領域A1と、比較対象物M2〜M4に対応した比較領域A2〜A4とを設定する処理と、注視点Pの位置データに基づいて、第2表示動作が行われる表示期間に注視点Pが特定領域A1及び比較領域A2〜A4に存在するか否かをそれぞれ判定する処理と、判定結果に基づいて、表示期間における注視点Pの移動の経過を示す移動経過データを算出する処理と、移動経過データに基づいて、被験者の評価データを求める処理とをコンピュータに実行させる。
本実施形態によれば、表示期間における注視点の移動の経過に基づいて、被験者の評価データを求めることができるため、偶然性を低減することができ、被験者の記憶力を精度よく評価することができる。これにより、評価装置100は、被験者の評価を高精度に行うことが可能となる。
また、本実施形態に係る評価装置100において、注視点データは、表示期間の開始時点から注視点Pが特定領域A1に最初に到達した到達時点までの時間を示す到達時間データと、注視点Pが最初に特定領域A1に到達するまでに複数の比較領域A2〜A4の間で注視点Pの位置が移動する回数を示す移動回数データと、表示期間に注視点Pが特定領域A1または比較領域A2〜A4に存在した存在時間を示す存在時間データのうち少なくとも1つのデータと、特定領域A1及び比較領域A2〜A4のうち表示時間において注視点Pが最後に存在していた領域を示す最終領域データとを含み、評価部224は、注視点データのうち少なくとも1つのデータに基づいて、被験者の評価データを求める。これにより、高精度の評価データを効率的に得ることができる。
また、本実施形態に係る評価装置100において、評価部224は、注視点データに含まれる少なくとも1つのデータに重みをつけて評価データを求める。これにより、各データに優先順位をつけることにより、より高精度の評価データを得ることができる。
本発明の技術範囲は上記実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で適宜変更を加えることができる。例えば、上記各実施形態では、評価装置100を、認知機能障害および脳機能障害者である可能性を評価する評価装置として用いる場合を例に挙げて説明したが、これに限定されない。例えば、評価装置100は、認知機能障害および脳機能障害者ではない被験者の記憶力を評価する評価装置として用いてもよい。
また、上記実施形態において、領域設定部216は、第2表示動作において特定領域A1及び比較領域A2〜A4を設定する場合を例に挙げて説明したが、これに限定されない。例えば、領域設定部216は、第1表示動作において表示画面101Sに表示される特定対象物M1に対応する対応領域を設定してもよい。この場合、判定部218は、被験者の注視点Pが対応領域に存在するか否かを判定してもよい。また、演算部220は、判定部218の判定結果に基づいて、被験者が第1表示動作において表示画面101Sに表示される特定対象物M1を記憶できているか否かを判断してもよい。
また、上記実施形態では、第1表示動作において特定対象物の表示形態を一定の状態である場合を例に挙げて説明したが、これに限定されない。例えば、表示制御部202は、第1表示動作において特定対象物の表示形態を変化させるようにしてもよい。
図17から図23は、表示画面101Sに表示される一連の評価用画像の例を示す図である。まず、図17に示すように、表示制御部202は、クマの前に5種類の食べ物が並んだ画像を表示画面101Sに表示させる。この5種類の食べ物は、複数の対象物F、F1〜F4に対応する。ここでは、例えば対象物Fはミカン、対象物F1はスイカ、対象物F2は魚、対象物F3はパン、対象物F4はリンゴである。また、表示制御部202は、次に表示する画像(図18から図20参照)において、クマが5種類の食べ物うちどの種類の食べ物を食べたかを被験者に記憶させるための指示情報I6を表示する。以下、クマが5種類の食べ物のうちミカンを食べる場合を例に挙げて説明する。この場合、複数の対象物F、F1〜F4のうち、ミカンを示す対象物Fが特定対象物となる。また、ミカン以外の食べ物を示す対象物F1〜F4は、比較対象物となる。以下、対象物Fを特定対象物Fと表記し、対象物F1〜F4をそれぞれ比較対象物F1〜F4と表記する場合がある。
図17に示すように、領域設定部216は、特定対象物Fに対応した特定領域Aを設定し、比較対象物F1〜F4に対応した比較領域B1〜B4を設定する。また、領域設定部216は、指示情報I6に対応した指示領域Cを設定する。領域設定部216は、例えば特定対象物Fを含む矩形の範囲に特定領域Aを設定する。同様に、領域設定部216は、例えば比較対象物F1〜M4を含む矩形の範囲にそれぞれ比較領域B1〜B4を設定する。また、領域設定部216は、指示情報I6を含む矩形の範囲に指示領域Cを設定する。なお、特定領域A、比較領域B1〜B4、指示領域Cの形状については、矩形に限定されず、円形、楕円形、多角形等、他の形状であってもよい。この場合、領域設定部216は、特定領域A、比較領域B1〜B4、及び指示領域Cを、互いに重ならないように設定する。
次に、表示制御部202は、第1表示動作において、クマが5種類の食べ物のうち1種類の食べ物を食べる動画を表示画面101Sに表示させる。図18から図20は、当該動画のシーンをそれぞれ示した図である。以下、クマがミカンを食べる場合を例に挙げて説明する。この場合、複数の対象物F、F1〜F4のうち、ミカンを示す対象物Fが特定対象物となる。また、ミカン以外の食べ物を示す対象物F1〜F4は、比較対象物となる。以下、対象物Fを特定対象物Fと表記し、対象物F1〜F4をそれぞれ比較対象物F1〜F4と表記する場合がある。
図18は、クマがミカンを手に取って口を空けているシーンを示している。図19は、クマがミカンを口に入れて口を閉じるまでのシーンを示している。図20は、ミカンがクマの口の中に入って見えなくなり、クマがミカンを食べているシーンを示している。このように、表示制御部202は、特定対象物Fの表示形態を変化させる。図18から図20に示すクマの一連の動作を表示画面101Sに表示することにより、クマが5種類の食べ物のうちミカンを食べたことを被験者に記憶させる。
図18から図20に示すように、領域設定部216は、図17に示す状態から引き続いて、特定対象物Fに対応した特定領域Aを設定し、比較対象物F1〜F4に対応した比較領域B1〜B4を設定する。また、領域設定部216は、指示領域Cの設定を解除する。そして、領域設定部216は、クマがミカンを手に取ってから口に入れるまでの間、ミカンが移動する軌跡を含む矩形の範囲に移動領域Dを設定する。この場合においても、特定領域A、比較領域B1〜B4、移動領域Dの形状については、矩形に限定されず、円形、楕円形、多角形等、他の形状であってもよい。この場合、領域設定部216は、特定領域A、比較領域B1〜B4、及び移動領域Dを、互いに重ならないように設定する。領域設定部216は、図19のシーンが終了して図20のシーンが表示された場合、移動領域Dの設定を解除する。つまり、ミカンがクマの口の中に入り、口が閉じて見えなくなる所定時刻で、移動領域Dの設定を解除する。
第1表示動作の後、第2表示動作において、表示制御部202は、図21に示すようにクマの前に5種類の食べ物が並んだ状態で、クマが5種類の食べ物うちどの種類の食べ物を食べたかを被験者に注視させるための指示情報I7を表示する。また、領域設定部216は、図20に示す状態から引き続いて、特定対象物Fに対応した特定領域Aを設定し、比較対象物F1〜F4に対応した比較領域B1〜B4を設定する。また、領域設定部216は、指示情報I7に対応した指示領域Eを設定する。なお、特定領域A、比較領域B1〜B4、指示領域Eの形状については、矩形に限定されず、円形、楕円形、多角形等、他の形状であってもよい。この場合、領域設定部216は、特定領域A、比較領域B1〜B4、及び指示領域Eを、互いに重ならないように設定する。
指示情報I7を所定期間表示した後、図22に示すように、表示制御部202は、指示情報I7の表示を消去する。領域設定部216は、指示情報I7の表示を消去するタイミングに合わせて、指示領域Eの設定を解除する。表示制御部202及び領域設定部216は、所定期間この状態を維持する。つまり、表示制御部202は、表示画面101Sに特定対象物F及び比較対象物F1〜F4を所定期間表示する。また、領域設定部216は、特定対象物Fに対応した特定領域Aを所定期間設定し、比較対象物F1〜F4に対応した比較領域B1〜B4を所定期間設定する。この所定期間において、被験者に特定対象物F及び比較対象物F1〜F4を注視させる。
所定期間が経過した後、表示制御部202は、図23に示すように、指示情報I7に対する正解を示す画像を表示してもよい。図23では、一例として、ミカンが配置された領域が枠で囲まれ、クマがミカンの方を見る、という画像が示されている。図23の画像を表示することにより、被験者に正解を明確に把握させることができる。なお、正解を示す画像を表示する場合、領域設定部216は、特定領域A、比較領域B1〜B4、指示領域Eを解除してもよい。
図24は、他の例に係る評価方法の処理の流れを示すフローチャートである。図24に示すように、表示制御部202は、クマが5種類の食べ物うちどの種類の食べ物を食べたかを被験者に記憶させるための指示情報I6を表示する(記憶指示処理:ステップS201)。
次に、表示制御部202は、第1表示動作として、クマが5種類の食べ物のうち1種類の食べ物を食べる動画を表示画面101Sに表示させて、被験者に記憶させる(記憶処理:ステップS202)。
次に、表示制御部202は、第2表示動作として、クマの前に5種類の食べ物が並んだ状態で、クマが5種類の食べ物うちどの種類の食べ物を食べたかを被験者に注視させるための指示情報I7を表示する(回答処理:ステップS203)。
次に、表示制御部202は、指示情報I7に対する正解を示す画像を表示する(正解表示処理:ステップS204)。
次に、評価部224は、上記の処理結果から得られる存在時間データと、移動回数データと、最終領域データと、到達時間データに基づいて、評価値ANSを算出し、評価値ANSに基づいて評価データを求める(ステップS205)。その後、出力制御部226は、評価部224で求められた評価データを出力する(ステップS206)。
図25は、記憶指示処理(ステップS201)における処理の流れを示すフローチャートである。図25に示すように、記憶指示処理において、表示制御部202は、映像の再生を開始させる(ステップS301)。演算部220は、映像部分までの待ち時間を経過した後、タイマT1をリセットし(ステップS302)、カウンタのカウント値CNTC、RRaをリセットする(ステップS303)。タイマT1は、本映像における記憶指示処理部分の映像が終了するタイミングを得るためのタイマである。カウンタCNTCは、注視点Pの指示領域Cでの存在時間データを示すカウント値CNTCを計測するためのものである。カウンタRRaは、映像再生期間において注視点Pが領域間で何回移動したかを示す積算回数RRaを計数するためのカウンタである。
注視点検出部214は、表示装置101に表示された映像を被験者に見せた状態で、規定のサンプリング周期(例えば20[msec])毎に、表示装置101の表示画面101Sにおける被験者の注視点の位置データを検出する(ステップS304)。位置データが検出されなかった場合(ステップS305のYes)、後述するステップS329以降の処理を行う。位置データが検出された場合(ステップS305のNo)、判定部218は、位置データに基づいて注視点Pが存在する領域を判定する(ステップS306)。
注視点Pが特定領域Aに存在すると判定された場合(ステップS307のYes)、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が特定領域Aであるか否かを判定する(ステップS308)。演算部220は、最終領域が特定領域Aであると判定した場合(ステップS308のYes)、以下のステップS309及びステップS310を飛ばして後述するステップS329の処理を行う。また、最終領域が特定領域Aではないと判定した場合(ステップS308のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数RRaを+1とし(ステップS309)、最終領域を特定領域Aに変更する(ステップS310)。その後、演算部220は、後述するステップS329以降の処理を行う。
また、注視点Pが特定領域Aに存在しないと判定された場合(ステップS307のNo)、演算部220は、注視点Pが比較領域B1に存在するか否かを判定する(ステップS311)。注視点Pが比較領域B1に存在すると判定された場合(ステップS311のYes)、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が比較領域B1であるか否かを判定する(ステップS312)。演算部220は、最終領域が比較領域B1であると判定した場合(ステップS312のYes)、以下のステップS313及びステップS314を飛ばして後述するステップS329の処理を行う。また、最終領域が比較領域B1ではないと判定した場合(ステップS312のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数RRaを+1とし(ステップS313)、最終領域を比較領域B1に変更する(ステップS314)。その後、演算部220は、後述するステップS329以降の処理を行う。
また、注視点Pが特定領域B1に存在しないと判定された場合(ステップS311のNo)、演算部220は、注視点Pが比較領域B2に存在するか否かを判定する(ステップS315)。注視点Pが比較領域B2に存在すると判定された場合(ステップS315のYes)、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が比較領域B2であるか否かを判定する(ステップS316)。演算部220は、最終領域が比較領域B2であると判定した場合(ステップS316のYes)、以下のステップS317及びステップS318を飛ばして後述するステップS329の処理を行う。また、最終領域が比較領域B2ではないと判定した場合(ステップS316のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数RRaを+1とし(ステップS317)、最終領域を比較領域B2に変更する(ステップS318)。その後、演算部220は、後述するステップS329以降の処理を行う。
また、注視点Pが特定領域B2に存在しないと判定された場合(ステップS315のNo)、演算部220は、注視点Pが比較領域B3に存在するか否かを判定する(ステップS319)。注視点Pが比較領域B3に存在すると判定された場合(ステップS319のYes)、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が比較領域B3であるか否かを判定する(ステップS320)。演算部220は、最終領域が比較領域B3であると判定した場合(ステップS320のYes)、以下のステップS321及びステップS322を飛ばして後述するステップS329の処理を行う。また、最終領域が比較領域B3ではないと判定した場合(ステップS320のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数RRaを+1とし(ステップS321)、最終領域を比較領域B3に変更する(ステップS322)。その後、演算部220は、後述するステップS329以降の処理を行う。
また、注視点Pが特定領域B3に存在しないと判定された場合(ステップS319のNo)、演算部220は、注視点Pが比較領域B4に存在するか否かを判定する(ステップS323)。注視点Pが比較領域B4に存在すると判定された場合(ステップS323のYes)、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が比較領域B4であるか否かを判定する(ステップS324)。演算部220は、最終領域が比較領域B4であると判定した場合(ステップS324のYes)、以下のステップS325及びステップS326を飛ばして後述するステップS329の処理を行う。また、最終領域が比較領域B4ではないと判定した場合(ステップS324のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数RRaを+1とし(ステップS325)、最終領域を比較領域B4に変更する(ステップS326)。その後、演算部220は、後述するステップS329以降の処理を行う。
また、注視点Pが特定領域B4に存在しないと判定された場合(ステップS323のNo)、演算部220は、注視点Pが指示領域Cに存在するか否かを判定する(ステップS327)。注視点Pが指示領域Cに存在しないと判定された場合(ステップS327のNo)、後述するステップS329以降の処理を行う。また、注視点Pが指示領域Cに存在すると判定された場合(ステップS327のYes)、演算部220は、注視点Pの指示領域Cでの存在時間データを示すカウント値CNTCを+1とする(ステップS328)。その後、演算部220は、後述するステップS329以降の処理を行う。
その後、演算部220は、検出タイマT1の検出結果に基づいて、映像の再生が完了する時刻に到達したか否かを判断する(ステップS329)。演算部220により映像の再生が完了する時刻に到達していないと判断された場合(ステップS329のNo)、上記のステップS304以降の処理を繰り返し行う。
演算部220により映像の再生が完了する時刻に到達したと判断された場合(ステップS329のYes)、表示制御部202は、映像の再生を停止させる(ステップS330)。映像の再生が停止された後、記憶処理(ステップS202)を行う。
図26は、記憶処理(ステップS202)における処理の流れを示すフローチャートである。図26に示すように、記憶処理において、表示制御部202は、映像の再生を開始させる(ステップS401)。演算部220は、映像部分までの待ち時間を経過した後、タイマT2をリセットし(ステップS402)、カウンタのカウント値CNTAa、CNTB1a、CNTB2a、CNTB3a、CNTB4a、CNTDをリセットする(ステップS403)。タイマT2は、本映像における記憶処理部分の映像が終了するタイミングを得るためのタイマである。カウンタCNTAaは、注視点Pの特定領域Aでの存在時間データを示すカウント値CNTAaを計測するためのものである。カウンタCNTB1a〜CNTB4aは、注視点Pの比較領域B1〜B4での存在時間データを示すカウント値CNTB1a〜CNTB4aを計測するためのものである。カウンタCNTDは、注視点Pの移動領域Dでの存在時間データを示すカウント値CNTDを計測するためのものである。
注視点検出部214は、表示装置101に表示された映像を被験者に見せた状態で、規定のサンプリング周期(例えば20[msec])毎に、表示装置101の表示画面101Sにおける被験者の注視点の位置データを検出する(ステップS404)。位置データが検出されなかった場合(ステップS405のYes)、後述するステップS420以降の処理を行う。位置データが検出された場合(ステップS405のNo)、判定部218は、位置データに基づいて注視点Pが存在する領域を判定する(ステップS406)。
注視点Pが特定領域Aに存在すると判定された場合(ステップS407のYes)、演算部220は、注視点Pの特定領域Aでの存在時間データを示すカウント値CNTAaを+1とする(ステップS408)。その後、演算部220は、後述するステップS420以降の処理を行う。
また、注視点Pが特定領域Aに存在しないと判定された場合(ステップS407のNo)、演算部220は、注視点Pが比較領域B1に存在するか否かを判定する(ステップS409)。注視点Pが比較領域B1に存在すると判定された場合(ステップS409のYes)、演算部220は、注視点Pの比較領域B1での存在時間データを示すカウント値CNTB1aを+1とする(ステップS410)。その後、演算部220は、後述するステップS420以降の処理を行う。
また、注視点Pが特定領域B1に存在しないと判定された場合(ステップS409のNo)、演算部220は、注視点Pが比較領域B2に存在するか否かを判定する(ステップS411)。注視点Pが比較領域B2に存在すると判定された場合(ステップS411のYes)、演算部220は、注視点Pの比較領域B2での存在時間データを示すカウント値CNTB2aを+1とする(ステップS412)。その後、演算部220は、後述するステップS420以降の処理を行う。
また、注視点Pが特定領域B2に存在しないと判定された場合(ステップS411のNo)、演算部220は、注視点Pが比較領域B3に存在するか否かを判定する(ステップS413)。注視点Pが比較領域B3に存在すると判定された場合(ステップS413のYes)、演算部220は、注視点Pの比較領域B3での存在時間データを示すカウント値CNTB3aを+1とする(ステップS414)。その後、演算部220は、後述するステップS420以降の処理を行う。
また、注視点Pが特定領域B3に存在しないと判定された場合(ステップS413のNo)、演算部220は、注視点Pが比較領域B4に存在するか否かを判定する(ステップS415)。注視点Pが比較領域B4に存在すると判定された場合(ステップS415のYes)、演算部220は、注視点Pの比較領域B4での存在時間データを示すカウント値CNTB4aを+1とする(ステップS416)。その後、演算部220は、後述するステップS420以降の処理を行う。
また、注視点Pが特定領域B4に存在しないと判定された場合(ステップS415のNo)、演算部220は、タイマT2の値が所定時刻t01を超えたかを判定する(ステップS417)。所定時刻t01は、ミカンがクマの口の中に入り、口が閉じて見えなくなる時刻である。タイマT2の値が所定時刻t01を超えた場合(ステップS417のYes)、演算部220は、ステップS418の処理を飛ばして、後述するステップS420以降の処理を行う。タイマT2の値が所定時刻t01を超えない場合(ステップS417のNo)、演算部220は、注視点Pが移動領域Dに存在するか否かを判定する(ステップS418)。注視点Pが移動領域Dに存在しないと判定された場合(ステップS418のNo)、後述するステップS420以降の処理を行う。また、注視点Pが移動領域Dに存在すると判定された場合(ステップS418のYes)、演算部220は、注視点Pの移動領域Dでの存在時間データを示すカウント値CNTDを+1とする(ステップS419)。その後、演算部220は、後述するステップS420以降の処理を行う。
その後、演算部220は、検出タイマT2の検出結果に基づいて、映像の再生が完了する時刻に到達したか否かを判断する(ステップS420)。演算部220により映像の再生が完了する時刻に到達していないと判断された場合(ステップS420のNo)、上記のステップS404以降の処理を繰り返し行う。
演算部220により映像の再生が完了する時刻に到達したと判断された場合(ステップS420のYes)、表示制御部202は、映像の再生を停止させる(ステップS421)。映像の再生が停止された後、回答処理(ステップS203)を行う。
図27は、回答処理(ステップS203)における処理の流れを示すフローチャートである。図27に示すように、回答処理において、表示制御部202は、映像の再生を開始させる(ステップS501)。演算部220は、映像部分までの待ち時間を経過した後、タイマT3をリセットし(ステップS502)、カウンタのカウント値CNTAb、CNTB1b、CNTB2b、CNTB3b、CNTB4b、CNTE、RRbをリセットし(ステップS503)、フラグ値を0にする(ステップS504)。タイマT3は、本映像における回答処理部分の映像が終了するタイミングを得るためのタイマである。カウンタCNTAbは、注視点Pの特定領域Aでの存在時間データを示すカウント値CNTAbを計測するためのものである。カウンタCNTB1b〜CNTB4bは、注視点Pの比較領域B1〜B4での存在時間データを示すカウント値CNTB1b〜CNTB4bを計測するためのものである。カウンタCNTEは、注視点Pの指示領域Eでの存在時間データを示すカウント値CNTEを計測するためのものである。カウンタRRbは、注視点Pが領域間で何回移動したかを示す積算回数RRbを計数するためのカウンタである。
注視点検出部214は、表示装置101に表示された映像を被験者に見せた状態で、規定のサンプリング周期(例えば20[msec])毎に、表示装置101の表示画面101Sにおける被験者の注視点の位置データを検出する(ステップS505)。位置データが検出された場合(ステップS506のNo)、判定部218は、位置データに基づいて注視点Pが存在する領域を判定する(ステップS507)。
注視点Pが特定領域Aに存在すると判定された場合(ステップS508のYes)、演算部220は、フラグ値が1であるか否か、つまり、注視点Pが特定領域Aに到達したのが最初か否か(1:到達済み、0:未到達)を判定する(ステップS509)。フラグ値が1である場合(ステップS509のYes)、演算部220は、以下のステップS510からステップS512を飛ばして後述するステップS513の処理を行う。
また、フラグ値が1ではない場合、つまり、特定領域Aに注視点Pが到達したのが最初である場合(ステップS509のNo)、演算部220は、タイマT3の計測結果を到達時間データとして抽出する(ステップS510)。また、演算部220は、特定領域Aに到達するまでに注視点Pが領域間の移動を何回行ったかを示す移動回数データを記憶部222に記憶させる(ステップS511)。その後、演算部220は、フラグ値を1に変更する(ステップS512)。
次に、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が特定領域Aであるか否かを判定する(ステップS513)。演算部220は、最終領域が特定領域Aであると判定した場合(ステップS513のYes)、以下のステップS514及びステップS515を飛ばして後述するステップS516の処理を行う。また、最終領域が特定領域Aではないと判定した場合(ステップS513のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数を+1とし(ステップS514)、最終領域を特定領域Aに変更する(ステップS515)。また、演算部220は、注視点Pの特定領域Aでの存在時間データを示すカウント値CNTAbを+1とする(ステップS516)。その後、演算部220は、後述するステップS540以降の処理を行う。
また、注視点Pが特定領域Aに存在しないと判定された場合(ステップS508のNo)、演算部220は、注視点Pが比較領域B1に存在するか否かを判定する(ステップS517)。注視点Pが比較領域B1に存在すると判定された場合(ステップS517のYes)、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が比較領域B1であるか否かを判定する(ステップS518)。演算部220は、最終領域が比較領域B1であると判定した場合(ステップS518のYes)、以下のステップS519及びステップS520を飛ばして後述するステップS521の処理を行う。また、最終領域が比較領域B1ではないと判定した場合(ステップS518のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数を+1とし(ステップS519)、最終領域を比較領域B1に変更する(ステップS520)。また、演算部220は、注視点Pの比較領域B1での存在時間データを示すカウント値CNTB1bを+1とする(ステップS521)。その後、演算部220は、後述するステップS540以降の処理を行う。
また、注視点Pが比較領域B1に存在しないと判定された場合(ステップS517のNo)、演算部220は、注視点Pが比較領域B2に存在するか否かを判定する(ステップS522)。注視点Pが比較領域B2に存在すると判定された場合(ステップS522のYes)、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が比較領域B2であるか否かを判定する(ステップS523)。演算部220は、最終領域が比較領域B2であると判定した場合(ステップS523のYes)、以下のステップS524及びステップS525を飛ばして後述するステップS526の処理を行う。また、最終領域が比較領域B2ではないと判定した場合(ステップS523のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数を+1とし(ステップS524)、最終領域を比較領域B2に変更する(ステップS525)。また、演算部220は、注視点Pの比較領域B2での存在時間データを示すカウント値CNTB2bを+1とする(ステップS526)。その後、演算部220は、後述するステップS540以降の処理を行う。
また、注視点Pが比較領域B2に存在しないと判定された場合(ステップS522のNo)、演算部220は、注視点Pが比較領域B3に存在するか否かを判定する(ステップS527)。注視点Pが比較領域B3に存在すると判定された場合(ステップS527のYes)、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が比較領域B3であるか否かを判定する(ステップS528)。演算部220は、最終領域が比較領域B3であると判定した場合(ステップS528のYes)、以下のステップS529及びステップS530を飛ばして後述するステップS531の処理を行う。また、最終領域が比較領域B3ではないと判定した場合(ステップS528のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数を+1とし(ステップS529)、最終領域を比較領域B3に変更する(ステップS530)。また、演算部220は、注視点Pの比較領域B3での存在時間データを示すカウント値CNTB3bを+1とする(ステップS531)。その後、演算部220は、後述するステップS540以降の処理を行う。
また、注視点Pが比較領域B3に存在しないと判定された場合(ステップS527のNo)、演算部220は、注視点Pが比較領域B4に存在するか否かを判定する(ステップS532)。注視点Pが比較領域B4に存在すると判定された場合(ステップS532のYes)、演算部220は、直近の検出において注視点Pが存在した領域、つまり最終領域が比較領域B4であるか否かを判定する(ステップS533)。演算部220は、最終領域が比較領域B4であると判定した場合(ステップS533のYes)、以下のステップS534及びステップS535を飛ばして後述するステップS536の処理を行う。また、最終領域が比較領域B4ではないと判定した場合(ステップS533のNo)、演算部220は、注視点Pが領域間で何回移動したかを示す積算回数を+1とし(ステップS534)、最終領域を比較領域B4に変更する(ステップS535)。また、演算部220は、注視点Pの比較領域B4での存在時間データを示すカウント値CNTB4bを+1とする(ステップS536)。その後、演算部220は、後述するステップS540以降の処理を行う。
また、注視点Pが比較領域B4に存在しないと判定された場合(ステップS532のNo)、演算部220は、タイマT3の値が所定時刻t02を超えたかを判定する(ステップS537)。所定時刻t02は、指示情報I7の表示が消去される時刻である。タイマT3の値が所定時刻t02を超えた場合(ステップS537のYes)、演算部220は、ステップS538の処理を飛ばして、後述するステップS540以降の処理を行う。タイマT3の値が所定時刻t02を超えない場合(ステップS537のNo)、演算部220は、注視点Pが指示領域Eに存在するか否かを判定する(ステップS538)。注視点Pが指示領域Eに存在すると判定された場合(ステップS538のYes)、演算部220は、注視点Pの指示領域Eでの存在時間データを示すカウント値CNTEを+1とする(ステップS539)。その後、演算部220は、後述するステップS540以降の処理を行う。
その後、演算部220は、検出タイマT3の検出結果に基づいて、映像の再生が完了する時刻に到達したか否かを判断する(ステップS540)。演算部220により映像の再生が完了する時刻に到達していないと判断された場合(ステップS540のNo)、上記のステップS505以降の処理を繰り返し行う。
演算部220により映像の再生が完了する時刻に到達したと判断された場合(ステップS540のYes)、表示制御部202は、映像の再生を停止させる(ステップS541)。映像の再生が停止された後、評価演算(ステップS205)及び評価値出力(ステップS206)を行う。
評価演算において、評価値ANSは、例えば、
ANS= K11・RRa+K12・CNTC+K13・CNTAa
+K14・CNTB1a+K15・CNTB2a+K16・CNTB3a
+K17・CNTB4a+K18・CNTD+K19・CNTAb
+K20・CNTB1b+K21・CNTB2b+K22・CNTB3b
+K23・CNTB4b+K24・CNTE+K25・RRb
と表すことができる。なお、K11〜K25は、重みづけのための定数である。定数K11〜K25については、適宜設定することができる。
RRaについては、対象物をよく確認する傾向があるほど、数値が高くなる。この場合、K11を負の係数とすることにより、RRaの値が高くなるほど、評価値ANSの値が低くなる。
CNTCについては、指示文字をよく確認する傾向があるほど、数値が高くなる。この場合、K12を負の係数とすることにより、CNTCの値が高くなるほど、評価値ANSの値が低くなる。
CNTAaについては、クマが食べるミカンをよく見る傾向があるほど、数値が高くなる。この場合、K13を負の係数とすることにより、CNTAの値が高くなるほど、評価値ANSの値が低くなる。
CNTB1a〜CNTB4aについて、クマが食べるミカン以外の対象物を目的なく見る傾向があるほど、数値が高くなる。この場合、K14〜K17を正の係数とすることにより、CNTB1a〜CNTB4aの値が高くなるほど、評価値ANSの値が高くなる。
CNTDについて、対象物をよく確認する傾向があるほど、数値が高くなる。一方、単に動くものを見る傾向がある場合にも数値が高くなる。この場合、K18を正の係数とし、例えば他の係数と比べて値を低くしてもよい。
CNTAbについて、正解となるミカンをよく見るほど、数値が高くなる。この場合、K19を負の係数とし、他の係数よりも絶対値が大きくなるように設定することにより、CNTAbの値が高くなるほど、評価値ANSの値が大幅に低くなる。
CNTB1b〜CNTB4bについて、不正解となる食べ物をよく見るほど、数値が高くなる。この場合、K20〜K23を正の係数とし、他の係数よりも絶対値が大きくなるように設定することにより、CNTB1b〜CNTB4bの値が高くなるほど、評価値ANSの値が大幅に高くなる。
CNTEについて、指示情報I7をよく確認する傾向があるほど、数値が高くなる。この場合、K24を負の係数とすることにより、CNTEの値が高くなるほど、評価値ANSの値が低くなる。
RRbについて、正解の選択で迷う傾向があるほど、数値が高くなる。この場合、K25を正の係数とすることにより、RRbの値が高くなるほど、評価値ANSの値が高くなる。
評価部224は、評価値ANSが所定値以上か否かを判断することで評価データを求めることができる。例えば評価値ANSが所定値以上である場合、被験者が認知機能障害および脳機能障害者である可能性は高いと評価することができる。また、評価値ANSが所定値未満である場合、被験者が認知機能障害および脳機能障害者である可能性は低いと評価することができる。
なお、評価部224は、上記した注視点データのうち少なくとも1つのデータに基づいて、被験者の評価値を求めてもよい。例えば、評価部224は、特定領域Aの存在時間データCNTAbについて所定値以上であれば、被験者が認知機能障害および脳機能障害者である可能性が低いと評価することができる。また、評価部224は、特定領域Aの存在時間データCNTAbと比較領域B1〜の存在時間データCNTB1b〜CNTB4bの合計の比(特定領域A及び比較領域B1〜B4の注視率の割合)が所定値以上であれば、被験者が認知機能障害および脳機能障害者である可能性が低いと評価することができる。また、評価部224は、特定領域Aの存在時間データCNTAbと全体の注視時間の比(特定領域Aの注視時間と全体の注視時間の割合)が所定値以上であれば、被験者が認知機能障害および脳機能障害者である可能性が低いと評価することができる。また、評価部224は、最終領域が特定領域Aであれば、被験者が認知機能障害および脳機能障害者である可能性が低く、最終領域が比較領域B1〜B4であれば、被験者が認知機能障害および脳機能障害者である可能性が高いと評価することができる。
図28から図30は、表示画面101Sに表示される一連の評価用画像の他の例を示す図である。まず、図28に示すように、表示制御部202は、第1表示動作において、複数(例えば、6つ)の窓のうち1つの窓に人が顔を出している画像を表示画面101Sに表示させる。この6種類の窓は、複数の対象物W、W1〜W5に対応する。また、表示制御部202は、6つの窓のうちどの窓に人が顔を出しているかを被験者に記憶させるための指示情報I8を表示する。この場合、複数の対象物W、W1〜W5のうち、人が顔を出している窓が特定対象物Wとなる。また、人が顔を出している窓以外の窓は、比較対象物W1〜W5となる。
図28に示すように、領域設定部216は、特定対象物Wに対応した特定領域Aを設定し、比較対象物W1〜W5に対応した比較領域B1〜B5を設定する。また、領域設定部216は、指示情報I8に対応した指示領域Cを設定する。領域設定部216は、例えば特定対象物Wに対応する矩形の範囲に特定領域Aを設定する。図28では、特定対象物Wが矩形状の窓であるため、窓の輪郭に重ねるように特定領域Aを設定することができる。同様に、領域設定部216は、例えば比較対象物W1〜W5の窓の輪郭に重ねるように比較領域B1〜B5を設定することができる。また、領域設定部216は、指示情報I8を含む矩形の範囲に指示領域Cを設定する。なお、特定領域A、比較領域B1〜B5、指示領域Cの形状については、矩形に限定されず、円形、楕円形、多角形等、他の形状であってもよい。この場合、領域設定部216は、特定領域A、比較領域B1〜B5、及び指示領域Cを、互いに重ならないように設定する。表示制御部202及び領域設定部216は、所定期間この状態を維持する。つまり、表示制御部202は、表示画面101Sに特定対象物W及び比較対象物W1〜W5を所定期間表示する。また、領域設定部216は、特定対象物Wに対応した特定領域Aを所定期間設定し、比較対象物W1〜W5に対応した比較領域B1〜B5を所定期間設定する。この所定期間において、被験者に特定対象物W及び比較対象物W1〜W5を注視させる。
上記の表示を所定期間行った後、図29に示すように、表示制御部202は、特定対象物Wの窓から人の画像を消去する。このように、表示制御部202は、特定対象物Wの表示形態を変化させる。その後、第2表示動作として、人が6つの窓のうちどの窓に顔を出していたかを被験者に注視させるための指示情報I9を表示する。領域設定部216は、図28に示す状態から引き続いて、特定対象物Wに対応した特定領域Aを設定し、比較対象物W1〜W5に対応した比較領域B1〜B5を設定する。また、領域設定部216は、指示情報I9に対応した指示領域Eを設定する。なお、特定領域A、比較領域B1〜B5、指示領域Eの形状については、矩形に限定されず、円形、楕円形、多角形等、他の形状であってもよい。この場合、領域設定部216は、特定領域A、比較領域B1〜B5、及び指示領域Eを、互いに重ならないように設定する。
第2表示動作を所定期間行った後、表示制御部202は、図30に示すように、指示情報I9に対する正解を示す画像を表示してもよい。図30では、一例として、特定対象物Wに対応する窓に人が再び顔を出し、当該窓が正解である旨の指示情報I10が表示されている。図30の画像を表示することにより、被験者に正解を明確に把握させることができる。なお、正解を示す画像を表示する場合、領域設定部216は、特定領域A、比較領域B1〜B5、指示領域Eを解除してもよい。
以上のように、上記実施形態に係る評価装置100は、表示画面101Sと、表示画面101Sを観察する被験者の注視点の位置を検出する注視点検出部214と、表示画面101Sに対して特定対象物と特定対象物とは異なる比較対象物とが含まれる画像を表示する表示制御部202と、特定対象物に対応した特定領域と、比較対象物に対応した比較領域とを設定する領域設定部216と、注視点の位置に基づいて、画像が表示される期間に注視点が特定領域及び比較領域に存在するか否かをそれぞれ判定する判定部218と、判定部218における判定結果に基づいて、注視点の移動の経過を示す注視点データを算出する演算部220と、注視点データに基づいて、被験者の評価データを求める評価部224とを備える。
また、上記実施形態に係る評価方法は、表示画面101Sを観察する被験者の注視点の位置を検出することと、特定対象物と特定対象物とは異なる比較対象物とが含まれる画像を表示画面101Sに表示することと、特定対象物に対応した特定領域と、比較対象物に対応した比較領域とを設定することと、注視点の位置に基づいて、表示画面に画像が表示される表示期間に注視点が特定領域及び比較領域に存在するか否かをそれぞれ判定することと、判定結果に基づいて、表示期間における注視点の移動の経過を示す注視点データを算出することと、注視点データに基づいて、被験者の評価データを求めることとを含む。
また、上記実施形態に係る評価プログラムは、表示画面101Sを観察する被験者の注視点の位置を検出する処理と、特定対象物と特定対象物とは異なる比較対象物とが含まれる画像を表示画面101Sに表示する処理と、特定対象物に対応した特定領域と、比較対象物に対応した比較領域とを設定する処理と、注視点の位置に基づいて、表示画面に画像が表示される表示期間に注視点が特定領域及び比較領域に存在するか否かをそれぞれ判定する処理と、判定結果に基づいて、表示期間における注視点の移動の経過を示す注視点データを算出する処理と、注視点データに基づいて、被験者の評価データを求める処理とをコンピュータに実行させる。
したがって、第1表示動作において特定対象物の表示形態を変化させない場合においても、また、特定対象物の表示形態を変化させる場合においても、表示期間における注視点の移動の経過に基づいて、被験者の評価データを求めることができる。このように、特定対象物の表示形態を多様化することで、より偶然性を低減することができ、被験者の記憶力を精度よく評価することができる。これにより、評価装置100は、被験者の評価を高精度に行うことが可能となる。