JP6820038B1 - 情報処理装置、情報処理方法及び情報処理プログラム - Google Patents
情報処理装置、情報処理方法及び情報処理プログラム Download PDFInfo
- Publication number
- JP6820038B1 JP6820038B1 JP2020055767A JP2020055767A JP6820038B1 JP 6820038 B1 JP6820038 B1 JP 6820038B1 JP 2020055767 A JP2020055767 A JP 2020055767A JP 2020055767 A JP2020055767 A JP 2020055767A JP 6820038 B1 JP6820038 B1 JP 6820038B1
- Authority
- JP
- Japan
- Prior art keywords
- point
- user
- test
- information processing
- movement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 178
- 238000003672 processing method Methods 0.000 title claims description 23
- 238000012360 testing method Methods 0.000 claims abstract description 706
- 230000003920 cognitive function Effects 0.000 claims abstract description 172
- 238000005259 measurement Methods 0.000 claims abstract description 113
- 230000009471 action Effects 0.000 claims abstract description 40
- 230000006870 function Effects 0.000 claims description 28
- 238000010586 diagram Methods 0.000 abstract description 34
- 238000000034 method Methods 0.000 description 73
- 230000008569 process Effects 0.000 description 68
- 238000012545 processing Methods 0.000 description 58
- 238000003745 diagnosis Methods 0.000 description 32
- 206010012289 Dementia Diseases 0.000 description 29
- 230000007423 decrease Effects 0.000 description 26
- 210000004556 brain Anatomy 0.000 description 19
- 238000012549 training Methods 0.000 description 19
- 238000004891 communication Methods 0.000 description 18
- 230000015654 memory Effects 0.000 description 16
- 230000008859 change Effects 0.000 description 13
- 210000001320 hippocampus Anatomy 0.000 description 11
- 238000001514 detection method Methods 0.000 description 9
- 208000024827 Alzheimer disease Diseases 0.000 description 7
- 230000001149 cognitive effect Effects 0.000 description 7
- 238000002474 experimental method Methods 0.000 description 7
- 206010025482 malaise Diseases 0.000 description 7
- 230000002159 abnormal effect Effects 0.000 description 6
- 238000004590 computer program Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 230000003935 attention Effects 0.000 description 5
- 230000004397 blinking Effects 0.000 description 5
- 230000003925 brain function Effects 0.000 description 5
- 230000019771 cognition Effects 0.000 description 5
- 210000001353 entorhinal cortex Anatomy 0.000 description 5
- 230000002265 prevention Effects 0.000 description 5
- 230000001629 suppression Effects 0.000 description 5
- 238000013459 approach Methods 0.000 description 4
- 230000002068 genetic effect Effects 0.000 description 4
- 210000003128 head Anatomy 0.000 description 4
- 230000000971 hippocampal effect Effects 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 4
- 230000006886 spatial memory Effects 0.000 description 4
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 230000008685 targeting Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 241000282326 Felis catus Species 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000003915 cell function Effects 0.000 description 2
- 230000003930 cognitive ability Effects 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 201000010099 disease Diseases 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 230000001537 neural effect Effects 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 208000000044 Amnesia Diseases 0.000 description 1
- 208000026139 Memory disease Diseases 0.000 description 1
- 240000004050 Pentaglottis sempervirens Species 0.000 description 1
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 1
- 235000008331 Pinus X rigitaeda Nutrition 0.000 description 1
- 235000011613 Pinus brutia Nutrition 0.000 description 1
- 241000018646 Pinus brutia Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000007792 alzheimer disease pathology Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 230000007177 brain activity Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000000969 carrier Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000002599 functional magnetic resonance imaging Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000008801 hippocampal function Effects 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 210000003715 limbic system Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000007087 memory ability Effects 0.000 description 1
- 230000006984 memory degeneration Effects 0.000 description 1
- 208000023060 memory loss Diseases 0.000 description 1
- 230000008450 motivation Effects 0.000 description 1
- 230000007659 motor function Effects 0.000 description 1
- 210000000478 neocortex Anatomy 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000010332 selective attention Effects 0.000 description 1
- 230000006403 short-term memory Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Landscapes
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
請求項1の発明は、ユーザーの動作を受け付ける受付手段と、前記動作にしたがって、前記ユーザーに3次元映像を提示する提示手段と、前記ユーザーに、3次元映像によって構成される空間での移動を試行可能にする試行手段と、前記ユーザーの認知機能を判断するための複数の試験において、前記3次元映像内での前記ユーザーによる移動を計測する計測手段と、前記複数の試験のうち、少なくとも2つの試験における前記計測の結果を用いて、前記ユーザーの認知機能を判断する判断手段と、前記判断手段に必要な計測を行う前に、前記試行手段による試行を行うように制御する制御手段を有し、前記試行手段による試行における前記ユーザーの移動速度によって、前記試験におけるスタート地点とゴール地点を決定する、情報処理装置である。
図1は、本実施の形態の構成例についての概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア(「ソフトウェア」の解釈として、コンピュータ・プログラムを含む)、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、それらのモジュールとして機能させるためのコンピュータ・プログラム(例えば、コンピュータにそれぞれの手順を実行させるためのプログラム、コンピュータをそれぞれの手段として機能させるためのプログラム、コンピュータにそれぞれの機能を実現させるためのプログラム)、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させる、又は記憶装置に記憶させるように制御するという意味である。また、モジュールは機能に一対一に対応していてもよいが、実装においては、1モジュールを1プログラムで構成してもよいし、複数モジュールを1プログラムで構成してもよく、逆に1モジュールを複数プログラムで構成してもよい。また、複数モジュールは1コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって1モジュールが複数コンピュータで実行されてもよい。なお、1つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続(例えば、データの授受、指示、データ間の参照関係、ログイン等)の場合にも用いる。「予め定められた」とは、対象としている処理の前に定まっていることをいい、本実施の形態による処理が始まる前はもちろんのこと、本実施の形態による処理が始まった後であっても、対象としている処理の前であれば、そのときの状況・状態にしたがって、又はそれまでの状況・状態にしたがって定まることの意を含めて用いる。「予め定められた値」が複数ある場合は、それぞれ異なった値であってもよいし、2以上の値(「2以上の値」には、もちろんのことながら、全ての値も含む)が同じであってもよい。また、「Aである場合、Bをする」という記載は、「Aであるか否かを判断し、Aであると判断した場合はBをする」の意味で用いる。ただし、Aであるか否かの判断が不要である場合を除く。また、「A、B、C」等のように事物を列挙した場合は、断りがない限り例示列挙であり、その1つのみを選んでいる場合(例えば、Aのみ)を含む。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク(「ネットワーク」には、一対一対応の通信接続を含む)等の通信手段で接続されて構成されるほか、1つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。「装置」と「システム」とは、互いに同義の用語として用いる。もちろんのことながら、「システム」には、人為的な取り決めである社会的な「仕組み」(つまり、社会システム)にすぎないものは含まない。
また、各モジュールによる処理毎に又はモジュール内で複数の処理を行う場合はその処理毎に、対象となる情報を記憶装置から読み込み、その処理を行った後に、処理結果を記憶装置に書き出すものである。したがって、処理前の記憶装置からの読み込み、処理後の記憶装置への書き出しについては、説明を省略する場合がある。
情報処理装置100の使用目的として、ユーザーの認知機能を判断することの他に、ユーザーの認知機能を向上させることを目的としてもよい。つまり、前者は試験(テストともいう)としての使用であって、後者にあってはトレーニングとしての使用である。
情報処理装置100を用いる「ユーザー」は、認知機能を判断される被験者又は認知機能向上を図る目的でトレーニングする者である。
ここで「3次元映像」は、VR(バーチャル・リアリティー、Virtual Reality、仮想空間)とも言われており、コンピュータによって作り出された世界である人工環境である。また「提示」とは、主に映像の表示を行うことの他に、スピーカーを用いた音声、音楽の出力、振動等のようにユーザーの五感を刺激するものを組み合わせた出力であってもよい。なお、ユーザーが「移動する」とは、ユーザーがその3次元映像内を移動することであり、ユーザーの物理的な移動(現実的な移動)は問わない。つまり、ユーザーの動作を検知して、3次元映像内を移動できればよく、ユーザーの動作として、コントローラー250等の操作のように物理的な移動を伴わない動作であってもよいし、後述するセンサーを用いて、物理的な移動を動作として検知するようにしてもよい。
提示モジュール105は、提示装置そのものを含んでいてもよいし、その提示装置を制御するモジュールであってもよい。提示装置は、3次元映像をユーザーに提示できるものであればよい。提示装置として、例えば、ヘッドマウントディスプレイ(HMD:Head Mounted Display)が該当する。両目を完全に覆う「非透過型」であることが好ましい。
さらに、提示モジュール105は、3次元映像内に提示するアイテムのうち、空間を認知しやすくするためのアイテムを提示する。なお、「空間を認知しやすくするためのアイテム」は、環境生成モジュール125によって生成されるものであり、それを提示モジュール105が3次元映像内に提示する。
ここで「過去の判断結果にしたがって」とあるので、少なくとも、今回の試験が2回目以降である。例えば、前回の判断結果が認知症の可能性が高いという場合には、本提示モジュール105による処理を行うようにしてもよい。逆に、前回の判断結果が認知症の可能性が低いという場合には、提示モジュール105による処理は行わないようにしてもよい。
「第1の地点と第2の地点の延長上になるように配置する」とは、目的地である「第1の地点又は第2の地点」を、ユーザーがいる地点からわかりやすくするために、塀の外であって、ユーザーがいる地点から第1の地点又は第2の地点への延長上にある位置に配置すればよい。これによって、ユーザーがいるスタート地点から見た場合に、ゴール地点の方向を示すアイテム(空間を認知しやすくするためのアイテム)に向かって進むことができるようになる。なお、「第1の地点から第2の地点へ移動すること」が課題である場合は、第1の地点から第2の地点への延長上になるように、空間を認知しやすくするためのアイテムを配置することになる。そして、「第1の地点から第2の地点へ移動し、第2の地点から元の第1の地点に戻る」が課題である場合は、前述のように、第1の地点から第2の地点への延長上になるように、空間を認知しやすくするためのアイテムを配置し、さらに、第2の地点から第1の地点への延長上になるように、空間を認知しやすくするためのアイテムを配置することになる。
なお、このように配置することは、トレーニングを目的とした情報処理装置100の利用に限定してもよい。具体的には、情報処理装置100を利用するにあたって、(1)認知機能の測定、(2)認知機能の向上のためのトレーニング、のいずれであるかを、ユーザーに選択させ、(2)認知機能の向上のためのトレーニングが選択された場合に、本提示モジュール105による処理を行うようにしてもよい。
ここで「ユーザーの動作を受け付ける」として、ユーザーの動作を検知することを含む。具体的には、ユーザーによるコントローラー250の操作を検知すること、ユーザーの音声を認識すること、ユーザーの視線を認識すること、ユーザーが首又は体の向きを変える、傾ける、歩く等の動作によるヘッドマウントディスプレイ200の状態の変化又は運動等を速度センサー、加速度センサー、角速度センサー、回転センサー、ジャイロスコープ等のセンサーを用いて検知することが含まれる。
制御モジュール120は、試験Aモジュール130と試験Bモジュール135と試験Cモジュール140に必要な計測が行われるように制御する。また、総合判断モジュール145に、例えば、試験Aモジュール130と試験Bモジュール135と試験Cモジュール140による試験結果の組み合わせで、ユーザーの認知機能を判断させるように制御する。また、試験Aモジュール130に必要な計測、試験Bモジュール135に必要な計測、試験Cモジュール140に必要な計測は、順に行われるようにしてもよい。ここでの「順に」として、最初に試験Aモジュール130に必要な計測、次に試験Bモジュール135に必要な計測、次に試験Cモジュール140に必要な計測であってもよいし、最初に試験Bモジュール135に必要な計測、次に試験Cモジュール140に必要な計測、次に試験Aモジュール130に必要な計測であってもよく、その順番は問わない。ただし、最初に試験Aモジュール130に必要な計測、次に試験Bモジュール135に必要な計測、次に試験Cモジュール140に必要な計測を行うように制御することが望ましい。特に、試験Bモジュール135に必要な計測、次に試験Cモジュール140に必要な計測の順番になるように制御することが望ましい。後述する説明では、最初に試験Aモジュール130に必要な計測、次に試験Bモジュール135に必要な計測、次に試験Cモジュール140に必要な計測を行う例を説明する。
そして、その場合、制御モジュール120は、試験Aモジュール130、試験Bモジュール135及び試験Cモジュール140に必要な計測を行う前に、前述の試行を行うよう制御するようにしてもよい。つまり、試験前に、ユーザーに情報処理装置100の操作に慣れてもらうようにするためである。
ここで「ユーザーが見ている方向」として、例えば、ユーザーの視線を検知すればよい。「3次元映像の提示装置の方向」として、例えば、ヘッドマウントディスプレイ200の方向を検知すればよい。これらの方向に対して、前進又は後退の移動のみを許可する。したがって、斜め前、斜め後ろ等への移動は許されない。具体的には、移動する場合にあって、(1)前進する場合は、進行方向を向いていること、(2)後退する場合は、進行方向とは反対方向を向いていること、が必要になる。
ここでの3次元映像は、ユーザーの周囲は塀によって囲まれており、その塀の外側にアイテムを配置した映像である。そして、ユーザーは、この塀に囲まれた空間内を移動することができる。塀に囲まれた空間は、一般的にアリーナともいわれる。その移動については、受付モジュール110が受け付けたユーザーの動作にしたがって移動する。
また、環境生成モジュール125は、3次元映像内における床面として、無模様でない床面を生成するようにしてもよい。例えば、床面をタイル等によって模様を付けるようにしてもよい。ユーザーが、自分が移動していることがわかるようにするためである。
環境生成モジュール125は、提示モジュール105が提示する「空間を認知しやすくするためのアイテム」として、(1)そのアイテムと同じ種類の他のアイテムとは形態が異なるアイテムであること、(2)そのアイテムと同じ種類の他のアイテムとは配置が異なっていること、又は、(3)他のアイテムとは種類が異なったアイテムであること、のいずれか1つ以上である。
ここで「形態」として、形状、模様、色彩、大きさ、動的に変化すること(例えば、フラッシュ、アニメーション等)、点滅(点滅における変更対象は、点滅を行うか否か、点滅を行っている期間、点滅の間隔等がある)、又は、これらの組み合わせであってもよい。
「アイテムと同じ種類の他のアイテム」とは、対象としているアイテムとカテゴリが同じであるアイテムをいう。例えば、空間を認知しやすくするためのアイテムが木である場合、木のアイテムであることをいう。この場合、2本以上の木が3次元映像内に提示されることになる。つまり、少なくとも空間を認知しやすくするための1本の木と、その他の木である。
「アイテムと同じ種類の他のアイテムとは形態が異なるアイテムであること」として、例えば、アイテムが山である場合に、赤色の山のように他の山(緑色の山、茶色の山等)とは色が異なる山である場合が該当する。アイテムが木である場合に、大きな木のように他の木とは大きさが異なる木である場合が該当する。もちろんのことながら、アイテムが木である場合に、黄色の木のように他の木(緑色の木等)とは色が異なる木である場合も該当する。なお、「他のアイテム」は、現実世界において存在する可能性の高いアイテムであって、ユーザーにとって違和感のないアイテムにし、「形態が異なるアイテム(空間を認知しやすくするためのアイテム)」は、現実世界において存在する可能性の低い(「存在し得ないこと」を含む)アイテムであることが好ましい。
「アイテムと同じ種類の他のアイテムとは配置が異なっていること」として、アイテムが木である場合に、「他のアイテム」である複数の木が群生している場合に、対象としているアイテムが1本だけ孤立している場合等が該当する。
また「他のアイテムとは種類が異なったアイテムであること」として、「他のアイテム」が一般的な環境内にある木、山等の静物である場合に、猫等の生物等が該当する。
なお、試験Aモジュール130と試験Bモジュール135と試験Cモジュール140は、各試験において3次元映像内でのユーザーによる移動を計測し、ユーザーの認知機能の判断は、総合判断モジュール145が行うようにしてもよい。
ここで「第1の地点」、「第2の地点」は、提示モジュール105によって提示された3次元映像によって構成される空間における地点である。そして、その空間内でユーザーが移動することが可能である。第1の地点は、例えば、スタート地点であり、第2の地点は、例えば、ゴール地点である。ユーザーには、「第1の地点(現在いる地点としてもよい)から第2の地点へ行って下さい」という課題を与えられており、第2の地点へ移動するためにコントローラー250の操作等を行うが、その操作に応じた移動を計測する。具体的には、3次元映像内の移動の軌跡を記録し、移動距離、第2の地点に到達するまでに要した時間、速度、第2の地点がある分割空間(分割空間については後述する)にとどまっていた時間等を計測する。なお、前述の課題は、ヘッドマウントディスプレイ200を装着する前にユーザーに知らせてもよいし、提示モジュール105が3次元映像内でユーザーに提示するようにしてもよい。
「認知機能」は、主に空間認知機能である。空間認知機能は、目で見た情報を脳の中で分析して方向、距離、位置等を把握する能力である。特に、嗅内皮質、海馬に関する機能を対象としてもよい。
本試験Aモジュール130による試験では、ユーザーは、最初に、スタート地点(第1の地点の一例)からゴール地点(第2の地点の一例)へ移動する。次に、ユーザーは、ゴール地点からスタート地点に戻る移動をする。このゴール地点からスタート地点に戻る移動が計測の対象となり、そのユーザーの認知機能を判断する。
経由地点(第3の地点の一例)をユーザーが通ることによって、スタート地点とゴール地点の両方を見ることができるようになる。つまり、経由地点にいることによって、スタート地点とゴール地点との位置関係を確認することができるようになる。
なお、第3の地点は、第1の地点と第2の地点との間の直線上には配置しないようにする。
経由地点をスタート地点とゴール地点との間の直線上に配置してしまうと、嗅内皮質のグリッド細胞機能以外が関与するためである。具体的には、スタート地点、経由地点、ゴール地点の3点を結ぶことによって三角形を構成するように設定する。
(判断A1)第2の地点から第1の地点に戻る際の移動に制限時間を設け、試験Aモジュール130は、その制限時間が経過した時点でユーザーがいる地点とその第1の地点との差分を用いて、そのユーザーの認知機能を判断するようにしてもよい。
(判断A2)受付モジュール110によって第1の地点に戻ったことを示すユーザーの動作が受け付けられた場合に、試験Aモジュール130は、そのユーザーがいる地点とその第1の地点との差分、又は、第2の地点からそのユーザーがいる地点に戻るまでの時間、を用いて、そのユーザーの認知機能を判断するようにしてもよい。
(判断A3)第2の地点から第1の地点に戻るユーザーの移動中における、その第1の地点と移動中の地点との距離の総和を用いて、そのユーザーの認知機能を判断するようにしてもよい。ここでの「距離の総和」として、例えば、予め定められた時間間隔で、目的地である第1の地点とユーザーの現在時の地点との距離を算出し、制限時間の経過時点又は第1の地点に戻ったことを示すユーザーの動作を受け付けた時点までの、その距離の総和を算出すればよい。試行錯誤が多いほど、この「距離の総和」は大きくなる。逆に言うと、スタート地点を正確に覚えていれば、この「距離の総和」は小さくなる。
もちろんのことながら、逆の判断をするようにしてもよい。試験Aモジュール130は、「(判断A1)の差分が予め定められた閾値A’より大きい又は以上である場合」、「(判断A2)の差分が予め定められた閾値B’より大きい又は以上である場合」、「(判断A2)の時間が予め定められた閾値C’より大きい又は以上である場合」、又は、「(判断A3)の総和が予め定められた閾値D’より大きい又は以上である場合」は、ユーザーの認知機能は正常ではない可能性が高い(認知症であることを含む)と判断するようにしてもよい。これらの閾値(閾値A’〜D’)は、予め若齢正常者(20代)、認知症のユーザーによる実験によって定められるものである。
ここで「統計的値」として、複数回の試験で計測した値を用いた値であればよく、例えば、平均値、最頻値、中央値、最大値、最小値等であってもよい。
もちろんのことながら、逆の判断をするようにしてもよい。複数回の繰り返しが行われた後に、試験Aモジュール130は、「(判断A1)の差分が不変、不定、若しくは、漸増する場合」、「(判断A2)の差分が不変、不定、若しくは、漸増する場合」、「(判断A2)の時間が不変、不定、若しくは、漸増する場合」、又は、「(判断A3)の総和が不変、不定、若しくは、漸増する場合」は、ユーザーの認知機能は正常ではない可能性が高い(認知症であることを含む)と判断するようにしてもよい。なお、不定は、漸減、漸増、不変のいずれとも判断できない場合をいう。
(1)ユーザーが第1の地点から第2の地点に移動する場合、第2の地点の目印を提示する。
(2)ユーザーが第1の地点から第2の地点に移動する場合、経由すべき第3の地点の目印を提示する。
(3)ユーザーが第2の地点から第1の地点に戻る際には、第3の地点に提示していた目印を消去する。つまり、第2の地点に到達後は第3の地点を見えなくする。
(4)第1の地点には、そもそも目印を提示しない。具体的には、ユーザーが第1の地点から第2の地点に移動する場合、ユーザーが第2の地点から第1の地点に戻る場合、ともに、第1の地点には目印を提示しない。ただし、第1の地点に戻った場合は、戻ったことを示す提示を行う。
(5)ユーザーが第2の地点から第1の地点に戻る場合の制限時間を設けた場合、その制限時間内に第1の地点に戻っていないとき、又は、第1の地点に戻ったことを示すユーザーの動作を受け付けたときは、本来の第1の地点(本情報処理装置100が設定した第1の地点)に目印を提示する。つまり、ユーザーに対して、自分がどこに戻るべきだったのであるかを知らせるようにしている。
(6)なお、ユーザーが第2の地点から第1の地点に戻る際には、第2の地点に提示していた目印を消去するようにしてもよいし、第2の地点に提示していた目印はそのまま提示し続けるようにしてもよい。
(7)スタート前において、第1の地点にも目印を提示してもよい。その場合、ユーザーが第1の地点からスタートした場合(つまり、第1の地点からユーザーが離れた場合)に、その目印を消去するようにしてもよい。
試験Bモジュール135による試験では、ユーザーは、スタート地点(第1の地点の一例)からゴール地点(第2の地点の一例)へ移動する。ただし、ゴール地点に目印はなく、ユーザーは探索する必要がある。
この試験Bモジュール135による処理を行う場合、提示モジュール105は、ユーザーが第2の地点に到達した場合は、第2の地点に到達したことを示す提示を行うようにしてもよい。
ここで「ユーザーが第2の地点に到達した」ことを検知するのに、ユーザーの地点と第2の地点との間の距離を計測し、その距離が予め定められた閾値X1未満又は以下であるかを判断すればよい。また、第2の地点から予め定められた半径X2の円内にユーザーがいるか否かを判断するようにしてもよい。
また、この試験Bモジュール135による処理を行う場合、提示モジュール105は、ユーザーが第2の地点に近づいた場合は、そのユーザーの近くにその第2の地点があることを示す提示を行うようにしてもよい。
ここで「ユーザーが第2の地点に近づいた」ことを検知するのに、ユーザーの地点と第2の地点との間の距離を計測し、その距離が予め定められた閾値Y1未満又は以下であるか否かを判断すればよい。また、第2の地点から予め定められた半径Y2の円内にユーザーがいるか否かを判断するようにしてもよい。なお、閾値Y1は閾値X1より大であり、閾値Y2は閾値X2より大である。
また、「第2の地点に到達したことを示す提示」、「近くに第2の地点があることを示す提示」として、例えば、そのことを示すマークを表示すること、音声で知らせること、コントローラー250又はヘッドマウントディスプレイ200を振動させて知らせること等がある。
(判断B1)第1の地点から第2の地点への移動に制限時間を設け、試験Bモジュール135は、その制限時間が経過した時点でユーザーがいる地点とその第2の地点との差分を用いて、そのユーザーの認知機能を判断するようにしてもよい。なお、その制限時間内に、ユーザーが第2の地点に到達した場合は、差分は0である。
(判断B2)ユーザーが第2の地点に到達した場合は、試験Bモジュール135は、第1の地点からその第2の地点に到達するまでの時間を用いて、そのユーザーの認知機能を判断するようにしてもよい。なお、第1の地点から第2の地点への移動に制限時間を設け、その制限時間内に、ユーザーが第2の地点に到達しなかった場合は、その制限時間を「到達するまでの時間」としてもよい。
(判断B3)試験Bモジュール135は、第1の地点から第2の地点へのユーザーの移動中における、その第2の地点と移動中の地点との距離の総和を用いて、そのユーザーの認知機能を判断するようにしてもよい。ここでの「距離の総和」として、例えば、予め定められた時間間隔で、目的地である第2の地点とユーザーの現在時の地点との距離を算出し、制限時間の経過時点又は第2の地点に戻ったことを示すユーザーの動作を受け付けた時点までの、その距離の総和を算出すればよい。試行錯誤が多いほど、この「距離の総和」は大きくなる。逆に言うと、2回目以降のテストでは、ゴール地点を正確に覚えていれば、この「距離の総和」は小さくなる。
もちろんのことながら、逆の判断をするようにしてもよい。試験Bモジュール135は、「(判断B1)の差分が予め定められた閾値E’より大きい又は以上である場合」、「(判断B2)の時間が予め定められた閾値F’より大きい又は以上である場合」、又は、「(判断B3)の総和が予め定められた閾値G’より大きい又は以上である場合」は、ユーザーの認知機能は正常ではない可能性が高い(認知症であることを含む)と判断するようにしてもよい。これらの閾値(閾値E’〜G’)は、予め若齢正常者(20代)、認知症のユーザーによる実験によって定められるものである。
もちろんのことながら、逆の判断をするようにしてもよい。複数回の繰り返しが行われた後に、試験Bモジュール135は、「(判断B1)の差分が不変、不定、又は、漸増する場合」、「(判断B2)の時間が不変、不定、又は、漸増する場合」、又は、「(判断B3)の総和が不変、不定、又は、漸増する場合」は、ユーザーの認知機能は正常ではない可能性が高い(認知症であることを含む)と判断するようにしてもよい。
なお「第1の地点を変更」する場合は、変更する前の第1の地点と第2の地点との間の距離と同じ又は距離の差分が予め定められた範囲内になるように、第1の地点を変更するようにしてもよい。つまり、「前回における、第1の地点と第2の地点との間の距離」と「今回における、第1の地点と第2の地点との間の距離」をほぼ同じにするようにしている。移動に要した時間を比較することができるようにするためである。
試験Cモジュール140による試験では、ユーザーは、スタート地点(第1の地点の一例)からゴール地点(第2の地点の一例)へ移動する。このゴール地点に目印はない。ただし、試験Cモジュール140による試験を行う前に、ユーザーに対して、目印があるゴール地点が提示されている。したがって、ユーザーは、ユーザー自身の記憶内にあるゴール地点に移動することになる。
「そのユーザーが第1の地点から目印のない第2の地点を探索するための移動を行う場合において、そのユーザーがその第2の地点に到達した場合は、その第2の地点に目印を提示すること、又は、その第2の地点の探索に制限時間を設け、その制限時間が経過した場合は、その第2の地点に目印を提示すること、のいずれか」とは、試験Bモジュール135による試験における1回目の試験のことを指しており、具体的には、(1)ユーザーが第1の地点から目印のない第2の地点を探索するための移動を行う場合において、そのユーザーが第2の地点に到達した場合は、第2の地点に目印を提示すること、(2)ユーザーが第1の地点から目印のない第2の地点を探索するための移動を行う場合において、第2の地点の探索に制限時間を設け、その制限時間が経過した場合は、第2の地点に目印を提示すること、のいずれかである。
なお、試験Bモジュール135による試験を行った後であって、試験Cモジュール140による試験においても第2の地点を変更しなければ(つまり、試験Cモジュール140による試験の第2の地点を試験Bモジュール135による試験の第2の地点とすれば)、「目印がある第2の地点をユーザーに提示した」に該当することになる。そして、第2の地点の目印を消去して、ユーザーに、第1の地点から第2の地点に移動してもらう課題を提示する。なお、試験Cモジュール140による試験におけるスタート地点である第1の地点は、試験Bモジュール135による試験における第1の地点とは異なる位置であることが望ましい。
そして、試験Cモジュール140は、移動を計測することとして、ユーザーが第2の分割空間にとどまっている時間を計測するようにしてもよい。
ここで「ユーザーが移動できる空間」として、図2、図4の例を用いて後述するように、ヘッドマウントディスプレイ200がユーザーに対して提示する空間であって、その空間内でユーザーが移動することが可能なアリーナ空間400が該当する。
「空間を分割」として、例えば、図31に示すように、アリーナ空間3100の中心点を通る2本の弦によって4等分に分割することの他に、8等分、16等分等のように分割してもよいし、等分に分割しなくてもよい。例えば、第2の地点から予め定められた半径の空間(円状の空間)と他の空間(アリーナ空間400内であって、その円状の空間以外の空間)に分割してもよい。
また、ユーザーがスタートする第1の地点がある第1の分割空間は、第2の地点がある第2の分割空間とは異なった分割空間である。したがって、ユーザーは、第1の分割空間から第2の分割空間に移動することが必要であり、単に第1の地点に佇んでいる場合は、第2の分割空間にとどまっている時間は0秒となる。
「第2の分割空間にとどまっている時間」とは、ユーザーが第2の分割空間にいる時間のことであり、ユーザーが第2の分割空間にいれば、ユーザーは移動していてもよいし、移動せずに立ち止まっている状態であってもよい。
(判断C1)ユーザーが第1の地点から目印のない第2の地点への移動の試験を1度だけ行う場合は、以下のように判断する。試験Cモジュール140は、計測された時間が予め定められた閾値Hより大きい又は以上である場合は、ユーザーの認知機能は正常である可能性が高いと判断するようにしてもよい。「計測された時間」とは、もちろんのことながら、ユーザーが第2の空間内にいた時間である。
(判断C2)ユーザーが第1の地点から目印のない第2の地点への移動の試験を複数回行う場合は、以下のように判断する。試験Cモジュール140は、計測された時間の統計的値が予め定められた閾値Iより大きい又は以上である場合は、ユーザーの認知機能は正常である可能性が高いと判断するようにしてもよい。
また、閾値H、Iは、予め若齢正常者(20代)、認知症のユーザーによる実験によって定められるものである。
もちろんのことながら、逆の判断をするようにしてもよい。試験Cモジュール140は、「(判断C1)の時間が予め定められた閾値H’未満又は以下である場合」は、ユーザーの認知機能は正常ではない可能性が高い(認知症であることを含む)と判断するようにしてもよい。「(判断C2)の統計的値が予め定められた閾値I’未満又は以下である場合」は、ユーザーの認知機能は正常ではない可能性が高い(認知症であることを含む)と判断するようにしてもよい。閾値H’、I’は、予め若齢正常者(20代)、認知症のユーザーによる実験によって定められるものである。
ここで「複数の試験」として、試験Aモジュール130による試験A、試験Bモジュール135による試験B、試験Cモジュール140による試験C(試験Bに続く試験C)、試験Cモジュール140による試験C(単独で行う試験C)を例示するが、他の試験であってもよい。他の試験も、ヘッドマウントディスプレイを用いた試験であることが望ましい。
「複数の試験のうち、少なくとも2つの試験における計測の結果」として、例えば、ユーザーに対して3つ以上の試験を行って、そのうちの2つ以上の試験の計測の結果であってもよいし、ユーザーに対して2つの試験を行って、その2つの試験の計測の結果であってもよいし、ユーザーに対して3つ以上の試験を行って、その全ての試験の計測の結果であってもよい。特に、「複数の試験を行って、その全ての試験における計測の結果」を用いた判断を行うのが望ましい。
複数の試験のうち、試験Bは、前述の通り、ユーザーが第3の地点から目印のない第4の地点を探索する試験であり、試験Bモジュール135は、その探索のためのユーザーの移動を計測する。
複数の試験のうち、試験C(単独で行う試験C)は、前述の通り、目印がある第6の地点をユーザーに提示した後に、その目印を消去し、ユーザーが第5の地点から目印のない第6の地点への移動を行う試験であり、試験Cモジュール140は、ユーザーのその移動を計測する。
複数の試験のうち、試験C(試験Bに続く試験C)は、前述の通り、試験Bの後に行い、ユーザーが第5の地点から目印のない第4の地点への移動を行う試験であり、試験Cモジュール140は、ユーザーのその移動を計測する。試験C(試験Bに続く試験C)は、試験Bの後に行う。したがって、試験Bで用いた第4の地点を、試験C(試験Bに続く試験C)でも用いる。試験Bでは、第4の地点を探索する際には、その第4の地点には目印がないが、その第4の地点に到達した場合、又は、試験Bの制限時間が経過したときに、その第4の地点に目印を提示するようにしてもよい。
例えば、3つの試験を行う場合は、試験Aと試験Bと試験C(単独で行う試験C)の組み合わせ、試験Aと試験Bと試験C(試験Bに続く試験C)の組み合わせ、がある。これらの組み合わせ内の試験は、試験Bと試験C(試験Bに続く試験C)を連続させること以外では、いずれを先に行ってもよい。
総合判断モジュール145は、試験Bにおける計測の結果と試験C(単独で行う試験C)における計測の結果を用いて、ユーザーの認知機能を判断するようにしてもよい。
総合判断モジュール145は、試験Bにおける計測の結果と試験C(試験Bに続く試験C)における計測の結果を用いて、ユーザーの認知機能を判断するようにしてもよい。
総合判断モジュール145は、試験Aにおける計測の結果と試験C(単独で行う試験C)における計測の結果を用いて、ユーザーの認知機能を判断するようにしてもよい。
総合判断モジュール145は、試験Aと試験Bと試験C(単独で行う試験C)における計測の結果を用いて、ユーザーの認知機能を判断するようにしてもよい。
総合判断モジュール145は、試験Aと試験Bと試験C(試験Bに続く試験C)の組み合わせにおける計測の結果を用いて、ユーザーの認知機能を判断するようにしてもよい。この場合、例えば、総合判断モジュール145は、複数回の試験Aによる差分の平均値と閾値との比較、複数回の試験Bによる総和の最小値と閾値との比較、1回の試験C(試験Bに続く試験C)による時間と閾値との比較を行い、ユーザーの認知機能を判断するようにしてもよい。
ユーザー290は、ヘッドマウントディスプレイ200(VRゴーグルとも言われる)を装着し、コントローラー250を所持している。ヘッドマウントディスプレイ200内のセンサー、コントローラー250は、受付モジュール110の一例である。つまり、「センサーが検知したユーザー290の動作」、「コントローラー250に対するユーザー290の操作」は、ユーザー290の動作の一例である。コントローラー250には、試験を開始させるためのスタートボタン、試験を終了させるための終了ボタン、そして、移動速度及び移動方向を決めるためのジョイスティック等がある。
ヘッドマウントディスプレイ200は、情報処理装置100、マイク・認識手段210を有している。マイク・認識手段210は、受付モジュール110の一例であり、ユーザー290の音声を受け付け、その音声を認識して、ユーザーの指示を受け付ける。「ユーザー290の音声による指示」も、ユーザー290の動作の一例である。
ヘッドマウントディスプレイ200の情報処理装置100とコントローラー250は、無線又は有線の通信回線により接続されている。指示装置であるコントローラー250によって、仮想空間における進行方向等の指示を行う。
ユーザー290は、音声又はコントローラー250を操作して、ヘッドマウントディスプレイ200が提示している仮想空間内を始点から目的地に向けて移動する。コントローラー250のユーザーインターフェイスとして、例えば、物理的なボタン(例えば、試験を開始させるためのスタートボタン、試験を終了させるための終了ボタン)を用いたものであってもよいし、レバーによって方向入力及び移動速度を決めることができるジョイスティック等を用いるようにしてもよいし、タッチパッド等を用いるようにしてもよい。
3次元映像は、ユーザー290にとって立体的に見える映像のことである。
3次元映像を提示する装置として、ヘッドマウントディスプレイ200の他に、偏光メガネ等を利用した平面ディスプレイを用いてもよい。
脳機能観測支援装置300、ヘッドマウントディスプレイ200B、ヘッドマウントディスプレイ200Aは、通信回線390を介してそれぞれ接続されている。通信回線390は、無線、有線、これらの組み合わせであってもよく、例えば、通信インフラとしてのインターネット、イントラネット等であってもよい。
脳機能観測支援装置300は、仮想空間の3次元映像(仮想空間内のユーザーがいる位置から見える映像)、ユーザー290の個人情報(年齢、判断結果等)を管理しており、各ヘッドマウントディスプレイ200に送信する。また、各ヘッドマウントディスプレイ200から判断結果等の情報を受信して管理する。なお、脳機能観測支援装置300内に情報処理装置100を具備し、情報処理装置100の機能をクラウドサービスとして実現してもよい。
施設350A内には、ヘッドマウントディスプレイ200Aを装着したユーザー290Aがいる。施設350B内には、ヘッドマウントディスプレイ200Bを装着したユーザー290Bがいる。例えば、施設350として、健康診断センター、病院、歯科医院等の医療機関、会社、又は、ユーザー290の自宅等であってもよい。
ユーザー290は、施設350でヘッドマウントディスプレイ200を用いた試験を定期的(例えば、3ヶ月に1度等)に受け、自己の認知症発症リスクを判定してもらう。早期発見された認知症予備軍であるユーザー290に対して、認知症発症予防活動の継続を支援する。
アリーナ空間400は、例えば、円形の塀410に囲まれた空間である。ユーザー290は、ヘッドマウントディスプレイ200を装着することによって、アリーナ空間400内にいるように感じる。例えば、ユーザー290が上方を見れば、塀410より上にある映像を見ることができ、ユーザー290が下を見れば、床面を見ることができる。そして、コントローラー250を操作することによって、アリーナ空間400内を自由に(自分の意思で)移動することができる。なお、アリーナ空間400は、円形であってもよいし、楕円形状であってもよいし、矩形等のその他の形状であってもよい。
例えば、ユーザー290は、アリーナ空間400内のスタート地点510にいて、ゴール地点530へ移動する課題が与えられたとする。ユーザー290は、コントローラー250を操作して、スタート地点510からゴール地点530に移動する。なお、本実施の形態における移動は、仮想空間における移動であって、ユーザー290自身が物理的な移動をする必要はない。ただし、ユーザー290自身の物理的な移動を検知して、アリーナ空間400内を移動するようにすることを妨げるものではない。
そして、この試験が繰り返される。ゴール地点530は固定にし、スタート地点510はランダム(疑似乱数を含む)に変更する。スタート地点510とゴール地点530の位置関係にしたがって、経由地点520の位置も変更する。
そして、この試験が繰り返される。ゴール地点530は固定にし、スタート地点510はランダム(疑似乱数を含む)に変更する。
そこで、情報処理装置100は、仮想空間内に配置するアイテムのうち、一般的なアイテムの他に、空間を認知しやすくするためのアイテムを混ぜて配置するようにした。
図6は、本実施の形態による処理例を示すフローチャートである。
ステップS602では、アイテムの種類を選択する。アイテムの種類として、例えば、山、木、動物等がある。これらから、VR空間内に配置するアイテムを選択する。選択は、ユーザーの操作によって選択してもよいし、予め定められたアイテムを選択するようにしてもよい。ここで、選択対象として、「他のアイテムとは種類が異なったアイテム」を含めるようにしてもよい。そして、少なくとも1つは「他のアイテムとは種類が異なったアイテム」を選択するよう強制するようにしてもよい。なお、「他のアイテム」として、景色として一般的なアイテムである「山」、「木」等が該当し、「他のアイテムとは種類が異なったアイテム」として、猫等の動物、時計等の人工物等としてもよい。また、「他のアイテム」は複数種類を選択しなければならず、「他のアイテムとは種類が異なったアイテム」は1つだけ選択しなければならないというようにしてもよい。つまり、「他のアイテムとは種類が異なったアイテム」は、選択しないということができず、複数選択することもできないようにしてもよい。
ステップS620では、選択した全てのアイテムの種類を生成、配置したか否かを判断し、選択した全てのアイテムの種類を生成、配置した場合は処理を終了し(ステップS699)、それ以外の場合はステップS604へ戻る。
本フローチャートによって生成、配置されたアイテムは、アリーナ空間400の上方に見えることになる。
図7は、アリーナ管理テーブル700のデータ構造例を示す説明図である。アリーナ管理テーブル700は、アリーナID欄705、形状欄710、大きさ欄715、アイテム種類数欄720、アイテム種欄725、アイテム数欄730、アイテムID欄735、アイテム配置欄740、属性欄745を有しており、属性欄745は、色欄747、大きさ欄749を有している。アリーナID欄705は、本実施の形態において、アリーナを一意に識別するための情報(具体的には、アリーナID:IDentificationの略)を記憶している。形状欄710は、そのアリーナの形状を記憶している。具体的には、円形、楕円形、方形等が該当する。大きさ欄715は、そのアリーナの大きさを記憶している。例えば、アリーナが円形である場合は半径50m等が該当する。アイテム種類数欄720は、アイテムの種類数を記憶している。ステップS602で選択されたアイテムの種類の数である。アイテム種欄725は、アイテム種を記憶している。ステップS602で選択されたアイテムの種類である。アイテム数欄730は、アイテム数を記憶している。ステップS604で選択されたアイテムの個数である。アイテムID欄735は、本実施の形態において、アイテムを一意に識別するための情報(具体的には、アイテムID)を記憶している。アイテム配置欄740は、そのアイテムの配置位置を記憶している。例えば、3次元映像内の座標(X座標、Y座標、Z座標)を記憶している。属性欄745は、そのアイテムの属性を記憶している。色欄747は、そのアイテムの色を記憶している。大きさ欄749は、そのアイテムの大きさを記憶している。
図8は、本実施の形態による提示例を示す説明図である。
VR空間映像800は、ユーザー290がヘッドマウントディスプレイ200を装着した場合に、ユーザー290が見ている映像の一例である。この3次元空間内では、ユーザー290は、円形の塀810に囲まれている空間内にいる。
VR空間映像800には、塀810、地面820、旗830a、木850a、木850b、木850c、木850d、山860a、空880が表示されている。例えば、塀810内には、ゴール地点530を示す旗830aが立てられている。そして、塀810の外側には、木850(木850a、木850b、木850c、木850d)、山860(山860a)が配置されている。木850は4本あるが、この中で、木850a、木850c、木850dは、ほぼ同じ大きさであり、緑色の木であるが、木850bは、図6の例に示すフローチャートで特殊アイテムとして生成されたものであり、他の木850a等よりも大きく、また、色も赤色の木である。この木850bによって、ユーザー290は、空間認知を行いやすくなる。
VR空間映像900には、塀810、地面820、旗830b、旗830c、旗830d、宝箱840a、木850e、木850f、木850g、木850h、山860b、山860c、山860d、空880が表示されている。例えば、塀810内には、ゴール地点530を示す宝箱840aが置かれ、旗830bが立てられている。また、経由地点520を示す旗830dが立てられている。そして、塀810の外側には、木850(木850e、木850f、木850g、木850h)、山860(山860b、山860c、山860d)が配置されている。これらは、一般的なアイテム(特殊アイテムではなく)、配置(特殊配置でもない)である。なお、制限時間内にスタート地点510に戻ることができなかった場合は、スタート地点510を示す旗830を立てるようにしてもよい。
VR空間映像1000には、塀810、地面820、木850i、木850j、木850k、山860e、空880が表示されている。例えば、塀810の外側には、木850(木850i、木850j、木850k)、山860(山860e)が配置されている。木850は3本あるが、この中で、木850i、木850jは、ほぼ同じ大きさであり、緑色の木であるが、木850kは、図6の例に示すフローチャートで特殊アイテムとして生成されたものであり、他の木850i等よりも大きい木である。この木850iによって、ユーザー290は、空間認知を行いやすくなる。
図11は、本実施の形態による処理例を示すフローチャートである。
ステップS1102では、フリーステージを実施する。ここでのフリーステージとは、3次元映像によって構成される空間で、ユーザー290の移動を施行可能にするステップの一例である。ユーザーに、ヘッドマウントディスプレイ200、コントローラー250の使用を慣れさせるためのものである。ステップS1102の詳細な処理については、図13又は図14の例に示すフローチャートを用いて後述する。
ステップS1104では、スタート地点からゴール地点に行って、スタート地点に戻るテスト(テストA)を実施する。試験Aモジュール130によるテストである。ステップS1104の詳細な処理については、図15の例に示すフローチャートを用いて後述する。
ステップS1106では、ゴール地点を探して到達するテスト(テストB)を実施する。試験Bモジュール135によるテストである。ステップS1106の詳細な処理については、図22の例に示すフローチャートを用いて後述する。
ステップS1108では、テストBにおけるゴールまで行くテスト(テストC)を実施する。試験Cモジュール140によるテストである。ステップS1108の詳細な処理については、図28等の例に示すフローチャートを用いて後述する。
ステップS1110では、2つ以上のテストの結果を組み合わせて診断する。ステップS1110の詳細な処理については、図36の例に示すフローチャートを用いて後述する。
なお、例えば、ステップS1106、ステップS1108、ステップS1104の順番で試験を行ってもよいが、ステップS1104、ステップS1106、ステップS1108の順番であることが望ましい。
図12は、ユーザー情報テーブル1200のデータ構造例を示す説明図である。ユーザー情報テーブル1200は、ユーザーID欄1205、名前欄1210、生年月日欄1215、性別欄1220、病歴欄1225、過去テスト実施回数欄1230、日付欄1235、結果欄1240等を有している。ユーザーID欄1205は、本実施の形態において、ユーザーを一意に識別するための情報(具体的にはユーザーID)を記憶している。名前欄1210は、そのユーザーの名前を記憶している。生年月日欄1215は、そのユーザーの生年月日を記憶している。性別欄1220は、そのユーザーの性別を記憶している。病歴欄1225は、そのユーザーの病歴を記憶している。過去テスト実施回数欄1230は、そのユーザーが過去に行ったテストの実施回数を記憶している。過去テスト実施回数欄1230内の回数だけ、日付欄1235と結果欄1240の組み合わせが続く。日付欄1235は、そのテストを行った日付を記憶している。結果欄1240は、そのテストの結果を記憶している。
ステップS1304では、ユーザー290によるコントローラー250の操作にしたがって移動する。
ステップS1306では、ユーザー290による終了ボタンの選択を検知する。
ステップS1404では、ユーザー290によるコントローラー250の操作にしたがって移動する。
ステップS1408では、ユーザー290の移動速度を計測する。移動速度として、例えば、スタートボタンが選択された後、終了ボタンが選択されるまでの時間で、移動した距離を除算してもよいし、終了ボタンが選択されるまでの予め定められた期間(つまり、操作にされた後)で、移動した距離を除算してもよいし、スタートボタンが選択された後、終了ボタンが選択されるまでの移動速度のうち、平均的な移動速度としてもよい。
図15は、本実施の形態(主に、試験Aモジュール130)による処理例を示すフローチャートである。この処理は、図11の例を示すフローチャートのステップS1104の一例である。試験Aモジュール130によるテストは、主に嗅内野のテストに関するものである。つまり、目的地であるゴール地点から元いたスタート地点に戻る移動を計測して、嗅内野の機能を測定する。
ステップS1504では、スタート、ゴール、経由の各地点を自動設定する。
例えば、ゴール地点は固定とし、スタート地点はランダムに変更する。つまり、規定回数に達するまでのテストではゴール地点は変更せずに、スタート地点は各テストで異ならせる。そして、スタート地点とゴール地点によって経由地点の出現位置も変更する。スタート地点とゴール地点間の距離は一定になるような処理はしないようにしてもよい。
また、スタート地点とゴール地点間の距離を一定とするような処理を行ってもよい。そのために、以下のように行ってもよい。タイムアウトの時間(制限時間)は予め定められている。まず、ゴール地点を決定し、タイムアウトの時間と平均速度から、移動可能な距離を算出し、ゴール地点からその距離内にある位置をスタート地点として決定すればよい。なお、平均速度は、予め定められた速度を用いてもよいし、図14の例に示すフローチャートによる処理が行われた場合は、ユーザー290の平均速度を用いてもよい。
なお、スタート地点は固定とし、ゴール地点はランダムに変更するようにしてもよいし、スタート地点とゴール地点をランダムに変更するようにしてもよい。
また、経由地点は、前述したように、スタート地点とゴール地点の両方を見ることができる位置に配置し、スタート地点とゴール地点との間の直線上には配置しないようにする。
ステップS1508では、ユーザー290によるコントローラー250の操作にしたがって経由地点に移動する。なお、この経由地点に到達した時点で、ユーザー290に対して、スタート地点とゴール地点を確認する旨の表示を行うようにしてもよい。
ステップS1512では、ゴール地点に近くにあることを表示する。具体的には、ユーザー290の位置とゴール地点間の距離を算出し、ゴール地点から予め定められた距離A内であれば「ゴール地点に近く」にいると判断し、そのことを示す表示を3次元映像内に行う。図17は、本実施の形態によるステップS1512での提示例を示す説明図である。VR空間映像1700には、塀810、地面820、木850l、木850m、山860f、山860g、空880、ゴール近傍マーク1710が表示されている。例えば、「ゴール地点に近く」にいることを示す表示として、ゴール近傍マーク1710を表示する。「ゴール地点から予め定められた距離A内」として、例えば、2m以内としてもよい。なお、視覚的な表示ではなく、音声、振動等で知らせるようにしてもよい。また、表示、音声、振動等の組み合わせで知らせるようにしてもよい。
なお、ゴール地点には旗を立てているので、ステップS1512の処理は必ずしも行う必要はない。
ステップS1520では、0.5秒に1回VR空間上の位置情報を記録する。なお、この「0.5秒」は例示であって、一定の秒数であれば、他の秒数であってもよい。
なお、本実施の形態では、スタート地点から経由地点、経由地点からゴール地点への移動のログは採取していない。つまり、ゴール地点からスタート地点に戻る移動におけるログだけを採取している。しかし、スタート地点から経由地点、経由地点からゴール地点への移動のログも採取して、各地点への到達時間、エラースコア等を用いて、認知機能の判断材料としてもよい。
なお、スタート地点からゴール地点への移動において経由地点を必ず経由することを、ユーザー290のルールとして課さなくてもよい。
図21は、テストA用結果テーブル2100のデータ構造例を示す説明図である。テストA用結果テーブル2100は、テストID欄2105、ユーザーID欄2110、日時欄2115、ズレ欄2120、エラースコア欄2125を有している。テストID欄2105は、テストIDを記憶している。ユーザーID欄2110は、そのテストを行ったユーザーIDを記憶している。日時欄2115は、そのテストが行われた日時を記憶している。ズレ欄2120は、本来のスタート地点とユーザーが戻ってきたスタート地点とのズレを記憶している。このズレは、前述した(判断A1)における差分に該当する。エラースコア欄2125は、エラースコアを記憶している。このエラースコアは、前述した(判断A3)における総和に該当する。
また、規定回数の繰り返しによって、ズレ欄2120内の値が漸減する場合、又は、エラースコア欄2125内の値が漸減する場合は、ユーザーの認知機能は正常である可能性が高いと判断するようにしてもよい。
なお、スタート地点に戻ったことを示すユーザーの動作が受け付けられた場合に、その地点を、そのユーザー290が考えているゴール地点としてもよい。その場合、テストA用結果テーブル2100に到達時間の欄を設けるようにしてもよい。つまり、その到達時間の欄には、図15の例に示すフローチャートのステップS1516の時点から、スタート地点に戻ったことを示すユーザーの動作が受け付けられた時点までの期間が記憶されることになる。つまり、到達時間の欄内の値は、前述した(判断A2)における「第2の地点からそのユーザーがいる地点に戻るまでの時間」に該当する。もちろんのことながら、ズレ欄2120には、スタート地点に戻ったことを示すユーザーの動作が受け付けられた地点と本来のスタート地点との距離であるズレが記憶されることになる。
そして、前述したように、ズレ欄2120内の値が予め定められた閾値B未満又は以下である場合、又は、到達時間の欄内の値が予め定められた閾値C未満又は以下である場合は、ユーザーの認知機能は正常である可能性が高いと判断するようにしてもよい。
また、規定回数の繰り返しによって、ズレ欄2120内の値が漸減する場合、又は、到達時間の欄内の値が漸減する場合は、ユーザーの認知機能は正常である可能性が高いと判断するようにしてもよい。
また、制限時間における残り時間を、ユーザー290が見ている3次元映像内に表示するにあたって、ユーザー290がコントローラー250を上に挙げた場合(又は、ユーザー290がコントローラー250を見下ろした場合)に、そのコントローラー250の位置に残り時間を表示するようにしてもよい。つまり、コントローラー250を腕時計と擬制し、あたかも腕時計を見ているかのような操作で、残り時間を表示することができる。
図22は、本実施の形態(主に、試験Bモジュール135)による処理例を示すフローチャートである。この処理は、図11の例を示すフローチャートのステップS1106の一例である。試験Bモジュール135によるテストは、主に海馬のテストに関するものである。認知症によって、もっとも早く衰えてくるのが海馬と言われている。その海馬の機能を測定するために目的地であるゴール地点を探すテストを行う。
ヒントなしで目的地であるゴール地点をユーザーが発見し、そのゴール地点に、前回のテストとは異なるスタート地点からたどり着くテストを行い、結果を判断する。なお、「ヒントなし」とは、ゴール地点に旗を立てることをしないという意味である。
完全なるノーヒントではゴールにたどり着けない可能性があるので、ゴール地点に近づいたことを示す表示を行うようにしてもよい。例えば、ゴール地点から2メートル以内にユーザーが接近した場合、見ている画面の上部にその表示を行うようにしてもよい。
また、ゴール地点は変更しないが、スタート地点はランダムに変更し、ゴール地点にたどり着く時間、経路(具体的には、ゴール地点とのズレやエラースコア)で海馬による記憶力を測るようにしている。
また、移動の軌跡を再現できるようにするため、各回のスタート位置からゴール位置に到達するまで(又は制限時間に達するまで)の位置情報を収集する。
ステップS2204では、スタート地点を自動設定する。
例えば、スタート地点をランダムに変更する。つまり、スタート地点は各テスト(規定回数に達するまでの各テスト)で異ならせる。なお、スタート地点とゴール地点間の距離が一定になるような処理はしないようにしてもよい。また、スタート地点とゴール地点間の距離を一定とするような処理を行ってもよい。詳細な処理については、テストAと同様の処理を行えばよい。
なお、ゴール地点は予め設定しておき、本フローチャートによる処理(各テスト)においては同じゴール地点を用いる。
ステップS2208では、0.5秒に1回VR空間上の位置情報を記録する。なお、この「0.5秒」は例示であって、一定の秒数であれば、他の秒数であってもよい。
ステップS2212では、ゴール地点に近くにあることを表示する。具体的には、ユーザー290の位置とゴール地点間の距離を算出し、ゴール地点から予め定められた距離A内であれば「ゴール地点に近く」にいると判断し、そのことを示す表示を3次元映像内に行う。図24は、本実施の形態によるステップS2212での提示例を示す説明図である。VR空間映像2400には、塀810、地面820、木850l、木850m、山860f、山860g、空880、ゴール近傍マーク2410が表示されている。例えば、「ゴール地点に近く」にいることを示す表示として、ゴール近傍マーク2410を表示する。「ゴール地点から予め定められた距離A内」として、例えば、2m以内としてもよい。なお、視覚的な表示ではなく、音声、振動等で知らせるようにしてもよい。また、表示、音声、振動等の組み合わせで知らせるようにしてもよい。
ステップS2216では、ゴールに到達したか否かを判断し、到達した場合はステップS2218へ進み、それ以外の場合はステップS2206へ戻る。具体的には、ユーザー290の位置とゴール地点間の距離を算出し、ゴール地点から予め定められた距離B内であれば「ゴール地点に到達」と判断する。「ゴール地点から予め定められた距離B内」として、ステップS2212における距離Aよりもさらに近い距離であればよく、例えば、1m以内としてもよい。
ステップS2220では、ゴール地点を表示する。図25の例と同様の提示を行う。例えば、メッセージ表示領域2520には、例えば、「ここが宝箱(ゴール地点)です。制限時間内に見つけることはできましたか? 次のシーン開始まで 9秒」と表示してもよい。なお、ステップS2218の処理を行った場合は、ステップS2220の処理を省略してもよい。
なお、ゴール地点に到達したら、そのゴール地点の場所を把握できるように、つまり、周囲の確認ができるように、次のテスト開始までの待ち時間を設けるようにしてもよい。その待ち時間の間に、ユーザーは移動できるようにしてもよい。なお、待ち時間に対して制限時間を設けるようにしてもよい。この制限時間を設けることで、ユーザー間のバラツキを少なくすることができる。また、待ち時間ではなく、ユーザーの操作によって次のテストに進むようにしてもよい。
図27は、テストB用結果テーブル2700のデータ構造例を示す説明図である。テストB用結果テーブル2700は、テストID欄2705、ユーザーID欄2710、日時欄2715、ズレ欄2720、到達時間欄2725、エラースコア欄2730を有している。テストID欄2705は、テストIDを記憶している。ユーザーID欄2710は、そのテストを行ったユーザーIDを記憶している。日時欄2715は、そのテストが行われた日時を記憶している。ズレ欄2720は、本来のゴール地点とユーザーが制限時間でたどり着いた地点とのズレを記憶している。このズレは、前述した(判断B1)における差分に該当する。なお、その制限時間内に、ユーザーがゴール地点に到達した場合は、差分は0である。到達時間欄2725は、到達時間を記憶している。この到達時間は、前述した(判断B2)における時間に該当する。なお、その制限時間内に、ユーザーがゴール地点に到達しなかった場合は、この到達時間は制限時間とするようにしてもよい。エラースコア欄2730は、エラースコアを記憶している。このエラースコアは、前述した(判断B3)における総和に該当する。
また、規定回数の繰り返しによって、ズレ欄2720内の値が漸減する場合、到達時間欄2725内の値が漸減する場合、又は、エラースコア欄2730内の値が漸減する場合は、ユーザーの認知機能は正常である可能性が高いと判断するようにしてもよい。
図28は、本実施の形態による処理例を示すフローチャートである。試験Cモジュール140による処理であり、テストCを実施するにあたっての前処理例を示すものである。なお、図11の例で示したように、テストCの前にテストBは既に行われており、被験者であるユーザーに対して、ゴール地点の提示を行っていることになる。
ステップS2804では、試験Bモジュール135によって既に実施されたテストBにおけるゴール地点を取得する。
ステップS2806では、ゴール地点は分割空間のいずれにあるかを判断する。図31の例では、テストBにおけるゴール地点3199は、分割空間3110にあることが判明する。
ステップS2902では、ユーザー290によるスタートボタンの選択を検知する。
ステップS2904では、スタート地点を自動設定する。テストCにおける各回のスタート地点は異なることになる。ステップS2904の詳細な処理については、図30の例に示すフローチャートを用いて後述する。
ステップS2908では、0.5秒に1回VR空間上の位置情報を記録する。なお、この「0.5秒」は例示であって、一定の秒数であれば、他の秒数であってもよい。
ステップS2912では、位置情報の記録を終了する。例えば、前述した位置情報テーブル2600を生成する。なお、本テストCにおいては、設定時間が経過してもゴール地点に旗を提示することは行わない。
ステップS2914では、規定回数実施したか否かを判断し、実施した場合は処理を終了し(ステップS2999)、それ以外の場合はステップS2902へ戻る。なお、規定回数は、1回以上であればよい。つまり、本テストCを1回のみ行うようにしてもよいし、複数回の繰り返しであってもよい。
ステップS3002では、ゴール地点がある分割空間以外の分割空間を抽出する。図31の例では、ゴール地点3199が分割空間3110にあるので、分割空間3120、分割空間3130、分割空間3140が抽出されることになる。
ステップS3004では、抽出した分割空間内でスタート地点を決定する。図31の例では、分割空間3120、分割空間3130、分割空間3140内から、乱数を用いてスタート地点を決定する。図31では、分割空間3120内にスタート地点3121が決定された例を示している。
図31の例に示す小さい黒丸は、0.5秒毎にユーザーがいた位置を示しており、スタート地点3121のある分割空間3120から、ゴール地点3199のある分割空間3110へ移動した足跡を示していることになる。
なお、図31の例では、ゴール地点3199に旗を表示しているが、図29の例に示すフローチャートによる処理では、ユーザー290は旗を見ることはない。つまり、ユーザーは、以前に受けたテストBにおけるゴール地点3199の旗を見ており、記憶しているゴール地点3199に向けて移動している。
テストID欄3205の各行は、テストCにおける各回のテスト結果としてもよいし(具体的には、1回のテストCでステップS2914の規定回数分の行が生成される)、1回のテストCのテスト結果としてもよい(具体的には、ゴール地点のある分割空間に滞在した時間欄3220には、各回における滞在時間の統計的値(例えば、平均値等)が記憶される)。もちろんのことながら、1回のみのテストCであれば、1行のみであり、その1回のテストCの結果が記憶される。
例えば、テストC用診断結果テーブル3300の1行目は、滞在時間が「>A」である場合は、診断結果を「正常(認知症ではない)」と判断し、2行目は、滞在時間が「≦A」である場合は、診断結果を「医師の診断推奨(ユーザーの認知機能は正常ではない可能性が高い)」であることを示している。なお、「A」は、前述の閾値Hに該当する。複数回のテストCが行われた場合(ステップS2914の規定回数が2回以上)における滞在時間は、各テストCにおける滞在時間の統計的値である。
ステップS3402では、アリーナ空間を分割する。
ステップS3404では、ゴール地点を設定する。例えば、乱数を用いてゴール地点を設定する。
ステップS3406では、ゴール地点は分割空間のいずれにあるかを判断する。
ステップS3504では、スタート地点を自動設定する。スタート地点は、ゴール地点がある分割空間以外の分割空間に配置する。
ステップS3506では、ユーザー290によるコントローラーの操作にしたがって移動する。
ステップS3508では、0.5秒に1回VR空間上の位置情報を記録する。なお、この「0.5秒」は例示であって、一定の秒数であれば、他の秒数であってもよい。
ステップS3510では、ゴール地点が近いか否かを判断し、近い場合はステップS3512へ進み、それ以外の場合はステップS3514へ進む。
ステップS3512では、ゴール地点に近くにあることを表示する。
ステップS3514では、タイムアウトしたか否かを判断し、タイムアウトした場合はステップS3520へ進み、それ以外の場合はステップS3516へ進む。
ステップS3516では、ゴールに到達したか否かを判断し、到達した場合はステップS3518へ進み、それ以外の場合はステップS3506へ戻る。
ステップS3518では、ゴール地点に到達したことを表示する。
ステップS3520では、ゴール地点を表示する。
ステップS3522では、位置情報の記録を終了する。
ステップS3526では、スタート地点を自動設定する。
ステップS3528では、ユーザー290によるコントローラーの操作にしたがって移動する。
ステップS3530では、0.5秒に1回VR空間上の位置情報を記録する。なお、この「0.5秒」は例示であって、一定の秒数であれば、他の秒数であってもよい。
ステップS3532では、規定時間を経過したか否かを判断し、経過した場合はステップS3534へ進み、それ以外の場合はステップS3528へ戻る。
ステップS3534では、位置情報の記録を終了する。
ステップS3536では、(規定回数−1)回実施したか否かを判断し、(規定回数−1)回実施した場合は処理を終了し(ステップS3599)、それ以外の場合はステップS3524へ戻る。ここでの規定回数は、2回以上である。2回とした場合、滞在時間の計測は1回のみである。つまり、図29における規定回数が1回の場合と同じである。
図36は、本実施の形態による処理例を示すフローチャートである。
ステップS3602では、テストAの計測結果を取得する。図37の例を用いて後述する。
ステップS3604では、テストBの計測結果を取得する。図38の例を用いて後述する。
ステップS3606では、テストCの計測結果を取得する。図31の例に示したように、ゴール地点3199がある分割空間3110でのユーザーの滞在時間を算出する。この滞在時間をテストCの計測結果とする。前述の(判断C1)の場合の計測された時間の具体例である。
ステップS3610では、診断結果を出力する。ここでの出力として、例えば、ヘッドマウントディスプレイによって提示すること、平面ディスプレイ等の表示装置に表示すること、プリンタ等の印刷装置で印刷すること、ファックス等の画像送信装置で送信すること、メモリーカード等の記憶媒体に記憶すること、他の情報処理装置へ渡すこと等が含まれる。図41の例を用いて後述する。
テストAでは、アリーナ空間3700内において、ユーザーはスタート地点3710から旗3722のある経由地点3720を経由して、旗3732のあるゴール地点3730へ移動し、ゴール地点3730からスタート地点3710へ戻る試験である。例えば、実際のユーザーの経路は、軌跡(往路)3715(スタート地点3710からゴール地点3730への経路)、軌跡(復路)3735(ゴール地点3730からタイムアウト地点3740への経路)である。なお、この軌跡上の黒丸は、図15の例に示すフローチャートのステップS1520で記録された位置を示すものである。
ただし、少なくとも戻る際には、スタート地点3710には旗等の目印がないため、ユーザーの記憶している位置に戻ることになる。そのため、テストAでは、ユーザーによっては、ゴール地点3730からスタート地点3710ではなく、タイムアウト地点3740(ユーザーはスタート地点3710であると思っている位置、又は、スタート地点3710がわからなくなり、タイムアウト時にいた地点)に移動してしまう場合がある。テストAでは、スタート地点3710とタイムアウト地点3740の間の差分3750を計測する。
このテストAを複数回繰り返し、各回の差分3750の平均値を算出する。この平均値をテストAの計測結果とする。前述の(判断A1)が複数回繰り返された場合の統計的値の具体例である。
テストBでは、アリーナ空間3800内において、ユーザーはスタート地点3810からゴール地点3830を探索する試験である。なお、図38の例では、ゴール地点3830に旗3832を表示しているが、探索中は表示しない。ゴール地点3830に到達した場合、又は、タイムアウトした場合に、ゴール地点3830に旗3832を表示する。したがって、複数回繰り返す場合にあっては、2回目以降の試験では、前回の試験において表示された旗3832を目指して(探索中は旗3832は表示されていないので、記憶にある旗3832を目指して)探索の移動を行うことになる。例えば、実際のユーザーの経路は、スタート地点3810から軌跡3815である。なお、この軌跡3815上の黒丸は、図22の例に示すフローチャートのステップS2208で記録された位置を示すものである。
テストBにおいて、軌跡3815上の各黒丸とゴール地点3830との直線距離を算出する。図38の例では、直線距離は、最初の2点(直線距離3881、直線距離3882)と最後の2点(直線距離3889、直線距離3890)を例示しているが、他の黒丸とゴール地点3830の直線距離も該当する。そして、これらの直線距離の総和を算出する。そして、テストBを複数回繰り返し、その総和の最小値を選択する。この最小値をテストBの計測結果とする。前述の(判断B3)が複数回繰り返された場合の統計的値の具体例である。
図39(a)は、診断テーブル3900のデータ構造例を示す説明図である。
診断テーブル3900は、診断結果欄3905、テストA結果欄3910、テストB結果欄3915、テストC結果欄3920を有している。テストA結果欄3910は、テストAの結果に対する条件を記憶している。テストB結果欄3915は、テストBの結果に対する条件を記憶している。テストC結果欄3920は、テストCの結果に対する条件を記憶している。診断結果欄3905は、テストA結果欄3910、テストB結果欄3915、テストC結果欄3920の条件に合致した場合の診断結果を記憶している。
また、テストAの平均値がテストA結果欄3910で示す「閾値a<平均値≦閾値A」であり、テストBの最小値がテストB結果欄3915で示す「最小値<閾値G」であり、テストCの滞在時間がテストC結果欄3920で示す「滞在時間>閾値H」である場合は、診断結果として「2」(トレーニング等を推奨)であることを示している。なお、閾値aは、閾値Aより小であり、閾値a以下である場合は、認知症の可能性が高いと判断できるものである。
また、テストAの平均値がテストA結果欄3910で示す「平均値≦閾値a」であり、テストBの最小値がテストB結果欄3915で示す「最小値>閾値G」であり、テストCの滞在時間がテストC結果欄3920で示す「滞在時間≦閾値H」である場合は、診断結果として「3」(医師の診断推奨、さらに、トレーニング等を推奨)であることを示している。
診断テーブル3950は、診断結果欄3955、テストA結果欄3960、テストB結果欄3965、テストC結果欄3970を有している。テストA結果欄3960は、テストAの結果に対する条件を記憶している。テストB結果欄3965は、テストBの結果に対する条件を記憶している。テストC結果欄3970は、テストCの結果に対する条件を記憶している。診断結果欄3955は、テストA結果欄3960、テストB結果欄3965、テストC結果欄3970の条件に合致した場合の診断結果を記憶している。ただし、この診断テーブル3950は、テストBの結果を用いずに、テストAとテストCの結果を用いて判断する例を示している。
例えば、テストAの平均値がテストA結果欄3960で示す「平均値<閾値A」であり、テストCの滞在時間がテストC結果欄3970で示す「滞在時間>閾値H」である場合は、診断結果として「1」(正常)であることを示している。
また、テストAの平均値がテストA結果欄3960で示す「閾値a<平均値≦閾値A」であり、テストCの滞在時間がテストC結果欄3970で示す「滞在時間>閾値H」である場合は、診断結果として「2」(トレーニング等を推奨)であることを示している。
また、テストAの平均値がテストA結果欄3960で示す「平均値≦閾値a」であり、テストCの滞在時間がテストC結果欄3970で示す「滞在時間≦閾値H」である場合は、診断結果として「3」(医師の診断推奨、さらに、トレーニング等を推奨)であることを示している。
なお、診断テーブル3900、診断テーブル3950は、診断例を示すものであり、各テストの結果と閾値との関係は、これらに限定される必要はなく、今後の実験によって変更されてもよい。また、人工知能を用いて診断するようにしてもよい。例えば、各テストの結果と、被験者であるユーザーの認知症の程度(予め医師によって診断された結果)を対応させた教師データを用いて機械学習を行い、それによって生成された診断モデルを用いて判断するようにしてもよい。
各テストにおけるユーザーの移動の軌跡を、画面4000に表示するようにしたものである。これは、上空からユーザーがいる地面を俯瞰して見たものである。テストが終了した場合に、画面4000をユーザー又は診断をする者等に提示する。
ユーザーはアリーナ空間4010内を移動でき、アリーナ空間4010の外側(塀の外側)には、ユーザーが空間を認知しやすくするためのアイテムとして、山4050、木4060等を提示する。例えば、ユーザーはスタート地点4020からゴール地点4030を目指して移動する。その移動を軌跡4025として表示する。軌跡4025は、位置情報テーブル2000を用いて描画すればよい。
テストA、テストB、テストCの終了後に、図41(a)の例に示すテストA用グラフ表示画面4100、図41(b)の例に示すテストB用グラフ表示画面4120、図41(c)の例に示すテストC用表示画面4140、図41(d)の例に示す総合結果表示画面4160をユーザーに提示する。
図41(a)の例は、テストAの結果を示すものである。
基準値4110は、テストA用の基準値(例えば、前述の閾値A)である。
測定値4115は、ユーザーの3回のテストAの平均値である。
ユーザーは、基準値4110と測定値4115を比較して、測定値4115が基準値4110より低ければ、正常である可能性が高いことがわかる。
グラフ4130は、ユーザーの5回のテストBの総和の変化を描画したものである。
基準値4135は、閾値Gに該当する。
ユーザーは、基準値4135と各回の総和を比較して、基準値4135よりも下にある総和が1つでもあれば(つまり、総和の最小値が基準値4135よりも下にあれば)、正常である可能性が高いことがわかる。
テストC用表示画面4140には、ゴール象限にいた時間表示領域4150、テストC結果表示領域4155を表示する。
ゴール象限にいた時間表示領域4150には、ゴール象限(ゴール地点がある分割空間)にいた時間として、例えば「18秒」と表示する。
テストC結果表示領域4155には、例えば「基準値(閾値H)より長いです」と表示する。
ユーザーは、テストC結果表示領域4155内の表示で基準値より長ければ、正常である可能性が高いことがわかる。
例えば、総合結果表示画面4160には、総合判断モジュール145による総合判断結果として「正常です」と表示する。
なお、図42に示すハードウェア構成は、1つの構成例を示すものであり、本実施の形態は、図42に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、プロセッサーとして、GPU(Graphics Processing Unitの略、GPGPU(General−Purpose computing on Graphics Processing Unitsの略)を含む)を用いてもよいし、一部のモジュールを専用のハードウェア(例えば特定用途向け集積回路(具体例として、ASIC(Application Specific Integrated Circuitの略)等がある)や再構成可能な集積回路(具体例として、FPGA(Field−Programmable Gate Arrayの略)等がある)で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続している形態でもよく、さらに図42に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、特に、パーソナルコンピュータの他、携帯情報通信機器(携帯電話、スマートフォン、モバイル機器、ウェアラブルコンピュータ等を含む)、情報家電、ロボット等に組み込まれていてもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通等のために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク(DVD)であって、DVDフォーラムで策定された規格である「DVD−R、DVD−RW、DVD−RAM等」、DVD+RWで策定された規格である「DVD+R、DVD+RW等」、コンパクトディスク(CD)であって、読出し専用メモリ(CD−ROM)、CDレコーダブル(CD−R)、CDリライタブル(CD−RW)等、ブルーレイ・ディスク(Blu−ray(登録商標) Disc)、光磁気ディスク(MO)、フレキシブルディスク(FD)、磁気テープ、ハードディスク、読出し専用メモリ(ROM)、電気的消去及び書換可能な読出し専用メモリ(EEPROM(登録商標))、フラッシュ・メモリ、ランダム・アクセス・メモリ(RAM)、SD(Secure Digitalの略)メモリーカード等が含まれる。
そして、前記のプログラムの全体又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク(LAN)、メトロポリタン・エリア・ネットワーク(MAN)、ワイド・エリア・ネットワーク(WAN)、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、又は無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分若しくは全部であってもよく、又は別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して記録されていてもよい。また、圧縮や暗号化等、復元可能であればどのような態様で記録されていてもよい。
例えば、課題として以下のものがある。
3次元映像を用いて、ユーザーの認知機能を判断する場合にあって、そのユーザーが見ることになる3次元映像は、認知ができる空間であることが重要である。しかし、わかりやすすぎる空間であれば簡単に識別され、認知機能を計測するのに役に立たないし、反対に位置を識別することが難しい空間では位置が特定できず、これも認知機能を計測するのに適していないことになる。
そこで、本実施の形態は、3次元映像内に提示するアイテムのうち、空間を認知しやすくするためのアイテムを提示するようにした情報処理装置、情報処理方法及び情報処理プログラムを提供することを目的としている。
ユーザーの動作を受け付ける受付手段と、
前記動作にしたがって、前記ユーザーに3次元映像を提示する提示手段と、
前記ユーザーが第1の地点から第2の地点への移動を行う際における、該移動を計測することによって、該ユーザーの認知機能を判断する判断手段
を有し、
前記提示手段は、前記3次元映像内に提示するアイテムのうち、空間を認知しやすくするためのアイテムを提示する、
情報処理装置。
[A2]
前記3次元映像は、ユーザーの周囲は塀によって囲まれており、該塀の外側に前記アイテムを配置した映像であり、
前記ユーザーは、前記塀に囲まれた空間内を移動することができ、
空間を認知しやすくするための前記アイテムとして、該アイテムと同じ種類の他のアイテムとは形態が異なるアイテムであること、該アイテムと同じ種類の他のアイテムとは配置が異なっていること、又は、他のアイテムとは種類が異なったアイテムであること、のいずれか1つ以上である、
[A1]に記載の情報処理装置。
[A3]
前記提示手段は、前記判断手段による過去の判断結果にしたがって、空間を認知しやすくするための前記アイテムを、第1の地点と第2の地点の延長上になるよう配置する、
[A1]又は[A2]に記載の情報処理装置。
[A4]
前記ユーザーが見ている方向又は3次元映像の提示装置の方向に対して、前進又は後退の移動のみを許可する、
[A1]から[A3]のいずれか一項に記載の情報処理装置。
[A5]
前記提示手段は、ユーザーが装着しているヘッドマウントディスプレイを用いて、前記3次元映像を提示する、
[A1]から[A4]のいずれか一項に記載の情報処理装置。
[A6]
ユーザーの動作を受け付ける受付ステップと、
前記動作にしたがって、前記ユーザーに3次元映像を提示する提示ステップと、
前記ユーザーが第1の地点から第2の地点への移動を行う際における、該移動を計測することによって、該ユーザーの認知機能を判断する判断ステップ
を有し、
前記提示ステップは、前記3次元映像内に提示するアイテムのうち、空間を認知しやすくするためのアイテムを提示する、
情報処理方法。
[A7]
コンピュータを、
ユーザーの動作を受け付ける受付手段と、
前記動作にしたがって、前記ユーザーに3次元映像を提示する提示手段と、
前記ユーザーが第1の地点から第2の地点への移動を行う際における、該移動を計測することによって、該ユーザーの認知機能を判断する判断手段
として機能させ、
前記提示手段は、前記3次元映像内に提示するアイテムのうち、空間を認知しやすくするためのアイテムを提示する、
情報処理プログラム。
[A1]の情報処理装置によれば、3次元映像内に提示するアイテムのうち、空間を認知しやすくするためのアイテムを提示することができる。
[A2]の情報処理装置によれば、空間を認知しやすくするためのアイテムとして、そのアイテムと同じ種類の他のアイテムとは形態が異なるアイテムであること、そのアイテムと同じ種類の他のアイテムとは配置が異なっていること、又は、他のアイテムとは種類が異なったアイテムであること、のいずれか1つ以上を用いることができる。
[A3]の情報処理装置によれば、過去の認知機能の判断結果にしたがって、空間を認知しやすくするためのアイテムを、第1の地点と第2の地点の延長上になるように配置することができる。
[A4]の情報処理装置によれば、ユーザーのVR酔いを軽減させることができる。
[A5]の情報処理装置によれば、ヘッドマウントディスプレイを用いて、ユーザーの認知機能を判断することができる。
[A6]の情報処理方法によれば、3次元映像内に提示するアイテムのうち、空間を認知しやすくするためのアイテムを提示することができる。
[A7]の情報処理プログラムによれば、3次元映像内に提示するアイテムのうち、空間を認知しやすくするためのアイテムを提示することができる。
例えば、課題として以下のものがある。
ユーザーの認知機能を判断する場合にあって、ユーザーが第1の地点から第2の地点へ移動した後に、第2の地点から第1の地点に戻る際の移動を計測した結果を用いるようにした情報処理装置、情報処理方法及び情報処理プログラムを提供することを目的としている。
ユーザーの動作を受け付ける受付手段と、
前記動作にしたがって、前記ユーザーに3次元映像を提示する提示手段と、
前記ユーザーが第1の地点から第2の地点へ移動した後に、該第2の地点から該第1の地点に戻る際の移動を計測することによって、該ユーザーの認知機能を判断する判断手段
を有する情報処理装置。
[B2]
前記提示手段は、前記3次元映像内で、前記第2の地点には目印を提示し、前記第1の地点には目印を提示しない、
[B1]に記載の情報処理装置。
[B3]
前記提示手段は、前記第1の地点と前記第2の地点との間に目印のある第3の地点を設け、前記ユーザーは該第3の地点を経由して、該第1の地点から該第2の地点に移動するように指示を提示する、
[B1]又は[B2]に記載の情報処理装置。
[B4]
前記第3の地点は、前記第1の地点と前記第2の地点との間の直線上には配置しない、
[B3]に記載の情報処理装置。
[B5]
前記ユーザーが前記第2の地点から前記第1の地点に戻る際には、前記第3の地点の目印を削除する、
[B3]又は[B4]に記載の情報処理装置。
[B6]
前記第2の地点から前記第1の地点に戻る際の移動に制限時間を設け、前記判断手段は、該制限時間が経過した時点で前記ユーザーがいる地点と該第1の地点との差分を用いて、該ユーザーの認知機能を判断する、
[B1]に記載の情報処理装置。
[B7]
前記提示手段は、前記制限時間が経過した時点で前記ユーザーが第1の地点に戻っていない場合は、該第1の地点に目印を提示する、
[B6]に記載の情報処理装置。
[B8]
前記受付手段によって前記第1の地点に戻ったことを示すユーザーの動作が受け付けられた場合に、前記判断手段は、該ユーザーがいる地点と該第1の地点との差分、又は、前記第2の地点から該第1の地点に戻るまでの時間、を用いて、該ユーザーの認知機能を判断する、
[B1]に記載の情報処理装置。
[B9]
前記提示手段は、第1の地点に戻ったことを示すユーザーの動作が受け付けられた場合は、本来の第1の地点に目印を提示する、
[B8]に記載の情報処理装置。
[B10]
前記判断手段は、前記第2の地点から前記第1の地点に戻るユーザーの移動中における、該第1の地点と移動中の地点との距離の総和を用いて、該ユーザーの認知機能を判断する、
[B1]に記載の情報処理装置。
[B11]
前記ユーザーが前記第1の地点から前記第2の地点へ移動し、該第2の地点から該第1の地点に戻る際の移動を複数回繰り返し、
前記判断手段は、[B6]に記載の差分が漸減する場合、[B8]に記載の差分若しくは時間が漸減する場合、又は、[B10]に記載の総和が漸減する場合は、前記ユーザーの認知機能は正常である可能性が高いと判断する、
[B6]から[B10]のいずれか一項に記載の情報処理装置。
[B12]
前記ユーザーが見ている方向又は3次元映像の提示装置の方向に対して、前進又は後退の移動のみを許可する、
[B1]から[B11]のいずれか一項に記載の情報処理装置。
[B13]
前記提示手段は、ユーザーが装着しているヘッドマウントディスプレイを用いて、前記3次元映像を提示する、
[B1]から[B12]のいずれか一項に記載の情報処理装置。
[B14]
ユーザーの動作を受け付ける受付ステップと、
前記動作にしたがって、前記ユーザーに3次元映像を提示する提示ステップと、
前記ユーザーが第1の地点から第2の地点へ移動した後に、該第2の地点から該第1の地点に戻る際の移動を計測することによって、該ユーザーの認知機能を判断する判断ステップ
を有する情報処理方法。
[B15]
コンピュータを、
ユーザーの動作を受け付ける受付手段と、
前記動作にしたがって、前記ユーザーに3次元映像を提示する提示手段と、
前記ユーザーが第1の地点から第2の地点へ移動した後に、該第2の地点から該第1の地点に戻る際の移動を計測することによって、該ユーザーの認知機能を判断する判断手段
として機能させる情報処理プログラム。
[B1]の情報処理装置によれば、ユーザーの認知機能を判断する場合にあって、ユーザーが第1の地点から第2の地点へ移動した後に、第2の地点から第1の地点に戻る際の移動を計測した結果を用いることができる。
[B2]の情報処理装置によれば、ユーザーにとって、第2の地点は目印によって視覚を用いて確認できるが、第1の地点は目印では確認できないようにすることができる。
[B3]の情報処理装置によれば、第1の地点と第2の地点との間に第3の地点を設け、第3の地点を経由させて、第1の地点から第2の地点にユーザーを移動させることができる。
[B4]の情報処理装置によれば、第3の地点において、ユーザーは第1の地点と第2の地点の両方を確認することができる。
[B5]の情報処理装置によれば、ユーザーが第1の地点に戻る際には、第3の地点は目印では確認できないようにすることができる。
[B6]の情報処理装置によれば、制限時間が経過した時点でユーザーがいる地点と第1の地点との差分を用いて、ユーザーの認知機能を判断することができる。
[B7]の情報処理装置によれば、制限時間が経過した時点でユーザーが第1の地点に戻っていない場合は、ユーザーは、第1の地点の場所を確認することがきる。
[B8]の情報処理装置によれば、第1の地点に戻ったことを示すユーザーの動作があった場合に、ユーザーがいる地点と第1の地点との差分、又は、第2の地点から第1の地点に戻るまでの時間、を用いて、ユーザーの認知機能を判断することができる。
[B9]の情報処理装置によれば、第1の地点に戻ったことを示すユーザーの動作が受け付けられた場合は、ユーザーは、本来の第1の地点の場所を確認することができる。
[B10]の情報処理装置によれば、第2の地点から第1の地点に戻るユーザーの移動中において、第1の地点と移動中の地点との距離の総和を用いて、ユーザーの認知機能を判断することができる。
[B11]の情報処理装置によれば、計測した値が漸減する場合は、ユーザーの認知機能は正常である可能性が高いと判断することができる。
[B12]の情報処理装置によれば、ユーザーのVR酔いを軽減させることができる。
[B13]の情報処理装置によれば、ヘッドマウントディスプレイを用いて、ユーザーの認知機能を判断することができる。
[B14]の情報処理方法によれば、ユーザーの認知機能を判断する場合にあって、ユーザーが第1の地点から第2の地点へ移動した後に、第2の地点から第1の地点に戻る際の移動を計測した結果を用いることができる。
[B15]の情報処理プログラムによれば、ユーザーの認知機能を判断する場合にあって、ユーザーが第1の地点から第2の地点へ移動した後に、第2の地点から第1の地点に戻る際の移動を計測した結果を用いることができる。
例えば、課題として以下のものがある。
ユーザーの認知機能を判断する場合にあって、ユーザーが第1の地点から目印のない第2の地点を探索するための移動を計測した結果を用いるようにした情報処理装置、情報処理方法及び情報処理プログラムを提供することを目的としている。
ユーザーの動作を受け付ける受付手段と、
前記動作にしたがって、前記ユーザーに3次元映像を提示する提示手段と、
前記ユーザーが第1の地点から目印のない第2の地点を探索するための移動を行う際における、該移動を計測することによって、該ユーザーの認知機能を判断する判断手段
を有する情報処理装置。
[C2]
前記提示手段は、ユーザーが第2の地点に到達した場合は、第2の地点に到達したことを示す提示を行う、
[C1]に記載の情報処理装置。
[C3]
前記提示手段は、前記ユーザーが前記第2の地点に近づいた場合は、該ユーザーの近くに該第2の地点があることを示す提示を行う、
[C1]又は[C2]に記載の情報処理装置。
[C4]
前記第1の地点から前記第2の地点への移動に制限時間を設け、前記判断手段は、該制限時間が経過した時点で前記ユーザーがいる地点と該第2の地点との差分を用いて、該ユーザーの認知機能を判断する、
[C1]に記載の情報処理装置。
[C5]
前記第2の地点に到達した場合は、前記判断手段は、前記第1の地点から該第2の地点に到達するまでの時間、を用いて、前記ユーザーの認知機能を判断する、
[C1]に記載の情報処理装置。
[C6]
前記判断手段は、前記第1の地点から前記第2の地点へのユーザーの移動中における、該第2の地点と移動中の地点との距離の総和を用いて、該ユーザーの認知機能を判断する、
[C1]に記載の情報処理装置。
[C7]
前記ユーザーが前記第1の地点から前記第2の地点への移動を複数回繰り返し、その際、該第2の地点は変更しないが、該第1の地点を変更し、
前記判断手段は、[C4]に記載の差分が漸減する場合、[C5]に記載の時間が漸減する場合、又は、[C6]に記載の総和が漸減する場合は、前記ユーザーの認知機能は正常である可能性が高いと判断する、
[C4]から[C6]のいずれか一項に記載の情報処理装置。
[C8]
前記第1の地点を変更する場合、変更する前の第1の地点と第2の地点との間の距離と同じ又は距離の差分が予め定められた範囲内になるように、第1の地点を変更する、
[C7]に記載の情報処理装置。
[C9]
前記ユーザーが見ている方向又は3次元映像の提示装置の方向に対して、前進又は後退の移動のみを許可する、
[C1]から[C8]のいずれか一項に記載の情報処理装置。
[C10]
前記提示手段は、ユーザーが装着しているヘッドマウントディスプレイを用いて、前記3次元映像を提示する、
[C1]から[C9]のいずれか一項に記載の情報処理装置。
[C11]
ユーザーの動作を受け付ける受付ステップと、
前記動作にしたがって前記ユーザーに、3次元映像を提示する提示ステップと、
前記ユーザーが第1の地点から目印のない第2の地点を探索するための移動を行う際における、該移動を計測することによって、該ユーザーの認知機能を判断する判断ステップ
を有する情報処理方法。
[C12]
コンピュータを、
ユーザーの動作を受け付ける受付手段と、
前記動作にしたがって前記ユーザーに、3次元映像を提示する提示手段と、
前記ユーザーが第1の地点から目印のない第2の地点を探索するための移動を行う際における、該移動を計測することによって、該ユーザーの認知機能を判断する判断手段
として機能させる情報処理プログラム。
[C1]の情報処理装置によれば、ユーザーの認知機能を判断する場合にあって、ユーザーが第1の地点から目印のない第2の地点を探索するための移動を計測した結果を用いることができる。
[C2]の情報処理装置によれば、、ユーザーが第2の地点に到達した場合は、ユーザーは、第2の地点に到達したことを知ることができる。
[C3]の情報処理装置によれば、ユーザーが第2の地点に近づいた場合は、ユーザーは、近くに第2の地点があることを知ることができる。
[C4]の情報処理装置によれば、制限時間が経過した時点でユーザーがいる地点と第2の地点との差分を用いて、そのユーザーの認知機能を判断することができる。
[C5]の情報処理装置によれば、第2の地点に到達した場合は、第1の地点から第2の地点に到達するまでの時間、を用いて、ユーザーの認知機能を判断することができる。
[C6]の情報処理装置によれば、第1の地点から第2の地点へのユーザーの移動中において、第2の地点と移動中の地点との距離の総和を用いて、ユーザーの認知機能を判断することができる。
[C7]の情報処理装置によれば、計測した値が漸減する場合は、ユーザーの認知機能は正常である可能性が高いと判断することができる。
[C8]の情報処理装置によれば、前回における第1の地点と第2の地点との間の距離と今回における第1の地点と第2の地点との間の距離を同じにすることができる。
[C9]の情報処理装置によれば、ユーザーのVR酔いを軽減させることができる。
[C10]の情報処理装置によれば、ヘッドマウントディスプレイを用いて、ユーザーの認知機能を判断することができる。
[C11]の情報処理方法によれば、ユーザーの認知機能を判断する場合にあって、ユーザーが第1の地点から目印のない第2の地点を探索するための移動を計測した結果を用いることができる。
[C12]の情報処理プログラムによれば、ユーザーの認知機能を判断する場合にあって、ユーザーが第1の地点から目印のない第2の地点を探索するための移動を計測した結果を用いることができる。
例えば、課題として以下のものがある。
ユーザーの脳内の部位(例えば、嗅内野と海馬)の機能を測るために、第1の部位に関する試験、第2の部位に関する試験をそれぞれ行い、空間認知機能を計測するようにした情報処理装置、情報処理方法及び情報処理プログラムを提供することを目的としている。
ユーザーの動作を受け付ける受付手段と、
前記動作にしたがって前記ユーザーに、3次元映像を提示する提示手段と、
ある地点から別の地点への前記ユーザーの移動を計測することによって、該ユーザーの脳内の第1の部位に関する認知機能を判断する第1の判断手段と、
ある地点から別の地点への前記ユーザーの移動を計測することによって、該ユーザーの脳内の第2の部位に関する認知機能を判断する第2の判断手段と、
前記第1の判断手段と前記第2の判断手段に必要な計測が行われるように制御する制御手段
を有する情報処理装置。
[D2]
前記第1の判断手段は、前記ユーザーが第1の地点から第2の地点へ移動した後に、該第2の地点から該第1の地点に戻る際の移動を計測することによって、該ユーザーの嗅内野に関する認知機能を判断し、
前記第2の判断手段は、前記ユーザーが第1の地点から目印のない第2の地点を探索するための移動を計測することによって、該ユーザーの海馬に関する認知機能を判断する、
[D1]に記載の情報処理装置。
[D3]
前記制御手段は、前記第1の判断手段に必要な計測の後に、前記第2の判断手段に必要な計測を行うように制御する、
[D1]又は[D2]に記載の情報処理装置。
[D4]
前記ユーザーに、3次元映像によって構成される空間での移動を施行可能にする試行手段
をさらに有し、
前記制御手段は、前記第1の判断手段及び前記第2の判断手段に必要な計測を行う前に、前記試行手段による試行を行うように制御する、
[D1]から[D3]のいずれか一項に記載の情報処理装置。
[D5]
前記ユーザーが見ている方向又は3次元映像の提示装置の方向に対して、前進又は後退の移動のみを許可する、
[D1]から[D4]のいずれか一項に記載の情報処理装置。
[D6]
前記提示手段は、ユーザーが装着しているヘッドマウントディスプレイを用いて、前記3次元映像を提示する、
[D1]から[D5]のいずれか一項に記載の情報処理装置。
[D7]
ユーザーの動作を受け付ける受付ステップと、
前記動作にしたがって前記ユーザーに、3次元映像を提示する提示ステップと、
ある地点から別の地点への前記ユーザーの移動を計測することによって、該ユーザーの脳内の第1の部位に関する認知機能を判断する第1の判断ステップと、
ある地点から別の地点への前記ユーザーの移動を計測することによって、該ユーザーの脳内の第2の部位に関する認知機能を判断する第2の判断ステップと、
前記第1の判断ステップと前記第2の判断ステップに必要な計測を行われるように制御する制御ステップ
を有する情報処理方法。
[D8]
コンピュータを、
ユーザーの動作を受け付ける受付手段と、
前記動作にしたがって前記ユーザーに、3次元映像を提示する提示手段と、
ある地点から別の地点への前記ユーザーの移動を計測することによって、該ユーザーの脳内の第1の部位に関する認知機能を判断する第1の判断手段と、
ある地点から別の地点への前記ユーザーの移動を計測することによって、該ユーザーの脳内の第2の部位に関する認知機能を判断する第2の判断手段と、
前記第1の判断手段と前記第2の判断手段に必要な計測を行われるように制御する制御手段
として機能させる情報処理プログラム。
[D1]の情報処理装置によれば、ユーザーの脳内の第1の部位と第2の部位の機能を測るために、第1の部位に関する試験、第2の部位に関する試験をそれぞれ行い、空間認知機能を計測することができる。
[D2]の情報処理装置によれば、嗅内野に関する試験として、ユーザーが第1の地点から第2の地点へ移動した後に、その第2の地点からその第1の地点に戻る際の移動を計測すること、海馬に関する試験として、ユーザーが第1の地点から目印のない第2の地点を探索するための移動を計測することを用いることができる。
[D3]の情報処理装置によれば、第1の判断手段に必要な計測の後に、第2の判断手段に必要な計測を行うようにすることができる。
[D4]の情報処理装置によれば、ユーザーが3次元映像によって構成される空間での移動を施行した後に、第1の判断手段及び第2の判断手段に必要な計測を行うことができる。
[D5]の情報処理装置によれば、ユーザーのVR酔いを軽減させることができる。
[D6]の情報処理装置によれば、ヘッドマウントディスプレイを用いて、ユーザーの認知機能を判断することができる。
[D7]の情報処理方法によれば、ユーザーの脳内の第1の部位と第2の部位の機能を測るために、第1の部位に関する試験、第2の部位に関する試験をそれぞれ行い、空間認知機能を計測することができる。
[D8]の情報処理プログラムによれば、ユーザーの脳内の第1の部位と第2の部位の機能を測るために、第1の部位に関する試験、第2の部位に関する試験をそれぞれ行い、空間認知機能を計測することができる。
例えば、課題として以下のものがある。
ユーザーの認知機能を判断する場合にあって、目印がある第2の地点をユーザーに提示した後に、その目印を消去し、ユーザーによる第1の地点から目印のない第2の地点への移動を計測した結果を用いるようにした情報処理装置、情報処理方法及び情報処理プログラムを提供することを目的としている。
[E1]
ユーザーの動作を受け付ける受付手段と、
前記動作にしたがって、前記ユーザーに3次元映像を提示する提示手段と、
目印がある第2の地点を前記ユーザーに提示した後に、該目印を消去し、該ユーザーが第1の地点から目印のない第2の地点への移動を行う場合における、該移動を計測することによって、該ユーザーの認知機能を判断する判断手段
を有する情報処理装置。
[E2]
前記目印がある第2の地点を前記ユーザーに提示することとして、
該ユーザーが前記第1の地点から目印のない第2の地点を探索するための移動を行う場合において、該ユーザーが該第2の地点に到達した場合は、該第2の地点に目印を提示すること、又は、該第2の地点の探索に制限時間を設け、該制限時間が経過した場合は、該第2の地点に目印を提示すること、のいずれかである、
[E1]に記載の情報処理装置。
[E3]
前記ユーザーが移動できる空間を分割し、前記第1の地点が含まれている第1の分割空間は、第2の地点が含まれている第2の分割空間とは異なる分割空間であり、
前記判断手段は、前記移動を計測することとして、前記ユーザーが前記第2の分割空間にとどまっている時間を計測する、
[E1]又は[E2]に記載の情報処理装置。
[E4]
前記判断手段は、前記計測された時間が予め定められた閾値より大きい又は以上である場合は、前記ユーザーの認知機能は正常である可能性が高いと判断する、
[E3]に記載の情報処理装置。
[E5]
前記ユーザーが見ている方向又は3次元映像の提示装置の方向に対して、前進又は後退の移動のみを許可する、
[E1]から[E4]のいずれか一項に記載の情報処理装置。
[E6]
前記提示手段は、ユーザーが装着しているヘッドマウントディスプレイを用いて、前記3次元映像を提示する、
[E1]から[E5]のいずれか一項に記載の情報処理装置。
[E7]
ユーザーの動作を受け付ける受付ステップと、
前記動作にしたがって、前記ユーザーに3次元映像を提示する提示ステップと、
目印がある第2の地点を前記ユーザーに提示した後に、該目印を消去し、該ユーザーが第1の地点から目印のない第2の地点への移動を行う場合における、該移動を計測することによって、該ユーザーの認知機能を判断する判断ステップ
を有する情報処理方法。
[E8]
コンピュータを、
ユーザーの動作を受け付ける受付手段と、
前記動作にしたがって、前記ユーザーに3次元映像を提示する提示手段と、
目印がある第2の地点を前記ユーザーに提示した後に、該目印を消去し、該ユーザーが第1の地点から目印のない第2の地点への移動を行う場合における、該移動を計測することによって、該ユーザーの認知機能を判断する判断手段
として機能させる情報処理プログラム。
[E1]の情報処理装置によれば、ユーザーの認知機能を判断する場合にあって、目印がある第2の地点をユーザーに提示した後に、その目印を消去し、ユーザーによる第1の地点から目印のない第2の地点への移動を計測した結果を用いることができる。
[E2]の情報処理装置によれば、ユーザーが第1の地点から目印のない第2の地点を探索するための移動を行う場合において、ユーザーが第2の地点に到達した場合は、第2の地点に目印を提示すること、又は、第2の地点の探索に制限時間を設け、制限時間が経過した場合は、第2の地点に目印を提示すること、のいずれかによって、目印がある第2の地点を前記ユーザーに提示することができる。
[E3]の情報処理装置によれば、ユーザーが第2の分割空間にとどまっている時間を用いて、ユーザーの認知機能を判断することができる。
[E4]の情報処理装置によれば、複数回繰り返した場合、ユーザーが第2の分割空間にとどまっている時間の統計的値が予め定められた閾値より大きい又は以上である場合は、ユーザーの認知機能は正常である可能性が高いと判断することができる。
[E5]の情報処理装置によれば、ユーザーのVR酔いを軽減させることができる。
[E6]の情報処理装置によれば、ヘッドマウントディスプレイを用いて、ユーザーの認知機能を判断することができる。
[E7]の情報処理方法によれば、ユーザーの認知機能を判断する場合にあって、目印がある第2の地点をユーザーに提示した後に、その目印を消去し、ユーザーによる第1の地点から目印のない第2の地点への移動を計測した結果を用いることができる。
[E8]の情報処理プログラムによれば、ユーザーの認知機能を判断する場合にあって、目印がある第2の地点をユーザーに提示した後に、その目印を消去し、ユーザーによる第1の地点から目印のない第2の地点への移動を計測した結果を用いることができる。
105…提示モジュール
110…受付モジュール
115…試験モジュール
120…制御モジュール
125…環境生成モジュール
130…試験Aモジュール
135…試験Bモジュール
140…試験Cモジュール
145…総合判断モジュール
200…ヘッドマウントディスプレイ
210…マイク・認識手段
250…コントローラー
290…ユーザー
300…脳機能観測支援装置
350…施設
390…通信回線
Claims (11)
- ユーザーの動作を受け付ける受付手段と、
前記動作にしたがって、前記ユーザーに3次元映像を提示する提示手段と、
前記ユーザーに、3次元映像によって構成される空間での移動を試行可能にする試行手段と、
前記ユーザーの認知機能を判断するための複数の試験において、前記3次元映像内での前記ユーザーによる移動を計測する計測手段と、
前記複数の試験のうち、少なくとも2つの試験における前記計測の結果を用いて、前記ユーザーの認知機能を判断する判断手段と、
前記判断手段に必要な計測を行う前に、前記試行手段による試行を行うように制御する制御手段
を有し、
前記試行手段による試行における前記ユーザーの移動速度によって、前記試験におけるスタート地点とゴール地点を決定する、
情報処理装置。 - 前記試験のうち、第1の試験は、前記ユーザーが第1の地点から第2の地点へ移動した後に、該第2の地点から該第1の地点に戻る試験であり、前記計測手段は、該第2の地点から該第1の地点に戻る際の該ユーザーの移動を計測し、
前記試験のうち、第2の試験は、前記ユーザーが第3の地点から目印のない第4の地点を探索する試験であり、前記計測手段は、該探索のための該ユーザーの移動を計測し、
前記判断手段は、前記第1の試験における計測の結果と前記第2の試験における計測の結果を用いて、前記ユーザーの認知機能を判断し、
前記第3の地点は、前記第2の試験におけるスタート地点を示している、
請求項1に記載の情報処理装置。 - 前記試験のうち、第2の試験は、前記ユーザーが第3の地点から目印のない第4の地点を探索する試験であり、前記計測手段は、該探索のための該ユーザーの移動を計測し、
前記試験のうち、第3の試験は、目印がある第6の地点を前記ユーザーに提示した後に、該目印を消去し、該ユーザーが第5の地点から目印のない第6の地点への移動を行う試験であり、前記計測手段は、該ユーザーの該移動を計測し、
前記判断手段は、前記第2の試験における計測の結果と前記第3の試験における計測の結果を用いて、前記ユーザーの認知機能を判断し、
前記第3の地点は、前記第2の試験におけるスタート地点を示している、
請求項1に記載の情報処理装置。 - 前記試験のうち、第2の試験は、前記ユーザーが第3の地点から目印のない第4の地点を探索する試験であり、前記計測手段は、該探索のための該ユーザーの移動を計測し、
前記試験のうち、第4の試験は、前記第2の試験の後に行い、前記ユーザーが第5の地点から目印のない前記第4の地点への移動を行う試験であり、前記計測手段は、該ユーザーの該移動を計測し、
前記判断手段は、前記第2の試験における計測の結果と前記第4の試験における計測の結果を用いて、前記ユーザーの認知機能を判断し、
前記第3の地点は、前記第2の試験におけるスタート地点を示している、
請求項1に記載の情報処理装置。 - 前記試験のうち、第1の試験は、前記ユーザーが第1の地点から第2の地点へ移動した後に、該第2の地点から該第1の地点に戻る試験であり、前記計測手段は、該第2の地点から該第1の地点に戻る際の該ユーザーの移動を計測し、
前記試験のうち、第3の試験は、目印がある第6の地点を前記ユーザーに提示した後に、該目印を消去し、該ユーザーが第5の地点から目印のない第6の地点への移動を行う試験であり、前記計測手段は、該ユーザーの該移動を計測し、
前記判断手段は、前記第1の試験における計測の結果と前記第3の試験における計測の結果を用いて、前記ユーザーの認知機能を判断する、
請求項1に記載の情報処理装置。 - 前記試験のうち、第1の試験は、前記ユーザーが第1の地点から第2の地点へ移動した後に、該第2の地点から該第1の地点に戻る試験であり、前記計測手段は、該第2の地点から該第1の地点に戻る際の該ユーザーの移動を計測し、
前記試験のうち、第2の試験は、前記ユーザーが第3の地点から目印のない第4の地点を探索する試験であり、前記計測手段は、該探索のための該ユーザーの移動を計測し、
前記試験のうち、第3の試験は、目印がある第6の地点を前記ユーザーに提示した後に、該目印を消去し、該ユーザーが第5の地点から目印のない第6の地点への移動を行う試験であり、前記計測手段は、該ユーザーの該移動を計測し、
前記判断手段は、前記第1の試験における計測の結果と前記第2の試験における計測の結果と前記第3の試験における計測の結果を用いて、前記ユーザーの認知機能を判断し、
前記第3の地点は、前記第2の試験におけるスタート地点を示している、
請求項1に記載の情報処理装置。 - 前記試験のうち、第1の試験は、前記ユーザーが第1の地点から第2の地点へ移動した後に、該第2の地点から該第1の地点に戻る試験であり、前記計測手段は、該第2の地点から該第1の地点に戻る際の該ユーザーの移動を計測し、
前記試験のうち、第2の試験は、前記ユーザーが第3の地点から目印のない第4の地点を探索する試験であり、前記計測手段は、該探索のための該ユーザーの移動を計測し、
前記試験のうち、第4の試験は、前記第2の試験の後に行い、前記ユーザーが第5の地点から目印のない前記第4の地点への移動を行う試験であり、前記計測手段は、該ユーザーの該移動を計測し、
前記判断手段は、前記第1の試験における計測の結果と前記第2の試験における計測の結果と前記第4の試験における計測の結果を用いて、前記ユーザーの認知機能を判断し、
前記第3の地点は、前記第2の試験におけるスタート地点を示している、
請求項1に記載の情報処理装置。 - 前記ユーザーが見ている方向又は3次元映像の提示装置の方向に対して、前進又は後退の移動のみを許可する、
請求項1から7のいずれか一項に記載の情報処理装置。 - 前記提示手段は、ユーザーが装着しているヘッドマウントディスプレイを用いて、前記3次元映像を提示する、
請求項1から8のいずれか一項に記載の情報処理装置。 - コンピュータによって行われる情報処理方法であって、
ユーザーの動作を受け付ける受付ステップと、
前記動作にしたがって、前記ユーザーに3次元映像を提示する提示ステップと、
前記ユーザーに、3次元映像によって構成される空間での移動を試行可能にする試行ステップと、
前記ユーザーの認知機能を判断するための複数の試験において、前記3次元映像内での前記ユーザーによる移動を計測する計測ステップと、
前記複数の試験のうち、少なくとも2つの試験における前記計測の結果を用いて、前記ユーザーの認知機能を判断する判断ステップと、
前記判断ステップに必要な計測を行う前に、前記試行ステップによる試行を行うように制御する制御ステップ
を有し、
前記試行ステップによる試行における前記ユーザーの移動速度によって、前記試験におけるスタート地点とゴール地点を決定する、
情報処理方法。 - コンピュータを、
ユーザーの動作を受け付ける受付手段と、
前記動作にしたがって、前記ユーザーに3次元映像を提示する提示手段と、
前記ユーザーに、3次元映像によって構成される空間での移動を試行可能にする試行手段と、
前記ユーザーの認知機能を判断するための複数の試験において、前記3次元映像内での前記ユーザーによる移動を計測する計測手段と、
前記複数の試験のうち、少なくとも2つの試験における前記計測の結果を用いて、前記ユーザーの認知機能を判断する判断手段と、
前記判断手段に必要な計測を行う前に、前記試行手段による試行を行うように制御する制御手段
として機能させ、
前記試行手段による試行における前記ユーザーの移動速度によって、前記試験におけるスタート地点とゴール地点を決定する、
情報処理プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020055767A JP6820038B1 (ja) | 2020-03-26 | 2020-03-26 | 情報処理装置、情報処理方法及び情報処理プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020055767A JP6820038B1 (ja) | 2020-03-26 | 2020-03-26 | 情報処理装置、情報処理方法及び情報処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6820038B1 true JP6820038B1 (ja) | 2021-01-27 |
JP2021157386A JP2021157386A (ja) | 2021-10-07 |
Family
ID=74200330
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020055767A Active JP6820038B1 (ja) | 2020-03-26 | 2020-03-26 | 情報処理装置、情報処理方法及び情報処理プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6820038B1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024053032A1 (ja) * | 2022-09-08 | 2024-03-14 | 株式会社テクリコ | 軽度認知障害のスクリーニングシステム |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090298025A1 (en) * | 2007-05-09 | 2009-12-03 | Oregon Health & Science University | Object recognition testing tools and techniques for measuring cognitive ability and cognitive impairment |
CN110916690A (zh) * | 2019-12-02 | 2020-03-27 | 中国科学院心理研究所 | 一种预测阿尔滋海默症早期症状的方法 |
-
2020
- 2020-03-26 JP JP2020055767A patent/JP6820038B1/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2021157386A (ja) | 2021-10-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Burova et al. | Utilizing vr and gaze tracking to develop ar solutions for industrial maintenance | |
Schneider et al. | Virtually the same? Analysing pedestrian behaviour by means of virtual reality | |
Zhao et al. | The effectiveness of visual and audio wayfinding guidance on smartglasses for people with low vision | |
US20170273552A1 (en) | Visual disability detection system using virtual reality | |
JP2020535556A (ja) | ユーザ用の人工知能(ai)モデルに基づく可動式の自律型パーソナルコンパニオン | |
KR101949261B1 (ko) | Vr 영상 생성 방법, vr 영상 처리 방법 및 vr 영상 처리 시스템 | |
CN103064188A (zh) | 基于头戴式显示器的教育和指导 | |
CN103076875A (zh) | 具有全息对象的个人音频/视频系统 | |
Jacobsen et al. | Active personalized construction safety training using run-time data collection in physical and virtual reality work environments | |
Larrue et al. | Influence of body-centered information on the transfer of spatial learning from a virtual to a real environment | |
JP6820038B1 (ja) | 情報処理装置、情報処理方法及び情報処理プログラム | |
JP6764142B1 (ja) | 情報処理装置、情報処理方法及び情報処理プログラム | |
Jia et al. | Human performance measures for interactive haptic-audio-visual interfaces | |
JP6813919B1 (ja) | 情報処理装置、情報処理方法及び情報処理プログラム | |
KR20180088005A (ko) | Vr 영상 저작 도구 및 vr 영상 저작 장치 | |
JP6764141B1 (ja) | 情報処理装置、情報処理方法及び情報処理プログラム | |
JP6764139B1 (ja) | 情報処理装置、情報処理方法及び情報処理プログラム | |
JP6764140B6 (ja) | 情報処理装置、情報処理方法及び情報処理プログラム | |
JP6784429B1 (ja) | 情報処理装置、情報処理方法及び情報処理プログラム | |
CN114089835B (zh) | 基于自适应视觉差异的混合现实交互式导识系统及方法 | |
JP2022174904A (ja) | 情報処理装置、回転可能な椅子、情報処理方法及び情報処理プログラム | |
US20210241648A1 (en) | Systems and methods to provide mental distress therapy through subject interaction with an interactive space | |
WO2018222729A1 (en) | Platform for identification of biomarkers using navigation tasks and treatments based thereon | |
WO2022085069A1 (ja) | 運動改善指導装置、運動改善指導方法および運動改善指導プログラム | |
US20230104870A1 (en) | Intelligent authoring for virtual reality |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200908 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20200908 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20200923 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200929 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201127 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201215 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201222 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6820038 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |