JP6337362B1 - 認知機能評価装置、及び、認知機能評価システム - Google Patents

認知機能評価装置、及び、認知機能評価システム Download PDF

Info

Publication number
JP6337362B1
JP6337362B1 JP2017213157A JP2017213157A JP6337362B1 JP 6337362 B1 JP6337362 B1 JP 6337362B1 JP 2017213157 A JP2017213157 A JP 2017213157A JP 2017213157 A JP2017213157 A JP 2017213157A JP 6337362 B1 JP6337362 B1 JP 6337362B1
Authority
JP
Japan
Prior art keywords
sentence
person
evaluated
cognitive function
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017213157A
Other languages
English (en)
Other versions
JP2019083902A (ja
Inventor
角 貞幸
貞幸 角
亮佑 南雲
亮佑 南雲
賢吾 阿部
賢吾 阿部
松村 吉浩
吉浩 松村
西山 高史
高史 西山
中島 博文
博文 中島
孝司 笹部
孝司 笹部
誠 苅安
誠 苅安
貴子 吉村
貴子 吉村
稔 外山
稔 外山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2017213157A priority Critical patent/JP6337362B1/ja
Application granted granted Critical
Publication of JP6337362B1 publication Critical patent/JP6337362B1/ja
Priority to CN201880070418.6A priority patent/CN111315302B/zh
Priority to US16/759,573 priority patent/US11918372B2/en
Priority to PCT/JP2018/038346 priority patent/WO2019087758A1/ja
Priority to TW107138112A priority patent/TWI680453B/zh
Publication of JP2019083902A publication Critical patent/JP2019083902A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271Specific aspects of physiological measurement analysis
    • A61B5/7275Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B10/00Other methods or instruments for diagnosis, e.g. instruments for taking a cell sample, for biopsy, for vaccination diagnosis; Sex determination; Ovulation-period determination; Throat striking implements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/40Detecting, measuring or recording for evaluating the nervous system
    • A61B5/4058Detecting, measuring or recording for evaluating the nervous system for evaluating the central nervous system
    • A61B5/4064Evaluating the brain
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/40Detecting, measuring or recording for evaluating the nervous system
    • A61B5/4076Diagnosing or monitoring particular conditions of the nervous system
    • A61B5/4088Diagnosing of monitoring cognitive diseases, e.g. Alzheimer, prion diseases or dementia
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4803Speech analysis specially adapted for diagnostic purposes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4842Monitoring progression or stage of a disease
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/03Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
    • G10L25/15Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being formant information
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/66Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for extracting parameters related to health condition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00Evaluating a particular growth phase or type of persons or animals
    • A61B2503/08Elderly
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0204Acoustic sensors
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475User input or interface means, e.g. keyboard, pointing device, joystick
    • A61B5/749Voice-controlled interfaces

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Medical Informatics (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Neurology (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Physiology (AREA)
  • Psychiatry (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Signal Processing (AREA)
  • Neurosurgery (AREA)
  • Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Hospice & Palliative Care (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Child & Adolescent Psychology (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Epidemiology (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

【課題】簡便に、且つ、精度良く被評価者の認知機能の評価が可能な認知機能評価装置等を提供する。【解決手段】認知機能評価装置100は、被評価者が指示された文に従って発話した音声を示す文音声データを取得する取得部110と、取得部110が取得した文音声データから、当該文音声データに基づく特徴量を算出する算出部120と、算出部120が算出した特徴量と、人が発した音声を示す音声データと当該人の認知機能との関係を示す参照データ151とを照合することにより、被評価者の認知機能を評価する評価部130と、被評価者に発話させる文を出力し、且つ、評価部130が評価した評価結果を出力する出力部140と、を備える。【選択図】図2

Description

本発明は、認知機能評価装置、認知機能評価システム、認知機能評価方法、及び、プログラムに関する。
従来から、認知機能を評価するテストとして、認知機能が評価される患者である被評価者がテスト用紙に解答を記載する方法である改訂長谷川式簡易知能評価スケール(HDS−R)、MMSE(Mini−Mental State Examination:ミニメンタルステート検査)、CDR(Clinical Dementia Rating)等がある。これらは、一定のトレーニングの受けた医師、臨床心理士等が、被評価者に対して医療機関で行うものである。
ここで、テスト用紙を用いた評価方法においては、長いテスト時間を要して被評価者の負担を強いることが問題となる。また、繰り返し被評価者に対してテストを実行する場合、同じテストであるために、被評価者が答えを記憶してしまう問題がある。この問題を解決するために、医者等が被評価者に実施するテストにおける質疑応答を音声収録し、被評価者の音声を分析する技術が開示されている(例えば、特許文献1参照)。
国際公開第2012/165602号
認知機能の評価には、簡便に、且つ、精度良く被評価者の認知機能の評価をすることが要求されている。
そこで、本発明は、簡便に、且つ、精度良く被評価者の認知機能の評価が可能な認知機能評価装置等の提供を目的とする。
本発明の一態様に係る認知機能評価装置は、被評価者が指示された文に従って発話した音声を示す文音声データを取得する取得部と、前記取得部が取得した前記文音声データから、当該文音声データに基づく特徴量を算出する算出部と、前記算出部が算出した前記特徴量と、人が発した音声を示す音声データと当該人の認知機能との関係を示す参照データとを照合することにより、前記被評価者の認知機能を評価する評価部と、前記被評価者に発話させる前記文を出力し、且つ、前記評価部が評価した評価結果を出力する出力部と、を備える。
また、本発明の一態様に係る認知機能評価システムは、上記認知機能評価装置と、前記被評価者の音声を検出する集音装置と、前記出力部が出力した前記文及び前記評価結果を表示する表示装置と、を備える。
また、本発明の一態様に係る認知機能評価方法は、コンピュータが実行する認知機能評価方法であって、被評価者に発話させる文を出力する文出力ステップと、被評価者が発話した音声を示す文音声データを取得する取得ステップと、前記取得ステップで取得した前記文音声データから、当該文音声データに基づく特徴量を算出する算出ステップと、前記算出ステップで算出した前記特徴量と、人が発した音声を示す音声データと当該人の認知機能との関係を示す参照データとを照合することにより、前記被評価者の認知機能を評価する評価ステップと、前記評価ステップで評価した評価結果を出力する評価結果出力ステップと、を含む。
また、本発明は、認知機能評価方法に含まれるステップをコンピュータに実行させるプログラムとして実現されてもよい。
本発明に係る認知機能評価装置等によれば、簡便に、且つ、精度良く被評価者の認知機能の評価が可能となる。
図1は、実施の形態に係る認知機能評価システムの構成を示す図である。 図2は、実施の形態に係る認知機能評価装置及び認知機能評価システムの特徴的な機能構成を示すブロック図である。 図3は、実施の形態に係る認知機能評価装置が被評価者の認知機能を評価する処理手順を示すフローチャートである。 図4は、取得部が被評価者の文音声データを取得する方法の一例を示す図である。 図5は、被評価者が発話した音声を示す文音声データの一例を示す図である。 図6は、文音声データから算出部が算出するフォルマント周波数を説明するための図である。 図7は、文音声データから算出部が算出するフォルマント周波数の時間変化の一例を示す図である。 図8は、評価部が評価する文音声データの特徴量の一例を説明するための図である。 図9は、評価部が評価する文音声データの特徴量の別の一例を説明するための図である。 図10は、人がMoCAテストを受けた際に獲得したスコアを示す図である。 図11は、表示装置に表示される、認知機能が低下していることを示す画像の一例を示す図である。 図12は、被評価者の文音声データを取得する際に表示装置に表示させる画像の別の一例を示す図である。 図13は、実施の形態の変形例1に係る認知機能評価システムの構成を示す図である。 図14は、実施の形態の変形例2に係る認知機能評価システムの構成を示す図である。
以下、実施の形態について、図面を参照しながら説明する。なお、以下で説明する実施の形態は、いずれも包括的又は具体的な例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置及び接続形態、ステップ、ステップの順序等は、一例であり、本発明を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。
なお、各図は模式図であり、必ずしも厳密に図示されたものではない。また、各図において、実質的に同一の構成に対しては同一の符号を付しており、重複する説明は省略又は簡略化される場合がある。
また、以下の実施の形態において、方向を示す表現を用いている。例えば、平行とは、完全に平行であることを意味するだけでなく、実質的に平行とする、すなわち、例えば数%程度のずれを含むことも意味する。
(実施の形態)
[認知機能評価装置の構成]
実施の形態に係る認知機能評価システムの構成に関して説明する。図1は、実施の形態に係る認知機能評価システムの構成を示す図である。
認知機能評価システム200は、被評価者Uが発した音声から、被評価者Uの認知機能を評価するための装置である。認知機能とは、認識したり、記憶したり、判断したりする能力を示す。一具体例として、認知機能評価装置100は、認知症である人(認知症患者)かどうかを評価する。
認知症とは、上述した認知機能の低下が見られる症状を示す。認知症の一具体例としては、アルツハイマー型認知症(AD:Alzheimer’s disease)が挙げられる。認知症は自覚症状がないため、認知症患者の家族又は第三者等が認知症患者に病院での診察を促すことで、認知症患者は医師からの診察を受けることとなる。また、MoCA(Montreal Cognitive Assessment)テスト等の認知症の診断のためのバッチテストを被評価者Uが受けることにより、被評価者Uが認知症であるかどうかを確認することができる。
しかしながら、MoCAテストは、15分程度の時間を要する。また、MoCAテストは、被評価者Uの経時的な変化を診断するために、日をおいて複数回実行することで、被評価者Uが認知症であるかどうかの判定を行う必要がある。つまり、MoCAテストは、被評価者Uが認知症であるかどうかを診断するために、長い期間を要する。
ところで、認知症患者と、認知症ではない人(健常者)とでは、発話した単語が同じ単語であっても音声に違いがあることが知られている。
認知機能評価システム200は、被評価者Uの音声を解析することで、被評価者Uの認知機能の程度を精度良く評価する装置である。
図1に示すように、認知機能評価システム200は、認知機能評価装置100と、被評価者Uの音声を検出する集音装置300と、表示装置400とを備える。
認知機能評価装置100は、集音装置300によって、被評価者Uが発した音声を示す文音声データ(音声データ)を取得し、取得した文音声データから被評価者Uの認知機能を評価するコンピュータである。具体的には、認知機能評価装置100は、被評価者Uに発話させる特定の文を示す文データ(言い換えると、当該文を含む画像データ)を表示装置400に表示させ、且つ、被評価者Uが発話した音声を示す文音声データを、集音装置300を介して取得する。
集音装置300は、被評価者Uが発した音声を検出して、検出した音声を示す文音声データを認知機能評価装置100へ出力するマイクである。被評価者Uが発した音声を精度良く検出するために、集音装置300の周囲には、遮音壁310及びポップガード320の少なくとも一方が配置されていてもよい。
表示装置400は、認知機能評価装置100から出力される画像データに基づいた画像を表示する。具体的には、表示装置400は、後述する出力部140(図2参照)が出力した被評価者Uに発話させる文を示す文データ及び被評価者Uの認知機能の評価結果を取得して表示する。表示装置400は、具体的には、液晶パネル、又は、有機ELパネル等によって構成されるモニタ装置である。表示装置400として、テレビ、スマートフォン、タブレット端末等の情報端末が用いられてもよい。
認知機能評価装置100と、集音装置300及び表示装置400とは、文音声データ又は画像データを送受信可能であればよく、有線で接続されていてもよいし、無線通信可能に接続されていてもよい。
認知機能評価装置100は、集音装置300によって検出された文音声データに基づいて被評価者Uの音声を分析し、分析した結果から被評価者Uの認知機能を評価し、評価した結果を示す画像を表示装置400へ出力する。こうすることで、認知機能評価装置100は、自覚症状がない認知症患者へ認知機能の程度を通知できるため、例えば、認知症患者に医師に診察を受けるように促すことができる。言い換えると、認知機能評価装置100は、自覚症状がない認知症患者へ認知機能の程度を通知することで、認知症患者が医師に診察を受ける支援をすることができる。
なお、認知機能評価装置100は、例えば、パーソナルコンピュータであるが、サーバ装置であってもよい。
図2は、実施の形態に係る認知機能評価装置100の特徴的な機能構成を示すブロック図である。認知機能評価装置100は、取得部110と、算出部120と、評価部130と、出力部140と、記憶部150と、指示部160とを備える。
取得部110は、被評価者Uが指示された文に従って発話した音声を示す文音声データを取得する。具体的には、集音装置300によって検出された文音声データを取得する。取得部110は、例えば、有線通信又は無線通信を行う通信インターフェースである。
算出部120は、取得部110で取得した被評価者Uの文音声データを解析することで、当該文音声データに基づく特徴量を算出する処理部である。算出部120は、具体的には、プロセッサ、マイクロコンピュータ、又は、専用回路によってハードウェア的に実現される。
例えば、出力部140が出力する文データが示す文は、母音を含む音節が連続した文字列を含み、算出部120は、母音の第一フォルマント周波数及び第二フォルマント周波数の変化量、当該母音の第一フォルマント周波数及び第二フォルマント周波数の変化にかかる所要時間、及び、当該所要時間に対する当該変化量の比である変化率の少なくとも1つを特徴量として算出してもよい。
第一フォルマント周波数は、人の音声の低周波数側から数えて1番目に見られる振幅のピーク周波数であり、舌の動きに関する特徴が反映されやすいことが知られている。また、認知症患者は、健常者と比較して舌をうまく動かせない場合が多い。そのため、第一フォルマント周波数は、健常者と認知症患者とで違いが生じやすいと考えられる。
第二フォルマント周波数は、人の音声の低周波数側から数えて2番目に見られる振幅のピーク周波数であり、声帯音源が声道、唇や舌等の口腔、鼻腔等で生じる共鳴のうち、舌の位置に関する影響が反映されやすいことが知られている。また、認知症患者は、健常者と比較して舌やあごの位置を維持する運動機能が衰える場合が多い。そのため、第二フォルマント周波数及び振幅には、健常者と認知症患者とで違いが生じやすいと考えられる。
また、例えば、出力部140が出力する文データが示す文は、母音を含む音節を複数含み、算出部120は、母音の第一フォルマント周波数、当該母音の第二フォルマント周波数、及び、当該母音の第一フォルマント周波数に対する当該母音の第二フォルマント周波数の比の少なくとも1つのばらつきを特徴量として算出してもよい。特徴量として算出されるばらつきの度合いは、例えば、標準偏差である。
また、例えば、出力部140が出力する文データが示す文は、互いに異なる母音を含む音節を少なくとも3つ含み、算出部120は、母音の第一フォルマント周波数に対する当該母音の第二フォルマント周波数で形成される座標空間において、少なくとも3つの母音のそれぞれから算出される第一フォルマント周波数に対する第二フォルマント周波数の値をプロットすることで形成される多角形の形状及び面積の少なくとも一方を特徴量として算出してもよい。
また、例えば、出力部140が出力する文データが示す文は、互いに異なる母音を含む音節を少なくとも2つ含み、算出部120は、母音の第一フォルマント周波数に対する当該母音の第二フォルマント周波数で形成される座標空間において、少なくとも2つの母音のそれぞれから算出される第一フォルマント周波数に対する第二フォルマント周波数の値をプロットした場合の位置関係を特徴量として算出してもよい。
また、例えば、出力部140が出力する文データが示す文は、子音と当該子音に後続した母音(後続母音)とからなる音節を含み、算出部120は、当該子音と当該後続母音との音圧差を特徴量として算出してもよい。なお、本明細書において、後続母音とは、「k」、「s」、「t」、「n」、「h」等の子音となる音素に続いて発話される、「a」、「i」、「u」、「e」、「o」等の母音となる音素を示す。例えば、「た(ta)」の場合、「t」が子音であり、「a」が当該子音に連続した後続母音である。子音と後続母音との音圧差とは、例えば、「た(ta)」の場合、「t」の音圧と、「a」の音圧との差である。子音及び当該子音に連続した後続母音とは、母音のみの音節以外のいわゆる開音節である。特に、特徴量を算出する際に採用される子音は、健常者と認知症患者とで違いが生じやすい「p」、「t」、「k」等の閉鎖子音(いわゆる破裂音)であるとよい。
また、例えば、算出部120は、被評価者Uの文の読み上げ時間を特徴量として算出してもよい。
また、例えば、出力部140は、さらに、被評価者Uに文を複数回読み上げさせるための指示を出力し、算出部120は、被評価者Uが複数回発話した文のそれぞれの読み上げ時間から算出される当該読み上げ時間の変化量を特徴量として算出してもよい。
評価部130は、算出部120が算出した上記いずれか又は任意に選択された複数の特徴量と、記憶部150に記憶されている参照データ151とを照合し、被評価者Uの認知機能を評価する。例えば、記憶部150には、参照データ151として、健常者と、軽度の認知症患者と、認知症患者とを区別するための特徴量の閾値が記憶されている。評価部130は、算出部120が算出した特徴量と、参照データ151として記憶されている閾値とを比較することで、被評価者Uが健常者であるか、軽度の認知症患者であるか、認知症患者であるかを評価する。評価部130は、例えば、プロセッサ、マイクロコンピュータ、又は、専用回路によって実現される。なお、算出部120及び評価部130は、それぞれの機能を併せ持つ1つのプロセッサ、マイクロコンピュータ、又は、専用回路で実現されてもよいし、プロセッサ、マイクロコンピュータ、又は、専用回路のうちの2つ以上の組み合わせによって実現されてもよい。
出力部140は、被評価者Uに発話させる特定の文を示す文データ(画像データ)、及び、評価部130が評価した被評価者Uの認知機能の評価結果を表示装置400へ出力する。出力部140は、例えば、有線通信又は無線通信を行う通信インターフェースである。例えば、出力部140が出力する文データが示す文は、子音及び当該子音に後続した母音(後続母音)からなる音節、並びに、母音のみからなる音節の少なくとも一方が連続した文字列を含まれていてもよい。つまり、出力部140が出力する文データが示す文には、開音節が連続して配置された文字列が含まれてもよい。
また、例えば、出力部140が出力する文データが示す文は、閉鎖子音と後続母音とからなる文字が、5以上含まれていてもよい。具体的には、出力部140が出力する文データが示す文は、きたかぜとたいようがでています、たんけんかはぼうけんがだいすきです、及び、きたからきたかたたたききの少なくとも1つの文字列を含んでいてもよい。
記憶部150は、人が発した音声を示す音声データに基づく特徴量と、当該人の認知機能との関係を示す参照データ151が記憶されている記憶装置である。参照データ151は、被評価者Uの認知機能の評価が行われるときに評価部130によって参照される予め記憶部150に記憶されているデータである。記憶部150は、例えば、ROM(Read Only Memory)、RAM(Random Access Memory)等によって実現される。
また、記憶部150には、算出部120及び評価部130が実行するプログラム、被評価者Uに発話させる文を含む画像データ、及び、被評価者Uの認知機能の評価結果を出力する際に用いられる当該評価結果を示す画像データも記憶されている。
指示部160は、被評価者Uに発話させる文を示す文データを出力部140に出力させる制御をする制御装置である。指示部160は、例えば、認知機能評価装置100と通信可能に接続され、被評価者U、被評価者Uを補助する補助者等の認知機能評価装置100のユーザが操作する図示しないタッチパネル、ボタン等のユーザインターフェースから被評価者Uの認知機能の評価を開始する旨を示す指示を取得した場合に、記憶部150に記憶されている予め作成された画像(例えば、図4の(a)に示す画像410)データを出力部140に出力させることで、被評価者Uに特定の文を発話させることを指示する。指示部160は、具体的には、プロセッサ、マイクロコンピュータ、又は、専用回路によって実現される。なお、算出部120、評価部130、及び、指示部160は、それぞれの機能を併せ持つ1つのプロセッサ、マイクロコンピュータ、又は、専用回路で実現されてもよいし、プロセッサ、マイクロコンピュータ、又は、専用回路のうちの2つ以上の組み合わせによって実現されてもよい。また、指示部160が実行する制御プログラムは、記憶部150に記憶されていてもよい。
[認知機能評価方法の処理手順]
続いて、認知機能評価装置100が実行する認知機能評価方法における具体的な処理手順について説明する。
まず、出力部140は、記憶部150に記憶されている、被評価者Uに発話させる文を示す文データを表示装置400に出力する(ステップS101)。具体的には、ステップS101において、指示部160は、記憶部150に記憶されている、被評価者Uに発話させる指示をする特定の文を示す文データを出力部140に出力させる。表示装置400は、出力部140から取得した文データが示す画像を表示する。
次に、取得部110は、集音装置300を介して被評価者Uの文音声データを取得する(ステップS102)。ステップS102において、例えば、被評価者Uは、「きたからきたかたたたきき」等の、表示装置400に表示される文を発話する。取得部110は、集音装置300を介して、被評価者Uが発した「きたからきたかたたたきき」等の音声を、文音声データとして取得する。
次に、算出部120は、ステップS102で取得した文音声データに基づく特徴量を算出する(ステップS103)。ステップS103において、例えば、算出部120は、文音声データに含まれる「きたからきたかたたたきき」における最初に発話された「た」を抽出し、抽出した「た」における子音と後続母音との音圧差を特徴量として算出する。
なお、上述したように、算出部120が算出する特徴量はこれに限定されない。算出部120が算出する特徴量の具体例については、後述する。
次に、評価部130は、ステップS103で算出部120が算出した特徴量から、被評価者Uの認知機能を評価する(ステップS104)。ステップS104において、評価部130は、例えば、ステップS103で算出部120が算出した特徴量と、記憶部150に記憶された参照データ151とから、被評価者Uの認知機能を評価する。
次に、出力部140は、評価部130が評価した被評価者Uの認知機能の評価結果を出力する(ステップS105)。ステップS105において、出力部140は、例えば、ステップS104で評価部130が評価した評価結果に対応する画像を記憶部150から取得して、表示装置400へ取得した画像を送信する。
表示装置400は、出力部140が出力した画像を取得して、当該画像を表示させる。こうすることで、被評価者Uは、簡便に、認知機能の評価結果を確認することができる。
図4は、図3に示すステップS101において、取得部110が被評価者Uの音声データを取得する方法の一例を示す図である。具体的には、図4の(a)は、認知機能評価装置100が被評価者Uに発話させる前に表示装置400に表示させる画像410の一例を示す図であり、図4の(b)は、認知機能評価装置100が被評価者Uの文音声データを取得する際に表示装置400に表示させる画像420の一例を示す図であり、図4の(c)は、表示装置400に表示された文を被評価者Uが読み上げている様子を示す図である。
図4の(a)に示すように、認知機能評価装置100は、被評価者Uから文音声データを取得する前に、被評価者Uへ「マイクの前の丸いスクリーンに近づいて話してください」という文が含まれる画像410を表示装置400に表示させる。なお、図4の(a)に示す文は、例えば、医者等が直接被評価者Uに説明してもよいし、録音した音声を被評価者Uに聞かせてもよい。
次に、図4の(b)に示すように、表示装置400には、被評価者Uに発話させる文が含まれる画像420が表示される。画像410には、例えば、「きたからきたかたたたきき」という文が含まれる画像420を例示している。
次に、図4の(c)に示すように、被評価者Uは、画像420に含まれる文を発話する。図4の(c)に示す例においては、算出部120は、例えば、「きたからきたかたたたきき」における、最初に発話された「た(ta)」を抽出する。算出部120は、さらに、抽出したの「た(ta)」における子音である「t」と後続母音である「a」との音圧を算出し、算出したそれぞれの音圧から、「t」と「a」との音圧差を特徴量として算出する。
このように、被評価者Uが発話する文を画像420に表示させることで、医者等が当該文を声で被評価者Uに伝える場合と比較して、被評価者Uの音声を検出する場合にノイズが入りにくくなる。
[特徴量の詳細]
以下、認知機能評価装置100が、被評価者Uの認知機能の程度を評価する際に用いる特徴量の詳細について説明する。
図5は、被評価者Uが発話した音声を示す文音声データの一例を示す図である。具体的には、図5は、被評価者Uが「きたからきたかたたたきき」と発話した場合の文音声データを示すグラフである。図5に示すグラフの横軸は時間であり、縦軸はパワー(音圧)である。なお、図5のグラフの縦軸に示すパワーの単位は、デシベル(dB)である。
図5に示すグラフには、「き」、「た」、「か」、「ら」、「き」、「た」、「か」、「た」、「た」、「た」、「き」、「き」に対応する音圧の変化が確認される。取得部110は、図3に示すステップS102において、被評価者Uから文音声データとして、図5に示すデータを取得する。算出部120は、例えば、図3に示すステップS103において、既知の方法により、図5に示す文音声データから、初めに出現する「た(ta)」における「t」及び「a」の各音圧を算出する。算出部120は、算出した「t」及び「a」の各音圧から、「t」及び「a」の音圧差ΔP1を特徴量として算出する。この場合、参照データ151には、音圧差ΔP1の閾値が含まれており、評価部130は、例えば、当該閾値以上であれば被評価者Uが認知症であると判定し、当該閾値未満であれば健常者であると評価をする。
なお、特徴量は、複数の音圧差の標準偏差等のばらつきでもよい。この場合、算出部120は、例えば、図5に示す音圧差ΔP1〜ΔP9までを算出して、各音圧差ΔP1〜ΔP9の標準偏差を特徴量として算出する。音圧差の標準偏差は、健常者と比較して、認知症患者の方が、大きくなる。特徴量として音圧差の標準偏差を採用する場合、参照データ151には、当該標準偏差の値である閾値が含まれており、評価部130は、例えば、当該閾値以上であれば被評価者Uが認知症であると判定し、当該閾値未満であれば健常者である等の評価をする。標準偏差を算出する際に用いられる音圧差の数は、特に限定されず、2つでもよいし、3以上でもよい。
図6は、文音声データから算出部120が算出するフォルマント周波数を説明するための図である。なお、図6に示すグラフの横軸は周波数[Hz]であり、縦軸は振幅である。
図6に破線で示すように、文音声データの横軸を周波数に変換して得られるデータには、複数のピークが確認される。複数のピークのうち、周波数の最も低いピークの周波数は、第一フォルマント周波数F1である。また、第一フォルマント周波数F1の次に周波数の低いピークの周波数は、第二フォルマント周波数F2である。また、第二フォルマント周波数F2の次に周波数の低いピークの周波数は、第三フォルマント周波数F3である。このように、算出部120は、取得部110が取得した文音声データから既知の方法により母音の部分を抽出して、抽出した母音の部分の文音声データを、周波数に対する振幅にデータ変換することにより母音のスペクトルを算出して、フォルマント周波数を算出する。
なお、図6に示すグラフは、被評価者Uから得られる文音声データを周波数に対する振幅のデータに変換し、その包絡線を求めることにより算出される。包絡線の計算には、例えば、ケプストラム分析、線形予測分析(Linear Predictive Coding:LPC)等が採用される。
図7は、音声データから算出部120が算出するフォルマント周波数の時間変化の一例を示す図である。具体的には、図7は、第一フォルマント周波数F1と、第二フォルマント周波数F2と、第三フォルマント周波数F3との周波数の時間変化の一例を説明するためのグラフである。
例えば、被評価者Uには、「あいうえお」等の連続した複数の母音を含む音節を発話させる。具体的には、出力部140は、「あいうえお」等の連続した複数の母音を含む音節からなる文字列を含む文を示す文データを表示装置400に出力し、当該文を表示装置400に表示させることで、被評価者Uに「あいうえお」等の複数の母音を含む音節を発話させる。算出部120は、被評価者Uが発話した音声を示す文音声データから、複数の母音それぞれの第一フォルマント周波数F1及び第二フォルマント周波数F2を算出する。さらに、算出部120は、母音が連続した文字列の第一フォルマント周波数F1及び第二フォルマント周波数F2の変化量、母音が連続した文字列の第一フォルマント周波数F1及び第二フォルマント周波数F2の変化にかかる所要時間、及び、当該所要時間に対する当該変化量の比である変化率の少なくとも1つを特徴量として算出する。
第一フォルマント周波数F1及び第二フォルマント周波数F2の変化量、所要時間、及び、変化率は、健常者と比較して、認知症患者の方が、それぞれ大きくなる。特徴量として変化量、所要時間、又は、変化率を採用する場合、参照データ151には、変化量、所要時間、又は、変化率の値である閾値が含まれており、評価部130は、例えば、当該閾値以上であれば被評価者Uが認知症であると判定し、当該閾値未満であれば健常者である等の評価をする。
なお、被評価者Uに発話させる文に含まれる母音は、連続していなくてもよい。具体的には、出力部140は、「たいよう」等の「い」及び「う」のように、連続していない複数の母音からなる文字列を含む文を示す文データを表示装置400に出力し、当該文を表示装置400に表示させてもよい。このような場合、算出部120は、母音の第一フォルマント周波数F1、当該母音の第二フォルマント周波数F2、及び、当該母音の第一フォルマント周波数F1に対する当該母音の第二フォルマント周波数F2の比の少なくとも1つのばらつきを特徴量として算出してもよい。特徴量として算出されるばらつきの度合いは、例えば、標準偏差である。当該ばらつきは、健常者と比較して、認知症患者の方が、大きくなる。特徴量として当該ばらつき(具体的には、標準偏差)を採用する場合、参照データ151には、当該標準偏差の値である閾値が含まれており、評価部130は、例えば、当該閾値以上であれば被評価者Uが認知症であると判定し、当該閾値未満であれば健常者である等の評価をする。
また、「きたからきたかたたたきき」のように、母音のみの音節はなく、子音と後続母音とからなる開音節のみからなる文の場合、算出部120は、例えば、後続母音の音素のみを抽出して、各後続母音のフォルマント周波数を算出して、当該フォルマント周波数の変化量、変化に係る所要時間、変化率等を算出してもよい。また、連続した母音の文字列は、後続母音と母音とが連続した文字列でもよい。
なお、認知機能評価装置100は、時間を測定するために、RTC(Real Time Clock)等の計時部を備えてもよい。
図8は、評価部130が評価する文音声データの特徴量の一例を説明するための図である。なお、図8に示すグラフは、横軸が第一フォルマント周波数F1であり、縦軸が第二フォルマント周波数F2である。
図8に示すように、算出部120は、一つの母音に対して、第一フォルマント周波数F1と第二フォルマント周波数F2とを算出することで、図8に示すグラフに一点プロットする。例えば、被評価者Uには、「あ」、「い」、「う」、「え」、「お」を発話させる。具体的には、出力部140は、「あ」、「い」、「う」、「え」、「お」を含む文を示す文データを表示装置400に出力し、当該文を表示装置400に表示させることで、被評価者Uに「あ」、「い」、「う」、「え」、「お」を発話させる。算出部120は、文音声データに含まれる「あ」、「い」、「う」、「え」、「お」それぞれの第一フォルマント周波数F1と第二フォルマント周波数F2とを算出する。こうすることで、算出部120は「あ」、「い」、「う」、「え」、「お」それぞれに対応する点を図8に示す座標空間にプロットする。このように、算出部120は、母音の第一フォルマント周波数F1に対する当該母音の第二フォルマント周波数F2で形成される座標空間(具体的には、図8に示す座標空間)において、少なくとも3つの母音のそれぞれから算出される第一フォルマント周波数F1に対する第二フォルマント周波数F2の比をプロットすることで形成される多角形の形状及び面積の少なくとも一方を特徴量として算出する。
このように形成された多角形の面積は、健常者と比較して、認知症患者の方が、面積が小さくなる。特徴量として当該多角形の面積を採用する場合、参照データ151には、多角形の面積の値である閾値が含まれており、評価部130は、例えば、当該閾値以上であれば被評価者Uが健常者であると判定し、当該閾値未満であれば認知症である等の評価をする。
また、このように形成された多角形の形状は、健常者と比較して、認知症患者の方が、各点の距離が近くなる。また、当該多角形が五角形の場合、当該多角形の形状は、健常者と比較して、認知症患者の方が、正五角形で近似した場合に、当該正五角形に対してゆがみが大きくなる。特徴量として当該多角形の形状を採用する場合、参照データ151には、多角形を構成する各点の距離、又は、正五角形で各点を近似した場合の各点からのずれ量の値である閾値が含まれており、評価部130は、例えば、当該閾値以上であれば被評価者Uが健常者であると判定し、当該閾値未満であれば認知症である等の評価をする。
なお、プロットするために採用する母音は、子音に続く後続母音でもよいし、外国語である場合には、「∧」(発音記号)等、「a」、「i」、「u」、「e」、「o」以外でもよい。
また、プロットする点の数は、各点から構成される多角形の形状及び面積の少なくとも一方を算出できればよく、3以上であればよい。
図9は、評価部130が評価する文音声データの特徴量の別の一例を説明するための図である。
図9に示すように、算出部120は、一つの母音に対して、第一フォルマント周波数F1と第二フォルマント周波数F2とを算出することで、図9に示すグラフに一点プロットする。例えば、被評価者Uには、「あい」、「あう」、「おい」等の連続した母音を含む音節を発話させる。具体的には、出力部140は、「あい」、「あう」、「おい」等の母音を含む音節が連続した文字列を含む文を示す文データを表示装置400に出力し、当該文を表示装置400に表示させることで、被評価者Uに「あい」、「あう」、「おい」等を発話させる。算出部120は、文音声データに含まれる、例えば「あい」のうちの「あ」及び「い」それぞれの第一フォルマント周波数F1と第二フォルマント周波数F2とを算出する。こうすることで、算出部120は「あ」、「い」それぞれに対応する点をプロットする。このように、出力部140が出力する文データが示す文は、連続した少なくとも2つの母音を含み、算出部120は、母音の第一フォルマント周波数F1に対する当該母音の第二フォルマント周波数F2で形成される座標空間(具体的には、図9に示す座標空間)において、少なくとも2つの母音のそれぞれから算出される第一フォルマント周波数F1に対する第二フォルマント周波数F2の比をプロットした場合の位置関係を特徴量として算出してもよい。
また、このようにプロットされた各点は、健常者と比較して、認知症患者の方が、距離が近くなる。特徴量として当該各点の位置関係を採用する場合、参照データ151には、各点の距離である閾値が含まれており、評価部130は、例えば、当該閾値以上であれば被評価者Uが健常者であると判定し、当該閾値未満であれば認知症である等の評価をする。
ところで、認知症の診断は、認知症の診断のためのバッチテストであるMoCAテストを人が受けることにより、当該人が認知症であるかどうかを特定することができる。
図10は、人がMoCAテストを受けた際に獲得したスコアを示す図である。
本発明者らは、健常者(NC:Normal Control)、軽度の認知症患者(MCI:Mild Cognitive Inpairment)及び認知症患者(AD)を含む複数の被評価者を集めて、MoCAテストを実施した。NCの被評価者数(Number of subjects)は90人とし、MCIの被評価者数は94人とし、ADの被評価者数は93人とした。
図10から、NC、MCI及びADとでMoCAのスコアの平均値(MoCA average score)及びスコアの範囲(MoCA score range)が異なることが確認できる。具体的には、NCのMoCAのスコアの平均値は27.4であり、MCIのMoCAのスコアの平均値は22.1であり、ADのMoCAのスコアの平均値は16.2であった。
また、MoCAテストを受けた各人から、当該各人が発話した音声を示す音声データ(文音声データ)に基づく上述した特徴量を算出することで、音声データに基づく人の特徴量と当該人の認知機能との関係を示す参照データ151を作成する。例えば、評価部130によって被評価者UがNCか、MCIか、ADかを判定する場合、上述した特徴量の閾値として、値の異なる2つの閾値(例えば、第一閾値及び第二閾値)が参照データ151となる。評価部130は、例えば、被評価者Uから取得した文音声データから算出される特徴量が、第一閾値未満であれば被評価者UをNCと評価し、第一閾値以上第二閾値未満であれば被評価者UをMCIと評価し、第二閾値以上であれば被評価者UをADと評価する。認知機能評価装置100は、当該参照データ151を用いることで、被評価者Uの文音声データに基づく特徴量と参照データ151とから、被評価者Uの認知機能を簡便に評価することができる。なお、参照データ151として用いられる特徴量の閾値は、1つでもよいし、2以上でもよい。
図11は、表示装置400に表示される、認知機能が低下していることを示す画像の一例を示す図である。
表示装置400は、評価部130が評価した評価結果として、図11に示されるような画像430を表示する。画像430は、例えば、評価部130が被評価者Uの認知機能をADと評価した場合に表示する画像の一例である。このように、表示装置400は、評価部130が評価した評価結果を画像として表示する。こうすることで、例えば、被評価者Uが自宅等で認知機能評価装置100を用いて認知機能を評価している場合には、認知機能評価装置100は、被評価者Uに対して医者等の診察を促すことが可能である。
ところで、図4の(c)に示す「きたからきたかたたたきき」のように、被評価者Uに発話させる文は、一度ではなく、複数回発話させてもよい。
図12は、被評価者Uの文音声データを取得する際に表示装置400に表示させる画像の別の一例を示す図である。
図12に示す画像440のように、出力部140が被評価者Uに発話させる文を含む文データには、当該文を複数回発話させる説明文が含まれていてもよい。例えば、算出部120は、被評価者Uの文の読み上げ時間を特徴量として算出する。文の読み上げ時間は、健常者と比較して、認知症患者の方が、長くなる。この場合、参照データ151には、読み上げ時間の閾値が含まれており、評価部130は、例えば、当該閾値以上であれば被評価者Uが認知症であると判定し、当該閾値未満であれば健常者である等の評価をする。
ここで、被評価者Uに複数回同じ文章を読ませてもよい。具体的には、出力部140は、さらに、被評価者Uに文を複数回読み上げさせるための指示を出力し、算出部120は、被評価者Uが複数回発話した文のそれぞれの読み上げ時間から算出される当該読み上げ時間の変化量を特徴量として算出してもよい。
なお、ここでいう変化量は、例えば、1回目に被評価者Uが文の読み上げにかかった時間が10秒であり、2回目に被評価者Uが文の読み上げにかかった時間が8秒である場合、変化量は2秒である。また、被評価者Uに3回以上文を読み上げさせた場合、例えば、算出部120は、被評価者Uが文の1回の読み上げにかかった時間の標準偏差、又は、複数算出される変化量の平均値を特徴量として算出してもよい。
文の読み上げ時間の変化量は、健常者と比較して、認知症患者の方が、大きくなる。この場合、参照データ151には、読み上げ時間の変化量が含まれており、評価部130は、例えば、当該閾値以上であれば被評価者Uが認知症であると判定し、当該閾値未満であれば健常者である等の評価をする。
なお、図12には、被評価者Uに文を3回発話させる指示について例示したが、2回でもよいし、4回以上でもよい。
また、出力部140が被評価者Uに発話させる文を含む文データは、当該文を複数回発話させる説明文を含んでいてもよいし、被評価者Uに発話させる文を複数含んでいてもよい。
[効果等]
以上、実施の形態に係る認知機能評価装置100は、被評価者Uが指示された文に従って発話した音声を示す文音声データを取得する取得部110と、取得部110が取得した文音声データから、当該文音声データに基づく特徴量を算出する算出部120と、算出部120が算出した特徴量と、人が発した音声を示す音声データと当該人の認知機能との関係を示す参照データ151とを照合することにより、被評価者Uの認知機能を評価する評価部130と、被評価者Uに発話させる文を出力し、且つ、評価部130が評価した評価結果を出力する出力部140と、を備える。
これにより、認知機能評価装置100によれば、評価部130で認知機能を正確に評価しやすい音声データを被評価者Uから取得することができる。そのため、認知機能評価装置100によれば、簡便に、且つ、精度良く被評価者Uの認知機能を評価できる。
例えば、被評価者Uに発話させる文は、子音及び当該子音に連続した後続母音、並びに、母音の少なくとも一方が連続した文字列を含んでもよい。
つまり、評価部130が評価する音声データは、子音及び当該子音に後続した母音からなる音節、並びに、母音のみからなる音節の少なくとも一方が連続しているとよい。例えば、図5に示すように、子音である「t」よりも、母音である「a」の方が、音圧が大きいことが分かる。このように、例えば、集音装置300で集音した場合に、子音と比較して、母音の方が、集音しやすい。また、音及び当該子音に連続した後続母音、並びに、母音の少なくとも一方を連続して発話させることで、複数の母音を解析することができるため、より精度良く被評価者Uの認知機能を評価できる。
また、例えば、被評価者Uに発話させる文は、きたかぜとたいようがでています、たんけんかはぼうけんがだいすきです、及び、きたからきたかたたたききの少なくとも1つの文字列を含んでもよい。これらのように、出力部140が出力する文データが示す文は、閉鎖子音と当該閉鎖子音に後続した母音とからなる文字が、5以上含まれていてもよい。閉鎖子音は、ADとNCとで音声データに違いが生じやすい。そのため、被評価者Uに発話させる文を、例えば、きたかぜとたいようがでています、たんけんかはぼうけんがだいすきです、及び、きたからきたかたたたききとすることで、より精度良く被評価者Uの認知機能を評価できる。
また、例えば、被評価者Uに発話させる文は、母音を含む音節が連続した文字列を含んでもよい。また、算出部120は、母音の第一フォルマント周波数F1及び第二フォルマント周波数F2の変化量、母音の第一フォルマント周波数F1及び第二フォルマント周波数F2の変化にかかる所要時間、及び、当該所要時間に対する当該変化量の比である変化率の少なくとも1つを特徴量として算出してもよい。
第一フォルマント周波数F1は、人の音声の低周波数側から数えて1番目に見られる振幅のピーク周波数であり、舌の動きに関する特徴が反映されやすいことが知られている。また、ADは、NCと比較して舌をうまく動かせない場合が多い。そのため、第一フォルマント周波数F1は、NCとADとで違いが生じやすいと考えられる。また、例えば、ADは、舌やあごの位置を維持する運動機能が衰える場合が多いと考えらえる。そのため、ADは、NCと比較して、発する音声が安定しにくいことが考えられる。つまり。ADは、NCと比較して、発する音声がばらつくために、第一フォルマント周波数F1及び第二フォルマント周波数F2の時間変化が大きくなることが考えられる。そのため、第一フォルマント周波数F1及び第二フォルマント周波数F2の変化量、所要時間、及び、当該所要時間に対する当該変化量の比である変化率を特徴量として認知機能の評価に用いることで、より精度良く被評価者Uの認知機能の評価が可能となる。
また、例えば、被評価者Uに発話させる文は、母音を含む音節を複数含んでもよい。また、算出部120は、母音の第一フォルマント周波数F1、当該母音の第二フォルマント周波数F2、及び、当該母音の第一フォルマント周波数F1に対する当該母音の第二フォルマント周波数F2の比の少なくとも1つのばらつきを特徴量として算出してもよい。
上記のとおり、ADは、NCと比較して、発する音声がばらつくために、第一フォルマント周波数F1及び第二フォルマント周波数F2がばらつきやすい。また、フォルマント周波数には、個人差が生じることが推定される。さらに、第一フォルマント周波数F1と第二フォルマント周波数F2とには、個人ごとに相関がみられることが推定される。そのため、母音の第一フォルマント周波数F1に対する当該母音の第二フォルマント周波数F2の比のばらつきを特徴量とすることで、より精度良く被評価者Uの認知機能を評価できる。
また、例えば、被評価者Uに発話させる文は、互いに異なる母音を含む音節を少なくとも3つ含んでもよい。また、算出部120は、母音の第一フォルマント周波数F1に対する当該母音の第二フォルマント周波数F2で形成される座標空間において、少なくとも3つの互いに異なる母音のそれぞれから算出される第一フォルマント周波数F1に対する第二フォルマント周波数F2の比をプロットすることで形成される多角形の形状及び面積の少なくとも一方を特徴量として算出してもよい。
上記の通り、このように形成された多角形の面積は、健常者と比較して、認知症患者の方が、面積が小さくなる。また、このように形成された多角形の形状は、健常者と比較して、認知症患者の方が、各点の距離が近くなる。また、当該多角形が五角形の場合、当該多角形の形状は、健常者と比較して、認知症患者の方が、正五角形で近似した場合に、正五角形に対してゆがみが大きくなる。そのため、特徴量として、上記のように形成される多角形の形状及び面積の少なくとも一方を採用することで、より精度良く被評価者Uの認知機能の評価が可能となる。
また、例えば、被評価者Uに発話させる文は、互いに異なる母音を含む音節を少なくとも2つ連続して含んでもよい。また、算出部120は、母音の第一フォルマント周波数F1に対する当該母音の第二フォルマント周波数F2で形成される座標空間において、少なくとも2つの母音のそれぞれから算出される第一フォルマント周波数F1に対する第二フォルマント周波数F2の比をプロットした場合の位置関係を特徴量として算出してもよい。
上記の通り、このようにプロットされた各点は、健常者と比較して、認知症患者の方が、距離が近くなる。そのため、特徴量として、当該各点の位置関係を採用することで、より精度良く被評価者Uの認知機能の評価が可能となる。
また、例えば、被評価者Uに発話させる文は、子音と当該子音に後続した母音とからなる音節を含んでもよい。また、算出部120は、子音と後続母音との音圧差を特徴量として算出してもよい。
評価部130は、例えば、当該閾値以上であれば被評価者Uが認知症であると判定し、当該閾値未満であれば健常者である等の評価をする。また、例えば、特徴量は、複数の音圧差の標準偏差等のばらつきでもよい。この場合、算出部120は、例えば、図5に示す音圧差ΔP1〜ΔP9までを算出して、各音圧差ΔP1〜ΔP9の標準偏差を特徴量として算出する。音圧差の標準偏差は、健常者と比較して、認知症患者の方が、大きくなる。そのため、特徴量として音圧差を採用することで、より精度良く被評価者Uの認知機能の評価が可能となる。
また、例えば、算出部120は、被評価者Uの文の読み上げ時間を特徴量として算出してもよい。
上記の通り、文の読み上げ時間は、健常者と比較して、認知症患者の方が、長くなる。そのため、特徴量として文の読み上げ時間を採用することで、より精度良く被評価者Uの認知機能の評価が可能となる。
また、例えば、出力部140は、さらに、被評価者Uに文を複数回読み上げさせるための指示を出力してもよい。また、算出部120は、被評価者Uが複数回発話した文のそれぞれの読み上げ時間から算出される当該読み上げ時間の変化量を特徴量として算出してもよい。
上記の通り、文の読み上げ時間の変化量は、健常者と比較して、認知症患者の方が、大きくなる。そのため、特徴量として文の読み上げ時間の変化量を採用することで、より精度良く被評価者Uの認知機能の評価が可能となる。
また、例えば、認知機能評価装置100は、参照データ151を記憶する記憶部150を備えてもよい。
つまり、認知機能評価装置100は、参照データ151を記憶している外部のサーバ装置等の通信することで、被評価者Uの認知機能の評価をしてもよいが、参照データ151を記憶している記憶装置である記憶部150を備えてもよい。これにより、認知機能評価装置100は、外部のサーバ装置を通信するためのネットワークに接続することなく、被評価者Uの認知機能を評価することができる。そのため、認知機能評価装置100の利便性は、向上される。
また、実施の形態に係る認知機能評価システム200は、認知機能評価装置100と、被評価者Uの音声を検出する集音装置300と、出力部140が出力した文及び評価結果を表示する表示装置400と、を備える。
これにより、認知機能評価システム200は、表示装置400によって被評価者Uに発話させる文を提示し、集音装置300によって被評価者Uの音声を検出し、認知機能評価装置100によって被評価者Uの認知機能を評価し、表示装置400によって当該評価結果を表示できる。つまり、認知機能評価システム200によれば、評価部130で認知機能を正確に評価しやすい音声データを被評価者Uから取得することができる。そのため、認知機能評価システム200によれば、簡便に、且つ、精度良く被評価者Uの認知機能を評価できる。
また、実施の形態に係る認知機能評価方法は、コンピュータ(具体的には、認知機能評価装置100)が実行する認知機能評価方法であって、被評価者Uに発話させる文を出力する文出力ステップと、被評価者Uが発話した音声を示す文音声データを取得する取得ステップと、取得ステップで取得した文音声データから、当該文音声データに基づく特徴量を算出する算出ステップと、算出ステップで算出した特徴量と、人が発した音声を示す音声データと当該人の認知機能との関係を示す参照データとを照合することにより、被評価者Uの認知機能を評価する評価ステップと、評価ステップで評価した評価結果を出力する評価結果出力ステップと、を含む。
これにより、本発明に係る認知機能評価方法によれば、認知機能を正確に評価しやすい音声データを被評価者Uから取得することができる。そのため、本発明に係る認知機能評価方法によれば、簡便に、且つ、精度良く被評価者Uの認知機能を評価できる。
また、本発明は、認知機能評価方法に含まれるステップをコンピュータに実行させるプログラムとして実現されてもよい。
(変形例)
続いて、実施の形態の変形例1及び変形例2に係る認知機能評価システムについて説明する。なお、実施の形態と同一の構成に関しては同一の符号を付しており、重複する説明は省略又は簡略化する場合がある。
図13は、実施の形態の変形例1に係る認知機能評価システムの構成を示す図である。
実施の形態の変形例1に係る認知機能評価システム200aは、実施の形態に係る認知機能評価システム200と同様に、認知機能評価装置100と、集音装置300と、表示装置400とを備える。認知機能評価システム200は、例えば、集音装置300を覆うように、ポップガード320を備えてもよい。
また、認知機能評価システム200aでは、指向性を有する集音装置300が採用されている。ここで、集音装置300及び表示装置400は、集音装置300が最大感度を示す方向(図13に示す集音方向V2)と表示装置400が課題情報を表示する表示面401の法線方向V1とが一致するように配置されている。具体的には、法線方向V1と集音方向V2とが平行となるように、集音装置300及び表示装置400は、机等の固定物に配置されている。なお、集音装置300及び表示装置400は、造営材等に固定されてもよい。また、認知機能評価システム200aは、集音装置300及び表示装置400の位置関係を固定するための固定具を備えてもよい。
こうすることで、被評価者Uが表示装置400を見ながら発話した場合においても、集音方向V2と、発話する方向とが一致しやすくなる。そのため、認知機能評価システム200aのような位置関係とすることで、集音装置300は、被評価者Uの音声を正確に検出しやすくなる。
続いて、実施の形態の変形例2に係る認知機能評価システムについて説明する。
図14は、実施の形態の変形例2に係る認知機能評価システムの構成を示す図である。
実施の形態の変形例2に係る認知機能評価システム200bは、実施の形態に係る認知機能評価システム200と同様に、認知機能評価装置100と、集音装置300aと、表示装置400とを備える。
集音装置300aは、集音装置300と同様に、被評価者Uが発した音声を検出して、検出した音声を示す音声データを認知機能評価装置100へ出力するマイクである。また、集音装置300aは、実施の形態に係る認知機能評価システム200における集音装置300と同様に、指向性を有する。
認知機能評価システム200bにおいては、集音装置300aと表示装置400とが一体として形成されている。具体的には、集音装置300aと表示装置400とは、同一の筐体に配置されている。集音装置300aと表示装置400とを一体に形成する製造工程において、法線方向V1と集音方向V2とを一致するように形成しておけば、被評価者Uが認知機能評価システム200bを利用する際に、法線方向V1及び集音方向V2がずれることが抑制される。
(その他の実施の形態)
以上、実施の形態、実施の形態の変形例1及び変形例2に係る認知機能評価装置等について説明したが、本発明は、上記実施の形態に限定されるものではない。
また、上記実施の形態では、認知機能の低下の症状の一具体例として、アルツハイマー型認知症が挙げられた。しかしながら、認知機能とは、認識したり、記憶したり、判断したりする能力を示し、認知症とは、上述した認知機能の低下が見られる症状を示す。つまり、認知機能評価装置が評価する認知機能の程度は、アルツハイマー型認知症に限定されず、例えば、血管性認知症、酩酊の度合い等でもよい。
また、上記実施の形態では、被評価者Uの認知機能の程度を評価するために、MoCAテストのスコアとフォルマントの特徴量との関係性を示すデータを参照データ151として予め記憶部150が記憶している。しかしながら、参照データは、フォルマントの特徴量と照合することで認知機能の程度の評価をすることができるデータであればよく、MoCAテストとフォルマントの特徴量との関係性を示すデータに限定されない。例えば、参照データは、MMSE(Mini−Mental State Examination:ミニメンタルステート検査)等のスコアとフォルマント周波数等の特徴量との関係を示すデータでもよい。
また、上記実施の形態では、「閾値以上」、「閾値未満」等と記載したが、厳密な意味で記載するものではない。例えば、「閾値以上」と記載する場合においては、閾値よりも大きいことを意味してもよい。また、「閾値以上」、「閾値未満」と対比して記載する場合に、当該閾値を境に区別されることを意味し、それぞれ、「閾値より大きい」、「閾値以下」であることを意味してもよい。
また、上記参照データにおける文音声データと認知症の程度との関係は、現時点における発明者らの上記被評価者らを集めたデータ分析によりものであるが、今後、より多くの被評価者を集めたデータ分析、条件を見直したデータ分析などが行われることにより評価基準が変更になる可能性がある。したがって、上記実施の形態では、特徴量として音圧差を採用する場合において、評価部は、例えば、当該閾値以上であれば被評価者Uが認知症であると判定し、当該閾値未満であれば健常者である等の評価をしたが、これに限定されない。例えば、当該閾値未満であれば被評価者Uが認知症であると判定し、当該閾値以上であれば健常者である等の評価をしてもよい。他の特徴量における閾値の扱いについても同様である。
また、上記実施の形態では、被評価者から得られる文音声データのみを特徴量として算出して被評価者の認知機能を評価したが、他の既知の認知機能を評価できるデータを組み合わせて評価を実施してもよい。例えば、認知機能と歩幅、歩隔、歩行速度等の歩行に関する歩行データとには、相関があることが知られている。上記実施の形態で評価された被評価者の文音声データと、被評価者の歩行データとを組み合わせて認知機能の評価に用いることで、より精度良く被評価者の認知機能は評価され得る。
また、本発明は、認知機能評価装置及び認知機能評価システムとして実現できるだけでなく、認知機能評価装置及び認知機能評価システムの行う各構成要素が行う処理をステップとして含むプログラム、及び、そのプログラムを記録したコンピュータ読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、CD−ROM、MO、DVD、DVD−ROM、DVD−RAM、BD(Blu−ray(登録商標) Disc)、半導体メモリ等の記録媒体として実現することもできる。また、当該プログラムは、インターネット等の通信路で配信されてもよい。
つまり、上記包括的又は具体的な態様は、システム、装置、集積回路、コンピュータプログラム又はコンピュータ読み取り可能な記録媒体で実現されてもよく、システム、装置、集積回路、コンピュータプログラム及び記録媒体の任意な組み合わせで実現されてもよい。例えば、認知機能評価装置が備える各構成要素は、一つの筐体内にある必要はなく、それぞれが異なる場所に配置されて各種データの送受信が可能に接続させていればよい。
その他、各実施の形態に対して当業者が思いつく各種変形を施して得られる形態、又は、本発明の趣旨を逸脱しない範囲で各実施の形態における構成要素及び機能を任意に組み合わせることで実現される形態も本発明に含まれる。
100 認知機能評価装置
110 取得部
120 算出部
130 評価部
140 出力部
150 記憶部
151 参照データ
200、200a、200b 認知機能評価システム
300、300a 集音装置
400 表示装置
F1 第一フォルマント周波数
F2 第二フォルマント周波数
U 被評価者
ΔP1〜ΔP9 音圧差

Claims (8)

  1. 被評価者が指示された文に従って発話した音声を示す文音声データを取得する取得部と、
    前記取得部が取得した前記文音声データから、当該文音声データに基づく特徴量を算出する算出部と、
    前記算出部が算出した前記特徴量と、人が発した音声を示す音声データと当該人の認知機能との関係を示す参照データとを照合することにより、前記被評価者の認知機能を評価する評価部と、
    前記被評価者に発話させる前記文を出力し、且つ、前記評価部が評価した評価結果を出力する出力部と、を備え
    前記文は、母音を含む音節が連続した文字列を含み、
    前記算出部は、母音の第一フォルマント周波数及び第二フォルマント周波数の変化量、当該母音の第一フォルマント周波数及び第二フォルマント周波数の変化にかかる所要時間、及び、前記所要時間に対する前記変化量の比である変化率の少なくとも1つを前記特徴量として算出する
    認知機能評価装置。
  2. 被評価者が指示された文に従って発話した音声を示す文音声データを取得する取得部と、
    前記取得部が取得した前記文音声データから、当該文音声データに基づく特徴量を算出する算出部と、
    前記算出部が算出した前記特徴量と、人が発した音声を示す音声データと当該人の認知機能との関係を示す参照データとを照合することにより、前記被評価者の認知機能を評価する評価部と、
    前記被評価者に発話させる前記文を出力し、且つ、前記評価部が評価した評価結果を出力する出力部と、を備え
    前記文は、母音を含む音節を複数含み、
    前記算出部は、母音の第一フォルマント周波数、当該母音の第二フォルマント周波数、及び、当該母音の第一フォルマント周波数に対する当該母音の第二フォルマント周波数の比の少なくとも1つのばらつきを前記特徴量として算出する
    認知機能評価装置。
  3. 被評価者が指示された文に従って発話した音声を示す文音声データを取得する取得部と、
    前記取得部が取得した前記文音声データから、当該文音声データに基づく特徴量を算出する算出部と、
    前記算出部が算出した前記特徴量と、人が発した音声を示す音声データと当該人の認知機能との関係を示す参照データとを照合することにより、前記被評価者の認知機能を評価する評価部と、
    前記被評価者に発話させる前記文を出力し、且つ、前記評価部が評価した評価結果を出力する出力部と、を備え
    前記文は、互いに異なる母音を含む音節を少なくとも3つ含み、
    前記算出部は、母音の第一フォルマント周波数に対する当該母音の第二フォルマント周波数で形成される座標空間において、前記少なくとも3つの母音のそれぞれから算出される第一フォルマント周波数に対する第二フォルマント周波数の比をプロットすることで形成される多角形の形状及び面積の少なくとも一方を前記特徴量として算出する
    認知機能評価装置。
  4. 被評価者が指示された文に従って発話した音声を示す文音声データを取得する取得部と、
    前記取得部が取得した前記文音声データから、当該文音声データに基づく特徴量を算出する算出部と、
    前記算出部が算出した前記特徴量と、人が発した音声を示す音声データと当該人の認知機能との関係を示す参照データとを照合することにより、前記被評価者の認知機能を評価する評価部と、
    前記被評価者に発話させる前記文を出力し、且つ、前記評価部が評価した評価結果を出力する出力部と、を備え
    前記文は、互いに異なる母音を含む音節を少なくとも2つ連続して含み、
    前記算出部は、母音の第一フォルマント周波数に対する当該母音の第二フォルマント周波数で形成される座標空間において、前記少なくとも2つの母音のそれぞれから算出される第一フォルマント周波数に対する第二フォルマント周波数の比をプロットした場合の位置関係を前記特徴量として算出する
    認知機能評価装置。
  5. 被評価者が指示された文に従って発話した音声を示す文音声データを取得する取得部と、
    前記取得部が取得した前記文音声データから、当該文音声データに基づく特徴量を算出する算出部と、
    前記算出部が算出した前記特徴量と、人が発した音声を示す音声データと当該人の認知機能との関係を示す参照データとを照合することにより、前記被評価者の認知機能を評価する評価部と、
    前記被評価者に発話させる前記文を出力し、且つ、前記評価部が評価した評価結果を出力する出力部と、を備え
    前記文は、子音と当該子音に後続した母音とからなる音節を含み、
    前記算出部は、前記子音と前記母音との音圧差を前記特徴量として算出する
    認知機能評価装置。
  6. 被評価者が指示された文に従って発話した音声を示す文音声データを取得する取得部と、
    前記取得部が取得した前記文音声データから、当該文音声データに基づく特徴量を算出する算出部と、
    前記算出部が算出した前記特徴量と、人が発した音声を示す音声データと当該人の認知機能との関係を示す参照データとを照合することにより、前記被評価者の認知機能を評価する評価部と、
    前記被評価者に発話させる前記文を出力し、且つ、前記評価部が評価した評価結果を出力する出力部と、を備え
    前記出力部は、さらに、前記被評価者に前記文を複数回読み上げさせるための指示を出力し、
    前記算出部は、前記被評価者が複数回発話した前記文のそれぞれの読み上げ時間から算出される当該読み上げ時間の変化量を前記特徴量として算出する
    認知機能評価装置。
  7. さらに、前記参照データを記憶する記憶部を備える
    請求項1〜のいずれか1項に記載の認知機能評価装置。
  8. 請求項1〜のいずれか1項に記載の認知機能評価装置と、
    前記被評価者の音声を検出する集音装置と、
    前記出力部が出力した前記文及び前記評価結果を表示する表示装置と、を備える
    認知機能評価システム。
JP2017213157A 2017-11-02 2017-11-02 認知機能評価装置、及び、認知機能評価システム Active JP6337362B1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2017213157A JP6337362B1 (ja) 2017-11-02 2017-11-02 認知機能評価装置、及び、認知機能評価システム
CN201880070418.6A CN111315302B (zh) 2017-11-02 2018-10-15 认知功能评估装置、认知功能评估系统、认知功能评估方法及程序记录介质
US16/759,573 US11918372B2 (en) 2017-11-02 2018-10-15 Cognitive function evaluation system, method, and storage medium for dementia by analyzing voice of evaluatee for recognition, remembering or jugment capabilities
PCT/JP2018/038346 WO2019087758A1 (ja) 2017-11-02 2018-10-15 認知機能評価装置、認知機能評価システム、認知機能評価方法、及び、プログラム
TW107138112A TWI680453B (zh) 2017-11-02 2018-10-29 認知功能評估裝置、認知功能評估系統、認知功能評估方法及程式

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017213157A JP6337362B1 (ja) 2017-11-02 2017-11-02 認知機能評価装置、及び、認知機能評価システム

Publications (2)

Publication Number Publication Date
JP6337362B1 true JP6337362B1 (ja) 2018-06-06
JP2019083902A JP2019083902A (ja) 2019-06-06

Family

ID=62487535

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017213157A Active JP6337362B1 (ja) 2017-11-02 2017-11-02 認知機能評価装置、及び、認知機能評価システム

Country Status (5)

Country Link
US (1) US11918372B2 (ja)
JP (1) JP6337362B1 (ja)
CN (1) CN111315302B (ja)
TW (1) TWI680453B (ja)
WO (1) WO2019087758A1 (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109859741A (zh) * 2019-01-31 2019-06-07 成都终身成长科技有限公司 语音测评方法、装置、电子设备及存储介质
JP2020000483A (ja) * 2018-06-28 2020-01-09 株式会社アルム 認知症診断装置、および認知症診断システム
WO2020013296A1 (ja) * 2018-07-13 2020-01-16 Pst株式会社 精神・神経系疾患を推定する装置
JPWO2020195164A1 (ja) * 2019-03-26 2020-10-01
JPWO2020195165A1 (ja) * 2019-03-26 2020-10-01
KR102161638B1 (ko) * 2020-04-13 2020-10-06 가천대학교 산학협력단 기계학습 모델을 이용한 음성인식 기술에 기반한 치매정도 판별방법, 시스템, 및 컴퓨터-판독가능매체
JPWO2020208889A1 (ja) * 2019-04-10 2021-12-16 パナソニックIpマネジメント株式会社 認知機能評価装置、認知機能評価システム、認知機能評価方法、及び、プログラム

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200294669A1 (en) * 2019-03-11 2020-09-17 Fujitsu Limited Learning method, estimating method, and storage medium
WO2020255127A1 (en) * 2019-06-19 2020-12-24 M.You Cognitive Technologies Ltd. Systems and methods for detecting cognitive change based on voice and smartphone sensors
WO2021020090A1 (ja) * 2019-08-01 2021-02-04 パナソニックIpマネジメント株式会社 評価システム、評価方法、プログラム、サーバ装置、及び端末装置
JP7479013B2 (ja) * 2019-08-05 2024-05-08 パナソニックIpマネジメント株式会社 認知機能の判定方法、プログラム、認知機能の判定システム
CN111081229B (zh) * 2019-12-23 2022-06-07 科大讯飞股份有限公司 基于语音的评分方法及相关装置
JP2023015420A (ja) * 2020-01-09 2023-02-01 株式会社生命科学インスティテュート 疾患推定プログラムにおける音響特徴量の抽出方法、およびその音響特徴量を用いた疾患推定プログラム並びに装置
US11232570B2 (en) 2020-02-13 2022-01-25 Olympus Corporation System and method for diagnosing severity of gastritis
WO2021220646A1 (ja) * 2020-04-28 2021-11-04 Pst株式会社 情報処理装置、方法、及びプログラム
JP2022066936A (ja) * 2020-10-19 2022-05-02 旭化成ホームズ株式会社 判定装置、自律移動型装置、判定方法及びプログラム
EP4220648A4 (en) * 2021-12-08 2024-07-10 Sevenpointone Inc METHOD AND SERVER FOR DEMENTIA TESTING BASED ON QUESTIONS AND ANSWERS USING AN ARTIFICIAL INTELLIGENCE CALL
CN114343577B (zh) * 2021-12-31 2024-02-13 科大讯飞股份有限公司 认知功能评价方法、终端设备以及计算机可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006122375A (ja) * 2004-10-29 2006-05-18 Toshiba Corp 手術記録装置及び脳機能検査装置
JP2009089800A (ja) * 2007-10-04 2009-04-30 Tottori Univ 痴呆症診断装置及び痴呆症診断プログラム
JP2011255106A (ja) * 2010-06-11 2011-12-22 Nagoya Institute Of Technology 認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラム
US20150112232A1 (en) * 2013-10-20 2015-04-23 Massachusetts Institute Of Technology Using correlation structure of speech dynamics to detect neurological changes
US20170032804A1 (en) * 2014-01-24 2017-02-02 Foundation Of Soongsil University-Industry Cooperation Method for determining alcohol consumption, and recording medium and terminal for carrying out same
US20170053665A1 (en) * 2015-08-19 2017-02-23 Massachusetts Institute Of Technology Assessing disorders through speech and a computation model

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06297888A (ja) 1993-04-20 1994-10-25 Dainippon Printing Co Ltd 偽造防止証書
JP3475886B2 (ja) 1999-12-24 2003-12-10 日本電気株式会社 パターン認識装置及び方法並びに記録媒体
EP1300831B1 (en) 2001-10-05 2005-12-07 Sony Deutschland GmbH Method for detecting emotions involving subspace specialists
JP2004240394A (ja) 2002-12-12 2004-08-26 Sense It Smart Corp 話者音声解析システムおよびこれに用いるサーバ装置、話者音声の解析を利用した健康診断方法、話者音声解析プログラム
JP4792703B2 (ja) * 2004-02-26 2011-10-12 株式会社セガ 音声解析装置、音声解析方法及び音声解析プログラム
AU2004318986B2 (en) 2004-04-28 2011-03-17 Electronic Navigation Research Institute, An Independent Administrative Institution Cerebrum evaluation device
JP4626310B2 (ja) * 2005-01-12 2011-02-09 ヤマハ株式会社 発音評価装置
JP2006230446A (ja) 2005-02-22 2006-09-07 Nippon Shizen Kagaku Kenkyusho:Kk 健康状態推定装置
JP4811993B2 (ja) * 2005-08-23 2011-11-09 株式会社国際電気通信基礎技術研究所 音声処理装置、およびプログラム
US20070134634A1 (en) * 2005-12-13 2007-06-14 Posit Science Corporation Assessment in cognitive training exercises
JP2010060846A (ja) * 2008-09-03 2010-03-18 Panasonic Electric Works Co Ltd 合成音声評価システム及び合成音声評価方法
US20100233662A1 (en) * 2009-03-11 2010-09-16 The Speech Institute, Llc Method for treating autism spectrum disorders
CN102469961B (zh) * 2010-01-28 2015-05-13 松下电器产业株式会社 语音清晰度评价系统和方法
WO2011155196A1 (ja) * 2010-06-11 2011-12-15 パナソニック株式会社 語音聴取の評価システム、その方法およびそのプログラム
US9262941B2 (en) * 2010-07-14 2016-02-16 Educational Testing Services Systems and methods for assessment of non-native speech using vowel space characteristics
JP4662509B1 (ja) * 2010-11-17 2011-03-30 日本テクト株式会社 認知機能予測システム
EP3780002B1 (en) * 2010-11-24 2024-07-17 Clinical Ink, Inc. Systems and methods to assess cognitive function
JP5144835B2 (ja) * 2010-11-24 2013-02-13 パナソニック株式会社 うるささ判定システム、装置、方法およびプログラム
US9131889B2 (en) 2011-05-31 2015-09-15 Nagoya Institute Of Technology Cognitive impairment determination apparatus, cognitive impairment determination system and program
JP6128651B2 (ja) * 2012-01-26 2017-05-17 国立研究開発法人国立精神・神経医療研究センター 認知機能検査システム、認知機能推定システム及び認知機能検査方法
US9078598B2 (en) * 2012-04-19 2015-07-14 Barry J. French Cognitive function evaluation and rehabilitation methods and systems
JP6206791B2 (ja) * 2012-08-31 2017-10-04 パナソニックIpマネジメント株式会社 集中度計測装置、プログラム
US10470679B2 (en) * 2012-12-10 2019-11-12 The Cleveland Clinic Foundation Performance test for evaluation of neurological function
CN103519785B (zh) * 2013-09-24 2016-01-27 上海泰亿格康复服务有限公司 基于实时语音多维建模的语音障碍多维测量系统及其方法
AU2014342353A1 (en) * 2013-10-31 2016-05-05 Charisse Si-Fei HARUTA Computing technologies for diagnosis and therapy of language-related disorders
WO2015111331A1 (ja) * 2014-01-23 2015-07-30 独立行政法人産業技術総合研究所 認知機能評価装置、方法、システム及びプログラム
EP3160347B1 (en) * 2014-06-30 2021-03-03 Cerora, Inc. System and methods for the synchronization of a non-real time operating system pc to a remote real-time data collecting microcontroller
JP6731631B2 (ja) * 2016-02-26 2020-07-29 パナソニックIpマネジメント株式会社 認知機能評価装置、プログラム
CN106355010A (zh) * 2016-08-30 2017-01-25 深圳市臻络科技有限公司 一种自助认知评估的装置和方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006122375A (ja) * 2004-10-29 2006-05-18 Toshiba Corp 手術記録装置及び脳機能検査装置
JP2009089800A (ja) * 2007-10-04 2009-04-30 Tottori Univ 痴呆症診断装置及び痴呆症診断プログラム
JP2011255106A (ja) * 2010-06-11 2011-12-22 Nagoya Institute Of Technology 認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラム
US20150112232A1 (en) * 2013-10-20 2015-04-23 Massachusetts Institute Of Technology Using correlation structure of speech dynamics to detect neurological changes
US20170032804A1 (en) * 2014-01-24 2017-02-02 Foundation Of Soongsil University-Industry Cooperation Method for determining alcohol consumption, and recording medium and terminal for carrying out same
US20170053665A1 (en) * 2015-08-19 2017-02-23 Massachusetts Institute Of Technology Assessing disorders through speech and a computation model

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020000483A (ja) * 2018-06-28 2020-01-09 株式会社アルム 認知症診断装置、および認知症診断システム
JPWO2020013296A1 (ja) * 2018-07-13 2021-08-05 Pst株式会社 精神・神経系疾患を推定する装置
WO2020013296A1 (ja) * 2018-07-13 2020-01-16 Pst株式会社 精神・神経系疾患を推定する装置
US12029579B2 (en) 2018-07-13 2024-07-09 Pst Inc. Apparatus for estimating mental/neurological disease
JP7389421B2 (ja) 2018-07-13 2023-11-30 Pst株式会社 精神・神経系疾患を推定する装置
CN109859741A (zh) * 2019-01-31 2019-06-07 成都终身成长科技有限公司 语音测评方法、装置、电子设备及存储介质
JPWO2020195164A1 (ja) * 2019-03-26 2020-10-01
JP7241322B2 (ja) 2019-03-26 2023-03-17 パナソニックIpマネジメント株式会社 認知機能検査システム、及びプログラム
JP7241321B2 (ja) 2019-03-26 2023-03-17 パナソニックIpマネジメント株式会社 認知機能検査方法、プログラム、及び認知機能検査システム
JPWO2020195165A1 (ja) * 2019-03-26 2020-10-01
JPWO2020208889A1 (ja) * 2019-04-10 2021-12-16 パナソニックIpマネジメント株式会社 認知機能評価装置、認知機能評価システム、認知機能評価方法、及び、プログラム
JP7296595B2 (ja) 2019-04-10 2023-06-23 パナソニックIpマネジメント株式会社 認知機能評価装置、認知機能評価システム、認知機能評価方法、及び、プログラム
KR102161638B1 (ko) * 2020-04-13 2020-10-06 가천대학교 산학협력단 기계학습 모델을 이용한 음성인식 기술에 기반한 치매정도 판별방법, 시스템, 및 컴퓨터-판독가능매체

Also Published As

Publication number Publication date
TWI680453B (zh) 2019-12-21
US11918372B2 (en) 2024-03-05
US20210177340A1 (en) 2021-06-17
CN111315302A (zh) 2020-06-19
WO2019087758A1 (ja) 2019-05-09
TW201923734A (zh) 2019-06-16
JP2019083902A (ja) 2019-06-06
CN111315302B (zh) 2023-04-25

Similar Documents

Publication Publication Date Title
JP6337362B1 (ja) 認知機能評価装置、及び、認知機能評価システム
JP6268628B1 (ja) 認知機能評価装置、認知機能評価システム、認知機能評価方法及びプログラム
Munson et al. The effect of phonological neighborhood density on vowel articulation
Goy et al. Normative voice data for younger and older adults
JP6312014B1 (ja) 認知機能評価装置、認知機能評価システム、認知機能評価方法及びプログラム
Lien et al. Effects of phonetic context on relative fundamental frequency
Fletcher et al. Assessing vowel centralization in dysarthria: A comparison of methods
KR101182069B1 (ko) 발화문장의 운율분석을 통한 특발성 파킨슨병 진단장치 및 진단방법
Lien et al. Voice relative fundamental frequency via neck-skin acceleration in individuals with voice disorders
JP7022921B2 (ja) 認知機能評価装置、認知機能評価システム、認知機能評価方法及びプログラム
JP2021110895A (ja) 難聴判定装置、難聴判定システム、コンピュータプログラム及び認知機能レベル補正方法
KR102399118B1 (ko) 파킨슨병을 진단하는 애플리케이션이 설치되는 스마트단말
İncebay et al. Investigation of the cepstral spectral acoustic analysis for classifying the severity of dysphonia
JP7307507B2 (ja) 病態解析システム、病態解析装置、病態解析方法、及び病態解析プログラム
JP6639857B2 (ja) 聴力検査装置、聴力検査方法および聴力検査プログラム
JP7296595B2 (ja) 認知機能評価装置、認知機能評価システム、認知機能評価方法、及び、プログラム
Haderlein et al. Language-independent automatic evaluation of intelligibility of chronically hoarse persons
Vaňková Spectral properties of the source signal as speaker-specific cues

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171122

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20171122

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20171213

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171219

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180208

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180320

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180417

R151 Written notification of patent or utility model registration

Ref document number: 6337362

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151