CN110288986A - 在线认知自评语音系统及其处理方法 - Google Patents

在线认知自评语音系统及其处理方法 Download PDF

Info

Publication number
CN110288986A
CN110288986A CN201910600959.1A CN201910600959A CN110288986A CN 110288986 A CN110288986 A CN 110288986A CN 201910600959 A CN201910600959 A CN 201910600959A CN 110288986 A CN110288986 A CN 110288986A
Authority
CN
China
Prior art keywords
picture
voice
cognition
screening module
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910600959.1A
Other languages
English (en)
Inventor
李霞
周文举
钱时兴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Mental Health Center (shanghai Psychological Counseling And Training Center)
University of Shanghai for Science and Technology
Original Assignee
Shanghai Mental Health Center (shanghai Psychological Counseling And Training Center)
University of Shanghai for Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Mental Health Center (shanghai Psychological Counseling And Training Center), University of Shanghai for Science and Technology filed Critical Shanghai Mental Health Center (shanghai Psychological Counseling And Training Center)
Priority to CN201910600959.1A priority Critical patent/CN110288986A/zh
Publication of CN110288986A publication Critical patent/CN110288986A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/40—Detecting, measuring or recording for evaluating the nervous system
    • A61B5/4076—Diagnosing or monitoring particular conditions of the nervous system
    • A61B5/4088—Diagnosing of monitoring cognitive diseases, e.g. Alzheimer, prion diseases or dementia
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G10L15/1822—Parsing for meaning understanding
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/70—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Neurology (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Psychology (AREA)
  • Hospice & Palliative Care (AREA)
  • Multimedia (AREA)
  • Developmental Disabilities (AREA)
  • Psychiatry (AREA)
  • General Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Human Computer Interaction (AREA)
  • Child & Adolescent Psychology (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Physiology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Social Psychology (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Artificial Intelligence (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Neurosurgery (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

本发明涉及一种在线认知自评语音系统，包括语音记忆筛查模块，用于根据语音和图片进行记忆筛查；图片认知筛查模块，与的语音记忆筛查模块相连接，用于为用户提供图片选择功能；综合评估模块，与的语音记忆筛查模块和图片认知筛查模块相连接，用于对用户的语音识别结果和图片选择结果进行分析。本发明还涉及一种实现在线认知自评语音处理的方法。采用了本发明的在线认知自评语音系统及其处理方法，本系统能有效节省被试者的就诊的时间，为因为各种原因无法到医疗结构就诊的人提供便利。有效降低医疗负担，照料者负担和社会经济成本。克服了文盲，低教育水平的限制，采用图片和语音的功能，应用人群得以拓宽。

Description

在线认知自评语音系统及其处理方法
技术领域
本发明涉及家庭健康保健领域，尤其涉及神经认知障碍患者的远程筛查和评估领域，具体是指一种在线认知自评语音系统及其处理方法。
背景技术
神经认知障碍包括轻度认知功能损害(MCI)和重度神经认知障碍(痴呆)。在老年人群中MCI的患病率为14.71％，痴呆为5.3％。在发达国家该病的诊断率只有20％-50％，低收入和发展中国家更低，在印度有90％的患者为被诊断3该疾病的早期识别并进行有效干预能够阻止部分MCI患者进展为痴呆，亦能够延长痴呆患者寿命，提高患者的生存质量，降低经济负担4。因此早期的筛查至关重要，当前国内使用的筛选和评估神经认知障碍的量表主要为简明精神状态量表(MMSE)和蒙特利尔认知测验(MoCA)等，这些量表需要由经过培训的专业评估员进行现场评估，由于量表本身的结构特点无法实现电子化远程评估，因而无法广泛推广。
发明内容
本发明的目的是克服了上述现有技术的缺点，提供了一种满足传播速度快、操作简便、适用范围较为广泛的在线认知自评语音系统及其处理方法。
为了实现上述目的，本发明的在线认知自评语音系统及其处理方法如下：
该在线认知自评语音系统，其主要特点是，所述的系统包括：
语音记忆筛查模块，用于根据语音和图片进行记忆筛查；
图片认知筛查模块，与所述的语音记忆筛查模块相连接，用于为用户提供图片选择功能；
综合评估模块，与所述的语音记忆筛查模块和图片认知筛查模块相连接，用于对用户的语音识别结果和图片选择结果进行分析。
较佳地，所述的语音记忆筛查模块包括：
语音播报单元，与所述的图片认知筛查模块和综合评估模块相连接，用于播报预设问题和题目功能；
语音采集单元，与所述的图片认知筛查模块和综合评估模块相连接，用于采集用户所说的语音文件；
语音识别单元，与所述的图片认知筛查模块和综合评估模块相连接，用于识别用户的答案；
语义分析单元，与所述的图片认知筛查模块和综合评估模块相连接，用于判断用户所说的正误。
该基于上述系统实现在线认知自评语音处理的方法，其主要特点是，所述的方法包括以下步骤：
(1)所述的语音记忆筛查模块根据语音和图片进行记忆筛查；
(2)所述的图片认知筛查模块为用户提供图片选择功能；
(3)所述的综合评估模块对用户的语音识别结果和图片选择结果进行分析。
较佳地，所述的步骤(1)具体包括以下步骤：
(1.1)所述的语音播报单元自动播报预设好的问题，并与用户进行交互；
(1.2)所述的语音采集单元采集用户所说内容，并传输至语音识别单元；
(1.3)所述的语音识别单元接收语音信号，将其转化为中文文本文件，传输至语义分析单元；
(1.4)所述的语义分析单元分析语音识别系统中的文本文件与标准答案的匹配度，根据不同匹配度给出不同分数。
采用了本发明的在线认知自评语音系统及其处理方法，本系统能有效节省被试者的就诊的时间，为因为各种原因无法到医疗结构就诊的人提供便利；依托新媒体渠道和其它媒体的进行推广，使得广泛人群的到初步筛查，新媒体渠道为神经认知障碍筛查、就诊，诊断，预防，干预，治疗和预后判断进行全方位的指导。有效降低医疗负担，照料者负担和社会经济成本。克服了文盲，低教育水平的限制，采用图片和语音的功能，应用人群得以拓宽。
附图说明
图1为本发明的在线认知自评语音系统的结构图。
图2为本发明的实现在线认知自评语音处理的方法的实施例的流程图。
具体实施方式
为了能够更清楚地描述本发明的技术内容，下面结合具体实施例来进行进一步的描述。
本发明的该在线认知自评语音系统，其中包括：
语音记忆筛查模块，用于根据语音和图片进行记忆筛查；
图片认知筛查模块，与所述的语音记忆筛查模块相连接，用于为用户提供图片选择功能；
综合评估模块，与所述的语音记忆筛查模块和图片认知筛查模块相连接，用于对用户的语音识别结果和图片选择结果进行分析。
作为本发明的优选实施方式，所述的语音记忆筛查模块包括：
语音播报单元，与所述的图片认知筛查模块和综合评估模块相连接，用于播报预设问题和题目功能；
语音采集单元，与所述的图片认知筛查模块和综合评估模块相连接，用于采集用户所说的语音文件；
语音识别单元，与所述的图片认知筛查模块和综合评估模块相连接，用于识别用户的答案；
语义分析单元，与所述的图片认知筛查模块和综合评估模块相连接，用于判断用户所说的正误。
本发明的该利用上述系统实现在线认知自评语音处理的方法，其中包括以下步骤：
(1)所述的语音记忆筛查模块根据语音和图片进行记忆筛查；
(1.1)所述的语音播报单元自动播报预设好的问题，并与用户进行交互；
(1.2)所述的语音采集单元采集用户所说内容，并传输至语音识别单元；
(1.3)所述的语音识别单元接收语音信号，将其转化为中文文本文件，传输至语义分析单元；
(1.4)所述的语义分析单元分析语音识别系统中的文本文件与标准答案的匹配度，根据不同匹配度给出不同分数；
(2)所述的图片认知筛查模块为用户提供图片选择功能；
(3)所述的综合评估模块对用户的语音识别结果和图片选择结果进行分析。
本发明的具体实施方式中，MMSE和MoCA要求评估员、受试者同时在场进行面对面的评估，必须具备场地、纸质的量表和测试的他工具，受试者需要寻找专业的医疗机构等缺点。这些基于传统的测试手段费时、费力，大大降低了神经认知障碍被筛选和诊断的比率，从而减少了被有效干预的人群。拟申请专利结合神经认知障碍人群的认知损害特点(即刻记忆、短时记忆，警觉性，语言功能，注意力受损)设计微信小程序。微信小程序具有适用范围广，传播速度快，操作简便的特点。运用图片记忆，语音记忆，语音交互及评分系统进行专业测评能够使最广泛老年人群收益，同时缩短纸质版本的时空间限制。
基于微信小程序的认知自评工具，包括认知自评系统，认知自评系统包括五组系统，五组系统设置为语音播报系统、语音采集系统、语音识别系统、语义分析系统、图片选择系统、综合评估系统。
语音播报系统用于播报预设问题和题目功能，语音采集系统用于采集用户所说的语音文件，语音识别系统用于识别用户的答案，语义分析系统用于判断用户所说的正误，图片选择系统用于供用户选择图片，综合评估系统对用户的语音识别结果和图片选择结果做一个最终分析。
语音播报系统自动播报预设好的问题和与用户交互等功能。
语音采集系统用于鉴别用户能否具有正常的记忆和语音描述功能，用户按下录音键开始立即采集语音并实施将语音信号传递给微信小程序的语音识别系统。
语音识别系统接收到语音采集系统传递过来的语音信号将其转化为中文文本文件输送至语义分析系统。
语义分析系统用于分析语音识别系统中的文本文件与标准答案的匹配度，根据不同匹配度给出不同分数。
图片选择系统用于判断用户对不同表情图片的认知功能，并将其选其选择的结果传至综合评估系统。
综合评估系统用于对用户的即刻记忆、短时记忆、警觉性、语言功能、注意力受损等功能的综合判断。
本发明的通过在线认知自评语音系统进行自我认知评价的步骤的具体实施例如下：
1、展示图片，并进行语音表述：
(1)根据听到的语音描述图片；
(2)按下录音键，重复刚才的语音内容；
2、通过语音指出符合描述的图片；
3、通过语音选择最喜欢的图片；
4、通过语音倒序复述听到的数字；
5、通过语音描述最初出现的图片和故事。
6、附加题：对图片的细节进行提问。
采用了本发明的在线认知自评语音系统及其处理方法，本系统能有效节省被试者的就诊的时间，为因为各种原因无法到医疗结构就诊的人提供便利；依托新媒体渠道和其它媒体的进行推广，使得广泛人群的到初步筛查，新媒体渠道为神经认知障碍筛查、就诊，诊断，预防，干预，治疗和预后判断进行全方位的指导。有效降低医疗负担，照料者负担和社会经济成本。克服了文盲，低教育水平的限制，采用图片和语音的功能，应用人群得以拓宽。
在此说明书中，本发明已参照其特定的实施例作了描述。但是，很显然仍可以作出各种修改和变换而不背离本发明的精神和范围。因此，说明书和附图应被认为是说明性的而非限制性的。

Claims (4)

1.一种在线认知自评语音系统，其特征在于，的系统包括：
语音记忆筛查模块，用于根据语音和图片进行记忆筛查；
图片认知筛查模块，与所述的语音记忆筛查模块相连接，用于为用户提供图片选择功能；
综合评估模块，与所述的语音记忆筛查模块和图片认知筛查模块相连接，用于对用户的语音识别结果和图片选择结果进行分析。
2.根据权利要求1所述的在线认知自评语音系统，其特征在于，所述的语音记忆筛查模块包括：
语音播报单元，与所述的图片认知筛查模块和综合评估模块相连接，用于播报预设问题和题目功能；
语音采集单元，与所述的图片认知筛查模块和综合评估模块相连接，用于采集用户所说的语音文件；
语音识别单元，与所述的图片认知筛查模块和综合评估模块相连接，用于识别用户的答案；
语义分析单元，与所述的图片认知筛查模块和综合评估模块相连接，用于判断用户所说的正误。
3.一种基于权利要求1所述的系统实现在线认知自评语音处理的方法，其特征在于，所述的方法包括以下步骤：
(1)所述的语音记忆筛查模块根据语音和图片进行记忆筛查；
(2)所述的图片认知筛查模块为用户提供图片选择功能；
(3)所述的综合评估模块对用户的语音识别结果和图片选择结果进行分析。
4.根据权利要求3所述的实现在线认知自评语音处理的方法，其特征在于，所述的步骤(1)具体包括以下步骤：
(1.1)所述的语音播报单元自动播报预设好的问题，并与用户进行交互；
(1.2)所述的语音采集单元采集用户所说内容，并传输至语音识别单元；
(1.3)所述的语音识别单元接收语音信号，将其转化为中文文本文件，传输至语义分析单元；
(1.4)所述的语义分析单元分析语音识别系统中的文本文件与标准答案的匹配度，根据不同匹配度给出不同分数。
CN201910600959.1A 2019-07-04 2019-07-04 在线认知自评语音系统及其处理方法 Pending CN110288986A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910600959.1A CN110288986A (zh) 2019-07-04 2019-07-04 在线认知自评语音系统及其处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910600959.1A CN110288986A (zh) 2019-07-04 2019-07-04 在线认知自评语音系统及其处理方法

Publications (1)

Publication Number Publication Date
CN110288986A true CN110288986A (zh) 2019-09-27

Family

ID=68021892

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910600959.1A Pending CN110288986A (zh) 2019-07-04 2019-07-04 在线认知自评语音系统及其处理方法

Country Status (1)

Country Link
CN (1) CN110288986A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113827191A (zh) * 2021-09-29 2021-12-24 上海市精神卫生中心（上海市心理咨询培训中心） 利用分层递进方式实现老年人认知障碍快速筛查的方法、装置、处理器及其计算机存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101983613A (zh) * 2010-10-15 2011-03-09 浙江大学 计算机辅助筛查老年轻度认知损害的装置
CN103886200A (zh) * 2014-03-19 2014-06-25 郁可 一种蒙特利尔认知评估系统
CN105808970A (zh) * 2016-05-09 2016-07-27 南京智精灵教育科技有限公司 一种在线认知评估系统及评估方法
CN105963101A (zh) * 2016-04-21 2016-09-28 华北理工大学 认知康复训练装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101983613A (zh) * 2010-10-15 2011-03-09 浙江大学 计算机辅助筛查老年轻度认知损害的装置
CN103886200A (zh) * 2014-03-19 2014-06-25 郁可 一种蒙特利尔认知评估系统
CN105963101A (zh) * 2016-04-21 2016-09-28 华北理工大学 认知康复训练装置
CN105808970A (zh) * 2016-05-09 2016-07-27 南京智精灵教育科技有限公司 一种在线认知评估系统及评估方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113827191A (zh) * 2021-09-29 2021-12-24 上海市精神卫生中心（上海市心理咨询培训中心） 利用分层递进方式实现老年人认知障碍快速筛查的方法、装置、处理器及其计算机存储介质
CN113827191B (zh) * 2021-09-29 2024-01-23 上海市精神卫生中心（上海市心理咨询培训中心） 利用分层递进方式实现老年人认知障碍快速筛查的方法、装置、处理器及其计算机存储介质

Similar Documents

Publication Publication Date Title
Harry et al. Is the Boston Naming Test still fit for purpose?
Hepworth et al. Pathways to help‐seeking in bulimia nervosa and binge eating problems: A concept mapping approach
CN109637674B (zh) 自动获取健康医疗问题答案的方法、系统、介质和设备
JP5604033B2 (ja) 状況のフィードバックを使用する学習システム及び方法
Matson et al. Nosology and diagnosis of Asperger's syndrome
Ferguson et al. Communication, listening, cognitive and speech perception skills in children with auditory processing disorder (APD) or specific language impairment (SLI)
Drimalla et al. Towards the automatic detection of social biomarkers in autism spectrum disorder: Introducing the simulated interaction task (SIT)
Jones et al. Beyond the sensory: findings from an in-depth analysis of the phenomenology of “auditory hallucinations” in schizophrenia
CN107427250B (zh) 通过脑活动的解析推测感知语义内容的推测方法
KR102301143B1 (ko) 맞춤형 인지 기능 검사 및 재활 훈련 평가 방법
Smith et al. Memory processing in Alzheimer's disease
Ringeval et al. Automatic analysis of typical and atypical encoding of spontaneous emotion in the voice of children
KR101421217B1 (ko) 아동심리와 부모스트레스의 연관관계를 이용한 아동정서 관리방법
Bendayan et al. Decline in memory, visuospatial ability, and crystalized cognitive abilities in older adults: normative aging or terminal decline?
Borrie et al. Rhythm perception and its role in perception and learning of dysrhythmic speech
Barokova et al. Person‐reference in autism spectrum disorder: Developmental trends and the role of linguistic input
CN112164459A (zh) 一种抑郁症状的信息评估方法
Guo et al. Are young children with cochlear implants sensitive to the statistics of words in the ambient spoken language?
Ivanova et al. The Russian Aphasia Test: The first comprehensive, quantitative, standardized, and computerized aphasia language battery in Russian
Liu et al. A novel decision tree for depression recognition in speech
Pohl et al. Older adults with and without stroke reduce cadence to meet the demands of talking
Arjmandi et al. Variability in quantity and quality of early linguistic experience in children with cochlear implants: Evidence from analysis of natural auditory environments
Stark et al. Test–retest reliability of microlinguistic information derived from spoken discourse in persons with chronic aphasia
CN110288986A (zh) 在线认知自评语音系统及其处理方法
Chalard et al. Age-of-acquisition effects in picture naming: Are they structural and/or semantic in nature?

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination