KR20230063204A - Dementia diagnosis aid system using cognitive fuction test and method thereof - Google Patents

Dementia diagnosis aid system using cognitive fuction test and method thereof Download PDF

Info

Publication number
KR20230063204A
KR20230063204A KR1020210148209A KR20210148209A KR20230063204A KR 20230063204 A KR20230063204 A KR 20230063204A KR 1020210148209 A KR1020210148209 A KR 1020210148209A KR 20210148209 A KR20210148209 A KR 20210148209A KR 20230063204 A KR20230063204 A KR 20230063204A
Authority
KR
South Korea
Prior art keywords
cognitive function
server
examinee
function test
module
Prior art date
Application number
KR1020210148209A
Other languages
Korean (ko)
Other versions
KR102577906B1 (en
Inventor
성재용
전광석
최종문
이규호
Original Assignee
주식회사 오픈링크시스템
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 오픈링크시스템 filed Critical 주식회사 오픈링크시스템
Priority to KR1020210148209A priority Critical patent/KR102577906B1/en
Publication of KR20230063204A publication Critical patent/KR20230063204A/en
Application granted granted Critical
Publication of KR102577906B1 publication Critical patent/KR102577906B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/40Detecting, measuring or recording for evaluating the nervous system
    • A61B5/4076Diagnosing or monitoring particular conditions of the nervous system
    • A61B5/4088Diagnosing of monitoring cognitive diseases, e.g. Alzheimer, prion diseases or dementia
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475User input or interface means, e.g. keyboard, pointing device, joystick
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/66Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for extracting parameters related to health condition
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/20ICT specially adapted for the handling or processing of patient-related medical or healthcare data for electronic clinical trials or questionnaires
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/70ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders

Abstract

본 발명의 일실시예에 따른 인지기능검사를 이용한 치매진단보조 시스템은, 수검자의 인지기능검사를 위한 도구 키트와, 인지기능검사의 진단결과를 출력하는 디스플레이부 및 상기 도구 키트 및 상기 디스플레이부와 네트워크로 연결되는 서버를 포함하고, 상기 도구 키트는, 상기 서버로부터 전달된 인지기능검사용 질문을 음성으로 출력하는 스피커와, 상기 수검자의 음성을 수신하여 상기 서버로 전달하는 마이크와, 상기 수검자의 평가응답을 입력 받아 상기 서버로 전달하는 터치입력부와, 인지기능검사 수행을 위한 도형 키트 및 상기 수검자의 인지기능검사 수행화면을 촬영하는 촬영부를 포함하여 구성되고, 상기 서버는, 상기 촬영부에서 촬영된 이미지를 기반으로 상기 도형 키트가 형성하는 도형의 모양을 인식하는 도형인식 AI모듈과, 상기 도구 키트에 인지기능검사를 위한 데이터를 전송하고, 상기 도구 키트로부터 수신된 정보를 기초로 인지기능검사를 수행하고, 상기 디스플레이부에 진단결과를 출력하는 인지기능검사 모듈을 포함한다.An assistive system for diagnosing dementia using a cognitive function test according to an embodiment of the present invention includes a tool kit for a cognitive function test of an examinee, a display unit for outputting a diagnostic result of the cognitive function test, and the tool kit and the display unit It includes a server connected to a network, and the tool kit includes: a speaker that outputs a cognitive function test question transmitted from the server as a voice, a microphone that receives and transmits the examinee's voice to the server, and It is configured to include a touch input unit that receives an evaluation response and transmits it to the server, a figure kit for performing a cognitive function test, and a photographing unit that photographs a screen of the examinee performing the cognitive function test, wherein the server is photographed by the photographing unit. A figure recognition AI module for recognizing the shape of a figure formed by the figure kit based on the generated image, transmitting data for cognitive function test to the tool kit, and cognitive function test based on the information received from the tool kit and a cognitive function test module for outputting a diagnosis result to the display unit.

Description

인지기능검사를 이용한 치매진단보조 시스템 및 그 방법{DEMENTIA DIAGNOSIS AID SYSTEM USING COGNITIVE FUCTION TEST AND METHOD THEREOF}Dementia diagnosis assistance system and method using cognitive function test

본 발명은 치매진단보조 시스템 및 그 방법에 관한 것으로, 보다 상세하게는 ICT 기반의 인지기능검사를 이용한 치매진단보조 시스템 및 그 방법에 관한 것이다.The present invention relates to an assistive system for diagnosing dementia and its method, and more particularly, to an assistive system and method for diagnosing dementia using an ICT-based cognitive function test.

중앙치매센터에서 발표한 '대한민국 치매 현황' 통계에 따르면 65세 이상 치매 환자는 2015년 기준 64만 8223명(유병률 9.8%)으로 집계되고 있고 2024년에는 100만명(유병률 10.3%), 2041년에는 200만명(유병률 12.3%)을 넘을 것으로 추정되고 있다.According to the statistics of 'Dementia in Korea' announced by the Central Dementia Center, the number of dementia patients aged 65 years or older is 648,223 (prevalence 9.8%) as of 2015, 1 million in 2024 (prevalence 10.3%), and in 2041 It is estimated to exceed 2 million people (prevalence rate 12.3%).

통계청 조사자료에 따르면 현재 국내 65세 이상 논인 인구의 20~30% 이상의 문맹자를 지원하는 검사도구가 제한적이며, 문맹 노인들을 대상으로 수검하기가 어렵고, 위양성, 위음성 같은 오진 사례가 나타나고 있는 실정이다. 따라서, 문맹인 치매 환자들에게는 기존의 치매 검사 도구로는 병의 진행 경과와 약물의 효과 등을 추적하기는 매우 어렵다.According to the survey data of the National Statistical Office, there are currently limited test tools that support illiterate people aged 65 or older and more than 20-30% of the Nonin population in Korea. Therefore, it is very difficult for illiterate dementia patients to track the progress of the disease and the effects of drugs using conventional dementia screening tools.

또한, 기존의 치매 검사도구는 최소 30분 이상의 장시간의 검사시간이 소요되고, 치매 전문의사 또는 전문교육을 이수한 신경심리사, 임상심리사 등의 전문의료인의 수가 부족하고, 별도의 검사장소가 충분하지 않는 등 치매를 진료할 수 있는 병원이 부족한 상황이다.In addition, the existing dementia test tools take a long test time of at least 30 minutes or more, and the number of specialized medical personnel such as dementia specialists or neuropsychologists and clinical psychologists who have completed specialized training is insufficient, and there are not enough separate test sites. There is a shortage of hospitals that can treat dementia.

치매 치료에서 중요한 것은 조기발견과 예방이며, 약물치료는 빠르면 빠를수록 치매의 진행을 늦출 수 있기 때문에 조기 발견하여 약물치료를 시행하는 것이 유병률을 감소 및 지연시키는 적극적 대응으로 치매 관리비용을 절감시키는 것이 매우 필요하다.Early detection and prevention are important in dementia treatment, and drug treatment can slow the progression of dementia the sooner it is done. very necessary

종래기술인 한국공개특허 제10-1848630호(이하 '630특허'로 약칭한다)는 전통카드 게임을 기반으로 인지장애를 진단 및 관리하는 시스템에 관한 것으로서, 고령자 등의 치매 위험군을 대상으로 일상생활에서 재미있는 게임을 기반으로 인지능력 강화 교육을 진행하고, 콘텐츠 서비스의 주요 구성인 치매예방 전통가드 게임에의 참여 과정을 분석하여 인공지능의 진단 알고리즘을 통해 인지장애를 판단하는 구성을 개시하고 있다.Korean Patent Publication No. 10-1848630 (hereinafter referred to as '630 Patent'), which is a prior art, relates to a system for diagnosing and managing cognitive impairment based on a traditional card game, targeting dementia risk groups such as the elderly in daily life. Based on fun games, cognitive ability reinforcement education is conducted, and the process of participating in the dementia prevention traditional guard game, which is the main component of the content service, is analyzed, and cognitive disability is judged through an artificial intelligence diagnosis algorithm.

하지만 상기 630특허는 카드게임이라는 특정 게임을 진행하여야 한다는 점에서 카드게임에 능숙한 사람과 능숙하지 않은 사람에 대하여 진단 알고리즘의 신뢰성이 떨어진다는 문제가 있고 인지장애 수준에 따라서 게임 진행을 진행할 수 있는 임계점이 다소 높을 수 있다는 점에서 인지장애 전 영역에 대한 정밀한 검사를 하기에는 한계가 있었다.However, the 630 patent has a problem that the reliability of the diagnosis algorithm is low for those who are proficient in card games and those who are not proficient in card games in that a specific game called a card game must be played. There was a limit to a precise examination of all areas of cognitive impairment in that this could be rather high.

한국공개특허 제10-1848630호(2018.04.09)Korean Patent Publication No. 10-1848630 (2018.04.09)

본 발명은 위와 같은 문제를 해결하기 위한 것으로, 상세하게는 ICT 기반으로 인지기능검사를 이용한 치매진단을 효율적으로 수행할 수 있도록 하는 인지기능검사를 이용한 치매진단보조 시스템 및 그 방법을 제공하는 것을 목적으로 한다.The present invention is to solve the above problems, and in detail, to provide a dementia diagnosis assistance system and method using a cognitive function test that enables efficient diagnosis of dementia using an ICT-based cognitive function test. to be

본 발명의 과제들은 이상에서 언급한 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The tasks of the present invention are not limited to the tasks mentioned above, and other tasks not mentioned will be clearly understood by those skilled in the art from the following description.

상기 과제를 해결하기 위한 본 발명의 일실시예에 따른 인지기능검사를 이용한 치매진단보조 시스템은, 수검자의 인지기능검사를 위한 도구 키트; 인지기능검사의 진단결과를 출력하는 디스플레이부; 및 상기 도구 키트 및 상기 디스플레이부와 네트워크로 연결되는 서버를 포함하고, 상기 도구 키트는, 상기 서버로부터 전달된 인지기능검사용 질문을 음성으로 출력하는 스피커와, 상기 수검자의 음성을 수신하여 상기 서버로 전달하는 마이크와, 상기 수검자의 평가응답을 입력 받아 상기 서버로 전달하는 터치입력부와, 인지기능검사 수행을 위한 도형 키트 및 상기 수검자의 인지기능검사 수행화면을 촬영하는 촬영부를 포함하여 구성되고, 상기 서버는, 상기 촬영부에서 촬영된 이미지를 기반으로 상기 도형 키트가 형성하는 도형의 모양을 인식하는 도형인식 AI모듈과, 상기 도구 키트에 인지기능검사를 위한 데이터를 전송하고, 상기 도구 키트로부터 수신된 정보를 기초로 인지기능검사를 수행하고, 상기 디스플레이부에 진단결과를 출력하는 인지기능검사 모듈을 포함한다.An assistive system for diagnosing dementia using a cognitive function test according to an embodiment of the present invention for solving the above problems includes a tool kit for a cognitive function test of an examinee; a display unit outputting a diagnosis result of a cognitive function test; and a server connected to the tool kit and the display unit through a network, wherein the tool kit includes a speaker that outputs a cognitive function test question delivered from the server as a voice, and a server that receives the examinee's voice and It is configured to include a microphone for transmitting, a touch input unit for receiving and transmitting the evaluation response of the examinee to the server, a figure kit for performing a cognitive function test, and a photographing unit for capturing a screen of the cognitive function test of the examinee, The server transmits a figure recognition AI module for recognizing the shape of a figure formed by the figure kit based on an image captured by the photographing unit, and data for a cognitive function test to the tool kit, and from the tool kit and a cognitive function test module for performing a cognitive function test based on the received information and outputting a diagnosis result to the display unit.

일실시예에서 상기 서버는, 상기 마이크로부터 입력된 상기 수검자의 음성을 인식하여 텍스트 신호로 변환하는 음성인식 AI모듈을 더 포함할 수 있다.In one embodiment, the server may further include a voice recognition AI module that recognizes the examinee's voice input from the microphone and converts it into a text signal.

일실시예에서 상기 음성인식 AI모듈은 상기 수검자의 음성 및 상기 변환된 텍스트 신호를 분석하여 상기 수검자의 발음 및 언어의 시점 별 유사도를 분석할 수 있다.In one embodiment, the voice recognition AI module may analyze the examinee's voice and the converted text signal to analyze the similarity of the examinee's pronunciation and language at each viewpoint.

일실시예에서 상기 도구 키트는, 통신부, 발광부 및 버튼부를 포함하여 구성되는 복수의 블록 키트를 더 포함하고, 상기 블록 키트는 상기 통신부를 통하여 상기 서버와 통신하고, 상기 서버의 제어 신호 또는 상기 수검자의 상기 버튼부의 누름 동작에 따라 상기 발광부가 발광하도록 구성될 수 있다.In one embodiment, the tool kit further includes a plurality of block kits including a communication unit, a light emitting unit, and a button unit, and the block kit communicates with the server through the communication unit, and the control signal of the server or the The light emitting unit may be configured to emit light according to a pressing operation of the button unit by the examinee.

일실시예에서 상기 인지기능검사 모듈은 상기 서버가 상기 복수의 블록 키트를 발광시킨 순서 정보와, 상기 블록 키트에서 상기 수검자가 상기 버튼부를 누르는 순서 정보를 비교하여 인지기능을 판단할 수 있다.In one embodiment, the cognitive function test module may determine the cognitive function by comparing order information in which the server emits light from the plurality of block kits and order information in which the examinee presses the button unit in the block kit.

일실시예에서 상기 서버는, 인지기능검사의 질문 및 답변과 관련된 학습 모델 및 도형 인식을 위한 도형인식 모델을 포함하는 데이터베이스를 더 포함하고, 상기 음성인식 AI모듈 및 상기 도형인식 AI모듈은 상기 데이터베이스에 저장된 데이터 및 상기 도구 키트로부터 입력된 정보를 기초로 인공지능 모델을 업데이트할 수 있다.In one embodiment, the server further includes a database including a learning model related to questions and answers of the cognitive function test and a figure recognition model for figure recognition, and the voice recognition AI module and the figure recognition AI module operate on the database. The artificial intelligence model can be updated based on data stored in and information input from the tool kit.

일실시예에서 상기 인지기능검사 모듈은 LICA(The Literacy Independent Cognitive Assessment) 또는 K-DSQ(Korean Dementia Screening Questionnaire) 기반의 평가문항을 생성할 수 있다.In one embodiment, the cognitive function test module may generate evaluation items based on LICA (The Literacy Independent Cognitive Assessment) or K-DSQ (Korean Dementia Screening Questionnaire).

일실시예에서 상기 서버는, 상기 터치입력부에 입력된 상기 수검자의 글자를 인식하는 필기체 인식 모듈을 더 포함할 수 있다.In one embodiment, the server may further include a handwriting recognition module for recognizing the examinee's character input to the touch input unit.

일실시예에서 상기 서버는, 상기 촬영부에서 촬영된 이미지로부터 상기 수검자의 안면을 인식하여 상기 수검자의 신분을 판단하는 안면인식 모듈을 더 포함할 수 있다.In one embodiment, the server may further include a face recognition module for determining the identity of the examinee by recognizing the face of the examinee from the image captured by the photographing unit.

일실시예에서 상기 서버는, 상기 수검자별 환경 설정 값을 저장 및 관리하는 환경설정 모듈을 더 포함하고, 상기 환경설정 모듈은 상기 안면인식 모듈에서 판단된 상기 수검자의 신분에 대응되는 환경설정정보를 호출할 수 있다.In an embodiment, the server further includes an environment setting module for storing and managing environment setting values for each examinee, and the environment setting module sets environment setting information corresponding to the identity of the examinee determined by the facial recognition module. can be called

또한 본 발명의 일실시예에 따른 인지기능검사를 이용한 치매진단보조 방법은, (a) 서버가 인지기능검사를 위한 평가문항을 스피커를 통하여 음성으로 출력하는 단계; (b) 상기 서버가 마이크를 통하여 상기 수검자의 음성을 수신하는 단계; (c) 상기 서버가 터치입력부를 통하여 상기 수검자의 평가응답을 수신하는 단계; (d) 상기 서버가 촬영부를 통하여 촬영된 이미지를 수신하는 단계; 및 (e) 상기 서버가 상기 수검자의 음성 정보, 상기 수검자의 평가응답 정보 및 상기 촬영된 이미지를 분석하여 파악된 도형의 모양 정보를 기초로 인지기능검사를 수행하는 단계를 포함할 수 있다.In addition, a method for assisting diagnosis of dementia using a cognitive function test according to an embodiment of the present invention includes: (a) the server outputting evaluation questions for the cognitive function test as audio through a speaker; (b) the server receiving the examinee's voice through a microphone; (c) receiving, by the server, an evaluation response of the examinee through a touch input unit; (d) receiving, by the server, an image captured through a photographing unit; and (e) performing, by the server, a cognitive function test based on shape information of a figure obtained by analyzing the examinee's voice information, the examinee's evaluation response information, and the photographed image.

일실시예에서 본 발명의 일실시예에 다른 인지기능검사를 이용한 치매진단보조 방법은, (f) 상기 서버가 통신부, 발광부 및 버튼부를 포함하여 구성되는 복수의 블록 키트에 제어 신호를 전송하여 특정 순서대로 상기 복수의 블록 키트 중 두 개 이상의 블록의 상기 발광부를 발광시키는 단계; (g) 상기 서버가 상기 수검자의 상기 버튼부를 누르는 경우 상기 버튼부의 입력 신호를 수신하는 단계; 및 (h) 상기 서버가 상기 복수의 블록 키트가 발광된 순서 정보와, 상기 수검자가 상기 버튼부를 누르는 순서 정보를 비교하여 인지기능을 판단하는 단계를 더 포함할 수 있다.In one embodiment, in the dementia diagnosis assisting method using a cognitive function test according to another embodiment of the present invention, (f) the server transmits a control signal to a plurality of block kits including a communication unit, a light emitting unit, and a button unit, emitting light of the light emitting parts of two or more blocks among the plurality of block kits in a specific order; (g) receiving, by the server, an input signal of the button unit when the examinee presses the button unit; and (h) determining, by the server, the recognition function by comparing information about the order in which the plurality of block kits emit light and information about the order in which the examinee presses the button unit.

본 발명의 일실시예에 따른 치매진단보조 시스템 및 그 방법은 ICT 기반으로 인지기능검사를 간편하게 수행하여 수검자의 치매진단을 수행할 수 있도록 할 수 있다.The dementia diagnosis assistance system and method according to an embodiment of the present invention can easily diagnose dementia of an examinee by performing an ICT-based cognitive function test.

본 발명에 따른 효과는 이상에서 예시된 내용에 의해 제한되지 않으며, 더욱 다양한 효과들이 본 명세서 내에 포함되어 있다.Effects according to the present invention are not limited by the contents exemplified above, and more various effects are included in the present specification.

도 1은 본 발명의 일실시예에 따른 치매진단보조 시스템의 개략 구성도이다.
도 2는 도 1의 치매진단보조 시스템의 상세 구성도이다.
도 3은 도 1의 치매진단보조 시스템의 동작을 설명하는 개념도이다.
도 4는 본 발명의 일실시예에 따른 치매진단보조 시스템의 블록 키트의 사시도이다.
도 5는 도 4의 블록 키트를 이용하여 수검자가 검사를 수행하는 예시화면을 나타내는 도면이다.
도 6은 본 발명의 일실시예에 따른 치매진단보조 시스템의 검사 항목을 설명하는 도면이다.
1 is a schematic configuration diagram of a dementia diagnosis assistance system according to an embodiment of the present invention.
FIG. 2 is a detailed configuration diagram of the dementia diagnosis assistance system of FIG. 1 .
FIG. 3 is a conceptual diagram illustrating the operation of the dementia diagnosis assistance system of FIG. 1 .
4 is a perspective view of a block kit of an assisting system for diagnosing dementia according to an embodiment of the present invention.
FIG. 5 is a diagram illustrating an exemplary screen in which an examinee performs an examination using the block kit of FIG. 4 .
6 is a diagram illustrating test items of an assisting system for diagnosing dementia according to an embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.Advantages and features of the present invention, and methods of achieving them, will become clear with reference to the detailed description of the following embodiments taken in conjunction with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but may be implemented in various different forms, and only these embodiments make the disclosure of the present invention complete, and common knowledge in the art to which the present invention belongs. It is provided to completely inform the person who has the scope of the invention, and the present invention is only defined by the scope of the claims. Like reference numbers designate like elements throughout the specification.

이하, 본 발명의 실시예들에 따른 스마트 헬스 센서를 이용한 실시간 피트니스 코칭 시스템에 대하여 도면들을 참고하여 설명하도록 한다.Hereinafter, a real-time fitness coaching system using a smart health sensor according to embodiments of the present invention will be described with reference to drawings.

도 1은 본 발명의 일실시예에 따른 치매진단보조 시스템의 개략 구성도이며, 도 2는 도 1의 치매진단보조 시스템의 상세 구성도이다.1 is a schematic configuration diagram of a dementia diagnosis assistance system according to an embodiment of the present invention, and FIG. 2 is a detailed configuration diagram of the dementia diagnosis assistance system of FIG. 1 .

도 1 및 도 2를 참조하면, 본 발명의 일실시예에 따른 치매진단보조 시스템은 도구 키트(100), 디스플레이부(200) 및 서버(300)를 포함하여 구성된다.Referring to FIGS. 1 and 2 , the dementia diagnosis assistance system according to an embodiment of the present invention includes a tool kit 100 , a display unit 200 and a server 300 .

도구 키트(100) 및 디스플레이부(200)는 유선 또는 무선의 네트워크 통신을 통하여 서버(300)와 통신 가능하도록 연결될 수 있다.The tool kit 100 and the display unit 200 may be communicatively connected to the server 300 through wired or wireless network communication.

도구 키트(100)는 수검자의 인지기능검사를 수행하기 위한 다양한 키트로 이루어지며 스피커(100), 마이크(120), 터치입력부(130), 도형 키트(140), 블록 키트(150) 및 촬영부(160)를 포함하여 구성된다.The tool kit 100 consists of various kits for performing the cognitive function test of the examinee, and includes a speaker 100, a microphone 120, a touch input unit 130, a figure kit 140, a block kit 150, and a photographing unit. (160).

스피커(110)는 서버(300)로부터 전달된 인지기능검사용 질문을 음성으로 출력하는 역할을 한다.The speaker 110 serves to output the cognitive function test question transmitted from the server 300 as a voice.

마이크(120)는 수검자의 음성을 수신하여 음성 데이터를 서버(300)로 전달하는 역할을 한다.The microphone 120 serves to receive the examinee's voice and transfer the voice data to the server 300 .

터치입력부(130)는 수검자의 손 또는 터치펜을 통한 평가응답을 입력 받아 서버(300)로 전달하는 역할을 한다.The touch input unit 130 serves to receive an evaluation response through the examinee's hand or touch pen and transmit it to the server 300 .

스피커(100), 마이크(120) 및 터치입력부(130)는 각각 별개의 장치로 구성되는 것도 가능하지만 하나의 장치로 구현하는 것도 가능할 수 있다. 예를 들어, 스피커(100), 마이크(120) 및 터치입력부(130)를 모두 포함하는 태블릿 PC로 구현될 수 있다.The speaker 100, the microphone 120, and the touch input unit 130 may be configured as separate devices, but may also be implemented as a single device. For example, it may be implemented as a tablet PC including all of the speaker 100, the microphone 120, and the touch input unit 130.

도형 키트(140)는 수검자가 평가문항에 따라서 대응되는 모양의 도형을 만들 수 있도록 하는 키트이다. 예를 들어, 도형 키트(140)는 도 1에 도시된 바와 같이 성냥개비로 이루어질 수 있으며, 그 외에도 레고 블록, 막대 등 다양한 다른 구성품으로 이루어질 수 있다.The figure kit 140 is a kit that allows the examinee to make a figure of a corresponding shape according to the evaluation questions. For example, the figure kit 140 may be made of matchsticks as shown in FIG. 1, and may be made of various other components such as Lego blocks and sticks.

블록 키트(150)는 수검자의 인지기능검사 수행을 위한 복수개의 블록으로 이루어지는 키트이다.The block kit 150 is a kit composed of a plurality of blocks for performing a cognitive function test of an examinee.

도 4를 참조하면 블록 키트(150)는 사각형의 블록 본체(151)의 형상을 가지며, 블록 본체(151)의 일측면에는 숫자가 새겨져 있다. 블록 본체(151)의 상부면에는 버튼부(153)가 배치된다.Referring to FIG. 4, the block kit 150 has the shape of a rectangular block body 151, and a number is engraved on one side of the block body 151. A button unit 153 is disposed on the upper surface of the block body 151 .

도 4에 도시되지는 않았지만, 블록 본체(151)의 내부에는 통신부 및 발광부가 배치된다. 블록 키트(150)는 통신부를 통하여 서버(300)와 통신하고, 서버(300)의 제어 신호 또는 수검자의 버튼부(153)의 누름 동작에 따라 발광부가 발광하도록 구성된다. 블록 키트(150)를 이용한 인지기능검사 수행방법은 도 3, 도 5 및 도 6를 참조하여 후술한다.Although not shown in FIG. 4 , a communication unit and a light emitting unit are disposed inside the block body 151 . The block kit 150 communicates with the server 300 through the communication unit, and is configured so that the light emitting unit emits light according to a control signal of the server 300 or a push operation of the button unit 153 of the examinee. A method of performing a cognitive function test using the block kit 150 will be described later with reference to FIGS. 3, 5 and 6.

촬영부(160)는 인지기능검사 수행을 위한 도형 키트(140) 및 수검자의 인지기능검사 수행화면을 촬영하는 역할을 한다. 촬영부(160)는 하나 또는 그 이상의 카메라로 구성될 수 있다.The photographing unit 160 serves to photograph the figure kit 140 for performing the cognitive function test and the cognitive function test execution screen of the examinee. The photographing unit 160 may include one or more cameras.

촬영부(160)에서 촬영된 도형 키트(140)의 영상 이미지 및 수검자의 인지기능검사 수행화면은 서버(300)로 전송 및 분석되어 인지기능검사를 위한 분석 또는 환경설정 제어에 이용된다.The video image of the figure kit 140 and the cognitive function test performance screen of the examinee captured by the photographing unit 160 are transmitted to the server 300 and analyzed, and are used for analysis for the cognitive function test or environment setting control.

디스플레이부(200)는 서버(300)로부터 전달되는 다양한 정보를 출력하는 역할을 한다. 예를 들어, 디스플레이부(200)는 인지기능검사에 대응되는 평가문항과 관련된 정보를 출력하거나 인지기능검사의 진단결과를 출력할 수 있다.The display unit 200 serves to output various information transmitted from the server 300 . For example, the display unit 200 may output information related to an evaluation item corresponding to a cognitive function test or output a diagnosis result of a cognitive function test.

서버(300)는 인지기능검사를 위한 미리 구축된 프로그램이 탑재된 서버 컴퓨터를 의미한다. 서버(300)는 유선 또는 무선의 네트워크로 도구 키트(100) 및 디스플레이부(200)에 연결되며, 도구 키트(100) 및 디스플레이부(200)에 인지기능검사와 관련된 다양한 정보를 제공한다.The server 300 refers to a server computer on which a pre-built program for cognitive function testing is loaded. The server 300 is connected to the tool kit 100 and the display unit 200 through a wired or wireless network, and provides various information related to the cognitive function test to the tool kit 100 and the display unit 200.

이때, 서버(300)에는 인지기능검사를 위한 서버 프로그램이 설치될 수 있으며, 도구 키트(100) 중 일부 구성 또는 디스플레이부(200)에는 클라이언트 프로그램이 설치될 수 있다. At this time, a server program for cognitive function test may be installed in the server 300, and a client program may be installed in some components of the tool kit 100 or the display unit 200.

도 1에서 PC가 서버(300)로 도시되어 있지만 이는 일실시예일 뿐이며, 서버(300)는 원격지에 설치되고, PC가 서버(300)에서 제공하는 클라이언트 프로그램이 설치된 컴퓨터로 구성될 수도 있을 것이다. 클라이언트 프로그램은 터치입력부(130) 등의 구성에도 설치될 수 있다.Although the PC is shown as the server 300 in FIG. 1, this is only an example, and the server 300 may be installed in a remote location and configured as a computer on which a client program provided by the server 300 is installed. The client program may also be installed in components such as the touch input unit 130 .

서버(300)는 음성인식 AI모듈(310), 도형인식 AI모듈(320), 필기체인식 모듈(330), 안면인식 모듈(340), 인지기능검사 모듈(350), 환경설정 모듈(360) 및 데이터베이스(370)를 포함하여 구성된다.The server 300 includes a voice recognition AI module 310, a figure recognition AI module 320, a handwriting recognition module 330, a face recognition module 340, a cognitive function test module 350, an environment setting module 360, and It is configured to include a database 370.

음성인식 AI모듈(310)은 마이크(120)로부터 입력된 수검자의 음성을 인식하여 텍스트로 변환하는 역할을 한다. The voice recognition AI module 310 serves to recognize the examinee's voice input from the microphone 120 and convert it into text.

이때, 텍스트 변환은 STT(Speech to Text) 모듈을 이용하여 수행될 수 있으며, 특히 STT 모듈은 구글 또는 마이크로소프트사에 의해 공개된 오픈소스 STT 모듈을 이용하여 수행될 수 있다.In this case, text conversion may be performed using a Speech to Text (STT) module, and in particular, the STT module may be performed using an open source STT module released by Google or Microsoft.

또한, 음성인식 AI모듈(310)은 변환된 텍스트 정보를 분석하여 수검자의 발음 및 언어의 시점 별 유사도를 분석할 수 있도록 구성될 수 있다. 즉, 수검자의 음성 신호 및 텍스트 신호를 시점별로 분석하여 동일한 수검자의 언어 능력의 시점 별 변화를 분석하여 인지기능을 판별할 수 있다.In addition, the voice recognition AI module 310 may be configured to analyze the converted text information to analyze the similarity of the examinee's pronunciation and language at each viewpoint. That is, the cognitive function can be determined by analyzing the testee's voice signal and text signal for each time point and analyzing the change in language ability of the same testee for each time point.

이때, 음성인식 AI모듈(310)은 사투리, 유사어 등을 포함한 수검자의 텍스트 신호를 분석하여 인지기능을 판별할 수 있다.At this time, the voice recognition AI module 310 may determine the cognitive function by analyzing the text signal of the examinee including the dialect and similar words.

도형인식 AI모듈(320)은 촬영부(160)에서 촬영된 이미지를 기반으로 도형 키트(140)가 형성하는 도형의 모양을 인식하는 역할을 하며, OpenCV를 활용하여 구성될 수 있다.The figure recognition AI module 320 serves to recognize the shape of a figure formed by the figure kit 140 based on an image captured by the photographing unit 160, and may be configured using OpenCV.

예를 들어, 도형 키트(140)가 성냥 개비인 경우에 서버(300)가 인지기능검사 질문 내지 요청 사항에서 언급한 도형의 모양대로 수검자는 성냥 개비의 모양을 바꿀 수 있으며, 촬영부(160)는 수검자가 만든 성냥 개비의 모양에 대한 이미지를 촬영하여 도형인식 AI모듈(320)로 전달하고, 도형인식 AI모듈(320)은 구축된 학습모델을 기반으로 도형의 모양을 요청한 모양대로 잘 형성하였는지를 판단할 수 있다.For example, when the figure kit 140 is a matchstick, the examinee can change the shape of the matchstick according to the shape of the figure mentioned in the cognitive function test question or request by the server 300, and the photographing unit 160 takes an image of the shape of the matchstick made by the examinee and transmits it to the figure recognition AI module 320, and the figure recognition AI module 320 determines whether the shape of the figure is well formed as requested based on the built learning model. can judge

필기체인식 모듈(330)은 터치입력부(130)에 입력된 수검자의 글자를 인식하는 역할을 한다. 이때, 필기체인식 모듈(330)은 미리 구축된 학습 모델을 기반으로 수검자의 입력 데이터를 기반으로 학습 모델을 업데이트하는 방식으로 인식률을 향상시킬 수 있다.The handwriting recognition module 330 serves to recognize the examinee's letters input to the touch input unit 130 . At this time, the handwriting recognition module 330 may improve the recognition rate by updating the learning model based on the examinee's input data based on the previously built learning model.

안면인식 모듈(340)은 촬영부(160)에서 촬영된 이미지로부터 수검자의 안면을 인식하여 수검자의 인분을 판단하는 역할을 한다. 이때, 안면인식 모듈(340)은 기 공지된 안면인식 기술을 활용할 수 있다.The face recognition module 340 serves to determine the person of the examinee by recognizing the face of the examinee from the image captured by the photographing unit 160 . At this time, the face recognition module 340 may utilize a known face recognition technology.

인지기능검사 모듈(350)은 도구 키트(100)로부터 수신된 정보를 기초로 인지기능검사를 수행하고, 분석된 결과를 디스플레이부(200)에 출력하는 역할을 한다.The cognitive function test module 350 performs a cognitive function test based on the information received from the tool kit 100 and serves to output the analyzed result to the display unit 200 .

인지기능검사 모듈(350)는 평가대상항목에 따른 다양한 평가모델을 구축하고, 이를 이용해 인지기능검사를 수행할 수 있다.The cognitive function test module 350 may build various evaluation models according to evaluation target items, and perform a cognitive function test using them.

인지기능검사 모듈(350)은 LICA(The Literacy Independent Cognitive Assessment) 또는 K-DSQ(Korean Dementia Screening Questionnaire) 기반의 평가문항을 생성할 수 있도록 구성될 수 있다.The cognitive function test module 350 may be configured to generate evaluation items based on The Literacy Independent Cognitive Assessment (LICA) or Korean Dementia Screening Questionnaire (K-DSQ).

환경설정 모듈(360)은 수검자별 환경 설정 값을 저장 및 관리하는 역할을 한다. 즉, 서버(300)는 클라이언트 프로그램에 인지기능검사와 관련된 환경을 설정할 수 있는 화면을 제공할 수 있으며, 환경설정 모듈(360)는 수검자별 환경 설정 값을 저장할 수 있다.The environment setting module 360 serves to store and manage environment setting values for each examinee. That is, the server 300 may provide a screen for setting the environment related to the cognitive function test to the client program, and the environment setting module 360 may store environment setting values for each examinee.

또한, 환경설정 모듈(360)은 안면인식 모듈(340)에서 판단된 수검자의 신분에 대응되는 환경설정정보를 호출하도록 구성되어 수검자별 환경설정을 자동으로 변경할 수 있도록 할 수 있다.In addition, the environment setting module 360 is configured to call environment setting information corresponding to the identity of the examinee determined by the face recognition module 340 so that environment settings for each examinee can be automatically changed.

데이터베이스(370)는 음성인식 AI모듈(310), 도형인식 AI모듈(320), 필기체인식 모듈(330), 안면인식 모듈(340), 인지기능검사 모듈(350) 및 환경설정 모듈(360)과 관련된 인공지능 학습모델과 관련된 백그라운드 데이터 및 이를 이용한 처리 값들을 저장하는 역할을 한다.The database 370 includes a voice recognition AI module 310, a figure recognition AI module 320, a handwriting recognition module 330, a face recognition module 340, a cognitive function test module 350, and an environment setting module 360. It serves to store background data related to the related artificial intelligence learning model and processing values using it.

데이터베이스(370)에 저장되는 데이터들은 미리 수집되어 구축될 수 있지만, 인터넷을 통하여 데이터를 스크래핑하는 등의 방식으로 업데이트될 수 있으며, 수검자의 인지기능검사의 수행 중에 도구 키트(100)로부터 입력되는 데이터를 반영하여 업데이트 될 수 있다.The data stored in the database 370 may be collected and constructed in advance, but may be updated by scraping the data through the Internet or the like, and data input from the tool kit 100 during the cognitive function test of the examinee. can be updated to reflect

도 3은 도 1의 치매진단보조 시스템의 동작을 설명하는 개념도이다.FIG. 3 is a conceptual diagram illustrating the operation of the dementia diagnosis assistance system of FIG. 1 .

도구 키트(100)가 검사 스테이지(S)에 배치된 상태에서 검사가 시작되면 마이크(120)에 인지기능검사 진행과 관련된 평가문항이 음성으로 출력된다. 이때, 평가문항의 음성 출력은 TTS(Text to Speech) 모듈에 의하여 처리될 수 있으며, TTS 모듈은 구글 또는 마이크로소프트사 등에 의하여 공개된 오픈소스 모듈일 수 있다.When the test starts in a state where the tool kit 100 is placed on the test stage S, evaluation questions related to the progress of the cognitive function test are output to the microphone 120 in voice. In this case, the audio output of the evaluation questions may be processed by a Text to Speech (TTS) module, and the TTS module may be an open source module disclosed by Google or Microsoft.

평가검사항목에 따라 수검자는 음성으로 답하거나, 블록 키트(150)를 조작하거나, 도형 키트(140)를 조작하여 도형을 만들 수 있다.Depending on the evaluation test item, the examinee can make a figure by giving a negative answer, manipulating the block kit 150, or manipulating the figure kit 140.

수검자가 음성을 출력하면 음성인식 AI모듈(310)은 음성을 인식하여 텍스트로 변환하여 서버(300)로 전달한다.When the examinee outputs a voice, the voice recognition AI module 310 recognizes the voice, converts it into text, and transmits it to the server 300.

수검자가 숫자가 표시된 블록 키트(150)의 버튼부(153)를 누르는 등의 조작을 하는 경우 버튼부(153)의 입력 신호는 서버(300)로 전달된다.When an examinee performs an operation such as pressing the button part 153 of the block kit 150 marked with numbers, the input signal of the button part 153 is transmitted to the server 300 .

또한, 수검자가 도형 키트(140)로 특정 도형 모양을 만든 경우 촬영부(160)는 도형 키트(140)를 포함하는 이미지 정보를 서버(300)로 전달한다.In addition, when the examinee makes a specific figure shape with the figure kit 140, the photographing unit 160 transmits image information including the figure kit 140 to the server 300.

서버(300)는 서버 프로그램을 통하여 수신된 데이터들을 데이터베이스(370)에 저장된 데이터와 비교, 분석하여 결과값 즉, 인지기능평가 진단결과를 출력하여 클라이언트 프로그램으로 전달한다.The server 300 compares and analyzes the data received through the server program with the data stored in the database 370, outputs the result value, that is, the cognitive function evaluation diagnosis result, and delivers it to the client program.

이때, 진단결과는 디스플레이부(200)에 출력될 수 있다.At this time, the diagnosis result may be output to the display unit 200 .

검사 과정 중 일부의 단계만이 진행된 경우에는 각 단계별 결과값이 출력되고 다음 검사를 위한 출력 값들이 각 도구 키트(100)에 다시 출력될 수 있다.When only a part of the inspection process is performed, result values for each step are output, and output values for the next inspection may be output to each tool kit 100 again.

도 6은 본 발명의 일실시예에 따른 치매진단보조 시스템의 검사 항목을 설명하는 도면이다.6 is a diagram explaining test items of the dementia diagnosis assistance system according to an embodiment of the present invention.

본 발명의 치매진단보조 시스템은 수검자의 기억력, 시공간구성력, 언어력, 수행기능력, 주의력, 계산력 등의 인지기능을 평가하는 다양한 소검사들을 수행하도록 구성될 수 있다.The system for diagnosing dementia of the present invention can be configured to perform various subtests to evaluate cognitive functions such as memory, spatiotemporal composition, language, performance, attention, and calculation of the examinee.

도 6을 참조하면, 기억력 검사의 경우 '단어회상검사' 및 '막대재인검사'로 이루어진다. '단어회상검사'는 음성을 듣고 바로 따라하는 '즉각회상', 일정시간 경과 후 따라하는 '지연회상', 일정시간 경과 후 보기에서 선택하는 “재인검사'로 이루어진다. '막대재인검사'는 특정 이미지를 보여주고 질문에 대한 YES/NO 답변을 요구하는 검사이다.Referring to FIG. 6 , the memory test consists of a 'word recall test' and a 'stick recognition test'. The 'word recall test' consists of 'immediate recall' that follows the voice immediately, 'delayed recall' that follows after a certain period of time, and 'recognition test' that selects from options after a certain period of time has elapsed. The 'Stick Recognition Test' is a test that shows a specific image and requires YES/NO answers to questions.

언어력 검사는 사진을 보여주고 이름을 맞추는 '이름대기검사'와, 올바른 사진을 고르는 '진짜맞추기'로 이루어진다.The language proficiency test consists of a 'name waiting test' in which a picture is shown and the name is guessed, and a 'real guess' in which the correct picture is selected.

시각적구성 검사는 사진을 보여주고 따라 만들기를 하는 '막대 구성검사'로 이루어진다.The visual composition test consists of a 'stick composition test' in which pictures are shown and followed.

집행기능검사는 숫자스트룹을 보여주고 숫자를 읽고 숫자의 개수를 말하는 '숫자스트룹'과 빨리 동물의 이름을 말하는 '동물이름대기'로 이루어진다.The executive function test consists of a 'number stroop' that shows a number stroop, reads the number, and says the number of numbers, and a 'animal name' that quickly says the name of an animal.

특히, 시각적구성 검사 관련하여 본 발명의 인지기능검사를 이용한 치매진단보조 시스템은 도구 키트(100) 중 도형 키트(140)가 이용되며, 수검자는 도형 키트(140)를 원하는 모양으로 만들고, 촬영부(160)가 도형 키트(140)의 이미지 데이터를 서버(300)로 전송하고, 서버(300)의 상기 설명한 바와 같은 방법으로 도형 모양을 판단함으로써 시각적구성 능력을 판단할 수 있다.In particular, in relation to the visual configuration test, the dementia diagnosis assistance system using the cognitive function test of the present invention uses the figure kit 140 of the tool kit 100, and the examinee makes the figure kit 140 into a desired shape, and the photographing unit 160 transmits the image data of the figure kit 140 to the server 300, and the server 300 judges the shape of the figure in the same way as described above, thereby determining the visual composition ability.

또한, 본 발명의 인지기능검사를 이용한 치매진단보조 시스템은 블록 키트(150)를 활용한 시공간 주의력 검사를 수행할 수 있다. In addition, the dementia diagnosis assistance system using the cognitive function test of the present invention can perform a spatio-temporal attention test using the block kit 150.

시공간 주의력 테스트는 도 5와 같이 블록 키트(150)가 복수 개로 구성된 키트를 이용하여 수행될 수 있다. 예를 들어, 블록 키트(150)는 1부터 9까지 숫자가 새겨진 9 개의 블록으로 이루어질 수 있다.The space-time attention test may be performed using a kit consisting of a plurality of block kits 150 as shown in FIG. 5 . For example, the block kit 150 may consist of 9 blocks numbered 1 to 9.

9개의 블록은 블록판 위에 배치될 수 있는데, 블록판에는 블록 키트(150)와 시리얼 통신 등의 방식으로 통신할 수 있도록 하는 통신 모듈이 구비될 수 있다. 이러한 방식의 경우 블록판은 블록 키트(150) 및 서버(300)와 통신 가능하도록 구성될 수 있다.The nine blocks may be disposed on a block board, and a communication module for communicating with the block kit 150 in a serial communication method may be provided on the block board. In this way, the block board may be configured to communicate with the block kit 150 and the server 300 .

블록 키트(150)를 이용한 시공간 주의력 검사는 시공간 주의폭(바로 따라하기) 검사와 시공간적 작업기억(거꾸로 따라하기) 검사를 포함한다. The visuospatial attention test using the block kit 150 includes a visuospatial attention span (direct follow) test and a visuospatial working memory test (reverse follow).

시공간 주의폭 검사와 관련된 기본적인 설명은 스피커(110)를 통하여 TTS 모듈을 통하여 음성으로 출력한다.The basic explanation related to the space-time attention width test is output as voice through the TTS module through the speaker 110.

수검자는 안내 음성을 듣고 시공간 주의폭 검사를 수행할 준비를 한다. 이때, 수검자는 음성으로 안내되거나 시각적으로 표시되는 숫자에 대하여 블록 키트(150)의 블록을 순서대로 누를 수 있다.The examinee listens to the guide voice and prepares to perform the spatiotemporal width test. At this time, the examinee may sequentially press the blocks of the block kit 150 with respect to numbers guided by voice or visually displayed.

예를 들어, 스피커(110)를 통하여 순서대로 숫자를 불러주면, 이를 기억하여 수검자는 해당 숫자에 해당하는 블록 키트(150)의 버튼부(153)를 순서대로 누를 수 있다.For example, when numbers are called in order through the speaker 110, the examinee can sequentially press the buttons 153 of the block kit 150 corresponding to the corresponding numbers by memorizing them.

다른 방법으로, 블록 키트(150) 중 특정 숫자를 약 1초 간격으로 발광부를 발광시켜 밝게 하면, 수검자는 불이 켜지는 블록을 기억한 후 블록 키트(150)의 버튼부(153)를 순서대로 누를 수 있다.Alternatively, if a specific number of the block kit 150 is brightened by emitting light at intervals of about 1 second, the examinee memorizes the lighted blocks and then sequentially presses the button parts 153 of the block kit 150. can be pressed

도 5는 수검자가 숫자 3이 새겨진 블록 키트(150)의 버튼부(153)를 눌러서 발광부가 발광한 상태를 도시하고 있다. FIG. 5 shows a state in which the light emitting part emits light when the examinee presses the button part 153 of the block kit 150 with the number 3 engraved thereon.

시공간 주의폭 검사의 채점표는 아래 표 1과 같이 각 자리수별 질문사항 및 채점을 수행할 수 있다.As shown in Table 1 below, the scoring table of the space-time attention span test can perform questions and scoring for each digit.

Figure pat00001
Figure pat00001

상기 설명한 바와 같이 음성으로 숫자를 출력하거나 블록 키트(150)의 발광부를 발광시키는 방식으로 수검자에게 요청사항을 전달하며, 사용자가 블록 키트(150)의 버튼부(153)를 누르는 순서 정보는 블록 키트(150)의 통신부를 통하여 서버(300)로 자동으로 전송된다.As described above, the request is delivered to the examinee by outputting a number by voice or by making the light emitting part of the block kit 150 emit light, and information on the order in which the user presses the button part 153 of the block kit 150 is the block kit It is automatically transmitted to the server 300 through the communication unit of (150).

각 질문에 대하여 정답을 입력한 경우 1점을 주고, 오답인 경우에는 0점을 주며, 총점은 모든 점수를 더해서 계산된다.For each question, 1 point is given for a correct answer and 0 points for an incorrect answer, and the total score is calculated by adding all the points.

폭점수는 한번이라도 성공한 최대 자리수로 선택된다.The breadth score is selected as the maximum number of digits that have been successful at least once.

반대로 거꾸로 따라하기 검사에 해당하는 시공간적 작업기억 검사는 아래의 표 2와 같이 이루어질 수 있다.Conversely, the spatio-temporal working memory test corresponding to the reverse copy test can be performed as shown in Table 2 below.

Figure pat00002
Figure pat00002

시공간적 작업기억 검사는 정답이 질문의 숫자의 순서와 반대로 된다는 것을 제외하고는 총점 및 폭점수 계산 방법 등은 모두 동일하다.In the spatiotemporal working memory test, the total score and breadth score calculation method are all the same, except that the correct answer is reversed in the order of the number of questions.

본 발명의 일실시예에 따른 인지기능검사를 이용한 치매진단보조 시스템은 상기와 같이 서버(300)와 통신할 수 있는 블록 키트(150)를 이용하여 시공간 주의력을 자동화하여 평가할 수 있다.The assistive system for diagnosing dementia using a cognitive function test according to an embodiment of the present invention can automatically evaluate spatio-temporal attention using the block kit 150 capable of communicating with the server 300 as described above.

본 발명의 일실시예에 따른 인지기능검사를 이용한 치매진단보조 시스템은 상기 인지기능검사를 수행하며, 아래 표 3와 같은 다양한 질문 시나리오를 진행할 수 있도록 구성될 수 있다.An assist system for diagnosing dementia using a cognitive function test according to an embodiment of the present invention may be configured to perform the cognitive function test and proceed with various question scenarios as shown in Table 3 below.

Figure pat00003
Figure pat00003

Figure pat00004
Figure pat00004

Figure pat00005
Figure pat00005

상기 질문 시나리오는 아래와 표 4와 같은 카테고리로 세부 분류될 수 있다.The question scenarios may be classified into categories as shown in Table 4 below.

Figure pat00006
Figure pat00006

상기 표 4에 따른 14개의 소검사들은 LICA(The Literacy Independent Cognitive Assessment) 또는 K-DSQ(Korean Dementia Screening Questionnaire) 기반의 평가문항을 포함할 수 있으며, 해당 평가문항은 기존의 LICA 및 K-DSQ에 기반하여 프로그램화되어 구동될 수 있도록 구축될 수 있다.The 14 subtests according to Table 4 above may include evaluation questions based on LICA (The Literacy Independent Cognitive Assessment) or K-DSQ (Korean Dementia Screening Questionnaire), and the evaluation questions are based on the existing LICA and K-DSQ. It can be built so that it can be programmed and driven.

본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.Those skilled in the art to which the present invention pertains will understand that the present invention can be embodied in other specific forms without changing its technical spirit or essential features. Therefore, the embodiments described above should be understood as illustrative in all respects and not limiting. The scope of the present invention is indicated by the following claims rather than the detailed description above, and all changes or modifications derived from the meaning and scope of the claims and equivalent concepts should be interpreted as being included in the scope of the present invention. do.

100: 도구 키트 110: 스피커
120: 마이크 130: 터치입력부
140: 도형 키트 150: 블록 키트
151: 블록 본체 153: 버튼부
160: 촬영부 200: 디스플레이부
300: 서버 310: 음성인식 AI모듈
320: 도형인식 AI모듈 330: 필기체인식 모듈
340: 안면인식 모듈 350: 인지기능검사 모듈
360: 환경설정 모듈 370: 데이터베이스
100: tool kit 110: speaker
120: microphone 130: touch input unit
140: figure kit 150: block kit
151: block body 153: button part
160: photographing unit 200: display unit
300: server 310: voice recognition AI module
320: figure recognition AI module 330: handwriting recognition module
340: face recognition module 350: cognitive function test module
360: environment setting module 370: database

Claims (12)

수검자의 인지기능검사를 위한 도구 키트;
인지기능검사의 진단결과를 출력하는 디스플레이부; 및
상기 도구 키트 및 상기 디스플레이부와 네트워크로 연결되는 서버를 포함하고,
상기 도구 키트는, 상기 서버로부터 전달된 인지기능검사용 질문을 음성으로 출력하는 스피커와, 상기 수검자의 음성을 수신하여 상기 서버로 전달하는 마이크와, 상기 수검자의 평가응답을 입력 받아 상기 서버로 전달하는 터치입력부와, 인지기능검사 수행을 위한 도형 키트 및 상기 수검자의 인지기능검사 수행화면을 촬영하는 촬영부를 포함하여 구성되고,
상기 서버는, 상기 촬영부에서 촬영된 이미지를 기반으로 상기 도형 키트가 형성하는 도형의 모양을 인식하는 도형인식 AI모듈과, 상기 도구 키트에 인지기능검사를 위한 데이터를 전송하고, 상기 도구 키트로부터 수신된 정보를 기초로 인지기능검사를 수행하고, 상기 디스플레이부에 진단결과를 출력하는 인지기능검사 모듈을 포함하는 인지기능검사를 이용한 치매진단보조 시스템.
A kit of tools for examining cognitive function of examinees;
a display unit outputting a diagnosis result of a cognitive function test; and
A server connected to the tool kit and the display unit through a network,
The tool kit includes a speaker for outputting a cognitive function test question transmitted from the server as a voice, a microphone for receiving and transmitting the voice of the examinee to the server, and receiving an evaluation response of the examinee and transmitting the same to the server. It is configured to include a touch input unit for performing a cognitive function test, a figure kit for performing a cognitive function test, and a photographing unit for capturing a cognitive function test execution screen of the examinee,
The server transmits a figure recognition AI module for recognizing the shape of a figure formed by the figure kit based on an image captured by the photographing unit, and data for a cognitive function test to the tool kit, and from the tool kit A system for diagnosing dementia using a cognitive function test, comprising a cognitive function test module that performs a cognitive function test based on received information and outputs a diagnosis result to the display unit.
제1항에 있어서,
상기 서버는, 상기 마이크로부터 입력된 상기 수검자의 음성을 인식하여 텍스트 신호로 변환하는 음성인식 AI모듈을 더 포함하는 인지기능검사를 이용한 치매진단보조 시스템.
According to claim 1,
The server further includes a voice recognition AI module that recognizes the examinee's voice input from the microphone and converts it into a text signal.
제2항에 있어서,
상기 음성인식 AI모듈은 상기 수검자의 음성 및 상기 변환된 텍스트 신호를 분석하여 상기 수검자의 발음 및 언어의 시점 별 유사도를 분석하는 인지기능검사를 이용한 치매진단보조 시스템.
According to claim 2,
The speech recognition AI module analyzes the examinee's voice and the converted text signal to analyze the degree of similarity of the examinee's pronunciation and language at each point in time.
제2항에 있어서,
상기 도구 키트는, 통신부, 발광부 및 버튼부를 포함하여 구성되는 복수의 블록 키트를 더 포함하고,
상기 블록 키트는 상기 통신부를 통하여 상기 서버와 통신하고, 상기 서버의 제어 신호 또는 상기 수검자의 상기 버튼부의 누름 동작에 따라 상기 발광부가 발광하도록 구성된 인지기능검사를 이용한 치매진단보조 시스템.
According to claim 2,
The tool kit further includes a plurality of block kits including a communication unit, a light emitting unit, and a button unit,
The system for diagnosing dementia using a cognitive function test, wherein the block kit communicates with the server through the communication unit, and is configured to emit light from the light emitting unit according to a control signal of the server or a pressing operation of the button unit by the examinee.
제4항에 있어서,
상기 인지기능검사 모듈은 상기 서버가 상기 복수의 블록 키트를 발광시킨 순서 정보와, 상기 블록 키트에서 상기 수검자가 상기 버튼부를 누르는 순서 정보를 비교하여 인지기능을 판단하는 인지기능검사를 이용한 치매진단보조 시스템.
According to claim 4,
The cognitive function test module assists in diagnosing dementia using a cognitive function test that determines cognitive function by comparing order information in which the server emits light from the plurality of block kits and order information in which the examinee presses the button unit in the block kit. system.
제2항에 있어서,
상기 서버는, 인지기능검사의 질문 및 답변과 관련된 학습 모델 및 도형 인식을 위한 도형인식 모델을 포함하는 데이터베이스를 더 포함하고,
상기 음성인식 AI모듈 및 상기 도형인식 AI모듈은 상기 데이터베이스에 저장된 데이터 및 상기 도구 키트로부터 입력된 정보를 기초로 인공지능 모델을 업데이트하는 인지기능검사를 이용한 치매진단보조 시스템.
According to claim 2,
The server further includes a database including a learning model related to questions and answers of the cognitive function test and a figure recognition model for figure recognition,
The voice recognition AI module and the figure recognition AI module update an artificial intelligence model based on data stored in the database and information input from the tool kit.
제2항에 있어서,
상기 인지기능검사 모듈은 LICA(The Literacy Independent Cognitive Assessment) 또는 K-DSQ(Korean Dementia Screening Questionnaire) 기반의 평가문항을 생성하는 인지기능검사를 이용한 치매진단보조 시스템.
According to claim 2,
The cognitive function test module is a dementia diagnosis assistance system using a cognitive function test that generates evaluation items based on LICA (The Literacy Independent Cognitive Assessment) or K-DSQ (Korean Dementia Screening Questionnaire).
제2항에 있어서,
상기 서버는, 상기 터치입력부에 입력된 상기 수검자의 글자를 인식하는 필기체 인식 모듈을 더 포함하는 인지기능검사를 이용한 치매진단보조 시스템.
According to claim 2,
The server further includes a handwriting recognition module for recognizing the examinee's letters input to the touch input unit.
제2항에 있어서,
상기 서버는, 상기 촬영부에서 촬영된 이미지로부터 상기 수검자의 안면을 인식하여 상기 수검자의 신분을 판단하는 안면인식 모듈을 더 포함하는 인지기능검사를 이용한 치매진단보조 시스템.
According to claim 2,
The server further includes a face recognition module for recognizing the face of the examinee from the image captured by the photographing unit and determining the identity of the examinee.
제9항에 있어서,
상기 서버는, 상기 수검자별 환경 설정 값을 저장 및 관리하는 환경설정 모듈을 더 포함하고,
상기 환경설정 모듈은 상기 안면인식 모듈에서 판단된 상기 수검자의 신분에 대응되는 환경설정정보를 호출하는 인지기능검사를 이용한 치매진단보조 시스템.
According to claim 9,
The server further includes an environment setting module for storing and managing environment setting values for each examinee,
The system for assisting diagnosis of dementia using a cognitive function test, wherein the environment setting module calls environment setting information corresponding to the identity of the examinee determined by the face recognition module.
(a) 서버가 인지기능검사를 위한 평가문항을 스피커를 통하여 음성으로 출력하는 단계;
(b) 상기 서버가 마이크를 통하여 상기 수검자의 음성을 수신하는 단계;
(c) 상기 서버가 터치입력부를 통하여 상기 수검자의 평가응답을 수신하는 단계;
(d) 상기 서버가 촬영부를 통하여 촬영된 이미지를 수신하는 단계; 및
(e) 상기 서버가 상기 수검자의 음성 정보, 상기 수검자의 평가응답 정보 및 상기 촬영된 이미지를 분석하여 파악된 도형의 모양 정보를 기초로 인지기능검사를 수행하는 단계를 포함하는 인지기능검사를 이용한 치매진단보조 방법.
(a) the server outputting evaluation questions for the cognitive function test as voice through a speaker;
(b) the server receiving the examinee's voice through a microphone;
(c) receiving, by the server, an evaluation response of the examinee through a touch input unit;
(d) receiving, by the server, an image captured through a photographing unit; and
(e) the server performing a cognitive function test based on the shape information of the figure obtained by analyzing the examinee's voice information, the examinee's evaluation response information, and the photographed image Dementia diagnosis aid method.
제11항에 있어서,
(f) 상기 서버가 통신부, 발광부 및 버튼부를 포함하여 구성되는 복수의 블록 키트에 제어 신호를 전송하여 특정 순서대로 상기 복수의 블록 키트 중 두 개 이상의 블록의 상기 발광부를 발광시키는 단계; 및
(g) 상기 서버가 상기 수검자의 상기 버튼부를 누르는 경우 상기 버튼부의 입력 신호를 수신하는 단계; 및
(f) 상기 서버가 상기 복수의 블록 키트가 발광된 순서 정보와, 상기 수검자가 상기 버튼부를 누르는 순서 정보를 비교하여 인지기능을 판단하는 단계를 더 포함하는 인지기능검사를 이용한 치매진단보조 방법.
According to claim 11,
(f) transmitting, by the server, a control signal to a plurality of block kits including a communication unit, a light emitting unit, and a button unit to light the light emitting units of two or more blocks among the plurality of block kits in a specific order; and
(g) receiving, by the server, an input signal of the button unit when the examinee presses the button unit; and
(f) The method for assisting diagnosis of dementia using a cognitive function test, further comprising the step of determining, by the server, cognitive function by comparing information about the order in which the plurality of block kits emit light and information about the order in which the examinee presses the button unit.
KR1020210148209A 2021-11-01 2021-11-01 Dementia diagnosis aid system using cognitive fuction test and method thereof KR102577906B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210148209A KR102577906B1 (en) 2021-11-01 2021-11-01 Dementia diagnosis aid system using cognitive fuction test and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210148209A KR102577906B1 (en) 2021-11-01 2021-11-01 Dementia diagnosis aid system using cognitive fuction test and method thereof

Publications (2)

Publication Number Publication Date
KR20230063204A true KR20230063204A (en) 2023-05-09
KR102577906B1 KR102577906B1 (en) 2023-09-14

Family

ID=86408531

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210148209A KR102577906B1 (en) 2021-11-01 2021-11-01 Dementia diagnosis aid system using cognitive fuction test and method thereof

Country Status (1)

Country Link
KR (1) KR102577906B1 (en)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120258436A1 (en) * 2011-04-08 2012-10-11 Case Western Reserve University Automated assessment of cognitive, fine-motor, and memory skills
KR20160127424A (en) * 2015-04-27 2016-11-04 한국생산기술연구원 System and Method for Recognizing Blocks using Optical Structure
KR101848630B1 (en) 2017-09-06 2018-04-13 주식회사 유비플러스 Diagnosis and management system based on traditional card game
KR20200139015A (en) * 2019-06-03 2020-12-11 계명대학교 산학협력단 Identification system for face recognition using tprl algorithm and its way to working
KR20210079512A (en) * 2019-12-20 2021-06-30 주식회사 에듀템 Foreign language learning evaluation device
KR102272850B1 (en) * 2021-02-22 2021-07-05 서영철 multi table type cognitive training device using artificial intelligence and method for player cognition using the same
KR20210091495A (en) * 2020-01-14 2021-07-22 김성석 Korean dictation education system using artificial intelligence
KR102288797B1 (en) * 2020-12-30 2021-08-11 (주)레벤그리다한국문화다양성연구원 Cognitive test system

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120258436A1 (en) * 2011-04-08 2012-10-11 Case Western Reserve University Automated assessment of cognitive, fine-motor, and memory skills
KR20160127424A (en) * 2015-04-27 2016-11-04 한국생산기술연구원 System and Method for Recognizing Blocks using Optical Structure
KR101848630B1 (en) 2017-09-06 2018-04-13 주식회사 유비플러스 Diagnosis and management system based on traditional card game
KR20200139015A (en) * 2019-06-03 2020-12-11 계명대학교 산학협력단 Identification system for face recognition using tprl algorithm and its way to working
KR20210079512A (en) * 2019-12-20 2021-06-30 주식회사 에듀템 Foreign language learning evaluation device
KR20210091495A (en) * 2020-01-14 2021-07-22 김성석 Korean dictation education system using artificial intelligence
KR102288797B1 (en) * 2020-12-30 2021-08-11 (주)레벤그리다한국문화다양성연구원 Cognitive test system
KR102272850B1 (en) * 2021-02-22 2021-07-05 서영철 multi table type cognitive training device using artificial intelligence and method for player cognition using the same

Also Published As

Publication number Publication date
KR102577906B1 (en) 2023-09-14

Similar Documents

Publication Publication Date Title
JP6775757B1 (en) Function improvement support system and function improvement support device
JP6968458B2 (en) Function improvement support system and function improvement support device
CN103857347B (en) The pupil metric evaluation of language understanding
KR20090067578A (en) Cognition enhancement system and method for dementia prevention
TW201327460A (en) Apparatus and method for voice assisted medical diagnosis
Di Nuovo et al. Assessment of cognitive skills via human-robot interaction and cloud computing
US20180317831A1 (en) Diagnostic tool for assessing neurodevelopmental conditions or disorders
US11417045B2 (en) Dialog-based testing using avatar virtual assistant
CN112233516A (en) Grading method and system for physician CPR examination training and examination
US20210100453A1 (en) Systems and methods for diagnosing and analyzing concussions
Esch et al. An assessment of self-echoic behavior in young children
CN111540380B (en) Clinical training system and method
KR20130099714A (en) Learning system and learning method using the same
CN116778771A (en) First aid training and checking system
Vlok et al. A developmental approach: A framework for the development of an integrated visual perception programme
CN111834019B (en) Standardized patient training method and device based on voice recognition technology
KR102577906B1 (en) Dementia diagnosis aid system using cognitive fuction test and method thereof
US20230298733A1 (en) Systems and Methods for Mental Health Improvement
WO2022057840A1 (en) Brain cognitive function detection system
CN115497621A (en) Old person cognitive status evaluation system
KR102503488B1 (en) Collaborative methods and systems for the diagnosis and treatment of developmental disorders
CN111540379B (en) Clinical training system and method
CN112950423A (en) Training system and method based on virtual intelligent standardized patient
JP2004524572A (en) Application of multimedia technology to computer management occupational employee assessment
CN111863254A (en) Method, system and equipment for evaluating inquiry and physical examination based on simulated patient

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right