KR102577906B1 - Dementia diagnosis aid system using cognitive fuction test and method thereof - Google Patents

Dementia diagnosis aid system using cognitive fuction test and method thereof Download PDF

Info

Publication number
KR102577906B1
KR102577906B1 KR1020210148209A KR20210148209A KR102577906B1 KR 102577906 B1 KR102577906 B1 KR 102577906B1 KR 1020210148209 A KR1020210148209 A KR 1020210148209A KR 20210148209 A KR20210148209 A KR 20210148209A KR 102577906 B1 KR102577906 B1 KR 102577906B1
Authority
KR
South Korea
Prior art keywords
examinee
cognitive function
server
function test
module
Prior art date
Application number
KR1020210148209A
Other languages
Korean (ko)
Other versions
KR20230063204A (en
Inventor
성재용
전광석
Original Assignee
주식회사 오픈링크시스템
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 오픈링크시스템 filed Critical 주식회사 오픈링크시스템
Priority to KR1020210148209A priority Critical patent/KR102577906B1/en
Publication of KR20230063204A publication Critical patent/KR20230063204A/en
Application granted granted Critical
Publication of KR102577906B1 publication Critical patent/KR102577906B1/en

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/40Detecting, measuring or recording for evaluating the nervous system
    • A61B5/4076Diagnosing or monitoring particular conditions of the nervous system
    • A61B5/4088Diagnosing of monitoring cognitive diseases, e.g. Alzheimer, prion diseases or dementia
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475User input or interface means, e.g. keyboard, pointing device, joystick
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/66Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for extracting parameters related to health condition
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/20ICT specially adapted for the handling or processing of patient-related medical or healthcare data for electronic clinical trials or questionnaires
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/70ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders

Abstract

본 발명의 일실시예에 따른 인지기능검사를 이용한 치매진단보조 시스템은, 수검자의 인지기능검사를 위한 도구 키트와, 인지기능검사의 진단결과를 출력하는 디스플레이부 및 상기 도구 키트 및 상기 디스플레이부와 네트워크로 연결되는 서버를 포함하고, 상기 도구 키트는, 상기 서버로부터 전달된 인지기능검사용 질문을 음성으로 출력하는 스피커와, 상기 수검자의 음성을 수신하여 상기 서버로 전달하는 마이크와, 상기 수검자의 평가응답을 입력 받아 상기 서버로 전달하는 터치입력부와, 인지기능검사 수행을 위한 도형 키트 및 상기 수검자의 인지기능검사 수행화면을 촬영하는 촬영부를 포함하여 구성되고, 상기 서버는, 상기 촬영부에서 촬영된 이미지를 기반으로 상기 도형 키트가 형성하는 도형의 모양을 인식하는 도형인식 AI모듈과, 상기 도구 키트에 인지기능검사를 위한 데이터를 전송하고, 상기 도구 키트로부터 수신된 정보를 기초로 인지기능검사를 수행하고, 상기 디스플레이부에 진단결과를 출력하는 인지기능검사 모듈을 포함한다.A dementia diagnosis assistance system using a cognitive function test according to an embodiment of the present invention includes a tool kit for testing the examinee's cognitive function, a display unit for outputting the diagnostic results of the cognitive function test, the tool kit, and the display unit. It includes a server connected to a network, and the tool kit includes a speaker that outputs the cognitive function test questions delivered from the server as voice, a microphone that receives the examinee's voice and transmits it to the server, and the examinee's voice. It is comprised of a touch input unit that receives an evaluation response and transmits it to the server, a graphic kit for performing a cognitive function test, and a photographing unit that photographs a cognitive function test performance screen of the examinee, and the server captures images from the photographing unit. A shape recognition AI module that recognizes the shape of the shape formed by the shape kit based on the image, transmits data for a cognitive function test to the tool kit, and tests cognitive function based on the information received from the tool kit. It includes a cognitive function test module that performs and outputs a diagnosis result to the display unit.

Description

인지기능검사를 이용한 치매진단보조 시스템 및 그 방법{DEMENTIA DIAGNOSIS AID SYSTEM USING COGNITIVE FUCTION TEST AND METHOD THEREOF}Dementia diagnosis assistance system and method using cognitive function test {DEMENTIA DIAGNOSIS AID SYSTEM USING COGNITIVE FUCTION TEST AND METHOD THEREOF}

본 발명은 치매진단보조 시스템 및 그 방법에 관한 것으로, 보다 상세하게는 ICT 기반의 인지기능검사를 이용한 치매진단보조 시스템 및 그 방법에 관한 것이다.The present invention relates to a dementia diagnosis assistance system and method, and more specifically, to a dementia diagnosis assistance system and method using an ICT-based cognitive function test.

중앙치매센터에서 발표한 '대한민국 치매 현황' 통계에 따르면 65세 이상 치매 환자는 2015년 기준 64만 8223명(유병률 9.8%)으로 집계되고 있고 2024년에는 100만명(유병률 10.3%), 2041년에는 200만명(유병률 12.3%)을 넘을 것으로 추정되고 있다.According to the 'Status of Dementia in Korea' statistics released by the Central Dementia Center, the number of dementia patients aged 65 or older is 648,223 (prevalence 9.8%) in 2015, 1 million in 2024 (prevalence 10.3%), and 2041. It is estimated to exceed 2 million people (prevalence rate 12.3%).

통계청 조사자료에 따르면 현재 국내 65세 이상 논인 인구의 20~30% 이상의 문맹자를 지원하는 검사도구가 제한적이며, 문맹 노인들을 대상으로 수검하기가 어렵고, 위양성, 위음성 같은 오진 사례가 나타나고 있는 실정이다. 따라서, 문맹인 치매 환자들에게는 기존의 치매 검사 도구로는 병의 진행 경과와 약물의 효과 등을 추적하기는 매우 어렵다.According to survey data from the National Statistical Office, there are currently limited testing tools available to support illiterate people, who account for more than 20-30% of the population aged 65 or older in Korea. It is difficult to conduct tests for illiterate elderly people, and cases of misdiagnosis such as false positives and false negatives are occurring. Therefore, for illiterate dementia patients, it is very difficult to track the progress of the disease and the effects of drugs using existing dementia screening tools.

또한, 기존의 치매 검사도구는 최소 30분 이상의 장시간의 검사시간이 소요되고, 치매 전문의사 또는 전문교육을 이수한 신경심리사, 임상심리사 등의 전문의료인의 수가 부족하고, 별도의 검사장소가 충분하지 않는 등 치매를 진료할 수 있는 병원이 부족한 상황이다.In addition, existing dementia testing tools require a long testing time of at least 30 minutes, there is a shortage of professional medical professionals such as dementia specialists, neuropsychologists and clinical psychologists who have completed specialized training, and there are not enough separate testing locations. There is a shortage of hospitals that can treat dementia.

치매 치료에서 중요한 것은 조기발견과 예방이며, 약물치료는 빠르면 빠를수록 치매의 진행을 늦출 수 있기 때문에 조기 발견하여 약물치료를 시행하는 것이 유병률을 감소 및 지연시키는 적극적 대응으로 치매 관리비용을 절감시키는 것이 매우 필요하다.What is important in dementia treatment is early detection and prevention, and the sooner drug treatment is administered, the more likely it is to slow down the progression of dementia. Therefore, early detection and drug treatment is an active response to reducing and delaying the prevalence, thereby reducing dementia management costs. Very necessary.

종래기술인 한국공개특허 제10-1848630호(이하 '630특허'로 약칭한다)는 전통카드 게임을 기반으로 인지장애를 진단 및 관리하는 시스템에 관한 것으로서, 고령자 등의 치매 위험군을 대상으로 일상생활에서 재미있는 게임을 기반으로 인지능력 강화 교육을 진행하고, 콘텐츠 서비스의 주요 구성인 치매예방 전통가드 게임에의 참여 과정을 분석하여 인공지능의 진단 알고리즘을 통해 인지장애를 판단하는 구성을 개시하고 있다.Korean Patent Publication No. 10-1848630 (hereinafter abbreviated as '630 Patent'), which is a prior art, relates to a system for diagnosing and managing cognitive impairment based on a traditional card game, and is used in daily life for dementia risk groups such as the elderly. We are providing education to strengthen cognitive abilities based on fun games, and analyzing the participation process in the dementia prevention traditional guard game, which is the main component of the content service, to determine cognitive impairment through an artificial intelligence diagnostic algorithm.

하지만 상기 630특허는 카드게임이라는 특정 게임을 진행하여야 한다는 점에서 카드게임에 능숙한 사람과 능숙하지 않은 사람에 대하여 진단 알고리즘의 신뢰성이 떨어진다는 문제가 있고 인지장애 수준에 따라서 게임 진행을 진행할 수 있는 임계점이 다소 높을 수 있다는 점에서 인지장애 전 영역에 대한 정밀한 검사를 하기에는 한계가 있었다.However, since the above-mentioned 630 patent requires a specific game called a card game to be played, there is a problem that the reliability of the diagnostic algorithm is low for those who are good at card games and those who are not good at it, and there is a critical point at which the game can be played depending on the level of cognitive impairment. Since this may be somewhat high, there are limitations in conducting a detailed examination of all areas of cognitive impairment.

한국공개특허 제10-1848630호(2018.04.09)Korean Patent Publication No. 10-1848630 (2018.04.09)

본 발명은 위와 같은 문제를 해결하기 위한 것으로, 상세하게는 ICT 기반으로 인지기능검사를 이용한 치매진단을 효율적으로 수행할 수 있도록 하는 인지기능검사를 이용한 치매진단보조 시스템 및 그 방법을 제공하는 것을 목적으로 한다.The present invention is intended to solve the above problems, and specifically, the purpose is to provide a dementia diagnosis assistance system and method using a cognitive function test that allows efficient diagnosis of dementia using a cognitive function test based on ICT. Do it as

본 발명의 과제들은 이상에서 언급한 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The problems of the present invention are not limited to the problems mentioned above, and other problems not mentioned will be clearly understood by those skilled in the art from the description below.

상기 과제를 해결하기 위한 본 발명의 일실시예에 따른 인지기능검사를 이용한 치매진단보조 시스템은, 수검자의 인지기능검사를 위한 도구 키트; 인지기능검사의 진단결과를 출력하는 디스플레이부; 및 상기 도구 키트 및 상기 디스플레이부와 네트워크로 연결되는 서버를 포함하고, 상기 도구 키트는, 상기 서버로부터 전달된 인지기능검사용 질문을 음성으로 출력하는 스피커와, 상기 수검자의 음성을 수신하여 상기 서버로 전달하는 마이크와, 상기 수검자의 평가응답을 입력 받아 상기 서버로 전달하는 터치입력부와, 인지기능검사 수행을 위한 도형 키트 및 상기 수검자의 인지기능검사 수행화면을 촬영하는 촬영부를 포함하여 구성되고, 상기 서버는, 상기 촬영부에서 촬영된 이미지를 기반으로 상기 도형 키트가 형성하는 도형의 모양을 인식하는 도형인식 AI모듈과, 상기 도구 키트에 인지기능검사를 위한 데이터를 전송하고, 상기 도구 키트로부터 수신된 정보를 기초로 인지기능검사를 수행하고, 상기 디스플레이부에 진단결과를 출력하는 인지기능검사 모듈을 포함한다.A dementia diagnosis assistance system using a cognitive function test according to an embodiment of the present invention to solve the above problems includes a tool kit for testing the examinee's cognitive function; A display unit that outputs diagnostic results of a cognitive function test; and a server connected to the tool kit and the display unit through a network, wherein the tool kit includes a speaker that outputs a cognitive function test question delivered from the server as a voice, and a speaker that receives the examinee's voice and receives the examinee's voice to the server. It is configured to include a microphone that transmits the test taker's evaluation response, a touch input unit that receives the examinee's evaluation response and transmits it to the server, a figure kit for performing a cognitive function test, and a photographing unit that takes a picture of the examinee's cognitive function test performance screen, The server transmits data for a cognitive function test to the tool kit, a shape recognition AI module that recognizes the shape of the shape formed by the shape kit based on the image captured by the photographing unit, and It includes a cognitive function test module that performs a cognitive function test based on the received information and outputs the diagnosis result to the display unit.

일실시예에서 상기 서버는, 상기 마이크로부터 입력된 상기 수검자의 음성을 인식하여 텍스트 신호로 변환하는 음성인식 AI모듈을 더 포함할 수 있다.In one embodiment, the server may further include a voice recognition AI module that recognizes the examinee's voice input from the microphone and converts it into a text signal.

일실시예에서 상기 음성인식 AI모듈은 상기 수검자의 음성 및 상기 변환된 텍스트 신호를 분석하여 상기 수검자의 발음 및 언어의 시점 별 유사도를 분석할 수 있다.In one embodiment, the voice recognition AI module may analyze the examinee's voice and the converted text signal to analyze the similarity of the examinee's pronunciation and language at each point in time.

일실시예에서 상기 도구 키트는, 통신부, 발광부 및 버튼부를 포함하여 구성되는 복수의 블록 키트를 더 포함하고, 상기 블록 키트는 상기 통신부를 통하여 상기 서버와 통신하고, 상기 서버의 제어 신호 또는 상기 수검자의 상기 버튼부의 누름 동작에 따라 상기 발광부가 발광하도록 구성될 수 있다.In one embodiment, the tool kit further includes a plurality of block kits including a communication unit, a light emitting unit, and a button unit, and the block kit communicates with the server through the communication unit, and receives a control signal from the server or the The light emitting unit may be configured to emit light according to the examinee's pressing operation of the button unit.

일실시예에서 상기 인지기능검사 모듈은 상기 서버가 상기 복수의 블록 키트를 발광시킨 순서 정보와, 상기 블록 키트에서 상기 수검자가 상기 버튼부를 누르는 순서 정보를 비교하여 인지기능을 판단할 수 있다.In one embodiment, the cognitive function test module may determine cognitive function by comparing information on the order in which the server emits light on the plurality of block kits and information on the order in which the examinee presses the button portion in the block kit.

일실시예에서 상기 서버는, 인지기능검사의 질문 및 답변과 관련된 학습 모델 및 도형 인식을 위한 도형인식 모델을 포함하는 데이터베이스를 더 포함하고, 상기 음성인식 AI모듈 및 상기 도형인식 AI모듈은 상기 데이터베이스에 저장된 데이터 및 상기 도구 키트로부터 입력된 정보를 기초로 인공지능 모델을 업데이트할 수 있다.In one embodiment, the server further includes a database including a learning model related to questions and answers of cognitive function tests and a shape recognition model for shape recognition, and the voice recognition AI module and the shape recognition AI module are connected to the database. The artificial intelligence model can be updated based on the data stored in and information input from the tool kit.

일실시예에서 상기 인지기능검사 모듈은 LICA(The Literacy Independent Cognitive Assessment) 또는 K-DSQ(Korean Dementia Screening Questionnaire) 기반의 평가문항을 생성할 수 있다.In one embodiment, the cognitive function test module may generate assessment questions based on LICA (The Literacy Independent Cognitive Assessment) or K-DSQ (Korean Dementia Screening Questionnaire).

일실시예에서 상기 서버는, 상기 터치입력부에 입력된 상기 수검자의 글자를 인식하는 필기체 인식 모듈을 더 포함할 수 있다.In one embodiment, the server may further include a handwriting recognition module that recognizes the examinee's letters input into the touch input unit.

일실시예에서 상기 서버는, 상기 촬영부에서 촬영된 이미지로부터 상기 수검자의 안면을 인식하여 상기 수검자의 신분을 판단하는 안면인식 모듈을 더 포함할 수 있다.In one embodiment, the server may further include a facial recognition module that determines the examinee's identity by recognizing the examinee's face from the image captured by the photographing unit.

일실시예에서 상기 서버는, 상기 수검자별 환경 설정 값을 저장 및 관리하는 환경설정 모듈을 더 포함하고, 상기 환경설정 모듈은 상기 안면인식 모듈에서 판단된 상기 수검자의 신분에 대응되는 환경설정정보를 호출할 수 있다.In one embodiment, the server further includes a configuration module that stores and manages configuration values for each examinee, and the configuration module stores configuration information corresponding to the identity of the examinee determined by the facial recognition module. You can call

또한 본 발명의 일실시예에 따른 인지기능검사를 이용한 치매진단보조 방법은, (a) 서버가 인지기능검사를 위한 평가문항을 스피커를 통하여 음성으로 출력하는 단계; (b) 상기 서버가 마이크를 통하여 상기 수검자의 음성을 수신하는 단계; (c) 상기 서버가 터치입력부를 통하여 상기 수검자의 평가응답을 수신하는 단계; (d) 상기 서버가 촬영부를 통하여 촬영된 이미지를 수신하는 단계; 및 (e) 상기 서버가 상기 수검자의 음성 정보, 상기 수검자의 평가응답 정보 및 상기 촬영된 이미지를 분석하여 파악된 도형의 모양 정보를 기초로 인지기능검사를 수행하는 단계를 포함할 수 있다.In addition, a dementia diagnosis assistance method using a cognitive function test according to an embodiment of the present invention includes the steps of: (a) the server outputting evaluation questions for the cognitive function test as a voice through a speaker; (b) the server receiving the examinee's voice through a microphone; (c) the server receiving the examinee's evaluation response through a touch input unit; (d) the server receiving images captured through a photographing unit; and (e) the server performing a cognitive function test based on the examinee's voice information, the examinee's evaluation response information, and the shape information of the figure identified by analyzing the captured image.

일실시예에서 본 발명의 일실시예에 다른 인지기능검사를 이용한 치매진단보조 방법은, (f) 상기 서버가 통신부, 발광부 및 버튼부를 포함하여 구성되는 복수의 블록 키트에 제어 신호를 전송하여 특정 순서대로 상기 복수의 블록 키트 중 두 개 이상의 블록의 상기 발광부를 발광시키는 단계; (g) 상기 서버가 상기 수검자의 상기 버튼부를 누르는 경우 상기 버튼부의 입력 신호를 수신하는 단계; 및 (h) 상기 서버가 상기 복수의 블록 키트가 발광된 순서 정보와, 상기 수검자가 상기 버튼부를 누르는 순서 정보를 비교하여 인지기능을 판단하는 단계를 더 포함할 수 있다.In one embodiment, the dementia diagnosis assistance method using a cognitive function test according to another embodiment of the present invention is (f) the server transmits a control signal to a plurality of block kits consisting of a communication unit, a light emitting unit, and a button unit, emitting light in the light emitting units of two or more blocks among the plurality of block kits in a specific order; (g) the server receiving an input signal from the button unit when the examinee presses the button unit; and (h) the server comparing information on the order in which the plurality of block kits emit light and information on the order in which the examinee presses the button unit to determine cognitive function.

본 발명의 일실시예에 따른 치매진단보조 시스템 및 그 방법은 ICT 기반으로 인지기능검사를 간편하게 수행하여 수검자의 치매진단을 수행할 수 있도록 할 수 있다.The dementia diagnosis assistance system and method according to an embodiment of the present invention can easily perform a cognitive function test based on ICT to diagnose dementia in an examinee.

본 발명에 따른 효과는 이상에서 예시된 내용에 의해 제한되지 않으며, 더욱 다양한 효과들이 본 명세서 내에 포함되어 있다.The effects according to the present invention are not limited to the contents exemplified above, and further various effects are included in the present specification.

도 1은 본 발명의 일실시예에 따른 치매진단보조 시스템의 개략 구성도이다.
도 2는 도 1의 치매진단보조 시스템의 상세 구성도이다.
도 3은 도 1의 치매진단보조 시스템의 동작을 설명하는 개념도이다.
도 4는 본 발명의 일실시예에 따른 치매진단보조 시스템의 블록 키트의 사시도이다.
도 5는 도 4의 블록 키트를 이용하여 수검자가 검사를 수행하는 예시화면을 나타내는 도면이다.
도 6은 본 발명의 일실시예에 따른 치매진단보조 시스템의 검사 항목을 설명하는 도면이다.
1 is a schematic configuration diagram of a dementia diagnosis assistance system according to an embodiment of the present invention.
Figure 2 is a detailed configuration diagram of the dementia diagnosis assistance system of Figure 1.
FIG. 3 is a conceptual diagram explaining the operation of the dementia diagnosis assistance system of FIG. 1.
Figure 4 is a perspective view of a block kit of a dementia diagnosis assistance system according to an embodiment of the present invention.
FIG. 5 is a diagram illustrating an example screen in which an examinee performs a test using the block kit of FIG. 4.
Figure 6 is a diagram illustrating test items of the dementia diagnosis assistance system according to an embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.The advantages and features of the present invention and methods for achieving them will become clear by referring to the embodiments described in detail below along with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below and may be implemented in various different forms. The present embodiments are merely provided to ensure that the disclosure of the present invention is complete and to be understood by those skilled in the art. It is provided to fully inform those who have the scope of the invention, and the present invention is only defined by the scope of the claims. Like reference numerals refer to like elements throughout the specification.

이하, 본 발명의 실시예들에 따른 스마트 헬스 센서를 이용한 실시간 피트니스 코칭 시스템에 대하여 도면들을 참고하여 설명하도록 한다.Hereinafter, a real-time fitness coaching system using a smart health sensor according to embodiments of the present invention will be described with reference to the drawings.

도 1은 본 발명의 일실시예에 따른 치매진단보조 시스템의 개략 구성도이며, 도 2는 도 1의 치매진단보조 시스템의 상세 구성도이다.Figure 1 is a schematic configuration diagram of a dementia diagnosis assistance system according to an embodiment of the present invention, and Figure 2 is a detailed configuration diagram of the dementia diagnosis assistance system of Figure 1.

도 1 및 도 2를 참조하면, 본 발명의 일실시예에 따른 치매진단보조 시스템은 도구 키트(100), 디스플레이부(200) 및 서버(300)를 포함하여 구성된다.Referring to Figures 1 and 2, the dementia diagnosis assistance system according to an embodiment of the present invention includes a tool kit 100, a display unit 200, and a server 300.

도구 키트(100) 및 디스플레이부(200)는 유선 또는 무선의 네트워크 통신을 통하여 서버(300)와 통신 가능하도록 연결될 수 있다.The tool kit 100 and the display unit 200 may be connected to communicate with the server 300 through wired or wireless network communication.

도구 키트(100)는 수검자의 인지기능검사를 수행하기 위한 다양한 키트로 이루어지며 스피커(100), 마이크(120), 터치입력부(130), 도형 키트(140), 블록 키트(150) 및 촬영부(160)를 포함하여 구성된다.The tool kit 100 consists of various kits for performing a cognitive function test on the examinee, including a speaker 100, a microphone 120, a touch input unit 130, a shape kit 140, a block kit 150, and a photographing unit. It is composed including (160).

스피커(110)는 서버(300)로부터 전달된 인지기능검사용 질문을 음성으로 출력하는 역할을 한다.The speaker 110 serves to output the cognitive function test questions delivered from the server 300 as a voice.

마이크(120)는 수검자의 음성을 수신하여 음성 데이터를 서버(300)로 전달하는 역할을 한다.The microphone 120 serves to receive the examinee's voice and transmit voice data to the server 300.

터치입력부(130)는 수검자의 손 또는 터치펜을 통한 평가응답을 입력 받아 서버(300)로 전달하는 역할을 한다.The touch input unit 130 serves to receive evaluation responses through the examinee's hand or touch pen and transmit them to the server 300.

스피커(100), 마이크(120) 및 터치입력부(130)는 각각 별개의 장치로 구성되는 것도 가능하지만 하나의 장치로 구현하는 것도 가능할 수 있다. 예를 들어, 스피커(100), 마이크(120) 및 터치입력부(130)를 모두 포함하는 태블릿 PC로 구현될 수 있다.The speaker 100, microphone 120, and touch input unit 130 may each be configured as separate devices, but may also be implemented as a single device. For example, it can be implemented as a tablet PC that includes a speaker 100, a microphone 120, and a touch input unit 130.

도형 키트(140)는 수검자가 평가문항에 따라서 대응되는 모양의 도형을 만들 수 있도록 하는 키트이다. 예를 들어, 도형 키트(140)는 도 1에 도시된 바와 같이 성냥개비로 이루어질 수 있으며, 그 외에도 레고 블록, 막대 등 다양한 다른 구성품으로 이루어질 수 있다.The shape kit 140 is a kit that allows the examinee to create shapes of corresponding shapes according to the evaluation questions. For example, the shape kit 140 may be made of matchsticks as shown in FIG. 1, and may also be made of various other components such as Lego blocks and sticks.

블록 키트(150)는 수검자의 인지기능검사 수행을 위한 복수개의 블록으로 이루어지는 키트이다.The block kit 150 is a kit consisting of a plurality of blocks for performing a cognitive function test on an examinee.

도 4를 참조하면 블록 키트(150)는 사각형의 블록 본체(151)의 형상을 가지며, 블록 본체(151)의 일측면에는 숫자가 새겨져 있다. 블록 본체(151)의 상부면에는 버튼부(153)가 배치된다.Referring to FIG. 4, the block kit 150 has the shape of a square block body 151, and a number is engraved on one side of the block body 151. A button portion 153 is disposed on the upper surface of the block body 151.

도 4에 도시되지는 않았지만, 블록 본체(151)의 내부에는 통신부 및 발광부가 배치된다. 블록 키트(150)는 통신부를 통하여 서버(300)와 통신하고, 서버(300)의 제어 신호 또는 수검자의 버튼부(153)의 누름 동작에 따라 발광부가 발광하도록 구성된다. 블록 키트(150)를 이용한 인지기능검사 수행방법은 도 3, 도 5 및 도 6를 참조하여 후술한다.Although not shown in FIG. 4, a communication unit and a light emitting unit are disposed inside the block body 151. The block kit 150 communicates with the server 300 through a communication unit, and the light emitting unit is configured to emit light according to a control signal from the server 300 or a press operation of the button unit 153 by the examinee. A method of performing a cognitive function test using the block kit 150 will be described later with reference to FIGS. 3, 5, and 6.

촬영부(160)는 인지기능검사 수행을 위한 도형 키트(140) 및 수검자의 인지기능검사 수행화면을 촬영하는 역할을 한다. 촬영부(160)는 하나 또는 그 이상의 카메라로 구성될 수 있다.The photographing unit 160 functions to photograph the figure kit 140 for performing a cognitive function test and the examinee's cognitive function test performance screen. The photographing unit 160 may be comprised of one or more cameras.

촬영부(160)에서 촬영된 도형 키트(140)의 영상 이미지 및 수검자의 인지기능검사 수행화면은 서버(300)로 전송 및 분석되어 인지기능검사를 위한 분석 또는 환경설정 제어에 이용된다.The video image of the shape kit 140 captured by the photographing unit 160 and the examinee's cognitive function test performance screen are transmitted and analyzed to the server 300 and used for analysis or environmental setting control for the cognitive function test.

디스플레이부(200)는 서버(300)로부터 전달되는 다양한 정보를 출력하는 역할을 한다. 예를 들어, 디스플레이부(200)는 인지기능검사에 대응되는 평가문항과 관련된 정보를 출력하거나 인지기능검사의 진단결과를 출력할 수 있다.The display unit 200 serves to output various information transmitted from the server 300. For example, the display unit 200 may output information related to evaluation questions corresponding to a cognitive function test or output a diagnosis result of the cognitive function test.

서버(300)는 인지기능검사를 위한 미리 구축된 프로그램이 탑재된 서버 컴퓨터를 의미한다. 서버(300)는 유선 또는 무선의 네트워크로 도구 키트(100) 및 디스플레이부(200)에 연결되며, 도구 키트(100) 및 디스플레이부(200)에 인지기능검사와 관련된 다양한 정보를 제공한다.The server 300 refers to a server computer loaded with a pre-built program for cognitive function testing. The server 300 is connected to the tool kit 100 and the display unit 200 through a wired or wireless network, and provides various information related to cognitive function tests to the tool kit 100 and the display unit 200.

이때, 서버(300)에는 인지기능검사를 위한 서버 프로그램이 설치될 수 있으며, 도구 키트(100) 중 일부 구성 또는 디스플레이부(200)에는 클라이언트 프로그램이 설치될 수 있다. At this time, a server program for cognitive function testing may be installed in the server 300, and a client program may be installed in some components of the tool kit 100 or the display unit 200.

도 1에서 PC가 서버(300)로 도시되어 있지만 이는 일실시예일 뿐이며, 서버(300)는 원격지에 설치되고, PC가 서버(300)에서 제공하는 클라이언트 프로그램이 설치된 컴퓨터로 구성될 수도 있을 것이다. 클라이언트 프로그램은 터치입력부(130) 등의 구성에도 설치될 수 있다.Although the PC is shown as the server 300 in FIG. 1, this is only an example. The server 300 may be installed in a remote location, and the PC may be configured as a computer with a client program provided by the server 300 installed. The client program may also be installed in components such as the touch input unit 130.

서버(300)는 음성인식 AI모듈(310), 도형인식 AI모듈(320), 필기체인식 모듈(330), 안면인식 모듈(340), 인지기능검사 모듈(350), 환경설정 모듈(360) 및 데이터베이스(370)를 포함하여 구성된다.The server 300 includes a voice recognition AI module 310, a shape recognition AI module 320, a handwriting recognition module 330, a facial recognition module 340, a cognitive function test module 350, an environment settings module 360, and It is configured to include a database 370.

음성인식 AI모듈(310)은 마이크(120)로부터 입력된 수검자의 음성을 인식하여 텍스트로 변환하는 역할을 한다. The voice recognition AI module 310 recognizes the examinee's voice input from the microphone 120 and converts it into text.

이때, 텍스트 변환은 STT(Speech to Text) 모듈을 이용하여 수행될 수 있으며, 특히 STT 모듈은 구글 또는 마이크로소프트사에 의해 공개된 오픈소스 STT 모듈을 이용하여 수행될 수 있다.At this time, text conversion can be performed using an STT (Speech to Text) module. In particular, the STT module can be performed using an open source STT module released by Google or Microsoft.

또한, 음성인식 AI모듈(310)은 변환된 텍스트 정보를 분석하여 수검자의 발음 및 언어의 시점 별 유사도를 분석할 수 있도록 구성될 수 있다. 즉, 수검자의 음성 신호 및 텍스트 신호를 시점별로 분석하여 동일한 수검자의 언어 능력의 시점 별 변화를 분석하여 인지기능을 판별할 수 있다.Additionally, the voice recognition AI module 310 may be configured to analyze the similarity of the examinee's pronunciation and language at each point in time by analyzing the converted text information. In other words, cognitive function can be determined by analyzing the examinee's voice signal and text signal at each point in time and analyzing changes in the same examinee's language ability at each point in time.

이때, 음성인식 AI모듈(310)은 사투리, 유사어 등을 포함한 수검자의 텍스트 신호를 분석하여 인지기능을 판별할 수 있다.At this time, the voice recognition AI module 310 can determine cognitive function by analyzing the text signal of the examinee, including dialect, similar words, etc.

도형인식 AI모듈(320)은 촬영부(160)에서 촬영된 이미지를 기반으로 도형 키트(140)가 형성하는 도형의 모양을 인식하는 역할을 하며, OpenCV를 활용하여 구성될 수 있다.The shape recognition AI module 320 serves to recognize the shape of the shape formed by the shape kit 140 based on the image captured by the photographing unit 160, and can be configured using OpenCV.

예를 들어, 도형 키트(140)가 성냥 개비인 경우에 서버(300)가 인지기능검사 질문 내지 요청 사항에서 언급한 도형의 모양대로 수검자는 성냥 개비의 모양을 바꿀 수 있으며, 촬영부(160)는 수검자가 만든 성냥 개비의 모양에 대한 이미지를 촬영하여 도형인식 AI모듈(320)로 전달하고, 도형인식 AI모듈(320)은 구축된 학습모델을 기반으로 도형의 모양을 요청한 모양대로 잘 형성하였는지를 판단할 수 있다.For example, if the shape kit 140 is a match, the examinee can change the shape of the match according to the shape of the shape mentioned in the cognitive function test questions or requests by the server 300, and the photographing unit 160 Takes an image of the shape of the match made by the examinee and transmits it to the shape recognition AI module 320, and the shape recognition AI module 320 determines whether the shape of the shape was well formed as requested based on the constructed learning model. You can judge.

필기체인식 모듈(330)은 터치입력부(130)에 입력된 수검자의 글자를 인식하는 역할을 한다. 이때, 필기체인식 모듈(330)은 미리 구축된 학습 모델을 기반으로 수검자의 입력 데이터를 기반으로 학습 모델을 업데이트하는 방식으로 인식률을 향상시킬 수 있다.The handwriting recognition module 330 serves to recognize the examinee's letters entered into the touch input unit 130. At this time, the handwriting recognition module 330 can improve the recognition rate by updating the learning model based on the examinee's input data based on a pre-built learning model.

안면인식 모듈(340)은 촬영부(160)에서 촬영된 이미지로부터 수검자의 안면을 인식하여 수검자의 인분을 판단하는 역할을 한다. 이때, 안면인식 모듈(340)은 기 공지된 안면인식 기술을 활용할 수 있다.The facial recognition module 340 functions to recognize the examinee's face from the image captured by the photographing unit 160 and determine the examinee's identity. At this time, the facial recognition module 340 may utilize known facial recognition technology.

인지기능검사 모듈(350)은 도구 키트(100)로부터 수신된 정보를 기초로 인지기능검사를 수행하고, 분석된 결과를 디스플레이부(200)에 출력하는 역할을 한다.The cognitive function test module 350 performs a cognitive function test based on information received from the tool kit 100 and outputs the analyzed results to the display unit 200.

인지기능검사 모듈(350)는 평가대상항목에 따른 다양한 평가모델을 구축하고, 이를 이용해 인지기능검사를 수행할 수 있다.The cognitive function test module 350 can build various evaluation models according to evaluation target items and perform cognitive function tests using them.

인지기능검사 모듈(350)은 LICA(The Literacy Independent Cognitive Assessment) 또는 K-DSQ(Korean Dementia Screening Questionnaire) 기반의 평가문항을 생성할 수 있도록 구성될 수 있다.The cognitive function test module 350 may be configured to generate evaluation questions based on LICA (The Literacy Independent Cognitive Assessment) or K-DSQ (Korean Dementia Screening Questionnaire).

환경설정 모듈(360)은 수검자별 환경 설정 값을 저장 및 관리하는 역할을 한다. 즉, 서버(300)는 클라이언트 프로그램에 인지기능검사와 관련된 환경을 설정할 수 있는 화면을 제공할 수 있으며, 환경설정 모듈(360)는 수검자별 환경 설정 값을 저장할 수 있다.The environment setting module 360 serves to store and manage the environment setting values for each examinee. That is, the server 300 can provide the client program with a screen for setting the environment related to the cognitive function test, and the environment setting module 360 can store the environment setting values for each examinee.

또한, 환경설정 모듈(360)은 안면인식 모듈(340)에서 판단된 수검자의 신분에 대응되는 환경설정정보를 호출하도록 구성되어 수검자별 환경설정을 자동으로 변경할 수 있도록 할 수 있다.In addition, the environment setting module 360 is configured to call the environment setting information corresponding to the identity of the examinee determined by the facial recognition module 340, so that the environment settings for each examinee can be automatically changed.

데이터베이스(370)는 음성인식 AI모듈(310), 도형인식 AI모듈(320), 필기체인식 모듈(330), 안면인식 모듈(340), 인지기능검사 모듈(350) 및 환경설정 모듈(360)과 관련된 인공지능 학습모델과 관련된 백그라운드 데이터 및 이를 이용한 처리 값들을 저장하는 역할을 한다.The database 370 includes a voice recognition AI module 310, a shape recognition AI module 320, a handwriting recognition module 330, a facial recognition module 340, a cognitive function test module 350, and an environment settings module 360. It serves to store background data related to related artificial intelligence learning models and processing values using it.

데이터베이스(370)에 저장되는 데이터들은 미리 수집되어 구축될 수 있지만, 인터넷을 통하여 데이터를 스크래핑하는 등의 방식으로 업데이트될 수 있으며, 수검자의 인지기능검사의 수행 중에 도구 키트(100)로부터 입력되는 데이터를 반영하여 업데이트 될 수 있다.Data stored in the database 370 may be collected and constructed in advance, but may be updated through methods such as scraping data through the Internet, and data input from the tool kit 100 while performing a cognitive function test on the examinee. It can be updated to reflect.

도 3은 도 1의 치매진단보조 시스템의 동작을 설명하는 개념도이다.FIG. 3 is a conceptual diagram explaining the operation of the dementia diagnosis assistance system of FIG. 1.

도구 키트(100)가 검사 스테이지(S)에 배치된 상태에서 검사가 시작되면 마이크(120)에 인지기능검사 진행과 관련된 평가문항이 음성으로 출력된다. 이때, 평가문항의 음성 출력은 TTS(Text to Speech) 모듈에 의하여 처리될 수 있으며, TTS 모듈은 구글 또는 마이크로소프트사 등에 의하여 공개된 오픈소스 모듈일 수 있다.When the test begins with the tool kit 100 placed on the test stage (S), evaluation questions related to the cognitive function test progress are output as voices through the microphone 120. At this time, the audio output of the evaluation questions may be processed by a Text to Speech (TTS) module, and the TTS module may be an open source module released by Google or Microsoft, etc.

평가검사항목에 따라 수검자는 음성으로 답하거나, 블록 키트(150)를 조작하거나, 도형 키트(140)를 조작하여 도형을 만들 수 있다.Depending on the evaluation test items, the examinee can answer vocally, manipulate the block kit 150, or manipulate the shape kit 140 to create a shape.

수검자가 음성을 출력하면 음성인식 AI모듈(310)은 음성을 인식하여 텍스트로 변환하여 서버(300)로 전달한다.When the examinee outputs a voice, the voice recognition AI module 310 recognizes the voice, converts it into text, and transmits it to the server 300.

수검자가 숫자가 표시된 블록 키트(150)의 버튼부(153)를 누르는 등의 조작을 하는 경우 버튼부(153)의 입력 신호는 서버(300)로 전달된다.When the examinee performs an operation such as pressing the button unit 153 of the block kit 150 with a number displayed, the input signal from the button unit 153 is transmitted to the server 300.

또한, 수검자가 도형 키트(140)로 특정 도형 모양을 만든 경우 촬영부(160)는 도형 키트(140)를 포함하는 이미지 정보를 서버(300)로 전달한다.Additionally, when the examinee creates a specific shape using the shape kit 140, the photographing unit 160 transmits image information including the shape kit 140 to the server 300.

서버(300)는 서버 프로그램을 통하여 수신된 데이터들을 데이터베이스(370)에 저장된 데이터와 비교, 분석하여 결과값 즉, 인지기능평가 진단결과를 출력하여 클라이언트 프로그램으로 전달한다.The server 300 compares and analyzes the data received through the server program with the data stored in the database 370, outputs the result, that is, the cognitive function evaluation diagnosis result, and transmits it to the client program.

이때, 진단결과는 디스플레이부(200)에 출력될 수 있다.At this time, the diagnosis result may be output to the display unit 200.

검사 과정 중 일부의 단계만이 진행된 경우에는 각 단계별 결과값이 출력되고 다음 검사를 위한 출력 값들이 각 도구 키트(100)에 다시 출력될 수 있다.When only some steps of the test process are performed, the results for each step are output, and the output values for the next test can be output again to each tool kit 100.

도 6은 본 발명의 일실시예에 따른 치매진단보조 시스템의 검사 항목을 설명하는 도면이다.Figure 6 is a diagram illustrating test items of the dementia diagnosis assistance system according to an embodiment of the present invention.

본 발명의 치매진단보조 시스템은 수검자의 기억력, 시공간구성력, 언어력, 수행기능력, 주의력, 계산력 등의 인지기능을 평가하는 다양한 소검사들을 수행하도록 구성될 수 있다.The dementia diagnosis assistance system of the present invention can be configured to perform various subtests that evaluate the examinee's cognitive functions such as memory, spatiotemporal ability, language ability, executive ability, attention, and calculation ability.

도 6을 참조하면, 기억력 검사의 경우 '단어회상검사' 및 '막대재인검사'로 이루어진다. '단어회상검사'는 음성을 듣고 바로 따라하는 '즉각회상', 일정시간 경과 후 따라하는 '지연회상', 일정시간 경과 후 보기에서 선택하는 “재인검사'로 이루어진다. '막대재인검사'는 특정 이미지를 보여주고 질문에 대한 YES/NO 답변을 요구하는 검사이다.Referring to Figure 6, the memory test consists of a 'word recall test' and a 'rod recognition test'. The 'word recall test' consists of 'immediate recall', which involves listening to a voice and immediately following it, 'delayed recall', which involves following the word after a certain period of time, and a 'recognition test', which involves selecting from a view after a certain period of time has elapsed. A 'stick recognition test' is a test that shows a specific image and requires YES/NO answers to questions.

언어력 검사는 사진을 보여주고 이름을 맞추는 '이름대기검사'와, 올바른 사진을 고르는 '진짜맞추기'로 이루어진다.The language test consists of a 'name waiting test' where a picture is shown and the child guesses the name, and a 'real guess' test where the child chooses the correct picture.

시각적구성 검사는 사진을 보여주고 따라 만들기를 하는 '막대 구성검사'로 이루어진다.The visual composition test consists of a 'stick composition test' in which a picture is shown and students are asked to follow along.

집행기능검사는 숫자스트룹을 보여주고 숫자를 읽고 숫자의 개수를 말하는 '숫자스트룹'과 빨리 동물의 이름을 말하는 '동물이름대기'로 이루어진다.The executive function test consists of 'Number Stroop', which shows a number Stroop, reads the number, and tells the number of numbers, and 'Animal Naming', which quickly says the name of an animal.

특히, 시각적구성 검사 관련하여 본 발명의 인지기능검사를 이용한 치매진단보조 시스템은 도구 키트(100) 중 도형 키트(140)가 이용되며, 수검자는 도형 키트(140)를 원하는 모양으로 만들고, 촬영부(160)가 도형 키트(140)의 이미지 데이터를 서버(300)로 전송하고, 서버(300)의 상기 설명한 바와 같은 방법으로 도형 모양을 판단함으로써 시각적구성 능력을 판단할 수 있다.In particular, in relation to the visual composition test, the dementia diagnosis assistance system using the cognitive function test of the present invention uses the shape kit 140 among the tool kit 100, and the examinee shapes the shape kit 140 into the desired shape, and the imaging unit 160 transmits the image data of the shape kit 140 to the server 300, and the server 300 determines the shape of the shape in the same manner as described above, thereby determining the visual composition ability.

또한, 본 발명의 인지기능검사를 이용한 치매진단보조 시스템은 블록 키트(150)를 활용한 시공간 주의력 검사를 수행할 수 있다. In addition, the dementia diagnosis assistance system using the cognitive function test of the present invention can perform a spatiotemporal attention test using the block kit 150.

시공간 주의력 테스트는 도 5와 같이 블록 키트(150)가 복수 개로 구성된 키트를 이용하여 수행될 수 있다. 예를 들어, 블록 키트(150)는 1부터 9까지 숫자가 새겨진 9 개의 블록으로 이루어질 수 있다.The spatiotemporal attention test can be performed using a kit consisting of a plurality of block kits 150, as shown in FIG. 5. For example, the block kit 150 may be comprised of 9 blocks numbered from 1 to 9.

9개의 블록은 블록판 위에 배치될 수 있는데, 블록판에는 블록 키트(150)와 시리얼 통신 등의 방식으로 통신할 수 있도록 하는 통신 모듈이 구비될 수 있다. 이러한 방식의 경우 블록판은 블록 키트(150) 및 서버(300)와 통신 가능하도록 구성될 수 있다.Nine blocks may be placed on a block board, and the block board may be equipped with a communication module that allows communication with the block kit 150 using a method such as serial communication. In this case, the block board can be configured to communicate with the block kit 150 and the server 300.

블록 키트(150)를 이용한 시공간 주의력 검사는 시공간 주의폭(바로 따라하기) 검사와 시공간적 작업기억(거꾸로 따라하기) 검사를 포함한다. The visuospatial attention test using the block kit 150 includes a visuospatial attention span (direct copying) test and a visuospatial working memory (reverse copying) test.

시공간 주의폭 검사와 관련된 기본적인 설명은 스피커(110)를 통하여 TTS 모듈을 통하여 음성으로 출력한다.The basic explanation related to the spatiotemporal attention span test is output as a voice through the TTS module through the speaker 110.

수검자는 안내 음성을 듣고 시공간 주의폭 검사를 수행할 준비를 한다. 이때, 수검자는 음성으로 안내되거나 시각적으로 표시되는 숫자에 대하여 블록 키트(150)의 블록을 순서대로 누를 수 있다.The examinee listens to the guidance voice and prepares to perform the spatiotemporal attention span test. At this time, the examinee may sequentially press the blocks of the block kit 150 for numbers guided by voice or displayed visually.

예를 들어, 스피커(110)를 통하여 순서대로 숫자를 불러주면, 이를 기억하여 수검자는 해당 숫자에 해당하는 블록 키트(150)의 버튼부(153)를 순서대로 누를 수 있다.For example, if numbers are called out in order through the speaker 110, the examinee can remember them and press the buttons 153 of the block kit 150 corresponding to the numbers in order.

다른 방법으로, 블록 키트(150) 중 특정 숫자를 약 1초 간격으로 발광부를 발광시켜 밝게 하면, 수검자는 불이 켜지는 블록을 기억한 후 블록 키트(150)의 버튼부(153)를 순서대로 누를 수 있다.In another method, when a specific number in the block kit 150 is brightened by emitting light at intervals of about 1 second, the examinee memorizes the block that lights up and then presses the button part 153 of the block kit 150 in order. You can press it.

도 5는 수검자가 숫자 3이 새겨진 블록 키트(150)의 버튼부(153)를 눌러서 발광부가 발광한 상태를 도시하고 있다. Figure 5 shows a state in which the light emitting unit emits light when the examinee presses the button unit 153 of the block kit 150 with the number 3 engraved on it.

시공간 주의폭 검사의 채점표는 아래 표 1과 같이 각 자리수별 질문사항 및 채점을 수행할 수 있다.The scoring table for the spatiotemporal attention span test allows questions and scoring for each digit as shown in Table 1 below.

상기 설명한 바와 같이 음성으로 숫자를 출력하거나 블록 키트(150)의 발광부를 발광시키는 방식으로 수검자에게 요청사항을 전달하며, 사용자가 블록 키트(150)의 버튼부(153)를 누르는 순서 정보는 블록 키트(150)의 통신부를 통하여 서버(300)로 자동으로 전송된다.As described above, the request is delivered to the examinee by outputting a number by voice or making the light emitting part of the block kit 150 emit light, and information on the order in which the user presses the button part 153 of the block kit 150 is provided by the block kit 150. It is automatically transmitted to the server 300 through the communication unit of 150.

각 질문에 대하여 정답을 입력한 경우 1점을 주고, 오답인 경우에는 0점을 주며, 총점은 모든 점수를 더해서 계산된다.For each question, 1 point is given for a correct answer, 0 points are given for an incorrect answer, and the total score is calculated by adding all points.

폭점수는 한번이라도 성공한 최대 자리수로 선택된다.The width score is selected as the maximum number of digits successfully achieved at least once.

반대로 거꾸로 따라하기 검사에 해당하는 시공간적 작업기억 검사는 아래의 표 2와 같이 이루어질 수 있다.Conversely, the visuospatial working memory test corresponding to the backward copying test can be performed as shown in Table 2 below.

시공간적 작업기억 검사는 정답이 질문의 숫자의 순서와 반대로 된다는 것을 제외하고는 총점 및 폭점수 계산 방법 등은 모두 동일하다.In the visuospatial working memory test, the total score and width score calculation methods are the same, except that the correct answer is the opposite of the order of the numbers in the question.

본 발명의 일실시예에 따른 인지기능검사를 이용한 치매진단보조 시스템은 상기와 같이 서버(300)와 통신할 수 있는 블록 키트(150)를 이용하여 시공간 주의력을 자동화하여 평가할 수 있다.The dementia diagnosis assistance system using a cognitive function test according to an embodiment of the present invention can automatically evaluate spatiotemporal attention using a block kit 150 that can communicate with the server 300 as described above.

본 발명의 일실시예에 따른 인지기능검사를 이용한 치매진단보조 시스템은 상기 인지기능검사를 수행하며, 아래 표 3와 같은 다양한 질문 시나리오를 진행할 수 있도록 구성될 수 있다.The dementia diagnosis assistance system using a cognitive function test according to an embodiment of the present invention performs the cognitive function test and can be configured to proceed with various question scenarios as shown in Table 3 below.

상기 질문 시나리오는 아래와 표 4와 같은 카테고리로 세부 분류될 수 있다.The above question scenarios can be further classified into categories as shown in Table 4 below.

상기 표 4에 따른 14개의 소검사들은 LICA(The Literacy Independent Cognitive Assessment) 또는 K-DSQ(Korean Dementia Screening Questionnaire) 기반의 평가문항을 포함할 수 있으며, 해당 평가문항은 기존의 LICA 및 K-DSQ에 기반하여 프로그램화되어 구동될 수 있도록 구축될 수 있다.The 14 subtests according to Table 4 above may include evaluation questions based on LICA (The Literacy Independent Cognitive Assessment) or K-DSQ (Korean Dementia Screening Questionnaire), and the corresponding evaluation questions are based on the existing LICA and K-DSQ. It can be built so that it can be programmed and driven.

본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.Those skilled in the art to which the present invention pertains will understand that the present invention can be implemented in other specific forms without changing its technical idea or essential features. Therefore, the embodiments described above should be understood in all respects as illustrative and not restrictive. The scope of the present invention is indicated by the claims described below rather than the detailed description above, and all changes or modified forms derived from the meaning and scope of the claims and their equivalent concepts should be construed as being included in the scope of the present invention. do.

100: 도구 키트 110: 스피커
120: 마이크 130: 터치입력부
140: 도형 키트 150: 블록 키트
151: 블록 본체 153: 버튼부
160: 촬영부 200: 디스플레이부
300: 서버 310: 음성인식 AI모듈
320: 도형인식 AI모듈 330: 필기체인식 모듈
340: 안면인식 모듈 350: 인지기능검사 모듈
360: 환경설정 모듈 370: 데이터베이스
100: Tool Kit 110: Speaker
120: Microphone 130: Touch input unit
140: Shape kit 150: Block kit
151: Block body 153: Button portion
160: shooting unit 200: display unit
300: Server 310: Voice recognition AI module
320: Shape recognition AI module 330: Handwriting recognition module
340: Face recognition module 350: Cognitive function test module
360: Environment setting module 370: Database

Claims (12)

수검자의 인지기능검사를 위한 도구 키트;
인지기능검사의 진단결과를 출력하는 디스플레이부; 및
상기 도구 키트 및 상기 디스플레이부와 네트워크로 연결되는 서버를 포함하고,
상기 도구 키트는, 상기 서버로부터 전달된 인지기능검사용 질문을 음성으로 출력하는 스피커와, 상기 수검자의 음성 정보를 수신하여 상기 서버로 전달하는 마이크와, 상기 수검자의 평가응답을 입력 받아 상기 서버로 전달하는 터치입력부와, 인지기능검사 수행을 위한 도형 키트 및 복수의 블록 키트와, 상기 수검자의 인지기능검사 수행화면을 촬영하는 촬영부를 포함하여 구성되고,
상기 서버는, 상기 촬영부에서 촬영된 이미지를 기반으로 상기 도형 키트가 형성하는 도형의 모양을 인식하는 도형인식 AI모듈과, 상기 마이크로부터 입력된 상기 수검자의 음성 정보를 인식하여 텍스트 정보로 변환하는 음성인식 AI모듈과, 상기 도구 키트에 인지기능검사를 위한 데이터를 전송하고, 상기 도구 키트로부터 수신된 정보를 기초로 인지기능검사를 수행하고, 상기 디스플레이부에 진단결과를 출력하는 인지기능검사 모듈을 포함하고,
상기 복수의 블록 키트는 통신부, 발광부 및 버튼부를 구비하고, 일측면에는 숫자가 새겨져 있고, 상부면에는 상기 버튼부가 배치되는 블록 본체를 포함하여 구성되고, 상기 통신부를 통하여 상기 서버와 통신하고, 상기 서버의 제어 신호 또는 상기 수검자의 상기 버튼부의 누름 동작에 따라 상기 발광부가 발광하도록 구성되고,
상기 음성인식 AI모듈은 상기 수검자의 음성 정보 및 상기 변환된 텍스트 정보를 분석하여 상기 수검자의 발음 및 언어의 시점 별 유사도를 분석하여 인지기능을 판별하고,
상기 인지기능검사 모듈은 상기 서버가 상기 복수의 블록 키트를 발광시킨 순서 정보와, 상기 블록 키트에서 상기 수검자가 상기 버튼부를 누르는 순서 정보를 비교하여 시공간 주의력을 평가하는 인지기능검사를 이용한 치매진단보조 시스템.
A tool kit for testing the examinee's cognitive function;
A display unit that outputs diagnostic results of a cognitive function test; and
Includes a server connected to the tool kit and the display unit through a network,
The tool kit includes a speaker that outputs the cognitive function test questions delivered from the server as voice, a microphone that receives the examinee's voice information and transmits it to the server, and receives the examinee's evaluation response and sends it to the server. It is composed of a touch input unit that transmits a touch input unit, a shape kit and a plurality of block kits for performing a cognitive function test, and a photographing unit that takes a picture of the examinee's cognitive function test performance screen,
The server includes a shape recognition AI module that recognizes the shape of the shape formed by the shape kit based on the image captured by the photographing unit, and a shape recognition AI module that recognizes the examinee's voice information input from the microphone and converts it into text information. A voice recognition AI module and a cognitive function test module that transmits data for a cognitive function test to the tool kit, performs a cognitive function test based on the information received from the tool kit, and outputs the diagnosis result to the display unit. Including,
The plurality of block kits include a block body having a communication unit, a light emitting unit, and a button unit, a number engraved on one side, and the button unit being disposed on an upper surface, and communicating with the server through the communication unit. , the light emitting unit is configured to emit light according to a control signal from the server or a pressing operation of the button unit by the examinee,
The voice recognition AI module analyzes the examinee's voice information and the converted text information to determine cognitive function by analyzing the similarity of the examinee's pronunciation and language at each point in time,
The cognitive function test module assists dementia diagnosis using a cognitive function test that evaluates spatiotemporal attention by comparing information on the order in which the server emits the plurality of block kits and information on the order in which the examinee presses the button part in the block kit. system.
삭제delete 삭제delete 삭제delete 삭제delete 제1항에 있어서,
상기 서버는, 인지기능검사의 질문 및 답변과 관련된 학습 모델 및 도형 인식을 위한 도형인식 모델을 포함하는 데이터베이스를 더 포함하고,
상기 음성인식 AI모듈 및 상기 도형인식 AI모듈은 상기 데이터베이스에 저장된 데이터 및 상기 도구 키트로부터 입력된 정보를 기초로 인공지능 모델을 업데이트하는 인지기능검사를 이용한 치매진단보조 시스템.
According to paragraph 1,
The server further includes a database including a learning model related to questions and answers of cognitive function tests and a shape recognition model for shape recognition,
A dementia diagnosis assistance system using a cognitive function test in which the voice recognition AI module and the shape recognition AI module update an artificial intelligence model based on data stored in the database and information input from the tool kit.
제1항에 있어서,
상기 인지기능검사 모듈은 LICA(The Literacy Independent Cognitive Assessment) 또는 K-DSQ(Korean Dementia Screening Questionnaire) 기반의 평가문항을 생성하는 인지기능검사를 이용한 치매진단보조 시스템.
According to paragraph 1,
The cognitive function test module is a dementia diagnosis assistance system using a cognitive function test that generates evaluation questions based on LICA (The Literacy Independent Cognitive Assessment) or K-DSQ (Korean Dementia Screening Questionnaire).
제1항에 있어서,
상기 서버는, 상기 터치입력부에 입력된 상기 수검자의 글자를 인식하는 필기체 인식 모듈을 더 포함하는 인지기능검사를 이용한 치매진단보조 시스템.
According to paragraph 1,
The server further includes a handwriting recognition module that recognizes the examinee's letters input into the touch input unit.
제1항에 있어서,
상기 서버는, 상기 촬영부에서 촬영된 이미지로부터 상기 수검자의 안면을 인식하여 상기 수검자의 신분을 판단하는 안면인식 모듈을 더 포함하는 인지기능검사를 이용한 치매진단보조 시스템.
According to paragraph 1,
The server further includes a facial recognition module that recognizes the examinee's face from the image captured by the photographing unit and determines the examinee's identity.
제9항에 있어서,
상기 서버는, 상기 수검자에 대응되는 인지기능검사와 관련된 환경 설정 값을 저장 및 관리하는 환경설정 모듈을 더 포함하고,
상기 환경설정 모듈은 상기 안면인식 모듈에서 판단된 상기 수검자의 신분에 대응되는 환경설정정보를 호출하는 인지기능검사를 이용한 치매진단보조 시스템.
According to clause 9,
The server further includes an environment setting module that stores and manages environment setting values related to the cognitive function test corresponding to the examinee,
The preference module is a dementia diagnosis assistance system using a cognitive function test that calls preference information corresponding to the identity of the examinee determined by the facial recognition module.
(a) 서버가 인지기능검사를 위한 평가문항을 스피커를 통하여 음성으로 출력하는 단계;
(b) 상기 서버가 마이크를 통하여 수검자의 음성 정보를 수신하는 단계;
(c) 상기 서버가 수신된 상기 수검자의 음성 정보를 텍스트 정보로 변환하는 단계;
(d) 상기 서버가 터치입력부를 통하여 상기 수검자의 평가응답을 수신하는 단계;
(e) 상기 서버가 촬영부를 통하여 촬영된 이미지를 수신하는 단계;
(f) 상기 서버가 통신부, 발광부 및 버튼부를 구비하고, 일측면에는 숫자가 새겨져 있고, 상부면에는 상기 버튼부가 배치되는 블록 본체를 포함하여 구성되는 복수의 블록 키트에 제어 신호를 전송하여 특정 순서대로 상기 복수의 블록 키트 중 두 개 이상의 블록의 상기 발광부를 발광시키는 단계;
(g) 상기 서버가 상기 수검자가 상기 버튼부를 누르는 경우의 상기 버튼부의 입력 신호를 수신하는 단계; 및
(e) 상기 서버가 상기 수검자의 음성 정보, 상기 변환된 텍스트 정보, 상기 수검자의 평가응답 정보, 상기 촬영된 이미지를 분석하여 파악된 도형의 모양 정보 및 상기 버튼부의 입력 신호를 기초로 인지기능검사를 수행하는 단계를 포함하고,
상기 (e) 단계는,
상기 서버가 상기 수검자의 음성 정보 및 상기 변환된 텍스트 정보를 분석하여 상기 수검자의 발음 및 언어의 시점 별 유사도를 분석하여 인지기능을 판별하는 단계; 및
상기 서버가 상기 복수의 블록 키트를 발광시킨 순서 정보와, 상기 블록 키트에서 상기 수검자가 상기 버튼부를 누르는 순서 정보를 비교하여 시공간 주의력을 평가하는 단계를 포함하는 인지기능검사를 이용한 치매진단보조 방법.
(a) a step where the server outputs evaluation questions for a cognitive function test as a voice through a speaker;
(b) the server receiving the examinee's voice information through a microphone;
(c) the server converting the received voice information of the examinee into text information;
(d) the server receiving the examinee's evaluation response through a touch input unit;
(e) the server receiving images captured through a photographing unit;
(f) The server transmits a control signal to a plurality of block kits including a block body having a communication unit, a light emitting unit, and a button unit, a number engraved on one side, and the button unit being placed on the upper surface. emitting light in the light emitting units of two or more blocks among the plurality of block kits in a specific order;
(g) the server receiving an input signal from the button unit when the examinee presses the button unit; and
(e) The server performs a cognitive function test based on the examinee's voice information, the converted text information, the examinee's evaluation response information, the shape information of the figure identified by analyzing the captured image, and the input signal from the button unit. Including steps for performing,
In step (e),
The server analyzing the examinee's voice information and the converted text information to analyze the similarity of the examinee's pronunciation and language at each point in time to determine cognitive function; and
Dementia diagnosis assistance method using a cognitive function test comprising the step of evaluating spatiotemporal attention by comparing information on the order in which the server emits light on the plurality of block kits and information on the order in which the examinee presses the button portion in the block kit.
삭제delete
KR1020210148209A 2021-11-01 2021-11-01 Dementia diagnosis aid system using cognitive fuction test and method thereof KR102577906B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210148209A KR102577906B1 (en) 2021-11-01 2021-11-01 Dementia diagnosis aid system using cognitive fuction test and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210148209A KR102577906B1 (en) 2021-11-01 2021-11-01 Dementia diagnosis aid system using cognitive fuction test and method thereof

Publications (2)

Publication Number Publication Date
KR20230063204A KR20230063204A (en) 2023-05-09
KR102577906B1 true KR102577906B1 (en) 2023-09-14

Family

ID=86408531

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210148209A KR102577906B1 (en) 2021-11-01 2021-11-01 Dementia diagnosis aid system using cognitive fuction test and method thereof

Country Status (1)

Country Link
KR (1) KR102577906B1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120258436A1 (en) * 2011-04-08 2012-10-11 Case Western Reserve University Automated assessment of cognitive, fine-motor, and memory skills
KR102272850B1 (en) * 2021-02-22 2021-07-05 서영철 multi table type cognitive training device using artificial intelligence and method for player cognition using the same
KR102288797B1 (en) * 2020-12-30 2021-08-11 (주)레벤그리다한국문화다양성연구원 Cognitive test system

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101727733B1 (en) * 2015-04-27 2017-05-02 한국생산기술연구원 System and Method for Recognizing Blocks using Optical Structure
KR101848630B1 (en) 2017-09-06 2018-04-13 주식회사 유비플러스 Diagnosis and management system based on traditional card game
KR102199178B1 (en) * 2019-06-03 2021-01-06 계명대학교 산학협력단 Identification system for face recognition using tprl algorithm and its way to working
KR102296878B1 (en) * 2019-12-20 2021-09-02 주식회사 에듀템 Foreign language learning evaluation device
KR20210091495A (en) * 2020-01-14 2021-07-22 김성석 Korean dictation education system using artificial intelligence

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120258436A1 (en) * 2011-04-08 2012-10-11 Case Western Reserve University Automated assessment of cognitive, fine-motor, and memory skills
KR102288797B1 (en) * 2020-12-30 2021-08-11 (주)레벤그리다한국문화다양성연구원 Cognitive test system
KR102272850B1 (en) * 2021-02-22 2021-07-05 서영철 multi table type cognitive training device using artificial intelligence and method for player cognition using the same

Also Published As

Publication number Publication date
KR20230063204A (en) 2023-05-09

Similar Documents

Publication Publication Date Title
KR100986109B1 (en) System and Method for developing cognitive function based on web service and Recording medium using by the same
CN103857347B (en) The pupil metric evaluation of language understanding
US20020106617A1 (en) Application of multi-media technology to computer administered vocational personnel assessment
CN107480872A (en) A kind of online teaching appraisal system and method based on data switching networks
KR102301143B1 (en) Method for examination and training evaluation for cognitive skill
CA2249646A1 (en) Application of multi-media technology to psychological and educational assessment tools
Di Nuovo et al. Assessment of cognitive skills via human-robot interaction and cloud computing
US20180317831A1 (en) Diagnostic tool for assessing neurodevelopmental conditions or disorders
CN110584601B (en) Old man cognitive function monitoring and evaluation system
CN110827597A (en) Acupuncture teaching method, system, platform and storage medium based on anthropomorphic dummy
US20210313020A1 (en) Method and apparatus for rehabilitation training of cognitive function
Moore-Brown et al. Using dynamic assessment to evaluate children with suspected learning disabilities
CN112907054A (en) Teaching quality evaluation system based on AI and big data analysis
CN111540380B (en) Clinical training system and method
CN116778771A (en) First aid training and checking system
CN115862868A (en) Psychological assessment system, psychological assessment platform, electronic device and storage medium
CN114916921A (en) Rapid speech cognition assessment method and device
CN111834019B (en) Standardized patient training method and device based on voice recognition technology
KR102577906B1 (en) Dementia diagnosis aid system using cognitive fuction test and method thereof
WO2022057840A1 (en) Brain cognitive function detection system
CN115497621A (en) Old person cognitive status evaluation system
CN112950423A (en) Training system and method based on virtual intelligent standardized patient
Perez et al. Assessment of bilinguals’ performance in lexical tasks using reaction times
CN111863254A (en) Method, system and equipment for evaluating inquiry and physical examination based on simulated patient
CN111540379A (en) Clinical training system and method

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right