KR20220073153A - Method and system for predicting the severity of cognitive impairment in the elderly using gait parameters at fast-pace walking - Google Patents
Method and system for predicting the severity of cognitive impairment in the elderly using gait parameters at fast-pace walking Download PDFInfo
- Publication number
- KR20220073153A KR20220073153A KR1020200160972A KR20200160972A KR20220073153A KR 20220073153 A KR20220073153 A KR 20220073153A KR 1020200160972 A KR1020200160972 A KR 1020200160972A KR 20200160972 A KR20200160972 A KR 20200160972A KR 20220073153 A KR20220073153 A KR 20220073153A
- Authority
- KR
- South Korea
- Prior art keywords
- gait
- subject
- speed
- cognitive impairment
- variable
- Prior art date
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/40—Detecting, measuring or recording for evaluating the nervous system
- A61B5/4076—Diagnosing or monitoring particular conditions of the nervous system
- A61B5/4088—Diagnosing of monitoring cognitive diseases, e.g. Alzheimer, prion diseases or dementia
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/1036—Measuring load distribution, e.g. podologic studies
- A61B5/1038—Measuring plantar pressure during gait
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/112—Gait analysis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1126—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
- A61B5/1128—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/6802—Sensor mounted on worn items
- A61B5/6804—Garments; Clothes
- A61B5/6807—Footwear
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7271—Specific aspects of physiological measurement analysis
- A61B5/7275—Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/50—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Public Health (AREA)
- Medical Informatics (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Pathology (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Physics & Mathematics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Biophysics (AREA)
- Physiology (AREA)
- Neurology (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Databases & Information Systems (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Psychiatry (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Child & Adolescent Psychology (AREA)
- Developmental Disabilities (AREA)
- Hospice & Palliative Care (AREA)
- Signal Processing (AREA)
- Psychology (AREA)
- Neurosurgery (AREA)
- Artificial Intelligence (AREA)
- Radiology & Medical Imaging (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
빠른 속도 보행에서의 보행 변인을 이용한 노인 인지장애 심각도 예측 방법 및 시스템이 제공된다. 실시예에 따른 노인 인지장애 심각도 예측 시스템은 대상자의 제1 속도 보행에 대한 제1 보행 관련 데이터를 수집하고, 수집된 대상자의 제1 보행 관련 데이터를 분석하여 대상자의 제1 보행 변인을 추출하고, 상기 대상자의 제2 속도 보행에 대한 제2 보행 관련 데이터를 수집하고, 수집된 대상자의 제2 보행 관련 데이터를 분석하여 대상자의 제2 보행 변인을 추출하는 보행 변인 추출부로서, 상기 제2 속도 보행의 속도는 상기 제1 속도 보행의 속도보다 더 빠른 속도인, 보행 변인 추출부; 상기 대상자의 제1 보행 변인들을 시간 순서에 따라 배열하여 대상자의 제1 보행 시퀀스 피쳐를 생성하고, 상기 대상자의 제2 보행 변인들을 시간 순서에 따라 배열하여 대상자의 제2 보행 시퀀스 피쳐를 생성하며, 상기 제1 보행 시퀀스 피쳐와 상기 제2 보행 시퀀스 피쳐에 기초하여 보행 시퀀스 피쳐를 구성하는 보행 특성 생성부; 및 보행 시퀀스 피쳐 입력 시 인지장애 심각도를 출력하도록 학습된 노인 인지장애 심각도 예측 모델을 이용하여, 상기 대상자의 보행 시퀀스 피쳐에 기초하여 대상자의 인지장애 심각도를 예측하는 인지장애 심각도 예측부를 포함한다.A method and system for predicting the severity of cognitive impairment in the elderly using gait variables in fast walking are provided. The elderly cognitive impairment severity prediction system according to the embodiment collects the first gait-related data for the subject's first speed gait, analyzes the collected subject's first gait-related data, and extracts the subject's first gait variable, As a gait factor extractor that collects second gait-related data for the subject's second speed gait, and extracts a second gait variable of the subject by analyzing the collected subject's second gait-related data, the second speed gait The speed of is a speed faster than the speed of the first speed walking, a gait variable extraction unit; arranging the subject's first gait variables in chronological order to generate a first gait sequence feature of the subject, and arranging the subject's second gait variables in chronological order to generate a second gait sequence feature of the subject, a gait characteristic generator configured to configure a gait sequence feature based on the first gait sequence feature and the second gait sequence feature; and a cognitive impairment severity prediction unit for predicting the subject's cognitive impairment severity based on the subject's gait sequence feature using the elderly cognitive impairment severity prediction model trained to output the cognitive impairment severity when the walking sequence feature is input.
Description
본 발명은 노인 인지장애 심각도 예측 방법 및 시스템에 관한 것으로, 구체적으로 빠른 속도 보행에서의 보행 변인을 이용한 노인 인지장애 심각도 예측 방법 및 시스템에 관한 것이다.The present invention relates to a method and system for predicting the severity of cognitive impairment in the elderly, and more particularly, to a method and system for predicting the severity of cognitive impairment in the elderly using gait variables in fast walking.
급속도로 인구 고령화가 진행되면서 다양한 노인성 질환이 발병하고 있다. 이러한 질환에는 대표적으로 인지장애, 노쇠, 근감소증, 우울증이 있다. 여기서, 노인의 인지장애는 노화로 인해 뇌기능이 손상되면서 인지 기능이 지속적이고 전반적으로 저하되어 일상생활에 상당한 지장이 나타나고 있는 상태를 의미한다. 즉, 인지장애는 기억력, 주의력, 언어능력, 시공간능력, 판단력 등이 저하된 상태를 의미하며, 건망증 및 치매도 이에 포함될 수 있다. 특히 치매는 한국인 10대 사망원인 중 하나이므로 인지장애에 대한 조기 진단이 필요한 상황이다.With the rapid aging of the population, various geriatric diseases are occurring. These diseases typically include cognitive impairment, senility, sarcopenia, and depression. Here, the cognitive impairment of the elderly refers to a state in which the cognitive function is continuously and generally deteriorated as brain function is damaged due to aging, which significantly interferes with daily life. That is, cognitive impairment refers to a state in which memory, attention, language ability, spatiotemporal ability, judgment ability, etc. are deteriorated, and forgetfulness and dementia may also be included therein. In particular, since dementia is one of the top 10 causes of death in Koreans, early diagnosis of cognitive impairment is necessary.
종래의 인지장애의 진단은 주로 숙련된 실험 진행자 및 평가자와 같은 전문 인력을 갖춘 임상공간에서 진행되었다. 즉, 종래의 인지장애 진단 방법은 복잡하고 시간 소모적인 과정이 요구되었으며, 이는 인지장애의 미진단률을 높이는 원인 중 하나로 작용하고 있다.The conventional diagnosis of cognitive impairment was mainly carried out in a clinical space equipped with professional personnel such as experienced experimenters and evaluators. That is, the conventional method for diagnosing cognitive impairment requires a complex and time-consuming process, which serves as one of the causes of increasing the undiagnosed rate of cognitive impairment.
또한, 한국 특허 출원 공보 10-2017-0073557와 같이, 뇌파, 안전도, 맥파 등을 분석하여 치매를 조기 진단하는 장치가 제안되었으나, 다양한 신호의 측정과 분석을 위해 고가의 장비, 복잡한 절차 및 긴 검사 시간이 요구되는 한계점이 있다. Also, as in Korean Patent Application Publication No. 10-2017-0073557, a device for early diagnosis of dementia by analyzing brain waves, safety level, pulse waves, etc. has been proposed. However, expensive equipment, complicated procedures, and long There is a limitation in that inspection time is required.
즉, 임상 환경 밖에서 간단한 방법과 동작으로 노인의 인지장애 심각도를 인지하여 이에 따라 적절한 치료가 노인에게 제공되는 것을 지원하는 방법 및 시스템이 요구되고 있는 실정이다.That is, there is a need for a method and system for recognizing the severity of cognitive impairment of the elderly with simple methods and motions outside the clinical environment and supporting the provision of appropriate treatment to the elderly accordingly.
본 발명은 상술한 문제점을 해결하기 위해 안출된 것으로, 구체적으로, 노인의 일상 생활 동작을 기반으로 인지장애 심각도를 예측하는 방법 및 시스템에 관한 것이다.The present invention has been devised to solve the above-described problems, and more particularly, to a method and system for predicting the severity of cognitive impairment based on the daily activities of an elderly person.
본 발명의 일 실시예에 따른 노인 인지장애 심각도 예측 시스템은 대상자의 제1 속도 보행에 대한 제1 보행 관련 데이터를 수집하고, 수집된 대상자의 제1 보행 관련 데이터를 분석하여 대상자의 제1 보행 변인을 추출하고, 상기 대상자의 제2 속도 보행에 대한 제2 보행 관련 데이터를 수집하고, 수집된 대상자의 제2 보행 관련 데이터를 분석하여 대상자의 제2 보행 변인을 추출하는 보행 변인 추출부로서, 상기 제2 속도 보행의 속도는 상기 제1 속도 보행의 속도보다 더 빠른 속도인, 보행 변인 추출부; 상기 대상자의 제1 보행 변인을 시간 순서에 따라 배열하여 대상자의 제1 보행 시퀀스 피쳐를 생성하고, 상기 대상자의 제2 보행 변인을 시간 순서에 따라 배열하여 대상자의 제2 보행 시퀀스 피쳐를 생성하며, 상기 제1 보행 시퀀스 피쳐 및 상기 제2 보행 시퀀스 피쳐에 기초하여 대상자의 보행 시퀀스 피쳐를 구성하는 보행 특성 생성부; 및 보행 시퀀스 피쳐 입력 시 인지장애 심각도를 출력하도록 학습된 노인 인지장애 심각도 예측 모델을 이용하여, 상기 대상자의 보행 시퀀스 피쳐에 기초하여 대상자의 인지장애 심각도를 예측하는 인지장애 심각도 예측부를 포함한다.The elderly cognitive impairment severity prediction system according to an embodiment of the present invention collects first gait-related data for a subject's first speed gait, and analyzes the collected subject's first gait-related data to determine the subject's first gait variable As a gait variable extractor for extracting, collecting second gait-related data for the subject's second speed gait, and analyzing the collected subject's second gait-related data to extract the subject's second gait variable, the a gait variable extraction unit, wherein the speed of the second speed gait is faster than the speed of the first speed gait; arranging the first gait variable of the subject in chronological order to generate a first gait sequence feature of the subject, and arranging the second gait variable of the subject in chronological order to generate a second gait sequence feature of the subject, a gait characteristic generator configured to configure a gait sequence feature of the subject based on the first gait sequence feature and the second gait sequence feature; and a cognitive impairment severity prediction unit for predicting the subject's cognitive impairment severity based on the subject's gait sequence feature using the elderly cognitive impairment severity prediction model trained to output the cognitive impairment severity when the walking sequence feature is input.
본 발명의 다른 실시예에 따른 노인 인지장애 심각도 예측 방법은 대상자의 제1 속도 보행에 대한 제1 보행 관련 데이터 및 상기 대상자의 제2 속도 보행에 대한 제2 보행 관련 데이터를 각각 수집하는 단계로서, 상기 제2 속도 보행의 속도는 상기 제1 속도 보행의 속도보다 더 빠른 속도인, 단계; 상기 수집된 대상자의 제1 보행 관련 데이터를 분석하여 대상자의 제1 보행 변인을 추출하고, 상기 수집된 대상자의 제2 보행 관련 데이터를 분석하여 대상자의 제2 보행 변인을 추출하는 단계; 상기 대상자의 제1 보행 변인을 시간 순서에 따라 배열하여 대상자의 제1 보행 시퀀스 피쳐를 생성하고, 상기 대상자의 제2 보행 변인을 시간 순서에 따라 배열하여 대상자의 제2 보행 시퀀스 피쳐를 생성하며, 상기 제1 보행 시퀀스 피쳐와 상기 제2 보행 시퀀스 피쳐를 복합적으로 고려하여 대상자의 제3 보행 시퀀스 피쳐를 구성하는 단계; 및 보행 시퀀스 피쳐 입력 시 인지장애 심각도를 출력하도록 학습된 노인 인지장애 심각도 예측 모델을 이용하여, 상기 대상자의 보행 시퀀스 피쳐에 기초하여 상기 대상자의 인지장애 심각도를 예측하는 단계를 포함한다.A method for predicting the severity of cognitive impairment in the elderly according to another embodiment of the present invention comprises collecting first gait-related data for a first speed gait of a subject and second gait-related data for a second gait-related data for the subject, respectively, wherein the speed of the second speed gait is faster than the speed of the first speed gait; extracting a first gait variable of the subject by analyzing the collected first gait-related data of the subject, and extracting a second gait variable of the subject by analyzing the collected second gait-related data of the subject; arranging the first gait variable of the subject in chronological order to generate a first gait sequence feature of the subject, and arranging the second gait variable of the subject in chronological order to generate a second gait sequence feature of the subject, constructing a third gait sequence feature of the subject by considering the first gait sequence feature and the second gait sequence feature in combination; and predicting the cognitive impairment severity of the subject based on the subject's gait sequence feature by using the elderly cognitive impairment severity prediction model trained to output the cognitive impairment severity when the gait sequence feature is input.
본 발명의 실시예에 따른 노인 인지장애 심각도 예측 시스템 및 방법은 웨어러블 장비로 획득 가능한 보행 데이터 또는 보행 영상으로부터 대상자의 보행 변인을 추출하고, 보행 변인들의 패턴 분석에 적합한 기계 학습 모델을 이용해 대상자의 인지장애 심각도를 예측할 수 있다. 즉, 고가의 장비, 숙련된 전문가, 복잡한 검사 과정 없이도 일상 생활 속에서 지속적으로 인지장애 상태를 모니터링함으로써 인지장애의 조기 진단, 증상 관리, 적절한 치료의 기회를 대상자들에게 제공할 수 있다.The system and method for predicting the severity of cognitive impairment in the elderly according to an embodiment of the present invention extracts the subject's gait variables from gait data or gait images obtainable with wearable equipment, and uses a machine learning model suitable for pattern analysis of gait variables to recognize the subject The severity of the disorder can be predicted. In other words, it is possible to provide the subjects with an opportunity for early diagnosis, symptom management, and appropriate treatment of cognitive impairment by continuously monitoring the state of cognitive impairment in daily life without expensive equipment, skilled specialists, and complicated examination procedures.
또한, 본 발명의 실시예에 따른 노인 인지장애 심각도 예측 방법은 인지 기능 손상 정도를 더 잘 반영할 수 있는 빠른 속도 보행에서의 보행 변인을 추출하고, 이를 고려하여 대상자의 인지장애 심각도를 예측할 수 있다. 즉, 빠른 속도 보행 특성을 보통 속도 보행 특성과 함께 고려하여 보통 속도 보행 특성과의 관계로부터 파생되는 새로운 특성이 효과적인 예측인자로서의 역할을 할 수 있기 때문에 더 높은 정확도로 대상자의 인지장애 심각도를 예측할 수 있다. In addition, the method for predicting the severity of cognitive impairment in the elderly according to an embodiment of the present invention extracts gait variables in fast walking that can better reflect the degree of cognitive impairment, and predicts the severity of cognitive impairment of the subject by taking this into account . In other words, considering the high-speed gait characteristic together with the normal-speed gait characteristic, the new characteristic derived from the relationship with the normal-speed gait characteristic can serve as an effective predictor, so it is possible to predict the subject's cognitive impairment severity with higher accuracy. have.
도 1은 본 발명의 일 실시예에 따른 노인 인지장애 심각도 예측 시스템의 블록도이다.
도 2는 보행 변인 추출부의 예시도이다.
도 3a는 데이터 수집 유닛에 대상자의 족저압 데이터를 제공하는 예시적인 족저압 측정 장비를 도시한다.
도 3b는 족저압 측정 장비로 획득한 대상자의 족저압 데이터의 예시를 도시한다.
도 4a는 데이터 수집 유닛에 대상자의 운동학적 데이터를 제공하는 예시적인 운동학적 데이터 측정 장비를 도시한다.
도 4b는 운동학적 데이터 측정 장비로 획득한 대상자의 운동학적 데이터의 예시를 도시한다.
도 5는 대상자의 보행 영상을 분석하는 과정을 도시한 예시도이다.
도 6은 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 기준으로 추출되는 시간적 보행 변인들의 예시를 도시한다.
도 7은 보행 시퀀스 피쳐를 생성하는 과정을 도시한 예시도이다.
도 8은 장단기 기억 네트워크의 예시적인 구조를 도시한다.
도 9는 보통 속도 보행 특성 및 빠른 속도 보행 특성을 이용한 인지장애 심각도 예측의 정확도를 비교한 실험 그래프이다.
도 10은 본 발명의 다른 실시예에 따른 노인 인지장애 심각도 예측 방법의 순서도이다.1 is a block diagram of a system for predicting the severity of cognitive impairment in the elderly according to an embodiment of the present invention.
2 is an exemplary diagram of a gait variable extraction unit.
3A illustrates an exemplary plantar pressure measurement device that provides plantar pressure data of a subject to a data collection unit.
3B shows an example of plantar pressure data of a subject obtained with a plantar pressure measurement device.
4A illustrates an exemplary kinematic data measurement device that provides kinematic data of a subject to a data collection unit.
4B shows an example of the subject's kinematic data obtained with the kinematic data measuring device.
5 is an exemplary diagram illustrating a process of analyzing a walking image of a subject.
6 shows examples of temporal gait variables extracted based on the subject's heel strike time and toe off time.
7 is an exemplary diagram illustrating a process of generating a walking sequence feature.
8 shows an exemplary structure of a long-term memory network.
9 is an experimental graph comparing the accuracy of predicting the severity of cognitive impairment using normal-speed walking characteristics and fast-paced walking characteristics.
10 is a flowchart of a method for predicting the severity of cognitive impairment in the elderly according to another embodiment of the present invention.
이하, 본 발명에 따른 바람직한 실시 형태를 첨부된 도면을 참조하여 상세하게 설명한다. 첨부된 도면과 함께 이하에 개시될 상세한 설명은 본 발명의 예시적인 실시형태를 설명하고자 하는 것이며, 본 발명이 실시될 수 있는 유일한 실시형태를 나타내고자 하는 것이 아니다. 이하의 상세한 설명은 본 발명의 완전한 이해를 제공하기 위해서 구체적 세부사항을 포함한다. 그러나, 당업자는 본 발명이 이러한 구체적 세부사항 없이도 실시될 수 있음을 인지할 수 있다. 이하의 설명에서 사용되는 특정 용어들은 본 발명의 이해를 돕기 위해서 제공된 것이며, 이러한 특정 용어의 사용은 본 발명의 기술적 사상을 벗어나지 않는 범위에서 다른 형태로 변경될 수 있다.Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to the accompanying drawings. DETAILED DESCRIPTION The detailed description set forth below in conjunction with the appended drawings is intended to describe exemplary embodiments of the present invention and is not intended to represent the only embodiments in which the present invention may be practiced. The following detailed description includes specific details in order to provide a thorough understanding of the present invention. However, one skilled in the art will recognize that the present invention may be practiced without these specific details. Specific terms used in the following description are provided to help the understanding of the present invention, and the use of these specific terms may be changed to other forms without departing from the technical spirit of the present invention.
도 1은 본 발명의 일 실시예에 따른 노인 인지장애 심각도 예측 시스템의 블록도이다. 도 2는 보행 변인 추출부의 예시도이다. 도 3a는 데이터 수집 유닛에 대상자의 족저압 데이터를 제공하는 예시적인 족저압 측정 장비를 도시한다. 도 3b는 족저압 측정 장비로 획득한 대상자의 족저압 데이터의 예시를 도시한다. 도 4a는 데이터 수집 유닛에 대상자의 운동학적 데이터를 제공하는 예시적인 운동학적 데이터 측정 장비를 도시한다. 도 4b는 운동학적 데이터 측정 장비로 획득한 대상자의 운동학적 데이터의 예시를 도시한다. 도 5는 대상자의 보행 영상을 분석하는 과정을 도시한 예시도이다. 도 6은 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 기준으로 추출되는 시간적 보행 변인들의 예시를 도시한다. 도 7은 보행 시퀀스 피쳐를 생성하는 과정을 도시한 예시도이다. 도 8은 장단기 기억 네트워크의 예시적인 구조를 도시한다. 1 is a block diagram of a system for predicting the severity of cognitive impairment in the elderly according to an embodiment of the present invention. 2 is an exemplary diagram of a gait variable extraction unit. 3A illustrates an exemplary plantar pressure measurement device that provides plantar pressure data of a subject to a data collection unit. 3B shows an example of plantar pressure data of a subject obtained with a plantar pressure measurement device. 4A illustrates an exemplary kinematic data measurement device that provides kinematic data of a subject to a data collection unit. 4B shows an example of the subject's kinematic data obtained with the kinematic data measuring device. 5 is an exemplary diagram illustrating a process of analyzing a gait image of a subject. 6 shows examples of temporal gait variables extracted based on the subject's heel strike time and toe off time. 7 is an exemplary diagram illustrating a process of generating a walking sequence feature. 8 shows an exemplary structure of a long-term memory network.
도 1 내지 도 8을 참조하면, 노인 인지장애 심각도 예측 시스템(10)은 보행 변인 추출부(100), 보행 특성 생성부(110), 인지장애 심각도 예측부(120), 인지장애 심각도 예측 모델 구축부(130) 및 데이터베이스(140)를 포함한다.1 to 8, the cognitive impairment
실시예들에 따른 노인 인지장애 심각도 예측 시스템(10)은, 전적으로 하드웨어이거나, 또는 부분적으로 하드웨어이고 부분적으로 소프트웨어인 측면을 가질 수 있다. 예컨대, 본 명세서의 노인 인지장애 심각도 예측 시스템 및 이에 포함된 각 부(unit)는, 특정 형식 및 내용의 데이터를 전자통신 방식으로 주고받기 위한 장치 및 이에 관련된 소프트웨어를 통칭할 수 있다. 본 명세서에서 "부", "모듈(module)", "서버(server)", "시스템", "장치" 또는 "단말" 등의 용어는 하드웨어 및 해당 하드웨어에 의해 구동되는 소프트웨어의 조합을 지칭하는 것으로 의도된다. 예를 들어, 여기서 하드웨어는 CPU 또는 다른 프로세서(processor)를 포함하는 데이터 처리 기기일 수 있다. 또한, 하드웨어에 의해 구동되는 소프트웨어는 실행중인 프로세스, 객체(object), 실행파일(executable), 실행 스레드(thread of execution), 프로그램(program) 등을 지칭할 수 있다.The elderly cognitive impairment
또한, 노인 인지장애 심각도 예측 시스템(10)을 구성하는 각각의 부는 반드시 물리적으로 구분되는 별개의 구성요소를 지칭하는 것으로 의도되지 않는다. 도 1에서 보행 변인 추출부(100), 보행 특성 생성부(110), 인지장애 심각도 예측부(120), 인지장애 심각도 예측 모델 구축부(130) 및 데이터베이스(140)는 서로 구분되는 별개의 블록으로 도시되나, 이는 노인 인지장애 심각도 예측 시스템을 구성하는 장치를 해당 장치에 의해 실행되는 동작에 의해 단지 기능적으로 구분한 것이다. 따라서, 실시예에 따라서는 보행 변인 추출부(100), 보행 특성 생성부(110), 인지장애 심각도 예측부(120), 인지장애 심각도 예측 모델 구축부(130) 및 데이터베이스(140)는 일부 또는 전부가 동일한 하나의 장치 내에 집적화될 수 있고, 하나 이상이 다른 부와 물리적으로 구분되는 별개의 장치로 구현될 수도 있으며, 분산 컴퓨팅 환경 하에서 서로 통신 가능하게 연결된 컴포넌트들일 수도 있다.In addition, each part constituting the elderly cognitive impairment
보행 변인 추출부(100)는 대상자의 보행 관련 데이터를 수집하고, 수집된 대상자의 보행 관련 데이터를 분석하여 대상자의 보행 변인을 추출할 수 있다. 구체적으로, 보행 변인 추출부(100)는 대상자의 제1 속도 보행에 대한 제1 보행 관련 데이터를 수집하고, 수집된 대상자의 제1 보행 관련 데이터를 분석하여 대상자의 제1 보행 변인을 추축할 수 있다. 또한, 보행 변인 추출부(100)는 대상자의 제2 속도 보행에 대한 제2 보행 관련 데이터를 수집하고, 수집된 대상자의 제2 보행 관련 데이터를 분석하여 대상자의 제2 보행 변인을 추출할 수 있다. 여기서, 제1 속도 보행은 보통 속도로 대상자가 일정 거리를 보행하는 것을 의미하며, 제2 속도 보행은 빠른 속도로 대상자가 일정 거리를 보행하는 것을 의미한다. 즉, 제2 속도 보행의 속도는 제1 속도 보행의 속도보다 더 빠른 속도일 수 있다. 제2 속도 보행의 속도는 제1 속도 보행의 속도의 1.1 배 내지 1.2 배일 수 있다.The gait
인지 기능과 운동 기능은 뇌의 동일 영역에서 제어되는 기능에 해당한다. 따라서, 인지 기능이 손상된 사람에게서는 보행 능력의 저하가 관찰될 수 있다. 또한, 빠른 속도 보행에서는 보통 속도 보행에 비해 더욱 큰 운동 능력이 요구되기 때문에 빠른 속도 보행 시 관찰되는 보행의 불안정성은 인지 기능 손상 정도를 더 잘 반영할 수 있다.Cognitive and motor functions correspond to functions controlled in the same area of the brain. Accordingly, a decrease in walking ability may be observed in persons with impaired cognitive function. In addition, since high-speed gait requires greater motor capacity than normal speed gait, the instability of gait observed during high-speed gait may better reflect the degree of cognitive impairment.
본 발명의 실시예에 따른 노인 인지장애 심각도 예측 시스템(10)은 빠른 속도 보행에서의 보행 변인을 기초로 노인의 인지장애 심각도를 예측할 수 있다. 특히, 빠른 속도 보행 특성을 보통 속도 보행 특성과 함께 고려하여 보통 속도 보행 특성과의 관계로부터 파생되는 새로운 특성이 효과적인 예측인자로서의 역할을 할 수 있기 때문에 더 높은 정확도로 인지장애 심각도의 예측이 가능할 수 있다.The elderly cognitive impairment
대상자의 제1 보행 관련 데이터는 대상자의 제1 속도 보행에 따른 대상자의 제1 족저압 데이터, 대상자의 제1 속도 보행에 따른 대상자의 제1 운동학적 데이터 및 대상자의 제1 속도 보행 동작을 촬영한 대상자의 제1 보행 영상 중 적어도 하나를 포함할 수 있다. 또한, 대상자의 제2 보행 관련 데이터는 대상자의 제2 속도 보행에 따른 대상자의 제2 족저압 데이터, 상기 대상자의 제2 속도 보행에 따른 대상자의 제2 운동학적 데이터 및 상기 대상자의 제2 속도 보행 동작을 촬영한 대상자의 제2 보행 영상 중 적어도 하나를 포함할 수 있다. 도 2를 참조하여, 제1 및 제2 보행 관련 데이터를 수집하고, 수집된 제1 및 제2 보행 관련 데이터에서 제1 및 제2 보행 변인들을 추출하는 과정에 대해 설명하도록 한다.The first gait-related data of the subject is obtained by photographing the subject's first plantar pressure data according to the subject's first speed gait, the subject's first kinematic data according to the subject's first speed gait, and the subject's first speed gait motion. It may include at least one of the first gait images of the subject. In addition, the second gait-related data of the subject includes the subject's second plantar pressure data according to the subject's second speed gait, the subject's second kinematic data according to the subject's second speed gait, and the subject's second speed gait It may include at least one of the second gait images of the subject photographing the motion. A process of collecting the first and second gait-related data and extracting the first and second gait variables from the collected first and second gait-related data will be described with reference to FIG. 2 .
도 2를 참조하면, 보행 변인 추출부(100)는 데이터 수집 유닛(101), 족저압 데이터 분석 유닛(102), 운동학적 데이터 분석 유닛(103), 보행 영상 분석 유닛(104) 및 보행 변인 추출 유닛(105)을 포함한다.Referring to FIG. 2 , the gait
데이터 수집 유닛(101)은 족저압 측정 장비(200), 운동학적 데이터 측정 장비(300) 및 카메라(미도시)와 통신망을 통해 데이터를 교환하도록 구성될 수 있다. 통신망은 데이터 수집 유닛(101), 족저압 측정 장비(200), 운동학적 데이터 측정 장비(300) 및 카메라(미도시)가 서로 접속한 후 패킷 데이터를 송수신할 수 있도록 접속 경로를 제공한다. 통신망은 예컨대 LANs(Local Area Networks), WANs(Wide Area Networks), MANs(Metropolitan Area Networks), ISDNs(Integrated Service Digital Networks) 등의 유선 네트워크나, 무선 LANs, CDMA, 블루투스, 위성 통신 등의 무선 네트워크를 망라할 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다. 데이터 수집 유닛(101)은 족저압 측정 장비(200)로부터 제1 족저압 데이터 및 제2 족저압 데이터 중 적어도 하나를 통신망을 통해 수신하고, 운동학적 데이터 측정 장비(300)로부터 제1 운동학적 데이터 및 제2 운동학적 데이터 중 적어도 하나를 상기 통신망을 통해 수신하고, 카메라로부터 제1 보행 영상 및 제2 보행 영상 중 적어도 하나를 상기 통신망을 통해 수신하도록 구성된다. The
족저압 측정 장비(200)는 대상자의 제1 속도 보행에 따른 제1 족저압 데이터를 측정하고, 대상자의 제2 속도 보행에 따른 제2 족저압 데이터를 측정할 수 있다. 대상자는 일정 시간동안 제1 속도 보행 및 제2 속도 보행을 각각 수행할 수 있으며, 연속된 보행 동작에 따라 변화하는 대상자의 제1 족저압 데이터 및 제2 족저압 데이터가 족저압 측정 장비(200)를 통해 각각 획득될 수 있다. 예시적으로, 도 3a에 도시된 족저압 측정 장비(200)는 복수의 압력센서(201)를 포함한 신발 안창(insole)으로 구성될 수 있다. 족저압 측정 장비(200)는 보행 중 족저압의 변화를 감지하여 도 3b와 같은 족저압 데이터를 획득할 수 있다. 데이터 수집 유닛(101)은 대상자의 제1 및 제2 족저압 데이터를 족저압 측정 장비(200)로부터 수신하고, 족저압 데이터 분석 유닛(102)에 대상자의 제1 및 제2 족저압 데이터를 전달할 수 있다. The plantar
운동학적 데이터 측정 장비(300)는 대상자의 제1 속도 보행에 따른 제1 운동학적 데이터를 측정하고, 대상자의 제2 속도 보행에 따른 제2 운동학적 데이터를 각각 측정할 수 있다. 대상자는 일정 시간동안 제1 속도 보행 및 제2 속도 보행을 각각 수행할 수 있으며, 연속된 보행 동작에 따라 변화하는 대상자의 제1 운동학적 데이터 및 제2 운동학적 데이터가 운동학적 데이터 측정 장비(300)를 통해 각각 획득될 수 있다. 여기서, 운동학적 데이터는 가속도 데이터 및 각속도 데이터를 포함할 수 있다. 운동학적 데이터 측정 장비(300)는 대상자의 신체 일부에 부착되어 보행에 따른 가속도 데이터 및 각속도 데이터의 변화를 측정할 수 있다. 여기서, 운동학적 데이터 측정 장비(300)는 도 4a에 도시된 바와 같이 대상자의 신발에 부착될 수 있으나, 이에 한정되는 것은 아니다. 도 4b는 측정된 운동학적 데이터의 예시로, 보행 시 발목 관절의 배측굴곡(dorsiflexion)과 족측굴곡(plantarflexion)에 의한 각속도 데이터 변화를 도시한 것이다. 데이터 수집 유닛(101)은 대상자의 제1 및 제2 운동학적 데이터를 운동학적 데이터 측정 장비(300)로부터 수신하고, 운동학적 데이터 분석 유닛(103)에 대상자의 제1 및 제2 운동학적 데이터를 전달할 수 있다.The kinematic
또한, 대상자의 제1 속도 보행 및 제2 속도 보행은 카메라(미도시)에 의해 촬영될 수 있다. 즉, 일정 시간 동안 수행된 대상자의 제1 속도 보행 동작에 대한 연속 이미지인 제1 보행 영상과 제2 속도 보행 동작에 대한 연속 이미지인 제2 보행 영상이 카메라(미도시)를 통해 각각 획득될 수 있다. 데이터 수집 유닛(101)은 이러한 대상자의 제1 및 제2 보행 영상을 카메라로부터 수신하고, 보행 영상 분석 유닛(104)에 대상자의 제1 및 제2 보행 영상을 전달할 수 있다.In addition, the first speed gait and the second speed gait of the subject may be captured by a camera (not shown). That is, the first gait image, which is a continuous image for the first speed gait motion of the subject, and the second gait image, which is a continuous image for the second speed gait motion, performed for a predetermined time may be acquired through a camera (not shown), respectively. have. The
족저압 데이터 분석 유닛(102)은 제1 족저압 데이터에서 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 각각 검출할 수 있다. 또한, 족저압 데이터 분석 유닛(102)은 제2 족저압 데이터에서 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 각각 검출한다. 도 3b에 도시된 바와 같이, 대상자의 족저압 데이터에서 대상자의 발꿈치 영역에서 최대 압력이 감지되는 시점을 파악하여 발꿈치 접지(heel strike) 시점, 발가락 영역에서 최대 압력이 감지되는 시점을 파악하여 발가락 들기(toe off) 시점을 검출할 수 있다.The plantar pressure
운동학적 데이터 분석 유닛(103)은 제1 운동학적 데이터에서 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출한다. 또한, 운동학적 데이터 분석 유닛(103)은 제2 운동학적 데이터에서 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출한다. 도 4b에 도시된 바와 같이, 대상자의 운동학적 데이터에서 대상자의 발목관절 배측굴곡 각도가 최대가 되는 시점을 파악하여 발꿈치 접지(heel strike) 시점, 족측굴절 각도가 최대가 되는 시점을 파악하여 발가락 들기(toe off) 시점을 검출할 수 있다.The kinematic
보행 영상 분석 유닛(104)은 대상자의 제1 보행 영상에서 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출할 수 있다. 또한, 보행 영상 분석 유닛(104)은 대상자의 제2 보행 영상에서 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 각각 검출할 수 있다. 예시적으로, 도 5에 도시된 바와 같이, 보행 영상 분석 유닛(104)은 촬영된 보행 영상을 프레임 단위로 구분하고, 프레임 단위로 분리된 영상에서 대상자를 추출하며, 추출된 대상자의 동작을 인지하여 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출할 수 있다.The gait
여기서, 일정 시간 동안 대상자가 보행을 수행함에 따라 복수의 발꿈치 접지(heel strike) 시점과 복수의 발가락 들기(toe off) 시점이 검출될 수 있다. 족저압 데이터 분석 유닛(102), 운동학적 데이터 분석 유닛(103) 및 보행 영상 분석 유닛(104)은 제1 속도 보행에 따른 복수의 발꿈치 접지(heel strike) 시점과 복수의 발가락 들기(toe off) 시점 각각을 시간 순서대로 추출할 수 있다. 족저압 데이터 분석 유닛(102), 운동학적 데이터 분석 유닛(103) 및 보행 영상 분석 유닛(104)은 제2 속도 보행에 따른 복수의 발꿈치 접지(heel strike) 시점과 복수의 발가락 들기(toe off) 시점 각각을 시간 순서대로 추출할 수 있다.Here, as the subject walks for a predetermined time, a plurality of heel strike times and a plurality of toe-off times may be detected. The plantar pressure
족저압 데이터 분석 유닛(102), 운동학적 데이터 분석 유닛(103) 및 보행 영상 분석 유닛(104)은 대상자의 오른발과 왼발을 구분하여 오른발에 의한 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점 및 왼발에 의한 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 각각 검출할 수 있다. 즉, 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점은 오른발에 의한 복수의 발꿈치 접지(heel strike) 시점과 복수의 발가락 들기(toe off) 시점 및 왼발에 의한 복수의 발꿈치 접지(heel strike) 시점과 복수의 발가락 들기(toe off) 시점을 포함할 수 있다. 또한, 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점은 오른발에 의한 복수의 발꿈치 접지(heel strike) 시점과 복수의 발가락 들기(toe off) 시점 및 왼발에 의한 복수의 발꿈치 접지(heel strike) 시점과 복수의 발가락 들기(toe off) 시점을 포함할 수 있다.The plantar pressure
보행 변인 추출 유닛(105)은 족저압 데이터 분석 유닛(102), 운동학적 데이터 분석 유닛(103) 및 보행 영상 분석 유닛(104) 중 적어도 하나에서 검출된 제1 속도 보행에 따른 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점에 기초하여 대상자의 제1 보행 변인을 추출할 수 있다. 또한, 보행 변인 추출 유닛(105)은 족저압 데이터 분석 유닛(102), 운동학적 데이터 분석 유닛(103) 및 보행 영상 분석 유닛(104) 중 적어도 하나에서 검출된 제2 속도 보행에 따른 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점에 기초하여 대상자의 제2 보행 변인을 추출할 수 있다.The gait
여기서, 제1 보행 변인과 제2 보행 변인은 시간적 보행 변인일 수 있다. 보행 변인 추출 유닛(105)에서 추출되는 시간적 보행 변인은 입각기(stance phase), 유각기(swing phase), 걸음(step), 활보(stride), 초기 양하지 지지기(initial double-limb support period), 말기 양하지 지지기(terminal double-limb support period) 및 단하지 지지기(single-limb support period) 중 적어도 하나의 구간의 지속 시간에 해당할 수 있다. 즉, 보행 변인 추출 유닛(105)은 적어도 한 종류 이상의 시간적 보행 변인을 추출할 수 있다. 후술하는 추출 과정은 제1 보행 변인을 기준으로 설명되나, 제2 보행 변인의 추출에도 동일하게 적용될 수 있다.Here, the first gait variable and the second gait variable may be temporal gait variables. The temporal gait variables extracted from the gait
도 6을 참조하면, 입각기는 발꿈치 접지 시점부터 발가락 들기 시점 사이 기간을 의미한다. 유각기는 발가락 들기 시점부터 발꿈치 접지 시점 사이 기간을 의미한다. 걸음은 한발의 발꿈치 접지 시점부터 다른 발의 발꿈치 접지 시점 사이 기간을 의미한다. 활보는 한발의 발꿈치 접지 시점과 동일한 발의 다음 발꿈치 접지 시점 사이 기간을 의미한다. 초기 양하지 지지기는 한발의 발꿈치 접지 시점과 다른 발의 발가락 들기 시점 사이 기간으로, 양발로 체중을 지지하는 첫 번째 기간을 의미한다. 단하지 지지기는 초기 양하지 지지기 이후 한발로 체중을 지지하는 시기를 의미한다. 말기 양하지 지지기는 단하지 지지기 이후 다른발의 발꿈치 접지 시점부터 한발의 발가락 들기 시점 사이 기간으로, 양발로 체중을 지지하는 두 번째 기간을 의미한다.Referring to FIG. 6 , the stance phase refers to a period between a heel grounding time and a toe lifting time. The swing phase is the period between toe lift and heel touch. The gait refers to the period between the time of touching the heel of one foot to the time of touching the heel of the other foot. Stride refers to the period between the time of heel touch of one foot and the point of touch of the next heel of the same foot. The initial biceps support period is the period between the point of touching the heel of one foot and the point of raising the toe of the other foot, and means the first period of supporting the weight with both feet. The short-limb support phase refers to the period in which one leg supports the weight after the initial double-limb support phase. The terminal biceps support phase is the period between the point of touching the heel of the other foot to the point of raising the toe of one foot after the short limb support phase, and refers to the second period of supporting the weight with both feet.
또한, 오른발에 관한 시간적 보행 변인과 왼발에 관한 시간적 보행 변인이 각각 시간 순서에 따라 추출될 수 있다. 오른발로 보행을 시작한 경우를 예로 들면, n번째 오른발 활보 시간의 추출과 n+1번째 오른발 활보 시간의 추출 사이에 n번째 왼발 활보 시간의 추출이 이루어질 수 있다. 또한, n+1번째 왼발 활보 시간의 추출과 n+2번째 왼발 활보 시간의 추출 사이에 n+2번째 오른발 활보 시간의 추출이 이루어질 수 있다. In addition, the temporal gait variable with respect to the right foot and the temporal gait variable with respect to the left foot may be extracted according to time sequence, respectively. Taking the case of starting walking with the right foot as an example, the extraction of the nth left foot stride time may be performed between the extraction of the n-th right-foot gait time and the extraction of the n+1-th right-foot gait time. In addition, the extraction of the n+2th right foot stride time may be performed between the extraction of the n+1 th left foot streak time and the extraction of the n+2 th left foot streak time.
보행 변인 추출 유닛(105)에서 추출된 제1 보행 변인 및 제2 보행 변인은 보행 특성 생성부(110)로 제공될 수 있다.The first gait variable and the second gait variable extracted by the gait
보행 특성 생성부(110)는 제1 보행 변인을 시간 순서에 따라 배열하여 대상자의 제1 보행 시퀀스 피쳐를 생성할 수 있다. 또한, 보행 특성 생성부(110)는 제2 보행 변인을 시간 순서에 따라 배열하여 대상자의 제2 보행 시퀀스 피쳐를 생성할 수 있다. 제1 보행 시퀀스 피쳐 및 제2 보행 시퀀스 피쳐는 인공 신경망 기반의 예측 모델에 입력으로 사용하기 위해 전처리된 데이터일 수 있다.The gait
보행 특성 생성부(110)는 일정 크기의 윈도우를 설정하고 이 윈도우를 일정 간격으로 이동시키는 과정을 통해 제1 보행 시퀀스 피쳐 및 제2 보행 시퀀스 피쳐를 각각 연속적으로 생성할 수 있다. The gait
도 7에 도시된 바와 같이 대상자의 활보 시간으로 보행 시퀀스 피쳐를 구성하는 경우를 예로 들면, n번째 윈도우는 오른발에 의한 n번째 활보 시간(R.Striden), 오른발에 의한 n+1번째 활보 시간(R.Striden+1), 오른발에 의한 n+2번째 활보 시간(R.Striden+2)과 왼발에 의한 n번째 활보 시간(L.Striden), 왼발에 의한 n+1번째 활보 시간(L.Striden+1), 왼발에 의한 n+2번째 활보 시간(L.Striden+2)을 포함하고 있으며 이들을 시간 순서대로 배열하여 총 6개의 활보 시간들(R.Striden, L.Striden, R.Striden+1, L.Striden+1, R.Striden+2, L.Striden+2)로 구성된 1 x 6 크기의 n번째 활보 시퀀스 피쳐를 획득할 수 있다. n+1번째 윈도우는 오른발에 의한 n+1번째 활보 시간(R.Striden+1), 오른발에 의한 n+2번째 활보 시간(R.Striden+2), 오른발에 의한 n+3번째 활보 시간(R.Striden+3)과 왼발에 의한 n+1번째 활보 시간(R.Striden+1), n+2번째 오른발 활보 시간(R.Striden+2), n+3번째 오른발 활보 시간(R.Striden+3)을 포함하고 있으며 이들을 시간 순서대로 배열하여 총 6개의 활보 시간들(R.Striden+1, L.Striden+1, R.Striden+2, L.Striden+2, R.Striden+3, L.Striden+3)로 구성된 1 x 6 크기의 n+1번째 활보 시퀀스 피쳐를 획득할 수 있다. For example, when the gait sequence feature is configured with the subject's stride time as shown in FIG. 7 , the nth window is the nth stride time by the right foot (R.Stride n ), and the n+1st stride time by the right foot (R.Stride n+1 ), n+2 stride time with the right foot (R.Stride n+2 ) and nth stride time with the left foot (L.Stride n ), n+1 stride time with the left foot (L.Stride n+1 ), including the n+2th stride time by the left foot (L.Stride n+2 ), and arrange them in chronological order for a total of 6 stride times (R.Stride n , L. Stride n , R.Stride n+1 , L.Stride n+1 , R.Stride n+2 , L.Stride n+2 ) can obtain an nth stride sequence feature with a size of 1 x 6 . The n+1th window is the n+1st stride time with the right foot (R.Stride n+1 ), the n+2th stride time with the right foot (R.Stride n+2 ), and the n+3rd stride time with the right foot time (R.Stride n+3 ) and n+1st stride time by left foot (R.Stride n+1 ), n+2th right-foot stride time (R.Stride n+2 ), n+3 right-foot stride It contains time (R.Stride n+3 ) and arranges them in chronological order for a total of 6 stride times (R.Stride n+1 , L.Stride n+1 , R.Stride n+2 , L.Stride n+2 , R.Stride n+3, L.Stride n+3 ) can be obtained with an n+1th stride sequence feature of 1 x 6 size.
또한, 보행 변인 추출 유닛(105)에서 추출된 시간적 보행 변인이 복수 종류인 경우, 보행 시퀀스 피쳐는 M x N 크기의 매트릭스 형태로 구성될 수 있다. 여기서, M은 시간적 보행 변인의 종류, N은 시간 순서에 따라 배열되는 시간적 보행 변인의 개수에 해당한다. 즉, 서로 다른 종류의 시간적 보행 변인들을 포함한 보행 시퀀스 피쳐가 준비될 수 있다. Also, when the temporal gait variable extracted by the gait
상술한 과정을 통해 제1 보행 변인에 대한 제1 보행 시퀀스 피쳐와 제2 보행 변인에 대한 제2 보행 시퀀스 피쳐가 각각 생성될 수 있다. 여기서, 보행 특성 생성부(110)는 제1 보행 시퀀스 피쳐와 제2 보행 시퀀스 피쳐 기초하여 대상자의 보행 시퀀스 피쳐를 구성할 수 있다. 즉, 상기 제1 보행 시퀀스 피쳐와 상기 제2 보행 시퀀스 피쳐를 복합적으로 고려하여 대상자의 보행 시퀀스 피쳐가 생성될 수 있다. 대상자의 보행 시퀀스 피쳐는 제1 보행 시퀀스 피쳐와 제2 보행 시퀀스 피쳐가 병합되어 구성될 수 있으나, 이에 한정되는 것은 아니다. Through the above-described process, a first gait sequence feature for the first gait variable and a second gait sequence feature for the second gait variable may be generated, respectively. Here, the gait
즉, 보통 속도인 제1 속도에서의 보행 변인에 따른 제1 보행 시퀀스 피쳐와 빠른 속도인 제2 속도에서의 보행 변인에 따른 제2 보행 시퀀스 피쳐를 함께 고려하여 노인 인지장애 심각도 예측 모델의 입력 데이터인 보행 시퀀스 피쳐가 구성될 수 있다. 보통 속도 보행만이 아닌 더욱 큰 운동 능력이 요구되는 빠른 속도 보행을 고려함으로써 빠른 속도 보행 시 관찰되는 보행의 불안정성에 반영된 인지 기능 손상 정도의 예측이 가능할 수 있다. 또한, 빠른 속도 보행 특성을 보통 속도 보행 특성과 함께 고려하여 보통 속도 보행 특성과의 관계로부터 파생되는 새로운 특성이 효과적인 예측인자로서의 역할을 할 수 있기 때문에 더 높은 정확도로 인지장애 심각도의 예측이 가능할 수 있다.That is, the input data of the cognitive impairment severity prediction model for the elderly by considering the first gait sequence feature according to the gait variable at the first speed, which is the normal speed, and the second gait sequence feature, the second gait sequence feature according to the gait variable at the high speed, the second speed. An in-gait sequence feature may be configured. It may be possible to predict the degree of cognitive impairment reflected in the instability of gait observed during fast walking by considering not only normal speed walking but also fast walking that requires greater motor ability. In addition, considering the high-speed gait characteristic together with the normal-speed gait characteristic, the new characteristic derived from the relationship with the normal-speed gait characteristic can serve as an effective predictor, so it may be possible to predict the severity of cognitive impairment with higher accuracy. have.
인지장애 심각도 예측부(120)는 보행 시퀀스 피쳐 입력 시 인지장애 심각도를 출력하도록 학습된 노인 인지장애 심각도 예측 모델을 이용하여, 대상자의 보행 시퀀스 피쳐에 기초하여 대상자의 인지장애 심각도를 예측할 수 있다. 노인 인지장애 심각도 예측 모델은 보행 시퀀스 피쳐 입력 시 대상자의 인지장애 심각도를 출력하도록 학습된 인공 신경망(artificial neural network, ANN) 기반의 모델일 수 있다. The cognitive impairment severity prediction unit 120 may predict the cognitive impairment severity of the subject based on the subject's gait sequence feature by using the elderly cognitive impairment severity prediction model trained to output the cognitive impairment severity when the gait sequence feature is input. The elderly cognitive impairment severity prediction model may be an artificial neural network (ANN)-based model trained to output the subject's cognitive impairment severity when a walking sequence feature is input.
구체적으로, 노인 인지장애 심각도 예측 모델은 시간에 따라 매순간 신경망을 쌓아올리는 재귀(recurrent) 신경망을 포함할 수 있다. 여기서, 보행 변인들은 연속성을 가진 시계열 데이터에 해당하며, 인지장애 심각도 예측부(120)는 장기 기억 학습 능력이 뛰어나 이러한 시계열 데이터의 패턴 분석에 적합한 장단기 기억 네트워크(long short-term memory network)를 사용해 대상자의 보행 패턴을 기반으로 대상자의 인지장애 심각도를 판단할 수 있다. Specifically, the cognitive impairment severity prediction model for the elderly may include a recurrent neural network that builds up neural networks at every moment over time. Here, the gait variables correspond to time series data having continuity, and the cognitive impairment severity prediction unit 120 uses a long short-term memory network suitable for pattern analysis of such time series data because it has excellent long-term memory learning ability. The severity of the subject's cognitive impairment can be judged based on the subject's gait pattern.
도 8의 예시적인 장단기 기억 네트워크 구조를 참조하면, 장단기 기억 네트워크는 보행 시퀀스 피쳐에 포함된 시간적 보행 변인들을 순차적으로 입력받아 보행 패턴을 인식할 수 있다. Referring to the exemplary long and short-term memory network structure of FIG. 8 , the long-term memory network may recognize a gait pattern by sequentially receiving temporal gait variables included in the gait sequence feature.
인지장애 심각도 예측 모델 구축부(130)는 보행 시퀀스 피쳐를 입력 시 인지장애 심각도가 출력되도록 기계 학습 알고리즘을 훈련시킬 수 있다. 복수 대상자의 보행 시퀀스 피쳐가 입력 데이터로, 이에 대응하는 인지장애 심각도가 출력 데이터로 인지장애 심각도 예측 모델 구축부(130)에 제공될 수 있으며, 기계 학습 알고리즘 기반의 분류 학습이 진행될 수 있다. The cognitive impairment severity prediction
여기서, 노인 인지장애 심각도 예측 모델은 임상에서 MMSE (Mini-Mental State Examination) 또는 MoCA (Montreal Cognitive Assessment) 점수 등을 기준으로 평가된 대상자의 인지장애 심각도를 출력하도록 훈련될 수 있다. 노인 인지장애 심각도 예측 모델은 입력된 보행 시퀀스 피쳐를 기초로 대상자의 인지장애 심각도를 “낮은 심각도"와 "높은 심각도"로 이분화하거나, "낮은 심각도”, “중간 심각도”, “높은 심각도”로 삼분화하여 출력하도록 훈련될 수 있다.Here, the elderly cognitive impairment severity prediction model may be trained to output the cognitive impairment severity of a subject evaluated based on a Mini-Mental State Examination (MMSE) or Montreal Cognitive Assessment (MoCA) score in a clinical setting. The elderly cognitive impairment severity prediction model divides subjects' cognitive impairment severity into “low severity” and “high severity” based on the input gait sequence features, or divides them into “low severity”, “medium severity”, and “high severity”. It can be trained to output by triangulation.
인지장애 심각도 예측 모델 구축부(130)는 설정에 따라 차기 노인 인지장애 심각도 예측 모델의 구조를 자동 업데이트하도록 제어될 수 있다. 기구축된 노인 인지장애 심각도 예측 모델의 훈련에 사용되지 않은 새로운 대상자의 데이터가 데이터베이스(140)에 저장될 수 있고, 인지장애 심각도 예측 모델 구축부(130)는 확장된 데이터베이스를 활용해 범용성이 개선된 노인 인지장애 심각도 예측 모델을 구축할 수 있다. 인지장애 심각도 예측부(120)는 새로 구축된 노인 인지장애 심각도 예측 모델을 이용해 향상된 정확도로 인지장애 심각도 평가를 제공할 수 있다. The cognitive impairment severity prediction
몇몇 실시예에서, 대상자의 보행 시퀀스 피쳐 외에 대상자의 인구학적 특성(성별, 나이) 및 대상자의 인체 측정학적 특성(신장, 체중, 종아리 둘레) 중 적어도 하나가 입력 데이터로 더 제공될 수 있다. 인지장애 심각도 예측 모델 구축부(130)는 보행 시퀀스 피쳐와 대상자의 인구학적 특성 및 대상자의 인체 측정학적 특성 중 적어도 하나의 데이터를 입력 시 대상자의 인지장애 심각도가 출력되도록 기계 학습 알고리즘을 훈련시킬 수 있다. 인지장애 심각도 예측부(120)는 훈련된 기계 학습 알고리즘을 이용하여 대상자의 보행 시퀀스 피쳐, 대상자의 인구학적 특성 및 대상자의 인체 측정학적 특성에 기초한 대상자의 인지장애 심각도 평가를 제공할 수 있다.In some embodiments, in addition to the subject's gait sequence feature, at least one of demographic characteristics (gender, age) of the subject and anthropometric characteristics (height, weight, calf circumference) of the subject may be further provided as input data. The cognitive impairment severity prediction
본 발명의 실시예에 따른 노인 인지장애 심각도 예측 시스템(10)은 웨어러블 장비로 획득 가능한 보행 데이터 또는 보행 영상으로부터 대상자의 보행 변인을 추출하고, 보행 변인들의 패턴 분석에 적합한 기계 학습 모델을 이용해 대상자의 인지장애 심각도를 예측할 수 있다. 즉, 고가의 장비, 숙련된 전문가, 복잡한 검사 과정 없이도 일상 생활 속에서 지속적으로 인지장애 상태를 모니터링함으로써 인지장애의 조기 진단, 증상 관리, 적절한 치료의 기회를 대상자들에게 제공할 수 있다. 또한, 본 발명의 실시예에 따른 노인 인지장애 심각도 예측 시스템(10)은 인지 기능 손상 정도를 더 잘 반영할 수 있는 빠른 속도 보행에서의 보행 변인을 추출하고, 이를 고려하여 대상자의 인지장애 심각도를 예측할 수 있다. 즉, 빠른 속도 보행 특성을 보통 속도 보행 특성과 함께 고려하여 보통 속도 보행 특성과의 관계로부터 파생되는 새로운 특성이 효과적인 예측인자로서의 역할을 할 수 있기 때문에 더 높은 정확도로 대상자의 인지장애 심각도를 예측할 수 있다. The elderly cognitive impairment
도 9는 보통 속도 보행 특성 및 빠른 속도 보행 특성을 이용한 인지장애 심각도 예측의 정확도를 비교한 실험 그래프이다.9 is an experimental graph comparing the accuracy of predicting the severity of cognitive impairment using normal speed walking characteristics and fast walking characteristics.
지역 사회에 거주하고 있는 총 108명의 65세 이상 고령자를 인지장애 심각도에 따라 세 그룹으로 분류하고 이들로부터 보행 관련 데이터를 수집한 후, 3가지 유형으로 입력 데이터를 구성하여 비교 실험을 진행하였다. A total of 108 elderly people aged 65 and over living in the local community were classified into three groups according to the severity of cognitive impairment, and gait-related data were collected from them.
즉, 비교예 1은 보통 속도 보행(제1 속도 보행)에 대한 제1 보행 관련 데이터를 수집하고, 이를 기초로 제1 보행 변인을 추출, 추출된 보행 변인으로 제1 보행 시퀀스 피쳐를 구성하여 기구축된 노인 인지장애 심각도 예측 모델의 입력 데이터로 제공하는 과정을 통해 출력 데이터를 획득하였다. 여기서, 노인 인지장애 심각도 예측 모델은 입력된 보행 시퀀스 피쳐를 기초로 "낮은 심각도”, “중간 심각도”, “높은 심각도”로 삼분화하여 인지장애 심각도를 출력하도록 훈련된 상태일 수 있다. That is, Comparative Example 1 collects first gait-related data for normal speed gait (first speed gait), extracts a first gait variable based on this, and configures a first gait sequence feature with the extracted gait variable Output data was obtained through the process of providing input data of the constructed elderly cognitive impairment severity prediction model. Here, the elderly cognitive impairment severity prediction model may be in a trained state to output the cognitive impairment severity by triangulating it into "low severity", "medium severity", and "high severity" based on the input gait sequence feature.
비교예 2는 빠른 속도 보행(제2 속도 보행)에 대한 제2 보행 관련 데이터를 수집하고, 이를 기초로 제2 보행 변인을 추출, 추출된 보행 변인으로 제2 보행 시퀀스 피쳐를 구성하여 기구축된 노인 인지장애 심각도 예측 모델의 입력 데이터로 제공하는 과정을 통해 출력 데이터를 획득하였다. Comparative Example 2 collects second gait-related data for fast walking (second speed gait), extracts a second gait variable based on this, and configures a second gait sequence feature with the extracted gait variable The output data was obtained through the process of providing the input data of the cognitive impairment severity prediction model for the elderly.
실시예는 상술한 노인 인지장애 심각도 예측 시스템(10)에 의한 것으로, 보통 속도 보행(제1 속도 보행)과 빠른 속도 보행(제2 속도 보행)에 대한 제1 및 제2 보행 관련 데이터 각각 수집하고, 제1 및 제2 보행 변인을 각각 추출하며, 추출된 제1 및 제2 보행 변인으로 제1 및 제2 보행 시퀀스 피쳐를 각각 구성한 후, 이를 기구축된 노인 인지장애 심각도 예측 모델의 입력 데이터로 제공하는 과정을 통해 출력 데이터를 획득하였다. The embodiment is based on the above-described elderly cognitive impairment
여기서, 분류 정확도는 대상자들의 실제 인지장애 심각도와 노인 인지장애 심각도 예측 모델을 통해 예측된 인지장애 심각도가 일치하는 정도를 의미한다. 즉, 분류 정확도가 높을수록 예측된 인지장애 심각도가 실제 인지장애 심각도와 일치함을 의미한다.Here, the classification accuracy refers to the degree to which the actual cognitive impairment severity of the subjects matches the cognitive impairment severity predicted through the elderly cognitive impairment severity prediction model. That is, the higher the classification accuracy, the more consistent the predicted cognitive impairment severity with the actual cognitive impairment severity.
도 9의 그래프를 참조하면, 보통 속도 보행 특성을 이용한 비교예 1에 따른 분류 정확도가 0.92로 가장 낮게 나타나는 것을 알 수 있으며, 보통 속도 보행 특성과 빠른 속도 보행 특성을 모두 이용한 실시예가 가장 높은 분류 정확도 0.97을 제공하는 것을 알 수 있다. 즉, 빠른 속도 보행 특성을 보통 속도 보행 특성과 함께 고려하여 보통 속도 보행 특성과의 관계로부터 파생되는 새로운 특성이 효과적인 예측인자로서의 역할을 할 수 있기 때문에 더 높은 정확도로 대상자의 인지장애 심각도를 예측할 수 있음을 확인할 수 있다.Referring to the graph of FIG. 9 , it can be seen that the classification accuracy according to Comparative Example 1 using the normal speed walking characteristic is the lowest at 0.92, and the example using both the normal speed walking characteristic and the fast walking characteristic has the highest classification accuracy. It can be seen that 0.97 is provided. In other words, considering the high-speed gait characteristic together with the normal-speed gait characteristic, the new characteristic derived from the relationship with the normal-speed gait characteristic can serve as an effective predictor, so it is possible to predict the subject's cognitive impairment severity with higher accuracy. It can be confirmed that there is
이하, 본 발명의 다른 실시예에 따른 노인 인지장애 심각도 예측 방법에 대해 설명하도록 한다. Hereinafter, a method for predicting the severity of cognitive impairment in the elderly according to another embodiment of the present invention will be described.
도 10은 본 발명의 다른 실시예에 따른 노인 인지장애 심각도 예측 방법의 순서도이다. 상기 방법은 상술한 도 1 내지 도 8의 시스템에서 수행될 수 있고, 본 실시예의 설명을 위해 도 1 내지 도 9가 참조될 수 있다.10 is a flowchart of a method for predicting the severity of cognitive impairment in the elderly according to another embodiment of the present invention. The method may be performed in the system of FIGS. 1 to 8 described above, and FIGS. 1 to 9 may be referred to for description of the present embodiment.
도 10을 참조하면, 본 발명의 다른 실시예에 따른 노인 인지장애 심각도 예측 방법은 대상자의 제1 속도 보행에 대한 제1 보행 관련 데이터 및 상기 대상자의 제2 속도 보행에 대한 제2 보행 관련 데이터를 각각 수집하는 단계(S100); 상기 수집된 대상자의 제1 보행 관련 데이터를 분석하여 대상자의 제1 보행 변인을 추출하고, 상기 수집된 대상자의 제2 보행 관련 데이터를 분석하여 대상자의 제2 보행 변인을 추출하는 단계(S110); 상기 대상자의 제1 보행 변인을 시간 순서에 따라 배열하여 대상자의 제1 보행 시퀀스 피쳐를 생성하고, 상기 대상자의 제2 보행 변인을 시간 순서에 따라 배열하여 대상자의 제2 보행 시퀀스 피쳐를 생성하며, 상기 제1 보행 시퀀스 피쳐와 상기 제2 보행 시퀀스 피쳐에 기초하여 대상자의 보행 시퀀스 피쳐를 구성하는 단계(S120);및 보행 시퀀스 피쳐 입력 시 인지장애 심각도를 출력하도록 학습된 노인 인지장애 심각도 예측 모델을 이용하여, 상기 대상자의 보행 시퀀스 피쳐에 기초하여 상기 대상자의 인지장애 심각도를 예측하는 단계(S130)를 포함한다. 10 , the method for predicting the severity of cognitive impairment in the elderly according to another embodiment of the present invention includes first gait-related data for a first speed gait of a subject and second gait-related data for a second speed gait of the subject. collecting each (S100); extracting a first gait variable of the subject by analyzing the first gait-related data of the collected subject, and extracting a second gait variable of the subject by analyzing the collected second gait-related data of the subject (S110); arranging the first gait variable of the subject in chronological order to generate a first gait sequence feature of the subject, and arranging the second gait variable of the subject in chronological order to generate a second gait sequence feature of the subject, constructing a gait sequence feature of the subject based on the first gait sequence feature and the second gait sequence feature (S120); and the elderly cognitive impairment severity prediction model trained to output the cognitive impairment severity when the gait sequence feature is input using, predicting the severity of cognitive impairment of the subject based on the subject's gait sequence feature (S130).
먼저, 대상자의 제1 보행 관련 데이터 및 제2 보행 관련 데이터를 수집한다(S100).First, the subject's first gait-related data and second gait-related data are collected (S100).
본 단계(S100)는 노인 인지장애 심각도 예측 시스템(10)의 보행 변인 추출부(100)에서 수행될 수 있다.This step ( S100 ) may be performed by the gait
대상자의 제1 속도 보행에 대한 제1 보행 관련 데이터를 수집하고, 상기 대상자의 제2 속도 보행에 대한 제2 보행 관련 데이터를 수집할 수 있다. 여기서, 상기 제2 속도 보행의 속도는 상기 제1 속도 보행의 속도보다 더 빠른 속도일 수 있다. 상기 제2 속도 보행의 속도는 상기 제1 속도 보행의 속도의 1.1 배 내지 1.2 배일 수 있다. The first gait-related data for the subject's first gait may be collected, and the second gait-related data for the subject's second gait may be collected. Here, the speed of the second speed walking may be higher than the speed of the first speed walking. The speed of the second speed walking may be 1.1 times to 1.2 times the speed of the first speed walking.
상기 대상자의 제1 보행 관련 데이터는 상기 대상자의 제1 속도 보행에 따른 대상자의 제1 족저압 데이터, 상기 대상자의 제1 속도 보행에 따른 대상자의 제1 운동학적 데이터 및 상기 대상자의 제1 속도 보행 동작을 촬영한 대상자의 제1 보행 영상 중 적어도 하나를 포함하고, 상기 대상자의 제2 보행 관련 데이터는 상기 대상자의 제2 속도 보행에 따른 대상자의 제2 족저압 데이터, 상기 대상자의 제2 속도 보행에 따른 대상자의 제2 운동학적 데이터 및 상기 대상자의 제2 속도 보행 동작을 촬영한 대상자의 제2 보행 영상 중 적어도 하나를 포함할 수 있다. The first gait-related data of the subject includes first plantar pressure data of the subject according to the subject's first speed gait, first kinematic data of the subject according to the subject's first speed gait, and the subject's first speed gait At least one of the subject's first gait image of the motion is included, and the subject's second gait-related data includes the subject's second plantar pressure data according to the subject's second speed gait, the subject's second gait-related data It may include at least one of the subject's second kinematic data and the subject's second gait image obtained by photographing the subject's second speed gait motion.
보행 변인 추출부(100)의 데이터 수집 유닛(101)은 족저압 측정 장비(200), 운동학적 데이터 측정 장비(300) 및 카메라(미도시)와 통신망을 통해 데이터를 교환하도록 구성될 수 있으며, 족저압 측정 장비(200)로부터 제1 족저압 데이터 및 제2 족저압 데이터를 수신하고, 운동학적 데이터 측정 장비(300)로부터 제1 운동학적 데이터 및 제2 운동학적 데이터를 수신하며, 카메라로부터 제1 보행 영상 및 제2 보행 영상을 수신하도록 구성될 수 있다.The
다음으로, 상기 수집된 대상자의 제1 보행 관련 데이터를 분석하여 대상자의 제1 보행 변인을 추출하고, 상기 수집된 대상자의 제2 보행 관련 데이터를 분석하여 대상자의 제2 보행 변인을 추출한다(S110).Next, the subject's first gait variable is extracted by analyzing the collected subject's first gait-related data, and the second gait-related data of the subject is analyzed to extract the subject's second gait variable (S110) ).
본 단계(S110)는 노인 인지장애 심각도 예측 시스템(10)의 보행 변인 추출부(100)에서 수행될 수 있다.This step (S110) may be performed in the gait
본 단계(S110)는 상기 제1 족저압 데이터에서 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하고, 상기 제2 족저압 데이터에서 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하는 단계; 상기 제1 운동학적 데이터에서 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하고, 상기 제2 운동학적 데이터에서 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하는 단계; 및 상기 제1 보행 영상에서 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하고, 상기 제2 보행 영상에서 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하는 단계 중 적어도 하나의 단계를 포함한다. In this step (S110), the heel strike time and toe off time of the subject according to the first speed gait are detected from the first plantar pressure data, and the second speed is obtained from the second plantar pressure data. Detecting a point of heel strike and a point of toe off of the subject according to walking; In the first kinematic data, the heel strike time and toe off time of the subject according to the first speed gait are detected, and the heel of the subject according to the second speed gait is detected from the second kinematic data. detecting a time point of a heel strike and a time point of toe off; and detecting a heel strike time and a toe off time of the subject according to the first speed gait in the first gait image, and ground the subject's heel according to the second speed gait in the second gait image and at least one of detecting a heel strike time and a toe off time.
또한, 본 단계(S110)는 상기 족저압 데이터 분석 유닛, 상기 운동학적 데이터 분석 유닛 및 상기 보행 영상 분석 유닛 중 적어도 하나에서 검출된 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점에 기초하여 대상자의 제1 보행 변인을 추출하는 단계; 및 상기 족저압 데이터 분석 유닛, 상기 운동학적 데이터 분석 유닛 및 상기 보행 영상 분석 유닛 중 적어도 하나에서 검출된 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점에 기초하여 대상자의 제2 보행 변인을 추출하는 단계를 더 포함한다. In addition, this step (S110) is a heel strike time and toes of the subject according to the first speed gait detected by at least one of the plantar pressure data analysis unit, the kinematic data analysis unit, and the gait image analysis unit. extracting a first gait variable of the subject based on a toe-off time; and at a time of heel strike and toe off of the subject according to the second speed gait detected by at least one of the plantar pressure data analysis unit, the kinematic data analysis unit, and the gait image analysis unit. The method further includes extracting a second gait variable of the subject based on the method.
여기서, 상기 제1 보행 변인과 상기 제2 보행 변인은 시간적 보행 변인이고, 상기 시간적 보행 변인은 입각기(stance phase), 유각기(swing phase), 걸음(step), 활보(stride), 초기 양하지 지지기(initial double-limb support period), 말기 양하지 지지기(terminal double-limb support period) 및 단하지 지지기(single-limb support period) 중 적어도 하나의 구간의 지속 시간에 해당한다. Here, the first gait variable and the second gait variable are temporal gait variables, and the temporal gait variable includes a stance phase, a swing phase, a step, a stride, and an initial amount. It corresponds to the duration of at least one of the initial double-limb support period, the terminal double-limb support period, and the single-limb support period.
다음으로, 상기 대상자의 제1 보행 변인을 시간 순서에 따라 배열하여 대상자의 제1 보행 시퀀스 피쳐를 생성하고, 상기 대상자의 제2 보행 변인을 시간 순서에 따라 배열하여 대상자의 제2 보행 시퀀스 피쳐를 생성하며, 상기 제1 보행 시퀀스 피쳐와 상기 제2 보행 시퀀스 피쳐에 기초하여 대상자의 보행 시퀀스 피쳐를 구성한다(S120).Next, the subject's first gait sequence feature is generated by arranging the subject's first gait variable in chronological order, and the subject's second gait sequence feature is obtained by arranging the subject's second gait sequence feature in chronological order and constructs a gait sequence feature of the subject based on the first gait sequence feature and the second gait sequence feature (S120).
보행 특성 생성부(110)는 제1 보행 변인을 시간 순서에 따라 배열하여 대상자의 제1 보행 시퀀스 피쳐(sequence feature)를 생성할 수 있다. 또한, 보행 특성 생성부(110)는 제2 보행 변인을 시간 순서에 따라 배열하여 대상자의 제2 보행 시퀀스 피쳐(sequence feature)를 생성할 수 있다. 제1 보행 시퀀스 피쳐 및 제2 보행 시퀀스 피쳐는 인공 신경망 기반의 예측 모델에 입력으로 사용하기 위해 전처리된 데이터일 수 있다. 보행 특성 생성부(110)는 일정 크기의 윈도우를 설정하고 이 윈도우를 일정 간격으로 이동시키는 과정을 통해 제1 보행 시퀀스 피쳐 및 제2 보행 시퀀스 피쳐를 각각 연속적으로 생성할 수 있다.The gait
상기 시간적 보행 변인이 복수의 종류로 추출되는 경우, 상기 보행 시퀀스 피쳐는 M x N 크기로 구성되고, 상기 M은 상기 시간적 보행 변인의 종류의 개수이고, 상기 N은 시간 순서에 따라 배열되는 시간적 보행 변인의 개수일 수 있다.When the temporal gait variable is extracted into a plurality of types, the gait sequence feature has a size of M x N, M is the number of types of the temporal gait variable, and N is a temporal gait arranged in a temporal sequence It can be the number of variables.
상술한 과정을 통해 제1 보행 변인에 대한 제1 보행 시퀀스 피쳐와 제2 보행 변인에 대한 제2 보행 시퀀스 피쳐가 각각 생성될 수 있다. 여기서, 보행 특성 생성부(110)는 제1 보행 시퀀스 피쳐와 제2 보행 시퀀스 피쳐에 기초하여 대상자의 보행 시퀀스 피쳐를 구성할 수 있다. 보행 시퀀스 피쳐는 제1 보행 시퀀스 피쳐와 제2 보행 시퀀스 피쳐가 병합되어 구성될 수 있으나, 이에 한정되는 것은 아니다. Through the above-described process, a first gait sequence feature for the first gait variable and a second gait sequence feature for the second gait variable may be generated, respectively. Here, the gait
다음으로, 보행 시퀀스 피쳐 입력 시 인지장애 심각도를 출력하도록 학습된 노인 인지장애 심각도 예측 모델을 이용하여, 상기 대상자의 보행 시퀀스 피쳐에 기초하여 상기 대상자의 인지장애 심각도를 예측한다(S130).Next, the cognitive impairment severity of the subject is predicted based on the subject's gait sequence feature using the elderly cognitive impairment severity prediction model trained to output the cognitive impairment severity when the gait sequence feature is input (S130).
본 실시예에 따른 방법은 본 단계(S130)의 수행 이전, 노인 인지장애 심각도 예측 모델이 구축되는 단계를 더 포함할 수 있다. 상기 노인 인지장애 심각도 예측 모델은 장기 기억 학습 능력이 뛰어나 시계열 데이터의 패턴 분석에 적합한 장단기 기억 네트워크를 포함할 수 있다. The method according to the present embodiment may further include the step of constructing a cognitive impairment severity prediction model for the elderly before performing this step (S130). The elderly cognitive impairment severity prediction model may include a long-term memory network suitable for pattern analysis of time series data because it has excellent long-term memory learning ability.
여기서, 노인 인지장애 심각도 예측 모델은 임상에서 MMSE (Mini-Mental State Examination) 또는 MoCA (Montreal Cognitive Assessment) 점수 등을 기준으로 평가된 대상자의 인지장애 심각도를 출력하도록 훈련될 수 있다. 노인 인지장애 심각도 예측 모델은 입력된 보행 시퀀스 피쳐를 기초로 대상자의 인지장애 심각도를 “낮은 심각도"와 "높은 심각도"로 이분화하거나, "낮은 심각도”, “중간 심각도”, “높은 심각도”로 삼분화하여 출력하도록 훈련될 수 있다.Here, the elderly cognitive impairment severity prediction model may be trained to output the cognitive impairment severity of a subject evaluated based on a Mini-Mental State Examination (MMSE) or Montreal Cognitive Assessment (MoCA) score in a clinical setting. The elderly cognitive impairment severity prediction model divides subjects' cognitive impairment severity into “low severity” and “high severity” based on the input gait sequence features, or divides them into “low severity”, “medium severity”, and “high severity”. It can be trained to output by triangulation.
인지장애 심각도 예측부(120)는 보행 시퀀스 피쳐 입력 시 인지장애 심각도를 출력하도록 학습된 노인 인지장애 심각도 예측 모델을 이용하여, 대상자의 보행 시퀀스 피쳐에 기초하여 대상자의 인지장애 심각도를 예측할 수 있다.The cognitive impairment severity prediction unit 120 may predict the cognitive impairment severity of the subject based on the subject's gait sequence feature by using the elderly cognitive impairment severity prediction model trained to output the cognitive impairment severity when the gait sequence feature is input.
본 발명의 실시예에 따른 노인 인지장애 심각도 예측 방법은 웨어러블 장비로 획득 가능한 보행 데이터 또는 보행 영상으로부터 대상자의 보행 변인을 추출하고, 보행 변인들의 패턴 분석에 적합한 기계 학습 모델을 이용해 대상자의 인지장애 심각도를 예측할 수 있다. 즉, 고가의 장비, 숙련된 전문가, 복잡한 검사 과정 없이도 일상 생활 속에서 지속적으로 인지장애 상태를 모니터링함으로써 인지장애의 조기 진단, 증상 관리, 적절한 치료의 기회를 대상자들에게 제공할 수 있다.The method for predicting the severity of cognitive impairment in the elderly according to an embodiment of the present invention extracts the subject's gait variables from gait data or gait images obtainable with wearable equipment, and uses a machine learning model suitable for pattern analysis of the gait variables to determine the subject's cognitive impairment severity can be predicted In other words, it is possible to provide the subjects with an opportunity for early diagnosis, symptom management, and appropriate treatment of cognitive impairment by continuously monitoring the state of cognitive impairment in daily life without expensive equipment, skilled specialists, and complicated examination procedures.
또한, 본 발명의 실시예에 따른 노인 인지장애 심각도 예측 방법은 인지 기능 손상 정도를 더 잘 반영할 수 있는 빠른 속도 보행에서의 보행 변인을 추출하고, 이를 고려하여 대상자의 인지장애 심각도를 예측할 수 있다. 즉, 빠른 속도 보행 특성을 보통 속도 보행 특성과 함께 고려하여 보통 속도 보행 특성과의 관계로부터 파생되는 새로운 특성이 효과적인 예측인자로서의 역할을 할 수 있기 때문에 더 높은 정확도로 대상자의 인지장애 심각도를 예측할 수 있다.In addition, the method for predicting the severity of cognitive impairment in the elderly according to an embodiment of the present invention extracts gait variables in fast walking that can better reflect the degree of cognitive impairment, and predicts the severity of cognitive impairment of the subject by taking this into account . In other words, considering the high-speed gait characteristic together with the normal-speed gait characteristic, it is possible to predict the subject's cognitive impairment severity with higher accuracy because the new characteristic derived from the relationship with the normal-speed gait characteristic can serve as an effective predictor. have.
이상에서는 실시예들을 참조하여 설명하였지만 본 발명은 이러한 실시예들 또는 도면에 의해 한정되는 것으로 해석되어서는 안 되며, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although the above has been described with reference to the embodiments, the present invention should not be construed as being limited by these embodiments or drawings, and those skilled in the art will appreciate the spirit and scope of the present invention described in the claims below. It will be understood that various modifications and variations of the present invention can be made without departing from the scope of the present invention.
10: 노인 인지장애 심각도 예측 시스템
100: 보행 변인 추출부
110: 보행 특성 생성부
120: 인지장애 심각도 예측부
130: 인지장애 심각도 예측 모델 구축부
140: 데이터베이스10: Elderly Cognitive Impairment Severity Prediction System
100: gait variable extraction unit
110: gait characteristic generation unit
120: cognitive impairment severity prediction unit
130: Cognitive impairment severity prediction model construction unit
140: database
Claims (16)
상기 대상자의 제1 보행 변인을 시간 순서에 따라 배열하여 대상자의 제1 보행 시퀀스 피쳐를 생성하고, 상기 대상자의 제2 보행 변인을 시간 순서에 따라 배열하여 대상자의 제2 보행 시퀀스 피쳐를 생성하며, 상기 제1 보행 시퀀스 피쳐 및 상기 제2 보행 시퀀스 피쳐에 기초하여 대상자의 보행 시퀀스 피쳐를 구성하는 보행 특성 생성부; 및
보행 시퀀스 피쳐 입력 시 인지장애 심각도를 출력하도록 학습된 노인 인지장애 심각도 예측 모델을 이용하여, 상기 대상자의 보행 시퀀스 피쳐에 기초하여 대상자의 인지장애 심각도를 예측하는 인지장애 심각도 예측부를 포함하는 노인 인지장애 심각도 예측 시스템.The first gait-related data for the subject's first gait is collected, the first gait-related data of the subject is analyzed to extract the subject's first gait variable, and the second gait-related data for the subject's second gait is collected. A gait variable extractor that collects gait-related data and analyzes the collected second gait-related data of the subject to extract a second gait variable of the subject, wherein the speed of the second gait is greater than the speed of the first gait. faster speed, gait variable extraction unit;
arranging the first gait variable of the subject in chronological order to generate a first gait sequence feature of the subject, and arranging the second gait variable of the subject in chronological order to generate a second gait sequence feature of the subject, a gait characteristic generator configured to configure a gait sequence feature of the subject based on the first gait sequence feature and the second gait sequence feature; and
Elderly cognitive impairment comprising a cognitive impairment severity prediction unit that predicts the subject's cognitive impairment severity based on the subject's gait sequence feature using the elderly cognitive impairment severity prediction model trained to output the cognitive impairment severity when the gait sequence feature is input Severity Prediction System.
상기 대상자의 제1 보행 관련 데이터는 상기 대상자의 제1 속도 보행에 따른 대상자의 제1 족저압 데이터, 상기 대상자의 제1 속도 보행에 따른 대상자의 제1 운동학적 데이터 및 상기 대상자의 제1 속도 보행 동작을 촬영한 대상자의 제1 보행 영상 중 적어도 하나를 포함하고,
상기 대상자의 제2 보행 관련 데이터는 상기 대상자의 제2 속도 보행에 따른 대상자의 제2 족저압 데이터, 상기 대상자의 제2 속도 보행에 따른 대상자의 제2 운동학적 데이터 및 상기 대상자의 제2 속도 보행 동작을 촬영한 대상자의 제2 보행 영상 중 적어도 하나를 포함하는 노인 인지장애 심각도 예측 시스템.According to claim 1,
The first gait-related data of the subject includes first plantar pressure data of the subject according to the subject's first speed gait, first kinematic data of the subject according to the subject's first speed gait, and the subject's first speed gait Including at least one of the first gait image of the subject photographing the motion,
The second gait-related data of the subject includes second plantar pressure data of the subject according to the subject's second speed gait, second kinematic data of the subject according to the subject's second speed gait, and the second speed gait of the subject A system for predicting the severity of cognitive impairment in the elderly including at least one of the second gait images of the subject photographing the motion.
상기 보행 변인 추출부는,
상기 제1 족저압 데이터에서 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하고, 상기 제2 족저압 데이터에서 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하는 족저압 데이터 분석 유닛;
상기 제1 운동학적 데이터에서 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하고, 상기 제2 운동학적 데이터에서 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하는 운동학적 데이터 분석 유닛;
상기 제1 보행 영상에서 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하고, 상기 제2 보행 영상에서 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하는 보행 영상 분석 유닛; 및
상기 족저압 데이터 분석 유닛, 상기 운동학적 데이터 분석 유닛 및 상기 보행 영상 분석 유닛 중 적어도 하나에서 검출된 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점에 기초하여 대상자의 제1 보행 변인을 추출하고, 상기 족저압 데이터 분석 유닛, 상기 운동학적 데이터 분석 유닛 및 상기 보행 영상 분석 유닛 중 적어도 하나에서 검출된 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점에 기초하여 대상자의 제2 보행 변인을 추출하는 보행 변인 추출 유닛을 포함하는 노인 인지장애 심각도 예측 시스템.3. The method of claim 2,
The gait variable extraction unit,
In the first plantar pressure data, a heel strike time and a toe off time of the subject according to the first speed gait are detected, and the heel of the subject according to the second speed gait is detected from the second plantar pressure data. a plantar pressure data analysis unit that detects a heel strike time and a toe off time;
In the first kinematic data, the heel strike time and toe off time of the subject according to the first speed gait are detected, and the heel of the subject according to the second speed gait is detected from the second kinematic data. a kinematic data analysis unit that detects a heel strike time and a toe off time;
In the first gait image, a time of heel strike and a time of toe-off are detected according to the first speed gait, and the subject's heel grounding according to the second speed gait in the second gait image ( a gait image analysis unit for detecting a heel strike time and a toe-off time; and
Based on the heel strike time and toe off time of the subject according to the first speed gait detected by at least one of the plantar pressure data analysis unit, the kinematic data analysis unit, and the gait image analysis unit to extract the subject's first gait variable, and the subject's heel strike according to the second speed gait detected by at least one of the plantar pressure data analysis unit, the kinematic data analysis unit, and the gait image analysis unit A system for predicting the severity of cognitive impairment in the elderly, comprising: a gait variable extraction unit for extracting a second gait variable of a subject based on a time point and a toe-off time point.
상기 보행 변인 추출부는 족저압 측정 장비로부터 상기 제1 족저압 데이터 및 상기 제2 족저압 데이터 중 적어도 하나를 통신망을 통해 수신하고, 운동학적 데이터 측정 장비로부터 상기 제1 운동학적 데이터 및 상기 제2 운동학적 데이터 중 적어도 하나를 상기 통신망을 통해 수신하고, 카메라로부터 상기 제1 보행 영상 및 제2 보행 영상 중 적어도 하나를 상기 통신망을 통해 수신하도록 구성된 데이터 수집 유닛을 더 포함하고,
상기 족저압 측정 장비는 복수의 압력센서를 포함한 신발 안창(insole)을 포함하는 노인 인지장애 심각도 예측 시스템.4. The method of claim 3,
The gait variable extracting unit receives at least one of the first plantar pressure data and the second plantar pressure data from the plantar pressure measuring device through a communication network, and the first kinematic data and the second exercise from the kinematic data measuring device Further comprising a data collection unit configured to receive at least one of the medical data through the communication network, and to receive at least one of the first walking image and the second walking image from a camera through the communication network,
The plantar pressure measurement equipment is a cognitive impairment severity prediction system for the elderly including a shoe insole including a plurality of pressure sensors.
상기 제1 보행 변인과 상기 제2 보행 변인은 시간적 보행 변인이고,
상기 시간적 보행 변인은 입각기(stance phase), 유각기(swing phase), 걸음(step), 활보(stride), 초기 양하지 지지기(initial double-limb support period), 말기 양하지 지지기(terminal double-limb support period) 및 단하지 지지기(single-limb support period) 중 적어도 하나의 구간의 지속 시간에 해당하는 것을 특징으로 하는 노인 인지장애 심각도 예측 시스템.4. The method of claim 3,
The first gait variable and the second gait variable are temporal gait variables,
The temporal gait variable is a stance phase, a swing phase, a step, a stride, an initial double-limb support period, and a terminal A system for predicting the severity of cognitive impairment in the elderly, characterized in that it corresponds to the duration of at least one of the double-limb support period and the single-limb support period.
상기 시간적 보행 변인이 복수의 종류로 추출되는 경우,
상기 보행 시퀀스 피쳐는 M x N 크기로 구성되고, 상기 M은 상기 시간적 보행 변인의 종류의 개수이고, 상기 N은 시간 순서에 따라 배열되는 시간적 보행 변인의 개수인 것을 특징으로 하는 노인 인지장애 심각도 예측 시스템.6. The method of claim 5,
When the temporal gait variable is extracted into a plurality of types,
The gait sequence feature has a size of M x N, wherein M is the number of types of the temporal gait variable, and N is the number of temporal gait variables arranged in time order. Severity prediction of cognitive impairment in the elderly system.
상기 노인 인지장애 심각도 예측 모델은 보행 시퀀스 피쳐 입력 시 인지장애 심각도를 출력하도록 학습된 장단기 기억 네트워크(long short-term memory network)를 포함하는 것을 특징으로 하는 노인 인지장애 심각도 예측 시스템.According to claim 1,
The elderly cognitive impairment severity prediction model comprises a long short-term memory network trained to output the cognitive impairment severity upon input of a gait sequence feature.
상기 제2 속도 보행의 속도는 상기 제1 속도 보행의 속도의 1.1 배 내지 1.2 배인 것을 특징으로 하는 노인 인지장애 심각도 예측 시스템.According to claim 1,
The speed of the second speed gait is 1.1 to 1.2 times the speed of the first speed gait, the elderly cognitive impairment severity prediction system.
상기 수집된 대상자의 제1 보행 관련 데이터를 분석하여 대상자의 제1 보행 변인을 추출하고, 상기 수집된 대상자의 제2 보행 관련 데이터를 분석하여 대상자의 제2 보행 변인을 추출하는 단계;
상기 대상자의 제1 보행 변인을 시간 순서에 따라 배열하여 대상자의 제1 보행 시퀀스 피쳐를 생성하고, 상기 대상자의 제2 보행 변인을 시간 순서에 따라 배열하여 대상자의 제2 보행 시퀀스 피쳐를 생성하며, 상기 제1 보행 시퀀스 피쳐와 상기 제2 보행 시퀀스 피쳐에 기초하여 대상자의 보행 시퀀스 피쳐를 구성하는 단계; 및
보행 시퀀스 피쳐 입력 시 인지장애 심각도를 출력하도록 학습된 노인 인지장애 심각도 예측 모델을 이용하여, 상기 대상자의 보행 시퀀스 피쳐에 기초하여 상기 대상자의 인지장애 심각도를 예측하는 단계를 포함하는 노인 인지장애 심각도 예측 방법.Collecting first gait-related data for a first speed gait of a subject and second gait-related data for a second speed gait of the subject, respectively, wherein the speed of the second speed gait is the speed of the first speed gait faster than the step;
extracting a first gait variable of the subject by analyzing the collected first gait-related data of the subject, and extracting a second gait variable of the subject by analyzing the collected second gait-related data of the subject;
arranging the first gait variable of the subject in chronological order to generate a first gait sequence feature of the subject, and arranging the second gait variable of the subject in chronological order to generate a second gait sequence feature of the subject, constructing a gait sequence feature of the subject based on the first gait sequence feature and the second gait sequence feature; and
Using the elderly cognitive impairment severity prediction model trained to output the cognitive impairment severity upon input of the gait sequence feature, predicting the severity of cognitive impairment in the elderly based on the subject's gait sequence feature Way.
상기 제2 속도 보행의 속도는 상기 제1 속도 보행의 속도의 1.1 배 내지 1.2 배인 것을 특징으로 하는 노인 인지장애 심각도 예측 방법.10. The method of claim 9
The method for predicting the severity of cognitive impairment in the elderly, characterized in that the speed of the second speed walking is 1.1 to 1.2 times the speed of the first speed walking.
상기 대상자의 제1 보행 관련 데이터는 상기 대상자의 제1 속도 보행에 따른 대상자의 제1 족저압 데이터, 상기 대상자의 제1 속도 보행에 따른 대상자의 제1 운동학적 데이터 및 상기 대상자의 제1 속도 보행 동작을 촬영한 대상자의 제1 보행 영상 중 적어도 하나를 포함하고,
상기 대상자의 제2 보행 관련 데이터는 상기 대상자의 제2 속도 보행에 따른 대상자의 제2 족저압 데이터, 상기 대상자의 제2 속도 보행에 따른 대상자의 제2 운동학적 데이터 및 상기 대상자의 제2 속도 보행 동작을 촬영한 대상자의 제2 보행 영상 중 적어도 하나를 포함하는 노인 인지장애 심각도 예측 방법.10. The method of claim 9,
The first gait-related data of the subject includes first plantar pressure data of the subject according to the subject's first speed gait, first kinematic data of the subject according to the subject's first speed gait, and the subject's first speed gait Including at least one of the first gait image of the subject photographing the motion,
The second gait-related data of the subject includes second plantar pressure data of the subject according to the subject's second speed gait, second kinematic data of the subject according to the subject's second speed gait, and the second speed gait of the subject A method for predicting the severity of cognitive impairment in the elderly including at least one of a second gait image of a subject photographing a motion.
상기 수집된 대상자의 제1 보행 관련 데이터를 분석하여 대상자의 제1 보행 변인을 추출하고, 상기 수집된 대상자의 제2 보행 관련 데이터를 분석하여 대상자의 제2 보행 변인을 추출하는 단계는,
상기 제1 족저압 데이터에서 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하고, 상기 제2 족저압 데이터에서 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하는 단계; 상기 제1 운동학적 데이터에서 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하고, 상기 제2 운동학적 데이터에서 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하는 단계; 및 상기 제1 보행 영상에서 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하고, 상기 제2 보행 영상에서 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점을 검출하는 단계 중 적어도 하나의 단계를 포함하는 노인 인지장애 심각도 예측 방법.12. The method of claim 11,
The steps of extracting a first gait variable of the subject by analyzing the first gait-related data of the collected subject, and extracting a second gait variable of the subject by analyzing the collected second gait-related data of the subject,
In the first plantar pressure data, a heel strike time and a toe off time of the subject according to the first speed gait are detected, and the heel of the subject according to the second speed gait is detected from the second plantar pressure data. detecting a time point of a heel strike and a time point of toe off; In the first kinematic data, the heel strike time and toe off time of the subject according to the first speed gait are detected, and the heel of the subject according to the second speed gait is detected from the second kinematic data. detecting a time point of a heel strike and a time point of toe off; and detecting a heel strike time and a toe off time of the subject according to the first speed gait in the first gait image, and ground the subject's heel according to the second speed gait in the second gait image A method for predicting the severity of cognitive impairment in the elderly, comprising at least one of detecting a heel strike time and a toe off time.
상기 수집된 대상자의 제1 보행 관련 데이터를 분석하여 대상자의 제1 보행 변인을 추출하고, 상기 수집된 대상자의 제2 보행 관련 데이터를 분석하여 대상자의 제2 보행 변인을 추출하는 단계는,
상기 족저압 데이터 분석 유닛, 상기 운동학적 데이터 분석 유닛 및 상기 보행 영상 분석 유닛 중 적어도 하나에서 검출된 제1 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점에 기초하여 대상자의 제1 보행 변인을 추출하는 단계; 및 상기 족저압 데이터 분석 유닛, 상기 운동학적 데이터 분석 유닛 및 상기 보행 영상 분석 유닛 중 적어도 하나에서 검출된 제2 속도 보행에 따른 대상자의 발꿈치 접지(heel strike) 시점과 발가락 들기(toe off) 시점에 기초하여 대상자의 제2 보행 변인을 추출하는 단계를 더 포함하는 노인 인지장애 심각도 예측 방법.13. The method of claim 12,
The steps of extracting a first gait variable of the subject by analyzing the first gait-related data of the collected subject, and extracting a second gait variable of the subject by analyzing the collected second gait-related data of the subject,
Based on the heel strike time and toe off time of the subject according to the first speed gait detected by at least one of the plantar pressure data analysis unit, the kinematic data analysis unit, and the gait image analysis unit to extract a first gait variable of the subject; and at a time of heel strike and toe off of the subject according to the second speed gait detected by at least one of the plantar pressure data analysis unit, the kinematic data analysis unit, and the gait image analysis unit. A method for predicting the severity of cognitive impairment in the elderly further comprising the step of extracting the subject's second gait variable based on the subject.
상기 제1 보행 변인과 상기 제2 보행 변인은 시간적 보행 변인이고,
상기 시간적 보행 변인은 입각기(stance phase), 유각기(swing phase), 걸음(step), 활보(stride), 초기 양하지 지지기(initial double-limb support period), 말기 양하지 지지기(terminal double-limb support period) 및 단하지 지지기(single-limb support period) 중 적어도 하나의 구간의 지속 시간에 해당하는 것을 특징으로 하는 노인 인지장애 심각도 예측 방법.14. The method of claim 13,
The first gait variable and the second gait variable are temporal gait variables,
The temporal gait variable is a stance phase, a swing phase, a step, a stride, an initial double-limb support period, and a terminal A method for predicting the severity of cognitive impairment in the elderly, characterized in that it corresponds to the duration of at least one of a double-limb support period and a single-limb support period.
상기 시간적 보행 변인이 복수의 종류로 추출되는 경우,
상기 보행 시퀀스 피쳐는 M x N 크기로 구성되고, 상기 M은 상기 시간적 보행 변인의 종류의 개수이고, 상기 N은 시간 순서에 따라 배열되는 시간적 보행 변인의 개수인 것을 특징으로 하는 노인 인지장애 심각도 예측 방법.15. The method of claim 14,
When the temporal gait variable is extracted into a plurality of types,
The gait sequence feature has a size of M x N, wherein M is the number of types of the temporal gait variable, and N is the number of temporal gait variables arranged in time order. Severity prediction of cognitive impairment in the elderly Way.
상기 노인 인지장애 심각도 예측 모델은 보행 시퀀스 피쳐 입력 시 인지장애 심각도를 출력하도록 학습된 장단기 기억 네트워크(long short-term memory network)를 포함하는 것을 특징으로 하는 노인 인지장애 심각도 예측 방법.10. The method of claim 9,
The elderly cognitive impairment severity prediction model comprises a long short-term memory network trained to output the cognitive impairment severity upon input of a gait sequence feature.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200160972A KR102474407B1 (en) | 2020-11-26 | 2020-11-26 | Method and system for predicting the severity of cognitive impairment in the elderly using gait parameters at fast-pace walking |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200160972A KR102474407B1 (en) | 2020-11-26 | 2020-11-26 | Method and system for predicting the severity of cognitive impairment in the elderly using gait parameters at fast-pace walking |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20220073153A true KR20220073153A (en) | 2022-06-03 |
KR102474407B1 KR102474407B1 (en) | 2022-12-07 |
Family
ID=81983118
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020200160972A KR102474407B1 (en) | 2020-11-26 | 2020-11-26 | Method and system for predicting the severity of cognitive impairment in the elderly using gait parameters at fast-pace walking |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102474407B1 (en) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104598722A (en) * | 2014-12-25 | 2015-05-06 | 中国科学院合肥物质科学研究院 | Parkinson patient walking ability evaluation method based on gait time-space parameters and three-dimensional force characteristics |
KR20170073557A (en) | 2017-06-08 | 2017-06-28 | 인체항노화표준연구원 주식회사 | Dementia early diagnosis screening device based on the aging-levels of biosignals |
-
2020
- 2020-11-26 KR KR1020200160972A patent/KR102474407B1/en active IP Right Grant
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104598722A (en) * | 2014-12-25 | 2015-05-06 | 中国科学院合肥物质科学研究院 | Parkinson patient walking ability evaluation method based on gait time-space parameters and three-dimensional force characteristics |
KR20170073557A (en) | 2017-06-08 | 2017-06-28 | 인체항노화표준연구원 주식회사 | Dementia early diagnosis screening device based on the aging-levels of biosignals |
Also Published As
Publication number | Publication date |
---|---|
KR102474407B1 (en) | 2022-12-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Hannink et al. | Mobile stride length estimation with deep convolutional neural networks | |
US20120092169A1 (en) | Method of assessing human fall risk using mobile systems | |
Zhou et al. | Validation of an IMU gait analysis algorithm for gait monitoring in daily life situations | |
KR102147099B1 (en) | System for the assessment of lower limb activity and the personalized electrical stimulation using surface electromyography and motion signals | |
CN108814617A (en) | Freezing of gait recognition methods and device and gait detector | |
KR102124095B1 (en) | System and Method for Analyzing Foot Pressure Change and Gait Pattern | |
JP6433805B2 (en) | Motor function diagnosis apparatus and method, and program | |
Erdem et al. | Gait analysis using smartwatches | |
CN108836344B (en) | Step length step frequency estimation method and device and gait detector | |
KR102128267B1 (en) | Method and system for walking ability prediction using stepping characteristics information | |
Light et al. | Optimizing pressure sensor array data for a smart-shoe fall monitoring system | |
KR102128268B1 (en) | Method and system for walking ability prediction using foot characteristics information | |
CN113456060B (en) | Extraction device for motion function characteristic parameters | |
Andrei et al. | Parkinson’s disease detection from gait patterns | |
CN117100255A (en) | Method for judging fall prevention based on neural network model and related products | |
Waugh et al. | Online learning of gait models from older adult data | |
KR102474407B1 (en) | Method and system for predicting the severity of cognitive impairment in the elderly using gait parameters at fast-pace walking | |
KR102251104B1 (en) | Wearable gait analysis device | |
KR102404850B1 (en) | Method and system for frailty prediction using gait parameters | |
JP2021030049A (en) | Sarcopenia evaluation method, sarcopenia evaluation device, and sarcopenia evaluation program | |
Negi et al. | Gait analysis-based identification of neurodegenerative diseases using machine learning techniques | |
Huang et al. | Assessment method of balance ability of older adults using an in-shoe motion sensor | |
KR102350593B1 (en) | Apparatus and method for classifying gait pattern based on multi modal sensor using deep learning ensemble | |
Oluwadare | Gait analysis on a smart floor for health monitoring | |
CN111079651A (en) | Re-optimization of gait classification method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E701 | Decision to grant or registration of patent right |