KR20220072026A - Rehabilitation Training Method and System Using Rehabilitation Robot - Google Patents
Rehabilitation Training Method and System Using Rehabilitation Robot Download PDFInfo
- Publication number
- KR20220072026A KR20220072026A KR1020200157985A KR20200157985A KR20220072026A KR 20220072026 A KR20220072026 A KR 20220072026A KR 1020200157985 A KR1020200157985 A KR 1020200157985A KR 20200157985 A KR20200157985 A KR 20200157985A KR 20220072026 A KR20220072026 A KR 20220072026A
- Authority
- KR
- South Korea
- Prior art keywords
- rehabilitation
- coaching
- rehabilitation training
- data
- robot
- Prior art date
Links
- 238000012549 training Methods 0.000 title claims abstract description 139
- 238000000034 method Methods 0.000 title claims abstract description 30
- 230000033001 locomotion Effects 0.000 claims abstract description 98
- 238000007635 classification algorithm Methods 0.000 claims abstract description 26
- 230000008569 process Effects 0.000 claims abstract description 13
- 238000012937 correction Methods 0.000 claims description 10
- 238000005259 measurement Methods 0.000 claims description 10
- 238000002567 electromyography Methods 0.000 claims description 5
- 231100000430 skin reaction Toxicity 0.000 claims description 4
- 230000004044 response Effects 0.000 claims 2
- 230000008901 benefit Effects 0.000 abstract description 5
- 210000003141 lower extremity Anatomy 0.000 description 10
- 210000003127 knee Anatomy 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000005021 gait Effects 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 3
- 238000005452 bending Methods 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 230000036544 posture Effects 0.000 description 3
- 239000000725 suspension Substances 0.000 description 3
- 206010000117 Abnormal behaviour Diseases 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 244000309466 calf Species 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 208000006011 Stroke Diseases 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 230000015654 memory Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001575 pathological effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000000306 recurrent effect Effects 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000006403 short-term memory Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 210000001364 upper extremity Anatomy 0.000 description 1
- 210000000689 upper leg Anatomy 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 230000002747 voluntary effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H1/00—Apparatus for passive exercising; Vibrating apparatus; Chiropractic devices, e.g. body impacting devices, external devices for briefly extending or aligning unbroken bones
- A61H1/02—Stretching or bending or torsioning apparatus for exercising
- A61H1/0237—Stretching or bending or torsioning apparatus for exercising for the lower limbs
- A61H1/0255—Both knee and hip of a patient, e.g. in supine or sitting position, the feet being moved together in a plane substantially parallel to the body-symmetrical plane
- A61H1/0262—Walking movement; Appliances for aiding disabled persons to walk
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H1/00—Apparatus for passive exercising; Vibrating apparatus; Chiropractic devices, e.g. body impacting devices, external devices for briefly extending or aligning unbroken bones
- A61H1/02—Stretching or bending or torsioning apparatus for exercising
- A61H1/0274—Stretching or bending or torsioning apparatus for exercising for the upper limbs
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B21/00—Exercising apparatus for developing or strengthening the muscles or joints of the body by working against a counterforce, with or without measuring devices
- A63B21/40—Interfaces with the user related to strength training; Details thereof
- A63B21/4001—Arrangements for attaching the exercising apparatus to the user's body, e.g. belts, shoes or gloves specially adapted therefor
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J19/00—Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
- B25J19/02—Sensing devices
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/0006—Exoskeletons, i.e. resembling a human figure
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/0009—Constructional details, e.g. manipulator supports, bases
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1602—Programme controls characterised by the control system, structure, architecture
- B25J9/161—Hardware, e.g. neural networks, fuzzy logic, interfaces, processor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
- A61H2201/01—Constructive details
- A61H2201/0173—Means for preventing injuries
- A61H2201/0176—By stopping operation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
- A61H2201/50—Control means thereof
- A61H2201/5007—Control means thereof computer controlled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
- A61H2201/50—Control means thereof
- A61H2201/5023—Interfaces to the user
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
- A61H2201/50—Control means thereof
- A61H2201/5058—Sensors or detectors
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H2230/00—Measuring physical parameters of the user
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Software Systems (AREA)
- Mechanical Engineering (AREA)
- Life Sciences & Earth Sciences (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Robotics (AREA)
- Evolutionary Computation (AREA)
- Physical Education & Sports Medicine (AREA)
- Artificial Intelligence (AREA)
- Mathematical Physics (AREA)
- Computing Systems (AREA)
- Epidemiology (AREA)
- Automation & Control Theory (AREA)
- Veterinary Medicine (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Public Health (AREA)
- Orthopedic Medicine & Surgery (AREA)
- Biophysics (AREA)
- Data Mining & Analysis (AREA)
- Pain & Pain Management (AREA)
- Rehabilitation Therapy (AREA)
- Animal Behavior & Ethology (AREA)
- Biomedical Technology (AREA)
- Computational Linguistics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Fuzzy Systems (AREA)
- Rehabilitation Tools (AREA)
Abstract
본 발명은 재활 훈련 시스템 및 방법에 관한 것으로, 본 발명에 따른 시스템은 재활 로봇 장치를 이용하여 재활 훈련하고 있는 환자의 생체 신호 데이터와 동작 데이터를 감지하는 센싱부, 센싱부에서 감지된 생체 신호 데이터와 동작 데이터를 입력받아, 미리 훈련된 분류 알고리즘을 이용하여 환자의 재활 훈련 상태 및 동작을 분류하는 분류부, 그리고 환자의 재활 훈련 상태 및 동작을 분류한 결과에 기초하여 코칭을 제공하는 코칭부를 포함한다. 분류 알고리즘은, 재활 로봇 장치를 이용한 재활 훈련 과정에서 수집된 훈련자 생체 신호 데이터, 훈련자 동작 데이터 및 훈련자에 대한 치료사의 코칭 정보를 포함하는 학습 데이터를 이용하여 훈련될 수 있다. 본 발명에 의하면 로봇 파라미터 데이터와 환자의 생체 신호 및 동작 데이터를 기반으로 환자에게 적합한 로봇 파라미터를 제공 가능하고 또한 환자의 자세를 교정 가능함으로써, 물리 치료사의 부담을 줄이면서 환자 생체 신호 및 동작 데이터를 모니터링하기 때문에 안전한 재활 훈련이 가능한 장점이 있다.The present invention relates to a rehabilitation training system and method, wherein the system according to the present invention includes a sensing unit that detects bio-signal data and motion data of a patient undergoing rehabilitation training using a rehabilitation robot device, and bio-signal data detected by the sensing unit. and a classification unit that receives motion data and classifies the patient's rehabilitation training state and motion using a pre-trained classification algorithm, and a coaching unit that provides coaching based on the result of classifying the patient's rehabilitation training status and motion do. The classification algorithm may be trained using learning data including trainer biosignal data, trainee motion data, and coaching information of a therapist for the trainee collected in a rehabilitation training process using the rehabilitation robot device. According to the present invention, it is possible to provide robot parameters suitable for the patient based on the robot parameter data and the patient's bio-signals and motion data and to correct the patient's posture, thereby reducing the burden on the physical therapist and providing the patient's bio-signals and motion data. Because it is monitored, there is an advantage that safe rehabilitation training is possible.
Description
본 발명은 재활 로봇을 이용한 재활 훈련 방법 및 시스템에 관한 것으로, 인공지능 기반으로 로봇 파라미터 및 환자 재활 훈련 동작 코칭을 제안하여 물리 치료사와 협동 작업이 가능한 재활 로봇을 이용한 재활 훈련 방법 및 시스템에 관한 것이다.The present invention relates to a rehabilitation training method and system using a rehabilitation robot, and to a rehabilitation training method and system using a rehabilitation robot that can collaborate with a physical therapist by proposing robot parameters and patient rehabilitation training motion coaching based on artificial intelligence .
다양한 하지 재활 로봇의 보급에 따라 하지 재활 훈련을 진행하는 물리 치료사의 역할이 증가하고 중요성이 더욱 증대되었다. 하지 재활 훈련을 수행하는 물리 치료사는 지속적으로 환자와 상호작용하며, 하지 재활 로봇을 이용한 훈련을 안전하고 성공적으로 이끄는 역할을 수행하게 된다. 이미 개발되어 보급되어 있는 하지 재활 로봇들을 이용한 재활 훈련의 경우, 환자의 생체 데이터를 이용하여 로봇이 운용되기보다는 하지 재활 로봇이 제공하는 고정적인 관절궤적 추종만을 반복적으로 수행하기 때문에 급작스런 환자의 상태 변화에 대처하기 어렵고, 환자의 훈련 상태에 대한 모니터링이 제공되지 않기 때문에 환자의 재활 훈련 성패는 오로지 전적으로 물리 치료사에 의존하게 된다. 물리 치료사는 종래의 하지 재활 로봇을 이용한 로봇 재활 훈련 도중, 예기치 못한 로봇의 비정상 동작, 환자의 응급 상황 발생 등의 비상 상황에 대한 대처가 필수적으로 요구됨과 동시에 다양한 하지 재활 로봇 특징에 따라 필요한 환자의 상호작용을 통하여 재활 훈련을 성공적으로 이끌어야 한다. 예를 들어 보행 교정을 위하여 환자에게 반복적인 보행 동작을 제공하는 하지 재활 로봇의 경우, 재활 로봇이 의도하는 보행 궤적을 환자가 적절히 추종하며 재활 로봇을 탑승하고 있는지 지속적인 모니터링이 요구된다. 또한, 재활 로봇을 탑승하고 있는 환자의 능동적이고 자발적인 참여를 유도하여 로봇을 이용한 훈련의 효과를 극대화하여야 하는 등 물리 치료사의 부담이 증대되었다. 따라서 물리 치료사의 부담을 덜어주고 동작 교정 등을 보조 가능한 코치 어시스트 시스템이 필요하다.With the spread of various lower extremity rehabilitation robots, the role of physical therapists in performing lower extremity rehabilitation training has increased and the importance has increased. A physical therapist who performs lower extremity rehabilitation training continuously interacts with the patient and plays a role of safely and successfully leading training using the lower extremity rehabilitation robot. In the case of rehabilitation training using the already developed and disseminated lower extremity rehabilitation robots, the patient's condition changes suddenly because it repeatedly performs only the fixed joint trajectory provided by the lower extremity rehabilitation robot, rather than operating the robot using the patient's biometric data. Because it is difficult to cope with this, and monitoring of the patient's training status is not provided, the success or failure of the patient's rehabilitation training depends solely on the physical therapist. Physical therapists are required to respond to emergency situations such as unexpected robot abnormal behavior and patient emergency during robot rehabilitation training using the conventional lower extremity rehabilitation robot, and at the same time, it is necessary for the patient to Rehabilitation training should be successfully led through interaction. For example, in the case of a lower extremity rehabilitation robot that provides repetitive gait motions to the patient for gait correction, continuous monitoring is required to ensure that the patient is riding the rehabilitation robot while properly following the gait trajectory intended by the rehabilitation robot. In addition, the burden on the physical therapist has increased, such as to maximize the effect of training using the robot by inducing active and voluntary participation of the patient riding the rehabilitation robot. Therefore, there is a need for a coach assist system that can relieve the burden on the physical therapist and assist with motion correction.
따라서 본 발명이 해결하고자 하는 기술적 과제는 물리 치료사와 협동작업이 가능한 가상 코칭 기능을 제공하는 재활 훈련 방법 및 시스템을 제공하는 것이다.Therefore, the technical problem to be solved by the present invention is to provide a rehabilitation training method and system that provides a virtual coaching function capable of cooperating with a physical therapist.
상기한 기술적 과제를 해결하기 위한 본 발명에 따른 재활 훈련 시스템은 재활 로봇 장치를 이용하여 훈련하고 있는 환자의 생체 신호 데이터와 동작 데이터를 감지하는 센싱부, 상기 센싱부에서 감지된 생체 신호 데이터와 동작 데이터를 입력받아, 미리 훈련된 분류 알고리즘을 이용하여 환자의 재활 훈련 상태 및 동작을 분류하는 분류부, 그리고 상기 환자의 재활 훈련 상태 및 동작을 분류한 결과에 기초하여 코칭을 제공하는 코칭부를 포함한다.Rehabilitation training system according to the present invention for solving the above technical problem is a sensing unit that detects bio-signal data and motion data of a patient who is training using a rehabilitation robot device, and bio-signal data and motion detected by the sensing unit It includes a classification unit that receives data and classifies the patient's rehabilitation training state and motion using a pre-trained classification algorithm, and a coaching unit that provides coaching based on the result of classifying the patient's rehabilitation training status and motion .
상기 분류 알고리즘은, 상기 재활 로봇 장치를 이용한 재활 훈련 과정에서 수집된 훈련자 생체 신호 데이터, 훈련자 동작 데이터 및 훈련자에 대한 치료사의 코칭 정보를 포함하는 학습 데이터를 이용하여 훈련될 수 있다.The classification algorithm may be trained using learning data including trainer biosignal data, trainee motion data, and coaching information of a therapist for the trainee collected in a rehabilitation training process using the rehabilitation robot device.
상기 학습 데이터는, 훈련자 생체 신호 데이터 및 훈련자 동작 데이터에 대응하여 치료사의 코칭 정보가 라벨링될 수 있다.The training data may be labeled with coaching information of a therapist in correspondence to the trainee bio-signal data and the trainee motion data.
상기 학습 데이터는 미리 정해진 임상 시험 중에 수집될 수 있다.The learning data may be collected during a predetermined clinical trial.
상기 코칭부는, 상기 환자의 재활 훈련 상태 및 동작을 분류한 결과, 치료사의 성향에 따라 설정되는 값을 입력받아, 미리 정해진 수학식에 따라 계산되는 코칭 기준값과 현재 코칭 확률을 비교한 결과에 따라 코칭 정보 출력 여부를 결정할 수 있다.The coaching unit receives a value set according to a therapist's tendency as a result of classifying the patient's rehabilitation training state and motion, and provides coaching according to a result of comparing the coaching reference value calculated according to a predetermined equation and the current coaching probability You can decide whether to output information.
상기 코칭부는, 상기 재활 로봇 장치의 동작을 제어하는 로봇 파라미터를 입력받고, 상기 입력된 로봇 파라미터와 상기 환자의 재활 훈련 상태 및 동작을 분류한 결과를 이용하여 상기 재활 로봇 장치의 동작 변경을 위한 추천 로봇 파라미터를 제공할 수 있다.The coaching unit receives a robot parameter for controlling the operation of the rehabilitation robot device, and uses the input robot parameter and the result of classifying the patient's rehabilitation training state and motion to recommend for changing the operation of the rehabilitation robot device You can provide robot parameters.
상기 코칭부는, 상기 환자의 생체 신호 데이터와 동작 데이터를 미리 정해진 윈도우 사이즈로 나누어 분류한 결과가 미리 정해진 임계치 이상이면, 상기 분류 결과에 대한 코칭을 제공할 수 있다.The coaching unit may provide coaching for the classification result when a result of dividing the patient's biosignal data and motion data by a predetermined window size is equal to or greater than a predetermined threshold.
상기 분류부는, 코칭 종류별로 훈련된 복수의 분류 알고리즘을 포함할 수 있다.The classification unit may include a plurality of classification algorithms trained for each type of coaching.
상기 센싱부에서 감지된 생체 신호 데이터와 동작 데이터에서 상기 복수의 분류 알고리즘별로 필요한 데이터를 선택하여 입력시킬 수 있다.Data necessary for each of the plurality of classification algorithms may be selected and inputted from the biosignal data and motion data sensed by the sensing unit.
상기 코칭 종류는, 재활 훈련 동작 별로 구분되는 복수의 동작 교정 코칭과 응급 상황 발생 시 재활 훈련을 중지시키는 훈련 중지 코칭을 포함할 수 있다.The coaching type may include a plurality of motion correction coaching classified for each rehabilitation training motion and training stop coaching for stopping rehabilitation training when an emergency occurs.
상기 센싱부는, 상기 환자의 생체 신호 데이터를 측정하기 위한 표면 근전도 센서, 전류 피부 반응 센서 및 심전도 센서 중 적어도 하나를 포함할 수 있다.The sensing unit may include at least one of a surface electromyography sensor, a current skin response sensor, and an electrocardiogram sensor for measuring the patient's biosignal data.
상기 환자의 동작 데이터를 측정하기 위한 관성 측정 센서, 전자각도계 및 비전 센서 중 적어도 하나를 포함할 수 있다.It may include at least one of an inertial measurement sensor, an electronic goniometer, and a vision sensor for measuring the motion data of the patient.
상기한 기술적 과제를 해결하기 위한 본 발명에 따른 재활 훈련 방법은, 재활 로봇 장치를 이용하여 재활 훈련하고 있는 환자의 생체 신호 데이터와 동작 데이터를 감지하는 단계, 상기 감지된 생체 신호 데이터와 동작 데이터를 입력받아, 미리 훈련된 분류 알고리즘을 이용하여 환자의 재활 훈련 상태 및 동작을 분류하는 단계, 그리고 상기 환자의 재활 훈련 상태 및 동작을 분류한 결과에 기초하여 코칭을 제공하는 단계를 포함한다.Rehabilitation training method according to the present invention for solving the above technical problem, the step of detecting the bio-signal data and motion data of a patient undergoing rehabilitation training using a rehabilitation robot device, the detected bio-signal data and the motion data receiving the input, classifying the patient's rehabilitation training state and motion using a pre-trained classification algorithm, and providing coaching based on a result of classifying the patient's rehabilitation training status and motion.
본 발명에 의하면 환자 생체 신호 및 동작 데이터를 모니터링하기 때문에 안전한 재활 훈련이 가능하다는 장점이 있다. 또한 환자의 생체 신호 및 동작 데이터, 그리고 로봇 파라미터를 기반으로 환자에게 적합한 로봇 파라미터를 제공 가능하다는 장점이 있다. 또한 환자의 생체 신호 및 동작 데이터, 그리고 로봇 파라미터를 기반으로 환자의 자세를 교정 가능하다는 장점이 있다. 또한 로봇 파라미터 제공 및 환자의 자세교정, 환자 모니터링으로 치료사의 부담이 줄어드는 장점이 있다.According to the present invention, there is an advantage that safe rehabilitation training is possible because the patient's bio-signals and motion data are monitored. In addition, there is an advantage in that it is possible to provide robot parameters suitable for the patient based on the patient's bio-signals and motion data, and the robot parameters. In addition, there is an advantage that the patient's posture can be corrected based on the patient's bio-signals and motion data and robot parameters. In addition, it has the advantage of reducing the burden on the therapist by providing robot parameters, correcting the patient's posture, and monitoring the patient.
도 1은 본 발명의 일 실시예에 따른 재활 로봇을 이용한 재활 훈련 시스템의 구성도이다.
도 2는 본 발명의 일 실시예에 따른 재활 로봇을 이용한 재활 훈련 시스템에서 훈련자에 부착되는 센서 위치를 예시한 도면이다.
도 3은 본 발명의 일 실시예에 따른 재활 로봇을 이용한 재활 훈련 시스템의 동작 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 코칭부의 동작을 설명하기 위한 도면이다.1 is a block diagram of a rehabilitation training system using a rehabilitation robot according to an embodiment of the present invention.
2 is a diagram illustrating a position of a sensor attached to a trainee in a rehabilitation training system using a rehabilitation robot according to an embodiment of the present invention.
3 is an operation flowchart of a rehabilitation training system using a rehabilitation robot according to an embodiment of the present invention.
4 is a view for explaining the operation of the coaching unit according to an embodiment of the present invention.
그러면 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다.Then, with reference to the accompanying drawings, the embodiments of the present invention will be described in detail so that those of ordinary skill in the art can easily carry out the present invention.
도 1은 본 발명의 일 실시예에 따른 재활 로봇을 이용한 재활 훈련 시스템의 구성도이다.1 is a block diagram of a rehabilitation training system using a rehabilitation robot according to an embodiment of the present invention.
도 1을 참고하면, 본 발명에 따른 재활 훈련 시스템은 가상 코칭 시스템(100)과 재활 로봇 장치(200)를 포함할 수 있다.Referring to FIG. 1 , the rehabilitation training system according to the present invention may include a
재활 로봇 장치(200)는 환자(20)가 하지 재활 훈련, 상지 재활 훈련, 균형 훈련, 보행 재활 훈련 등의 재활 훈련을 하는데 요구되는 자세나 동작을 하는데 도움을 줄 수 있는 로봇 장치이다. 재활 로봇 장치(200)는 재활 훈련의 목적 등에 따라 다양한 형태로 구현될 수 있다.The
환자(20)는 재활 로봇 장치(200)에 탑승하거나, 재활 로봇 장치(200)를 착용하고 재활 훈련을 할 수 있다. 환자(20)는 재활 로봇 장치(200)와 상호 작용을 하면서 재활 훈련을 할 수 있다. 치료사(10)는 가상 코칭 시스템(100)에서 제공되는 코칭 정보와 추천 로봇 파라미터를 이용하여, 환자(10)에 대한 코칭을 할 수 있으며, 재활 로봇 장치(200)의 동작을 제어할 수 있다.The
실시예에 따라서 치료사(10)의 역할도 사람이 아닌 자동화된 장치에 의해 수행될 수 있다. 가령 치료사(10)가 시각적 정보 출력 수단(모니터 등)과 청각적 정보 출력 수단(스피커 등)을 구비한 장치인 경우, 코칭 정보를 해당 수단을 통해 출력할 수도 있다. 한편 치료사(10)가 재활 로봇 장치(200)와 통신을 통해 추천 로봇 파라미터를 바로 적용시킬 수도 있다. 물론 치료사(10)에 재활 로봇 장치(200)의 로봇 파라미터를 변경할 수 있는 물리적 수단(예컨대 로봇 팔 등)을 구비할 경우, 물리적 수단을 통해 재활 로봇 장치(200)의 로봇 파라미터를 변경할 수도 있다.According to an embodiment, the role of the
재활 로봇 장치(200)는 설정된 로봇 파라미터에 대응하는 동작을 할 수 있다. 치료사(10)는 로봇 파라미터를 조정하여 재활 로봇 장치(200)가 재활 훈련 중에 환자(20)를 적절하게 보조할 수 있도록 제어할 수 있다. 가령 재활 로봇 장치(200)가 하지 재활 훈련 로봇 장치이면, 보행 속도, 보폭 등을 로봇 파라미터를 입력받고, 그에 따라 동작할 수 있다. The
가상 코칭 시스템(100)은 센싱부(110), 분류부(130) 및 코칭부(150)를 포함할 수 있다.The
센싱부(110)는 환자(20)의 생체 신호 데이터를 측정하기 위한 표면 근전도(sEMG, surface electromyography) 센서, 전류 피부 반응(GSR, Galvanic Skin Response) 센서 및 심전도(ECG, electrocardiogram) 센서 등을 포함할 수 있다. 그리고 센싱부(110)는 재활 훈련 중인 환자(20)의 동작 데이터를 측정하기 위한 관성 측정 센서(IMU, inertial measurment unit), 전자각도계(electrogoniometer) 및 비전 센서 중 적어도 하나를 포함할 수 있다. 비전 센서는 RGB 카메라, 적외선 카메라 등을 포함할 수 있다.The
도 2는 본 발명의 일 실시예에 따른 재활 로봇을 이용한 재활 훈련 시스템에서 훈련자에 부착되는 센서의 위치를 예시한 도면이다.2 is a diagram illustrating a position of a sensor attached to a trainee in a rehabilitation training system using a rehabilitation robot according to an embodiment of the present invention.
센싱부(110)는 재활 로봇 장치(200)를 이용하여 훈련하고 있는 환자(20)의 생체 신호 데이터와 동작 데이터를 감지할 수 있다. 이를 위해 센싱부(110)는 도 2에 예시한 것과 같이 환자(20)의 다양한 위치에 다양한 센서를 부착시킬 수 있다. 도 2를 참고하면, 관성 측정 센서(Head IMU)가 환자의 머리 뒤 부분, 관성 측정 센서(Sacrum IMU)가 허리에 있는 천골 부분, 관성 측정 센서(Left/Right Thigh IMU)가 좌/우 장딴지 부분, 관성 측정 센서(Left/Right Shank IMU)가 좌/우 정강이 부분에 부착된 예를 나타낸 것이다. 좌/우 장딴지 부분과 좌/우 정강이 부분에 부착된 4개의 IMU는 관절 각도를 측정할 수 있다. 관성 측정 센서 외에도 EMG, ECG, 발바닥 접촉 센서 등이 부착되어 생체 신호 데이터와 동작 데이터를 감지할 수 있다.The
물론 도 2에 예시한 것과 다른 위치에 센서를 부착하거나, 다른 종류의 센서를 이용하는 것도 가능하다. Of course, it is also possible to attach the sensor to a position different from that illustrated in FIG. 2 or to use a different type of sensor.
분류부(130)는 센싱부(110)에서 감지된 생체 신호 데이터와 동작 데이터를 입력받아, 미리 훈련된 분류 알고리즘을 이용하여 환자의 재활 훈련 상태 및 동작을 분류한 결과를 출력할 수 있다.The
분류 알고리즘은 재활 로봇 장치(200)를 이용한 재활 훈련 과정에서 수집된 훈련자 생체 신호 데이터, 훈련자 동작 데이터 및 훈련자에 대한 치료사의 코칭 정보를 포함하는 학습 데이터를 이용하여 훈련될 수 있다.The classification algorithm may be trained using learning data including trainer biosignal data, trainee motion data, and coaching information of a therapist for the trainee collected in a rehabilitation training process using the
예를 들어 미리 정해진 임상 시험 기간에 다수의 훈련자에 대해서 재활 로봇 장치(200)를 이용한 재활 훈련을 수행하는 동안에 수집되는 학습 데이터를 이용하여 분류 알고리즘을 훈련시킬 수 있다. For example, the classification algorithm may be trained using learning data collected while performing rehabilitation training using the
그리고 학습 데이터를 수집하는 과정에서, 훈련자는 재활 훈련이 필요한 환자일 수 있으나 환자만으로 학습 데이터가 충분하지 않을 수 있다. 따라서 재활 훈련이 필요없는 건강한 사람을 가상으로 재활 훈련시키는 과정에서 수집되는 데이터도 학습 데이터에 포함할 수 있다.And in the process of collecting the learning data, the trainee may be a patient who needs rehabilitation training, but the learning data may not be enough for the patient alone. Therefore, data collected in the process of virtual rehabilitative training for a healthy person who does not need rehabilitation training may also be included in the learning data.
분류 알고리즘은 LSTM(Long Short Term Memory Network)나 GRU(Gated Recurrent Unit)와 같은 시계열 데이터를 처리하는데 적합한 신경망을 이용할 수 있다.The classification algorithm may use a neural network suitable for processing time series data such as a Long Short Term Memory Network (LSTM) or a Gated Recurrent Unit (GRU).
학습 데이터는 재활 훈련 중에 수집되는 훈련자 생체 신호 데이터 및 훈련자 동작 데이터에 재활 훈련 과정에서 치료사에 의해 이루어지는 코칭 정보가 라벨링(labeling)될 수 있다. 그리고 학습 데이터는 일반적으로 전문 치료사가 2~3개의 케이던스(cadences)(약 3~5초)를 관찰한 후 코칭 추천을 하는 것을 고려하여, 학습 데이터의 기본 단위 시간은 5초로 설정하고 훈련 상태(정상 또는 비정상) 등을 라벨링 할 수 있다. 물론 실시예에 따라 학습 데이터의 기본 단위 시간은 달라질 수 있다.As the learning data, coaching information made by a therapist in the rehabilitation training process may be labeled with the trainee bio-signal data and trainee motion data collected during rehabilitation training. And, considering that the training data is generally recommended by a professional therapist after observing 2-3 cadences (about 3 to 5 seconds), the basic unit time of the training data is set to 5 seconds and the training status ( normal or abnormal), etc. Of course, the basic unit time of the training data may vary according to embodiments.
예를 들어 뇌졸증 환자에 대한 재활 훈련 과정에서 치료사가 동작 교정을 위해 다음과 같은 코칭을 환자에게 할 수 있다. 재활 훈련 중에 1)고개 바로 세우기 2)가슴 펴기 3)몸 가운데 정렬 4)무릎 구부리기 5)무릎 펴기 등의 동작 교정과 관련된 코칭을 했을 때에, 그에 대응되는 훈련자 동작 데이터에 코칭 정보를 라벨링 할 수 있다. For example, during rehabilitation training for a stroke patient, the therapist may coach the patient to correct motion. When coaching related to motion correction such as 1) straightening the head 2) straightening the chest 3) centering the body 4) bending the knee 5) straightening the knee during rehabilitation training, the coaching information can be labeled on the corresponding trainee's motion data .
한편 재활 훈련 중에 훈련자의 응급 상황 발생 등으로 인한 재활 훈련 중지 등과 같은 코칭 정보가 입력되면, 그에 대응되는 훈련자 생체 신호 데이터에 코칭 정보를 라벨링 할 수 있다.Meanwhile, when coaching information such as stopping rehabilitation training due to occurrence of an emergency situation of a trainee during rehabilitation training is input, coaching information may be labeled on the trainee's biosignal data corresponding thereto.
물론 코칭 정보를 훈련자 생체 신호 데이터와 훈련자 동작 데이터를 구분하지 않고 모두 라벨링 시킬 수도 있다.Of course, it is also possible to label all of the coaching information without distinguishing between the trainee's biosignal data and the trainee's motion data.
한편 실시예에 따라서 학습 데이터에 치료사가 재활 훈련을 하면서 재활 로봇 장치(200)의 로봇 파라미터를 조정한 데이터도 함께 라벨링되어 포함될 수 있다.Meanwhile, according to an embodiment, data obtained by adjusting the robot parameters of the
치료사가 재활 훈련 과정에서 재활 훈련 강도를 조정하는 것이 필요하다고 판단했을 때 로봇 파라미터를 조정하므로, 이 역시 훈련자 생체 신호 데이터와 훈련자 동작 데이터에 매칭하여 함께 학습할 수 있도록 하는 것이 바람직하다.Since the therapist adjusts the robot parameters when it is determined that it is necessary to adjust the rehabilitation training intensity during the rehabilitation training process, it is also desirable to match the trainee's biosignal data and the trainee's motion data so that they can learn together.
실시예에 따라서 분류부(130)는 코칭 종류별로 각각 별도로 학습된 복수의 분류 알고리즘을 포함할 수 있다. 코칭 종류는 환자의 재활 훈련 동작 교정을 위한 동작 교정 교칭과 응급 상황 발생 시 재활 훈련을 중지시키는 훈련 중지 코칭으로 크게 구분할 수 있다. 그리고 동작 교정 코칭은 1)고개 바로 세우기 2)가슴 펴기 3)몸 가운데 정렬 4)무릎 구부리기 5)무릎 펴기 등과 같이 세부 동작별로 구분될 수도 있다. 물론 훈련 중지 코칭도 응급 상황의 종류별로 구분될 수도 있다. According to an embodiment, the
그리고 분류부(130)는 실시간으로 입력되는 훈련자 생체 신호 데이터와 훈련자 동작 데이터에서 분류 알고리즘별로 필요한 피처(feature)를 추출하여 선택적으로 입력할 수 있다. 분류부(130)는 분류 알고리즘이 코칭 종류별로 병렬로 마련되어 코칭 필요 여부를 판단하므로 실시간으로 보다 빠르고 정확하게 처리할 수 있다.In addition, the
예컨대 1) 고개 바로 세우기 코칭에 대해서는 머리 관성 측정 센서 데이터(Head IMU data), 머리 절대 및 관절 각도(Head absolute and joint angle) 등이 피처로 해당 분류 알고리즘에 입력되고, 4) 무릎 구부리기 코칭의 경우 좌/우 엉덩이 및 무릎 절대 및 관절 각도(Left/right hip and knee absolute and joint angle) 등이 피처로 해당 분류 알고리즘에 입력되어 훈련자의 해당 동작의 정상 유무가 판정되어 출력될 수 있다.For example, 1) for head straightening coaching, head inertia measurement sensor data (Head IMU data), head absolute and joint angle, etc. are input to the classification algorithm as features, 4) for knee bending coaching Left/right hip and knee absolute and joint angles, etc. may be input to a corresponding classification algorithm as features to determine whether the trainee's corresponding motion is normal and output.
코칭부(150)는 분류부(130)에서 환자(20)의 재활 훈련 상태 및 동작을 분류한 결과에 기초하여 코칭을 제공할 수 있다. 여기서 재활 훈련 상태는 해당 동작이 정상 동작인지 또는 병적 동작인지를 분류한 결과에 해당할 수 있다.The
예컨대 환자(20)의 재활 훈련 상태 및 동작을 분류한 결과 환자의 고개 바로 세우기가 필요한 상태이면, 코칭부(150)는 '고개 바로 세우기'를 환자에 대한 동작 코칭을 위해서 제공할 수 있다.For example, if it is a result of classifying the rehabilitation training state and motion of the
또한 환자의 재활 훈련 상태 및 동작을 분류한 결과 응급 상황이 발생한 것으로 분류되면, 코칭부(150)는 재활 로봇 장치(200)의 동작을 정지시키는 코칭을 제공할 수도 있다.In addition, if an emergency situation occurs as a result of classifying the patient's rehabilitation training state and motion, the
코칭부(150)는 재활 로봇 장치(200)로부터 현재 설정된 로봇 파라미터를 입력받을 수 있다. 그리고 환자(20)의 재활 훈련 상태 및 동작을 분류한 결과 환자의 훈련 강도 조정이 필요한 경우, 코칭부(150)는 재활 로봇 장치(200)의 동작 변경을 위한 추천 로봇 파라미터를 제공할 수도 있다. 예컨대 현재 설정된 로봇 파라미터에 의한 보폭이나 보행 속도를 증가시키거나 감소시키는 것이 필요할 경우 그에 따른 추천 로봇 파라미터를 제공할 수 있다.The
한편 환자의 생체 신호 데이터와 동작 데이터는 시계열 데이터이므로 정상적인 동작과 비정상적인 동작을 명확하게 구분하기가 어려울 수 있다. 일정량의 윈도우 마스킹이 LSTM 예측 데이터에 적용되고, 결과는 특정 임계값이 초과되었는지를 확인함으로써 최종적으로 결정되도록 구현할 수 있다. 즉 LSTM 신경망에서 윈도우 단위로 시계열 데이터를 나누어 처리하므로, 일정 시간동안 비정상 상태로 분류된 결과가 임계치 이상이면 해당 비정상 동작에 대한 코칭이 필요한 것으로 판단할 수 있다.On the other hand, since the patient's biosignal data and motion data are time series data, it may be difficult to clearly distinguish between normal motion and abnormal motion. It can be implemented that a certain amount of window masking is applied to the LSTM prediction data, and the result is finally determined by checking whether a certain threshold is exceeded. That is, since the LSTM neural network divides time-series data in units of windows and processes it, if the result classified as an abnormal state for a certain period of time exceeds a threshold, it can be determined that coaching for the abnormal behavior is necessary.
도 3은 본 발명의 일 실시예에 따른 재활 로봇을 이용한 재활 훈련 시스템의 동작 흐름도이다.3 is an operation flowchart of a rehabilitation training system using a rehabilitation robot according to an embodiment of the present invention.
도 1 및 도 3을 참고하면, 먼저 임상 시험 등 재활 로봇 장치(200)를 이용한 재활 훈련 과정에서 수집된 훈련자 생체 신호 데이터, 훈련자 동작 데이터 및 훈련자에 대한 치료사의 코칭 정보를 포함하는 학습 데이터를 이용하여 분류 알고리즘을 훈련할 수 있다(S310). 단계(S310)에서 학습 데이터는 재활 훈련 중에 수집되는 훈련자 생체 신호 데이터 및 훈련자 동작 데이터에 재활 훈련 과정에서 치료사에 의해 이루어지는 코칭 정보가 라벨링될 수 있다. 그리고 재활 훈련 중에 훈련자의 응급 상황 발생 등으로 인한 재활 훈련 중지 등과 같은 코칭 정보가 입력되면, 그에 대응되는 훈련자 생체 신호 데이터에 코칭 정보를 라벨링 할 수도 있다. 물론 코칭 정보를 훈련자 생체 신호 데이터와 훈련자 동작 데이터를 구분하지 않고 모두 라벨링 시킬 수도 있다. 한편 실시예에 따라서 치료사가 재활 훈련을 하면서 재활 로봇 장치(200)의 로봇 파라미터를 조정한 데이터도 함께 라벨링되어 학습 데이터에 포함될 수도 있다. 한편 코칭이 필요한 동작별로 분류 알고리즘을 학습시킬 수도 있다.Referring to FIGS. 1 and 3 , first, training data including bio-signal data of a trainee collected in a rehabilitation training process using the
이후 분류부(130)는 실제로 환자(20)가 재활 로봇 장치(200)를 이용하여 재활 훈련을 하는 과정에서 센싱부(110)에서 감지된 생체 신호 데이터와 동작 데이터를 입력받아, 미리 훈련된 분류 알고리즘을 이용하여 환자(20)의 재활 훈련 상태 및 동작을 분류한 결과를 출력할 수 있다(S320).Thereafter, the
다음으로 코칭부(150)는 분류부(130)에서 환자(20)의 재활 훈련 상태 및 동작을 분류한 결과에 기초하여 코칭을 제공할 수 있다(S330). 단계(S330)에서 코칭부(150)는 재활 로봇 장치(200)로부터 현재 설정된 로봇 파라미터를 함께 입력받고 환자(20)의 재활 훈련 상태 및 동작을 분류한 결과 환자(20)의 재활 훈련 강도 조정이 필요한 경우, 재활 로봇 장치(200)의 동작 변경을 위한 추천 로봇 파라미터를 제공할 수도 있다.Next, the
실시예에 따라서 코칭부(150)는 도 4에 예시한 것과 같이 동작하여 치료사(10)의 성향에 따른 코칭 정보를 출력하도록 구현할 수도 있다.According to an embodiment, the
도 4는 본 발명의 일 실시예에 따른 코칭부의 동작을 설명하기 위한 도면이다.4 is a view for explaining the operation of the coaching unit according to an embodiment of the present invention.
도 4를 참고하면, 코칭부(150)는 분류부(130)에서 출력되는 재활 훈련 상태 및 동작 분류에 대한 결과()와 치료사 성향에 따라 설정되는 값(,,)을 입력으로 코칭 정보를 출력할 수 있다.Referring to FIG. 4 , the
치료사의 활동 수준()(the level of activity of physical therapists)은 치료사가 코칭을 얼마나 자주하는 지를 나타내며, 치료사의 성향에 따라 설정될 수 있다. 코칭 확률 마진()(coaching probability margin)은 코칭 판단이 유보되는 정도를 나타내는 것으로, 치료사의 성향에 따라 설정될 수 있으며, 직전의 코칭 결과에 비례하여 기준값이 높아지도록 설계될 수 있다. 코칭 유보 시간()(and coaching hold time)은 코칭을 위한 최소 간격, 코칭 출력을 내보내고 나서 최소한으로 환자의 동작을 관찰하는 시간을 의미하며, 이 역시 치료사의 성향에 설정될 수 있다.The therapist's level of activity ( ) (the level of activity of physical therapists) indicates how often the therapist coaches, and can be set according to the therapist's disposition. Coaching odds margin ( ) (coaching probability margin) indicates the degree to which coaching judgment is withheld, and can be set according to the therapist's disposition, and can be designed to increase the reference value in proportion to the previous coaching result. Coaching Reservation Time ( ) (and coaching hold time) means the minimum interval for coaching, the minimum amount of time to observe the patient's motion after outputting the coaching output, and this can also be set according to the therapist's disposition.
아래에서 i는 분류부(130)에서 선택된 코칭 종류를 나타내는 인덱스이고, k는 현재 시간 인덱스를 나타낸다. In the following, i is an index indicating a coaching type selected by the
최종 코칭 추천()은 아래 수학식에 의해 현재 코칭 확률()과 코칭 기준값()을 비교하여 결정된다.Final Coaching Recommendation ( ) is the current coaching probability ( ) and the coaching reference value ( ) is determined by comparing
현재 코칭 확률()은 아래 수학식 1에 의해 계산된다.Current coaching odds ( ) is calculated by Equation 1 below.
[수학식 1][Equation 1]
여기서 는 분류부(130)의 출력, 즉 재활 훈련 상태 및 동작 분류에 대한 결과를 나타내는 것이다. Nw는 코칭 유보 시간()을 고려하여 설정되는 값으로, 예컨대 훈련자의 동작 데이터가 1초에 50번(즉 50Hz)로 샘플링 되고, 치료사가 5초 동안 훈련자의 동작 상태를 살펴보는 것으로 고려하면, 250(50Hz*5sec)로 설정될 수 있다.here is the output of the
코칭 기준값()은 아래 수학식 2에 의해 도출된다.Coaching standards ( ) is derived by Equation 2 below.
[수학식 2][Equation 2]
여기서, 는 치료사의 활동 수준으로 설정된 값을 나타낸 것이다. 여기서 는 로서, 치료사의 활동 수준에 비례하여 코칭 기준값()을 낮추는데 사용되는 함수이다.here, is the value set as the therapist's activity level. here Is As , the coaching reference value ( ) is a function used to lower
최종 코칭 추천()은 아래 수학식 3에 의해 결정된다.Final Coaching Recommendation ( ) is determined by Equation 3 below.
[수학식 3][Equation 3]
여기서 m은 최종 코칭 추천을 코칭 유보 시간 동안 유보하는데 사용되는 인덱스이고, fs는 훈련자 동작 데이터의 샘플링 주기, τi는 코칭 유보 시간이다. 즉 수학식 3과 같이 코칭 기준값()이 현재 코칭 확률() 이상이면 코칭 출력을 하지 않고, 코칭 기준값()이 현재 코칭 확률()보다 작으면 코칭 출력을 한다.where m is the index used to reserve the final coaching recommendation for the coaching reservation time, f s is the sampling period of trainee motion data, and τ i is the coaching reservation time. That is, the coaching reference value ( ) is the current coaching probability ( ) or higher, coaching output is not performed, and the coaching standard value ( ) is the current coaching probability ( ) is smaller than the coaching output.
본 발명의 실시예는 다양한 컴퓨터로 구현되는 동작을 수행하기 위한 프로그램 명령을 포함하는 컴퓨터로 읽을 수 있는 매체를 포함한다. 이 매체는 앞서 설명한 방법을 실행시키기 위한 프로그램을 기록한다. 이 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 이러한 매체의 예에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 자기 매체, CD 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 자기-광 매체, 롬, 램, 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 구성된 하드웨어 장치 등이 있다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.An embodiment of the present invention includes a computer-readable medium including program instructions for performing various computer-implemented operations. This medium records a program for executing the method described above. The medium may contain program instructions, data files, data structures, etc. alone or in combination. Examples of such media include hard disks, magnetic media such as floppy disks and magnetic tapes, optical recording media such as CDs and DVDs, optical disks and magneto-optical media, and program instructions such as ROM, RAM, flash memory, etc. hardware devices configured to store and perform Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like.
이상에서 본 발명의 바람직한 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.Although preferred embodiments of the present invention have been described in detail above, the scope of the present invention is not limited thereto, and various modifications and improvements by those skilled in the art using the basic concept of the present invention as defined in the following claims are also provided. is within the scope of the
Claims (21)
상기 센싱부에서 감지된 생체 신호 데이터와 동작 데이터를 입력받아, 미리 훈련된 분류 알고리즘을 이용하여 환자의 재활 훈련 상태 및 동작을 분류하는 분류부, 그리고
상기 환자의 재활 훈련 상태 및 동작을 분류한 결과에 기초하여 코칭을 제공하는 코칭부
를 포함하는 재활 로봇을 이용한 재활 훈련 시스템.A sensing unit that detects bio-signal data and motion data of a patient undergoing rehabilitation training using a rehabilitation robot device;
A classification unit that receives the biosignal data and motion data sensed by the sensing unit, and classifies the patient's rehabilitation training state and motion using a pre-trained classification algorithm; and
A coaching unit that provides coaching based on a result of classifying the patient's rehabilitation training state and motion
Rehabilitation training system using a rehabilitation robot comprising a.
상기 분류 알고리즘은,
상기 재활 로봇 장치를 이용한 재활 훈련 과정에서 수집된 훈련자 생체 신호 데이터, 훈련자 동작 데이터 및 훈련자에 대한 치료사의 코칭 정보를 포함하는 학습 데이터를 이용하여 훈련되는 재활 로봇을 이용한 재활 훈련 시스템.In claim 1,
The classification algorithm is
Rehabilitation training system using a rehabilitation robot that is trained using the training data including the trainer bio-signal data, the trainee motion data, and the coaching information of the therapist for the trainee collected in the rehabilitation training process using the rehabilitation robot device.
상기 학습 데이터는,
훈련자 생체 신호 데이터 및 훈련자 동작 데이터에 대응하여 치료사의 코칭 정보가 라벨링되어 있는 재활 로봇을 이용한 재활 훈련 시스템.In claim 2,
The learning data is
A rehabilitation training system using a rehabilitation robot in which coaching information of a therapist is labeled in response to the trainer's bio-signal data and the trainee's motion data.
상기 학습 데이터는 미리 정해진 임상 시험 중에 수집되는 재활 로봇을 이용한 재활 훈련 시스템.In claim 3,
The learning data is a rehabilitation training system using a rehabilitation robot that is collected during a predetermined clinical trial.
상기 코칭부는,
상기 환자의 재활 훈련 상태 및 동작을 분류한 결과, 치료사의 성향에 따라 설정되는 값을 입력받아, 미리 정해진 수학식에 따라 계산되는 코칭 기준값과 현재 코칭 확률을 비교한 결과에 따라 코칭 정보 출력 여부를 결정하는 재활 로봇을 이용한 재활 훈련 시스템.In claim 2,
The coaching department
As a result of classifying the patient's rehabilitation training state and motion, a value set according to the therapist's propensity is received, and coaching information is output according to the result of comparing the coaching reference value calculated according to a predetermined equation with the current coaching probability. Rehabilitation training system using a rehabilitation robot to determine.
상기 코칭부는,
상기 재활 로봇 장치의 동작을 제어하는 로봇 파라미터를 입력받고, 상기 입력된 로봇 파라미터와 상기 환자의 재활 훈련 상태 및 동작을 분류한 결과를 이용하여 상기 재활 로봇 장치의 동작 변경을 위한 추천 로봇 파라미터를 제공하는 재활 로봇을 이용한 재활 훈련 시스템.In claim 2,
The coaching department
A robot parameter for controlling the operation of the rehabilitation robot apparatus is received, and a recommended robot parameter for changing the operation of the rehabilitation robot apparatus is provided using the input robot parameter and the result of classifying the patient's rehabilitation training state and operation Rehabilitation training system using rehabilitation robot.
상기 코칭부는,
상기 환자의 생체 신호 데이터와 동작 데이터를 미리 정해진 윈도우 사이즈로 나누어 분류한 결과가 미리 정해진 임계치 이상이면, 상기 분류 결과에 대한 코칭을 제공하는 재활 로봇을 이용한 재활 훈련 시스템.In claim 6,
The coaching department
A rehabilitation training system using a rehabilitation robot that provides coaching for the classification result when a result of dividing the patient's biosignal data and motion data into a predetermined window size is greater than or equal to a predetermined threshold.
상기 분류부는,
코칭 종류별로 훈련된 복수의 분류 알고리즘을 포함하고,
상기 센싱부에서 감지된 생체 신호 데이터와 동작 데이터에서 상기 복수의 분류 알고리즘별로 필요한 데이터를 선택하여 입력시키는 재활 로봇을 이용한 재활 훈련 시스템.In claim 1,
The classification unit,
Includes a plurality of classification algorithms trained for each type of coaching,
A rehabilitation training system using a rehabilitation robot for selecting and inputting necessary data for each of the plurality of classification algorithms from the biosignal data and motion data sensed by the sensing unit.
상기 코칭 종류는,
재활 훈련 동작 별로 구분되는 복수의 동작 교정 코칭과 응급 상황 발생 시 재활 훈련을 중지시키는 훈련 중지 코칭을 포함하는 재활 로봇을 이용한 재활 훈련 시스템.In claim 8,
The type of coaching is
Rehabilitation training system using a rehabilitation robot, including a plurality of motion correction coaching separated by each rehabilitation training motion and training stop coaching to stop the rehabilitation training in case of an emergency.
상기 센싱부는,
상기 환자의 생체 신호 데이터를 측정하기 위한 표면 근전도 센서, 전류 피부 반응 센서 및 심전도 센서 중 적어도 하나를 포함하고,
상기 환자의 동작 데이터를 측정하기 위한 관성 측정 센서, 전자각도계 및 비전 센서 중 적어도 하나를 포함하는 재활 로봇을 이용한 재활 훈련 시스템.In claim 1,
The sensing unit,
At least one of a surface electromyography sensor, a current skin response sensor, and an electrocardiogram sensor for measuring the patient's biosignal data,
Rehabilitation training system using a rehabilitation robot comprising at least one of an inertial measurement sensor, an electronic goniometer, and a vision sensor for measuring the motion data of the patient.
상기 감지된 생체 신호 데이터와 동작 데이터를 입력받아, 미리 훈련된 분류 알고리즘을 이용하여 환자의 재활 훈련 상태 및 동작을 분류하는 단계, 그리고
상기 환자의 재활 훈련 상태 및 동작을 분류한 결과에 기초하여 코칭을 제공하는 단계
를 포함하는 재활 로봇을 이용한 재활 훈련 방법.Detecting bio-signal data and motion data of a patient undergoing rehabilitation training using a rehabilitation robot device;
receiving the detected biosignal data and motion data, and classifying the patient's rehabilitation training state and motion using a pre-trained classification algorithm; and
providing coaching based on a result of classifying the patient's rehabilitation training state and motion
Rehabilitation training method using a rehabilitation robot comprising a.
상기 분류 알고리즘은,
상기 재활 로봇 장치를 이용한 재활 훈련 과정에서 수집된 훈련자 생체 신호 데이터, 훈련자 동작 데이터 및 훈련자에 대한 치료사의 코칭 정보를 포함하는 학습 데이터를 이용하여 훈련되는 재활 로봇을 이용한 재활 훈련 방법.In claim 11,
The classification algorithm is
Rehabilitation training method using a rehabilitation robot that is trained using the training data including the trainer bio-signal data, the trainee motion data, and the coaching information of the therapist for the trainee collected in the rehabilitation training process using the rehabilitation robot device.
상기 학습 데이터는,
훈련자 생체 신호 데이터 및 훈련자 동작 데이터에 대응하여 치료사의 코칭 정보가 라벨링되어 있는 재활 로봇을 이용한 재활 훈련 방법.In claim 12,
The learning data is
A rehabilitation training method using a rehabilitation robot in which coaching information of a therapist is labeled in response to the trainer's bio-signal data and the trainee's motion data.
상기 학습 데이터는 미리 정해진 임상 시험 중에 수집되는 재활 로봇을 이용한 재활 훈련 방법.In claim 13,
The learning data is a rehabilitation training method using a rehabilitation robot that is collected during a predetermined clinical trial.
상기 환자의 재활 훈련 상태 및 동작을 분류한 결과, 치료사의 성향에 따라 설정되는 값을 입력받아, 미리 정해진 수학식에 따라 계산되는 코칭 기준값과 현재 코칭 확률을 비교한 결과에 따라 코칭 정보 출력 여부를 결정하는 재활 로봇을 이용한 재활 훈련 시스템.In claim 12,
As a result of classifying the patient's rehabilitation training state and motion, a value set according to the therapist's propensity is received, and coaching information is output according to the result of comparing the coaching reference value calculated according to a predetermined equation with the current coaching probability. Rehabilitation training system using a rehabilitation robot to determine.
상기 재활 로봇 장치의 동작을 제어하는 로봇 파라미터를 입력받고, 상기 입력된 로봇 파라미터와 상기 환자의 재활 훈련 상태 및 동작을 분류한 결과를 이용하여 상기 재활 로봇 장치의 동작 변경을 위한 추천 로봇 파라미터를 제공하는 재활 로봇을 이용한 재활 훈련 방법.In claim 12,
A robot parameter for controlling the operation of the rehabilitation robot apparatus is received, and a recommended robot parameter for changing the operation of the rehabilitation robot apparatus is provided using the input robot parameter and the result of classifying the patient's rehabilitation training state and operation Rehabilitation training method using a rehabilitation robot.
상기 코칭부는,
상기 환자의 생체 신호 데이터와 동작 데이터를 미리 정해진 윈도우 사이즈로 나누어 분류한 결과가 미리 정해진 임계치 이상이면, 상기 분류 결과에 대한 코칭을 제공하는 재활 로봇을 이용한 재활 훈련 방법.17. In claim 16,
The coaching department
Rehabilitation training method using a rehabilitation robot that provides coaching for the classification result when a result of dividing the patient's biosignal data and motion data into a predetermined window size is greater than or equal to a predetermined threshold.
코칭 종류별로 훈련된 복수의 분류 알고리즘을 포함하고,
상기 센싱부에서 감지된 생체 신호 데이터와 동작 데이터에서 상기 복수의 분류 알고리즘별로 필요한 데이터를 선택하여 입력시키는 재활 로봇을 이용한 재활 훈련 방법.In claim 11,
Includes a plurality of classification algorithms trained for each type of coaching,
A rehabilitation training method using a rehabilitation robot for selecting and inputting necessary data for each of the plurality of classification algorithms from the biosignal data and motion data sensed by the sensing unit.
상기 코칭 종류는,
재활 훈련 동작 별로 구분되는 복수의 동작 교정 코칭과 응급 상황 발생 시 재활 훈련을 중지시키는 훈련 중지 코칭을 포함하는 재활 로봇을 이용한 재활 훈련 방법.In claim 18,
The type of coaching is
A rehabilitation training method using a rehabilitation robot, comprising a plurality of motion correction coaching classified for each rehabilitation training motion and training stop coaching to stop the rehabilitation training in case of an emergency.
상기 환자의 생체 신호 데이터는 표면 근전도 센서, 전류 피부 반응 센서 및 심전도 센서 중 적어도 하나에 의해 센싱되고,
상기 환자의 동작 데이터는 관성 측정 센서, 전자각도계 및 비전 센서 중 적어도 하나에 의해 센싱되는 재활 로봇을 이용한 재활 훈련 방법.In claim 11,
The patient's biosignal data is sensed by at least one of a surface electromyography sensor, a current skin response sensor, and an electrocardiogram sensor,
The patient's motion data is a rehabilitation training method using a rehabilitation robot that is sensed by at least one of an inertial measurement sensor, an electronic goniometer, and a vision sensor.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200157985A KR102525715B1 (en) | 2020-11-23 | 2020-11-23 | Rehabilitation Training Method and System Using Rehabilitation Robot |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200157985A KR102525715B1 (en) | 2020-11-23 | 2020-11-23 | Rehabilitation Training Method and System Using Rehabilitation Robot |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20220072026A true KR20220072026A (en) | 2022-06-02 |
KR102525715B1 KR102525715B1 (en) | 2023-04-28 |
Family
ID=81985080
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020200157985A KR102525715B1 (en) | 2020-11-23 | 2020-11-23 | Rehabilitation Training Method and System Using Rehabilitation Robot |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102525715B1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023236414A1 (en) * | 2022-06-06 | 2023-12-14 | 郑州安杰莱智能科技有限公司 | Ankle joint rehabilitation training apparatus |
WO2024167176A1 (en) * | 2023-02-06 | 2024-08-15 | 서울대학교병원 | Method and system of electromyographic signal-based in-bed rehabilitation for stroke patient |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010273746A (en) * | 2009-05-27 | 2010-12-09 | Panasonic Corp | Rehabilitation motion decision apparatus |
US20120165704A1 (en) * | 2010-12-23 | 2012-06-28 | Electronics And Telecommunications Research Institute | Apparatus for controlling rehabilitation robot |
KR20160023976A (en) * | 2014-08-21 | 2016-03-04 | 인하대학교 산학협력단 | A Multiple Gait phase Recognition Method using Boosted Classifiers and Classification Matrix based on Surface EMG Signals |
KR20170135459A (en) * | 2016-05-31 | 2017-12-08 | 울산과학기술원 | Rehabilitation training apparatus for an arm |
KR101859549B1 (en) | 2017-11-15 | 2018-05-21 | (주)컬처릿 | Motion training guide system based on wearable sensor and method thereof |
-
2020
- 2020-11-23 KR KR1020200157985A patent/KR102525715B1/en active IP Right Grant
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010273746A (en) * | 2009-05-27 | 2010-12-09 | Panasonic Corp | Rehabilitation motion decision apparatus |
US20120165704A1 (en) * | 2010-12-23 | 2012-06-28 | Electronics And Telecommunications Research Institute | Apparatus for controlling rehabilitation robot |
KR20160023976A (en) * | 2014-08-21 | 2016-03-04 | 인하대학교 산학협력단 | A Multiple Gait phase Recognition Method using Boosted Classifiers and Classification Matrix based on Surface EMG Signals |
KR20170135459A (en) * | 2016-05-31 | 2017-12-08 | 울산과학기술원 | Rehabilitation training apparatus for an arm |
KR101859549B1 (en) | 2017-11-15 | 2018-05-21 | (주)컬처릿 | Motion training guide system based on wearable sensor and method thereof |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023236414A1 (en) * | 2022-06-06 | 2023-12-14 | 郑州安杰莱智能科技有限公司 | Ankle joint rehabilitation training apparatus |
WO2024167176A1 (en) * | 2023-02-06 | 2024-08-15 | 서울대학교병원 | Method and system of electromyographic signal-based in-bed rehabilitation for stroke patient |
Also Published As
Publication number | Publication date |
---|---|
KR102525715B1 (en) | 2023-04-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7200851B2 (en) | LEARNING DEVICE, REHABILITATION SUPPORT SYSTEM, METHOD, PROGRAM, AND LEARNED MODEL | |
US10004455B2 (en) | Realtime biofeedback mechanism and data presentation for knee injury rehabilitation monitoring and a soft real time intelligent system thereof | |
JP2020034849A (en) | Work support device, work support method, and work support program | |
US9510789B2 (en) | Motion analysis method | |
Houmanfar et al. | Movement analysis of rehabilitation exercises: Distance metrics for measuring patient progress | |
KR102525715B1 (en) | Rehabilitation Training Method and System Using Rehabilitation Robot | |
Simonetti et al. | Multimodal adaptive interfaces for 3D robot-mediated upper limb neuro-rehabilitation: An overview of bio-cooperative systems | |
Malik et al. | An intelligent recovery progress evaluation system for ACL reconstructed subjects using integrated 3-D kinematics and EMG features | |
US11937918B2 (en) | Learning system, walking training system, method, program, and trained model | |
Liu et al. | Novel motor imagery-based brain switch for patients with amyotrophic lateral sclerosis: a case study using two-channel electroencephalography | |
Manap et al. | Anomaly gait classification of parkinson disease based on ann | |
Woo et al. | Machine learning based recognition of elements in lower-limb movement sequence for proactive control of exoskeletons to assist lifting | |
Malik et al. | A multisensor integration-based complementary tool for monitoring recovery progress of anterior cruciate ligament-reconstructed subjects | |
US11944427B2 (en) | Learning system, walking training system, method, program and trained model | |
Miyake et al. | Heel-contact gait phase detection based on specific poses with muscle deformation | |
Marghi et al. | EEG-guided robotic mirror therapy system for lower limb rehabilitation | |
Mohamed et al. | Automated Upper Limb Motor Functions Assessment System Using One-Class Support Vector Machine | |
JP7124796B2 (en) | Rehabilitation support system, method of operating rehabilitation support device, and rehabilitation support program | |
Pazar et al. | Gait Phase Recognition using Textile-based Sensor | |
US20240215911A1 (en) | System and method for multimodal biological feedback measurement | |
Vox et al. | A Framework for the Analysis of Biomechanical Loading Using Human Motion Tracking | |
Savur et al. | Human Comfortability Index Estimation in Industrial Human-Robot Collaboration Task | |
KR102528506B1 (en) | Rehabilitation status monitoring system using analysis of exercise condition and electroencephalogram | |
Brull et al. | A Smart Crutch Tip for Monitoring the Activities of Daily Living Based on a Novel Neural-Network Intelligent Classifier | |
Senanayke et al. | Anterior cruciate ligament recovery monitoring system using hybrid computational intelligent techniques |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right |