KR20230003826A - Method for dual task training of cognitive ability and physical ability for developmentally disabled - Google Patents
Method for dual task training of cognitive ability and physical ability for developmentally disabled Download PDFInfo
- Publication number
- KR20230003826A KR20230003826A KR1020210085383A KR20210085383A KR20230003826A KR 20230003826 A KR20230003826 A KR 20230003826A KR 1020210085383 A KR1020210085383 A KR 1020210085383A KR 20210085383 A KR20210085383 A KR 20210085383A KR 20230003826 A KR20230003826 A KR 20230003826A
- Authority
- KR
- South Korea
- Prior art keywords
- cognitive
- physical
- content
- trainee
- people
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 57
- 230000009977 dual effect Effects 0.000 title claims abstract description 31
- 230000003930 cognitive ability Effects 0.000 title abstract description 18
- 230000001149 cognitive effect Effects 0.000 claims abstract description 82
- 210000001364 upper extremity Anatomy 0.000 claims abstract description 53
- 230000037081 physical activity Effects 0.000 claims abstract description 52
- 230000003190 augmentative effect Effects 0.000 claims abstract description 30
- 210000003141 lower extremity Anatomy 0.000 claims abstract description 29
- 230000008859 change Effects 0.000 claims abstract description 17
- 238000001514 detection method Methods 0.000 claims abstract description 10
- 230000001133 acceleration Effects 0.000 claims abstract description 6
- 208000035976 Developmental Disabilities Diseases 0.000 claims description 44
- 230000008447 perception Effects 0.000 claims description 7
- 230000000694 effects Effects 0.000 claims description 5
- 230000007177 brain activity Effects 0.000 claims description 4
- 230000008569 process Effects 0.000 abstract description 16
- 238000010586 diagram Methods 0.000 description 4
- 239000012141 concentrate Substances 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000004397 blinking Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 210000003205 muscle Anatomy 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1116—Determining posture transitions
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1124—Determining motor skills
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1126—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
- A61B5/1128—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
- G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B7/00—Electrically-operated teaching apparatus or devices working with questions and answers
- G09B7/02—Electrically-operated teaching apparatus or devices working with questions and answers of the type wherein the student is expected to construct an answer to the question which is presented or wherein the machine gives an answer to the question presented by a student
- G09B7/04—Electrically-operated teaching apparatus or devices working with questions and answers of the type wherein the student is expected to construct an answer to the question which is presented or wherein the machine gives an answer to the question presented by a student characterised by modifying the teaching programme in response to a wrong answer, e.g. repeating the question, supplying a further explanation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/70—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2505/00—Evaluating, monitoring or diagnosing in the context of a particular type of medical care
- A61B2505/09—Rehabilitation or training
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
- A61M2021/0027—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
- A61M2021/0044—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense
- A61M2021/005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense images, e.g. video
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M2205/00—General characteristics of the apparatus
- A61M2205/50—General characteristics of the apparatus with microprocessors or computers
- A61M2205/502—User interfaces, e.g. screens or keyboards
- A61M2205/507—Head Mounted Displays [HMD]
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Heart & Thoracic Surgery (AREA)
- Veterinary Medicine (AREA)
- Medical Informatics (AREA)
- Biomedical Technology (AREA)
- Animal Behavior & Ethology (AREA)
- Pathology (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Theoretical Computer Science (AREA)
- Biophysics (AREA)
- Physiology (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Psychology (AREA)
- General Physics & Mathematics (AREA)
- Educational Technology (AREA)
- Educational Administration (AREA)
- Business, Economics & Management (AREA)
- Child & Adolescent Psychology (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- Social Psychology (AREA)
- Psychiatry (AREA)
- Hospice & Palliative Care (AREA)
- Developmental Disabilities (AREA)
- Multimedia (AREA)
- Acoustics & Sound (AREA)
- Anesthesiology (AREA)
- Hematology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Rehabilitation Tools (AREA)
Abstract
Description
본 발명은 3D 깊이 카메라와 증강현실을 이용하여 피훈련자에게 문제를 제시하고 답하는 과정을 통하여 신체능력과 인지능력이 동시에 향상되도록 한 발달장애인용 인지 및 신체 이중과제 훈련방법에 관한 것이다.The present invention relates to a cognitive and physical dual task training method for persons with developmental disabilities, which improves physical and cognitive abilities at the same time through the process of presenting and answering problems to trainees using a 3D depth camera and augmented reality.
발달장애인 등과 같이, 신체능력과 인지능력이 저하된 사람은 교육, 훈련을 통하여 신체능력과 인지능력의 향상을 도모해야 한다.Persons with reduced physical and cognitive abilities, such as those with developmental disabilities, should seek to improve their physical and cognitive abilities through education and training.
상기 발달장애인은 신체능력과 인지능력의 향상을 위한 특수교육프로그램, 신체운동프로그램, 컴퓨터기반의 인지능력 프로그램, 증강/가상현실 기반의 훈련 프로그램 등을 통하여, 신체능력과 인지능력에 대하여 훈련받고 있다.The developmental disabilities are trained for physical and cognitive abilities through special education programs, physical exercise programs, computer-based cognitive abilities programs, augmented/virtual reality-based training programs, etc. to improve physical and cognitive abilities. .
그러나, 발달장애인의 신체활동 회복은 인지능력의 회복에 따라 달라질 수 있으므로, 신체활동 향상과 인지능력 향상은 함께 이루어지는 것이 바람직하다.However, since the recovery of physical activity of persons with developmental disabilities may vary depending on the recovery of cognitive ability, it is desirable to improve physical activity and cognitive ability together.
또한, 일상생활 활동을 효과적으로 수행하기 위한 대부분의 움직임은 한 가지 이상의 과제를 동시에 수행하는 이중과제에 포함되어 있다.In addition, most of the movements required to effectively perform activities of daily living are included in the dual task of performing more than one task at the same time.
하지만, 종래의 훈련방법은 신체능력과 인지능력을 효율적으로 동시에 훈련되도록 하는 방법이 제시되지 못하였다.However, in the conventional training method, a method for efficiently simultaneously training physical ability and cognitive ability has not been proposed.
본 발명은 상기와 같은 문제점을 해결하기 위해 발명된 것으로서, 발달장애인의 신체능력과 인지능력이 향상되도록 동시에 훈련시킬 수 있도록 한 발달장애인용 인지 및 신체 이중과제 훈련방법을 제공하는데 목적이 있다.The present invention was invented to solve the above problems, and an object of the present invention is to provide a cognitive and body dual task training method for people with developmental disabilities that can simultaneously train them to improve their physical and cognitive abilities.
본 발명의 다른 목적은 발달장애인에게 인지능력을 향상시킬 수 있는 컨텐츠를 제공하고, 상기 컨텐츠를 수행하기 위한 발달장애인의 행동의 강도, 유연성, 가동범위 또는 균형도로 신체능력을 산출하도록 한 발달장애인용 인지 및 신체 이중과제 훈련방법을 제공하는데 있다.Another object of the present invention is to provide content that can improve cognitive abilities to people with developmental disabilities, and for people with developmental disabilities to calculate physical abilities with the strength, flexibility, range of motion or balance of the actions of the people with developmental disabilities to perform the content. It is to provide cognitive and physical dual task training methods.
상기와 같은 목적을 달성하기 위한 본 발명에 따른 발달장애인용 인지 및 신체 이중과제 훈련방법은, 3D 깊이 카메라를 이용한 발달장애인용 인지 및 신체 훈련방법에 있어서, 상기 인지 및 신체 훈련을 할 피훈련자가 감지되는 피훈련자 감지 단계; 훈련시스템이 제공하는 복수 컨텐츠 중 하나의 컨텐츠가 선정되는 컨텐츠 선정 단계; 선정된 상기 컨텐츠가 실행되어 디스플레이를 통해 증강현실로 컨텐츠 구현 단계; 및 증강현실로 구현된 상기 컨텐츠를 인지하는 동시에 사용자의 상지 모션변화가 상기 3D 깊이 카메라에 의해 측정되고, 상지 모션에 의한 가속도로부터 상지의 강도를 산출하는 인지 및 신체활동 단계;를 포함한다.In order to achieve the above object, the cognitive and physical dual task training method for people with developmental disabilities according to the present invention is a cognitive and physical training method for people with developmental disabilities using a 3D depth camera, wherein the trainee to perform the cognitive and physical training detecting the trainee being detected; Content selection step of selecting one of the plurality of contents provided by the training system; Implementing content in augmented reality through a display by executing the selected content; and a recognition and physical activity step of recognizing the content implemented in augmented reality, measuring a motion change of the user's upper limb by the 3D depth camera, and calculating the strength of the upper limb from the acceleration caused by the motion of the upper limb.
한편, 본 발명에 따른 발달장애인용 인지 및 신체 이중과제 훈련방법은, 3D 깊이 카메라를 이용한 발달장애인용 인지 및 신체 훈련방법에 있어서, 상기 인지 및 신체 훈련을 할 피훈련자가 감지되는 피훈련자 감지 단계; 훈련시스템이 제공하는 복수 컨텐츠 중 하나의 컨텐츠가 선정되는 컨텐츠 선정 단계; 선정된 상기 컨텐츠가 실행되어 디스플레이를 통해 증강현실로 컨텐츠 구현 단계; 및 증강현실로 구현된 상기 컨텐츠를 인지하는 동시에 사용자의 상지가 회전축을 중심으로 한 각도변화범위가 상기 3D 깊이 카메라에 의해 측정되고, 회전축(관절)의 움직임에 대한 상대 움직임으로부터 상지 유연성을 산출하는 인지 및 신체활동 단계;를 포함할 수 있다.On the other hand, in the cognitive and physical dual task training method for people with developmental disabilities according to the present invention, in the cognitive and physical training method for people with developmental disabilities using a 3D depth camera, the trainee detection step of detecting the trainees to be trained for the cognitive and physical training ; Content selection step of selecting one of the plurality of contents provided by the training system; Implementing content in augmented reality through a display by executing the selected content; and while recognizing the contents implemented in augmented reality, the range of angle change around the axis of rotation of the user's upper extremity is measured by the 3D depth camera, and the flexibility of the upper extremity is calculated from the relative movement to the movement of the axis of rotation (joint). Cognitive and physical activity steps; may include.
또한, 본 발명에 따른 발달장애인용 인지 및 신체 이중과제 훈련방법은, 3D 깊이 카메라를 이용한 발달장애인용 인지 및 신체 훈련방법에 있어서, 상기 인지 및 신체 훈련을 할 피훈련자가 감지되는 피훈련자 감지 단계; 훈련시스템이 제공하는 복수 컨텐츠 중 하나의 컨텐츠가 선정되는 컨텐츠 선정 단계; 선정된 상기 컨텐츠가 실행되어 디스플레이를 통해 증강현실로 컨텐츠 구현 단계; 및 증강현실로 구현된 상기 컨텐츠를 인지하는 동시에 사용자의 하지가 전후 또는 좌우로 움직임이 발생하는지를 상기 3D 깊이 카메라에 의해 측정함으로써 하지균형도를 산출하는 인지 및 신체활동 단계;를 포함한다.In addition, in the cognitive and physical dual task training method for people with developmental disabilities according to the present invention, in the cognitive and physical training method for people with developmental disabilities using a 3D depth camera, the trainee detection step of detecting the trainees to be trained for the cognitive and physical training ; Content selection step of selecting one of the plurality of contents provided by the training system; Implementing content in augmented reality through a display by executing the selected content; and a recognition and physical activity step of calculating the balance of the lower extremities by recognizing the content implemented in augmented reality and measuring whether the lower extremities of the user move forward or backward or left and right by the 3D depth camera.
상기 인지 및 신체활동 단계는, 상기 컨텐츠에 대해 지각력, 기억력 및 주의집중력 중 어느 하나 이상을 필요로 하는 두뇌활동을 인지활동으로 하는 것을 특징으로 한다.The cognitive and physical activity steps are characterized in that cognitive activities are brain activities that require at least one of perception, memory, and attention to the content.
상기 인지 및 신체활동 단계는, 정답과 오답이 명확한 문제에 대해 정답 또는 오답을 결정하는 활동을 인지활동으로 하는 것을 특징으로 한다.The cognitive and physical activity step is characterized in that the cognitive activity is an activity of determining a correct answer or an incorrect answer to a problem in which a correct answer or an incorrect answer is clear.
상기 인지 및 신체활동 단계는, 상기 정답 또는 오답을 결정하는 동시에, 결정된 상기 정답 또는 오답을 신체활동을 통해 구현(실현)하는 것을 특징으로 한다.The recognition and physical activity step is characterized in that the correct or incorrect answer is determined and the determined correct or incorrect answer is implemented (realized) through physical activity.
상기 인지 및 신체활동 단계는, 상기 3D 깊이 카메라가 상기 피훈련자가 증강현실에 의해 구현된 공간내에서 상기 피훈련자의 신체활동을 인식하는 것을 특징으로 한다.In the recognition and physical activity step, the 3D depth camera recognizes the trainee's physical activity in a space where the trainee is implemented by augmented reality.
상기 인지 및 신체활동 단계; 상기 피훈련자의 인지활동 및 신체활동의 결과를 점수화하고, 이를 저장하는 것을 특징으로 한다.the cognitive and physical activity steps; Characterized in that the result of the trainee's cognitive activity and physical activity is scored and stored.
상기 컨텐츠가 선정되는 컨텐츠 선정 단계는, 상기 점수가 높아질수록 선정된 상기 컨텐츠의 난이도, 실행속도, 실행시간, 운동부위 중 적어도 어느 하나를 증가시키는 것을 특징으로 한다.In the content selection step in which the content is selected, as the score increases, at least one of difficulty, execution speed, execution time, and exercise part of the selected content is increased.
상기 피훈련자 감지 단계는, 상기 피훈련자가 상기 3D 깊이 카메라로부터 미리 정해진 거리 이내에 위치하면 상기 3D 깊이 카메라가 감지하는 것을 특징으로 한다.In the detecting the trainee, the 3D depth camera detects when the trainee is located within a predetermined distance from the 3D depth camera.
상기 컨텐츠가 선정되는 컨텐츠 선정 단계는 상기 훈련시스템이 상기 훈련시스템 내에 저장된 복수의 상기 컨텐츠 중에서 하나를 상기 피훈련자가 선택하는 것을 특징으로 한다.In the content selection step in which the content is selected, the trainee selects one of a plurality of the contents stored in the training system by the training system.
상기 컨텐츠 선정 단계는, 선정된 상기 컨텐츠의 난이도, 실행속도, 실행시간, 운동부위 중 적어도 어느 하나를 설정하는 것을 특징으로 한다.In the content selection step, at least one of difficulty, execution speed, execution time, and exercise part of the selected content is set.
상기 컨텐츠 구현 단계는, 선정된 상기 컨텐츠에 대한 설명과 상기 피훈련자가 수행해야 하는 과제의 시험영상을 플레이 되는 것을 포함하는 것을 특징으로 한다.The content implementation step may include playing an explanation of the selected content and a test image of a task to be performed by the trainee.
상기 컨텐츠 구현 단계는, 선정된 컨텐츠가 상기 증강현실 대신 가상현실을 통하여 구현되는 것을 특징으로 한다.In the content implementation step, the selected content is implemented through virtual reality instead of the augmented reality.
상기와 같은 구성을 갖는 본 발명의 발달장애인용 인지 및 신체 이중과제 훈련방법에 따르면, 발달장애인의 현실감을 느끼도록 증강/가상현실에서 상기 발달장애인의 신체활동을 3D 깊이 카메라로 측정함으로써, 신체능력과 인지능력이 동시에 향상시킬 수 있다.According to the cognitive and physical double task training method for people with developmental disabilities of the present invention having the above configuration, by measuring the physical activity of the people with developmental disabilities in augmented / virtual reality with a 3D depth camera so that they feel a sense of reality, physical ability and cognitive abilities can be improved at the same time.
또한, 문제의 정답을 도출하는 인지활동을 통하여 인지능력이 향상되도록 함과 더불어, 도출된 정답을 선택하는 신체활동을 통하여 신체능력이 향상되도록 하며, 이를 이중과제를 통하여 한 번에 신체능력과 인지능력이 동시에 향상시킬 수 있다.In addition, cognitive ability is improved through cognitive activities that derive the correct answer to the problem, and physical ability is improved through physical activity that selects the derived correct answer. abilities can be improved at the same time.
도 1은 본 발명에 따른 발달장애인용 인지 및 신체 이중과제 훈련방법을 도시한 순서도.
도 2는 본 발명에 따른 발달장애인용 인지 및 신체 이중과제 훈련방법이 수행되는 예를 도시한 블록도.
도 3 및 도 4은 본 발명에 따른 발달장애인용 인지 및 신체 이중과제 훈련방법에서 컨텐츠를 선행하기 위하여 복수의 컨텐츠가 디스플레이되는 상태를 도시한 개략도.
도 5 및 도 6은 본 발명에 따른 발달장애인용 인지 및 신체 이중과제 훈련방법에서 선택한 컨텐츠를 세부조정하는 상태를 도시한 개략도.
도 7 내지 도 9는 본 발명에 따른 발달장애인용 인지 및 신체 이중과제 훈련방법에 의해 이중과제 훈련의 컨테츠의 예시를 도시한 개략도.1 is a flow chart showing a cognitive and physical dual task training method for people with developmental disabilities according to the present invention.
Figure 2 is a block diagram showing an example in which the cognitive and physical dual task training method for people with developmental disabilities according to the present invention is performed.
3 and 4 are schematic diagrams showing a state in which a plurality of contents are displayed in order to precede contents in the cognitive and body dual task training method for persons with developmental disabilities according to the present invention.
5 and 6 are schematic diagrams showing a state of fine-tuning selected content in the cognitive and physical dual task training method for people with developmental disabilities according to the present invention.
7 to 9 are schematic diagrams showing examples of contents of dual task training by the cognitive and physical dual task training method for people with developmental disabilities according to the present invention.
이하 첨부된 도면을 참조로 하여 본 발명에 따른 발달장애인용 인지 및 신체 이중과제 훈련방법에 대하여 자세히 설명하기로 한다.Hereinafter, the cognitive and body dual task training method for people with developmental disabilities according to the present invention will be described in detail with reference to the accompanying drawings.
본 발명에 따른 발달장애인용 인지 및 신체 이중과제 훈련방법은, 3D 깊이 카메라(11)를 이용한 발달장애인용 인지 및 신체 훈련방법에 있어서, 상기 인지 및 신체 훈련을 할 피훈련자(T)가 감지되는 피훈련자 감지 단계(S110); 훈련시스템이 제공하는 복수 컨텐츠 중 하나의 컨텐츠가 선정되는 컨텐츠 선정 단계(S120); 선정된 상기 컨텐츠가 실행되어 디스플레이(12)를 통해 증강현실로 컨텐츠 구현 단계(S130); 및 증강현실로 구현된 상기 컨텐츠를 인지하는 동시에, 사용자의 상지 모션변화가 상기 3D 깊이 카메라(11)에 의해 측정되고, 상지 모션에 의한 가속도로부터 상지의 강도를 산출하거나, 사용자의 상지가 회전축을 중심으로 한 각도변화범위가 상기 3D 깊이 카메라(11)에 의해 측정되고, 회전축(관절)의 움직임에 대한 상대 움직임으로부터 상지 유연성을 산출하거나, 또는 사용자의 하지가 전후 또는 좌우로 움직임이 발생하는지를 상기 3D 깊이 카메라(11)에 의해 측정함으로써 하지균형도를 산출하는 인지 및 신체활동 단계(S140)를 포함한다.In the cognitive and physical training method for people with developmental disabilities using a
피훈련자 감지 단계(S110)는 인지 및 신체 훈련을 할 피훈련자(T)가 감지된다. 상기 3D 깊이 카메라(11)로부터 미리 정해진 거리(d) 이내로 상기 피훈련자(T)가 진입하면, 상기 3D 깊이 카메라(11)가 이를 인지한다. 예컨대, 상기 3D 깊이 카메라(11)는 상기 피훈련자(T)가 상기 3D 깊이 카메라(11)로부터 미리 정해진 거리(d)인 2m 이내로 상기 피훈련자(T)가 진입하면, 상기 피훈련자(T)가 인지 및 신체 훈련을 할 피훈련자(T)로 감지할 수 있다. 상기 피훈련자(T)는 발달장애인, 인지 및 신체 능력이 저하된 환자나 노인 등이 될 수 있고, 바람직하게는 인지능력 및 신체능력의 발달이 더딘 발달장애인이 되는 것이 바람직하다.In the trainee detection step (S110), a trainee T to undergo cognitive and physical training is detected. When the trainee T enters within a predetermined distance d from the
컨텐츠 선정 단계(S120)는 훈련시스템이 상기 피훈련자(T)에게 제공하는 복수의 컨테츠 중에서 어느 하나의 컨텐츠를 선정한다. 상기 훈련시스템은 상기 피훈련자(T)의 인지 및 신체 훈련을 위한 복수의 컨텐츠를 포함하고 있다. 상기 훈련시스템은 도 3 및 도 4에 도시된 바와 같이, 복수의 상기 컨텐츠가 저장되어 있고, 이를 상기 피훈련자(T)에게 보여주면, 상기 피훈련자(T)가 그 중 어느 하나를 선택하여 훈련을 진행할 수 있다.In the content selection step (S120), one content is selected from among a plurality of content provided by the training system to the trainee (T). The training system includes a plurality of contents for cognitive and physical training of the trainee T. As shown in FIGS. 3 and 4, the training system has a plurality of contents stored, and when it is shown to the trainee T, the trainee T selects one of them for training. can proceed.
또는 상기 훈련시스템이 복수의 컨텐츠 중에서 어느 하나를 선정할 수도 있다.Alternatively, the training system may select any one of a plurality of contents.
아울러, 상기 훈련시스템이 상기 피훈련자(T)를 인식하고, 이전에 사용한 컨텐츠를 이어서 사용할 수 있도록 할 수도 있다.In addition, the training system may recognize the trainee T and use the previously used content continuously.
상기 컨텐츠 선정 단계(S120)는 수행할 컨텐츠를 선정하는 것뿐만 아니라, 선정한 컨텐츠의 난이도, 실행속도, 실행시간, 운동부위 중 적어도 어느 하나를 설정하는 것도 포함한다. 도 5 및 도 6을 보면, 상기 컨텐츠의 난이도와 실행신체부위를 선정하는 예가 도시되어 있다.The content selection step (S120) includes not only selecting the content to be performed, but also setting at least one of difficulty, execution speed, execution time, and exercise part of the selected content. Referring to FIGS. 5 and 6 , an example of selecting the level of difficulty of the content and the body part for execution is shown.
상기 피훈련자(T)에게 제공되는 컨텐츠는 단순한 과제의 형태가 아니라, 흥미 유발이 가능한 게임의 형태로 제작되고, 게임을 수행하기 위해 시간 또는 장소에 대한 지남력, 지각력, 사고력, 기억력, 주의집중력 등이 필요한 컨텐츠로 구성되어, 상기 피훈련자의 인지능력의 향상에 도움이 되도록 한다. 또한, 상기 컨텐츠는 상기 피훈련자의 상지, 하지 또는 상지와 하지를 동시에 사용하면서, 근력, 유연성, 균형도 등과 같은 신체능력을 향상되도록 구성된다.The content provided to the trainee (T) is not in the form of a simple task, but is produced in the form of a game that can induce interest, and in order to play the game, orientation to time or place, perception, thinking, memory, attention, etc. It is composed of necessary contents to help improve the trainee's cognitive ability. In addition, the content is configured to improve physical abilities such as muscle strength, flexibility, and balance while simultaneously using the trainee's upper limbs, lower limbs, or upper and lower limbs.
컨텐츠 구현 단계(S130)는 상기 선정된 컨텐츠가 실행되어 디스플레이(12)를 통하여 증강현실(Augmented Reality; AR)로 구현된다.In the content implementation step (S130), the selected content is executed and implemented as augmented reality (AR) through the
증강현실은 현실의 이미지나 배경에 3차원 가상 이미지를 겹쳐서 하나의 영상으로 보여주는 기술로서, 상기 디스플레이(12)에 현실의 이미지와 상기 컨텐츠에서 제공하는 이미지가 혼합되어 디스플레이된다.Augmented reality is a technology that superimposes a three-dimensional virtual image on a real image or background and displays it as a single image. The real image and the image provided by the content are mixed and displayed on the
상기 컨텐츠 구현 단계(S130)에서는 선정된 컨텐츠에 대한 설명과 상기 피훈련자(T)가 수행해야 하는 과제의 시험영상이 플레이되고, 이를 상기 피훈련자(T)가 시청한다.In the content implementation step (S130), a description of the selected content and a test video of a task to be performed by the trainee (T) are played, and the trainee (T) watches them.
여기서, 상기 디스플레이(12)로는 TV, 모니터와 같이 패널을 이용한 장치뿐만 아니라, 사용자의 머리에 착용하는 HMD(Head mounted device) 등이 될 수도 있다.Here, the
한편, 상기 디스플레이(12)에서는 증강현실이 아닌, 가상현실(Virtual Reality)로 상기 컨텐츠를 구현하여 디스플레이 할 수도 있다. 즉, 선정된 컨텐츠가 상기 증강현실 대신 가상현실을 통하여 구현될 수 있다.Meanwhile, the
인지 및 신체활동 단계(S140)는 상기 피훈련자(T)가 상기 컨텐츠를 인지하는 동시에, 상기 피훈련자(T)의 자세의 변화를 상기 3D 깊이 카메라(11)로 측정하여, 상기 훈련시스템이 상기 피훈련자(T)의 신체능력을 산출한다.In the recognition and physical activity step (S140), the trainee T recognizes the content and at the same time measures the change in the trainee T's posture with the
본 발명에서는 상기 인지 및 신체활동 단계(S140)에서 상기 피훈련자(T)의 신체적 활동을 강도, 유연성, 균형도로 나누어 상기 피훈련자(T)의 신체능력을 산출한다.In the present invention, the physical ability of the trainee (T) is calculated by dividing the physical activity of the trainee (T) in strength, flexibility, and balance in the cognitive and physical activity step (S140).
상기 피훈련자(T)는 상기 컨텐츠를 인지한 이후, 상기 피훈련자(T)의 신체활동에 따라, 상지(上旨)의 강도, 상기의 유연성, 하지(下旨)의 균형도로 각각 나누어, 상기 신체 능력을 산출한다.After recognizing the content, the trainee T divides the strength of the upper limb, the flexibility of the upper limb, and the balance of the lower limb, respectively, according to the physical activity of the trainee T. Calculate physical ability.
상기 피훈련자(T)의 상지의 강도는 상기 피훈련자(T)의 상지의 모션의 속도변화를 이용하여 상기 상지의 강도를 측정할 수 있다. 상기 3D 깊이 카메라(11)를 이용하여 상기 상지의 모션의 변화를 실시간으로 감지한다. 상기 모션 변화의 시간변화율이 상기 상지의 속도가 되고, 다시 상기 상지 속도변화의 시간변화율이 상기 상지의 가속도가 된다. 이렇게 구해진 상기 상지의 가속도에 상기 상지의 무게를 곱하여 상기 피훈련자(T)의 상지의 강도를 측정할 수 있다.The upper extremity strength of the trainee T may be measured using a change in motion speed of the trainee T's upper extremity. A change in the motion of the upper limb is sensed in real time using the
한편, 상기 피훈련자(T)의 유연성을 측정하기 위하여, 상기 피훈련자(T)의 상지의 중심 부분인 팔꿈치를 중심으로 상기 피훈련자(T)의 상지의 가동범위를 측정하여 상기 상지의 유연성을 산출한다. 즉, 상기 피훈련자(T)가 상기 컨텐츠를 인지하고, 이와 동시에 상기 상지가 회전축인 팔꿈치를 중심으로 한 각도변화를 상기 3D 깊이 카메라(11)로 촬영하고, 상박(上膊)에 대하여 하박(下膊)이 상기 팔꿈치를 중심으로 한 상대 움직임으로부터 상기 상지의 유연성을 산출한다. 유연성이 좋을수록 관절에 대한 가동범위(ROM; Range Of Motion)가 커지므로, 상기 3D 깊이 카메라(11)로 촬영한 상기 피훈련자(T)의 하박의 회전각도 변화로 유연성을 산출한다.On the other hand, in order to measure the flexibility of the trainee T, the range of motion of the trainee T's upper limb is measured around the elbow, which is the central part of the trainee T's upper limb, to determine the flexibility of the upper limb. yield That is, the trainee T recognizes the content, and at the same time, the
아울러, 상기 피훈련자(T)의 하지 균형도는 상기 피훈련자(T)가 상기 컨텐츠를 인지하는 것과 동시에 상기 피훈련자(T)의 하지가 초기 위치로부터 전후 또는 좌우로 움직임이 발생하는지를 상기 3D 깊이 카메라(11)로 측정함으로써, 상기 피훈련자(T)의 하지 균형도를 산출한다.In addition, the balance of the lower extremity of the trainee T determines whether the trainee T's lower extremities move forward or backward or left and right from the initial position at the same time that the trainee T recognizes the content, and the 3D depth By measuring with the
상기 피훈련자(T)가 상기 컨텐츠를 인지하면, 그에 대한 반응으로 신체 동작이 진행되는데, 이때 상기 피훈련자(T)의 하지가 초기 위치로부터 전후 또는 좌우로 움직임의 여부를 판단한다. 상기 피훈련자(T)가 하지 균형도를 갖춘 상태라면, 상기 컨텐츠에 대한 반응으로 신체 동작이 진행되더라도, 하지는 움직이지 않고, 초기 위치를 유지할 수 있다. 하지만, 상기 피훈련자(T)가 하지 균형도를 충분히 갖추지 못한 상태라면, 상기 컨텐츠에 대한 신체 동작시 상기 하지는 초기 위치로부터 벗어나 전후 또는 좌우로 이동하게 된다. 따라서, 상기 3D 깊이 카메라(11)로 상기 피훈련자(T)가 상기 컨텐츠를 인지함과 동시에 상기 피훈련자(T)의 하지의 움직임 여부를 촬영함으로써, 상기 피훈련자(T)의 하지 균형도를 측정할 수 있다.When the trainee T recognizes the content, a body motion proceeds in response thereto. At this time, it is determined whether the trainee T's lower extremity moves forward or backward or left and right from the initial position. If the trainee T is in a state in which the lower limbs are balanced, the lower limbs do not move and the initial position can be maintained even if the body motion proceeds in response to the contents. However, if the trainee T does not have sufficient lower extremity balance, the lower extremities move back and forth or left and right away from the initial position when the body is operated for the contents. Therefore, by using the
특히, 상기 인지 및 신체활동 단계(S140)에 인지활동은 상기 컨텐츠에 대한 지각력, 기억력 및 주의집중력 중 어느 하나 이상을 필요로 하는 두뇌활동이 될 수 있다. In particular, in the cognitive and physical activity step (S140), the cognitive activity may be a brain activity that requires at least one of perception, memory, and attention to the content.
상기 피훈련자(T)는 상기 컨텐츠를 수행하는 동안 컨텐츠의 각 요소를 지각하여 식별하고, 식별된 요소를 기억하며, 각 요소의 변형, 이동 등에 대하여 주의 집중하여 문제에 대한 답을 도출하는 두뇌활동을 통하여 인지능력이 향상되도록 한다.While performing the content, the trainee T perceives and identifies each element of the content, memorizes the identified element, and concentrates attention on the transformation, movement, etc. of each element to derive an answer to the problem. through to improve cognitive abilities.
이러한 두뇌활동은 상기 컨텐츠의 난이도, 실행속도, 실행시간 등을 조절하여 달성될 수 있다. Such brain activity can be achieved by adjusting the difficulty, execution speed, and execution time of the contents.
또한, 상기 인지 및 신체활동 단계(S140)에서 인지활동은 정답과 오답이 명확한 문제에 대해 정답 또는 오답을 결정하는 활동이 될 수 있다. 예컨대, 사칙연산의 답을 구하는 것과 같이, 정답과 오답이 명확한 문제에 대하여, 상기 피훈련자(T)가 정답을 결정하도록 함으로써, 상기 피훈련자(T)의 인지능력을 평가할 수 있다. 상기 훈련시스템은 도 2에 도시된 바와 같이, '315+5=?'와 같이, 정답이 명확한 문제를 제시하면, 상기 피훈련자(T)는 상기 디스플레이(12)에 표시된 상기 문제의 정답과 오답 중에서, 정답인 '320'을 도출하는 인지활동을 하고, 상기 피훈련자(T)가 도출한 정답을 '320, '318', '322', '321' 등과 같은 예시로부터 선택하는 과정에서 상지를 움직이거나 하지의 균형을 유지하는 신체활동을 하게 된다.Also, in the cognitive and physical activity step (S140), the cognitive activity may be an activity for determining a correct or incorrect answer for a problem in which correct and incorrect answers are clear. For example, for a problem with clear correct and incorrect answers, such as obtaining an answer to four arithmetic operations, the trainee T's cognitive ability can be evaluated by having the trainee T determine the correct answer. As shown in FIG. 2, the training system presents a problem with a clear answer, such as '315+5=?', the trainee T displays the correct and incorrect answers of the problem displayed on the
한편, 사칙연산뿐만 아니라, 그림을 제시하고 복수의 그림 중에서 제시한 그림과 동일한 그림의 찾도록 하거나, 서로 짝을 이루는 복수의 그림을 보여준 후 그림을 뒤집은 상태에서 서로 짝이 되는 그림을 찾도록 하는 것과 같은 문제도 제시될 수 있다.On the other hand, in addition to the four arithmetic operations, a picture is presented and a picture identical to the picture presented is found among a plurality of pictures, or a plurality of pictures paired with each other is shown and then the picture is turned over to find a paired picture. A similar problem may also be presented.
상기 피훈련자(T)는 정답을 도출하는 과정에서 인지활동을 하게 된다. 이와 동시에, 도출된 정답을 정답과 오답이 혼재된 예시 중에서, 정답을 선택하는 과정을 통하여 신체활동을 한다. 상기 디스플레이(12)에 서로 다른 위치에 정답과 오답이 혼재된 예시가 각각 표시되는데, 상기 피훈련자가 선택한 답이 나머지 예시와 다른 위치에 있으므로, 이를 선택하는 과정에서 상지를 움직이면서, 하지의 균형을 유지해야 하므로, 이 과정에서 신체활동을 한다.The trainee T performs cognitive activities in the process of deriving the correct answer. At the same time, physical activity is performed through the process of selecting the correct answer from among examples in which correct and incorrect answers are mixed. Examples of mixed correct and incorrect answers are displayed on the
한편, 본 발명에서는 증강현실 또는 가상현실을 통하여, 훈련이 진행되고, 상기 피훈련자(T)가 상기 디스플레이(12)와 이격된 상태에서 신체활동이 진행되며, 상기 3D 깊이 카메라(11)로 상기 피훈련자(T)의 신체활동을 감지하게 된다. 이에 따라, 상기 피훈련자(T)가 실제로 상기 디스플레이(12) 상에서 정답을 터치하지 않더라도, 상기 피훈련자(T)가 현재 위치에서 증강현실에서 구현된 공간 또는 가상현실에서 구현된 공간에서 가상으로 정답을 터치하는 것을 상기 3D 깊이 카메라(11)가 인식함으로써, 상기 피훈련자(T)의 신체활동을 감지한다.On the other hand, in the present invention, training is conducted through augmented reality or virtual reality, physical activity is conducted while the trainee (T) is separated from the
아울러, 상기 인지 및 신체활동 단계(S140)는 상기 피훈련자(T)가 정답 또는 오답은 결정하는 동시에, 결정된 정답 또는 오답을 신체활동을 통해 구현(실현)하도록 한다. 즉, 문제에 대한 정답과 오답이 상기 디스플레이(12)에 복수로 표시되도록 하고, 상기 디스플레이(12)에 표시된 정답과 오답 중에서 정답을 선택하는 신체활동을 통하여 구현하도록 한다. 상기 피훈련자(T)는 인지활동을 통하여 상기 디스플레이(12)에 표시된 예시 중 정답을 결정하고, 결정한 정답을 손으로 터치하는 신체활동을 하게 된다. 상기 피훈련자(T)가 정답을 손을 처치하는 신체활동을 하는 동안, 앞서 살펴본, 상기 피훈련자(T)의 상지(上旨)의 강도, 상기의 유연성, 하지(下旨)의 균형도를 산출한다. 즉, 상기 피훈련자(T)가 정답을 터치하기 위하여, 상기 상지를 뻗거나, 상기 하박을 상기 상박에 대하여 회전시키거나 또는 이 과정에서 초기위치를 벗어나는지로 상기 피훈련자(T)의 상지의 강도, 상기의 유연성, 하지의 균형도를 산출한다.In addition, in the recognition and physical activity step (S140), the trainee T determines the correct answer or incorrect answer and at the same time implements (realizes) the determined correct or incorrect answer through physical activity. That is, a plurality of correct and incorrect answers to the problem are displayed on the
상기 인지 및 신체활동 단계(S140)를 수행결과에 따라 상기 피훈련자(T)가 수행한 상기 컨텐츠의 수행결과에 따라 점수가 부여되도록 하여, 상기 피훈련자(T)의 흥미와 성취감을 높이도록 한다. 즉, 상기 피훈련자(T)의 인지활동 및 신체활동의 결과를 점수화한다.According to the performance result of the cognitive and physical activity step (S140), points are given according to the performance result of the contents performed by the trainee (T), so that the trainee (T)'s interest and sense of achievement are increased. . That is, the results of cognitive activity and physical activity of the trainee T are scored.
상기 점수는 상기 훈련시스템에 저장되어, 차후 훈련시 컨텐츠의 선정하는 과정에서 난이도, 실행속도, 실행시간, 운동부위 등을 설정하는데 사용될 수 있다. 즉, 상기 점수가 높아질수록, 그 이후 상기 컨텐츠 선정 단계(S120)를 통하여 상기 컨텐츠를 선정할 때, 컨텐츠의 난이도, 실행속도, 실행시간, 운동부위 중 적어도 어느 하나가 증가하도록 한다.The score is stored in the training system, and can be used to set difficulty, execution speed, execution time, exercise part, etc. in the process of selecting contents during future training. That is, as the score increases, when the content is selected through the content selection step (S120), at least one of difficulty, execution speed, execution time, and exercise part of the content is increased.
도 7 내지 도 9에는 본 발명에 따른 발달장애인용 인지 및 신체 이중과제 훈련방법의 예시가 각각 도시되어 있다.7 to 9 show examples of the cognitive and physical dual task training method for people with developmental disabilities according to the present invention, respectively.
도 7에는 '그림기억하기'를 통하여 상기 피훈련자(T)의 인지활동과 신체활동이 향상되도록 한다.7, cognitive and physical activities of the trainee T are improved through 'remembering pictures'.
상기 피훈련자(T)가 상기 3D 깊이 카메라(11)에 의해 감지된 후(S110), 상기 훈련시스템에 저장된 복수의 컨텐츠 중에서, '그림기억하기' 컨텐츠가 선정된다(S120).After the trainee T is detected by the 3D depth camera 11 (S110), the 'memorize picture' content is selected from among a plurality of contents stored in the training system (S120).
이후, 상기 훈련시스템은 상기 디스플레이(12)를 통하여 선택한 컨텐츠인 '그림기억하기'를 실행시킨다(S130). 상기 컨텐츠가 실행되면, 해당 컨텐츠의 프로세스가 따라, 상기 훈련시스템은 상기 컨텐츠를 진행시킨다. 우선 상기 피훈련자(T)가 맞춰야 할 그림을 먼저 보여주고, 그 이후 맞춰야 할 그림이 포함되어 있는 여러가지 그림 카드들이 등장한다. 그러면 상기 피훈련자(T)는 먼저 제시된 그림과 같은 그림카드를 선택한다. 상기 피훈련자(T)는 상지를 움직여 상기 그림카드를 선택하는 동안, 상기 상지의 강도, 상지의 유연성 및 하지 균형도를 산출한다(S140). 특히, 상기 피훈련자(T)가 손을 움직여 복수의 그림카드 중에서 어느 하나의 그림카드를 선택하는 신체활동을 하므로, 상지의 유연성을 산출할 수 있다.Thereafter, the training system executes 'memorize picture', which is the selected content, through the display 12 (S130). When the content is executed, the training system progresses the content according to the process of the content. First, the trainee T is shown a picture to be matched, and then various picture cards containing the picture to be matched appear. Then, the trainee T selects a picture card as shown in the first picture. While the trainee T selects the picture card by moving his upper limbs, the strength of the upper limbs, the flexibility of the upper limbs, and the balance of the lower limbs are calculated (S140). In particular, since the trainee T performs a physical activity of selecting one picture card from among a plurality of picture cards by moving her hand, flexibility of the upper extremity can be calculated.
또한, 상기 피훈련자(T)는 처음 보여준 그림을 지각하고, 이를 기억한 후, 복수의 그림카드들 중에서 주의 집중하여 정답인 그림카드를 선택해야 하므로, 지각력, 기억력, 주의집중력을 향상시키는 인지활동을 하게 된다.In addition, since the trainee (T) perceives the picture shown for the first time, remembers it, and selects the correct picture card by focusing attention among a plurality of picture cards, it is a cognitive activity to improve perception, memory, and concentration. will do
한편, 상기 피훈련자(T)가 정답을 일정 횟수 이상 맞추지 못한 경우, 정답을 시각적 효과(예를 들면 깜빡이는 효과)로 정답을 알려주도록 한다.On the other hand, if the trainee T fails to guess the correct answer more than a certain number of times, the correct answer is informed through a visual effect (for example, a blinking effect).
아울러, 상기 컨텐츠가 선정되고 상기 피훈련자(T)가 상기 컨텐츠를 수행하기 전, 상기 컨텐츠의 난이도, 게임속도를 설정하고, 진행하도록 할 수 있다.In addition, after the content is selected and before the trainee T performs the content, the level of difficulty and game speed of the content may be set and proceeded.
도 8에는 '짝 맞추기' 컨텐츠에 대한 예시가 도시되어 있다.8 shows an example of 'matching' content.
상기 피훈련자(T)가 상기 3D 깊이 카메라(11)에 의해 감지된 후(S110), 상기 훈련시스템에 저장된 복수의 컨텐츠 중에서, '그 짝 맞추기' 컨텐츠가 선정된다(S120).After the trainee T is detected by the 3D depth camera 11 (S110), 'matching the match' content is selected from among a plurality of contents stored in the training system (S120).
이후, 상기 훈련시스템은 상기 디스플레이(12)를 통하여 선택한 컨텐츠인 '짝 맞추기'를 실행시킨다(S130). 상기 컨텐츠가 실행되면, 해당 컨텐츠의 프로세스가 따라, 상기 훈련시스템은 상기 컨텐츠를 진행시킨다. 상기 피훈련자(T)에게 모든 짝이 있는 카드를 일정시간 보여준 후, 모든 카드를 뒤집어 놓은 상태로 시작한다. 그러면, 상기 피훈련자(T)는 서로 짝이 되는 2장의 카드를 선택하여 뒤집는 과정을 반복한다. 서로 짝을 맞춰 선택한 카드는 그림이 보여지는 상태를 유지하고, 상기 피훈련자(T)가 서로 짝이 되는 모든 카드를 맞추도록 한다.Thereafter, the training system executes 'matching', which is the selected content, through the display 12 (S130). When the content is executed, the training system progresses the content according to the process of the content. After showing all paired cards to the trainee T for a certain period of time, the process starts with all cards face down. Then, the trainee T repeats the process of selecting and flipping two cards that are paired with each other. The cards selected to be matched with each other maintain a state in which the picture is shown, and the trainee (T) makes all cards matched with each other.
이 과정에서, 상지의 강도, 상지의 유연성 및 하지 균형도를 산출하게 되고, 상기 피훈련자(T)가 손을 움직여 서로 짝이되는 카드를 선택하는 신체활동을 하므로, 상지의 유연성을 산출할 수 있다(S140).In this process, upper extremity strength, upper extremity flexibility, and lower extremity balance are calculated, and since the trainee (T) moves his hand and performs a physical activity of selecting a matching card, the upper extremity flexibility can be calculated. Yes (S140).
또한, 상기 피훈련자(T)는 처음 보여준 모든 카드를 지각하고, 이를 기억한 후, 복수의 그림카드들 중에서 서로 짝이 되는 카드를 주의 집중하여 선택해야 하므로, 지각력, 기억력, 주의집중력을 향상시키는 인지활동을 하게 된다.In addition, since the trainee T should perceive all the cards shown for the first time, memorize them, and carefully select a paired card among a plurality of picture cards, improving perception, memory, and concentration cognitive activity.
상기 컨텐츠가 선정되고 상기 피훈련자(T)가 상기 컨텐츠를 수행하기 전, 상기 컨텐츠의 난이도, 게임속도를 설정하고, 진행하도록 할 수 있다.After the content is selected, and before the trainee T performs the content, the level of difficulty and game speed of the content may be set and proceeded.
도 9에는 '빠르게 터치' 컨텐츠에 대한 예시가 도시되어 있다.9 shows an example of 'quick touch' content.
상기 피훈련자(T)가 상기 3D 깊이 카메라(11)에 의해 감지된 후(S110), 상기 훈련시스템에 저장된 복수의 컨텐츠 중에서, '빠르게 터치' 컨텐츠가 선정된다(S120).After the trainee T is detected by the 3D depth camera 11 (S110), 'quick touch' content is selected from among a plurality of contents stored in the training system (S120).
이후, 상기 훈련시스템은 상기 디스플레이(12)를 통하여 선택한 컨텐츠인 '빠르게 터치'를 실행시킨다(S130). 상기 컨텐츠가 실행되면, 해당 컨텐츠의 프로세스가 따라, 상기 훈련시스템은 상기 컨텐츠를 진행시킨다. 컨텐츠의 룰에 맞게, 카드의 타일이 보이도록 모든 카드가 뒤집힌 상태에서, 상기 피훈련자(T)는 어느 하나의 카드를 선택하여 뒤집어진 카드의 정해진 사간 안에 나머지 카드를 모두 선택하도록 한다. 정해진 시간 동안 표시되는 패턴이 사라지기 전에 빠르게 터치하여 선택되도록 한다.Thereafter, the training system executes 'quick touch', which is the content selected through the display 12 (S130). When the content is executed, the training system progresses the content according to the process of the content. In a state where all the cards are turned over so that the tile of the card is visible according to the rules of the content, the trainee T selects one card and selects all the remaining cards within a predetermined time of the turned card. Before the pattern displayed for a set period of time disappears, touch it quickly to select it.
이 과정에서 상기 피훈련자(T)는 상지를 움직여 상기 카드를 선택하는 동안, 상기 상지의 강도, 상지의 유연성 및 하지 균형도를 산출한다(S140). 특히, 상기 피훈련자(T)가 손을 빠르게 움직여 카드를 터치하여 선택하는 신체활동을 하므로, 상지의 유연성을 산출할 수 있다.In this process, while the trainee T selects the card by moving his upper limbs, the strength of the upper limbs, the flexibility of the upper limbs, and the balance of the lower limbs are calculated (S140). In particular, since the trainee T moves his hand quickly and touches a card to perform a physical activity, flexibility of the upper extremities can be calculated.
또한, 상기 피훈련자(T)는 정해진 시간내에 나타나는 변화를 인지하는 지각력과 함께, 카드를 빠르게 터치해야 하므로 주의집중력을 향상시키는 인지활동을 하게 된다.In addition, since the trainee T needs to quickly touch a card along with the perception of recognizing a change within a predetermined time, he/she performs a cognitive activity to improve his/her ability to concentrate.
11 : 3D 깊이 카메라
12 : 디스플레이
S110 : 피훈련자 감지 단계
S120 : 컨텐츠 선정 단계
S130 : 컨텐츠 구현 단계
S140 : 인지 및 신체활동 단계11: 3D Depth Camera
12: display
S110: trainee detection step
S120: Content Selection Step
S130: Content implementation step
S140: cognitive and physical activity stage
Claims (14)
상기 인지 및 신체 훈련을 할 피훈련자가 감지되는 피훈련자 감지 단계;
훈련시스템이 제공하는 복수 컨텐츠 중 하나의 컨텐츠가 선정되는 컨텐츠 선정 단계;
선정된 상기 컨텐츠가 실행되어 디스플레이를 통해 증강현실로 컨텐츠 구현 단계; 및
증강현실로 구현된 상기 컨텐츠를 인지하는 동시에 사용자의 상지 모션변화가 상기 3D 깊이 카메라에 의해 측정되고, 상지 모션에 의한 가속도로부터 상지의 강도를 산출하는 인지 및 신체활동 단계;
를 포함하는 발달장애인용 인지 및 신체 이중과제 훈련방법.In the cognitive and physical training method for people with developmental disabilities using a 3D depth camera,
a trainee detection step of detecting a trainee to be trained for the cognitive and physical training;
Content selection step of selecting one of the plurality of contents provided by the training system;
Implementing content in augmented reality through a display by executing the selected content; and
a recognition and physical activity step of recognizing the content implemented in augmented reality, measuring a motion change of the user's upper extremity by the 3D depth camera, and calculating strength of the upper extremity from acceleration caused by the motion of the upper extremity;
Cognitive and physical dual task training method for people with developmental disabilities, including.
상기 인지 및 신체 훈련을 할 피훈련자가 감지되는 피훈련자 감지 단계;
훈련시스템이 제공하는 복수 컨텐츠 중 하나의 컨텐츠가 선정되는 컨텐츠 선정 단계;
선정된 상기 컨텐츠가 실행되어 디스플레이를 통해 증강현실로 컨텐츠 구현 단계; 및
증강현실로 구현된 상기 컨텐츠를 인지하는 동시에 사용자의 상지가 회전축을 중심으로 한 각도변화범위가 상기 3D 깊이 카메라에 의해 측정되고, 회전축(관절)의 움직임에 대한 상대 움직임으로부터 상지 유연성을 산출하는 인지 및 신체활동 단계;
를 포함하는 발달장애인용 인지 및 신체 이중과제 훈련방법.In the cognitive and physical training method for people with developmental disabilities using a 3D depth camera,
a trainee detection step of detecting a trainee to be trained for the cognitive and physical training;
Content selection step of selecting one of the plurality of contents provided by the training system;
Implementing content in augmented reality through a display by executing the selected content; and
At the same time as recognizing the content implemented in augmented reality, the angle change range around the rotation axis of the user's upper extremity is measured by the 3D depth camera, and the upper extremity flexibility is calculated from the relative motion to the rotation axis (joint) motion. and physical activity phase;
Cognitive and physical dual task training method for people with developmental disabilities, including.
상기 인지 및 신체 훈련을 할 피훈련자가 감지되는 피훈련자 감지 단계;
훈련시스템이 제공하는 복수 컨텐츠 중 하나의 컨텐츠가 선정되는 컨텐츠 선정 단계;
선정된 상기 컨텐츠가 실행되어 디스플레이를 통해 증강현실로 컨텐츠 구현 단계; 및
증강현실로 구현된 상기 컨텐츠를 인지하는 동시에 사용자의 하지가 전후 또는 좌우로 움직임이 발생하는지를 상기 3D 깊이 카메라에 의해 측정함으로써 하지균형도를 산출하는 인지 및 신체활동 단계;
를 포함하는 발달장애인용 인지 및 신체 이중과제 훈련방법.In the cognitive and physical training method for people with developmental disabilities using a 3D depth camera,
a trainee detection step of detecting a trainee to be trained for the cognitive and physical training;
Content selection step of selecting one of the plurality of contents provided by the training system;
Implementing content in augmented reality through a display by executing the selected content; and
a recognition and physical activity step of calculating a lower extremity balance by recognizing the contents implemented in augmented reality and measuring whether the lower extremities of the user move forward or backward or left and right by the 3D depth camera;
Cognitive and physical dual task training method for people with developmental disabilities, including.
상기 인지 및 신체활동 단계는,
상기 컨텐츠에 대해 지각력, 기억력 및 주의집중력 중 어느 하나 이상을 필요로 하는 두뇌활동을 인지활동으로 하는 것을 특징으로 하는 발달장애인용 인지 및 신체 이중과제 훈련방법.According to any one of claims 1 to 3,
The cognitive and physical activity stages,
Cognitive and physical dual task training method for people with developmental disabilities, characterized in that the cognitive activity is a brain activity that requires at least one of perception, memory and attention to the content.
상기 인지 및 신체활동 단계는,
정답과 오답이 명확한 문제에 대해 정답 또는 오답을 결정하는 활동을 인지활동으로 하는 것을 특징으로 하는 발달장애인용 인지 및 신체 이중과제 훈련방법.According to claim 4,
The cognitive and physical activity stages,
A cognitive and physical dual task training method for people with developmental disabilities, characterized in that the activity of determining the correct or incorrect answer for a problem with clear correct and incorrect answers is a cognitive activity.
상기 인지 및 신체활동 단계는,
상기 정답 또는 오답을 결정하는 동시에, 결정된 상기 정답 또는 오답을 신체활동을 통해 구현(실현)하는 것을 특징으로 하는 발달장애인용 인지 및 신체 이중과제 훈련방법.According to claim 5,
The cognitive and physical activity stages,
A cognitive and physical dual task training method for people with developmental disabilities, characterized in that the correct or incorrect answer is determined and the determined correct or incorrect answer is implemented (realized) through physical activity.
상기 인지 및 신체활동 단계는,
상기 3D 깊이 카메라가 상기 피훈련자가 증강현실에 의해 구현된 공간내에서 상기 피훈련자의 신체활동을 인식하는 것을 특징으로 하는 발달장애인용 인지 및 신체 이중과제 훈련방법.According to any one of claims 1 to 3,
The cognitive and physical activity stages,
The cognitive and body dual task training method for people with developmental disabilities, characterized in that the 3D depth camera recognizes the trainee's physical activity in a space where the trainee is implemented by augmented reality.
상기 인지 및 신체활동 단계;
상기 피훈련자의 인지활동 및 신체활동의 결과를 점수화하고, 이를 저장하는 것을 특징으로 하는 발달장애인용 인지 및 신체 이중과제 훈련방법.According to any one of claims 1 to 3,
the cognitive and physical activity steps;
Cognitive and physical dual task training method for people with developmental disabilities, characterized in that for scoring and storing the results of the trainee's cognitive activity and physical activity.
상기 컨텐츠가 선정되는 컨텐츠 선정 단계는,
상기 점수가 높아질수록 선정된 상기 컨텐츠의 난이도, 실행속도, 실행시간, 운동부위 중 적어도 어느 하나를 증가시키는 것을 특징으로 하는 발달장애인용 인지 및 신체 이중과제 훈련방법.According to claim 8,
In the content selection step in which the content is selected,
Cognitive and body dual task training method for people with developmental disabilities, characterized in that at least one of difficulty, execution speed, execution time, and exercise part of the selected content increases as the score increases.
상기 피훈련자 감지 단계는,
상기 피훈련자가 상기 3D 깊이 카메라로부터 미리 정해진 거리 이내에 위치하면 상기 3D 깊이 카메라가 감지하는 것을 특징으로 하는 발달장애인용 인지 및 신체 이중과제 훈련방법.According to any one of claims 1 to 3,
In the trainee detection step,
The cognitive and physical dual task training method for people with developmental disabilities, characterized in that the 3D depth camera detects when the trainee is located within a predetermined distance from the 3D depth camera.
상기 컨텐츠가 선정되는 컨텐츠 선정 단계는 상기 훈련시스템이 상기 훈련시스템 내에 저장된 복수의 상기 컨텐츠 중에서 하나를 상기 피훈련자가 선택하는 것을 특징으로 하는 발달장애인용 인지 및 신체 이중과제 훈련방법.According to any one of claims 1 to 3,
In the content selection step of selecting the content, the training system selects one of the plurality of contents stored in the training system by the trainee.
상기 컨텐츠 선정 단계는,
선정된 상기 컨텐츠의 난이도, 실행속도, 실행시간, 운동부위 중 적어도 어느 하나를 설정하는 것을 특징으로 하는 발달장애인용 인지 및 신체 이중과제 훈련방법.According to any one of claims 1 to 3,
In the content selection step,
A cognitive and physical dual task training method for people with developmental disabilities, characterized in that at least one of the difficulty, execution speed, execution time, and exercise part of the selected content is set.
상기 컨텐츠 구현 단계는,
선정된 상기 컨텐츠에 대한 설명과 상기 피훈련자가 수행해야 하는 과제의 시험영상을 플레이 되는 것을 포함하는 것을 특징으로 하는 발달장애인용 인지 및 신체 이중과제 훈련방법.According to any one of claims 1 to 3,
The content implementation step,
Cognitive and physical dual task training method for people with developmental disabilities, comprising playing an explanation of the selected content and a test image of the task to be performed by the trainee.
상기 컨텐츠 구현 단계는,
선정된 컨텐츠가 상기 증강현실 대신 가상현실을 통하여 구현되는 것을 특징으로 하는 발달장애인용 인지 및 신체 이중과제 훈련방법.According to any one of claims 1 to 3,
The content implementation step,
Cognitive and body dual task training method for people with developmental disabilities, characterized in that the selected content is implemented through virtual reality instead of the augmented reality.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210085383A KR20230003826A (en) | 2021-06-30 | 2021-06-30 | Method for dual task training of cognitive ability and physical ability for developmentally disabled |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210085383A KR20230003826A (en) | 2021-06-30 | 2021-06-30 | Method for dual task training of cognitive ability and physical ability for developmentally disabled |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20230003826A true KR20230003826A (en) | 2023-01-06 |
Family
ID=84924303
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020210085383A KR20230003826A (en) | 2021-06-30 | 2021-06-30 | Method for dual task training of cognitive ability and physical ability for developmentally disabled |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20230003826A (en) |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20180065709A (en) | 2016-12-08 | 2018-06-18 | 정은지 | Training system using neurofeedback apparatus and various video contents and method thereof |
-
2021
- 2021-06-30 KR KR1020210085383A patent/KR20230003826A/en not_active IP Right Cessation
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20180065709A (en) | 2016-12-08 | 2018-06-18 | 정은지 | Training system using neurofeedback apparatus and various video contents and method thereof |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11033453B1 (en) | Neurocognitive training system for improving visual motor responses | |
| EP2145327B1 (en) | Vision cognition and coordination testing | |
| US20130171596A1 (en) | Augmented reality neurological evaluation method | |
| US11337606B1 (en) | System for testing and/or training the vision of a user | |
| KR101520113B1 (en) | Unitary vision and neuro-processing testing center | |
| KR101979750B1 (en) | Dance training contents authoring system | |
| CN107281728B (en) | Sensor-matched augmented reality skiing auxiliary training system and method | |
| KR101931784B1 (en) | Virtual fitness system for multi-user | |
| TWI496027B (en) | Motion guidance prompting method, system thereof and motion guiding prompting device | |
| KR102088335B1 (en) | Mixed reality-based learning game providing system that can simultaneously learn and exercise | |
| US8845096B1 (en) | Vision therapy system | |
| Li et al. | Development of exergame-based virtual trainer for physical therapy using kinect | |
| KR20190058169A (en) | Treatment System and Method Based on Virtual-Reality | |
| Jund et al. | Impact of frame of reference on memorization in virtual environments | |
| KR20170135243A (en) | Diagnosis rehabilitation training apparatus using virtual reality | |
| KR20230003826A (en) | Method for dual task training of cognitive ability and physical ability for developmentally disabled | |
| JPH07124281A (en) | Form training device | |
| Barioni et al. | BalletVR: a Virtual Reality System for Ballet Arm Positions Training | |
| JP7125180B1 (en) | Cognitive ability estimation device, its method and program | |
| KR20160005841A (en) | Motion recognition with Augmented Reality based Realtime Interactive Human Body Learning System | |
| CN113100717A (en) | Naked eye 3D dizziness training system suitable for dizziness patient and evaluation method | |
| Arnold et al. | Performance of a skilled motor task in virtual and real environments | |
| Cavaco et al. | Spatialized audio in a vision rehabilitation game for training orientation and mobility skills | |
| WO2020073103A1 (en) | Virtual reality system | |
| Wu et al. | Interactive Intelligent Exercise System Design for the Elderly |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| AMND | Amendment | ||
| E601 | Decision to refuse application | ||
| AMND | Amendment | ||
| X601 | Decision of rejection after re-examination |