KR101381134B1 - Vestibular rehabilitation training system and rehabilitation training method using motion games - Google Patents

Vestibular rehabilitation training system and rehabilitation training method using motion games Download PDF

Info

Publication number
KR101381134B1
KR101381134B1 KR1020130000775A KR20130000775A KR101381134B1 KR 101381134 B1 KR101381134 B1 KR 101381134B1 KR 1020130000775 A KR1020130000775 A KR 1020130000775A KR 20130000775 A KR20130000775 A KR 20130000775A KR 101381134 B1 KR101381134 B1 KR 101381134B1
Authority
KR
South Korea
Prior art keywords
game
motion
patient
information
gaze
Prior art date
Application number
KR1020130000775A
Other languages
Korean (ko)
Inventor
구정훈
Original Assignee
계명대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 계명대학교 산학협력단 filed Critical 계명대학교 산학협력단
Priority to KR1020130000775A priority Critical patent/KR101381134B1/en
Application granted granted Critical
Publication of KR101381134B1 publication Critical patent/KR101381134B1/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H1/00—Apparatus for passive exercising; Vibrating apparatus; Chiropractic devices, e.g. body impacting devices, external devices for briefly extending or aligning unbroken bones
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B23/00—Exercising apparatus specially adapted for particular parts of the body
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50—Control means thereof
    • A61H2201/5023—Interfaces to the user
    • A61H2201/5043—Displays
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50—Control means thereof
    • A61H2201/5058—Sensors or detectors

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physical Education & Sports Medicine (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Epidemiology (AREA)
  • Pain & Pain Management (AREA)
  • Rehabilitation Therapy (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Rehabilitation Tools (AREA)

Abstract

The present invention relates to a vestibular rehabilitation training system using a motion reaction game, comprising: an eye detection module for detecting the eyes of a patient; a motion detection module for detecting a motion including the patient′s head movement and body direction; a game module playing a game by motion reaction game contents and receiving information detected in the eye detection module and the motion detection module to apply the information as a input signal of the game played. The present invention relates to a vestibular rehabilitation training method using the motion reaction game, and more particularly, to the method comprising the steps of: (1) detecting the patient′s eye information from the patient′s images; (2) detecting motion information including the patient′s head movement and body direction from the patient′s images; and (3) playing a game by motion reaction game contents and receiving information detected in the eye detection module and the motion detection module to apply the information as a input signal of the game played. According to the vestibular rehabilitation training system and the rehabilitation training method using a motion reaction game suggested in the present invention, by detecting the patient′s eyes and motion so as to be applied as a input signal of the game played, the patient′s eyes and motion are reflected to the game in a real time so as to give a feedback to the patient, and the patient finds the rehabilitation training interesting so as to induce active participation, as well as rehabilitation effects can be enhanced due to continuous and active participation in the rehabilitation training.

Description

모션 반응 게임을 이용한 전정 재활 훈련 시스템 및 재활 훈련 방법{VESTIBULAR REHABILITATION TRAINING SYSTEM AND REHABILITATION TRAINING METHOD USING MOTION GAMES}VESTIBULAR REHABILITATION TRAINING SYSTEM AND REHABILITATION TRAINING METHOD USING MOTION GAMES}

본 발명은 전정 재활 훈련 시스템 및 재활 훈련 방법에 관한 것으로서, 보다 구체적으로는 모션 반응 게임을 이용한 전정 재활 훈련 시스템 및 재활 훈련 방법에 관한 것이다.The present invention relates to a vestibular rehabilitation training system and a rehabilitation training method, and more particularly, to a vestibular rehabilitation training system and a rehabilitation training method using a motion reaction game.

많은 환자들이 이명을 동반한 어지러움(현기증)으로 고생을 한다. 의료통계에 의하면 어지럼증을 호소하는 환자의 45%는 내이(inner ear)의 전정 기관 때문이다. 지속되는 어지럼증은 삶의 질을 떨어뜨리고, 운동수행능력을 저하시키고, 삶을 황폐화시킨다.
Many patients suffer from dizziness accompanied by tinnitus. Medical statistics show that 45% of patients with dizziness are due to vestibular organs in the inner ear. Sustained dizziness reduces the quality of life, impairs motor performance, and devastates life.

어지럼증을 유발하는 질환으로는, 양성 발작성 체위성 현훈(BPPV), 전정기관 기능저하를 유발하는 메니에르 질병(Meniere's disease), 내이염(labyrinthitis), 전정 신경염(vestibular neuritis) 등이 있을 수 있다. 특히, 대표적인 질환인 양성 발작성 체위성 현훈은 인체의 반고리관 내에 이석이 침착되어 생기는 질환으로서, 최근 발생이 증가하고 있다.
Disorders that cause dizziness may include benign paroxysmal positional vertigo (BPPV), Meniere's disease that causes vestibular dysfunction, labyrinthitis, vestibular neuritis, and the like. In particular, a typical paroxysmal positional vertigo, which is a representative disease, is a disease caused by the deposition of ear stones in the semicircular canal of the human body, and its occurrence has recently increased.

전정 재활 훈련을 통해 이러한 문제를 해결할 수 있는데, 전정 재활 훈련은 시선을 고정한 상태에서 머리를 상하 또는 좌우로 움직이는 운동에 의해 시행될 수 있다. 전술한 바와 같은 질환에 의한 어지럼증 이외에도, 내이질환과 관련이 없는 오래된 어지럼증을 가지고 있는 환자 또한 전정 재활 훈련으로 삶의 질이 놀랍게 향상될 수 있다. 이는, 전정 재활 훈련은 어지럼증과 복시를 동반한 증상을 개선시키고, 평형감각과 보행능력을 증가시켜 삶의 질을 높일 수 있기 때문이다
Vestibular rehabilitation can solve this problem, which can be done by moving your head up and down or left and right with your eyes fixed. In addition to the dizziness caused by the above-mentioned diseases, patients with old dizziness not associated with inner ear disease can also surprisingly improve the quality of life through vestibular rehabilitation training. This is because vestibular rehabilitation training can improve the symptoms of dizziness and diplopia, and improve the quality of life by increasing the sense of equilibrium and walking ability.

전정 재활 훈련은 하루 2회, 최소 4주에서 6주 간 시행을 하여야 효과를 볼 수 있다. 그러나 환자가 어지럼증을 느끼는 상태에서 병원까지 가기에는 많은 어려움이 있기 때문에, 의료진의 도움 하에 전정 재활 훈련을 하기는 힘든 것이 현실이다. 또한, 훈련 방식을 숙지하고 개인별로 가정에서 행할 수도 있으나, 개인의 지속적이고 적극적인 수행이 요구되기 때문에 그 효용성이 제한적이다. 따라서 병원까지 내원하지 않더라도 가정에서 쉽게 전정 재활 훈련을 할 수 있으면서도, 환자의 능동적인 재활 훈련 참여를 유도할 수 있는 시스템 및 방법에 대한 개발이 시급한 실정이다.Vestibular rehabilitation training should be performed twice a day for at least 4 to 6 weeks. However, it is difficult to practice vestibular rehabilitation training with the help of medical staff because it is difficult for the patient to get to the hospital from dizziness. In addition, it is possible to know the training method and practice at home for each individual, but its utility is limited because it requires continuous and active performance of the individual. Therefore, it is urgent to develop a system and a method for inducing a patient's participation in active rehabilitation training even though the vestibular rehabilitation training can be easily performed at home even when the doctor does not come to the hospital.

본 발명은 기존에 제안된 방법들의 상기와 같은 문제점들을 해결하기 위해 제안된 것으로서, 환자의 시선 및 모션을 검출하여 모션 반응 게임 콘텐츠에 의해 플레이되는 게임의 입력 신호로 적용함으로써, 환자의 시선 및 모션이 게임에 실시간 반영되어 환자에게 피드백되고, 환자가 재활 훈련을 재미있게 느낄 수 있도록 하여 능동적인 참여를 유도할 수 있으며, 지속적이고 적극적인 재활 훈련 참여로 인해 재활 효과를 향상시킬 수 있는, 모션 반응 게임을 이용한 전정 재활 훈련 시스템 및 재활 훈련 방법을 제공하는 것을 그 목적으로 한다.The present invention is proposed to solve the above problems of the conventionally proposed methods, by detecting the gaze and motion of the patient and applying it as the input signal of the game played by the motion-response game content, the patient's gaze and motion It is a real-time motion response game that can be reflected in the game in real time, fed back to the patient, induces active participation by making the patient have fun with rehabilitation training, and improves the rehabilitation effect through continuous and active participation in rehabilitation training. It aims at providing the vestibular rehabilitation training system and rehabilitation training method which were used.

상기한 목적을 달성하기 위한 본 발명의 특징에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템은,Vestibular rehabilitation training system using a motion reaction game according to a feature of the present invention for achieving the above object,

환자의 시선을 검출하는 시선 검출 모듈;A gaze detection module for detecting a gaze of a patient;

상기 환자의 머리의 움직임 및 몸의 방향을 포함하는 모션을 검출하는 모션 검출 모듈; 및A motion detection module for detecting a motion including a movement of the head of the patient and a direction of the body; And

모션 반응 게임 콘텐츠에 의해 게임을 플레이하되, 상기 시선 검출 모듈 및 모션 검출 모듈에서 검출된 정보를 전달받아, 상기 플레이되는 게임의 입력 신호로 적용하는 게임 모듈을 포함하는 것을 그 구성상의 특징으로 한다.
A game is played by motion-reaction game content, and includes a game module that receives the information detected by the gaze detection module and the motion detection module and applies it as an input signal of the game to be played.

바람직하게는,Preferably,

상기 환자의 전정 재활을 위해 시선을 고정하고 머리의 움직임으로 게임의 입력 신호를 입력하도록 고안된 게임 콘텐츠를 적어도 하나 이상 저장하는 데이터베이스를 더 포함할 수 있다.
The apparatus may further include a database configured to store at least one or more game contents designed to fix an eye for vestibular rehabilitation of the patient and input an input signal of the game by the movement of the head.

바람직하게는, 상기 게임 모듈은,Preferably, the game module,

상기 시선 검출 모듈 및 모션 검출 모듈에서 검출된 시선 정보 및 모션 정보를 전달받는 수신부;A receiver configured to receive gaze information and motion information detected by the gaze detection module and the motion detection module;

상기 전달받은 시선 정보 및 모션 정보를 상기 게임의 입력 신호로 변환하는 신호 변환부; 및A signal converter converting the received gaze information and motion information into an input signal of the game; And

상기 신호 변환부에서 변환한 입력 신호를 적용하여 상기 게임을 플레이하는 플레이부를 포함할 수 있다.
It may include a play unit for playing the game by applying the input signal converted by the signal conversion unit.

더욱 바람직하게는, 상기 게임 모듈은,More preferably, the game module,

상기 시선 검출 모듈로부터 시선 정보를 전달받아, 상기 게임에 따른 시선 고정 지점 및 환자의 실제 시선 지점을 비교하여 출력하는 출력부를 더 포함할 수 있다.
The apparatus may further include an output unit configured to receive the gaze information from the gaze detection module and compare the gaze fixing point according to the game and the actual gaze point of the patient.

더욱 바람직하게는, 상기 플레이부는,More preferably, the play unit,

상기 수신부에서 수신한 모션 정보에 따라 변환된 입력 신호를 상기 게임의 컨트롤 신호로 실시간 적용하여 게임을 플레이할 수 있다.
The game may be played by applying an input signal converted according to the motion information received by the receiver as a control signal of the game in real time.

더욱 바람직하게는, 상기 게임 모듈은,More preferably, the game module,

상기 시선 정보 및 모션 정보를 이용하여 게임의 난이도를 조절하는 난이도 조절부를 더 포함할 수 있다.
It may further include a difficulty control unit for adjusting the difficulty of the game by using the gaze information and motion information.

더욱 바람직하게는, 상기 게임 모듈은,More preferably, the game module,

상기 환자의 게임 플레이에 따른 정보를 재활 정보로 변환하여 미리 정해진 단말기에 전송하는 재활 정보 송신부를 더 포함할 수 있다.
Rehabilitation information transmission unit for converting the information according to the game play of the patient into rehabilitation information may be further transmitted to a predetermined terminal.

바람직하게는,Preferably,

상기 환자의 머리 또는 상반신 영상을 촬영하여 상기 시선 검출 모듈 및 모션 검출 모듈에 전달하는 촬영 모듈을 더 포함할 수 있다.
The apparatus may further include a photographing module configured to photograph the head or upper body image of the patient and transmit the photographed image to the eye detection module and the motion detection module.

더욱 바람직하게는, 상기 시선 검출 모듈은,More preferably, the gaze detection module,

상기 촬영 모듈로부터 전달받은 환자의 영상으로부터 눈동자 영역을 검출하여 시선 정보를 획득하며, 획득한 시선 정보를 상기 게임 모듈에 전달할 수 있다.
Eye gaze information may be obtained by detecting a pupil area from an image of a patient received from the photographing module, and the acquired gaze information may be transmitted to the game module.

더욱 바람직하게는, 상기 모션 검출 모듈은,More preferably, the motion detection module,

상기 촬영 모듈로부터 전달받은 환자의 영상으로부터 얼굴 영역을 검출하여 얼굴 영역의 움직임을 포함하는 모션 정보를 획득하며, 획득한 모션 정보를 상기 게임 모듈에 전달할 수 있다.
The face region may be detected from the image of the patient received from the photographing module to obtain motion information including the movement of the face region, and the acquired motion information may be transmitted to the game module.

더욱 바람직하게는, 상기 촬영 모듈은,More preferably, the photographing module,

시선 검출을 위한 영상을 촬영하여 상기 시선 검출 모듈에 전달하는 시선 촬영 모듈; 및A gaze photographing module configured to photograph an image for gaze detection and transmit the captured image to the gaze detection module; And

모션 검출을 위한 영상을 촬영하여 상기 모션 검출 모듈에 전달하는 모션 촬영 모듈을 포함할 수 있다.
It may include a motion photographing module for photographing the image for motion detection and transfer to the motion detection module.

상기한 목적을 달성하기 위한 본 발명의 특징에 따른 모션 반응 게임을 이용한 전정 재활 훈련 방법은,Vestibular rehabilitation training method using a motion reaction game according to a feature of the present invention for achieving the above object,

(1) 환자 영상으로부터 환자의 시선 정보를 검출하는 단계;(1) detecting gaze information of the patient from the patient image;

(2) 환자 영상으로부터 상기 환자의 머리의 움직임 및 몸의 방향을 포함하는 모션 정보를 검출하는 단계; 및(2) detecting motion information from the patient image, including motion of the head and the direction of the body of the patient; And

(3) 모션 반응 게임 콘텐츠에 의해 게임을 플레이하되, 상기 검출된 시선 정보 및 모션 정보를 상기 플레이되는 게임의 입력 신호로 적용하여 게임을 플레이하는 단계를 포함하는 것을 그 구성상의 특징으로 한다.
(3) playing a game by motion-response game content, wherein the game is played by applying the detected gaze information and motion information as an input signal of the played game.

바람직하게는, 상기 단계 (1) 이전에는,Preferably, prior to step (1)

상기 환자의 전정 재활을 위해 시선을 고정하고 머리의 움직임으로 게임의 입력 신호를 입력하도록 고안된 게임 콘텐츠를 데이터베이스에 적어도 하나 이상 저장하는 단계를 더 포함할 수 있다.
The method may further include storing at least one game content in a database designed to fix the gaze for the vestibular rehabilitation of the patient and input an input signal of the game by the movement of the head.

바람직하게는, 상기 단계 (3)은,Preferably, the step (3)

(3-1) 상기 단계 (1) 및 단계 (2)에서 검출된 시선 정보 및 모션 정보를 전달받는 단계;(3-1) receiving the gaze information and motion information detected in steps (1) and (2);

(3-2) 상기 전달받은 시선 정보 및 모션 정보를 상기 게임의 입력 신호로 변환하는 단계; 및(3-2) converting the received gaze information and motion information into an input signal of the game; And

(3-3) 상기 변환한 입력 신호를 적용하여 상기 게임을 플레이하는 단계를 포함할 수 있다.
And (3-3) playing the game by applying the converted input signal.

더욱 바람직하게는, 상기 단계 (3-3)에서는,More preferably, in the step (3-3),

상기 (3-1)에서 전달받은 시선 정보를 이용하여, 상기 게임에 따른 시선 고정 지점 및 환자의 실제 시선 지점을 비교하여 출력부로 출력할 수 있다.
By using the gaze information received in (3-1), the gaze fixed point according to the game and the actual gaze point of the patient can be compared and output to the output unit.

더욱 바람직하게는, 상기 단계 (3-3)에서는,More preferably, in the step (3-3),

상기 (3-1)에서 전달받은 모션 정보에 따라 변환된 입력 신호를 상기 게임의 컨트롤 신호로 실시간 적용하여 게임을 플레이할 수 있다.
The game may be played by applying the input signal converted according to the motion information received in (3-1) as a control signal of the game in real time.

더욱 바람직하게는, 상기 단계 (3-1) 이후에는,More preferably, after the step (3-1),

상기 단계 (3-1)에서 전달받은 시선 정보 및 모션 정보를 이용하여 게임의 난이도를 조절하는 단계를 더 포함할 수 있다.
The method may further include adjusting a difficulty level of the game using the gaze information and the motion information received in the step (3-1).

더욱 바람직하게는, 상기 단계 (3-3) 이후에는,More preferably, after the step (3-3),

상기 환자의 게임 플레이에 따른 정보를 재활 정보로 변환하여 미리 정해진 단말기에 전송하는 단계를 더 포함할 수 있다.
The method may further include converting the information according to the game play of the patient into rehabilitation information and transmitting it to a predetermined terminal.

바람직하게는,Preferably,

(0) 상기 환자의 머리 또는 상반신 영상을 촬영하는 단계를 더 포함할 수 있다.
(0) The method may further include taking a head or upper body image of the patient.

더욱 바람직하게는,More preferably,

상기 단계 (1)에서는, 상기 단계 (0)에서 촬영한 환자의 영상으로부터 눈동자 영역을 검출하여 시선 정보를 획득하며,In the step (1), the eye area is detected from the image of the patient taken in the step (0) to obtain the gaze information,

상기 단계 (3)에서는, 상기 획득한 시선 정보를 상기 플레이되는 게임의 입력 신호로 적용하여 상기 게임을 플레이할 수 있다.
In the step (3), the game can be played by applying the acquired gaze information as an input signal of the game to be played.

더욱 바람직하게는,More preferably,

상기 단계 (2)에서는, 상기 단계 (0)에서 촬영한 환자의 영상으로부터 얼굴 영역을 검출하여 얼굴 영역의 움직임을 포함하는 모션 정보를 획득하며,In the step (2), by detecting the face area from the image of the patient taken in the step (0) to obtain motion information including the movement of the face area,

상기 단계 (3)에서는, 상기 획득한 모션 정보를 상기 플레이되는 게임의 입력 신호로 적용하여 상기 게임을 플레이할 수 있다.In the step (3), the game can be played by applying the obtained motion information as an input signal of the game to be played.

본 발명에서 제안하고 있는 모션 반응 게임을 이용한 전정 재활 훈련 시스템 및 재활 훈련 방법에 따르면, 환자의 시선 및 모션을 검출하여 모션 반응 게임 콘텐츠에 의해 플레이되는 게임의 입력 신호로 적용함으로써, 환자의 시선 및 모션이 게임에 실시간 반영되어 환자에게 피드백되고, 환자가 재활 훈련을 재미있게 느낄 수 있도록 하여 능동적인 참여를 유도할 수 있으며, 지속적이고 적극적인 재활 훈련 참여로 인해 재활 효과를 향상시킬 수 있다.According to the vestibular rehabilitation training system and rehabilitation training method using the motion reaction game proposed by the present invention, the gaze and the patient's gaze and motion is detected and applied as an input signal of the game played by the motion reaction game content, The motion is reflected in the game in real time, fed back to the patient, and the patient can enjoy the rehabilitation training to induce active participation, and the continuous and active participation in the rehabilitation training can improve the rehabilitation effect.

도 1은 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템 및 재활 훈련 방법을 통한 전정 재활 훈련의 수행을 예를 들어 도시한 도면.
도 2는 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템의 구성을 도시한 도면.
도 3은 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템을 이용한 게임 플레이를 예를 들어 도시한 도면.
도 4는 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템에서, 게임 모듈의 세부적인 구성을 도시한 도면.
도 5는 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템에서, 시선 고정 지점 및 환자의 실제 시선 지점이 비교 출력되는 출력부를 예를 들어 도시한 도면.
도 6은 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 방법의 흐름을 도시한 도면.
도 7은 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 방법에서, 단계 S300의 세부적인 흐름을 도시한 도면.1 is a view showing an example of performing vestibular rehabilitation training through a vestibular rehabilitation training system and a rehabilitation training method using a motion reaction game according to an embodiment of the present invention.
2 is a view showing the configuration of a vestibular rehabilitation training system using a motion reaction game according to an embodiment of the present invention.
3 is a view showing an example of game play using a vestibular rehabilitation training system using a motion reaction game according to an embodiment of the present invention.
4 is a view showing the detailed configuration of the game module in the vestibular rehabilitation training system using a motion reaction game according to an embodiment of the present invention.
5 is a view showing, for example, an output unit in which a gaze fixation point and an actual gaze point of a patient are compared and output in a vestibular rehabilitation training system using a motion reaction game according to an embodiment of the present invention.
Figure 6 is a view showing the flow of vestibular rehabilitation training method using a motion reaction game according to an embodiment of the present invention.
7 is a view showing the detailed flow of step S300 in the vestibular rehabilitation training method using a motion reaction game according to an embodiment of the present invention.

이하, 첨부된 도면을 참조하여 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 바람직한 실시예를 상세히 설명한다. 다만, 본 발명의 바람직한 실시예를 상세하게 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다. 또한, 유사한 기능 및 작용을 하는 부분에 대해서는 도면 전체에 걸쳐 동일한 부호를 사용한다.
Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings, in order that those skilled in the art can easily carry out the present invention. In the following detailed description of the preferred embodiments of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear. In the drawings, like reference numerals are used throughout the drawings.

덧붙여, 명세서 전체에서, 어떤 부분이 다른 부분과 ‘연결’ 되어 있다고 할 때, 이는 ‘직접적으로 연결’ 되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 ‘간접적으로 연결’ 되어 있는 경우도 포함한다. 또한, 어떤 구성요소를 ‘포함’ 한다는 것은, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다.
In addition, in the entire specification, when a part is referred to as being 'connected' to another part, it may be referred to as 'indirectly connected' not only with 'directly connected' . Also, to "include" an element means that it may include other elements, rather than excluding other elements, unless specifically stated otherwise.

도 1은 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10) 및 재활 훈련 방법을 통한 전정 재활 훈련의 수행을 예를 들어 도시한 도면이다. 도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10) 및 재활 훈련 방법은, 환자(20)의 모션에 반응하여 게임을 플레이하는 모션 반응 게임을 이용해, 환자(20)가 효과적으로 전정 재활 훈련을 할 수 있다.
1 is a view showing an example of performing vestibular rehabilitation training through a vestibular rehabilitation training system 10 and a rehabilitation training method using a motion reaction game according to an embodiment of the present invention. As shown in FIG. 1, the vestibular rehabilitation training system 10 and the rehabilitation training method using the motion reaction game according to an embodiment of the present invention are a motion reaction game that plays a game in response to the motion of the patient 20. By using this, the patient 20 can effectively train the vestibular rehabilitation.

이때, 전정 재활 훈련 시스템(10)은 촬영 모듈(500)을 포함함으로써, 촬영 모듈(500)에서 촬영한 영상으로부터 환자(20)의 시선 및 모션을 검출하여 게임에 피드백 함으로써, 환자(20)의 시선 및 모션에 의해 게임이 플레이될 수 있다. 또한, 모션 반응 게임을 플레이하기 위하여 환자(20)가 시선을 화면에 고정하면서 머리를 움직이게 되므로, 자연스러운 전정 재활 훈련을 할 수 있다.
At this time, the vestibular rehabilitation training system 10 includes a photographing module 500, thereby detecting the gaze and motion of the patient 20 from the image photographed by the photographing module 500 to feed back to the game, The game can be played by gaze and motion. In addition, since the patient 20 moves the head while fixing the gaze on the screen in order to play a motion reaction game, natural vestibular rehabilitation training can be performed.

도 2는 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10)의 구성을 도시한 도면이다. 도 2에 도시된 바와 같이, 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10)은, 시선 검출 모듈(100), 모션 검출 모듈(200) 및 게임 모듈(300)을 포함하여 구성될 수 있으며, 데이터베이스(400) 및 촬영 모듈(500)을 더 포함하여 구성될 수 있다.
2 is a diagram showing the configuration of the vestibular rehabilitation training system 10 using a motion reaction game according to an embodiment of the present invention. As shown in FIG. 2, the vestibular rehabilitation training system 10 using the motion reaction game according to an embodiment of the present invention includes a gaze detection module 100, a motion detection module 200, and a game module 300. It may be configured to include, and may further comprise a database 400 and the photographing module 500.

시선 검출 모듈(100)은, 환자(20)의 시선을 검출할 수 있다. 이때, 시선 검출 모듈(100)은, 추후 상세히 설명할 촬영 모듈(500)로부터 전달받은 환자(20)의 영상으로부터 눈동자 영역을 검출하여 시선 정보를 획득하며, 획득한 시선 정보를 게임 모듈(300)에 전달할 수 있다.
The gaze detection module 100 may detect the gaze of the patient 20. At this time, the gaze detection module 100 obtains eye gaze information by detecting a pupil area from an image of the patient 20 received from the imaging module 500 to be described in detail later, and the gaze information obtained by the game module 300. Can be delivered to.

즉, 시선 검출 모듈(100)은, 환자(20)의 영상에서 눈동자 영역을 검출하고, 검출한 눈동자 영역에서 눈동자의 위치, 방향, 변이 등을 인식하여 환자(20)의 시선 정보를 획득할 수 있다. 이때, 획득한 시선 정보는 환자(20)가 게임이 플레이 되고 있는 게임 화면에서 어느 부분을 보고 있는지 그 위치를 포함할 수 있다. 시선 검출 모듈(100)에서 시선 정보를 획득하는 방법은, 촬영 모듈(500)과 환자(20)까지의 거리와 각도 등을 이용하거나, 환자(20)의 눈동자에 맺힌 상을 이용할 수도 있으며, 촬영 모듈(500)을 눈동자의 이미지를 정밀하게 촬영할 수 있는 이미지 센서가 장착된 특수 카메라로 구성하여, 시선 정보를 획득할 수 있다.
That is, the gaze detection module 100 may detect the pupil area from the image of the patient 20, and acquire the gaze information of the patient 20 by recognizing the location, direction, and variation of the pupil in the detected pupil area. have. In this case, the acquired gaze information may include a location of the part of the patient 20 looking at the game screen on which the game is being played. The gaze detection module 100 may obtain the gaze information by using a distance and an angle between the imaging module 500 and the patient 20, or may use an image formed on the pupil of the patient 20. The module 500 may be configured as a special camera equipped with an image sensor capable of accurately capturing an image of a pupil, thereby obtaining gaze information.

모션 검출 모듈(200)은, 환자(20)의 머리의 움직임 및 몸의 방향을 포함하는 모션을 검출할 수 있다. 이때, 모션 검출 모듈(200)은, 촬영 모듈(500)로부터 전달받은 환자(20)의 영상으로부터 얼굴 영역을 검출하여 얼굴 영역의 움직임, 즉 머리의 움직임을 포함하는 모션 정보를 획득하며, 획득한 모션 정보를 게임 모듈(300)에 전달할 수 있다.
The motion detection module 200 may detect a motion including a head movement and a body direction of the patient 20. In this case, the motion detection module 200 detects a face region from the image of the patient 20 received from the imaging module 500, obtains motion information including movement of the face region, that is, movement of the head, and obtains The motion information may be transmitted to the game module 300.

즉, 모션 검출 모듈(200)은, 환자(20)의 영상에서 얼굴 영역을 검출하고, 검출한 얼굴 영역의 위치, 방향, 변이, 시간 등을 인식하여 어느 방향으로 얼마나 빠른 속도로 얼굴, 즉 머리를 움직이는지 등에 대한 모션 정보를 획득할 수 있다. 이때, 획득한 모션 정보는 환자(20)가 게임을 플레이하기 위하여 머리를 움직이는 방향이나 속도 등을 포함할 수 있으며, 방향이나 속도 등을 게임 모듈(300)에 전달하여, 환자(20)가 머리 움직임을 입력 신호로 하여 모션 반응 게임을 플레이하도록 할 수 있다. 한편, 시선과 몸을 고정한 상태에서 머리만 움직여야 하므로, 어깨의 위치 등을 파악하여 몸의 방향에 대한 모션 정보도 획득할 수 있다.
That is, the motion detection module 200 detects the face area in the image of the patient 20, recognizes the position, the direction, the transition, the time, and the like of the detected face area, and how fast the face, that is, the head, is in any direction. Motion information about whether to move the motion can be obtained. In this case, the acquired motion information may include the direction or speed of moving the head to the patient 20 to play the game, and transmits the direction or speed to the game module 300, so that the patient 20 head The motion may be used as an input signal to play a motion reaction game. Meanwhile, since only the head needs to be moved while the eyes and the body are fixed, motion information about the direction of the body can be obtained by identifying the position of the shoulder.

게임 모듈(300)은, 모션 반응 게임 콘텐츠에 의해 게임을 플레이하되, 시선 검출 모듈(100) 및 모션 검출 모듈(200)에서 검출된 정보를 전달받아, 플레이되는 게임의 입력 신호로 적용할 수 있다. 즉, 환자(20)의 시선 정보와 모션 정보를 게임에 적용하여 모션 반응 게임이 플레이되도록 할 수 있다.
The game module 300 may play a game by motion-reaction game content, receive information detected by the gaze detection module 100 and the motion detection module 200, and apply it as an input signal of a game to be played. . That is, the motion response game may be played by applying the gaze information and the motion information of the patient 20 to the game.

본 발명에서 게임 모듈(300)이 플레이하는 게임은, 모션 반응 게임 콘텐츠에 따른 모션 반응 게임으로서, 별도의 컨트롤러나 버튼 등이 아니라 환자(20)의 모션을 입력 신호로 이용할 수 있다. 따라서 본 발명은 시선 검출 모듈(100) 및 모션 검출 모듈(200)로부터 전달받은 시선 정보 및 모션 정보를 모션 반응 게임의 입력 신호로 이용하여, 게임을 플레이하고 환자(20)에게 피드백을 제공할 수 있다. 게임 모듈(300)의 세부적인 구성에 대해서는 추후 도 4를 참조하여 상세히 설명하도록 한다.
In the present invention, the game played by the game module 300 is a motion reaction game according to the motion reaction game content, and may use the motion of the patient 20 as an input signal instead of a separate controller or a button. Therefore, the present invention can use the gaze information and motion information received from the gaze detection module 100 and the motion detection module 200 as an input signal of the motion reaction game, to play the game and provide feedback to the patient 20. have. Detailed configuration of the game module 300 will be described in detail later with reference to FIG. 4.

도 3은 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10)을 이용한 게임 플레이를 예를 들어 도시한 도면이다. 도 3에 도시된 바와 같이, 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10)에서는, 환자(20)가 화살표로 표시된 자신의 캐릭터에 시선을 고정한 상태에서 상하로 머리를 흔듦으로써, 육상 경기 게임을 플레이할 수 있다. 즉, 시선 정보를 이용하여 환자(20)의 시선이 고정된 캐릭터에 입력 신호가 적용되도록 하며, 모션 정보를 이용하여 머리의 움직임 속도나 횟수 등이 캐릭터의 이동 속도로 적용되도록 할 수 있다.
3 is a diagram illustrating a game play using a vestibular rehabilitation training system 10 using a motion reaction game according to an embodiment of the present invention. As shown in FIG. 3, in the vestibular rehabilitation training system 10 using the motion reaction game according to an embodiment of the present invention, the patient 20 heads up and down in a state where the gaze is fixed to his character indicated by an arrow. By shaking, a track and field game can be played. That is, the input signal may be applied to the character in which the line of sight of the patient 20 is fixed by using the gaze information, and the movement speed or the number of times of the head may be applied as the movement speed of the character by using the motion information.

데이터베이스(400)는, 환자(20)의 전정 재활을 위해 시선을 고정하고 머리의 움직임으로 게임의 입력 신호를 입력하도록 고안된 게임 콘텐츠를 적어도 하나 이상 저장할 수 있다. 즉, 데이터베이스(400)는 전정 재활 훈련을 위한 게임 콘텐츠를 적어도 하나 이상 저장할 수 있으며, 실시예에 따라서는 카테고리나 난이도 등에 따라 분류하여 게임 콘텐츠를 저장할 수 있다. 이때, 게임 콘텐츠는 모션 반응 게임을 플레이할 수 있는 모션 반응 게임 콘텐츠일 수 있으며, 전정 재활을 위하여 게임 플레이 방법이나 컨트롤 방법 등이 결정될 수 있다.
The database 400 may store at least one game content designed to fix a gaze for vestibular rehabilitation of the patient 20 and input an input signal of the game by the movement of the head. That is, the database 400 may store at least one or more game contents for vestibular rehabilitation training, and according to embodiments, may store game contents classified by category or difficulty level. In this case, the game content may be motion-reaction game content capable of playing a motion-reaction game, and a game play method or a control method may be determined for vestibular rehabilitation.

촬영 모듈(500)은, 환자(20)의 머리 또는 상반신 영상을 촬영하여 시선 검출 모듈(100) 및 모션 검출 모듈(200)에 전달할 수 있다. 즉, 촬영 모듈(500)은 카메라나 움직임 감지 센서 등으로 구성될 수 있으며, 눈동자의 이미지나 환자(20) 얼굴의 움직임 등을 정밀하게 촬영할 수 있는 이미지 센서 등이 장착된 특수 카메라로 구성할 수도 있다.
The photographing module 500 may photograph the head or upper body image of the patient 20 and transmit the photographed module 500 to the gaze detection module 100 and the motion detection module 200. That is, the photographing module 500 may be configured as a camera or a motion sensor, or may be configured as a special camera equipped with an image sensor for accurately capturing an image of a pupil or a movement of a face of the patient 20. have.

한편, 촬영 모듈(500)은, 도 2 및 도 3에 도시된 바와 같이, 시선 검출을 위한 영상을 촬영하여 시선 검출 모듈(100)에 전달하는 시선 촬영 모듈(510) 및 모션 검출을 위한 영상을 촬영하여 모션 검출 모듈(200)에 전달하는 모션 촬영 모듈(520)을 포함하여 구성될 수도 있다. 즉, 시선 정보의 획득을 위한 장치와 모션 정보의 획득을 위한 장치를 각각 별도로 구비하여, 시선 촬영 모듈(510)에서 촬영한 영상 정보는 시선 검출 모듈(100)에, 모션 촬영 모듈(520)에서 촬영한 영상 정보는 모션 검출 모듈(200)에 각각 제공할 수 있다. 이와 같이, 시선과 모션의 검출을 위한 영상을 각각 촬영하여 획득함으로써, 보다 정확하고 신속하게 시선 정보와 모션 정보를 획득할 수 있다.
Meanwhile, as illustrated in FIGS. 2 and 3, the photographing module 500 captures an image for gaze detection and transmits the gaze photographing module 510 and an image for motion detection to the gaze detection module 100. It may be configured to include a motion photographing module 520 to take a photograph and transfer to the motion detection module 200. That is, the apparatus for acquiring the gaze information and the apparatus for acquiring the motion information are separately provided, so that the image information captured by the gaze photographing module 510 is transferred to the gaze detection module 100 and the motion imaging module 520. The captured image information may be provided to the motion detection module 200, respectively. As such, by capturing and acquiring images for detecting the gaze and the motion, the gaze information and the motion information can be obtained more accurately and quickly.

도 4는 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10)에서, 게임 모듈(300)의 세부적인 구성을 도시한 도면이다. 도 4에 도시된 바와 같이, 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10)의 게임 모듈(300)은, 수신부(310), 신호 변환부(320) 및 플레이부(330)를 포함하여 구성될 수 있으며, 출력부(340), 난이도 조절부(350) 및 재활 정보 송신부(360)를 더 포함하여 구성될 수 있다.
4 is a diagram illustrating a detailed configuration of the game module 300 in the vestibular rehabilitation training system 10 using the motion reaction game according to an embodiment of the present invention. As shown in Figure 4, the game module 300 of the vestibular rehabilitation training system 10 using the motion reaction game according to an embodiment of the present invention, the receiver 310, the signal converter 320 and the play unit 330, and may further include an output unit 340, a difficulty control unit 350, and a rehabilitation information transmitter 360.

수신부(310)는, 시선 검출 모듈(100) 및 모션 검출 모듈(200)에서 검출된 시선 정보 및 모션 정보를 전달받을 수 있다. 즉, 시선 정보 및 모션 정보를 게임에 적용하기 위하여, 시선 검출 모듈(100)에서 시선 정보를, 모션 검출 모듈(200)에서 모션 정보를 각각 전달받을 수 있다.
The receiver 310 may receive the line of sight information and the motion information detected by the line of sight detection module 100 and the motion detection module 200. That is, in order to apply the gaze information and the motion information to the game, the gaze detection module 100 may receive the gaze information and the motion detection module 200 may receive the motion information, respectively.

신호 변환부(320)는, 전달받은 시선 정보 및 모션 정보를 게임의 입력 신호로 변환할 수 있다. 이때, 게임 콘텐츠에 따라 필요한 입력 신호가 상이할 수 있으므로, 신호 변환부(320)는 게임 콘텐츠에 따라 서로 상이한 입력 신호로 변환할 수 있다. 예를 들어, 도 3에 도시된 바와 같은 게임에서, 시선 정보는 캐릭터를 특정하기 위한 신호로, 모션 정보는 캐릭터의 이동 속도로 변환할 수 있다.
The signal converter 320 may convert the received gaze information and motion information into an input signal of a game. In this case, since necessary input signals may be different according to game content, the signal converter 320 may convert input signals into different input signals according to game content. For example, in the game as shown in FIG. 3, the gaze information may be converted into a signal for specifying a character, and the motion information may be converted into a movement speed of the character.

플레이부(330)는, 신호 변환부(320)에서 변환한 입력 신호를 적용하여 게임을 플레이할 수 있다. 즉, 신호 변환부(320)에서 변환한 입력 신호를 플레이 되는 게임에 적용하여, 환자(20)의 모션에 따라 게임이 플레이되도록 할 수 있다. 게임의 플레이는 데이터베이스(400)에 저장된 게임 콘텐츠 중, 환자(20)에 의해 선택되거나 환자(20)의 상태에 적합하도록 선정된 게임 콘텐츠에 의할 수 있다.
The play unit 330 may play a game by applying the input signal converted by the signal converter 320. That is, the input signal converted by the signal converter 320 may be applied to the game to be played, so that the game is played according to the motion of the patient 20. The play of the game may be based on game content selected by the patient 20 or selected to be suitable for the state of the patient 20 among game contents stored in the database 400.

이때, 수신부(310)에서 수신한 모션 정보에 따라 변환된 입력 신호를 게임의 컨트롤 신호로 실시간 적용하여 게임을 플레이할 수 있다. 즉, 시선 정보와 모션 정보 중에서 모션 정보를 컨트롤 신호로 하여 게임을 플레이할 수 있다. 예를 들어, 도 3에 도시된 바와 같은 게임에서, 시선 정보는 효과적인 전정 재활 훈련을 위하여 환자(20)가 시선을 캐릭터에 고정하고 있는지 여부를 확인하기 위한 것으로서, 실질적인 게임 플레이는 모션 정보에 의해 수행되도록 할 수 있다.
In this case, the game may be played by applying the input signal converted according to the motion information received by the receiver 310 as a control signal of the game in real time. In other words, the game can be played using the motion information as the control signal among the gaze information and the motion information. For example, in the game as shown in FIG. 3, the gaze information is for checking whether the patient 20 is keeping the gaze on the character for effective vestibular rehabilitation training, and the actual game play is determined by the motion information. Can be performed.

출력부(340)는, 시선 검출 모듈(100)로부터 시선 정보를 전달받아, 게임에 따른 시선 고정 지점 및 환자(20)의 실제 시선 지점을 비교하여 출력할 수 있다. 전정 재활 훈련에서는 시선을 고정한 상태에서, 머리를 상하 또는 좌우로 움직이는 운동을 통해 어지럼증 등을 치료할 수 있다. 머리를 움직이다 보면 시선을 제대로 고정하지 못할 수 있는데, 출력부(340)는 시선을 고정해야 할 지점과 환자(20)의 실제 시선 지점을 비교 출력함으로써, 환자(20)가 시선을 시선 고정 지점으로 이동시켜 정확한 전정 재활 훈련을 하도록 유도할 수 있다.
The output unit 340 may receive the line of sight information from the line of sight detection module 100 and compare the line of sight fixed point according to the game and the actual line of sight of the patient 20 to output the line of sight. In vestibular rehabilitation training, dizziness and the like can be treated by moving the head up and down or left and right with the eyes fixed. When moving the head, the gaze may not be properly fixed, and the output unit 340 outputs the point where the gaze should be fixed and the actual gaze point of the patient 20, so that the patient 20 gazes at the gaze fixing point. Can lead to accurate vestibular rehabilitation training.

도 5는 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10)에서, 시선 고정 지점 및 환자(20)의 실제 시선 지점이 비교 출력되는 출력부(340)를 예를 들어 도시한 도면이다. 도 5에 도시된 바와 같이, 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10)에서는, 게임에 따른 시선 고정 지점(‘●’표시)과 환자(20)의 실제 시선 지점(‘x’표시)을 출력부(340)에 함께 출력할 수 있다. 이때, 실제 시선 지점은 시선 검출 모듈(100)로부터 전달받은 시선 정보에 의할 수 있다. 도 5에 도시된 바와 같이, 시선 고정 지점과 실제 시선 지점이 상이한 경우에는, 시선 고정 지점이 깜박이게 하거나 크기를 변경하는 등으로 가시성을 향상시켜, 환자(20)가 시선 고정 지점에 시선을 쉽게 고정하도록 유도할 수 있다.
5 illustrates an output unit 340 in which a gaze fixing point and an actual gaze point of a patient 20 are compared and output in the vestibular rehabilitation training system 10 using a motion reaction game according to an embodiment of the present invention. Figure is shown. As shown in Figure 5, in the vestibular rehabilitation training system 10 using a motion reaction game according to an embodiment of the present invention, the gaze fixed point ('●' mark) and the actual gaze of the patient 20 according to the game The point 'x' may be output to the output unit 340 together. In this case, the actual gaze point may be based on the gaze information received from the gaze detection module 100. As shown in FIG. 5, when the gaze fixing point and the actual gaze point are different, the visibility is improved by blinking or changing the size of the gaze fixing point, so that the patient 20 easily gazes at the gaze fixing point. Can be induced to fix.

난이도 조절부(350)는, 시선 정보 및 모션 정보를 이용하여 게임의 난이도를 조절할 수 있다. 환자(20)의 상태에 따라서는 전정 재활 훈련에 쉽게 적응하고 그 상태가 급격히 좋아질 수도 있으나, 훈련에 어려움을 느낄 수도 있다. 이와 같이, 동일한 게임 콘텐츠에 대해서도 환자(20)에 따라 서로 상이한 결과가 도출될 수 있으므로, 난이도 조절부(350)는 환자(20)의 입력 신호인 시선 정보 및 모션 정보를 이용하여 게임의 난이도를 조절함으로써, 환자(20)가 흥미를 잃지 않고 전정 재활 훈련을 하도록 유도할 수 있다.
The difficulty adjusting unit 350 may adjust the difficulty level of the game by using the gaze information and the motion information. Depending on the state of the patient 20 can easily adapt to the vestibular rehabilitation training and its condition may be sharply improved, but may feel difficult to train. As described above, since different results may be derived according to the patient 20 even for the same game content, the difficulty adjusting unit 350 may adjust the difficulty level of the game using the gaze information and the motion information which are input signals of the patient 20. By adjusting, it is possible to induce the patient 20 to undergo vestibular rehabilitation training without losing interest.

재활 정보 송신부(360)는, 환자(20)의 게임 플레이에 따른 정보를 재활 정보로 변환하여 미리 정해진 단말기에 전송할 수 있다. 즉, 환자(20)는 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10)을 통해 게임을 플레이함으로써, 전정 재활 훈련을 하게 된다. 따라서 게임의 플레이 횟수, 플레이 시간, 성취도 등 게임 플레이에 따른 정보를 재활 정보로 변환하여, 환자(20)의 전정 재활 훈련 정도를 측정할 수 있다. 재활 정보는 환자(20)의 전정 재활 훈련 횟수, 빈도, 시간 등을 포함할 수 있으며, 전정 재활 훈련의 정확도, 반응 속도 등을 더 포함할 수 있다. 한편, 재활 정보를 미리 정해진 단말기에 전송할 수 있는데, 이때 미리 정해진 단말기는 환자(20) 또는 보호자의 단말기일 수 있으며, 환자(20)의 건강을 관리하는 의료진 단말기 또는 의료 기관의 서버 등일 수 있다.
The rehabilitation information transmitter 360 may convert information according to the game play of the patient 20 into rehabilitation information and transmit the rehabilitation information to a predetermined terminal. That is, the patient 20 performs vestibular rehabilitation training by playing the game through the vestibular rehabilitation training system 10 using the motion reaction game according to an embodiment of the present invention. Therefore, by converting the information according to the game play, such as the number of times, play time, achievement of the game to rehabilitation information, the degree of vestibular rehabilitation training of the patient 20 can be measured. The rehabilitation information may include the number, frequency, and time of vestibular rehabilitation training of the patient 20, and may further include the accuracy, response rate, and the like of the vestibular rehabilitation training. Meanwhile, the rehabilitation information may be transmitted to a predetermined terminal, wherein the predetermined terminal may be a terminal of the patient 20 or a caregiver, or may be a medical staff terminal or a server of a medical institution that manages the health of the patient 20.

도 6은 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 방법의 흐름을 도시한 도면이다. 도 6에 도시된 바와 같이, 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 방법은, 환자(20) 영상으로부터 시선 정보를 검출하는 단계(S100), 환자(20) 영상으로부터 모션 정보를 검출하는 단계(S200) 및 시선 정보 및 모션 정보를 입력 신호로 적용하여 게임을 플레이하는 단계(S300)를 포함하여 구현될 수 있으며, 게임 콘텐츠를 데이터베이스(400)에 적어도 하나 이상 저장하는 단계(S10) 및 환자(20) 영상을 촬영하는 단계(S20)를 더 포함하여 구현될 수 있다.
6 is a view showing the flow of vestibular rehabilitation training method using a motion reaction game according to an embodiment of the present invention. As shown in Figure 6, the vestibular rehabilitation training method using a motion reaction game according to an embodiment of the present invention, detecting the gaze information from the patient 20 image (S100), motion from the patient 20 image Detecting information (S200) and applying a gaze information and motion information as an input signal to play a game (S300), and storing at least one game content in a database 400. The method may further include the step (S20) of taking an image (S10) and the patient 20.

단계 S10에서는, 전정 재활 훈련 시스템(10)이 환자(20)의 전정 재활을 위해 시선을 고정하고 머리의 움직임으로 게임의 입력 신호를 입력하도록 고안된 게임 콘텐츠를 데이터베이스(400)에 적어도 하나 이상 저장할 수 있다. 환자(20)는 데이터베이스(400)에 저장한 게임 콘텐츠 중 어느 하나를 이용하여 게임을 플레이할 수 있다. 또한, 데이터베이스(400)에 저장된 게임 콘텐츠는 관리자에 의해 업데이트하거나 주기적으로 업데이트를 하여 다양한 게임 콘텐츠가 저장되도록 관리하고, 환자(20)가 다채로운 게임을 통해 싫증을 내지 않고 전정 재활 훈련을 하도록 할 수 있다.
In step S10, the vestibular rehabilitation training system 10 may store at least one game content in the database 400, which is designed to fix the gaze for vestibular rehabilitation of the patient 20 and input an input signal of the game by the movement of the head. have. The patient 20 may play a game by using any one of game contents stored in the database 400. In addition, the game content stored in the database 400 may be updated by the administrator or periodically updated so that various game contents are stored, and the patient 20 may be trained in vestibular rehabilitation without getting tired through various games. have.

단계 S20에서는, 전정 재활 훈련 시스템(10)이 환자(20)의 머리 또는 상반신 영상을 촬영할 수 있다. 단계 S20은 전정 재활 훈련 시스템(10)의 촬영 모듈(500)에 의해 처리될 수 있으며, 실시예에 따라서는 시선 촬영 모듈(510)이 환자(20)의 눈동자 영역을 촬영하고, 모션 촬영 모듈(520)이 환자(20)의 얼굴 또는 상반신을 촬영할 수도 있다.
In step S20, the vestibular rehabilitation training system 10 may take a head or upper body image of the patient 20. Step S20 may be processed by the photographing module 500 of the vestibular rehabilitation training system 10, and according to an embodiment, the gaze photographing module 510 photographs the pupil area of the patient 20, and the motion photographing module ( 520 may photograph the face or upper body of the patient 20.

단계 S100에서는, 전정 재활 훈련 시스템(10)이 환자(20) 영상으로부터 환자(20)의 시선 정보를 검출할 수 있다. 즉, 단계 S100에서는, 단계 S20에서 촬영하여 촬영 모듈(500)로부터 전달받은 환자(20)의 영상으로부터 눈동자 영역을 검출하여 시선 정보를 획득하며, 획득한 시선 정보를 게임 모듈(300)에 전달할 수 있다. 이때, 단계 S100은 전정 재활 훈련 시스템(10)의 시선 검출 모듈(100)에서 처리될 수 있으며, 검출한 시선 정보를 게임 모듈(300)에 전달할 수 있다.
In step S100, the vestibular rehabilitation training system 10 may detect the gaze information of the patient 20 from the image of the patient 20. That is, in step S100, the gaze information may be obtained by detecting the pupil area from the image of the patient 20 received from the imaging module 500 by photographing in step S20, and the acquired gaze information may be transmitted to the game module 300. have. In this case, step S100 may be processed by the gaze detection module 100 of the vestibular rehabilitation training system 10, and may transmit the detected gaze information to the game module 300.

단계 S200에서는, 전정 재활 훈련 시스템(10)이 환자(20) 영상으로부터 환자(20)의 머리의 움직임 및 몸의 방향을 포함하는 모션 정보를 검출할 수 있다. 즉, 단계 S200에서는, 단계 S20에서 촬영하여 촬영 모듈(500)로부터 전달받은 환자(20)의 영상으로부터 얼굴 영역을 검출하여 얼굴 영역의 움직임을 포함하는 모션 정보를 획득하며, 획득한 모션 정보를 게임 모듈(300)에 전달할 수 있다. 이때, 단계 S200은 전정 재활 훈련 시스템(10)의 모션 검출 모듈(200)에서 처리될 수 있으며, 검출한 모션 정보를 게임 모듈(300)에 전달할 수 있다.
In operation S200, the vestibular rehabilitation training system 10 may detect motion information including the head movement and the direction of the body of the patient 20 from the patient 20 image. That is, in step S200, the face region is detected from the image of the patient 20 received from the photographing module 500 by photographing in step S20, motion information including the movement of the face region is obtained, and the acquired motion information is used for the game. May be passed to the module 300. In this case, step S200 may be processed by the motion detection module 200 of the vestibular rehabilitation training system 10, and may transmit the detected motion information to the game module 300.

단계 S300에서는, 전정 재활 훈련 시스템(10)이 모션 반응 게임 콘텐츠에 의해 게임을 플레이하되, 검출된 시선 정보 및 모션 정보를 플레이되는 게임의 입력 신호로 적용하여 게임을 플레이할 수 있다. 단계 S300은 전정 재활 훈련 시스템(10)의 게임 모듈(300)에 의해 처리될 수 있다. 이때, 시선 정보 및 모션 정보를 실시간으로 게임에 적용하여, 환자(20)가 모션 반응 게임을 플레이하면서 효율적으로 전정 재활 훈련을 하도록 할 수 있다.
In operation S300, the vestibular rehabilitation training system 10 may play the game by using the motion response game content, and play the game by applying the detected gaze information and the motion information as input signals of the game to be played. Step S300 may be processed by the game module 300 of the vestibular rehabilitation training system 10. At this time, the gaze information and motion information can be applied to the game in real time, so that the patient 20 can perform vestibular rehabilitation training efficiently while playing a motion reaction game.

도 7은 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 방법에서, 단계 S300의 세부적인 흐름을 도시한 도면이다. 도 7에 도시된 바와 같이, 본 발명의 일실시예에 따른 모션 반응 게임을 이용한 전정 재활 훈련 방법의 단계 S300은, 시선 정보 및 모션 정보를 전달받는 단계(S310), 시선 정보 및 모션 정보를 게임의 입력 신호로 변환하는 단계(S320) 및 입력 신호를 적용하여 게임을 플레이하는 단계(S330)를 포함하여 구현될 수 있으며, 시선 정보 및 모션 정보를 이용하여 게임의 난이도를 조절하는 단계(S340) 및 환자(20)의 게임 플레이에 따른 정보를 재활 정보로 변환하여 미리 정해진 단말기에 전송하는 단계(S350)를 더 포함하여 구현될 수 있다.
7 is a diagram illustrating the detailed flow of step S300 in the vestibular rehabilitation training method using a motion reaction game according to an embodiment of the present invention. As shown in Figure 7, step S300 of the vestibular rehabilitation training method using a motion reaction game according to an embodiment of the present invention, the step of receiving the gaze information and motion information (S310), the gaze information and motion information game Converting to an input signal of the step (S320) and applying the input signal may be implemented, including the step of playing the game (S330), and adjusting the difficulty of the game by using the gaze information and motion information (S340) And converting the information according to the game play of the patient 20 into rehabilitation information and transmitting it to a predetermined terminal (S350).

단계 S310에서는, 게임 모듈(300)이 단계 S100 및 단계 S200에서 검출된 시선 정보 및 모션 정보를 전달받을 수 있다. 단계 S310은, 게임 모듈(300)의 수신부(310)에서 처리될 수 있으며, 수신한 시선 정보 및 모션 정보를 신호 변환부(320)에 전달할 수 있다.
In operation S310, the game module 300 may receive the gaze information and the motion information detected in operations S100 and S200. In operation S310, the receiver 310 of the game module 300 may be processed, and may transmit the received gaze information and the motion information to the signal converter 320.

단계 S320에서는, 전정 재활 훈련 시스템(10)의 게임 모듈(300)이 전달받은 시선 정보 및 모션 정보를 게임의 입력 신호로 변환할 수 있다. 단계 S320은 게임 모듈(300)의 신호 변환부(320)에 의해 처리될 수 있다. 예를 들어, 도 5에 도시된 바와 같은 게임에서, 머리를 좌우로 움직이는 모션 정보를 변환하여 자동차의 좌우 이동을 제어하는 입력 신호를 생성할 수 있다.
In operation S320, the game module 300 of the vestibular rehabilitation training system 10 may convert the received gaze information and motion information into an input signal of the game. Step S320 may be processed by the signal converter 320 of the game module 300. For example, in a game as shown in FIG. 5, motion information for moving a head from side to side may be converted to generate an input signal for controlling the left and right movement of the vehicle.

단계 S330에서는, 전정 재활 훈련 시스템(10)의 게임 모듈(300)이 단계 S320에서 변환한 입력 신호를 적용하여 게임을 플레이할 수 있다. 단계 S330은 게임 모듈(300)의 플레이부(330)에서 처리될 수 있다. 이때, 단계 S330에서는, 수신부(310)에서 수신한 모션 정보에 따라 변환된 입력 신호를 게임의 컨트롤 신호로 실시간 적용하여 게임을 플레이할 수 있다. 전술한 예와 같이, 도 5에 도시된 바와 같은 자동차 게임에서 입력 신호에 의해 자동차의 좌우 이동이 제어될 수 있다.
In step S330, the game module 300 of the vestibular rehabilitation training system 10 may play the game by applying the input signal converted in step S320. Step S330 may be processed by the play unit 330 of the game module 300. In this case, in operation S330, the game may be played by applying the input signal converted according to the motion information received by the receiver 310 as a control signal of the game in real time. As in the above-described example, in the car game as shown in FIG. 5, the left and right movement of the car may be controlled by the input signal.

한편, 단계 S330에서는, S310에서 전달받은 시선 정보를 이용하여, 게임에 따른 시선 고정 지점 및 환자(20)의 실제 시선 지점을 비교하여 출력부(340)로 출력할 수 있다. 즉, 도 5에 도시된 바와 같이, 시선 고정 지점(‘●’)과 환자(20)의 실제 시선 지점(‘x’)을 비교하여 출력부(340)로 출력함으로써, 환자(20)의 시선에 대한 피드백을 제공할 수 있다.
On the other hand, in step S330, using the gaze information received in S310, the gaze fixed point according to the game and the actual gaze point of the patient 20 can be compared and output to the output unit 340. That is, as shown in FIG. 5, the gaze fixing point '●' and the actual gaze point 'x' of the patient 20 are compared and output to the output unit 340, whereby the gaze of the patient 20 is obtained. Can provide feedback on

단계 S340에서는, 전정 재활 훈련 시스템(10)의 게임 모듈(300)이 단계 S310에서 전달받은 시선 정보 및 모션 정보를 이용하여 게임의 난이도를 조절할 수 있다. 단계 S340은 게임 모듈(300)의 난이도 조절부(350)에 의해 처리될 수 있으며, 게임의 난이도를 조절함으로써 환자(20)가 지속적으로 흥미를 갖고 전정 재활 훈련을 하도록 유도할 수 있다.
In operation S340, the game module 300 of the vestibular rehabilitation training system 10 may adjust the difficulty level of the game using the gaze information and the motion information received in operation S310. Step S340 may be processed by the difficulty control unit 350 of the game module 300, by adjusting the difficulty of the game may induce the patient 20 to continue the interest and vestibular rehabilitation training.

단계 S350에서는, 전정 재활 훈련 시스템(10)의 게임 모듈(300)이 환자(20)의 게임 플레이에 따른 정보를 재활 정보로 변환하여 미리 정해진 단말기에 전송할 수 있다. 단계 S350은 게임 모듈(300)의 재활 정보 송신부(360)에 의해 처리될 수 있다. 한편, 변환한 재활 정보는 SMS(Short Message Service), MMS(Multi Message Service), 이메일, SNS(Social Network Service), 인스턴트 메시지, 채팅 프로그램 등으로 전송될 수 있다.
In operation S350, the game module 300 of the vestibular rehabilitation training system 10 may convert information according to the game play of the patient 20 into rehabilitation information and transmit it to a predetermined terminal. Step S350 may be processed by the rehabilitation information transmitter 360 of the game module 300. Meanwhile, the converted rehabilitation information may be transmitted to a short message service (SMS), a multi message service (MMS), an e-mail, a social network service (SNS), an instant message, a chat program, and the like.

이상 설명한 본 발명은 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에 의하여 다양한 변형이나 응용이 가능하며, 본 발명에 따른 기술적 사상의 범위는 아래의 특허청구범위에 의하여 정해져야 할 것이다.The present invention may be embodied in many other specific forms without departing from the spirit or essential characteristics of the invention.

10: 재활 훈련 시스템 20: 환자
100: 시선 검출 모듈 200: 모션 검출 모듈
300: 게임 모듈 310: 수신부
320: 신호 변환부 330: 플레이부
340: 출력부 350: 난이도 조절부
360: 재활 정보 송신부 400: 데이터베이스
500: 촬영 모듈 510: 시선 촬영 모듈
520: 모션 촬영 모듈
S10: 게임 콘텐츠를 데이터베이스에 적어도 하나 이상 저장하는 단계
S20: 환자 영상을 촬영하는 단계
S100: 환자 영상으로부터 시선 정보를 검출하는 단계
S200: 환자 영상으로부터 모션 정보를 검출하는 단계
S300: 시선 정보 및 모션 정보를 입력 신호로 적용하여 게임을 플레이하는 단계
S310: 시선 정보 및 모션 정보를 전달받는 단계
S320: 시선 정보 및 모션 정보를 게임의 입력 신호로 변환하는 단계
S330: 입력 신호를 적용하여 게임을 플레이하는 단계
S340: 시선 정보 및 모션 정보를 이용하여 게임의 난이도를 조절하는 단계
S350: 환자의 게임 플레이에 따른 정보를 재활 정보로 변환하여 미리 정해진 단말기에 전송하는 단계10: rehabilitation training system 20: patient
100: gaze detection module 200: motion detection module
300: game module 310: receiving unit
320: signal conversion unit 330: play unit
340: output unit 350: difficulty adjustment unit
360: rehabilitation information transmitter 400: database
500: photographing module 510: gaze photographing module
520: motion shooting module
S10: storing at least one game content in a database
S20: step of taking a patient image
S100: detecting gaze information from the patient image
S200: detecting motion information from the patient image
S300: step of playing the game by applying the gaze information and the motion information as an input signal
S310: receiving eye gaze information and motion information
S320: converting the gaze information and the motion information into the input signal of the game
S330: playing a game by applying an input signal
S340: adjusting the difficulty of the game by using the gaze information and the motion information
S350: converting the information according to the game play of the patient into rehabilitation information and transmitting to the predetermined terminal

Claims (21)

전정 재활 훈련을 위한 시스템으로서,
환자(20)의 시선을 검출하는 시선 검출 모듈(100);
상기 환자(20)의 머리의 움직임 및 몸의 방향을 포함하는 모션을 검출하는 모션 검출 모듈(200); 및
모션 반응 게임 콘텐츠에 의해 게임을 플레이하되, 상기 시선 검출 모듈(100) 및 모션 검출 모듈(200)에서 검출된 정보를 전달받아, 상기 플레이되는 게임의 입력 신호로 적용하는 게임 모듈(300)을 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10).
As a system for vestibular rehabilitation training,
A gaze detection module 100 for detecting a gaze of a patient 20;
A motion detection module (200) for detecting a motion including a head movement and a body direction of the patient (20); And
The game module 300, which plays a game by motion-reaction game content, receives information detected by the gaze detection module 100 and the motion detection module 200, and applies it as an input signal of the played game. Vestibular rehabilitation training system using a motion reaction game, characterized in that.
제1항에 있어서,
상기 환자(20)의 전정 재활을 위해 시선을 고정하고 머리의 움직임으로 게임의 입력 신호를 입력하도록 고안된 게임 콘텐츠를 적어도 하나 이상 저장하는 데이터베이스(400)를 더 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10).
The method of claim 1,
Motion response game, characterized in that it further comprises a database 400 for storing at least one game content designed to fix the gaze for vestibular rehabilitation of the patient 20 and input the input signal of the game with the movement of the head. Vestibular rehabilitation training system (10).
제1항에 있어서, 상기 게임 모듈(300)은,
상기 시선 검출 모듈(100) 및 모션 검출 모듈(200)에서 검출된 시선 정보 및 모션 정보를 전달받는 수신부(310);
상기 전달받은 시선 정보 및 모션 정보를 상기 게임의 입력 신호로 변환하는 신호 변환부(320); 및
상기 신호 변환부(320)에서 변환한 입력 신호를 적용하여 상기 게임을 플레이하는 플레이부(330)를 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10).
The method of claim 1, wherein the game module 300,
A receiver 310 which receives the gaze information and the motion information detected by the gaze detection module 100 and the motion detection module 200;
A signal converter 320 for converting the received gaze information and motion information into an input signal of the game; And
Vestibular rehabilitation training system using a motion reaction game, characterized in that it comprises a play unit for playing the game by applying the input signal converted by the signal conversion unit (320).
제3항에 있어서, 상기 게임 모듈(300)은,
상기 시선 검출 모듈(100)로부터 시선 정보를 전달받아, 상기 게임에 따른 시선 고정 지점 및 환자(20)의 실제 시선 지점을 비교하여 출력하는 출력부(340)를 더 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10).
According to claim 3, The game module 300,
Receiving the gaze information from the gaze detection module 100, and further comprises an output unit 340 for comparing and outputting the gaze fixed point according to the game and the actual gaze point of the patient 20, motion Vestibular rehabilitation training system using a reaction game (10).
제3항에 있어서, 상기 플레이부(330)는,
상기 수신부(310)에서 수신한 모션 정보에 따라 변환된 입력 신호를 상기 게임의 컨트롤 신호로 실시간 적용하여 게임을 플레이하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10).
The method of claim 3, wherein the play unit 330,
Vestibular rehabilitation training system using a motion reaction game, characterized in that to play the game by applying the input signal converted in accordance with the motion information received by the receiver 310 in real time as a control signal of the game.
제3항에 있어서, 상기 게임 모듈(300)은,
상기 시선 정보 및 모션 정보를 이용하여 게임의 난이도를 조절하는 난이도 조절부(350)를 더 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10).
According to claim 3, The game module 300,
Vestibular rehabilitation training system using a motion response game, characterized in that it further comprises a difficulty control unit 350 for adjusting the difficulty of the game by using the gaze information and motion information.
제3항에 있어서, 상기 게임 모듈(300)은,
상기 환자(20)의 게임 플레이에 따른 정보를 재활 정보로 변환하여 미리 정해진 단말기에 전송하는 재활 정보 송신부(360)를 더 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10).
According to claim 3, The game module 300,
Vestibular rehabilitation training system using a motion-response game, characterized in that it further comprises a rehabilitation information transmitter 360 for converting the information according to the game play of the patient 20 into rehabilitation information and transmitting to a predetermined terminal. .
제1항에 있어서,
상기 환자(20)의 머리 또는 상반신 영상을 촬영하여 상기 시선 검출 모듈(100) 및 모션 검출 모듈(200)에 전달하는 촬영 모듈(500)을 더 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10).
The method of claim 1,
A vestibule using a motion reaction game, characterized in that it further comprises a photographing module 500 for capturing the head or upper body image of the patient 20 and transmits it to the gaze detection module 100 and the motion detection module 200. Rehabilitation training system (10).
제8항에 있어서, 상기 시선 검출 모듈(100)은,
상기 촬영 모듈(500)로부터 전달받은 환자(20)의 영상으로부터 눈동자 영역을 검출하여 시선 정보를 획득하며, 획득한 시선 정보를 상기 게임 모듈(300)에 전달하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10).
The method of claim 8, wherein the eye detection module 100,
By detecting the pupil area from the image of the patient 20 received from the photographing module 500 to obtain the gaze information, and transmits the acquired gaze information to the game module 300, the motion reaction game Vestibular rehabilitation training system used (10).
제8항에 있어서, 상기 모션 검출 모듈(200)은,
상기 촬영 모듈(500)로부터 전달받은 환자(20)의 영상으로부터 얼굴 영역을 검출하여 얼굴 영역의 움직임을 포함하는 모션 정보를 획득하며, 획득한 모션 정보를 상기 게임 모듈(300)에 전달하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10).
The method of claim 8, wherein the motion detection module 200,
Detecting a face region from the image of the patient 20 received from the imaging module 500 to obtain motion information including the movement of the face region, and transmits the acquired motion information to the game module 300 Vestibular rehabilitation training system using a motion reaction game.
제8항에 있어서, 상기 촬영 모듈(500)은,
시선 검출을 위한 영상을 촬영하여 상기 시선 검출 모듈(100)에 전달하는 시선 촬영 모듈(510); 및
모션 검출을 위한 영상을 촬영하여 상기 모션 검출 모듈(200)에 전달하는 모션 촬영 모듈(520)을 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 시스템(10).
The method of claim 8, wherein the photographing module 500,
A gaze photographing module 510 which photographs an image for gaze detection and transmits it to the gaze detection module 100; And
A vestibular rehabilitation training system using a motion reaction game, characterized in that it comprises a motion photographing module (520) for capturing the image for motion detection and transfer to the motion detection module (200).
전정 재활 훈련 방법으로서,
(1) 환자(20) 영상으로부터 환자(20)의 시선 정보를 검출하는 단계;
(2) 환자(20) 영상으로부터 상기 환자(20)의 머리의 움직임 및 몸의 방향을 포함하는 모션 정보를 검출하는 단계; 및
(3) 모션 반응 게임 콘텐츠에 의해 게임을 플레이하되, 상기 검출된 시선 정보 및 모션 정보를 상기 플레이되는 게임의 입력 신호로 적용하여 게임을 플레이하는 단계를 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 방법.
As a vestibular rehabilitation training method,
(1) detecting gaze information of the patient 20 from the patient 20 image;
(2) detecting motion information including the head movement and the body direction of the patient 20 from the patient 20 image; And
(3) playing a game by motion-reacting game content, wherein the game is played by applying the detected gaze information and motion information as an input signal of the played game. Vestibular rehabilitation training method using.
제12항에 있어서, 상기 단계 (1) 이전에는,
상기 환자(20)의 전정 재활을 위해 시선을 고정하고 머리의 움직임으로 게임의 입력 신호를 입력하도록 고안된 게임 콘텐츠를 데이터베이스(400)에 적어도 하나 이상 저장하는 단계를 더 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 방법.
13. The method of claim 12, wherein prior to step (1)
And storing at least one or more game contents in the database 400 designed to fix the gaze for vestibular rehabilitation of the patient 20 and input an input signal of the game by the movement of the head. Vestibular Rehabilitation Training Method Using Reaction Game.
제12항에 있어서, 상기 단계 (3)은,
(3-1) 상기 단계 (1) 및 단계 (2)에서 검출된 시선 정보 및 모션 정보를 전달받는 단계;
(3-2) 상기 전달받은 시선 정보 및 모션 정보를 상기 게임의 입력 신호로 변환하는 단계; 및
(3-3) 상기 변환한 입력 신호를 적용하여 상기 게임을 플레이하는 단계를 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 방법.
The method of claim 12, wherein step (3) comprises
(3-1) receiving the gaze information and motion information detected in steps (1) and (2);
(3-2) converting the received gaze information and motion information into an input signal of the game; And
(3-3) A method for vestibular rehabilitation using a motion-response game, comprising: playing the game by applying the converted input signal.
제14항에 있어서, 상기 단계 (3-3)에서는,
상기 (3-1)에서 전달받은 시선 정보를 이용하여, 상기 게임에 따른 시선 고정 지점 및 환자(20)의 실제 시선 지점을 비교하여 출력부(340)로 출력하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 방법.
The method according to claim 14, wherein in step (3-3),
Using the gaze information received from (3-1), the gaze fixed point according to the game and the actual gaze point of the patient 20 is compared and output to the output unit 340, the motion response game Vestibular rehabilitation training method.
제14항에 있어서, 상기 단계 (3-3)에서는,
상기 (3-1)에서 전달받은 모션 정보에 따라 변환된 입력 신호를 상기 게임의 컨트롤 신호로 실시간 적용하여 게임을 플레이하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 방법.
The method according to claim 14, wherein in step (3-3),
A vestibular rehabilitation training method using a motion reaction game, characterized in that for playing the game by applying the input signal converted according to the motion information received in the (3-1) in real time as a control signal of the game.
제14항에 있어서, 상기 단계 (3-1) 이후에는,
상기 단계 (3-1)에서 전달받은 시선 정보 및 모션 정보를 이용하여 게임의 난이도를 조절하는 단계를 더 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 방법.
The method according to claim 14, wherein after the step (3-1),
A vestibular rehabilitation training method using a motion reaction game, characterized in that further comprising the step of adjusting the difficulty of the game using the gaze information and motion information received in the step (3-1).
제14항에 있어서, 상기 단계 (3-3) 이후에는,
상기 환자(20)의 게임 플레이에 따른 정보를 재활 정보로 변환하여 미리 정해진 단말기에 전송하는 단계를 더 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 방법.
The method according to claim 14, wherein after the step (3-3),
And converting the information according to the game play of the patient (20) into rehabilitation information and transmitting the same to a predetermined terminal.
제12항에 있어서,
(0) 상기 환자(20)의 머리 또는 상반신 영상을 촬영하는 단계를 더 포함하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 방법.
The method of claim 12,
(0) further comprising the step of photographing the head or upper body image of the patient (20), vestibular rehabilitation training method using a motion reaction game.
제19항에 있어서,
상기 단계 (1)에서는, 상기 단계 (0)에서 촬영한 환자(20)의 영상으로부터 눈동자 영역을 검출하여 시선 정보를 획득하며,
상기 단계 (3)에서는, 상기 획득한 시선 정보를 상기 플레이되는 게임의 입력 신호로 적용하여 상기 게임을 플레이하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 방법.
20. The method of claim 19,
In the step (1), the eye area is detected from the image of the patient 20 taken in the step (0) to obtain the gaze information,
In the step (3), the vestibular rehabilitation training method using a motion reaction game, characterized in that to play the game by applying the acquired gaze information as an input signal of the game to be played.
제19항에 있어서,
상기 단계 (2)에서는, 상기 단계 (0)에서 촬영한 환자(20)의 영상으로부터 얼굴 영역을 검출하여 얼굴 영역의 움직임을 포함하는 모션 정보를 획득하며,
상기 단계 (3)에서는, 상기 획득한 모션 정보를 상기 플레이되는 게임의 입력 신호로 적용하여 상기 게임을 플레이하는 것을 특징으로 하는, 모션 반응 게임을 이용한 전정 재활 훈련 방법.20. The method of claim 19,
In the step (2), by detecting the face area from the image of the patient 20 taken in the step (0) to obtain motion information including the movement of the face area,
In the step (3), the vestibular rehabilitation training method using a motion reaction game, characterized in that to play the game by applying the obtained motion information as the input signal of the game to be played.
KR1020130000775A 2013-01-03 2013-01-03 Vestibular rehabilitation training system and rehabilitation training method using motion games KR101381134B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130000775A KR101381134B1 (en) 2013-01-03 2013-01-03 Vestibular rehabilitation training system and rehabilitation training method using motion games

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130000775A KR101381134B1 (en) 2013-01-03 2013-01-03 Vestibular rehabilitation training system and rehabilitation training method using motion games

Publications (1)

Publication Number Publication Date
KR101381134B1 true KR101381134B1 (en) 2014-04-04

Family

ID=50656450

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130000775A KR101381134B1 (en) 2013-01-03 2013-01-03 Vestibular rehabilitation training system and rehabilitation training method using motion games

Country Status (1)

Country Link
KR (1) KR101381134B1 (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160090065A (en) * 2015-01-21 2016-07-29 동국대학교 산학협력단 Rehabilitation system based on gaze tracking
US9953682B2 (en) 2015-03-11 2018-04-24 Electronics And Telecommunications Research Institute Apparatus and method for providing sensory effects for vestibular rehabilitation therapy
KR20180109385A (en) * 2017-03-28 2018-10-08 한양대학교 에리카산학협력단 Wearable Device for rehabilitating dizziness
KR101919497B1 (en) * 2017-11-09 2019-02-08 순천향대학교 산학협력단 Vestibular rehabilitation training device and method using virtual reality
KR101995814B1 (en) * 2018-03-06 2019-07-03 재단법인대구경북과학기술원 Treadmill and providing game contents using the same
WO2019143186A1 (en) * 2018-01-18 2019-07-25 재단법인 아산사회복지재단 Brain connectivity-based visual perception training device, method and program
KR20210000782A (en) * 2019-06-25 2021-01-07 고려대학교 산학협력단 Rehabilitation apparatus for improving vestibulo-ocular reflex based on virtual reality games and multiple bio-signal sensors
WO2020262973A3 (en) * 2019-06-25 2021-02-18 고려대학교 산학협력단 Virtual reality game- and biosignal sensor-based vestibulo-ocular reflex assessment and rehabilitation apparatus
US12064261B2 (en) 2017-05-08 2024-08-20 Starkey Laboratories, Inc. Hearing assistance device incorporating virtual audio interface for therapy guidance

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5954674A (en) * 1997-10-13 1999-09-21 Kinex Iha Corporation Apparatus for gathering biomechanical parameters
WO2001076478A1 (en) 2000-04-10 2001-10-18 Nordisk Terapi As System for testing and exercising sensorimotoric control of the neck
KR100982171B1 (en) 2008-11-24 2010-09-15 한국 한의학 연구원 The System for Capturing 2D Facial Image
KR101360743B1 (en) 2013-08-29 2014-02-10 최광호 Posture training evaluation device and rehabilitation apparatus having this same

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5954674A (en) * 1997-10-13 1999-09-21 Kinex Iha Corporation Apparatus for gathering biomechanical parameters
WO2001076478A1 (en) 2000-04-10 2001-10-18 Nordisk Terapi As System for testing and exercising sensorimotoric control of the neck
KR100982171B1 (en) 2008-11-24 2010-09-15 한국 한의학 연구원 The System for Capturing 2D Facial Image
KR101360743B1 (en) 2013-08-29 2014-02-10 최광호 Posture training evaluation device and rehabilitation apparatus having this same

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101660157B1 (en) * 2015-01-21 2016-09-26 동국대학교 산학협력단 Rehabilitation system based on gaze tracking
KR20160090065A (en) * 2015-01-21 2016-07-29 동국대학교 산학협력단 Rehabilitation system based on gaze tracking
US9953682B2 (en) 2015-03-11 2018-04-24 Electronics And Telecommunications Research Institute Apparatus and method for providing sensory effects for vestibular rehabilitation therapy
KR102360204B1 (en) * 2017-03-28 2022-02-07 한양대학교 에리카산학협력단 Wearable Device for rehabilitating dizziness
KR20180109385A (en) * 2017-03-28 2018-10-08 한양대학교 에리카산학협력단 Wearable Device for rehabilitating dizziness
US12064261B2 (en) 2017-05-08 2024-08-20 Starkey Laboratories, Inc. Hearing assistance device incorporating virtual audio interface for therapy guidance
KR101919497B1 (en) * 2017-11-09 2019-02-08 순천향대학교 산학협력단 Vestibular rehabilitation training device and method using virtual reality
WO2019143186A1 (en) * 2018-01-18 2019-07-25 재단법인 아산사회복지재단 Brain connectivity-based visual perception training device, method and program
US11249549B2 (en) 2018-01-18 2022-02-15 Nunaps Inc. Brain connectivity-based visual perception training device, method and program
KR101995814B1 (en) * 2018-03-06 2019-07-03 재단법인대구경북과학기술원 Treadmill and providing game contents using the same
WO2020262973A3 (en) * 2019-06-25 2021-02-18 고려대학교 산학협력단 Virtual reality game- and biosignal sensor-based vestibulo-ocular reflex assessment and rehabilitation apparatus
KR102255342B1 (en) 2019-06-25 2021-05-26 고려대학교 산학협력단 Rehabilitation apparatus for improving vestibulo-ocular reflex based on virtual reality games and multiple bio-signal sensors
KR20210000782A (en) * 2019-06-25 2021-01-07 고려대학교 산학협력단 Rehabilitation apparatus for improving vestibulo-ocular reflex based on virtual reality games and multiple bio-signal sensors
EP3991705A4 (en) * 2019-06-25 2023-07-05 Korea University Research and Business Foundation Virtual reality game- and biosignal sensor-based vestibulo-ocular reflex assessment and rehabilitation apparatus

Similar Documents

Publication Publication Date Title
KR101381134B1 (en) Vestibular rehabilitation training system and rehabilitation training method using motion games
Agrawal et al. Evaluation of quantitative head impulse testing using search coils versus video-oculography in older individuals
US11141047B2 (en) Systems and methods for throat imaging
US20190133717A1 (en) Method for monitoring an orthodontic treatment
KR101880386B1 (en) System for curing visual handicap using virtual reality
JP5607640B2 (en) Method and apparatus for obtaining images of eye features
US10814095B2 (en) Apparatus, sound data generation method, and non-transitory computer readable storage medium
US9050035B2 (en) Device to measure pupillary light reflex in infants and toddlers
US9314157B2 (en) Device to measure pupillary light reflex in infants and toddlers
ATE516740T1 (en) PUPILLOMETER
JP2016526985A5 (en)
CN106999337A (en) Eye exercise system and computer program product
US8911090B2 (en) System for at-home eye movement monitoring
US10321818B2 (en) System and method for ocular function tests
TWI624249B (en) Dynamic assessment and rehabilitation system for vertigo patients and application method thereof
KR102360204B1 (en) Wearable Device for rehabilitating dizziness
JP2010503876A5 (en)
JP2010503876A (en) Measurement of fixation distance by inputting information from respiratory and / or eyelid functions for application device control including image capture and display device focus adjustment
KR101580559B1 (en) Medical image and information real time interaction transfer and remote assist system
JP2019074582A (en) Information processing apparatus, information processing method, and program
KR101965050B1 (en) System for measuring function of pedestrian based on vertual reality
WO2024128315A1 (en) Program, computer device, and method
KR102041460B1 (en) Diagnosis apparatus for dizziness using virtual reality with no head movement
JP6855561B1 (en) Dialysis patient exercise support system and dialysis patient exercise support device and their methods and programs
JP2023136398A (en) Aid system, auxiliary method and program

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170316

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180313

Year of fee payment: 5