KR102033517B1 - 뇌파측정과 vr 컨텐츠를 기초로 한 시니어 훈련 시스템 - Google Patents

뇌파측정과 vr 컨텐츠를 기초로 한 시니어 훈련 시스템 Download PDF

Info

Publication number
KR102033517B1
KR102033517B1 KR1020190058055A KR20190058055A KR102033517B1 KR 102033517 B1 KR102033517 B1 KR 102033517B1 KR 1020190058055 A KR1020190058055 A KR 1020190058055A KR 20190058055 A KR20190058055 A KR 20190058055A KR 102033517 B1 KR102033517 B1 KR 102033517B1
Authority
KR
South Korea
Prior art keywords
content
user
computer terminal
training system
input signal
Prior art date
Application number
KR1020190058055A
Other languages
English (en)
Inventor
황보택근
윤경목
최규남
Original Assignee
가천대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 가천대학교 산학협력단 filed Critical 가천대학교 산학협력단
Priority to KR1020190058055A priority Critical patent/KR102033517B1/ko
Application granted granted Critical
Publication of KR102033517B1 publication Critical patent/KR102033517B1/ko

Links

Images

Classifications

    • A61B5/0476—
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/369—Electroencephalography [EEG]
    • A61B5/04012—
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/40—Detecting, measuring or recording for evaluating the nervous system
    • A61B5/4076—Diagnosing or monitoring particular conditions of the nervous system
    • A61B5/4088—Diagnosing of monitoring cognitive diseases, e.g. Alzheimer, prion diseases or dementia
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B21/00—Exercising apparatus for developing or strengthening the muscles or joints of the body by working against a counterforce, with or without measuring devices
    • A63B21/40—Interfaces with the user related to strength training; Details thereof
    • A63B21/4027—Specific exercise interfaces
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003—Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006—Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0075—Means for generating exercise programs or schemes, e.g. computerized virtual trainer, e.g. using expert databases
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0087—Electric or electronic controls for exercising apparatus of groups A63B21/00 - A63B23/00, e.g. controlling load
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A63B2071/0625—Emitting sound, noise or music
    • A63B2071/0627—Emitting sound, noise or music when used improperly, e.g. by giving a warning
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A63B2071/0625—Emitting sound, noise or music
    • A63B2071/063—Spoken or verbal instructions
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A63B2071/0638—Displaying moving images of recorded environment, e.g. virtual environment
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B2071/0658—Position or arrangement of display
    • A63B2071/0661—Position or arrangement of display arranged on the user
    • A63B2071/0666—Position or arrangement of display arranged on the user worn on the head or face, e.g. combined with goggles or glasses
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/40—Acceleration
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/80—Special sensors, transducers or devices therefor
    • A63B2220/801—Contact switches
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/80—Special sensors, transducers or devices therefor
    • A63B2220/806—Video cameras
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/80—Special sensors, transducers or devices therefor
    • A63B2220/808—Microphones
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2230/00—Measuring physiological parameters of the user
    • A63B2230/08—Measuring physiological parameters of the user other bio-electrical signals
    • A63B2230/10—Measuring physiological parameters of the user other bio-electrical signals electroencephalographic signals

Landscapes

  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Neurology (AREA)
  • Biophysics (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Psychology (AREA)
  • Psychiatry (AREA)
  • Optics & Photonics (AREA)
  • Neurosurgery (AREA)
  • Hospice & Palliative Care (AREA)
  • Developmental Disabilities (AREA)
  • Child & Adolescent Psychology (AREA)
  • Physiology (AREA)
  • General Physics & Mathematics (AREA)
  • Orthopedic Medicine & Surgery (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Rehabilitation Tools (AREA)

Abstract

본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 훈련 시스템은, 고령인구와 치매환자의 급속한 증가에 따라 알맞은 운동 및 재활 치료 에 도움을 줄 수 있으며, 본 발명의 일 실시예에 따르는 좌식 장치에 앉아서 VR콘텐츠 장비를 사용하여 현실감을 느끼면서 고령의 노인과 치매환자에게 운동 환경을 만들어 줄 수 있다. 특히, 인지장애를 가지고 있는 시니어의 경우에 의사소통이 원활하지 않으므로, 뇌파 테스트를 통한 자동 인지 및 선택 기능을 제공하여, 의사 소통이 원활하지 못하더라도 사용이 가능한 운동기구 시스템을 제공 할 수 있다.

Description

뇌파측정과 VR 컨텐츠를 기초로 한 시니어 훈련 시스템 {SYSTEM FOR SENIOR TRAINNING ON THE BASIS OF VR CONTENTS AND BRAIN WAVE MEASUREMENT}
본 발명은 뇌파측정과 VR 컨텐츠를 기초로 한 시니어 훈련 시스템에 관한 것으로서, 보다 상세하게는, 시니어 인지장애 테스트 및 훈련을 위한 시니어 VR콘텐츠 알고리즘에 관한 기술로서, 시니어의 치매나 알츠하이머 질환이 발생되기 전 경도인지장애 정도를 사전 파악하도록 하고, 장애가 있는 경우 인지감각을 훈련시킬 수 있도록 하는 기술에 관한 것이다.
경도인지장애는 동일 연령대에 비해 인지기능이 떨어져 있는 상태이며, 일상생활을 수행하는 능력은 보존되어있어 아직은 치매가 아닌 상태를 의미한다. 경도인지장애는 알츠하이머병으로 이행할 수 있는 고위험군으로 지목되고 있다. 또한 경도인지장애는 알츠하이머병을 가장 이른 시기에 발견할 수 있는 단계이며 치료효과를 극대화시킬 수 있다는 점에서 임상적으로 중요하다.
경도인지장애 진단의 첫 번째 단계로 환자가 경도인지장애 증후군에 해당하는지를 확인해야 한다. 즉, 환자 자신이나 가족이 인지기능장애를 호소하고, 신경심리학적 평가를 통해 인지기능장애가 증명 되고, 전반적인 일상생활 수행 능력에는 뚜렷한 장애가 없으며, 치매의 진단기준을 만족하지 않아야 한다. 이후 경도인지장애의 하부유형 중 어느 것에 해당하는지를 밝히고, 원인 질환을 규명할 수 있다면 검사를 통해 이를 확진하는 것이 필요하다.
신경심리검사가 경도인지장애를 증명하는 데 유용하게 사용되고 있지만, 정상노화, 경도인지장애, 치매 간에 공통된 부분이 많으므로 이들을 서로 구분하는 데 다소 어려움이 따른다는 한계가 있다. 따라서 최근에는 뇌 자기공명영상촬영(뇌 MRI) 및 양전자방출단층촬영(PET)을 이용한 영상검사가 활용되고 있다. 그러나 한 번의 영상검사만으로 경도인지장애와 치매를 구분하기가 쉽지 않기 때문에 1~2년에 걸친 추적 검사를 해야 하는 경우가 많다.
경도인지를 정확하게 진단하기 위해 일상생활의 반응정보를 통해 사용자의 경도인지장애를 식별하며, 인지능력평가 요소 별로 경도장애를 식별하여 사용자의 경도장애를 명확하게 알 수 있는 기술이 필요하고, 나아가 계속적인 운동을 통해서 개선해 나아가 필요가 있다.
본 발명은 전술한 종래 기술의 문제점을 해결하기 위한 것으로서, 고정된 의자(본 발명에서 좌식 장치)에서 VR 컨텐츠를 실감나게 체험할 수 있는 다양한 알고리즘을 제안하고, 이를 통해 인지 장애 등에 대한 테스트를 수행하고, 훈련을 통한 운동 시스템을 제공하는데 그 목적이 있다.
즉, 가상현실과 뇌파 신호의 분석을 통해서 자동으로 사용자의 레벨을 인식하고, 사용자의 반응 점수를 저장하여, 누적된 사용자 정보와 뇌파의 상태를 통해 장애지수 판단과 개선을 하는데 목적이 있다.
상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템은, 좌, 우 휠 핸들을 기반으로 사용자의 움직임에 대한 입력신호를 수신하고 사용자의 운동량에 대한 변화를 제공해주는 휠체어 형태의 좌식 장치; 상기 좌식장치를 제어하고 상기 좌식장치로부터 수신한 입력신호를 기반으로 VR 컨텐츠의 변화를 제어하는 컴퓨터 단말; 및 상기 컴퓨터 단말에 의해 제어되며, 상기 사용자가 착용이 가능하도록 구비되어 상기 VR컨텐츠를표시하는 HMD(Head Mounted Display);를 포함하며, 상기 좌식 장치는, 좌, 우 휠 핸들에 타악에 의해 상기 컴퓨터 단말로 입력 신호를 제공할 수 있는 오디오 센서 및 상기 사용자의 입력을 수신하기 위해 발판으로부터 돌출 형성된 충격 센서를 구비하는 충격식 발판을 포함하는 것이고, 상기 컴퓨터 단말은, 상기 VR 컨텐츠에 대응하는 상기 좌식 장치로부터 수신하는 입력 신호에 따라, 평가요소를 수집할 수 있다.
상기 컴퓨터 단말은, 상기 사용자의 얼굴을 인식할 수 있는 카메라 모듈을 더 포함할 수 있으며, 상기 사용자의 얼굴을 인식하여, 상기 사용자의 계정을 생성하고, 복수의 사용자 계정에 대해 각 사용자에 대응하는 뇌파 테스트의 결과 값을 매칭하여, 상기 VR 컨텐츠를 제공하기 위한 사용자의 상태정보를 모델링할 수 있다.
상기 시스템은, 사용자의 머리에 연결되어 뇌파 신호 값을 수집하기 위한, 뇌파검사 장치를 더 포함하되, 실시간으로 수집되는 뇌파 신호 값을 상기 컴퓨터 단말로 제공할 수 있으며, 이때, 상기 뇌파 신호 값은, 상기 HDM를 통해 상기 사용자에게 복수의 VR 컨텐츠 중 어느 하나를 선택할 수 있는 컨텐츠 리스트에 대한 정보를 제공하는 시점에서, 수집되는 값이며, 상기 복수의 VR 컨텐츠들 중 사용자의 뇌파 신호 값의 변화 폭이 가장 큰 VR 컨텐츠를 자동으로 선택할 수 있다.
또한, 상기 컴퓨터 단말은, 각 컨텐츠에 대한 미리 보기 또는 상세정보 제공화면이 사용자에게 제공된 후, 상기 수집되는 뇌파 신호 값에 따라, 동일한 VR 컨텐츠 내 복수의 레벨이 있는 경우, 제공될 VR 컨텐츠의 레벨을 자동으로 산정하되, 상기 뇌파 신호의 변화 폭이 클수록 높은 레벨로 산정할 수 있다.
이때, 상기 사용자가 특정 VR 컨텐츠에 대한 이용 이력이 존재하는 경우, 상기 레벨을 산정함에 있어서, 상기 이용 이력을 추가로 고려하여 산정할 수 있다.
상기 좌식장치에서 수신된 상기 좌, 우 휠 핸들을 제어하는 사용자의 입력신호에 따라, 상기 좌식 장치가 좌 또는 우로 제자리 회전하고, 상기 VR 컨텐츠가 좌 또는 우 방향에 대응되는 컨텐츠로 변화할 수 있으며, 상기 충격식 발판은, 상기 사용자의 왼발 및 오른발에 대응하는 위치에 별도의 구동계를 구비하되, 상기 사용자의 양 발이 터치되는 시간 간격 및 상기 충격식 발판을 가압하는 압력에 따라, 상이한 입력정보를 상기 컴퓨터 단말로 제공할 수 있다.
상기 VR 컨텐츠는, 복수의 명령 이벤트와 각 명령 이벤트에 대응하는 정답행동정보를 포함하며, 각 명령 이벤트마다 기억력, 집중력 및 인지력 중 어느 하나 이상의 평가요소가 지정되어 있으며, 사용자가 명령 이벤트에 대해 수행한 행동의 결과값과 상기 정답행동정보를 비교하여 상기 평가요소에 대한 점수를 부여하고, 상기 VR컨텐츠 이용이 종료될 시 대시보드를 통해 각 평가요소 별 점수를 제공할 수 있다.
이때, 상기 컴퓨터 단말은, 상기 좌식장치로부터, 수신되는 입력 신호가 상기 VR 컨텐츠에 대응하는 입력 신호인 경우, 상기 평가 요소에 대한 상기 사용자의 반응 점수를 반영하고, 저장할 수 있다.
또한, 상기 좌식 장치는, 상기 사용자의 손 위치에 구비되는 가속도 센서를 더 포함할 수 있으며, 상기 가속도 센서는, 상기 사용자의 손의 이동속도를 측정하여, 상기 컴퓨터 단말로 제공할 수 있다.
이때, 오디오 센서를 통하여 사용자의 손에 특정 대상에 타악함으로써 발생되는 사운드를 수집하고, 상기 손의 이동속도와 상기 사운드가 발생된 위치, 사운드 수집시각을 기초로, 상기 VR컨텐츠에서 타악을 명령한 시각, 상기 VR컨텐츠에서 명령한 타악 패턴을 비교하여 사용자의 순발력 및 운동력을 판단하고, 판단된 복수의 순발력 및 운동력에 대한 값들의 평균 값이 기 설정된 기준치 이하인 경우, 다른 VR컨텐츠를 추천하거나 경고 알림을 제공할 수 있다.
본 발명의 일 실시예에 따르는, 컴퓨터 단말에 의해 수행되는 VR 컨텐츠를 이용한 사용자 운동 제공 방법은, (a) 복수의 사용자의 얼굴에 대해 딥러닝을 수행하고, 각 사용자에 대한 계정을 생성하는 단계; (b) 뇌파 테스트를 통해 추출한 신호 값을 수집하는 단계; (c) VR 컨텐츠를 제공하는 HMD를 통해 상기 사용자에게 VR 컨텐츠 리스트를 제공하고, 뇌파 신호 값에 기초하여, 제공할 VR 컨텐츠 및 상기 VR 컨텐츠의 레벨을 선택하는 단계; 및 (d) 좌식장치로부터 사용자 입력 신호를 수신하고, 상기 입력 신호에 기초하여 평가 요소에 대한 반응 점수를 저장하는 단계; 를 포함할 수 있다.
상기 좌식장치는, 좌, 우 휠 핸들을 기반으로 사용자의 움직임에 대한 입력신호를 수신하고 사용자의 운동량에 대한 변화를 상기 컴퓨터 단말로 제공할 수 있다.
또한, 상기 VR 컨텐츠는, 상기 사용자의 인지장애에 대한 테스트 및 훈련을 위한 컨텐츠가 될 수 있으며, 각 컨텐츠 별로 메인 미션이 설정되어 있으며, 목표를 수행하기 위해 단계별 서브미션이 설정되되, 현재 서브미션을 성공하는 경우, 다음 서브미션을 제공하고, 현재 서브미션을 실패하는 경우, 실패한 서브미션을 반복하여 제공할 수 있다.
본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템은, 고령인구와 치매환자의 급속한 증가에 따라 알맞은 운동 및 재활 치료 에 도움을 줄 수 있으며, 본 발명의 일 실시예에 따르는 좌식 장치에 앉아서 VR콘텐츠 장비를 사용하여 현실감을 느끼면서 고령의 노인과 치매환자에게 운동 환경을 만들어 줄 수 있다.
특히, 인지장애를 가지고 있는 시니어의 경우에 의사소통이 원활하지 않으므로, 뇌파 테스트를 통한 자동 인지 및 선택 기능을 제공하여, 의사 소통이 원활하지 못하더라도 사용이 가능한 운동기구 시스템을 제공 할 수 있다.
도 1은 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템에 대한 예시도 이다.
도 2는 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템의 실행 순서를 설명하기 위한 순서도 이다.
도 3은 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템의 재 실행 시 실행 순서를 설명하기 위한 순서도 이다.
도 4는 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템의 오디오 센서가 좌우 오디오를 판별하는 알고리즘에 대한 예시도 이다.
도 5는 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템의 충격식 발판의 발 구동 체크 알고리즘에 대한 예시도 이다.
도 6 내지 7은, 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템의 VR 컨텐츠에 대한 예시도 이다.
도 8 내지 9는 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템에서 제공하는 VR 컨텐츠의 흐름도 이다.
도 10은 본 발명의 일 실시예에 따르는, 컴퓨터 단말에 의해 수행되는 VR 컨텐츠를 이용한 사용자 운동 제공 방법을 설명하기 위한 순서도 이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
본 명세서에 있어서 '부(部)'란, 하드웨어에 의해 실현되는 유닛(unit), 소프트웨어에 의해 실현되는 유닛, 양방을 이용하여 실현되는 유닛을 포함한다. 또한, 1 개의 유닛이 2 개 이상의 하드웨어를 이용하여 실현되어도 되고, 2 개 이상의 유닛이 1 개의 하드웨어에 의해 실현되어도 된다. 한편, '~부'는 소프트웨어 또는 하드웨어에 한정되는 의미는 아니며, '~부'는 어드레싱 할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다.
따라서, 일 예로서 '~부'는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 '~부'들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 '~부'들로 결합되거나 추가적인 구성요소들과 '~부'들로 더 분리될 수 있다. 뿐만 아니라, 구성요소들 및 '~부'들은 디바이스 또는 보안 멀티미디어카드 내의 하나 또는 그 이상의 CPU들을 재생시키도록 구현될 수도 있다.
이하에서 언급되는 "단말"은 네트워크를 통해 서버나 타 단말에 접속할 수 있는 컴퓨터나 휴대용 단말기로 구현될 수 있다. 여기서, 컴퓨터는 예를 들어, 웹 브라우저(WEB Browser)가 탑재된 노트북, 데스크톱(desktop), 랩톱(laptop), VR HMD(예를 들어, HTC VIVE, Oculus Rift, GearVR, DayDream, PSVR 등)등을 포함할 수 있다. 여기서, VR HMD 는 PC용 (예를 들어, HTC VIVE, Oculus Rift, FOVE, Deepon 등)과 모바일용(예를 들어, GearVR, DayDream, 폭풍마경, 구글 카드보드 등) 그리고 콘솔용(PSVR)과 독립적으로 구현되는 Stand Alone 모델(예를 들어, Deepon, PICO 등) 등을 모두 포함한다.
휴대용 단말기는 예를 들어, 휴대성과 이동성이 보장되는 무선 통신 장치로서, 스마트폰(smart phone), 태블릿 PC, 웨어러블 디바이스뿐만 아니라, 블루투스(BLE, Bluetooth Low Energy), NFC, RFID, 초음파(Ultrasonic), 적외선, 와이파이(WiFi), 라이파이(LiFi) 등의 통신 모듈을 탑재한 각종 디바이스를 포함할 수 있다. 또한, "네트워크"는 단말들 및 서버들과 같은 각각의 노드 상호 간에 정보 교환이 가능한 연결 구조를 의미하는 것으로, 근거리 통신망(LAN: Local Area Network), 광역 통신망(WAN: Wide Area Network), 인터넷 (WWW: World Wide Web), 유무선 데이터 통신망, 전화망, 유무선 텔레비전 통신망 등을 포함한다. 무선 데이터 통신망의 일례에는 3G, 4G, 5G, 3GPP(3rd Generation Partnership Project), LTE(Long Term Evolution), WIMAX(World Interoperability for Microwave Access), 와이파이(Wi-Fi), 블루투스 통신, 적외선 통신, 초음파 통신, 가시광 통신(VLC: Visible Light Communication), 라이파이(LiFi) 등이 포함되나 이에 한정되지는 않는다.
이하에서, 도 1을 참조하여, 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템에 대해 구체적으로 설명한다.
본 발명의 일 실시예에 따르는 시스템은, 좌, 우 휠 핸들(140)을 기반으로 사용자의 움직임에 대한 입력신호를 수신하고 사용자의 운동량에 대한 변화를 제공해주는 휠체어 형태의 좌식 장치(100)를 포함할 수 있다.
또한, 본 발명의 일 실시예에 따르는, 좌식장치(100)를 제어하고, 좌식장치(100)로부터 수신한 입력신호를 기반으로 VR 컨텐츠의 변화를 제어하는 컴퓨터 단말(120)을 포함할 수 있으며, 컴퓨터 단말(120)에 의해 제어되며, 사용자가 착용이 가능하도록 구비되어 VR컨텐츠를표시하는 HMD(Head Mounted Display)(110)를 포함할 수 있다.
본 발명의 일 실시예에 따르는 좌식 장치(100)는, 좌, 우 휠 핸들(140)에 타악에 의해 컴퓨터 단말(120)로 입력 신호를 제공할 수 있는 오디오 센서(130) 및 사용자의 입력을 수신하기 위해 발판으로부터 돌출 형성된 충격 센서를 구비하는 충격식 발판(150)을 포함하여 구비될 수 있다.
본 발명의 일 실시예에 따르는, 컴퓨터 단말(120)은 도 1에 도시된 바와 같이, 좌식장치의 후면에 연결되어 구비될 수 있으나, 이는 본 발명의 바람직한 실시예를 설명하기 위한 구성일 뿐, 이에 한정하지 않으며, 별도의 형태로 키오스크 또는 모니터를 구비한 일반적인 PC의 형태로 구비될 수도 있다.
본 발명의 일 실시예에 따르는, 컴퓨터 단말(120)은 사용자의 얼굴을 인식하기 위해, 카메라 모듈을 더 포함할 수 있으며, 카메라 모듈을 통해 인식되는 사용자의 얼굴에 기초하여, 사용자가 사용할 계정을 생성할 수 있다.
즉, 사용자는 자신의 얼굴을 인식시켜 계정을 생성함으로써, 얼굴 인식을 통해 계정에 로그인하는 것이 가능할 수 있다.
또한, 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템은, 사용자의 머리에 연결되어 뇌파 신호 값을 수집하기 위한 뇌파 검사 장치를 더 포함할 수 있으며, 뇌파검사 장치를 통해 실시간으로 수집되는 뇌파 신호 값은, 컴퓨터 단말(120)로 제공 될 수 있다.
컴퓨터 단말(120)은 복수의 사용자 계정에 대해 각 사용자에 대응하는 뇌파 테스트 결과 값을 매칭하여, VR 컨텐츠를 제공하기 위한 사용자의 상태 정보를 모델링할 수 있다.
사용자가 얼굴 인식을 통해 로그인하게 되면, 뇌파검사 장치가 활성화 되어 실시간으로 사용자의 뇌파를 측정하고, 사용자의 뇌파 신호 값에 기초하여, 사용자에게 VR 컨텐츠 및 적당한 레벨을 추천하는 것이 가능할 수 있다.
구체적으로, 뇌파 신호 값은, HDM(110)를 통해 상기 사용자에게 복수의 VR 컨텐츠 중 어느 하나를 선택할 수 있는 컨텐츠 리스트에 대한 정보를 제공하는 시점에서, 수집되는 값이 될 수 있으며, 복수의 VR 컨텐츠들 중 사용자의 뇌파 신호 값의 변화 폭이 가장 큰 VR 컨텐츠를 컴퓨터 단말(120)이 자동으로 선택할 수 있다.
즉, 컴퓨터 단말(120)은, 각 VR 컨텐츠에 대한 미리 보기 또는 상세정보 제공화면이 사용자에게 제공된 이후, 수집되는 사용자의 뇌파 신호 값에 따라, 동일한 VR 컨텐츠 내 복수의 레벨이 존재하는 경우, 제공될 VR 컨텐츠의 레벨을 자동으로 산정할 수 있으며, 이때, 뇌파 신호의 변화 폭이 클수록 높은 레벨로 산정할 수 있다.
VR 컨텐츠의 종류 및 레벨을 산정함에 있어서, 사용자가 특정 VR 컨텐츠에 대한 이용 이력이 존재하는 경우, 과거 이용 이력을 추가로 고려하여, 해당 VR 컨텐츠의 레벨을 산정할 수 있다.
본 발명의 일 실시예에 따르는, 좌식장치(100)에서 수신된 좌, 우 휠 핸들(140)을 제어하는 사용자의 입력신호에 따라, 좌식 장치(100)가 좌 또는 우로 제자리 회전하고, VR 컨텐츠가 좌 또는 우 방향에 대응되는 컨텐츠로 변화할 수 있다.
또는, VR 컨텐츠만 변화하고, 좌식장치(100)는 고정된 상태로 유지될 수 있다.
좌식장치(100)의 움직임 여부는 사용자의 정보에 따라 상이하게 적용될 수 있다.
좌식장치(100)에 구비된 충격식 발판(150)은 사용자의 왼발 및 오른발에 대응하는 위치에 별도의 구동계를 구비할 수 있으며, 사용자의 양 발이 터치되는 시간 간격 및 충격식 발판(150)을 가압하는 압력에 따라, 상이한 입력정보를 컴퓨터 단말(120)로 제공할 수 있다.
본 발명의 일 실시예에 따르는, 좌식장치(100)는 사용자의 손 위치에 구비되는 가속도 센서를 더 포함할 수 있으며, 가속도 센서는, 사용자의 손의 이동속도를 측정하여, 컴퓨터 단말(120)로 제공하는 것이 가능할 수 있다.
또한, 오디오 센서(130)를 통하여 사용자의 손에 특정 대상이 타악함으로써 발생되는 사운드를 수집하고, 손의 이동속도와 사운드가 발생된 위치, 사운드 수집시각을 기초로, VR컨텐츠에서 타악을 명령한 시각, VR컨텐츠에서 명령한 타악 패턴을 비교하여 사용자의 순발력 및 운동력을 판단하고, 판단된 복수의 순발력 및 운동력에 대한 값들의 평균 값이 기 설정된 기준치 이하인 경우, 다른 VR컨텐츠를 추천하거나 경고 알림을 제공할 수 있다.
이하, 도 2를 참조하여, 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템의 실행 순서에 대해 구체적으로 설명한다.
컴퓨터 단말(120)은 사전에 복수의 사용자에 대한 얼굴 인식을 수행할 수 있으며, 이를 위해, CNN 딥러닝 알고리즘을 사용하여, 기계학습하고 데이터를 저장할 수 있다.
컴퓨터 단말(120)에 구비된, 카메라 모듈을 통해 사용자의 얼굴을 인식하고, 복수의 사용자에 대한 얼굴 중 매칭되는 얼굴에 대응하는 계정으로 로그인할 수 있으며, 이때, 매칭되는 얼굴이 존재하지 않는 경우, 새로운 계정을 생성할 수 있다(210).
이후, 본 발명의 일 실시예에 따르는, 시스템에 구비되어 있는 뇌파검사 장치를 통해 뇌파 신호 값을 수집할 수 있으며, 이때, 수집되는 뇌파 신호 값은, 사용자의 계정 정보와 캐리브레이션 되어, 사용자의 정보로 컴퓨터 단말(120)에 저장될 수 있다(220).
뇌파검사 장치에 의해 지속적으로 뇌파 신호 값을 수신하며, 사용자에게 제공될 VR 컨텐츠에 대한 리스트 및 미리 보기 영상을 제공하여, 사용자의 뇌파 신호 값을 수집하여, 사용자가 관심 있어 하는 VR 컨텐츠를 선택할 수 있다(230).
선택되어 사용자에게 제공되는 VR 컨텐츠가 각 단계에 대한 레벨이 설정되어 있는 VR 컨텐츠라면, 수집되고 있는 뇌파 신호 값에 기초하여, 사용자에게 제공할 VR 컨텐츠의 레벨도 선택할 수 있다(240).
VR 컨텐츠의 종류와 레벨이 선택되면 HMD(110)를 통해 사용자에게 VR 컨텐츠를 제공할 수 있다(250).
VR 컨텐츠가 제공되는 시간 동안, 좌식장치(100)로부터 사용자 입력을 수신할 수 있으며, 사용자 입력이 수신되는 경우, VR 컨텐츠의 내용과 연관하여, 수신되는 사용자 입력에 대해 수집할 수 있으며, 이는 테스트 결과로 저장될 수 있다(280).
사용자에게 VR 컨텐츠를 제공하는 디스플레이 장치는 본 발명에서는 바람직하게 HMD(110)가 될 수 있으며, 다른 형태의 디스플레이 모듈로도 가능할 수 있으며, 사용자 입력이 수행됨에 따라 변하는 화면을 디스플레이 할 수 있다(270).
이하 도 3을 참조하여, 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템의 재 실행 시 실행 순서를 구체적으로 설명한다.
본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템은, 얼굴 인식 결과 기 저장된 정보들 중 매칭되는 결과가 존재하면, 해당하는 개인정보로 로그인할 수 있다(310).
어느 하나의 계정으로 로그인이 수행되면, 과거 사용 이력에 기반하여, VR 컨텐츠를 제공할 수 있다(320).
이후, 컴퓨터 단말(120)은 제공된 VR 컨텐츠에 대한 실행 이력 및 VR 컨텐츠의 내용에 대응하여 수신된 사용자 입력을 저장할 수 있다(330).
(330)단계에서 수집된 사용자 입력과 실행 이력에 기반하여, VR 컨텐츠에 대한 사용 평가를 수행할 수 있으며, 수집된 데이터를 디스플레이가 가능 장치로 제공할 수 있다(340).
본 발명에서는 바람직하게 HMD(110)가 디스플레이 장치로 사용될 수 있으나 이에 한정하지 않으며, 수신된 데이터는 개인 건강 대시보드로 표시 되어 사용자가 한눈에 확인 가능한 정보로 제공될 수 있다(350).
이때, 사용자의 계정 정보는 컴퓨터 단말(120) 내에 존재하지만, VR 컨텐츠에 대한 이용 이력이 존재하지 않거나, 사용자 입력에 의해 과거 이력이 존재하는 VR 컨텐츠가 아닌 다른 VR 컨텐츠에 대한 이용을 요청하는 입력을 수신하는 경우, 컴퓨터 단말(120)은 컨텐츠에 대한 리스트를 제공할 수 있다(360).
이하, 도 4를 참조하여, 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템의 오디오 센서가 좌우 오디오를 판별하는 알고리즘에 대해 구체적으로 설명한다.
본 발명의 일 실시예에 따르는, 좌식장치(100)는 도 1에 도시된 바와 같이, 사용자의 왼손 및 오른손과 대응하는 위치에 컴퓨터 단말(120)로 입력 신호를 제공할 수 있는 오디오 센서(130)를 구비할 수 있다.
오디오 센서(130)는 특정 대상이 타악됨으로써 발생되는 사운드를 수집할 수 있으며, 좌, 우 핸들(140)의 위치에 구비되어, 방향에 대한 판단이 가능할 수 있다.
즉, 오디오 센서(130)로 타악되어 발생하는 사운드가 수집되는 경우, 오디오 센서(130)는 해당 사운드가 발생한 지점이 왼쪽인지, 오른쪽인지를 판단할 수 있다.
사운드가 발생한 지점이 왼쪽인지에 대해 판단하여 왼쪽인 경우 왼쪽으로 카운트하고, 오른쪽인 경우 오른쪽으로 카운트 할 수 있다(410 ~ 430).
오디오 센서(130)는 수집된 사운드를 컴퓨터 단말(120)로 제공할 수 있으며, 컴퓨터 단말(120)은 수집된 사운드를 가공하는 전처리를 수행하고, VR 컨텐츠에 의해 제공된 리듬과 수집되는 사운드를 판별 비교 처리할 수 있다(450).
이후, 컴퓨터 단말(120)은 해당 사운드를 분석하고 후처리하여, 사용할 수 있으며, 지속적으로 사운드를 수집되는 경우, (410) 단계부터 해당 단계까지 반복 수행할 수 있다(460).
오디오 센서(130)가 사운드를 수집하는 경우, 본 발명의 일 실시예에 따르는, 좌식장치(100)에 구비된, 사용자의 손 위치에 구비되는 가속도 센서를 통해 사용자의 손의 이동속도를 추가로 수집할 수 있으며, 컴퓨터 단말(120)은 손의 이동속도와 사운드가 발생된 위치, 사운드 수집시각을 기초로, VR컨텐츠에서 타악을 명령한 시각, VR컨텐츠에서 명령한 타악 패턴을 비교하여 사용자의 순발력 및 운동력을 판단할 수 있다.
판단 결과, 복수의 순발력 및 운동력에 대한 값들의 평균 값이 기 설정된 기준치 이하인 경우 해당 VR 컨텐츠의 레벨을 조정하거나, 다른 VR 컨텐츠를 추천할 수 있으며, 경고 알림을 제공할 수 있다.
이하, 도 5를 참조하여 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템의 충격식 발판의 발 구동 체크 알고리즘에 대해 구체적으로 설명한다.
본 발명의 일 실시예에 따르는, 좌식장치(100)는 상기 사용자의 입력을 수신하기 위해 발판으로부터 돌출 형성된 충격 센서를 구비하는 충격식 발판(150)을 구비할 수 있다.
충격식 발판은(150), 사용자의 왼발 및 오른발에 대응하는 위치에 별도의 구동계를 구비하되, 사용자의 양 발이 터치되는 시간 간격 및 충격식 발판을 가압하는 압력에 따라, 상이한 입력정보를 컴퓨터 단말(120)로 제공할 수 있다.
즉, 충격식 발판(150)에 충격 또는 가압하는 사용자 입력이 수신되면, 왼발 및 오른발에 대응하는 위치에 별도로 구비된 구동계에 의해 왼발인지 오른발인지에 대한 판단이 수행될 수 있다.
왼쪽으로 판단되는 경우, 왼발의 움직임을 카운트(530)할 수 있으며, 오른쪽으로 판단되는 경우, 오른발의 움직임을 카운트(530)할 수 있다(510, 520).
충격신 발판(150)은 카운트 된 입력에 대해 어느 정도 충격 또는 가압이 되었는지에 대한 정보를 컴퓨터 단말(120)로 제공할 수 있으며, 추가적인 사용자 입력이 수신되는 경우, (510)단계부터 해당 단계까지를 반복 수행할 수 있다(540).
이때, 충격량 또는 가압의 정도에 따라 파워가 결정될 수 있으며, 움직임이 카운트 되는 (530) 단계에서는 사용자 입력이 수신된 시간 간격(예를 들어 왼발의 움직임에 대한 입력이 수신된 후 오른발의 움직임에 대한 입력이 수신되기 까지의 시간 간격)을 추가로 수집할 수 있으며, 해당 정보를 통해 속도가 결정될 수 있다.
결정된 파워 및 속도에 기초하여, VR 컨텐츠의 변화가 수행될 수 있다.
도 6 내지 7은, 본 발명의 일 실시예에 따르는, VR 컨텐츠를 이용한 사용자 운동기구 시스템의 VR 컨텐츠에 대한 예시도 이다.
도 6에 도시된 바와 같이 은행 업무에 관련한 VR 컨텐츠가 존재할 수 있으며, 도 7에 도시된 바와 같이 버스탑승에 대한 VR 컨텐츠가 제공될 수 있다.
상술한, 은행 업무 및 버스 탑승에 대한 VR 컨텐츠를 본 발명의 일 실시예를 설명하기 위한 예시일 뿐, 이에 한정하지 않으며, 본 발명의 목적을 달성하기 위한 다양한 형태의 VR 컨텐츠가 제공될 수 있음은 당업자에게 매우 자명한 사항이다.
각 컨텐츠 별로 하나 이상의 평가 요소를 확인할 수 있도록 구비되어 있으며, 정보에 대한 기억, 특정 사물에 대한 인지 및 수행해야 하는 행동에 대한 인지 등을 테스트할 수 있는 컨텐츠로 구성될 수 있으며, 대체로 기억력, 집중력 및 인지력에 대한 평가요소를 구비할 수 있다.
각 컨텐츠에 대한 설명은 도 8 내지 도9를 참조하여 후술한다.
VR 컨텐츠는, 복수의 명령 이벤트와 각 명령 이벤트에 대응하는 정답행동정보를 포함하며, 각 명령 이벤트마다 기억력, 집중력 및 인지력 중 어느 하나 이상의 평가요소가 지정되어 있으며, 사용자가 명령 이벤트에 대해 수행한 행동의 결과값과 정답행동정보를 비교하여 평가요소에 대한 점수를 부여하고, VR컨텐츠 이용이 종료될 시 대시 보드를 통해 각 평가요소 별 점수를 제공할 수 있다.
이때, 컴퓨터 단말(120)은 좌식장치(110)로부터, 수신되는 입력 신호가 VR 컨텐츠에 대응하는 입력 신호인 경우, 평가 요소에 대한 사용자의 반응 점수를 반영하고, 저장할 수 있다.
도 8을 참조하면, 본 발명의 일 실시예에 따르는 시스템의 VR 컨텐츠 중 버스 탑승에 대한 컨텐츠의 시나리오 이다.
버스 탑승에 대한 컨텐츠는 도 8에 도시된 바와 같이, 복수의 이벤트로 구성되어 있으며, 각 이벤트 마다, 정답행동정보를 포함하고 있다.
각 이벤트마다 하나 이상의 평가요소에 대한 내용이 포함되어 있으며, 특정 이벤트에 대해 정답행동정보에 일치하는 사용자 입력이 수신되면, 해당 이벤트를 정상적으로 처리한 것으로 다음 이벤트가 제공될 수 있으며, 정답행동정보에 일치하지 않는 사용자 입력이 수신되는 경우, 해당 이벤트를 반복적으로 제공할 수 있다.
도 9을 참조하면, 본 발명의 일 실시예에 따르는 시스템의 VR 컨텐츠 중 은행 업무에 대한 컨텐츠의 시나리오 이다.
도 8에 도시된 버스 탑승에 대한 컨텐츠와 동일하게, 복수의 이벤트로 구성되어 있으며, 각 이벤트 마다 하나 이상의 평가요소와 정답행동정보를 포함할 수 있다.
각각의 VR 컨텐츠는, 레벨에 따라 이벤트의 내용이 상이하게 제공될 수 있다.
예를 들어, 버스 탑승 컨텐츠의 경우, 도 8에 도시된 내용 이외에, 더 높은 레벨에서는 환승이라는 과정이 추가될 수 있으며, 버스 번호가 복잡한 버스를 탑승해야 하거나, 유사한 번호를 가진 버스가 다수 존재하는 방식이 될 수 있다.
이하에서, 도 10을 참조하여, 본 발명의 일 실시예에 따르는, 컴퓨터 단말에 의해 수행되는 VR 컨텐츠를 이용한 사용자 운동 제공 방법에 대해 구체적으로 설명한다.
본 발명의 일 실시예에 따르는, 컴퓨터 단말(120)은, 복수의 시용자의 얼굴에 대해 딥러닝을 수행하여, 각 사용자에 대한 계정을 생성할 수 있다(S610).
특정 사용자의 얼굴이 인식되는 경우, 해당 사용자의 얼굴에 대응하는 계정정보를 매칭하여, 사용자 계정으로 로그인 할 수 있다.
이후, 뇌파검사 장치를 통해 뇌파 테스트를 수행하여, 뇌파 신호를 추출하여 수집할 수 있다(S620).
이때, 수집되는 사용자의 뇌파 신호는 로그인한 사용자의 계정에 사용자 정보로 수집되어 저장될 수 있으며, 실시간으로 지속 수집될 수 있다.
컴퓨터 단말(120)은 VR 컨텐츠를 사용자에게 제공하는 HMD를 통해 사용자에게 VR 컨텐츠 리스트를 제공하고, 뇌파 신호 값에 기초하여, 제공할 VR 컨텐츠 및 상기 VR 컨텐츠의 레벨을 선택할 수 있다(S630).
VR 컨텐츠와 해당 VR 컨텐츠의 레벨은 사용자의 뇌파 신호 값에 기초하여 선정되되, 사용자의 과거 이용 이력이 존재하는 경우, 과거 이용 이력을 고려하여 선정될 수 있다.
VR 컨텐츠가 제공되는 동안, 좌식장치로부터 사용자 입력 신호를 수신하고, 입력 신호에 기초하여 VR 컨텐츠의 내용과 비교하여 평가 요소에 대한 반응 점수를 저장할 수 있다(S640).
이때, 좌식 장치(100)는, 좌, 우 휠 핸들(140)을 기반으로 사용자의 움직임에 대한 입력신호를 수신하고 사용자의 운동량에 대한 변화를 컴퓨터 단말(120)으로 제공할 수 있다.
또한, VR 컨텐츠는, 사용자의 인지장애에 대한 테스트 및 훈련을 위한 컨텐츠이며, 각 컨텐츠 별로 메인 이벤트가 설정되어 있으며, 목표를 수행하기 위해 단계별 서브 이벤트가 설정되되, 현재 서브 이벤트를 성공하는 경우, 다음 서브 이벤트를 제공하고, 현재 서브 이벤트를 실패하는 경우, 실패한 서브 이벤트를 반복하여 제공할 수 있다.
본 발명의 일 실시예는 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행 가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비 휘발성 매체, 분리형 및 비 분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비 휘발성, 분리형 및 비 분리형 매체를 모두 포함한다.
본 발명의 방법 및 시스템은 특정 실시예와 관련하여 설명되었지만, 그것들의 구성 요소 또는 동작의 일부 또는 전부는 범용 하드웨어 아키텍쳐를 갖는 컴퓨터 시스템을 사용하여 구현될 수 있다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100: 좌식 장치 110: HMD
120: 컴퓨터 단말 130: 오디오 센서
140: 좌, 우 핸들 150: 충격식 발판

Claims (17)

  1. VR 컨텐츠를 이용한 사용자 훈련 시스템에 있어서,
    좌, 우 휠 핸들을 기반으로 사용자의 움직임에 대한 입력신호를 수신하고 사용자의 운동량에 대한 변화를 제공해주는 휠체어 형태의 좌식 장치;
    상기 좌식장치를 제어하고 상기 좌식장치로부터 수신한 입력신호를 기반으로 VR 컨텐츠의 변화를 제어하는 컴퓨터 단말; 및
    상기 컴퓨터 단말에 의해 제어되며, 상기 사용자가 착용이 가능하도록 구비되어 상기 VR컨텐츠를표시하는 HMD(Head Mounted Display);를 포함하며,
    상기 좌식 장치는, 좌, 우 휠 핸들에 타악에 의해 상기 컴퓨터 단말로 입력 신호를 제공할 수 있는 오디오 센서 및 상기 사용자의 입력을 수신하기 위해 발판으로부터 돌출 형성된 충격 센서를 구비하는 충격식 발판을 포함하는 것이고,
    상기 컴퓨터 단말은, 상기 VR 컨텐츠에 대응하는 상기 좌식 장치로부터 수신하는 입력 신호에 따라, 평가요소를 수집하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템.
  2. 제 1 항에 있어서,
    상기 컴퓨터 단말은,
    상기 사용자의 얼굴을 인식할 수 있는 카메라 모듈을 더 포함할 수 있으며,
    상기 사용자의 얼굴을 인식하여, 상기 사용자의 계정을 생성하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템.
  3. 제 2 항에 있어서,
    상기 컴퓨터 단말은,
    복수의 사용자 계정에 대해 각 사용자에 대응하는 뇌파 테스트의 결과 값을 매칭하여, 상기 VR 컨텐츠를 제공하기 위한 사용자의 상태정보를 모델링 하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템.
  4. 제 1 항에 있어서,
    상기 시스템은,
    사용자의 머리에 연결되어 뇌파 신호 값을 수집하기 위한, 뇌파검사 장치를 더 포함하되,
    실시간으로 수집되는 뇌파 신호 값을 상기 컴퓨터 단말로 제공하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템.
  5. 제 4 항에 있어서,
    상기 뇌파 신호 값은,
    상기 HMD를 통해 상기 사용자에게 복수의 VR 컨텐츠 중 어느 하나를 선택할 수 있는 컨텐츠 리스트에 대한 정보를 제공하는 시점에서, 수집되는 값이며,
    상기 복수의 VR 컨텐츠들 중 사용자의 뇌파 신호 값의 변화 폭이 가장 큰 VR 컨텐츠를 자동으로 선택하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템.
  6. 제 5 항에 있어서,
    상기 컴퓨터 단말은,
    각 VR 컨텐츠에 대한 미리 보기 또는 상세정보 제공화면이 사용자에게 제공된 후,
    상기 수집되는 뇌파 신호 값에 따라,
    동일한 VR 컨텐츠 내 복수의 레벨이 있는 경우,
    제공될 VR 컨텐츠의 레벨을 자동으로 산정하되, 상기 뇌파 신호의 변화 폭이 클수록 높은 레벨로 산정하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템.
  7. 제 6 항에 있어서,
    상기 사용자가 특정 VR 컨텐츠에 대한 이용 이력이 존재하는 경우,
    상기 레벨을 산정함에 있어서,
    상기 이용 이력을 추가로 고려하여 산정하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템.
  8. 제 1 항에 있어서,
    상기 좌식장치에서 수신된 상기 좌, 우 휠 핸들을 제어하는 사용자의 입력신호에 따라, 상기 좌식 장치가 좌 또는 우로 제자리 회전하고, 상기 VR 컨텐츠가 좌 또는 우 방향에 대응되는 컨텐츠로 변화하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템.
  9. 제 1 항에 있어서,
    상기 충격식 발판은,
    상기 사용자의 왼발 및 오른발에 대응하는 위치에 별도의 구동계를 구비하되,
    상기 사용자의 양 발이 터치되는 시간 간격 및 상기 충격식 발판을 가압하는 압력에 따라, 상이한 입력정보를 상기 컴퓨터 단말로 제공하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템.
  10. 제 1 항에 있어서,
    상기 VR 컨텐츠는, 복수의 명령 이벤트와 각 명령 이벤트에 대응하는 정답행동정보를 포함하며,
    각 명령 이벤트마다 기억력, 집중력 및 인지력 중 어느 하나 이상의 평가요소가 지정되어 있으며,
    사용자가 명령 이벤트에 대해 수행한 행동의 결과값과 상기 정답행동정보를 비교하여 상기 평가요소에 대한 점수를 부여하고,
    상기 VR컨텐츠 이용이 종료될 시 대시 보드를 통해 각 평가요소 별 점수를 제공하는,
    VR 컨텐츠를 이용한 사용자 훈련 시스템.
  11. 제 10 항에 있어서,
    상기 컴퓨터 단말은,
    상기 좌식장치로부터, 수신되는 입력 신호가 상기 VR 컨텐츠에 대응하는 입력 신호인 경우, 상기 평가 요소에 대한 상기 사용자의 반응 점수를 반영하고, 저장하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템.
  12. 제 1 항에 있어서,
    상기 좌식 장치는,
    상기 사용자의 손 위치에 구비되는 가속도 센서를 더 포함할 수 있으며,
    상기 가속도 센서는, 상기 사용자의 손의 이동속도를 측정하여, 상기 컴퓨터 단말로 제공하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템.
  13. 제 12 항에 있어서,
    오디오 센서를 통하여 사용자의 손에 특정 대상이 타악함으로써 발생되는 사운드를 수집하고,
    상기 손의 이동속도와 상기 사운드가 발생된 위치, 사운드 수집시각을 기초로, 상기 VR컨텐츠에서 타악을 명령한 시각, 상기 VR컨텐츠에서 명령한 타악 패턴을 비교하여 사용자의 순발력 및 운동력을 판단하고,
    판단된 복수의 순발력 및 운동력에 대한 값들의 평균 값이 기 설정된 기준치 이하인 경우, 다른 VR컨텐츠를 추천하거나 경고 알림을 제공하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템.
  14. VR 컨텐츠를 이용한 사용자 훈련 시스템에 의해 수행되는 VR 컨텐츠를 이용한 사용자 훈련 제공 방법에 있어서,
    (a) 복수의 사용자의 얼굴에 대해 딥러닝을 수행하고, 각 사용자에 대한 계정을 생성하는 단계;
    (b) 뇌파 테스트를 통해 추출한 신호 값을 수집하는 단계;
    (c) VR 컨텐츠를 제공하는 HMD를 통해 상기 사용자에게 VR 컨텐츠 리스트를 제공하고, 뇌파 신호 값에 기초하여, 제공할 VR 컨텐츠 및 상기 VR 컨텐츠의 레벨을 선택하는 단계; 및
    (d) 좌식장치로부터 사용자 입력 신호를 수신하고, 상기 입력 신호에 기초하여 평가 요소에 대한 반응 점수를 저장하는 단계; 를 포함하되,
    상기 시스템은,
    좌, 우 휠 핸들을 기반으로 사용자의 움직임에 대한 입력신호를 수신하고 사용자의 운동량에 대한 변화를 제공해주는 휠체어 형태의 상기 좌식 장치;
    상기 좌식장치를 제어하고 상기 좌식장치로부터 수신한 입력신호를 기반으로 VR 컨텐츠의 변화를 제어하는 컴퓨터 단말; 및
    상기 컴퓨터 단말에 의해 제어되며, 상기 사용자가 착용이 가능하도록 구비되어 상기 VR컨텐츠를표시하는 상기 HMD(Head Mounted Display);를 포함하며,
    상기 좌식 장치는, 좌, 우 휠 핸들에 타악에 의해 상기 컴퓨터 단말로 입력 신호를 제공할 수 있는 오디오 센서 및 상기 사용자의 입력을 수신하기 위해 발판으로부터 돌출 형성된 충격 센서를 구비하는 충격식 발판을 포함하는 것이고,
    상기 컴퓨터 단말은, 상기 VR 컨텐츠에 대응하는 상기 좌식 장치로부터 수신하는 입력 신호에 따라, 평가요소를 수집하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템에 의해 수행되는 VR 컨텐츠를 이용한 사용자 훈련 제공 방법.
  15. 삭제
  16. 제 14 항에 있어서,
    상기 VR 컨텐츠는,
    상기 사용자의 인지장애에 대한 테스트 및 훈련을 위한 컨텐츠인 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템에 의해 수행되는 VR 컨텐츠를 이용한 사용자 훈련 제공 방법.
  17. 제 16 항에 있어서,
    상기 VR 컨텐츠는,
    각 컨텐츠 별로 메인 이벤트가 설정되어 있으며, 목표를 수행하기 위해 단계별 서브 이벤트가 설정되되,
    현재 서브 이벤트를 성공하는 경우, 다음 서브 이벤트를 제공하고, 현재 서브 이벤트를 실패하는 경우, 실패한 서브 이벤트를 반복하여 제공하는 것인,
    VR 컨텐츠를 이용한 사용자 훈련 시스템에 의해 수행되는 VR 컨텐츠를 이용한 사용자 훈련 제공 방법.
KR1020190058055A 2019-05-17 2019-05-17 뇌파측정과 vr 컨텐츠를 기초로 한 시니어 훈련 시스템 KR102033517B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190058055A KR102033517B1 (ko) 2019-05-17 2019-05-17 뇌파측정과 vr 컨텐츠를 기초로 한 시니어 훈련 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190058055A KR102033517B1 (ko) 2019-05-17 2019-05-17 뇌파측정과 vr 컨텐츠를 기초로 한 시니어 훈련 시스템

Publications (1)

Publication Number Publication Date
KR102033517B1 true KR102033517B1 (ko) 2019-10-18

Family

ID=68462640

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190058055A KR102033517B1 (ko) 2019-05-17 2019-05-17 뇌파측정과 vr 컨텐츠를 기초로 한 시니어 훈련 시스템

Country Status (1)

Country Link
KR (1) KR102033517B1 (ko)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111544882A (zh) * 2020-04-30 2020-08-18 天津大学 一种基于脑机接口的新型脑卒中下肢主动康复系统及应用
KR20210048740A (ko) * 2019-10-24 2021-05-04 (주) 지일 치매환자의 기억을 기반으로 하는 빅데이터 분석을 통한 치매환자 치료 장치 및 방법
KR20210079204A (ko) * 2019-12-19 2021-06-29 인제대학교 산학협력단 인지자극 시스템 및 방법
KR20210106634A (ko) * 2020-02-21 2021-08-31 주식회사 에스와이이노테크 우울증 및 불면증 해소를 위한 vr기반 인지 훈련 시스템
KR20210157929A (ko) * 2020-06-22 2021-12-30 주식회사 휴메닉 운동 병합형 가상현실 기반 인지재활 훈련 시스템 및 방법
KR20210157930A (ko) * 2020-06-22 2021-12-30 주식회사 휴메닉 비대면형 인지 및 운동 재활 훈련 시스템 및 방법
KR20220012551A (ko) * 2020-07-23 2022-02-04 계명대학교 산학협력단 가상현실 또는 비디오 게임 기반의 운동 재활 중 뇌파를 통한 집중력 측정을 이용한 집중력 피드백 운동 시스템 및 그 이용 방법
WO2023140453A1 (ko) * 2022-01-19 2023-07-27 서울대학교병원 운동 장애 관련 정보제공방법 및 이에 사용되는 장치
KR20240029921A (ko) 2022-08-29 2024-03-07 주식회사 에스와이이노테크 복합 생체신호 처리 기반 vr 기기를 활용한 스마트 인지코칭서비스 시스템
KR102651985B1 (ko) 2022-09-19 2024-03-26 배재대학교 산학협력단 가상 현실 기반 이동보조기기 체험 시스템

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08280762A (ja) * 1995-04-17 1996-10-29 Ken Hirokawa 脳機能障害者に対するリハビリテーションおよび診断装置
WO2011004114A1 (fr) * 2009-07-08 2011-01-13 Electricite De France Simulateur de parcours en fauteuil roulant
KR20170014050A (ko) * 2015-07-28 2017-02-08 재단법인대구경북과학기술원 가상 현실 기반의 개인 맞춤용 캡슐형 힐링 장치
KR101777755B1 (ko) * 2016-06-27 2017-09-26 이종민 가상 현실을 이용한 재활훈련 장치 및 그 방법
KR20180124357A (ko) * 2017-05-11 2018-11-21 한승우 뇌파 감지를 기반으로 하는 인지 재활 훈련 시스템
KR101962258B1 (ko) * 2017-12-20 2019-03-26 고려대학교 산학협력단 뇌파 기반의 인지력 검사장치 및 그 방법

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08280762A (ja) * 1995-04-17 1996-10-29 Ken Hirokawa 脳機能障害者に対するリハビリテーションおよび診断装置
WO2011004114A1 (fr) * 2009-07-08 2011-01-13 Electricite De France Simulateur de parcours en fauteuil roulant
KR20170014050A (ko) * 2015-07-28 2017-02-08 재단법인대구경북과학기술원 가상 현실 기반의 개인 맞춤용 캡슐형 힐링 장치
KR101777755B1 (ko) * 2016-06-27 2017-09-26 이종민 가상 현실을 이용한 재활훈련 장치 및 그 방법
KR20180124357A (ko) * 2017-05-11 2018-11-21 한승우 뇌파 감지를 기반으로 하는 인지 재활 훈련 시스템
KR101962258B1 (ko) * 2017-12-20 2019-03-26 고려대학교 산학협력단 뇌파 기반의 인지력 검사장치 및 그 방법

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102358741B1 (ko) * 2019-10-24 2022-02-07 (주) 지일 치매환자의 기억을 기반으로 하는 빅데이터 분석을 통한 치매환자 치료 장치 및 방법
KR20210048740A (ko) * 2019-10-24 2021-05-04 (주) 지일 치매환자의 기억을 기반으로 하는 빅데이터 분석을 통한 치매환자 치료 장치 및 방법
KR102528192B1 (ko) 2019-12-19 2023-05-04 인제대학교 산학협력단 인지자극프로그램 출력 시스템 및 방법
KR20210079204A (ko) * 2019-12-19 2021-06-29 인제대학교 산학협력단 인지자극 시스템 및 방법
KR102355511B1 (ko) * 2020-02-21 2022-01-25 주식회사 에스와이이노테크 Vr기반 인지 훈련 시스템
KR20210106634A (ko) * 2020-02-21 2021-08-31 주식회사 에스와이이노테크 우울증 및 불면증 해소를 위한 vr기반 인지 훈련 시스템
CN111544882A (zh) * 2020-04-30 2020-08-18 天津大学 一种基于脑机接口的新型脑卒中下肢主动康复系统及应用
KR20210157930A (ko) * 2020-06-22 2021-12-30 주식회사 휴메닉 비대면형 인지 및 운동 재활 훈련 시스템 및 방법
KR102430066B1 (ko) 2020-06-22 2022-08-08 주식회사 휴메닉 비대면형 인지 및 운동 재활 훈련 시스템 및 방법
KR102430067B1 (ko) * 2020-06-22 2022-08-08 주식회사 휴메닉 운동 병합형 가상현실 기반 인지재활 훈련 시스템 및 방법
KR20210157929A (ko) * 2020-06-22 2021-12-30 주식회사 휴메닉 운동 병합형 가상현실 기반 인지재활 훈련 시스템 및 방법
KR20220012551A (ko) * 2020-07-23 2022-02-04 계명대학교 산학협력단 가상현실 또는 비디오 게임 기반의 운동 재활 중 뇌파를 통한 집중력 측정을 이용한 집중력 피드백 운동 시스템 및 그 이용 방법
KR102365613B1 (ko) * 2020-07-23 2022-02-21 계명대학교 산학협력단 가상현실 또는 비디오 게임 기반의 운동 재활 중 뇌파를 통한 집중력 측정을 이용한 집중력 피드백 운동 시스템 및 그 이용 방법
WO2023140453A1 (ko) * 2022-01-19 2023-07-27 서울대학교병원 운동 장애 관련 정보제공방법 및 이에 사용되는 장치
KR20240029921A (ko) 2022-08-29 2024-03-07 주식회사 에스와이이노테크 복합 생체신호 처리 기반 vr 기기를 활용한 스마트 인지코칭서비스 시스템
KR102651985B1 (ko) 2022-09-19 2024-03-26 배재대학교 산학협력단 가상 현실 기반 이동보조기기 체험 시스템

Similar Documents

Publication Publication Date Title
KR102033517B1 (ko) 뇌파측정과 vr 컨텐츠를 기초로 한 시니어 훈련 시스템
EP3384437B1 (en) Systems, computer medium and methods for management training systems
RU2646742C2 (ru) Система и способ перцептивно-когнитивно-моторного обучения
EP3618698A1 (en) Medical assessment based on voice
US11207011B2 (en) Systems and methods for assessing user physiology based on eye tracking data
US20220072380A1 (en) Method and system for analysing activity performance of users through smart mirror
US20130260357A1 (en) Skill Screening
KR20140027072A (ko) 인지 기능을 평가하는 시스템 및 방법
JP2011520207A (ja) 治療計画の立案を支援するシステム及び方法
US20190209069A1 (en) Vestibular testing
US20200058399A1 (en) Control method and reinforcement learning for medical system
Cabrera et al. Kinect as an access device for people with cerebral palsy: A preliminary study
KR102482933B1 (ko) 운동·인지 이중 과제 훈련 및 속도-정확도 관계 평가 시스템 및 장치
Augereau et al. Vocabulometer: A web platform for document and reader mutual analysis
CA2934003A1 (en) System and method for normalizing activity results
KR20230097332A (ko) 치매조기진단 시스템 및 이를 이용한 치매조기진단 방법
KR20190067069A (ko) Bci 시스템의 신뢰성 향상 방법
JP6961022B2 (ja) 読み書き能力のテスト方法及び装置
Sarker et al. Analysis of smooth pursuit assessment in virtual reality and concussion detection using bilstm
KR102598239B1 (ko) Ai 스피커를 이용한 매트 기반의 인지력/체력 향상게임 시스템 및 방법
Antico et al. A Virtual Assistant for Home Rehabilitation: the 2Vita-B Physical Project
KR102420261B1 (ko) 인지재활 훈련 시스템을 활용한 고스텝 훈련 시스템
KR102457450B1 (ko) 운동 영상의 운동 기록 측정 및 공유를 위한 장치 및 방법
EP4057295A1 (en) Method for establishing a communication path between a subject and a medical system
Ali et al. Development of Vision Screening Tool in Virtual Reality: A Usability Assessment Study

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant