KR102224188B1 - 클라우드 기반 인공지능을 활용하여 가상현실용 헬스케어 콘텐츠를 제공하기 위한 시스템 및 방법 - Google Patents
클라우드 기반 인공지능을 활용하여 가상현실용 헬스케어 콘텐츠를 제공하기 위한 시스템 및 방법 Download PDFInfo
- Publication number
- KR102224188B1 KR102224188B1 KR1020190178922A KR20190178922A KR102224188B1 KR 102224188 B1 KR102224188 B1 KR 102224188B1 KR 1020190178922 A KR1020190178922 A KR 1020190178922A KR 20190178922 A KR20190178922 A KR 20190178922A KR 102224188 B1 KR102224188 B1 KR 102224188B1
- Authority
- KR
- South Korea
- Prior art keywords
- user
- exercise
- data
- computer
- record data
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 41
- 230000036541 health Effects 0.000 title claims description 10
- 238000013473 artificial intelligence Methods 0.000 title description 3
- 230000005540 biological transmission Effects 0.000 claims abstract description 5
- 230000033001 locomotion Effects 0.000 claims description 22
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 claims description 14
- 229910052760 oxygen Inorganic materials 0.000 claims description 14
- 239000001301 oxygen Substances 0.000 claims description 14
- 230000008859 change Effects 0.000 claims description 11
- 230000001133 acceleration Effects 0.000 claims description 9
- 210000003205 muscle Anatomy 0.000 claims description 9
- 230000005856 abnormality Effects 0.000 claims description 7
- 238000004088 simulation Methods 0.000 claims description 6
- 230000004913 activation Effects 0.000 claims description 5
- 238000012544 monitoring process Methods 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims description 4
- 238000010801 machine learning Methods 0.000 claims description 3
- 230000002860 competitive effect Effects 0.000 abstract description 4
- 238000012545 processing Methods 0.000 description 16
- 230000006870 function Effects 0.000 description 14
- 230000000694 effects Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 230000003190 augmentative effect Effects 0.000 description 7
- 238000007654 immersion Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 208000013057 hereditary mucoepithelial dysplasia Diseases 0.000 description 6
- 230000006399 behavior Effects 0.000 description 5
- 239000008280 blood Substances 0.000 description 4
- 210000004369 blood Anatomy 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 230000001351 cycling effect Effects 0.000 description 4
- 208000002173 dizziness Diseases 0.000 description 4
- 230000003862 health status Effects 0.000 description 4
- 235000019577 caloric intake Nutrition 0.000 description 3
- 230000008450 motivation Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 239000013598 vector Substances 0.000 description 3
- WQZGKKKJIJFFOK-GASJEMHNSA-N Glucose Natural products OC[C@H]1OC(O)[C@H](O)[C@@H](O)[C@@H]1O WQZGKKKJIJFFOK-GASJEMHNSA-N 0.000 description 2
- 102100039981 Hairy and enhancer of split-related protein HELT Human genes 0.000 description 2
- 101001034987 Homo sapiens Hairy and enhancer of split-related protein HELT Proteins 0.000 description 2
- 208000008589 Obesity Diseases 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000007405 data analysis Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000008846 dynamic interplay Effects 0.000 description 2
- 239000008103 glucose Substances 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 235000020824 obesity Nutrition 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000009897 systematic effect Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 210000000577 adipose tissue Anatomy 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000009194 climbing Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 210000004247 hand Anatomy 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 235000015097 nutrients Nutrition 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 210000004243 sweat Anatomy 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
- 230000003442 weekly effect Effects 0.000 description 1
- 230000004580 weight loss Effects 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/22—Social work or social welfare, e.g. community support activities or counselling services
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B22/00—Exercising apparatus specially adapted for conditioning the cardio-vascular system, for training agility or co-ordination of movements
- A63B22/06—Exercising apparatus specially adapted for conditioning the cardio-vascular system, for training agility or co-ordination of movements with support elements performing a rotating cycling movement, i.e. a closed path movement
- A63B22/0605—Exercising apparatus specially adapted for conditioning the cardio-vascular system, for training agility or co-ordination of movements with support elements performing a rotating cycling movement, i.e. a closed path movement performing a circular movement, e.g. ergometers
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B23/00—Exercising apparatus specially adapted for particular parts of the body
- A63B23/035—Exercising apparatus specially adapted for particular parts of the body for limbs, i.e. upper or lower limbs, e.g. simultaneously
- A63B23/04—Exercising apparatus specially adapted for particular parts of the body for limbs, i.e. upper or lower limbs, e.g. simultaneously for lower limbs
- A63B23/0476—Exercising apparatus specially adapted for particular parts of the body for limbs, i.e. upper or lower limbs, e.g. simultaneously for lower limbs by rotating cycling movement
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
- A63B24/0062—Monitoring athletic performances, e.g. for determining the work of a user on an exercise apparatus, the completed jogging or cycling distance
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
- A63B24/0075—Means for generating exercise programs or schemes, e.g. computerized virtual trainer, e.g. using expert databases
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
- A63B24/0087—Electric or electronic controls for exercising apparatus of groups A63B21/00 - A63B23/00, e.g. controlling load
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
- A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
- A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
- A63B24/0087—Electric or electronic controls for exercising apparatus of groups A63B21/00 - A63B23/00, e.g. controlling load
- A63B2024/009—Electric or electronic controls for exercising apparatus of groups A63B21/00 - A63B23/00, e.g. controlling load the load of the exercise apparatus being controlled in synchronism with visualising systems, e.g. hill slope
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
- A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
- A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
- A63B2071/0638—Displaying moving images of recorded environment, e.g. virtual environment
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
- A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
- A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
- A63B2071/0638—Displaying moving images of recorded environment, e.g. virtual environment
- A63B2071/0644—Displaying moving images of recorded environment, e.g. virtual environment with display speed of moving landscape controlled by the user's performance
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
- A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
- A63B2071/0658—Position or arrangement of display
- A63B2071/0661—Position or arrangement of display arranged on the user
- A63B2071/0666—Position or arrangement of display arranged on the user worn on the head or face, e.g. combined with goggles or glasses
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2220/00—Measuring of physical parameters relating to sporting activity
- A63B2220/17—Counting, e.g. counting periodical movements, revolutions or cycles, or including further data processing to determine distances or speed
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2220/00—Measuring of physical parameters relating to sporting activity
- A63B2220/30—Speed
- A63B2220/34—Angular speed
- A63B2220/35—Spin
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2230/00—Measuring physiological parameters of the user
- A63B2230/04—Measuring physiological parameters of the user heartbeat characteristics, e.g. ECG, blood pressure modulations
Landscapes
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Physical Education & Sports Medicine (AREA)
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Tourism & Hospitality (AREA)
- General Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Marketing (AREA)
- Human Resources & Organizations (AREA)
- Economics (AREA)
- Orthopedic Medicine & Surgery (AREA)
- Theoretical Computer Science (AREA)
- Vascular Medicine (AREA)
- Cardiology (AREA)
- Databases & Information Systems (AREA)
- Software Systems (AREA)
- Optics & Photonics (AREA)
- Child & Adolescent Psychology (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Abstract
본 발명의 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 시스템은, 적어도 하나의 사용자 컴퓨터; 적어도 하나의 관리자 컴퓨터; 및 상기 적어도 하나의 사용자 컴퓨터와 적어도 하나의 관리자 컴퓨터 간의 데이터 송수신을 중개하는 클라우드 서버를 포함하되, 상기 사용자 컴퓨터는 생세신호 센서를 이용하여 측정한 사용자의 생체신호 및 회전 센서를 이용하여 측정한 실내운동기구의 시간당 회전수에 기초하여 운동기록 데이터를 생성하고, 상기 운동기록 데이터를 상기 클라우드 서버를 통해 상기 관리자 컴퓨터에 전송하고, 상기 관리자 컴퓨터로부터 맞춤형 헬스케어 데이터를 수신하여 상기 운동기록 데이터와 함께 디스플레이 상에 출력할 수 있다. 일 실시예에 따르면, 사용자는 운동기록 데이터를 분석한 결과에 따른 맞춤형 헬스케어 콘텐츠를 제공받을 수 있으며, 네트워크를 통해 연결된 다른 사용자들과 협력 또는 경쟁적인 운동 프로그램을 실시할 수 있다.
Description
본 발명은 클라우드 기반 헬스케어 콘텐츠 제공 시스템 및 방법에 관한 것으로서, 더욱 상세하게는 인공지능을 활용하여 사용자의 운동기록 데이터를 분석하고, 클라우드 서버를 통해 사용자에게 맞춤형 헬스케어 콘텐츠를 제공하기 위한 시스템 및 방법에 관한 것이다.
현대인들은 바쁜 생활에 비해 부족한 운동량, 과거에 비해 과도한 영양 섭취로 인해 비만율이 갈수록 증가하고 있다. 조깅이나 자전거 타기와 같은 야외운동은 신체능력 향상은 물론 체지방 감소를 통해 비만 문제를 해결할 수 있는 좋은 운동법이지만 날씨나 환경 등 외부요인에 영향을 받기 쉽고 현대인들의 주거 환경인 도심에서는 활동을 위한 장소도 마땅하지 않아 꾸준히 운동하기가 쉽지 않다.
실내용 고정식 자전거는 헬스장이나 집안에서 트레이닝용으로 사용되는 바닥에 고정된 채 바퀴만 회전하도록 구성된 자전거형 운동기구로서, 제자리에서 페달을 회전시켜 다리 근육과 지구력을 발달시킬 수 있다. 고정식 자전거는 좁은 공간에서도 탈 수 있을 뿐만 아니라 날씨나 외부환경에 영향을 받지 않기 때문에 안전하고 꾸준하게 즐길 수 있는 운동기구이다. 또한 속도와 저항을 조절하여 운동량을 결정할 수 있기 때문에 실외에서 타는 경우에 비해 사용자가 원하는 운동 강도로 수행하기에도 적합하다.
이러한 장점에도 불구하고, 실내용 자전거는 한정된 공간에서 혼자 운동할 수밖에 없어 사용자가 지루함을 느끼기 쉽다. 최근에는 이러한 단점을 극복하기 위해 고정식 자전거와 음악에 맞춘 안무 등을 결합한 새로운 형태의 운동법들이 소개되고 있으나 이 경우에도 자전거의 주행보다는 안무 등 다른 동작에 초점이 맞춰진 경우가 많다.
한편, 최근 엔터테인먼트 분야에서는 가상현실 기술을 활용한 체험형 프로그램이 각광받고 있다. 가상현실(Virtual Reality)이란 특정한 환경이나 상황을 컴퓨터 상으로 구현하여 사용자로 하여금 마치 실제 주변 상황 및 환경과 상호작용하는 것처럼 가상 체험할 수 있도록 하는 인간-컴퓨터 간 인터페이스를 의미한다. 가상현실 기술을 활용하여 사용자는 공간적·지리적 한계를 극복하여 어떠한 장소나 상황도 쉽게 체험할 수 있게 되었다.
최근에는 이러한 가상현실 기술을 스포츠 분야와 결합한 스크린 골프, 스크린 야구 등의 스포테인먼트(spotainment) 산업이 발달하고 있는데, 사용자가 제한된 현실 공간에서 운동을 수행하면 컴퓨터 상에 구현된 가상의 필드에 수행 결과가 반영될 수 있다(예를 들어, 사용자가 현실 공간에서 스윙을 하면, 스윙 속도나 공의 타점을 반영하여 가상공간에서 공이 날아감). 시간이 부족하고 운동 공간이 마땅치 않은 현대인들의 니즈를 반영하여 이와 같은 혼합형 시뮬레이션 게임 산업이 가파르게 성장하고 있다.
실감나는 체험을 위한 몰입형 가상현실은 일반적으로 헤드마운티드 디스플레이(Head-Mounted Display; HMD) 등의 웨어러블 장치를 이용해 구현된다. HMD는 디지털 영상을 실제 세계와 같이 입체로 볼 수 있게 해주는 착용형 디스플레이장치로서, 좌안과 우안에 각각 다른 영상을 출력하여 기존 모니터와는 다르게 영상의 입체감이 느껴질 수 있게 한다. HMD를 이용하면 기존 모니터에 비해 실감나는 가상현실을 체험할 수 있으며, 장치 내에 IMU 센서가 구비되어 사용자의 고개방향에 따라 대응하는 영상을 출력함으로써 보다 높은 몰입감을 제공할 수 있다.
이러한 가상현실 기술과 스포테인먼트 산업의 결합을 통해 실내 공간에서도 실감나게 운동을 즐길 수 있게 되었지만, 대부분의 VR 운동 프로그램은 전통적인 운동 방식에 비해 오락적인 특징이 강하여 체험형 비디오 게임을 제공하는데 그쳤으며 이를 통해 체계적인 운동 프로그램이 제공된 사례는 거의 없었다.
이에 본 발명의 목적은 고정 자전거와 같은 실내운동기구를 가상현실과 연동하여 실내에서도 마치 외부 환경에서 운동하는 것처럼 체험할 수 있게 하는 동시에, 클라우드 서버를 통해 인공지능 맞춤형 헬스케어 서비스를 제공함으로써 사용자의 체계적인 운동을 돕기 위한 것이다.
본 발명의 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 시스템은, 적어도 하나의 사용자 컴퓨터; 적어도 하나의 관리자 컴퓨터; 및 상기 적어도 하나의 사용자 컴퓨터와 적어도 하나의 관리자 컴퓨터 간의 데이터 송수신을 중개하는 클라우드 서버를 포함하되, 상기 사용자 컴퓨터는 생세신호 센서를 이용하여 측정한 사용자의 생체신호 및 회전 센서를 이용하여 측정한 실내운동기구의 시간당 회전수에 기초하여 운동기록 데이터를 생성하고, 상기 운동기록 데이터를 상기 클라우드 서버를 통해 상기 관리자 컴퓨터에 전송하고, 상기 관리자 컴퓨터로부터 맞춤형 헬스케어 데이터를 수신하여 상기 운동기록 데이터와 함께 디스플레이 상에 출력하도록 구성된다.
일 실시예에 따르면, 상기 관리자 컴퓨터는 인공지능 프로그램을 이용하여 상기 운동기록 데이터를 분석한 결과에 따라 생성된 맞춤형 헬스케어 데이터를 상기 사용자 컴퓨터에 전송하도록 구성될 수 있다.
일 실시예에 따르면, 상기 사용자의 생체신호는 사용자의 시간당 심박수를 포함하며, 상기 운동기록 데이터는 사용자의 현재 심박수, 최대 심박수, 운동강도, 실내운동기구의 회전속도, 운동시간, 이동거리 및 시간당 소모열량 중 적어도 하나를 포함할 수 있다.
일 실시예에 따르면, 상기 실내운동기구는 실내용 고정 자전거이고, 상기 회전 센서는 상기 고정 자전거의 페달 또는 바퀴에 부착되며, 상기 사용자 컴퓨터는 상기 페달 또는 바퀴의 분당 회전수(RPM)에 기초하여 실내운동기구의 회전속도를 계산할 수 있다.
일 실시예에 따르면, 상기 디스플레이는 헤드마운티드 디스플레이(HMD)이고, 상기 사용자 컴퓨터는 상기 운동기록 데이터가 반영된 가상현실 콘텐츠를 제공하도록 구성될 수 있다.
일 실시예에 따르면, 상기 가상현실 콘텐츠는 미리 저장된 가상의 자전거 코스를 상기 분당 회전수에 기초한 주행속도로 주행하는 시뮬레이션 영상을 포함할 수 있다.
일 실시예에 따르면, 상기 가상의 자전거 코스는 내리막 또는 오르막 경사지점을 포함하고, 상기 자전거 속도는 상기 경사지점의 지면 경사도 및 미리 입력된 사용자의 몸무게에 기초하여 조정될 수 있다.
일 실시예에 따르면, 상기 헤드마운티드 디스플레이는 내부에 IMU 센서를 포함하고, 상기 가상현실 콘텐츠에서 자전거의 진행방향은 상기 IMU 센서가 측정한 회전, 가속도, 또는 각속도에 기초하여 변경될 수 있다.
일 실시예에 따르면, 상기 생체신호는 사용자의 산소포화도 또는 근전도신호를 더 포함하며, 상기 운동기록 데이터는 시간에 따른 심박수의 산소포화도의 변화량 또는 근전도신호에 기초한 각 근육의 활성화 정도를 더 포함할 수 있다.
일 실시예에 따르면, 상기 클라우드 서버는 상기 운동기록 데이터 및 상기 맞춤형 헬스케어 데이터를 외부 저장장치에 저장하도록 구성될 수 있다.
일 실시예에 따르면, 상기 클라우드 서버는 저장된 데이터를 의료서비스 제공자 컴퓨터와 공유하고, 상기 의료서비스 제공자 컴퓨터는 상기 데이터에 기초하여 사용자의 건강상태를 모니터링한 결과 이상이 있는 것으로 판단된 경우, 보호자 또는 의료기관에 알림을 제공하도록 구성될 수 있다.
본 발명의 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 방법은, 생체신호 센서를 이용하여 사용자의 생체신호를 측정하는 단계; 회전 센서를 이용하여 실내운동기구의 시간당 회전수를 측정하는 단계; 사용자 컴퓨터 상에서, 상기 심박수 및 회전수에 기초하여 운동기록 데이터를 생성하는 단계; 상기 운동기록 데이터를 클라우드 서버를 통해 관리자 컴퓨터에 전송하는 단계; 상기 관리자 컴퓨터 상에서, 상기 운동기록 데이터에 대응하여 맞춤형 헬스케어 데이터를 생성하는 단계; 상기 맞춤형 헬스케어 데이터를 클라우드 서버를 통해 사용자 컴퓨터에 전송하는 단계; 및 상기 운동기록 데이터 및 상기 맞춤형 헬스케어 데이터를 디스플레이 상에 출력하는 단계를 포함한다.
일 실시예에 따르면, 상기 맞춤형 헬스케어 데이터를 생성하는 단계는, 인공지능 프로그램을 이용하여 상기 운동기록 데이터를 분석한 결과에 따라 맞춤형 헬스케어 데이터를 생성하는 단계를 포함할 수 있다.
일 실시예에 따르면, 상기 클라우드 서버를 통해 상기 운동기록 데이터 및 상기 맞춤형 헬스케어 데이터를 의료서비스 제공자 컴퓨터에 제공하는 단계; 및 상기 데이터에 기초하여 사용자의 건강상태를 모니터링한 결과 이상이 있는 것으로 판단된 경우, 보호자 또는 의료기관에 알림을 제공하는 단계를 더 포함할 수 있다.
실시예들에 따른 클라우드 기반 헬스케어 콘텐츠 제공 방법을 실행하기 위한, 컴퓨터로 판독 가능한 기록매체에 저장된 컴퓨터 프로그램이 제공될 수 있다.
본 발명의 일 실시예에 따르면, 실내운동기구에 부착된 센서를 통해 기구의 회전속도를 계산하고 운동기구와 가상현실간 실시간 연동을 구현한다. 즉, 사용자는 실내용 운동기구를 활용하여 마치 외부에 있는 것처럼 간접 체험할 수 있어 보다 즐겁게 운동을 수행할 수 있다.
본 발명의 일 실시예에 따르면, 미리 입력된 사용자 정보, 센서를 이용해 측정된 사용자의 생체신호, 실내운동기구의 회전수 등에 기초하여 운동기록 데이터를 생성하며, 인공지능 프로그램을 이용하여 이에 따른 맞춤형 헬스케어 데이터를 제공할 수 있다. 데이터의 분석 및 생성은 클라우드 서버를 통해 연결된 외부 관리자 컴퓨터에 의해 수행되므로 사용자는 최소한의 장비를 이용하여 맞춤형 헬스케어 서비스를 제공받을 수 있으며, 네트워크를 통해 연결된 다른 사용자들과 협력 또는 경쟁적인 운동 프로그램을 실시할 수 있다.
도 1은 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 시스템을 나타낸 구성도이다.
도 2는 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 시스템에서 사용자측 구성요소들을 나타낸 도면이다.
도 3은 또 다른 실시예에 따라 복수의 사용자 컴퓨터 및 복수의 관리자 컴퓨터로 구성되는 클라우드 기반 헬스케어 콘텐츠 제공 시스템을 나타낸 구성도이다.
도 4는 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 시스템에서 디스플레이 상에 출력되는 가상현실 화면을 나타낸 도면이다.
도 5는 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 시스템에서 디스플레이 상에 출력되는 운동기록 데이터를 나타낸 도면이다.
도 6 및 도 7은 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 방법을 나타낸 순서도이다.
도 2는 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 시스템에서 사용자측 구성요소들을 나타낸 도면이다.
도 3은 또 다른 실시예에 따라 복수의 사용자 컴퓨터 및 복수의 관리자 컴퓨터로 구성되는 클라우드 기반 헬스케어 콘텐츠 제공 시스템을 나타낸 구성도이다.
도 4는 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 시스템에서 디스플레이 상에 출력되는 가상현실 화면을 나타낸 도면이다.
도 5는 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 시스템에서 디스플레이 상에 출력되는 운동기록 데이터를 나타낸 도면이다.
도 6 및 도 7은 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 방법을 나타낸 순서도이다.
본 명세서에서 사용되는 용어는 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 명세서의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 가지는 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.
또한, 본 명세서에 기술된 실시예는 전적으로 하드웨어이거나, 부분적으로 하드웨어이고 부분적으로 소프트웨어이거나, 또는 전적으로 소프트웨어인 측면을 가질 수 있다. 본 명세서에서 "부(unit)", "모듈(module)", "장치(device)", "서버(server)" 또는 "시스템(system)" 등은 하드웨어, 하드웨어와 소프트웨어의 조합, 또는 소프트웨어 등 컴퓨터 관련 엔티티(entity)를 지칭한다. 예를 들어, 부, 모듈, 장치, 서버 또는 시스템은 플랫폼(platform)의 일부 또는 전부를 구성하는 하드웨어 및/또는 상기 하드웨어를 구동하기 위한 애플리케이션(application) 등의 소프트웨어를 지칭하는 것일 수 있다.
본 발명의 바람직한 실시예들은 도면에 제시된 순서도를 참조하여 설명된다. 간단히 설명하기 위하여 상기 방법은 일련의 블록들로 도시되고 설명되었으나, 본 발명은 상기 블록들의 순서에 한정되지 않고, 몇몇 블록들은 다른 블록들과 본 명세서에서 도시되고 기술된 것과 상이한 순서로 또는 동시에 일어날 수도 있으며, 동일한 또는 유사한 결과를 달성하는 다양한 다른 분기, 흐름 경로, 및 블록의 순서들이 구현될 수 있다. 또한, 본 명세서에서 기술되는 방법의 구현을 위하여 도시된 모든 블록들이 요구되지 않을 수도 있다. 나아가, 본 발명의 일 실시예에 따른 방법은 일련의 과정들을 수행하기 위한 컴퓨터 프로그램의 형태로 구현될 수도 있으며, 상기 컴퓨터 프로그램은 컴퓨터로 판독 가능한 기록 매체에 기록될 수도 있다.
이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 실시예를 상세하게 설명하지만, 청구하고자 하는 범위는 실시예들에 의해 제한되거나 한정되는 것은 아니다.
이하에서는 본 시스템을 구성하는 각 구성요소들의 기능과 결합관계에 대해 설명하지만, 이러한 구성요소들이 반드시 개별적인 소프트웨어나 하드웨어를 의미하는 것은 아니며, 각각의 구성요소들은 하나 이상의 프로세서 또는 하나 이상의 장치 상에서 독립적으로 또는 다른 장치와 결합하여 구현될 수 있다.
도 1은 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 시스템에 있어서, 단일 사용자 컴퓨터 및 단일 관리자 컴퓨터가 클라우드 서버를 통해 연결된 구성을 나타낸다. 도 1을 참조하면, 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 시스템은, 사용자 컴퓨터(10), 관리자 컴퓨터(20), 및 상기 사용자 컴퓨터(10)와 상기 관리자 컴퓨터(20) 간의 데이터 송수신을 중개하는 클라우드 서버(30)로 구성될 수 있다. 후술하는 바와 같이, 또 다른 실시예에 따른 시스템은 복수의 사용자 컴퓨터와 복수의 관리자 컴퓨터로 구성될 수 있으며, 도 3은 복수의 사용자 컴퓨터들(11, 12, 13, …) 및 복수의 관리자 컴퓨터들(21, 22, 23, …)이 클라우드 서버(30)를 통해 연결된 구성을 나타낸다.
본 명세서에서, 사용자는 실내운동기구를 이용하여 실제로 운동을 수행하는 사람으로서 맞춤형 헬스케어 콘텐츠의 제공 대상이다. 관리자는 맞춤형 헬스케어 콘텐츠를 제공하는 개인, 기업, 의료기관 등으로서, 클라우드 서버를 통해 사용자의 개인 운동기록데이터를 공유하고 이에 대한 알맞은 처방, 조언, 지시 등 맞춤 서비스를 제공한다.
사용자 컴퓨터(10)는 사용자 측에서 여러 신호를 수집하여 운동기록 데이터를 생성하고, 생성된 운동기록 데이터 및 이에 대한 헬스케어 데이터를 관리자 컴퓨터(20)와 송수신하도록 구성된다. 일 실시예에 따르면, 사용자 컴퓨터(10)는 생세신호 센서(101)를 이용하여 측정된 사용자의 생체신호(시간당 심박수, 산소포화도, 근전도신호 등)를 수신하고, 회전 센서(102)를 이용하여 측정된 실내운동기구의 시간당 회전수를 수신하여, 상기 데이터에 기초하여 운동기록 데이터(사용자의 현재 심박수, 최대 심박수, 운동강도, 실내운동기구의 회전속도, 운동시간, 이동거리, 시간당 소모열량 등)를 생성한다. 생성된 운동기록 데이터는 사용자 컴퓨터(10) 내 통신부(도시되지 않음)를 통해 클라우드 서버(30)에 업로드되고, 서버를 통해 상기 관리자 컴퓨터(20)와 상기 데이터를 공유할 수 있다.
도 2는 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 시스템에서 사용자측 시스템의 구성요소들을 나타낸 도면이다. 도 2를 참조하면, 사용자측 시스템은 사용자 컴퓨터(10), 생체신호 센서(101), 회전 센서(102), 디스플레이(103)로 구성될 수 있으며, 일 실시예에 따른 사용자 컴퓨터(10)는 콘텐츠 생성부(1001), 저장부(1002), 처리부(1003) 등의 구성요소를 포함할 수 있다.
생체신호 센서(101)는 사용자의 생체신호를 검출하여 운동기록 데이터를 생성하기 위해 이용된다. 일 실시예에 따르면, 생체신호 센서(101)는 사용자의 손목, 팔, 목 등의 신체부위에 착용 가능한 웨어러블 디바이스(wearable device) 형태일 수 있으며, 디바이스에 내장된 센서를 이용하여 심박수, 산소포화도, 근전도신호 등 사용자의 신체상태와 관련된 데이터를 측정한다. 측정된 생체신호 데이터는 사용자 컴퓨터(10)로 전송되어 처리부(1001)에서 시간에 따른 현재 심박수, 심박수에 따른 운동강도, 산소포화도의 변화량, 근전도신호에 기초한 각 근육의 활성화 정도 등 각종 운동기록 데이터를 생성하는데 이용된다. 또한, 최대 심박수(간단히, 220에서 사용자의 나이를 뺀 값으로도 계산할 수 있음) 대비 현재 심박수에 따라 운동강도를 산출하는데 이용될 수 있다. 이렇게 생성된 데이터는 저장부(1002)에 저장되거나 서버 DB로 전송되어 이후에 활용될 수 있다.
회전 센서(102)는 실내운동기구(1)의 일부 장치에 부착되어 상기 장치의 회전을 검출하도록 구성된다. 일 예에서, 실내운동기구(1)는 실내용 고정 자전거이고, 회전 센서(102)는 상기 고정 자전거의 페달 또는 바퀴 등의 장치에 결합되어 페달이나 바퀴가 회전할 때마다 이를 감지하여 카운트하도록 구성될 수 있다. 장치의 회전을 감지하는 원리는, 예를 들어 전자기 센서가 자전거의 바퀴 축이나 페달 축에 고정된 상태에서, 움직이는 바퀴나 페달에 설치된 자석이 상기 센서를 지날 때마다 발생하는 펄스를 감지하여 1회전을 인식하는 방식이다(예를 들어, MEGANE 사의 Gemini 210 사이클링 센서 등). 그러나 이는 하나의 예시일 뿐이며 예를 들어 적외선 레이저 송수신기(고정)와 반사기(이동)로 구성되어 적외선이 반사되어 돌아올 때마다 1회전을 인식하는 방식 등 다양한 형태의 센서가 이용될 수 있다.
이렇게 측정된 사용자의 생체신호 및 실내운동기구의 회전수는 사용자 컴퓨터(10)로 입력되며, 컴퓨터 내 처리부(1001)에 의해 사용자의 개인 운동기록 데이터를 생성하는데 이용된다. 실시예에 따르면, 운동기록 데이터는 사용자의 현재 심박수, 최대 심박수, 운동강도, 실내운동기구의 회전속도, 운동시간, 이동거리 및 시간당 소모열량 중 적어도 하나의 정보를 포함한다.
최대 심박수는 사용자의 평소 주기적인 운동 여부 또는 체력 등의 차이로 개인마다 오차범위가 존재하지만, 일반적으로 "220 - 자신의 나이" 공식을 통해 분당 최대 심박수를 계산할 수 있다(예컨대, 사용자의 나이가 30세라면 최대 심박수는 분당 190회이다). 이러한 산출 방법은 예시적인 것이므로 외부 의료기기 등을 활용하여 정확하게 측정된 개인의 최대 심박수를 사용자 컴퓨터에 미리 입력하도록 구성될 수도 있다.
현재 심박수는 웨어러블 디바이스에 내장된 생체신호 센서(101) 등을 이용하여 사용자의 분당 심박수를 실시간으로 측정한 결과이다. 이 데이터는 최대 심박수 데이터와 함께 현재 운동의 강도를 결정하는데 이용된다.
운동 강도는 사용자 연령대별 운동의 강도를 나타내는 지표가 되는 데이터로서 사용자의 운동 중 현재 심박수와 최대 심박수를 활용해 산출할 수 있다. 사용자의 최대 심박수에서 현재 심박수를 비율로 환산하여 Vo2Max 단위를 사용하는 퍼센트 형식으로 표현할 수 있으며, 간단하게는 Vo2Max의 범위에 따라 강, 중, 약으로 표현되기도 한다. 운동 강도를 산출하기 위한 기준으로 사용되는 최대 심박수에 나이가 포함되므로 사용자 연령대별로 데이터 수집이 가능하며 운동 목적에 따라서 적절한 운동 강도 목표값을 도출할 수 있다.
이와 같이 운동 강도를 측정하는 이유는, 사용자가 전문가의 전문적인 코칭 없이 혼자 운동하게 되면 지나치게 높은 강도로 운동을 수행하여 부상을 입는다거나, 적정수준보다 낮은 강도로 운동을 수행하여 운동효과를 얻지 못하는 경우가 많이 발생하기 때문이다. 따라서 심박수에 기초하여 현재 운동 강도를 데이터로 생성하여 관리자 컴퓨터로 전송하게 되며, 관리자는 사용자가 미리 설정한 운동 목적(체중감량, 근육량 증가 등) 또는 개인적인 질환 등의 요소를 고려하여 적절한 코칭을 제공할 수 있다. 예를 들어, 사용자의 연령을 기준으로 계산한 최대 심박수에 비해 현재 심박수가 지나치게 높을 경우(예컨대 95% 이상), 이러한 데이터를 수신한 관리자(피트니스 강사, 간병인, 의료진 등의 전문가)는 운동 강도를 낮출 것을 제안하는 메시지를 사용자에게 전송할 수 있다.
속도는 자전거 등의 실내용 운동기구의 바퀴의 회전 속도를 기준으로 산출한 가상의 이동 속도를 의미한다. 실내운동기구는 제자리에 고정되어 직접 이동하지는 않지만 가상현실 환경에서 회전 속도에 따라 가상의 자전거가 이동하는 콘텐츠가 제공되므로, 운동으로 인한 조작을 가상현실에 반영하기 위해 가상의 속도가 측정된다. 예를 들어, 고정자전거의 바퀴 회전 속도를 측정하기 위해 중국 MEGANE사의 Gemini 210 사이클링 센서가 사용될 수 있다. 프로세서는 가상현실 환경에서 실제로 주행을 하는 것과 같은 경험을 제공하기 위해, 센서에서 측정한 케이던스를 속도 값으로 변환하여 데이터로 제공한다. 케이던스란 자전거 페달 또는 바퀴의 시간당 회전수를 의미하며 단위는 RPM(분당 회전수)으로 측정할 수 있다. RPM을 분당 속도로 치환하는 공식을 통해(예를 들어, 자전거 바퀴의 원주에 분당 회전수를 곱함) 운동기구의 속도 값을 산출한다.
운동 시간은 사용자가 주행을 시작한 시점부터 측정되며 콘텐츠 화면상에 UI로 사용자에게 제공될 수 있다. 이동 거리는 가상환경에서 구현되는 가상의 자전거 코스를 따라 만들어진 경로를 사용자가 실제 주행한 거리이다. 운동기구의 속도에 운동 시간을 곱하여 산출할 수 있다.
시간당 소모열량은 미리 입력된 사용자 정보(나이, 체중, 성별 등)에 현재 운동 종목(실내운동기구의 종류에 따라 달라질 수 있음), 운동 강도, 운동 시간 등의 데이터를 합산하여 산출하게 된다.
위의 운동기록 데이터 항목들은 발명의 이해를 돕기 위한 예시에 불과하며, 발명의 이용 목적에 따라 다양한 추가 데이터를 수집 및 생성할 수 있다.
상기 운동기록 데이터는 사용자 컴퓨터(10)의 통신부를 통해 클라우드 서버(30)에 실시간으로 업로드될 수 있다. 클라우드 서버(30)는 기본적으로 사용자 컴퓨터(10)와 관리자 컴퓨터(20)가 데이터를 공유할 수 있도록 중개 서버의 역할을 수행하지만, 도 1에 도시된 것처럼 별도의 외부 저장장치(40)에 해당 데이터를 저장하여 사용자가 컴퓨터 외의 다른 단말기(스마트폰, 태블릿, 랩톱 등)에서 애플리케이션을 통해 저장된 데이터를 다운로드 할 수 있도록 클라우드 서비스를 제공한다.
전송된 생체 데이터(심박 수, 나이, 몸무게)와 운동량 데이터(케이던스)는 표준화를 통해 운동 강도, 최대 심박 수, 시간당 소모 열량, 속도, 거리, 운동 시간 데이터를 도출하는데 이용될 수 있으며, 콘텐츠 이용 후 클라우드를 통해 사용자 별로 구분된 데이터베이스에 수집될 수 있고, 수집된 데이터들은 그래프 등으로 도식화되어 사용자에게 실시간으로 제공되어 사용자에게 동기를 부여하고 운동관리 서비스를 제공하는데 이용될 수 있다.
도 1을 참조하면, 관리자 컴퓨터(20)는 상기 사용자의 개인 운동기록 데이터를 수신하고 이에 대응하여 적절한 헬스케어 데이터(맞춤형 헬스케어 콘텐츠)를 생성하고 클라우드 서버(30)를 통해 사용자 컴퓨터(10)에 전송한다. 일 실시예에 따르면, 헬스케어 데이터는 전문가(예컨대, 의료진, 피트니스 강사 등)가 관리자 컴퓨터(20)를 통해 직접 입력한 처방, 조언, 지시 등을 포함할 수 있다. 예를 들어, 사용자의 운동 목적이 지방 연소인데 현재 운동 강도가 너무 낮아 지방을 연소시키기에 부적합한 경우, 전문가는 "지방 연소를 위해 운동 강도를 높여 주세요"와 같은 메시지를 직접 입력하여 사용자 컴퓨터로 전송할 수 있다.
다른 실시예에 따르면, 헬스케어 데이터는 관리자 컴퓨터(20)에 설치된 인공지능 프로그램에 의해 운동기록 데이터를 분석하여 자동으로 생성될 수 있다. 이 경우 인공지능 프로그램은 전문적인 의학/피트니스 지식이 저장된 데이터베이스에 기초하여 사용자의 운동진행상황을 파악하고 도움이 될만한 처방, 조언, 지시 등을 포함한 헬스케어 콘텐츠를 제공할 수 있다. 추가적으로, 상기 인공지능 프로그램 및/또는 데이터베이스는 기계학습모델을 이용하여 자동 업데이트되도록 구성될 수 있다. 예를 들어, 사용자의 운동 목적이 건강 유지인데 사용자의 나이에 비해 현재 운동 강도가 너무 높거나 운동 시간이 일정 시간을 경과한 경우, 인공지능 프로그램은 데이터베이스에 기반하여 운동 목적과 현재 운동 강도가 부적합하다고 판단하여 사용자에게 "운동 강도를 낮춰주세요", 또는 "오늘 운동은 마칠 것을 권장합니다"와 같은 메시지를 자동으로 전송하도록 구성될 수 있다.
일 실시예에 따르면, 상기 클라우드 서버는 저장된 데이터를 의료서비스 제공자 컴퓨터와 공유하고, 상기 의료서비스 제공자 컴퓨터는 상기 데이터에 기초하여 사용자의 건강상태를 모니터링한 결과 이상이 있는 것으로 판단된 경우, 보호자 또는 의료기관에 알림을 제공하도록 구성될 수 있다. 예를 들어, 생체신호 센서에 의해 측정된 심박수가 정상 범위에서 벗어나거나 혈중 산소포화도, 혈당량 등의 수치가 비정상적인 것으로 판단될 경우, 의료서비스 제공자 컴퓨터(도시되지 않음)는 자동으로 보호자 또는 의료기관에 긴급 알림 메시지(예를 들어, "환자의 심박수가 비정상적으로 높습니다. 확인 바랍니다" 등)를 전송할 수 있다.
이와 같은 실시예에 따르면, 사용자에게 전문적인 헬스케어 코칭을 제공함과 동시에 사용자의 건강 상태를 실시간으로 모니터링함으로써, 사용자가 혼자 실내에서 운동 중 신체에 이상이 생긴 경우 빠르게 대처할 수 있다.
이상에서는 단일 사용자 컴퓨터와 단일 관리자 컴퓨터가 매칭되는 구조를 예로 들어 설명하였으나, 본 발명의 시스템은 복수의 사용자 컴퓨터와 복수의 관리자 컴퓨터가 매칭되는 구조에도 적용될 수 있다.
도 3을 참조하면, 제1 사용자 컴퓨터(11), 제2 사용자 컴퓨터(12), 제3 사용자 컴퓨터(13), … 가 제1 관리자 컴퓨터(21), 제2 관리자 컴퓨터(22), 제3 관리자 컴퓨터(23), …와 클라우드 서버(30)를 통해 네트워크 연결된 구성이 도시되어 있다. 이 경우, 복수의 사용자는 그룹을 구성하여 1명 또는 그 이상의 전문가들(예를 들어, 피트니스 강사, 간병인 등)에게 헬스케어 코칭을 받거나, 복수의 사용자끼리 경쟁적으로 가상현실 콘텐츠를 즐길 수도 있다.
복수의 사용자 간 멀티플레이 콘텐츠에 대해 설명하면, 콘텐츠는 멀티플레이가 가능하도록 네트워크를 구축하여 운동 중 동기부여와 몰입감을 제공한다. 네트워크는 클라우드 환경을 기반으로 하는 Photon Network API를 활용해 접속한 지역의 서버에서 생성된 공개 네트워크 룸을 검색하여 자동으로 사용자끼리 매칭되는 랜덤 매치메이킹 기능을 구현하며 Photon Server 클래스를 활용해 네트워크 지연율 보정, 마스터 클라이언트 권한 관리, 네트워크 객체 관리 및 데이터 전송 기능을 구현하여 구축된 네트워크 환경을 고도화시킨다. VR 콘텐츠 특성상 네트워크 환경에서 다른 사용자와 소통할 때 텍스트 방식을 사용하기 어려운 점을 인지하여 음성채팅 기능을 구현하며 그 기능을 세분화하여 공개채팅 방식, 지정 채팅 방식, 그룹 채팅 방식으로 나누어 기능이 구현될 수 있다.
네트워크가 연결되지 않은 환경에서는 FSM 알고리즘 기반 AI와 경쟁 기능을 통해 주행 중 동기부여와 몰입감을 제공할 수 있다. 유한 상태 기계(FSM: Finite State Machine) 알고리즘을 이용해 사용자와 경쟁하는 AI의 행동 패턴을 구현하며 이동 경로상 사용자와의 거리를 측정하여 거리 차이에 따라 일반 행동 패턴, 특수 행동 패턴을 분기하는 상세 기능을 구현한다. 일반 행동 패턴에서는 주기적으로 AI 자신의 현재 속도 기준 가속 및 감속구현으로 역동감 있는 주행 패턴 구현하며 주행 경로를 기준으로 3차원 Vector x축의 offset을 조정하여 주행 중 일렬 대형, 소산, 추월자를 회피하는 패턴을 구현한다. 특수 행동 패턴에서는 오르막길 또는 내리막길과 같이 경사도가 있는 경로를 지날 때 경사도에 따라 이동속도의 감속 및 가속을 적용하는 패턴을 구현하며 사용자와의 거리 차이에 따라 큰 폭으로 가속 및 감속을 하여 AI가 사용자를 추월하기 쉽고 사용자도 AI를 추월하기 편하도록 패턴을 구현한다. 실제 사이클 경주를 기반으로 공기저항에 따라 체력 및 속도의 손실이 커지는 현상을 사실적으로 구현하기 위해 일렬 대형, 소산 등의 그룹 라이딩 행동 패턴을 구현하며 일렬 대형에서 앞줄보다 뒷줄에서 주해하는 것이 상대적으로 체력 및 속도의 손실이 적은 점을 이용하여 사용자를 기준으로 앞줄과 뒷줄에서 주행하는 AI 그룹의 속도에 가중치를 적용한다.
다시 도 2를 참조하면, 디스플레이(103)는 사용자의 운동기록 데이터(예를 들어, 운동 시간, 운동 강도, 속도, 심박수 등), 이에 대한 맞춤형 헬스케어 데이터(예를 들어, "지방 연소를 위해 운동 강도를 높여 주세요"와 같은 어드바이스 메시지), 가상현실 콘텐츠(가상의 자전거 주행 풍경, 아바타 등)를 사용자에게 표시한다. 일 실시예에서, 디스플레이(103)는 도 2에 도시된 것처럼 사용자의 머리에 착용되어 가상현실 환경을 제공하기 위한 헤드마운티드 디스플레이(Head Mounted Display; HMD)일 수 있다. HMD는 기존의 모니터와는 달리 영상의 거리감이 느껴지도록 좌우의 영상이 다르게 표시되며 이를 통해 사용자가 입체감을 느낄 수 있는 것이 특징이다. 종전의 HMD는 군사용, 훈련용 등의 특수한 목적으로 활용되었으나 최근 디스플레이 기술의 발달로 소형화, 경량화 되면서 저가의 HMD가 상용화 되고 있는 추세이다. 이러한 저가의 HMD는 최근까지 3D 영화감상 등의 용도로 주로 사용되었으나 고도의 몰입성을 제공할 수 있는 기술적 특성을 배가하여 가상현실, 증강현실의 시각화 장치로서의 활용도가 높아지고 있다.
일 실시예에 따르면, HMD 형태의 디스플레이(103)는 내부에 IMU(Inertial Measurement Unit) 센서, 즉 관성 측정 장치를 구비할 수 있다. 이 경우 사용자가 HMD를 착용한 상태에서 머리를 상하좌우로 움직이면 상기 IMU 센서가 측정한 회전, 가속도, 또는 각속도에 기초하여 콘텐츠를 변경할 수 있다. 예를 들어, 사용자가 HMD를 착용한 상태에서 고개를 우측으로 돌리면 HMD에 표시되는 가상현실 콘텐츠도 사용자의 우측 시점에 맞추어 표시된다. 이로써 사용자가 고정된 시점으로 콘텐츠를 시청하는 것이 아닌 직접 가상현실 환경에 존재하는 것처럼 느낄 수 있게 하여 몰입감을 증대시킬 수 있다. 또 다른 예로는, IMU 센서가 측정한 회전, 가속도, 또는 각속도에 기초하여 가상현실 콘텐츠에서 자전거의 진행방향을 변경할 수도 있다. 일반적인 고정 자전거는 핸들이 고정되어 있어 진행방향을 변경할 수 없는데, 이러한 구성을 이용하면 가상현실 내에서 자전거의 진행방향을 변경하여 사용자가 원하는 대로 제어할 수 있다.
디스플레이(102)는 후술하는 처리부(1001), 저장부(1002), 콘텐츠 생성부(1003) 등의 컴퓨터 관련 구성요소와 직접 결합되어 하나의 디바이스로 구성될 수도 있고(예컨대, 프로세서 및 메모리 등의 구성요소가 내장된 HMD 장치), 이러한 구성요소들과 시스템적으로 분리되어 컴퓨터나 스마트폰 등의 장치로부터 출력된 영상을 단순히 화면에 표시하도록 구성될 수도 있다.
처리부(1001)는 CPU와 같이 복합적인 전기전자 소자로 구성된 하드웨어와 이를 통해 임의의 프로세스를 구현하기 위한 소프트웨어의 집합을 의미하며 PC, 스마트폰, 태블릿 등의 개별적인 장치에 포함되거나, 전술한 바와 같이 HMD 형태의 디스플레이(103)에 일체로 구성될 수 있다.
처리부(1001)는 회전 센서(102)에서 검출한 장치(페달, 바퀴 등)의 시간당 회전수에 기초하여 실내운동기구의 회전속도를 계산한다. 예를 들어 고정 자전거의 페달이나 바퀴에 부착된 센서가 회전을 검출하면 분당 회전수(RPM)에 기초하여 페달/바퀴의 회전속도를 계산한다. 계산된 회전속도는 가상현실 콘텐츠 내에서의 자전거의 이동속도를 결정하는데 이용된다. 예를 들어, 자전거 바퀴의 원주에 시간당 회전수를 곱하면 자전거의 주행속도를 계산할 수 있다. 또한, 변위(출발점에서 도착점까지의 직선거리)를 시간으로 나누어 평균속도를 계산할 수 있다.
처리부(1001)는 운동과 관련된 다양한 데이터를 처리하여 운동기록 데이터를 생성하도록 구성된다. 예를 들어, 서버나 데이터베이스에 미리 저장된 고정 자전거 타기의 시간당 칼로리 소모량 정보를 이용하여 사용자가 운동 개시 이후 소모한 전체 칼로리 소모량을 계산하거나(산소섭취량, 몸무게, 운동 시간 정보로부터 시간당 소모 열량을 계산할 수 있음), 상기 이동속도와 칼로리 소모량을 계산함에 있어서 가상현실 공간의 경사도를 반영하여 이를 조정할 수도 있다. 또한, 생체신호 센서(101)로부터 수신한 사용자의 시간당 심박수 정보를 이용하여 현재 심박수, 최대 심박수, 운동강도 등의 운동기록 데이터를 획득하거나, 산소포화도, 근전도신호 등의 생체신호 정보를 이용하여 산소포화도의 변화량, 근전도신호에 기초한 각 근육의 활성화 정도 등 생체관련 데이터를 계산할 수 있다.
일 실시예에서, 처리부(1001)는 상기 근전도신호의 RMS 값에 기초하여 상기 신체부위의 생체정보를 계산하고, 계산된 결과는 수치로 표시되거나 가상현실의 아바타에 색상 또는 모양으로 표현될 수 있다. 상기 생체정보는 신체부위의 동작에 따른 칼로리 소모량을 포함하고, 상기 칼로리 소모량은 가상의 공간에 그래프로 표시될 수 있다. 이에 따라 사용자는 가상현실 내 본인의 아바타의 근육 부위에 표시되는 색상이나 모양으로부터 본인의 실제 근육 중 어느 부위가 얼만큼 자극되고 있는지 직관적으로 알 수 있다.
이렇게 생성된 운동기록 데이터는 저장부(1002)에 저장된다. 실시예에서, 저장부(1002)에는 운동기록 데이터뿐만 아니라 자전거 주행과 관련된 가상현실 콘텐츠와 시스템을 운영하는데 필요한 프로그램, 운동기록 관련 데이터베이스, 운동기구의 사용자나 다른 사용자들의 관련 정보 등(ID, 나이, 운동기록 등)이 저장될 수 있다. 저장부(1002)에 저장된 정보들은 클라우드 서버(30)에 업로드되며, 관리자 컴퓨터(20) 측의 요청에 의해 실시간으로 공유될 수 있다.
저장부(1002)에 저장된 운동기록 데이터는 추가적인 운동 정보를 생성하기 위해 처리부(1001)에 전송될 수 있고, 가상현실 콘텐츠 상의 자전거의 동작에 이를 반영하거나 화면 상에 데이터가 직접 표시된 영상 콘텐츠를 생성하기 위해 콘텐츠 생성부(1003)로 전송될 수도 있다.
콘텐츠 생성부(1003)는 실내운동기구(1)와 연관되며 장치(페달/바퀴)의 회전속도가 반영된 가상현실 콘텐츠를 생성하도록 구성된다. 본 명세서에서 가상현실(Virtual Reality)이란 특정 환경이나 상황을 컴퓨터로 구현하여 사용자로 하여금 마치 실제로 주변 상황이나 환경과 상호작용하고 있는 것처럼 만들어주는 인간-컴퓨터 간 인터페이스를 의미한다.
일 실시예에 따른 가상현실 콘텐츠는 사용자가 가상의 자전거 코스를 주행하는 것을 간접적으로 체험할 수 있게 하는 영상 콘텐츠로서, 자전거를 타는 1인칭 시점으로 코스를 따라가면서 주변 배경 오브젝트(도로, 나무, 동식물 등)를 볼 수 있도록 구성된다. 도 4는 일 실시예에 따른 가상현실과 실내운동기구의 연동 시스템으로 구현된 가상현실 화면을 나타낸 도면이다. 도 4에 도시된 바와 같이, 화면에는 자전거 도로를 주행하는 사용자의 1인칭 시점이 출력되며, 하단에는 자전거 핸들 오브젝트(O1), 전방에는 도로와 나무 등의 배경 오브젝트(O2)가 표시된다.
일 실시예에서, 가상현실 콘텐츠의 자전거 코스는 실존하는 주행 도로나 자연 환경에 기초하여 만들어질 수 있다(예를 들어, 북한산 자전거길 등). 이로써 사용자는 실내에서도 마치 외부 자전거 코스를 주행하는 듯한 느낌을 받을 수 있어 보다 즐겁게 운동할 수 있다. 사용자는 HMD 또는 이와 연결된 컴퓨터 장치를 조작하여 저장부 또는 서버 DB에 저장된 다양한 주행코스 목록 중에서 원하는 코스를 선택하여 콘텐츠를 즐길 수 있다.
일 실시예에서, 가상현실 콘텐츠는 영상 등 시각적 콘텐츠뿐만 아니라 주변 환경 오브젝트와 상호작용하는 소리 등 청각적 콘텐츠나, 가상 주행코스의 노면 상태, 자전거의 속도에 따른 진동 등 촉각적 콘텐츠를 더 포함할 수 있다. 이를 위해 청각적 콘텐츠를 제공하기 위한 스피커, 촉각적 콘텐츠를 제공하기 위한 진동기 등의 추가적인 구성요소가 구비될 수 있다.
일 실시예에서, 손동작 인식부(도시되지 않음)는 실내운동기구(1)의 일부, 예를 들어 고정식 자전거의 핸들 센터부분에 설치되어 사용자의 손동작을 인식하도록 구성될 수 있다. 고정식 자전거의 경우 실제 자전거와 달리 제자리에 고정되어 있으므로 사용자가 핸들을 잡지 않아도 비교적 안전하다. 따라서 사용자는 고정식 자전거를 타는 동시에 양손을 자유롭게 움직일 수 있는데, VR 콘텐츠 내에서 손동작을 이용하여 다양한 가상의 동작을 수행할 수 있다. 일 실시예에서, 손동작 인식부는 HMD 형태의 디스플레이(103) 장치의 하단에 설치되어 HMD 아래에서 이루어지는 손동작을 인식할 수 있다.
전술한 바와 같이, HMD 형태의 디스플레이(103)는 내부에 IMU 센서를 구비할 수 있는데, 사용자가 HMD를 착용한 상태에서 머리를 상하좌우로 움직이면 상기 IMU 센서가 측정한 회전, 가속도, 또는 각속도에 기초하여 콘텐츠를 변경할 수 있다. 예를 들어, 사용자가 HMD를 착용하고 장면을 바라본 상태에서는 도 2와 같이 정면을 기준으로 한 VR 콘텐츠가 표시되고, 사용자가 고개를 좌우로 움직이면 실제로 고개를 돌려 좌우를 보는 것처럼 좌우시점을 기준으로 한 VR 콘텐츠가 표시된다. 이로써 사용자는 마치 현실 세계에서 자전거 주행을 하는 듯한 느낌을 받을 수 있다.
일 실시예에서, HMD 장치의 월드포지셔널 트래킹 데이터를 활용하여, 사용자가 머리를 움직여 가상현실 내 장애물을 회피하는 등의 동적 상호작용 요소를 콘텐츠 내부에 구현할 수 있다. VR 카메라와 동적 상호작용 요소 간의 충돌 처리는 델리게이트 기반의 이벤트 형식으로 구현할 수 있다. HMD의 포지션 데이터 외에 Angular 트래킹 데이터를 활용하여 머리를 흔드는 등의 동작을 통해 해결할 수 있는 문제들을 콘텐츠 내부에 구현할 수 있다.
HMD를 통한 VR 콘텐츠는 지속적으로 사용할 경우 사용자의 어지럼증을 야기하는 문제가 발생할 수 있다. 본 발명의 실시예에 따르면 급격한 화면 전환이나 장소 이동 시 현실과의 괴리감으로 인해 발생하는 어지럼증을 최소화하기 위한 기술이 적용된다. 사용자의 움직임과 VR 콘텐츠의 이동 방식에서 발생하는 괴리감에 초점을 두고 컨트롤 기능을 구현하였는데, 고정식 자전거와 VR 자전거 속도 센서를 융합하여 페달을 밟아 주행하는 방식의 컨트롤 기능을 구현할 수 있으며, 페달을 밟는 운동을 통해 현실과 콘텐츠 사이의 괴리감과 어지럼증을 감소시킬 수 있다. 또한, 너무 빠른 이동이나 급격한 회전을 지양하여 어지럼증을 최소화하는 가상현실 코스와 콘텐츠를 구성할 수 있다.
일 실시예에 따르면, HMD을 착용한 상태에서 운동시 땀이나 흘러내림 같은 불편 요소를 해소하기 위해 VR 모드와 평면 스크린 모드의 스위칭 기능이 구현될 수 있다. 이에 따라 화면 렌더링 전환 기능을 구현하여 사용자는 실시간으로 타깃 디바이스(HMD 및 스마트폰, PC 등)을 전환할 수 있다.
일 실시예에서, 가상현실 속에서 주행하는 자전거의 속도는 상기 처리부(1001)에서 계산된 장치(페달/바퀴)의 회전속도에 기초하여 결정될 수 있다. 따라서, 사용자가 실내운동기구인 고정 자전거의 페달을 빨리 밟을수록 가상현실 콘텐츠의 자전거 속도 또한 빨라지게 되고, 사용자가 페달을 천천히 밟으면 반대로 가상현실 속 자전거도 느리게 이동하는 식으로 운동기구와 가상현실을 연동시킬 수 있고, 이를 이용하면 다양한 스포츠/엔터테인먼트 콘텐츠를 구현할 수 있다.
가상현실 콘텐츠는 실내운동기구와 연관된 콘텐츠(예를 들어, 운동기구가 고정 자전거라면 가상현실 콘텐츠는 자전거 주행 시뮬레이션 게임 등)인 것이 바람직하지만, 이에 한정되지 않으며 다양한 콘텐츠와 결합될 수 있다(예를 들어, 고정 자전거의 회전 속도에 따라 속도를 컨트롤할 수 있는 차량 시뮬레이션 게임 등). 종래의 주행 시뮬레이션 게임(예를 들어, 콘솔 게임기를 이용한 자전거, 자동차 레이싱 게임 등)에서는 단순히 조이스틱을 이용하여 차량의 속도를 조절하였으나, 실시예의 시스템을 이용하면 사용자의 운동량에 따라 가상현실 속의 차량 속도가 제어되므로 사용자의 운동능력 향상과 엔터테인먼트 효과를 동시에 누릴 수 있다.
일 실시예에 따른 가상현실과 실내운동기구의 연동 시스템은 사용자가 조작할 수 있는 조작부(도시되지 않음)를 더 포함할 수 있다. 가상현실 콘텐츠에서 상기 조작부의 입력에 따라 추가적인 동작을 수행할 수 있다. 예를 들어, 조작부는 조이스틱 등의 입력 하드웨어일 수 있으며, 조이스틱을 이용하여 일반적인 고정식 자전거에서는 불가능한 방향의 전환이나 가상현실 속에서의 추가 동작(미사일 발사, 아이템 사용 등)을 수행할 수 있다. 이와 같은 부가적인 장치와 프로그램을 이용하면 보다 재미있는 방식으로 운동과 VR 콘텐츠를 즐길 수 있다.
또한, 일 실시예의 가상현실 콘텐츠는 가상의 자전거 코스를 혼자서 주행하는 것이 아닌, 서버를 통해 접속된 다른 사용자와의 실시간 동시 주행을 제공할 수 있다. 이를 위해 시스템은 통신부(도시되지 않음)를 더 포함할 수 있으며, 처리부(1001)는 통신부를 통해 동일한 프로그램을 이용하는 다른 사용자의 실시간 주행 정보를 클라우드 서버(30)로부터 수신하여 처리할 수 있고, 콘텐츠 생성부(1003)는 다른 사용자 캐릭터의 주행을 실시간으로 반영하는 VR 콘텐츠를 생성하여 제공할 수 있다. 이를 통해 다른 사용자와 경쟁하거나 협력하여 주행이 가능하므로 보다 즐겁게 운동할 수 있고 운동에 대한 동기부여를 할 수 있다.
실시예의 가상현실 콘텐츠에서, 가상의 자전거 코스는 내리막 또는 오르막 경사지점을 포함하고, 상기 자전거 속도는 상기 경사지점의 지면 경사도에 기초하여 조정될 수 있다. 예를 들어, 가상현실 속 자전거 코스에는 평지뿐만 아니라 내리막길이나 오르막길이 구현될 수도 있는데, 실제 자전거 주행시 동일한 속도를 낸다면 평지보다는 오르막길에서 체력이 더 소모되고 내리막길에서 체력이 덜 소모된다. 최근 실내 자전거에서는 이와 같은 운동효과의 조절을 위해 사용자가 페달에 가해지는 저항을 가감할 수 있는 기능이 구현되어 있으나, 이는 사용자가 수동으로 제어해야 하기 때문에 본 발명과 같은 가상현실 콘텐츠에 적용하기에는 바람직하지 않다.
본 발명의 실시예에 따르면, 가상 자전거 코스의 오르막이나 내리막 지점에 연동되어 자전거의 페달 저항을 자동으로 증가시키거나 감소시킴으로써 보다 실감나는 주행 체험을 제공할 수 있다. 이를 위해, 시스템에는 페달이나 바퀴에 설치되며 처리부로부터 입력된 신호에 따라 저항을 증가시키거나 감소시키는 브레이크패드가 더 포함될 수 있다.
또 다른 실시예에서는, 물리적인 저항을 통해 자전거의 속도를 가감속시키는 것이 아닌, 각 경사 지점에서의 가상 자전거 주행 속도를 경사도에 맞게 조정함으로써 유사한 효과를 달성할 수 있다. 예를 들어, 오르막 지점에서는 가상 자전거의 속도를 감소시킴으로써 사용자가 실제로는 동일한 속도로 페달을 밟더라도 가상현실 속 자전거가 더디게 진행하도록 하여 오르막을 오르는 듯한 운동효과를 얻을 수 있고, 반대로 내리막 지점에서는 속도를 증가시킴으로써 사용자가 동일한 속도로 페달을 밟더라도 가상현실 속 자전거는 더 빠르게 진행하도록 프로그래밍될 수 있다. 이와 같이 구성할 경우 시스템과 연동되는 브레이크 패드 등의 부가 장치가 없더라도 실감나는 주행효과를 얻을 수 있어 경제성이 높다.
콘텐츠 맵(가상현실 코스)에 경사도가 있는 지형을 주행할 때 사실감을 더하기 위해 사용자와 지면 사이의 수직 방향 벡터를 측정하여 내적 공식을 활용해 두 벡터 간의 내적을 구하고, 내적 공식으로 구해진 지면과의 경사도를 활용하여 오르막길 또는 내리막길에서 가속 및 감속 수치를 경사 저항공식을 사용하여 가중치를 적용할 수 있다.
일 실시예에 따르면, 경사지점에서의 자전거 속도는 미리 입력된 사용자의 몸무게를 더 고려하여 조정될 수 있다. 실제 자전거 주행에 있어서는 같은 정도의 힘으로 페달을 밟는다고 가정하면 탑승자의 몸무게가 무거울수록 주행속도가 느려지고 가벼울수록 주행속도가 빨라진다. 그러나 실내용 고정 자전거는 실제로 노면을 주행하지 않으므로 회전 속도는 사용자의 무게에 따른 마찰저항에 영향을 받지 않는다. VR 콘텐츠 중 네트워크 서버를 통한 다른 사용자와의 경쟁모드 등에서는 이러한 비현실적인 설정이 사용자의 동기부여에 방해가 될 수도 있다.
따라서 실시예에서는 미리 입력된 사용자의 몸무게에 기초하여 몸무게와 주행속도가 반비례하도록 가상현실 내 자전거의 속도를 조정하여 현실감과 몰입감을 향상시킨다. 예를 들어, 경사높이는 수평거리와 Tan 경사각의 곱과 같고, 경사저항은 무게(입력된 사용자의 몸무게)와 Sin 경사각의 곱으로부터 대략적으로 구할 수 있다. 계산된 경사저항(구배저항)은 속도를 조정하는데 이용된다.
일 실시예에 따르면, 사용자의 현재속도 및 경로 곡률에 따른 동적 각속도 변화가 고려될 수 있다. 사용자의 속도와 회전 시 각속도의 비례관계 공식을 활용하여 사용자의 현재속도에 따른 가중치를 고정된 각속도에 더한다. 경로의 곡선 면의 곡률에 따라 가중치를 더한 사용자의 각속도를 사용해도 일정 곡률 이상(60~90%)을 벗어나게 되면 가속도 및 원심력에 따라 경로를 벗어나는 현상 해결을 위해 속도에 따른 가중치와 경로 곡률에 따른 추가 가중치를 구하여 더한다.
일 실시예에서, 운동기록 데이터는 헤드마운티드 디스플레이에 출력되는 가상현실 화면의 일부에 함께 표시되거나(도 4의 O3), 별도의 단말기(스마트폰, PC, 태블릿 등) 상에 개별적으로 표시될 수 있다(도 5의 O4). 운동기록 데이터는 예를 들어 현재속도, 평균속도, 주행시간, 총 코스거리, 현재 주행거리, 남은 주행거리, 기간별 총 주행거리(일/주/월 단위로 주행거리를 합산한 데이터), 시간당 칼로리 소모량 등의 장치의 동작과 관련된 정보와 심박수, 산소포화도, 근육 활성화 정보 등 부가적인 생체신호 센서로부터 감지된 데이터를 처리한 신체관련 정보가 포함될 수 있으며, 나아가 가상환경 주행코스의 경사도, 경사저항(구배저항) 등 주행보조 정보 등이 포함될 수 있다.
도 4에 도시된 것처럼, 사용자가 바라보는 가상현실 화면의 우측 상단에 주행시간, 주행거리, 현재속도, 평균속도 등의 운동기록 데이터가 실시간으로 표시될 수 있다. 현재속도와 평균속도는 전술한 바와 같이 회전 센서부에서 검출한 회전을 토대로 처리부에서 계산되고, 주행거리는 자전거 바퀴의 원주길이에 속도를 곱하여 산출된다. 주행시간은 사용자가 페달을 밟거나 주행 코스가 시작된 시점부터 측정된다.
일반적인 실내용 고정 자전거에서도 별도의 디스플레이를 통해 이와 같은 정보가 출력될 수 있지만, 사용자의 시야를 완전히 가리는 헤드마운티드 디스플레이를 착용할 경우 이러한 정보를 볼 수가 없기 때문에 원활한 운동 수행을 위해 화면 상단에 실시간 운동기록 데이터를 동시에 출력되는 것이다. 운동기록 데이터(O3)는 주행에 따른 가상 자전거 코스의 변화와 무관하게 한 지점에 고정되어 지속적으로 표시될 수 있다.
도 5는 일 실시예에 따른 가상현실과 실내운동기구의 연동 시스템으로 구현된 운동기록 데이터의 출력 화면을 나타낸 도면이다. 도시된 바와 같이 운동기록 데이터(O4)는 사용자의 요청에 의해 단말기(스마트폰, PC, 태블릿 등) 디스플레이에 표시될 수 있다. 사용자는 운동 중 또는 운동이 끝난 후에라도 날짜 별로 기록된 운동기록 데이터(단말기의 저장부에 저장되거나 외부 서버에 별도로 저장됨)를 확인함으로써 운동 기록의 향상이나 신체 능력 향상 여부를 파악할 수 있다.
일 실시예에서, 콘텐츠 생성부(50)는 상기 실내운동기구(1)와 연관되며 상기 장치의 회전속도가 반영된 증강현실 콘텐츠를 생성하도록 구성되고, 상기 헤드마운티드 디스플레이(20)는 증강현실 콘텐츠를 제공하도록 구성될 수 있다.
증강현실(Augmented Reality)은 현실세계에 가상의 영상을 결합한 형태로 구현되며 사용자에게 보통의 현실세계와 그 곳에 실재하지 않는 가상의 영상정보를 동시에 제공함으로써 새로운 형태의 시각적 효과를 제공할 수 있다. 예를 들어, 증강현실에서는 바라보는 현실세계의 대상물에 대한 구체적인 정보를 가상의 영상으로 함께 제공할 수 있으며, 가상의 물체를 현실세계 속에 배치할 수도 있다.
증강현실 콘텐츠의 경우, 가상현실 콘텐츠와는 달리 자전거 코스 등 가상의 환경 자체를 제공하기보다는 도 4의 운동기록 데이터(O3)나 도 5의 운동기록 데이터(O4)를 실제 시야의 일부에 표시되도록 하여 운동을 보조하는 역할을 수행할 수 있다. 이 경우 디스플레이(103)는 시야를 완전히 차단한 채 영상을 직접 출력하는 구성이 아닌, 투명 디스플레이를 포함하여 사용자의 시야를 방해하지 않으면서도 영상을 출력하도록 구성될 수 있다. 이러한 투명 디스플레이는 투명한 산화물 반도체막을 이용하여 구현되며, 사용자가 장치 뒤쪽에 위치하는 후면 배경을 보면서 필요한 정보를 얻을 수 있다. 실시예에 따라 가상현실 콘텐츠와 증간현실 콘텐츠가 동시에 제공될 수도 있다.
이하에서는 도 6 및 도 7을 참조하여 일 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 방법에 대해 설명한다. 실시예에 따른 방법은 사용자의 생체신호를 측정하는 생체신호 센서, 운동기구에 부착된 회전 센서, 프로세서와 메모리를 포함하는 컴퓨터 장치, 디스플레이, 네트워크로 연결된 클라우드 서버를 통해 구현될 수 있다.
먼저, 생체신호 센서를 이용하여 사용자의 생체신호를 측정하는 단계가 수행된다(S10). 전술한 것처럼, 생체신호 센서는 사용자의 신체부위에 장착되어 심박수, 산소포화도, 근전도신호 등 사용자의 신체상태와 관련된 데이터를 측정하도록 구성된다.
이어서, 실내운동기구의 일부 장치에 부착된 회전 센서를 이용하여 장치의 회전을 검출하는 단계가 수행된다(S20). 전술한 것처럼, 회전 센서는 고정 자전거와 같은 실내운동기구의 페달 또는 바퀴에 결합되어 페달이나 바퀴가 회전할 때마다 이를 감지하여 카운트한다.
이어서, 사용자 컴퓨터 상에서 심박수 및 회전수에 기초하여 운동기록 데이터를 생성하는 단계가 수행된다(S30). 운동기록 데이터는 사용자의 현재 심박수, 최대 심박수, 운동강도, 실내운동기구의 회전속도, 운동시간, 이동거리 및 시간당 소모열량 중 적어도 하나의 정보를 포함한다.
이어서, 운동기록 데이터를 클라우드 서버를 통해 관리자 컴퓨터에 전송하는 단계가 수행된다(S40). 클라우드 서버는 사용자 컴퓨터와 관리자 컴퓨터가 서로 데이터를 공유할 수 있도록 중개 서버의 역할을 수행한다.
이어서, 관리자 컴퓨터 상에서 인공지능 프로그램을 이용하여 운동기록 데이터를 분석한 결과에 따라 맞춤형 헬스케어 데이터를 생성하는 단계(S50)가 수행되고, 생성된 헬스케어 데이터를 클라우드 서버를 통해 사용자 컴퓨터에 전송하는 단계가 수행된다(S60). 인공지능 프로그램은 전문적인 의학/피트니스 지식이 저장된 데이터베이스에 기초하여 사용자의 운동진행상황을 파악하고 도움이 될만한 처방, 조언, 지시 등을 포함한 헬스케어 콘텐츠를 제공할 수 있다. 예를 들어, 사용자의 운동 목적이 건강 유지인데 사용자의 나이에 비해 현재 운동 강도가 너무 높거나 운동 시간이 일정 시간을 경과한 경우, 인공지능 프로그램은 데이터베이스에 기반하여 운동 목적과 현재 운동 강도가 부적합하다고 판단하여 사용자에게 "운동 강도를 낮춰주세요", 또는 "오늘 운동은 마칠 것을 권장합니다"와 같은 메시지를 자동으로 전송하도록 구성될 수 있다. 전술한 것처럼, 인공지능 프로그램을 이용하지 않고 전문가가 직접 메시지를 입력하는 형태일 수도 있다. 예를 들어, 사용자의 운동 목적이 지방 연소인데 현재 운동 강도가 너무 낮아 지방을 연소시키기에 부적합한 경우, 전문가는 "지방 연소를 위해 운동 강도를 높여 주세요"와 같은 메시지를 직접 입력하여 사용자 컴퓨터로 전송할 수 있다.
이어서, 운동기록 데이터 및 상기 맞춤형 헬스케어 데이터를 디스플레이 상에 출력하는 단계가 수행된다(S70). 일 실시예에서, 디스플레이는 도 2에 도시된 것처럼 사용자의 머리에 착용되어 가상현실 환경을 제공하기 위한 헤드마운티드 디스플레이(Head Mounted Display; HMD)일 수 있다. 선택적인 실시예에서, HMD 형태의 디스플레이는 내부에 IMU 센서를 구비하여 사용자의 시점 이동에 따라 가상현실 콘텐츠를 변경함으로써 사용자가 직접 가상현실 환경에 존재하는 것처럼 느낄 수 있게 하여 몰입감을 증대시킬 수 있다.
도 7을 참조하면, 또 다른 실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 방법이 도시되어 있다. 단계(S10 내지 S70)은 도 6의 실시예와 동일하게 진행되며, 단계(S80 및 S90)이 추가적으로 수행될 수 있다.
단계(S80)에서, 클라우드 서버를 통해 운동기록 데이터 및 맞춤형 헬스케어 데이터를 의료서비스 제공자 컴퓨터에 제공될 수 있다. 이어서, 데이터에 기초하여 사용자의 건강상태를 모니터링한 결과 이상이 있는 것으로 판단되면 보호자 또는 의료기관에 알림을 제공하는 단계가 수행될 수 있다(S90). 예를 들어, 생체신호 센서에 의해 측정된 심박수가 정상 범위에서 벗어나거나 혈중 산소포화도, 혈당량 등의 수치가 비정상적인 것으로 판단될 경우, 의료서비스 제공자 컴퓨터는 관리 프로그램에 의해 자동으로, 또는 의료인이 수동으로 보호자 또는 의료기관에 긴급 알림 메시지(예를 들어, "환자의 심박수가 비정상적으로 높습니다. 확인 바랍니다" 등)를 전송할 수 있다.
실시예에 따른 클라우드 기반 헬스케어 콘텐츠 제공 방법은, 애플리케이션으로 구현되거나 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다.
컴퓨터 판독 가능한 기록 매체의 예로는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함될 수 있다.
프로그램 명령어의 예로는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있다.
이상에서 설명한 실시예들에 따르면, 실내운동기구에 부착된 센서를 통해 기구의 회전속도를 계산하고 운동기구와 가상현실간 실시간 연동을 구현한다. 즉, 사용자는 실내용 운동기구를 활용하여 마치 외부에 있는 것처럼 간접 체험할 수 있어 보다 즐겁게 운동을 수행할 수 있다. 일 실시예에 따르면, 미리 입력된 사용자 정보, 센서를 이용해 측정된 사용자의 생체신호, 실내운동기구의 회전수 등에 기초하여 운동기록 데이터를 생성하며, 인공지능 프로그램을 이용하여 이에 따른 맞춤형 헬스케어 데이터를 제공할 수 있다. 데이터의 분석 및 생성은 클라우드 서버를 통해 연결된 외부 관리자 컴퓨터에 의해 수행되므로 사용자는 최소한의 장비를 이용하여 맞춤형 헬스케어 서비스를 제공받을 수 있으며, 네트워크를 통해 연결된 다른 사용자들과 협력 또는 경쟁적인 운동 프로그램을 실시할 수 있다.
이상에서는 실시예들을 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
1: 실내운동기구
10, 11, 12, 13: 사용자 컴퓨터
20, 21, 22, 23: 관리자 컴퓨터
30: 클라우드 서버
101: 생체신호 센서
102: 회전 센서
103: 디스플레이
1001: 처리부
1002: 저장부
1003: 콘텐츠 생성부
O1, O2: 가상현실 오브젝트
O3, O4: 운동기록 데이터
10, 11, 12, 13: 사용자 컴퓨터
20, 21, 22, 23: 관리자 컴퓨터
30: 클라우드 서버
101: 생체신호 센서
102: 회전 센서
103: 디스플레이
1001: 처리부
1002: 저장부
1003: 콘텐츠 생성부
O1, O2: 가상현실 오브젝트
O3, O4: 운동기록 데이터
Claims (16)
- 클라우드 기반 헬스케어 콘텐츠 제공 시스템으로서,
상기 시스템은 복수의 사용자 컴퓨터; 적어도 하나의 관리자 컴퓨터; 및 상기 복수의 사용자 컴퓨터와 적어도 하나의 관리자 컴퓨터 간의 데이터 송수신을 중개하는 클라우드 서버를 포함하되,
각각의 사용자 컴퓨터는 생체신호 센서를 이용하여 측정한 사용자의 생체신호 및 회전 센서를 이용하여 측정한 실내운동기구의 시간당 회전수에 기초하여 운동기록 데이터를 생성하고, 상기 운동기록 데이터를 상기 클라우드 서버를 통해 상기 관리자 컴퓨터에 실시간으로 전송하고, 상기 관리자 컴퓨터로부터 실시간으로 제공되는 맞춤형 헬스케어 데이터를 수신하여 상기 운동기록 데이터와 함께 디스플레이 상에 출력하도록 구성되며,
상기 관리자 컴퓨터는 기계학습모델을 통해 자동 업데이트될 수 있는 인공지능 프로그램을 이용하여 상기 운동기록 데이터를 분석한 결과에 따라 생성된 맞춤형 헬스케어 데이터를 상기 사용자 컴퓨터에 전송함으로써, 실시간 맞춤형 헬스코칭을 제공하도록 구성되고,
상기 사용자의 생체신호는 사용자의 시간당 심박수를 포함하며, 상기 맞춤형 헬스케어 데이터는 상기 사용자의 시간당 심박수에 따라 결정된 운동 강도에 기초하여 생성되며,
상기 클라우드 서버는 상기 복수의 사용자 컴퓨터를 네트워크를 통해 적어도 하나의 그룹으로 매칭하고, 각각의 사용자 컴퓨터로부터 생성된 운동기록 데이터 및 음성채팅 데이터와 관리자 컴퓨터로부터 생성된 맞춤형 헬스케어 데이터 및 음성채팅 데이터를 상기 그룹 내 컴퓨터들과 실시간으로 공유함으로써 실시간 맞춤형 헬스코칭을 구현하는 것을 특징으로 하는, 클라우드 기반 헬스케어 콘텐츠 제공 시스템.
- 삭제
- 제1항에 있어서,
상기 운동기록 데이터는 사용자의 현재 심박수, 최대 심박수, 운동강도, 실내운동기구의 회전속도, 운동시간, 이동거리 및 시간당 소모열량 중 적어도 하나를 포함하고,
상기 맞춤형 헬스케어 데이터는 사용자의 연령을 기준으로 계산한 최대 심박수와 현재 심박수를 비교하여 결정된 운동 강도에 대한 실시간 코칭 정보를 포함하는 것을 특징으로 하는, 클라우드 기반 헬스케어 콘텐츠 제공 시스템.
- 제3항에 있어서,
상기 실내운동기구는 실내용 고정 자전거이고, 상기 회전 센서는 상기 고정 자전거의 페달 또는 바퀴에 부착되며, 상기 사용자 컴퓨터는 상기 페달 또는 바퀴의 분당 회전수(RPM)에 기초하여 실내운동기구의 회전속도를 계산하는 것을 특징으로 하는, 클라우드 기반 헬스케어 콘텐츠 제공 시스템.
- 제4항에 있어서,
상기 디스플레이는 헤드마운티드 디스플레이(HMD)이고, 상기 사용자 컴퓨터는 상기 운동기록 데이터가 반영된 가상현실 콘텐츠를 제공하도록 구성되는 것을 특징으로 하는, 클라우드 기반 헬스케어 콘텐츠 제공 시스템.
- 제5항에 있어서,
상기 가상현실 콘텐츠는 미리 저장된 가상의 자전거 코스를 상기 분당 회전수에 기초한 주행속도로 주행하는 시뮬레이션 영상을 포함하는 것을 특징으로 하는, 클라우드 기반 헬스케어 콘텐츠 제공 시스템.
- 제6항에 있어서,
상기 가상의 자전거 코스는 내리막 또는 오르막 경사지점을 포함하고, 상기 자전거 속도는 상기 경사지점의 지면 경사도 및 미리 입력된 사용자의 몸무게에 기초하여 조정되는 것을 특징으로 하는, 클라우드 기반 헬스케어 콘텐츠 제공 시스템.
- 제5항에 있어서,
상기 헤드마운티드 디스플레이는 내부에 IMU 센서를 포함하고,
상기 가상현실 콘텐츠에서 자전거의 진행방향은 상기 IMU 센서가 측정한 회전, 가속도, 또는 각속도에 기초하여 변경되는 것을 특징으로 하는, 클라우드 기반 헬스케어 콘텐츠 제공 시스템.
- 제3항에 있어서,
상기 생체신호는 사용자의 산소포화도 또는 근전도신호를 더 포함하며,
상기 운동기록 데이터는 시간에 따른 심박수의 산소포화도의 변화량 또는 근전도신호에 기초한 각 근육의 활성화 정도를 더 포함하는 것을 특징으로 하는, 클라우드 기반 헬스케어 콘텐츠 제공 시스템.
- 제1항에 있어서,
상기 클라우드 서버는 상기 운동기록 데이터 및 상기 맞춤형 헬스케어 데이터를 외부 저장장치에 저장하도록 구성되는 것을 특징으로 하는, 클라우드 기반 헬스케어 콘텐츠 제공 시스템.
- 제10항에 있어서,
상기 클라우드 서버는 저장된 데이터를 의료서비스 제공자 컴퓨터와 공유하고,
상기 의료서비스 제공자 컴퓨터는 상기 데이터에 기초하여 사용자의 건강상태를 모니터링한 결과 이상이 있는 것으로 판단된 경우, 보호자 또는 의료기관에 알림을 제공하도록 구성되는 것을 특징으로 하는, 클라우드 기반 헬스케어 콘텐츠 제공 시스템.
- 생체신호 센서를 이용하여 사용자의 생체신호를 측정하는 단계;
회전 센서를 이용하여 실내운동기구의 시간당 회전수를 측정하는 단계;
사용자 컴퓨터 상에서, 상기 생체신호 및 회전수에 기초하여 운동기록 데이터를 생성하는 단계;
상기 운동기록 데이터를 클라우드 서버를 통해 관리자 컴퓨터에 실시간으로 전송하는 단계;
상기 관리자 컴퓨터 상에서, 기계학습모델을 통해 자동 업데이트될 수 있는 인공지능 프로그램을 이용하여 상기 운동기록 데이터를 분석한 결과에 기초해 맞춤형 헬스케어 데이터를 생성하는 단계;
상기 맞춤형 헬스케어 데이터를 상기 클라우드 서버를 통해 사용자 컴퓨터에 실시간으로 전송하는 단계; 및
상기 운동기록 데이터 및 상기 맞춤형 헬스케어 데이터를 디스플레이 상에 출력하는 단계를 포함하되,
상기 사용자의 생체신호는 사용자의 시간당 심박수를 포함하며, 상기 맞춤형 헬스케어 데이터는 상기 사용자의 시간당 심박수에 따라 결정된 운동 강도에 기초하여 생성되며,
상기 클라우드 서버는 복수의 사용자 컴퓨터를 네트워크를 통해 적어도 하나의 그룹으로 매칭하고, 각각의 사용자 컴퓨터로부터 생성된 운동기록 데이터 및 음성채팅 데이터와 관리자 컴퓨터로부터 생성된 맞춤형 헬스케어 데이터 및 음성채팅 데이터를 상기 그룹 내 컴퓨터들과 실시간으로 공유함으로써 실시간 맞춤형 헬스코칭을 구현하는 것을 특징으로 하는, 클라우드 기반 헬스케어 콘텐츠 제공 방법.
- 삭제
- 제12항에 있어서,
상기 클라우드 서버를 통해 상기 운동기록 데이터 및 상기 맞춤형 헬스케어 데이터를 의료서비스 제공자 컴퓨터에 제공하는 단계; 및
상기 데이터에 기초하여 사용자의 건강상태를 모니터링한 결과 이상이 있는 것으로 판단된 경우, 보호자 또는 의료기관에 알림을 제공하는 단계를 더 포함하는 것을 특징으로 하는, 클라우드 기반 헬스케어 콘텐츠 제공 방법.
- 제12항에 있어서,
상기 운동기록 데이터는 사용자의 현재 심박수, 최대 심박수, 운동강도, 실내운동기구의 회전속도, 운동시간, 이동거리 및 시간당 소모열량 중 적어도 하나를 포함하고,
상기 맞춤형 헬스케어 데이터는 사용자의 연령을 기준으로 계산한 최대 심박수와 현재 심박수를 비교하여 결정된 운동 강도에 대한 실시간 코칭 정보를 포함하는 것을 특징으로 하는, 클라우드 기반 헬스케어 콘텐츠 제공 방법.
- 제12항, 제14항 및 제15항 중 어느 한 항에 따른 클라우드 기반 헬스케어 콘텐츠 제공 방법을 실행하기 위한, 컴퓨터로 판독 가능한 기록매체에 저장된 컴퓨터 프로그램.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190178922A KR102224188B1 (ko) | 2019-12-31 | 2019-12-31 | 클라우드 기반 인공지능을 활용하여 가상현실용 헬스케어 콘텐츠를 제공하기 위한 시스템 및 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190178922A KR102224188B1 (ko) | 2019-12-31 | 2019-12-31 | 클라우드 기반 인공지능을 활용하여 가상현실용 헬스케어 콘텐츠를 제공하기 위한 시스템 및 방법 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR102224188B1 true KR102224188B1 (ko) | 2021-03-08 |
Family
ID=75184991
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020190178922A KR102224188B1 (ko) | 2019-12-31 | 2019-12-31 | 클라우드 기반 인공지능을 활용하여 가상현실용 헬스케어 콘텐츠를 제공하기 위한 시스템 및 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102224188B1 (ko) |
Cited By (44)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11139060B2 (en) | 2019-10-03 | 2021-10-05 | Rom Technologies, Inc. | Method and system for creating an immersive enhanced reality-driven exercise experience for a user |
| US11264123B2 (en) | 2019-10-03 | 2022-03-01 | Rom Technologies, Inc. | Method and system to analytically optimize telehealth practice-based billing processes and revenue while enabling regulatory compliance |
| US11270795B2 (en) | 2019-10-03 | 2022-03-08 | Rom Technologies, Inc. | Method and system for enabling physician-smart virtual conference rooms for use in a telehealth context |
| US11282604B2 (en) | 2019-10-03 | 2022-03-22 | Rom Technologies, Inc. | Method and system for use of telemedicine-enabled rehabilitative equipment for prediction of secondary disease |
| US11282599B2 (en) | 2019-10-03 | 2022-03-22 | Rom Technologies, Inc. | System and method for use of telemedicine-enabled rehabilitative hardware and for encouragement of rehabilitative compliance through patient-based virtual shared sessions |
| US11282608B2 (en) | 2019-10-03 | 2022-03-22 | Rom Technologies, Inc. | Method and system for using artificial intelligence and machine learning to provide recommendations to a healthcare provider in or near real-time during a telemedicine session |
| US11284797B2 (en) | 2019-10-03 | 2022-03-29 | Rom Technologies, Inc. | Remote examination through augmented reality |
| US11295848B2 (en) | 2019-10-03 | 2022-04-05 | Rom Technologies, Inc. | Method and system for using artificial intelligence and machine learning to create optimal treatment plans based on monetary value amount generated and/or patient outcome |
| US11309085B2 (en) | 2019-10-03 | 2022-04-19 | Rom Technologies, Inc. | System and method to enable remote adjustment of a device during a telemedicine session |
| US11317975B2 (en) | 2019-10-03 | 2022-05-03 | Rom Technologies, Inc. | Method and system for treating patients via telemedicine using sensor data from rehabilitation or exercise equipment |
| US11328807B2 (en) | 2019-10-03 | 2022-05-10 | Rom Technologies, Inc. | System and method for using artificial intelligence in telemedicine-enabled hardware to optimize rehabilitative routines capable of enabling remote rehabilitative compliance |
| US11325005B2 (en) | 2019-10-03 | 2022-05-10 | Rom Technologies, Inc. | Systems and methods for using machine learning to control an electromechanical device used for prehabilitation, rehabilitation, and/or exercise |
| US11348683B2 (en) | 2019-10-03 | 2022-05-31 | Rom Technologies, Inc. | System and method for processing medical claims |
| KR102427390B1 (ko) * | 2022-05-24 | 2022-08-01 | 주식회사 야나두 | 헬스케어 서비스 제공방법, 서버 및 컴퓨터 프로그램 |
| US11404150B2 (en) | 2019-10-03 | 2022-08-02 | Rom Technologies, Inc. | System and method for processing medical claims using biometric signatures |
| US11410768B2 (en) | 2019-10-03 | 2022-08-09 | Rom Technologies, Inc. | Method and system for implementing dynamic treatment environments based on patient information |
| US11433276B2 (en) | 2019-05-10 | 2022-09-06 | Rehab2Fit Technologies, Inc. | Method and system for using artificial intelligence to independently adjust resistance of pedals based on leg strength |
| US11445985B2 (en) | 2019-10-03 | 2022-09-20 | Rom Technologies, Inc. | Augmented reality placement of goniometer or other sensors |
| US11471729B2 (en) | 2019-03-11 | 2022-10-18 | Rom Technologies, Inc. | System, method and apparatus for a rehabilitation machine with a simulated flywheel |
| US11508482B2 (en) | 2019-10-03 | 2022-11-22 | Rom Technologies, Inc. | Systems and methods for remotely-enabled identification of a user infection |
| US11596829B2 (en) | 2019-03-11 | 2023-03-07 | Rom Technologies, Inc. | Control system for a rehabilitation and exercise electromechanical device |
| US11701548B2 (en) | 2019-10-07 | 2023-07-18 | Rom Technologies, Inc. | Computer-implemented questionnaire for orthopedic treatment |
| US11756666B2 (en) | 2019-10-03 | 2023-09-12 | Rom Technologies, Inc. | Systems and methods to enable communication detection between devices and performance of a preventative action |
| US11801423B2 (en) | 2019-05-10 | 2023-10-31 | Rehab2Fit Technologies, Inc. | Method and system for using artificial intelligence to interact with a user of an exercise device during an exercise session |
| US11826613B2 (en) | 2019-10-21 | 2023-11-28 | Rom Technologies, Inc. | Persuasive motivation for orthopedic treatment |
| US11830601B2 (en) | 2019-10-03 | 2023-11-28 | Rom Technologies, Inc. | System and method for facilitating cardiac rehabilitation among eligible users |
| US11887717B2 (en) | 2019-10-03 | 2024-01-30 | Rom Technologies, Inc. | System and method for using AI, machine learning and telemedicine to perform pulmonary rehabilitation via an electromechanical machine |
| US11904207B2 (en) | 2019-05-10 | 2024-02-20 | Rehab2Fit Technologies, Inc. | Method and system for using artificial intelligence to present a user interface representing a user's progress in various domains |
| US11915815B2 (en) | 2019-10-03 | 2024-02-27 | Rom Technologies, Inc. | System and method for using artificial intelligence and machine learning and generic risk factors to improve cardiovascular health such that the need for additional cardiac interventions is mitigated |
| US11915816B2 (en) | 2019-10-03 | 2024-02-27 | Rom Technologies, Inc. | Systems and methods of using artificial intelligence and machine learning in a telemedical environment to predict user disease states |
| US11923065B2 (en) | 2019-10-03 | 2024-03-05 | Rom Technologies, Inc. | Systems and methods for using artificial intelligence and machine learning to detect abnormal heart rhythms of a user performing a treatment plan with an electromechanical machine |
| US11923057B2 (en) | 2019-10-03 | 2024-03-05 | Rom Technologies, Inc. | Method and system using artificial intelligence to monitor user characteristics during a telemedicine session |
| US11942205B2 (en) | 2019-10-03 | 2024-03-26 | Rom Technologies, Inc. | Method and system for using virtual avatars associated with medical professionals during exercise sessions |
| US11955222B2 (en) | 2019-10-03 | 2024-04-09 | Rom Technologies, Inc. | System and method for determining, based on advanced metrics of actual performance of an electromechanical machine, medical procedure eligibility in order to ascertain survivability rates and measures of quality-of-life criteria |
| US11955218B2 (en) | 2019-10-03 | 2024-04-09 | Rom Technologies, Inc. | System and method for use of telemedicine-enabled rehabilitative hardware and for encouraging rehabilitative compliance through patient-based virtual shared sessions with patient-enabled mutual encouragement across simulated social networks |
| US11955223B2 (en) | 2019-10-03 | 2024-04-09 | Rom Technologies, Inc. | System and method for using artificial intelligence and machine learning to provide an enhanced user interface presenting data pertaining to cardiac health, bariatric health, pulmonary health, and/or cardio-oncologic health for the purpose of performing preventative actions |
| US11955220B2 (en) | 2019-10-03 | 2024-04-09 | Rom Technologies, Inc. | System and method for using AI/ML and telemedicine for invasive surgical treatment to determine a cardiac treatment plan that uses an electromechanical machine |
| US11950861B2 (en) | 2019-10-03 | 2024-04-09 | Rom Technologies, Inc. | Telemedicine for orthopedic treatment |
| US11955221B2 (en) | 2019-10-03 | 2024-04-09 | Rom Technologies, Inc. | System and method for using AI/ML to generate treatment plans to stimulate preferred angiogenesis |
| US11957960B2 (en) | 2019-05-10 | 2024-04-16 | Rehab2Fit Technologies Inc. | Method and system for using artificial intelligence to adjust pedal resistance |
| US11961603B2 (en) | 2019-10-03 | 2024-04-16 | Rom Technologies, Inc. | System and method for using AI ML and telemedicine to perform bariatric rehabilitation via an electromechanical machine |
| US12020800B2 (en) | 2019-10-03 | 2024-06-25 | Rom Technologies, Inc. | System and method for using AI/ML and telemedicine to integrate rehabilitation for a plurality of comorbid conditions |
| US12020799B2 (en) | 2019-10-03 | 2024-06-25 | Rom Technologies, Inc. | Rowing machines, systems including rowing machines, and methods for using rowing machines to perform treatment plans for rehabilitation |
| US12029940B2 (en) | 2019-11-06 | 2024-07-09 | Rom Technologies, Inc. | Single sensor wearable device for monitoring joint extension and flexion |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20060045404A (ko) * | 2004-09-01 | 2006-05-17 | 주식회사 케이티 | 유비쿼터스 네트워킹 기술 기반하에 온/오프라인 서비스를연계한 헬스케어 시스템 및 그 방법 |
| KR20180086633A (ko) * | 2017-01-23 | 2018-08-01 | 세종대학교산학협력단 | 가상현실 콘텐츠 제공 방법 |
| KR101878201B1 (ko) | 2016-06-23 | 2018-08-20 | 목포대학교산학협력단 | 디스플레이 기반 실시간 상호작용 헬스케어 장치 및 그 방법 |
-
2019
- 2019-12-31 KR KR1020190178922A patent/KR102224188B1/ko active IP Right Grant
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20060045404A (ko) * | 2004-09-01 | 2006-05-17 | 주식회사 케이티 | 유비쿼터스 네트워킹 기술 기반하에 온/오프라인 서비스를연계한 헬스케어 시스템 및 그 방법 |
| KR101878201B1 (ko) | 2016-06-23 | 2018-08-20 | 목포대학교산학협력단 | 디스플레이 기반 실시간 상호작용 헬스케어 장치 및 그 방법 |
| KR20180086633A (ko) * | 2017-01-23 | 2018-08-01 | 세종대학교산학협력단 | 가상현실 콘텐츠 제공 방법 |
Cited By (49)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11904202B2 (en) | 2019-03-11 | 2024-02-20 | Rom Technolgies, Inc. | Monitoring joint extension and flexion using a sensor device securable to an upper and lower limb |
| US11596829B2 (en) | 2019-03-11 | 2023-03-07 | Rom Technologies, Inc. | Control system for a rehabilitation and exercise electromechanical device |
| US11541274B2 (en) | 2019-03-11 | 2023-01-03 | Rom Technologies, Inc. | System, method and apparatus for electrically actuated pedal for an exercise or rehabilitation machine |
| US11471729B2 (en) | 2019-03-11 | 2022-10-18 | Rom Technologies, Inc. | System, method and apparatus for a rehabilitation machine with a simulated flywheel |
| US11433276B2 (en) | 2019-05-10 | 2022-09-06 | Rehab2Fit Technologies, Inc. | Method and system for using artificial intelligence to independently adjust resistance of pedals based on leg strength |
| US11957960B2 (en) | 2019-05-10 | 2024-04-16 | Rehab2Fit Technologies Inc. | Method and system for using artificial intelligence to adjust pedal resistance |
| US11904207B2 (en) | 2019-05-10 | 2024-02-20 | Rehab2Fit Technologies, Inc. | Method and system for using artificial intelligence to present a user interface representing a user's progress in various domains |
| US11801423B2 (en) | 2019-05-10 | 2023-10-31 | Rehab2Fit Technologies, Inc. | Method and system for using artificial intelligence to interact with a user of an exercise device during an exercise session |
| US11942205B2 (en) | 2019-10-03 | 2024-03-26 | Rom Technologies, Inc. | Method and system for using virtual avatars associated with medical professionals during exercise sessions |
| US11887717B2 (en) | 2019-10-03 | 2024-01-30 | Rom Technologies, Inc. | System and method for using AI, machine learning and telemedicine to perform pulmonary rehabilitation via an electromechanical machine |
| US11328807B2 (en) | 2019-10-03 | 2022-05-10 | Rom Technologies, Inc. | System and method for using artificial intelligence in telemedicine-enabled hardware to optimize rehabilitative routines capable of enabling remote rehabilitative compliance |
| US11325005B2 (en) | 2019-10-03 | 2022-05-10 | Rom Technologies, Inc. | Systems and methods for using machine learning to control an electromechanical device used for prehabilitation, rehabilitation, and/or exercise |
| US11348683B2 (en) | 2019-10-03 | 2022-05-31 | Rom Technologies, Inc. | System and method for processing medical claims |
| US12020799B2 (en) | 2019-10-03 | 2024-06-25 | Rom Technologies, Inc. | Rowing machines, systems including rowing machines, and methods for using rowing machines to perform treatment plans for rehabilitation |
| US11404150B2 (en) | 2019-10-03 | 2022-08-02 | Rom Technologies, Inc. | System and method for processing medical claims using biometric signatures |
| US11410768B2 (en) | 2019-10-03 | 2022-08-09 | Rom Technologies, Inc. | Method and system for implementing dynamic treatment environments based on patient information |
| US11309085B2 (en) | 2019-10-03 | 2022-04-19 | Rom Technologies, Inc. | System and method to enable remote adjustment of a device during a telemedicine session |
| US11445985B2 (en) | 2019-10-03 | 2022-09-20 | Rom Technologies, Inc. | Augmented reality placement of goniometer or other sensors |
| US11295848B2 (en) | 2019-10-03 | 2022-04-05 | Rom Technologies, Inc. | Method and system for using artificial intelligence and machine learning to create optimal treatment plans based on monetary value amount generated and/or patient outcome |
| US11508482B2 (en) | 2019-10-03 | 2022-11-22 | Rom Technologies, Inc. | Systems and methods for remotely-enabled identification of a user infection |
| US11515021B2 (en) | 2019-10-03 | 2022-11-29 | Rom Technologies, Inc. | Method and system to analytically optimize telehealth practice-based billing processes and revenue while enabling regulatory compliance |
| US11515028B2 (en) | 2019-10-03 | 2022-11-29 | Rom Technologies, Inc. | Method and system for using artificial intelligence and machine learning to create optimal treatment plans based on monetary value amount generated and/or patient outcome |
| US11284797B2 (en) | 2019-10-03 | 2022-03-29 | Rom Technologies, Inc. | Remote examination through augmented reality |
| US11282608B2 (en) | 2019-10-03 | 2022-03-22 | Rom Technologies, Inc. | Method and system for using artificial intelligence and machine learning to provide recommendations to a healthcare provider in or near real-time during a telemedicine session |
| US12020800B2 (en) | 2019-10-03 | 2024-06-25 | Rom Technologies, Inc. | System and method for using AI/ML and telemedicine to integrate rehabilitation for a plurality of comorbid conditions |
| US11756666B2 (en) | 2019-10-03 | 2023-09-12 | Rom Technologies, Inc. | Systems and methods to enable communication detection between devices and performance of a preventative action |
| US11282599B2 (en) | 2019-10-03 | 2022-03-22 | Rom Technologies, Inc. | System and method for use of telemedicine-enabled rehabilitative hardware and for encouragement of rehabilitative compliance through patient-based virtual shared sessions |
| US11978559B2 (en) | 2019-10-03 | 2024-05-07 | Rom Technologies, Inc. | Systems and methods for remotely-enabled identification of a user infection |
| US11830601B2 (en) | 2019-10-03 | 2023-11-28 | Rom Technologies, Inc. | System and method for facilitating cardiac rehabilitation among eligible users |
| US11317975B2 (en) | 2019-10-03 | 2022-05-03 | Rom Technologies, Inc. | Method and system for treating patients via telemedicine using sensor data from rehabilitation or exercise equipment |
| US11282604B2 (en) | 2019-10-03 | 2022-03-22 | Rom Technologies, Inc. | Method and system for use of telemedicine-enabled rehabilitative equipment for prediction of secondary disease |
| US11270795B2 (en) | 2019-10-03 | 2022-03-08 | Rom Technologies, Inc. | Method and system for enabling physician-smart virtual conference rooms for use in a telehealth context |
| US11915815B2 (en) | 2019-10-03 | 2024-02-27 | Rom Technologies, Inc. | System and method for using artificial intelligence and machine learning and generic risk factors to improve cardiovascular health such that the need for additional cardiac interventions is mitigated |
| US11915816B2 (en) | 2019-10-03 | 2024-02-27 | Rom Technologies, Inc. | Systems and methods of using artificial intelligence and machine learning in a telemedical environment to predict user disease states |
| US11923065B2 (en) | 2019-10-03 | 2024-03-05 | Rom Technologies, Inc. | Systems and methods for using artificial intelligence and machine learning to detect abnormal heart rhythms of a user performing a treatment plan with an electromechanical machine |
| US11923057B2 (en) | 2019-10-03 | 2024-03-05 | Rom Technologies, Inc. | Method and system using artificial intelligence to monitor user characteristics during a telemedicine session |
| US11139060B2 (en) | 2019-10-03 | 2021-10-05 | Rom Technologies, Inc. | Method and system for creating an immersive enhanced reality-driven exercise experience for a user |
| US11955222B2 (en) | 2019-10-03 | 2024-04-09 | Rom Technologies, Inc. | System and method for determining, based on advanced metrics of actual performance of an electromechanical machine, medical procedure eligibility in order to ascertain survivability rates and measures of quality-of-life criteria |
| US11955218B2 (en) | 2019-10-03 | 2024-04-09 | Rom Technologies, Inc. | System and method for use of telemedicine-enabled rehabilitative hardware and for encouraging rehabilitative compliance through patient-based virtual shared sessions with patient-enabled mutual encouragement across simulated social networks |
| US11955223B2 (en) | 2019-10-03 | 2024-04-09 | Rom Technologies, Inc. | System and method for using artificial intelligence and machine learning to provide an enhanced user interface presenting data pertaining to cardiac health, bariatric health, pulmonary health, and/or cardio-oncologic health for the purpose of performing preventative actions |
| US11955220B2 (en) | 2019-10-03 | 2024-04-09 | Rom Technologies, Inc. | System and method for using AI/ML and telemedicine for invasive surgical treatment to determine a cardiac treatment plan that uses an electromechanical machine |
| US11950861B2 (en) | 2019-10-03 | 2024-04-09 | Rom Technologies, Inc. | Telemedicine for orthopedic treatment |
| US11955221B2 (en) | 2019-10-03 | 2024-04-09 | Rom Technologies, Inc. | System and method for using AI/ML to generate treatment plans to stimulate preferred angiogenesis |
| US11264123B2 (en) | 2019-10-03 | 2022-03-01 | Rom Technologies, Inc. | Method and system to analytically optimize telehealth practice-based billing processes and revenue while enabling regulatory compliance |
| US11961603B2 (en) | 2019-10-03 | 2024-04-16 | Rom Technologies, Inc. | System and method for using AI ML and telemedicine to perform bariatric rehabilitation via an electromechanical machine |
| US11701548B2 (en) | 2019-10-07 | 2023-07-18 | Rom Technologies, Inc. | Computer-implemented questionnaire for orthopedic treatment |
| US11826613B2 (en) | 2019-10-21 | 2023-11-28 | Rom Technologies, Inc. | Persuasive motivation for orthopedic treatment |
| US12029940B2 (en) | 2019-11-06 | 2024-07-09 | Rom Technologies, Inc. | Single sensor wearable device for monitoring joint extension and flexion |
| KR102427390B1 (ko) * | 2022-05-24 | 2022-08-01 | 주식회사 야나두 | 헬스케어 서비스 제공방법, 서버 및 컴퓨터 프로그램 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102224188B1 (ko) | 클라우드 기반 인공지능을 활용하여 가상현실용 헬스케어 콘텐츠를 제공하기 위한 시스템 및 방법 | |
| KR102161646B1 (ko) | 가상현실과 실내운동기구의 연동을 위한 시스템 및 방법 | |
| CN111095150B (zh) | 机器人作为私人教练 | |
| US20230089962A1 (en) | Training system and methods for designing, monitoring and providing feedback of training | |
| KR102224618B1 (ko) | 가상현실 기반 운동장치 | |
| Mueller et al. | Exertion games | |
| US9364714B2 (en) | Fuzzy logic-based evaluation and feedback of exercise performance | |
| US8892219B2 (en) | Motivation and enhancement of physical and mental exercise, rehabilitation, health and social interaction | |
| CN105122005B (zh) | 具有媒体内容自动暂停的运动监测系统 | |
| JP2020150987A (ja) | 室内用有酸素運動装置、運動システム | |
| US20100009809A1 (en) | System for simulating a tour of or being in a remote location while exercising | |
| US20190351289A1 (en) | Targeted neurogenesis stimulated by aerobic exercise with virtual reality enhanced brain function specific tasks | |
| JP2015213759A (ja) | 運動活動のモニタリングおよび追跡の方法 | |
| JPH08510655A (ja) | 対話式運動機器 | |
| Postolache et al. | Virtual reality and augmented reality technologies for smart physical rehabilitation | |
| US20230038695A1 (en) | Virtual reality activities for various impairments | |
| Dabnichki | Computers in sport | |
| Calado et al. | Towards a Virtual Coach for Boccia: Developing a Virtual Augmented Interaction based on a Boccia Simulator. | |
| Katz et al. | Virtual reality | |
| Wang | The development of an interactive mountain bike simulator to help injured mountain riders reduce the fear of re-injury while cornering | |
| US20240009511A1 (en) | Virtual Steering Apparatus | |
| JP7416873B1 (ja) | 仮想空間提供システム、仮想空間提供方法、及び仮想空間提供プログラム | |
| Whitton et al. | Locomotion interfaces | |
| Zhang | Virtual Exercise Architecture for People with Lower Body Disabilities Using Virtual Reality Technologies | |
| JP2024018447A (ja) | 仮想空間移動装置、仮想空間移動方法、及び仮想空間移動プログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| AMND | Amendment | ||
| AMND | Amendment | ||
| AMND | Amendment | ||
| X701 | Decision to grant (after re-examination) | ||
| GRNT | Written decision to grant |