KR20230103208A - 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법 - Google Patents
모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법 Download PDFInfo
- Publication number
- KR20230103208A KR20230103208A KR1020210193921A KR20210193921A KR20230103208A KR 20230103208 A KR20230103208 A KR 20230103208A KR 1020210193921 A KR1020210193921 A KR 1020210193921A KR 20210193921 A KR20210193921 A KR 20210193921A KR 20230103208 A KR20230103208 A KR 20230103208A
- Authority
- KR
- South Korea
- Prior art keywords
- unit
- motion
- user
- posture
- haptic
- Prior art date
Links
- 230000033001 locomotion Effects 0.000 title claims abstract description 190
- 238000000034 method Methods 0.000 title claims abstract description 54
- 238000012937 correction Methods 0.000 claims abstract description 86
- 230000036544 posture Effects 0.000 claims description 151
- 230000008569 process Effects 0.000 claims description 17
- 238000005516 engineering process Methods 0.000 claims description 8
- 238000012545 processing Methods 0.000 claims description 8
- 238000004891 communication Methods 0.000 claims description 4
- 230000010365 information processing Effects 0.000 claims description 3
- 230000000638 stimulation Effects 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 8
- 238000004458 analytical method Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 9
- 238000012549 training Methods 0.000 description 7
- 238000005259 measurement Methods 0.000 description 6
- 230000005236 sound signal Effects 0.000 description 5
- 238000009207 exercise therapy Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000033764 rhythmic process Effects 0.000 description 3
- 239000000835 fiber Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000010835 comparative analysis Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 210000003127 knee Anatomy 0.000 description 1
- 230000037081 physical activity Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
- A63B24/0003—Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
- A63B24/0006—Computerised comparison for qualitative assessment of motion sequences or the course of a movement
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
- A63B24/0003—Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
- A63B24/0006—Computerised comparison for qualitative assessment of motion sequences or the course of a movement
- A63B2024/0012—Comparing movements or motion sequences with a registered reference
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
- A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
- A63B2071/0655—Tactile feedback
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2220/00—Measuring of physical parameters relating to sporting activity
- A63B2220/80—Special sensors, transducers or devices therefor
- A63B2220/803—Motion sensors
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2220/00—Measuring of physical parameters relating to sporting activity
- A63B2220/80—Special sensors, transducers or devices therefor
- A63B2220/83—Special sensors, transducers or devices therefor characterised by the position of the sensor
- A63B2220/836—Sensors arranged on the body of the user
Landscapes
- Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Economics (AREA)
- Educational Technology (AREA)
- Educational Administration (AREA)
- Physical Education & Sports Medicine (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
본 발명은 사용자의 동작이나 자세를 교정하기 위한 장치 및 방법에 관한 것으로, 본 발명에 따르면, 예를 들면, 무용, 댄스, 피트니스, 트레이닝 등과 같은 예체능 분야 및 골프 등과 같은 각종 전문 스포츠 분야에 있어서, 일반 사용자가 전문가의 도움 없이 정확한 자세나 동작을 학습하기 어려울 뿐만 아니라, 전문가의 지도를 받기 위하여는 학습비용이 크게 증가하여 일반인이 쉽게 접하기 어려운 한계가 있었던 문제점을 해소하기 위해, 미리 구현된 전문가의 동작을 사용자가 그대로 따라하도록 하고, 이때, 사용자의 신체 각 부위에 착용 가능한 웨어러블 형태의 햅틱 디바이스를 이용하여, 모션캡쳐(motion capture)를 통해 사용자의 동작이나 자세의 정확도를 판단하고 전문가와의 차이에 따라 사용자의 관절이나 신체부위에 햅틱 피드백(haptic feedback)을 통해 각각 다른 자극을 부여하도록 구성됨으로써, 전문가의 지도를 받지 않고도 비교적 간단한 구성 및 저렴한 비용으로 정확한 자세와 동작을 용이하게 학습할 수 있도록 하여 학습효과 및 효율을 높일 수 있도록 구성되는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법이 제공된다.
Description
본 발명은 사용자의 동작이나 자세를 교정하기 위한 장치 및 방법에 관한 것으로, 더 상세하게는, 종래, 예를 들면, 무용, 댄스, 피트니스, 트레이닝 등과 같은 예체능 분야 및 골프 등과 같은 각종 전문 스포츠 분야에 있어서, 일반 사용자가 전문가의 도움 없이 정확한 자세나 동작을 학습하기 어려울 뿐만 아니라, 전문가의 지도를 받기 위하여는 학습비용이 크게 증가하여 일반인이 쉽게 접하기 어려운 한계가 있었던 문제점을 해소하기 위해, 모션캡쳐(motion capture) 및 햅틱 피드백(haptic feedback)을 통해 비교적 간단한 구성 및 저렴한 비용으로 정확한 자세와 동작을 용이하게 학습할 수 있도록 구성되는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법에 관한 것이다.
또한, 본 발명은, 상기한 바와 같이 일반 사용자가 전문가의 도움 없이 정확한 자세나 동작을 학습하기 어려웠던 문제점을 해결하기 위해, 미리 구현된 전문가의 동작을 사용자가 그대로 따라하도록 하고, 이때, 사용자의 신체 각 부위에 착용 가능한 웨어러블 형태의 햅틱 디바이스를 이용하여, 모션캡쳐를 통해 사용자의 동작이나 자세의 정확도를 판단하고 전문가와의 차이에 따라 사용자의 관절이나 신체부위에 햅틱 피드백을 통해 각각 다른 자극을 부여하도록 구성됨으로써, 전문가의 지도를 받지 않고도 비교적 간단한 구성 및 저렴한 비용으로 정확한 자세와 동작을 용이하게 학습할 수 있도록 하여 학습효과 및 효율을 높일 수 있도록 구성되는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법에 관한 것이다.
종래, 일반적으로, 예를 들면, 무용이나 댄스, 또는, 피트니스나 트레이닝 등과 같은 예체능 분야 및 골프나 승마 등과 같은 각종 전문 스포츠 분야에 있어서, 전문가의 도움 없이 초보자가 정확한 자세나 동작을 학습하기는 매우 어려우며, 이에, 대부분의 경우 전문가의 지도에 따라 정확한 자세 및 동작을 배우는 대면수업 방식으로 학습이 이루어지고 있다.
그러나 이러한 대면수업 방식은 전문가의 직접 지도를 통하여 비교적 높은 학습를 기대할 수 있는 장점이 있으나, 전문가의 지도를 받기 위하여는 해당 전문가의 스케줄에 맞추어야 하므로 사용자가 원하는 시각과 장소를 선택하기 어렵고, 대부분의 경우 비교적 높은 비용이 요구되는 단점이 있었다.
이에, 최근에는, 상기한 바와 같은 기존의 대면수업 방식의 문제점을 해소하기 위해, 예를 들면, 모션캡쳐(motion capture)와 같은 동작인식기술을 이용하여, 전문가의 직접 지도 대신 비대면 방식으로 학습이 이루어질 수 있도록 하기 위한 기술에 대한 요구가 높아지고 있다.
여기서, 상기한 바와 같이 동작인식 기술을 이용하여 전문가의 지도를 대신할 수 있도록 하기 위한 장치 및 방법에 대한 종래기술의 예로는, 먼저, 예를 들면, 한국 등록특허공보 제10-1521025호에 제시된 바와 같은 "승마자의 3차원 모션분석기반 실시간 코칭시스템"이 있다.
더 상세하게는, 상기한 한국 등록특허공보 제10-1521025호는, 승마 시뮬레이터에 탑승한 승마자의 모션을 분석하여 코칭하는 승마자의 모션분석기반 코칭시스템에 관한 것으로써, 승마자가 착용한 모션캡처슈트 상에 설치된 복수의 센서로부터 3차원 좌표 데이터를 취득하여 송신하는 모션캡처부; 모션캡처부로부터 송신된 3차원 좌표 데이터를 이용하여 승마자의 3차원 스켈레톤 포인트 정보를 갖는 모션캡처 데이터 파일을 생성하고, 생성된 스켈레톤 포인트 정보를 이용하여 승마자의 자세 또는 리듬감을 분석하며, 분석된 승마자의 자세 또는 리듬감을 기 저장된 승마전문가의 3차원 스켈레톤 포인트 정보를 토대로 한 표준 모션 데이터와 비교분석하여 그 비교분석 결과를 송신하는 중앙제어부; 및 앙제어부로부터 송신된 비교분석 결과가 표시되는 디스플레이부를 포함하여, 센서신호를 토대로 생성되는 승마자의 3차원 스켈레톤 포인트 정보를 이용한 승마자의 자세와 리듬감을 분석하고, 이를 기 저장된 승마전문가의 3차원 스켈레톤 포인트 정보를 토대로 한 표준 모션 데이터와 비교분석하여 승마자의 잘못된 자세를 디스플레이부를 통해 확인시키고 실시간으로 코칭함으로써, 승마자(피교육자)가 실시간으로 자신의 객관적인 모션을 보면서 수정, 보완하여 보다 쉽고 정확하게 승마자세를 습득할 수 있도록 구성되는 승마자의 3차원 모션분석기반 실시간 코칭시스템에 관한 것이다.
또한, 상기한 바와 같이 동작인식 기술을 이용하여 전문가의 지도를 대신할 수 있도록 하기 위한 장치 및 방법에 대한 종래기술의 다른 예로는, 예를 들면, 한국 등록특허공보 제10-2123743호에 제시된 바와 같은 "피트니스 자세교정을 위한 운동분석 방법"이 있다.
더 상세하게는, 상기한 한국 등록특허공보 제10-2123743호는, 운동자세 분석 장치를 이용한 운동자세 분석 방법에 있어서, 섬유센서로부터 측정신호를 입력받는 단계; 입력받은 측정신호에서 사용자가 운동시 측정된 신호인 유효영역신호를 추출하는 단계; 및 추출된 유효영역신호를 이용하여 사용자의 운동자세를 분석하는 단계를 포함하고, 유효영역신호를 추출하는 단계는, 입력받은 측정신호에서 시간에 따른 측정신호 변화율의 유효피크(Peak)와 평균주기를 이용하여 유효영역신호를 추출하고, 유효영역신호를 추출하는 단계는, 시간에 따른 측정신호 변화율 그래프에서 전체 피크 간격의 특정 범위 내에 해당되는 피크 간격의 평균을 구한 평균주기와 전체 피크들 중에서 평균주기를 가지는 피크인 유효피크를 선택하는 단계; 및 첫번째 유효피크의 시점부터 마지막 유효피크의 시점에서 평균주기가 지났을 때까지의 구간을 유효영역신호로 추출하는 단계를 포함하여, 섬유센서로부터 측정신호를 입력받고 유효영역신호를 추출하여 사용자의 운동자세를 분석하고 교정할 수 있으며, 그것에 의해, 피트니스 또는 웨이트 트레이닝시 실시간으로 운동자세를 분석하고 피드백을 제공할 수 있으므로 잘못된 자세로 운동을 지속함으로 인해 발생하는 부상을 방지하고 운동의 효율을 높일 수 있을 뿐만 아니라, 다양한 신체 활동의 정확한 트래킹으로 개인 맞춤형 운동서비스를 제공할 수 있도록 구성되는 피트니스 자세교정을 위한 운동분석 방법에 관한 것이다.
상기한 바와 같이, 종래, 동작인식 기술을 이용하여 전문가의 지도를 대신할 수 있도록 하기 위해 다양한 장치 및 방법들이 제시된 바 있으나, 상기한 바와 같은 종래기술의 내용들은 다음과 같은 한계가 있는 것이었다.
즉, 일반적으로, 모션캡쳐와 같은 동작인식을 이용한 기존의 자세교정 장치 및 방법들은, 모니터 등의 디스플레이를 통하여 전문가의 동작을 보여주고 사용자가 이를 따라하면 동작이나 자세의 유사도를 비교한 결과를 제시하도록 구성되는 것이 대부분이며, 그로 인해, 사용자는 제시되는 결과화면에 따라 스스로 잘못된 부분을 파악하여 동작이나 자세를 교정해야 하므로, 전문가와 직접 대면하여 지도하는 방식에 비해 효과 및 효율성이 떨어지는 한계가 있었다.
따라서 상기한 바와 같이 단순히 자세나 동작의 유사도를 제시하는 것에 그치는 종래기술의 자세교정 장치 및 방법들의 한계를 해결하기 위하여는, 예를 들면, 햅틱 피드백(haptic feedback)을 이용하여, 사용자의 자세나 동작의 정확도에 따라 해당 관절이나 신체부위에 각각 적절한 피드백을 부여하여 사용자가 어느 부분을 어떻게 교정하면 되는지를 쉽게 파악할 수 있도록 구성되는 새로운 구성의 자세교정 시스템 및 방법을 제시하는 것이 바람직하나, 아직까지 그러한 요구를 모두 만족시키는 장치나 방법은 제시되지 못하고 있는 실정이다.
본 발명은 상기한 바와 같은 종래기술의 문제점을 해결하고자 하는 것으로, 따라서 본 발명의 목적은, 예를 들면, 무용, 댄스, 피트니스, 트레이닝 등과 같은 예체능 분야 및 골프 등과 같은 각종 전문 스포츠 분야에 있어서, 일반 사용자가 전문가의 도움 없이 정확한 자세나 동작을 학습하기 어려울 뿐만 아니라, 전문가의 지도를 받기 위하여는 학습비용이 크게 증가하여 일반인이 쉽게 접하기 어려운 한계가 있었던 문제점을 해소하기 위해, 모션캡쳐(motion capture) 및 햅틱 피드백(haptic feedback)을 통해 비교적 간단한 구성 및 저렴한 비용으로 정확한 자세와 동작을 용이하게 학습할 수 있도록 구성되는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법을 제시하고자 하는 것이다.
또한, 본 발명의 다른 목적은, 상기한 바와 같이 일반 사용자가 전문가의 도움 없이 정확한 자세나 동작을 학습하기 어려웠던 문제점을 해결하기 위해, 미리 구현된 전문가의 동작을 사용자가 그대로 따라하도록 하고, 이때, 사용자의 신체 각 부위에 착용 가능한 웨어러블 형태의 햅틱 디바이스를 이용하여, 모션캡쳐를 통해 사용자의 동작이나 자세의 정확도를 판단하고 전문가와의 차이에 따라 사용자의 관절이나 신체부위에 햅틱 피드백을 통해 각각 다른 자극을 부여하도록 구성됨으로써, 전문가의 지도를 받지 않고도 비교적 간단한 구성 및 저렴한 비용으로 정확한 자세와 동작을 용이하게 학습할 수 있도록 하여 학습효과 및 효율을 높일 수 있도록 구성되는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법을 제시하고자 하는 것이다.
상기한 바와 같은 목적을 달성하기 위해, 본 발명에 따르면, 모션캡쳐(motion capture)와 햅틱 피드백(haptic feedbak)을 이용한 자세교정 시스템에 있어서, 미리 정해진 자세교정 프로그램에 따라 전문가에 의해 수행된 각종 동작이나 자세를 사용자에게 제시하기 위한 영상 또는 이미지를 포함하는 각종 자세교정 컨텐츠 데이터를 포함하여 이루어지는 데이터베이스부; 사용자가 자신이 원하는 서비스를 요청하고 서비스 제공에 필요한 각종 정보를 입력하기 위한 입력수단을 포함하여 이루어지는 입력부; 상기 입력부를 통하여 입력된 사용자 정보에 근거하여, 상기 데이터베이스부에 저장된 데이터로부터 미리 정해진 설정에 따라 또는 사용자에 의해 선택된 자세교정 컨텐츠를 해당 사용자에게 제공하기 위한 디스플레이 및 스피커를 포함하는 출력수단을 포함하여 이루어지는 출력부; 모션캡쳐 기술을 이용하여, 상기 출력부를 통해 제공되는 자세교정 컨텐츠의 내용에 따라 사용자에 의해 수행되는 동작이나 자세를 인식하기 위해 사용자의 관절 및 신체부위에 각각 착용되는 복수의 모션센서를 포함하여 이루어지는 동작인식부; 사용자의 각 관절 및 신체부위에 자극을 부여하기 위해 사용자의 관절 및 신체부위의 미리 정해진 위치에 각각 부착되는 다수의 햅틱 디바이스(haptic device)를 포함하여 이루어지는 햅틱장치부; 및 상기 시스템의 전체적인 동작을 제어하고, 상기 동작인식부를 통해 인식된 사용자의 동작이나 자세를 전문가의 동작이나 자세와 비교하여 비교결과를 상기 출력부를 통해 표시하는 동시에, 정확도에 따라 상기 햅틱장치부의 각각의 햅틱 디바이스를 통해 햅틱 피드백을 제공하는 처리가 수행되도록 이루어지는 제어부를 포함하여 구성되는 것을 특징으로 하는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템이 제공된다.
여기서, 상기 데이터베이스부는, 전문가에 의해 수행된 자세교정 컨텐츠 데이터에 더하여, 각각의 컨텐츠에 제시된 동작 및 자세에 대하여 모션캡쳐를 통해 수집된 각 관절 및 신체부위에 대한 모션캡쳐 데이터를 더 포함하여 구성되는 것을 특징으로 한다.
또한, 상기 입력부 및 상기 출력부는, PC나 노트북을 포함하는 정보처리장치 또는 스마트폰이나 태블릿 PC를 포함하는 개인 휴대용 단말기 중 적어도 하나를 포함하여 이루어지는 사용자 단말기에 상기 데이터베이스부, 상기 동작인식부, 상기 햅틱 피드백부 및 상기 제어부와 연동되는 전용의 어플리케이션 프로그램을 설치하여 구성되는 것을 특징으로 한다.
아울러, 상기 데이터베이스부 및 상기 제어부는, 상기 사용자 단말기와 통신을 통해 연결되어 각종 데이터를 송수신하는 서버로 구성되는 것을 특징으로 한다.
더욱이, 상기 동작인식부 및 상기 햅틱장치부는, 사용자의 각 관절 및 신체부위에 착용 가능하도록 형성되고 각각의 모션센서 및 햅틱 디바이스가 함께 설치되어 일체로 이루어지는 다수의 웨어러블 장치를 포함하여 구성되는 것을 특징으로 한다.
또한, 상기 동작인식부 및 상기 햅틱장치부는, 사용자의 전신에 대하여 미리 정해진 위치에 각각의 모션센서 및 햅틱 디바이스가 각각 설치되어 있는 전신 햅틱슈트의 형태로 구성되는 것을 특징으로 한다.
아울러, 상기 제어부는, 상기 동작인식부를 통해 인식된 사용자의 동작이나 자세를 전문가의 동작이나 자세와 비교하여 미리 정해진 기준에 따라 정확도를 판정하고 판정결과를 상기 출력부를 통해 표시하는 처리가 수행되도록 이루어지는 동작판정부; 및 상기 동작판정부의 판정결과에 근거하여, 상기 햅틱장치부의 각각의 햅틱 디바이스를 통해 사용자의 관절 및 신체부위에 정확도에 따라 미리 설정된 서로 다른 자극을 부여하는 것에 의해 사용자에게 햅틱 피드백을 제공하는 처리가 수행되도록 이루어지는 햅틱 피드백부를 포함하여 구성되는 것을 특징으로 한다.
더욱이, 상기 제어부는, 특정 부위에서 상기 동작판정부에 의해 판정된 정확도가 미리 정해진 기준값이나 기준범위를 만족하지 못하는 경우 해당 부위에 대한 교정이 필요한 것으로 판단하고, 교정이 필요한 것으로 판단되면 상기 햅틱장치부의 각각의 햅틱 디바이스를 통해 정확도에 근거하여 미리 정해진 기준에 따라 각 부위별로 미리 설정된 자극을 해당 부위에 인가하며, 이때, 정확도의 높고 낮음에 따라 자극의 강도를 조절하거나, 교정해야 할 내용에 따라 신체부위별로 각각 다른 자극을 인가하도록 하는 처리가 수행되도록 구성되는 것을 특징으로 한다.
또한, 상기 햅틱장치부는, 사용자의 각 관절이나 신체부위마다 각각의 부위별로 미리 정해진 복수의 위치에 복수 개의 햅틱 디바이스가 각각 부착되도록 구성되고, 상기 햅틱 피드백부는, 상기 동작판정부의 판정결과에 근거하여, 교정이 필요한 위치 및 내용에 따라 해당 위치에 부착된 복수 개의 상기 햅틱 디바이스를 각각 별도로 제어하는 처리가 수행되도록 구성되는 것을 특징으로 한다.
아울러, 본 발명에 따르면, 상기에 기재된 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템을 이용한 자세교정방법에 있어서, 상기 자세교정 시스템의 입력부 및 출력부를 통하여 사용자 정보를 입력받고, 입력된 데이터 및 상기 자세교정 시스템의 데이터베이스부에 저장된 데이터에 근거하여 해당 사용자에게 자세교정 컨텐츠를 제시하는 처리가 수행되는 자세교정 컨텐츠 제공단계; 상기 자세교정 시스템의 동작인식부 및 제어부를 통하여, 상기 자세교정 컨텐츠 제공단계에서 제시된 컨텐츠의 내용과 사용자의 동작 및 자세를 비교하고 정확도를 판단하는 처리가 수행되는 정확도 판정단계; 및 상기 정확도 판정단계의 판정결과에 근거하여, 상기 제어부 및 상기 자세교정 시스템의 햅틱장치부를 통해 정확도에 따른 햅틱 피드백을 사용자에게 인가하는 처리가 수행되는 자세교정단계를 포함하여 구성되는 것을 특징으로 하는 자세교정방법이 제공된다.
상기한 바와 같이, 본 발명에 따르면, 미리 구현된 전문가의 동작을 사용자가 그대로 따라하도록 하고, 이때, 사용자의 신체 각 부위에 착용 가능한 웨어러블 형태의 햅틱 디바이스를 이용하여, 모션캡쳐(motion capture)를 통해 사용자의 동작이나 자세의 정확도를 판단하고 전문가와의 차이에 따라 사용자의 관절이나 신체부위에 햅틱 피드백(haptic feedback)을 통해 각각 다른 자극을 부여하도록 구성되는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법이 도록 제공됨으로써, 전문가의 지도를 받지 않고도 비교적 간단한 구성 및 저렴한 비용으로 정확한 자세와 동작을 용이하게 학습할 수 있도록 하여 학습효과 및 효율을 높일 수 있다.
또한, 본 발명에 따르면, 상기한 바와 같이 모션캡쳐 및 햅틱 피드백을 통해 비교적 간단한 구성 및 저렴한 비용으로 정확한 자세와 동작을 용이하게 학습할 수 있도록 구성되는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법이 제공됨으로써, 예를 들면, 무용, 댄스, 피트니스, 트레이닝 등과 같은 예체능 분야 및 골프 등과 같은 각종 전문 스포츠 분야에 있어서, 일반 사용자가 전문가의 도움 없이 정확한 자세나 동작을 학습하기 어려울 뿐만 아니라, 전문가의 지도를 받기 위하여는 학습비용이 크게 증가하여 일반인이 쉽게 접하기 어려운 한계가 있었던 문제점을 해소할 수 있다.
도 1은 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템의 전체적인 구성을 개략적으로 나타내는 도면이다.
도 2는 도 1에 나타낸 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템의 제어부의 구체적인 구성을 개략적으로 나타내는 블록도이다.
도 3은 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템의 햅틱장치부에 구비되는 햅틱 디바이스의 구성예를 개략적으로 나타내는 도면이다.
도 4는 본 발명의 다른 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템의 전체적인 구성을 개략적으로 나타내는 블록도이다.
도 5는 본 발명의 실시예에 따른 오디오 반응형 햅틱 시스템의 전체적인 구성을 개략적으로 나타내는 블록도이다.
도 2는 도 1에 나타낸 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템의 제어부의 구체적인 구성을 개략적으로 나타내는 블록도이다.
도 3은 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템의 햅틱장치부에 구비되는 햅틱 디바이스의 구성예를 개략적으로 나타내는 도면이다.
도 4는 본 발명의 다른 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템의 전체적인 구성을 개략적으로 나타내는 블록도이다.
도 5는 본 발명의 실시예에 따른 오디오 반응형 햅틱 시스템의 전체적인 구성을 개략적으로 나타내는 블록도이다.
이하, 첨부된 도면을 참조하여, 본 발명에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법의 구체적인 실시예에 대하여 설명한다.
여기서, 이하에 설명하는 내용은 본 발명을 실시하기 위한 하나의 실시예일 뿐이며, 본 발명은 이하에 설명하는 실시예의 내용으로만 한정되는 것은 아니라는 사실에 유념해야 한다.
또한, 이하의 본 발명의 실시예에 대한 설명에 있어서, 종래기술의 내용과 동일 또는 유사하거나 당업자의 수준에서 용이하게 이해하고 실시할 수 있다고 판단되는 부분에 대하여는, 설명을 간략히 하기 위해 그 상세한 설명을 생략하였음에 유념해야 한다.
즉, 본 발명은, 후술하는 바와 같이, 예를 들면, 무용, 댄스, 피트니스, 트레이닝 등과 같은 예체능 분야 및 골프 등과 같은 각종 전문 스포츠 분야에 있어서, 일반 사용자가 전문가의 도움 없이 정확한 자세나 동작을 학습하기 어려울 뿐만 아니라, 전문가의 지도를 받기 위하여는 학습비용이 크게 증가하여 일반인이 쉽게 접하기 어려운 한계가 있었던 문제점을 해소하기 위해, 모션캡쳐(motion capture) 및 햅틱 피드백(haptic feedback)을 통해 비교적 간단한 구성 및 저렴한 비용으로 정확한 자세와 동작을 용이하게 학습할 수 있도록 구성되는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법에 관한 것이다.
또한, 본 발명은, 후술하는 바와 같이, 일반 사용자가 전문가의 도움 없이 정확한 자세나 동작을 학습하기 어려웠던 문제점을 해결하기 위해, 미리 구현된 전문가의 동작을 사용자가 그대로 따라하도록 하고, 이때, 사용자의 신체 각 부위에 착용 가능한 웨어러블 형태의 햅틱 디바이스를 이용하여, 모션캡쳐를 통해 사용자의 동작이나 자세의 정확도를 판단하고 전문가와의 차이에 따라 사용자의 관절이나 신체부위에 햅틱 피드백을 통해 각각 다른 자극을 부여하도록 구성됨으로써, 전문가의 지도를 받지 않고도 비교적 간단한 구성 및 저렴한 비용으로 정확한 자세와 동작을 용이하게 학습할 수 있도록 하여 학습효과 및 효율을 높일 수 있도록 구성되는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법에 관한 것이다.
계속해서, 도면을 참조하여, 본 발명에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법의 구체적인 내용에 대하여 설명한다.
더 상세하게는, 먼저, 도 1을 참조하면, 도 1은 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템(10)의 전체적인 구성을 개략적으로 나타내는 블록도이다.
도 1에 나타낸 바와 같이, 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템(10)은, 크게 나누어, 미리 정해진 자세교정 프로그램에 따라 전문가에 의해 수행된 각종 동작이나 자세를 사용자에게 제시하기 위한 영상이나 이미지를 포함하는 각종 컨텐츠 데이터를 저장하여 이루어지는 데이터베이스부(11)와, 사용자가 자신이 원하는 서비스를 요청하고 서비스 제공에 필요한 각종 정보를 입력하기 위한 입력수단을 포함하여 이루어지는 입력부(12)와, 입력부(12)를 통하여 입력된 사용자 정보에 근거하여, 데이터베이스부(11)에 저장된 데이터로부터 미리 정해진 설정에 따라 또는 사용자에 의해 선택된 자세교정 프로그램을 해당 사용자에게 제공하기 위한 디스플레이 및 스피커 등의 출력수단을 포함하여 이루어지는 출력부(13)와, 모션캡쳐(motion capture) 기술을 이용하여, 출력부(13)를 통해 제공되는 자세교정 프로그램에 따라 사용자에 의해 수행되는 동작이나 자세를 인식하기 위해 사용자의 관절 및 신체부위에 각각 착용되는 복수의 모션센서를 포함하여 이루어지는 동작인식부(14)와, 사용자의 각 관절 및 신체부위에 자극을 부여하는 것에 의해 사용자에게 햅틱 피드백(haptic feedbak)을 제공하도록 사용자의 관절 및 신체부위의 미리 정해진 위치에 각각 부착되는 다수의 햅틱 디바이스(haptic device)를 포함하여 햅틱장치부(15)와, 상기한 각 부 및 시스템(10)의 전체적인 동작을 제어하고, 동작인식부(14)를 통해 인식된 사용자의 동작이나 자세를 전문가의 동작이나 자세와 비교하여 비교결과를 출력부(13)를 통해 표시하는 동시에, 정확도에 따라 햅틱장치부(15)의 각각의 햅틱 디바이스를 통해 피드백을 제공하는 처리가 수행되도록 이루어지는 제어부(16)를 포함하여 구성될 수 있다.
여기서, 상기한 데이터베이스부(11)는, 전문가에 의해 수행된 각종 자세교정 프로그램의 영상이나 이미지를 포함하는 컨텐츠 데이터에 더하여, 각각의 컨텐츠에 제시된 동작 및 자세에 대하여 모션캡쳐를 통해 수집된 각 관절 및 신체부위에 대한 모션캡쳐 데이터를 더 포함하여 구성됨으로써, 사용자의 동작이나 자세에 대한 모션캡쳐 결과와 비교시 정확도의 판정이 보다 신속하고 용이하게 이루어질 수 있도록 구성될 수 있다.
또한, 상기한 입력부(12) 및 출력부(13)는, 예를 들면, PC나 노트북 등과 같은 정보처리장치 또는 스마트폰이나 태블릿 PC 등과 같은 개인 휴대용 단말기 중 적어도 하나를 포함하여 이루어지는 사용자 단말기에 상기한 데이터베이스부(11), 동작인식부(14), 햅틱 피드백부(15) 및 제어부(16)와 연동되는 전용의 어플리케이션 프로그램을 설치하여 구성될 수 있으며, 그것에 의해, 별도의 하드웨어를 구현할 필요 없이 보다 간단한 구성 및 저렴한 비용으로 구성될 수 있다.
아울러, 상기한 데이터베이스부(11) 및 제어부(16)는, 사용자 단말기와 통신을 통해 연결되어 각종 데이터를 송수신하는 서버의 형태로 구성될 수 있으며, 이러한 구성으로부터, 전체적인 시스템의 구성을 보다 간소화하고 비용을 절감할 수 있다.
더욱이, 상기한 동작인식부(14) 및 햅틱장치부(15)는, 예를 들면, 밴드나 조끼, 장갑, 모자 등과 같이, 사용자의 각 관절 및 신체부위에 착용되는 웨어러블 장치에 각각의 모션센서 및 햅틱 디바이스가 함께 설치되어 일체로 형성되도록 구성될 수 있다.
또는, 상기한 동작인식부(14) 및 햅틱장치부(15)는, 사용자의 관절이나 신체부위에 각각 별도로 착용되는 형태가 아니라, 예를 들면, 사용자의 전신에 대하여 미리 정해진 특정 위치에 각각의 모션센서 및 햅틱 디바이스가 설치되는 일체형 웨어러블 전신슈트의 형태로 구성될 수도 있다.
또한, 도 2를 참조하면, 도 2는 도 1에 나타낸 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템(10)의 제어부(16)의 구체적인 구성을 개략적으로 나타내는 블록도이다.
도 2에 나타낸 바와 같이, 상기한 제어부(16)는, 동작인식부(14)를 통해 인식된 사용자의 동작이나 자세를 전문가의 동작이나 자세와 비교하여 미리 정해진 기준에 따라 정확도를 판정하고 판정결과를 출력부(13)를 통해 표시하는 처리가 수행되도록 이루어지는 동작판정부(21)와, 동작판정부(21)의 판정결과에 근거하여, 햅틱장치부(15)의 각각의 햅틱 디바이스를 통해 사용자의 관절 및 신체부위에 정확도에 따라 미리 설정된 서로 다른 자극을 부여하는 것에 의해 사용자에게 피드백을 제공하는 처리가 수행되도록 이루어지는 햅틱 피드백부(22)를 포함하여 구성될 수 있다.
더 상세하게는, 상기한 제어부(16)는, 예를 들면, 특정 부위에서 동작판정부(21)에 의해 판정된 정확도가 미리 정해진 기준값이나 범위를 만족하지 못하는 경우 해당 부위에 대한 교정이 필요한 것으로 판단하고, 교정이 필요한 것으로 판단되면 햅틱장치부(15)의 각각의 햅틱 디바이스를 통해 정확도에 근거하여 미리 정해진 기준에 따라 각 부위별로 미리 설정된 자극을 해당 부위에 인가하도록 하는 처리가 수행되도록 구성될 수 있다.
즉, 예를 들면, 특정 자세의 수행 중 왼쪽 팔꿈치와 오른쪽 발의 정확도가 기준을 벗어난 경우, 왼쪽 팔꿈치와 오른쪽 발 부위에 설치된 햅틱 디바이스를 통해 각각 미리 설정된 자극을 전달하도록 하는 제어신호가 햅틱 피드백부(22)로부터 전송되도록 구성될 수 있다.
이때, 예를 들면, 정확도의 높고 낮음에 따라 자극의 강도를 조절하거나, 신체부위별로 각각 다른 자극을 인가하도록 구성될 수 있고, 또는, 예를 들면, 특정 부위의 방향이 오른쪽으로 치우친 경우 해당 부위의 좌측에 또는 우측에서 좌측으로 향하는 자극을 인가하는 것과 같이, 교정해야 할 내용에 따라 각각 다른 자극을 인가하도록 구성될 수 있다.
더 상세하게는, 상기한 햅틱장치부(15)의 각각의 관절이나 신체부위마다 배치되는 햅틱 디바이스를, 예를 들면, 팔꿈치나 무릎 등과 같은 특정 지점에 대하여 상하좌우의 4방향이나 6방향 또는 8방향 등과 같이, 각 부위별로 방향에 따라 설치되는 복수 개의 햅틱 디바이스를 포함하도록 구성하고, 동작판정부(21)의 판정결과에 근거하여 교정해야 할 내용에 따라 햅틱 피드백부(22)를 통해 교정위치나 방향을 나타내도록 자극을 인가함으로써, 사용자가 단순히 눈으로 보고 차이를 판단하는 기존의 방식에 비하여 햅틱 피드백을 통해 보다 정확하고 즉각적으로 교정내용을 파악할 수 있다.
즉, 도 3을 참조하면, 도 3은 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템(10)의 햅틱장치부(15)에 구비되는 햅틱 디바이스의 구성예를 개략적으로 나타내는 도면이다.
도 3에 나타낸 바와 같이, 예를 들면, 특정 부위에 4개의 햅틱 디바이스(31, 32, 33, 34)가 사각형 형태로 각각 설치된 경우, 교정내용에 따라 햅틱 피드백을 통해 상하좌우의 각 모서리(31, 32, 33, 34)나 변(31-32, 31-33, 32-24, 33-34)에 각각 자극을 인가하여 교정위치를 알려주거나, 또는, 좌변(31-33)에서 우변(32-34)으로, 상변(31-32)에서 하변(33-34)으로, 대각선(31-34, 32-33, 33-32, 34-31) 방향으로 등과 같이, 교정방향을 알려주도록 구성될 수도 있으며, 즉, 본 발명은, 반드시 상기한 본 발명의 실시예에 제시된 내용으로만 한정되는 것이 아니라, 본 발명의 취지 및 본질을 벗어나지 않는 범위 내에서 당업자에 의해 필요에 따라 다양하게 수정 및 변경하여 구성될 수 있는 것임에 유념해야 한다.
따라서 상기한 바와 같이 각 부위별로 복수 개 설치되는 각각의 햅틱 디바이스에 대하여 자극의 방향, 순서, 속도, 강도 등을 각각 다르게 인가함으로써, 교정내용을 보다 정확하고 상세하게 전달 가능하도록 구성될 수 있다.
여기서, 상기한 바와 같이 하여 구성되는 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템(10)에 있어서, 예를 들면, 모션캡쳐를 통해 사용자의 동작이나 자세를 인식하는 처리나, 모션캡쳐를 통해 인식된 사용자의 동작이나 자세를 미리 정해진(전문가의) 동작이나 자세와 비교하여 정확도를 판단하는 처리 등에 대한 보다 상세한 내용에 대하여는 기존의 자세교정 장치 및 방법들의 내용을 참조하여 당업자가 적절하게 구성할 수 있는 사항이므로, 이에, 본 발명에서는, 설명을 간략히 하기 위해, 상기한 바와 같이 공지된 종래기술의 문헌 등을 참조하여 당업자가 용이하게 이해하고 실시할 수 있는 내용에 대하여는 그 상세한 설명을 생략하였음에 유념해야 한다.
계속해서, 도 4를 참조하면, 도 4는 본 발명의 제 2 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템(40)의 전체적인 구성을 개략적으로 나타내는 블록도이다.
도 4에 나타낸 바와 같이, 본 발명의 제 2 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템(40)은, 사용자 단말기(41)와 동작인식 및 햅틱 피드백 기능을 가지는 웨어러블 장치(42) 및 서버(43)가 유선 또는 무선 통신 중 적어도 하나의 방식을 통해 연동되는 온라인 기반의 네트워크 시스템으로 구성될 수 있다.
더 상세하게는, 먼저, 상기한 사용자 단말기(41)는, 도 1 및 도 2를 참조하여 상기한 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템(10)의 입력부(12) 및 출력부(13)를 포함하여, PC나 노트북 또는 스마트폰이나 태블릿 PC 등을 이용하여 구성될 수 있다.
또한, 상기한 웨어러블 장치(42)는, 도 1 및 도 2를 참조하여 상기한 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템(10)의 동작인식부(14) 및 햅틱장치부(15)를 포함하여 구성될 수 있다.
아울러, 상기한 서버(43)는, 도 1 및 도 2를 참조하여 상기한 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템(10)의 데이터베이스부(11) 및 제어부(16)를 포함하여 구성될 수 있다.
더욱이, 본 발명에 따르면, 단순히 전문가의 지도를 비대면으로 수행 가능한 학습기능만을 제공하는 것에 그치는 것이 아니라, 상기한 바와 같이 하여 구성되는 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법을 재활치료나 운동치료와 같은 의료분야에 적용함으로써, 재활이나 운동요법이 필요한 환자들에게 비대면 방식으로 재활 및 운동치료가 가능하도록 구성되는 모션캡쳐와 햅틱 피드백을 이용한 재활 및 운동치료 시스템을 용이하게 구현할 수 있다.
또한, 본 발명에 따르면, 상기한 바와 같은 학습 및 의료분야에 더하여, 예를 들면, 상기한 입력부(12)에 외부로부터 오디오 신호를 수신하기 위한 마이크를 더 포함하거나, 또는, 상기한 사용자 단말기(31)를 통하여 외부에서 입력되는 오디오 주파수에 따라 전신 햅틱슈트로 이루어지는 햅틱장치부(15) 또는 웨어러블 장치(22)를 통해 사용자에게 다양한 햅틱 자극을 부여하도록 구성됨으로써, 춤이 서툰 사용자에게도 음악에 반응하여 춤을 추는 즐거움과 같은 다양한 엔터테인먼트 기능을 제공할 수 있는 오디오 반응형 햅틱 시스템 및 방법을 용이하게 구현할 수 있다.
더 상세하게는, 도 5를 참조하면, 도 5는 본 발명의 실시예에 따른 오디오 반응형 햅틱 시스템(50)의 전체적인 구성을 개략적으로 나타내는 블록도이다.
도 5에 나타낸 바와 같이, 본 발명의 실시예에 따른 오디오 반응형 햅틱 시스템(50)은, 사용자의 신체부위에 대하여 미리 정해진 위치에 다수의 햅틱 디바이스가 각각 설치되어 사용자의 몸에 착용되는 전신슈트 형태로 형성되는 햅틱슈트부(51)와, 외부로부터 오디오 신호를 수신하기 위한 마이크를 포함하여 이루어지는 오디오 수신부(52)와, 오디오 수신부(52)를 통해 수신된 오디오 신호에 대하여 주파수를 분석하는 처리가 수행되도록 이루어지는 오디오 분석부(53)와, 오디오 분석부(53)의 주파수 분석결과에 근거하여 햅틱슈트부(51)를 통해 주파수별로 미리 정해진 자극을 인가하는 처리가 수행되도록 이루어지는 햅틱 피드백부(54) 및 상기한 각 부 및 시스템(50)의 전체적인 동작을 제어하는 처리가 수행되도록 이루어지는 제어부(55)를 포함하여 구성될 수 있다.
여기서, 상기한 햅틱슈트부(51)는 도 1 내지 도 4를 참조하여 상기한 햅틱장치부(15) 또는 웨어러블 장치(22)를 이용하여 구성될 수 있고, 상기한 오디오 수신부(52)는 상기한 입력부(12)에 외부로부터 오디오 신호를 수신하기 위한 마이크를 더 포함하여 구성되거나, 또는, 상기한 사용자 단말기(31)를 통하여 외부에서 입력되는 오디오(음악)를 수신하도록 구성될 수 있다.
아울러, 상기한 오디오 분석부(53) 및 햅틱 피드백부(54)는, 도 1 내지 도 4를 참조하여 상기한 햅틱 피드백부(22)를 이용하여, 입력되는 오디오 신호(음악)의 주파수를 분석하고 주파수별로 각각 미리 설정된 자극을 햅틱슈트부(51)를 통해 인가하도록 하는 처리가 수행되도록 구성될 수 있다.
더욱이, 상기한 오디오 반응형 햅틱 시스템(50)은, 상기한 오디오 수신부(52), 오디오 분석부(53), 햅틱 피드백부(54) 및 제어부(55)가 햅틱슈트부(51)에 일체로 형성되어 단일의 슈트 형태로 구성될 수 있다.
상기한 바와 같은 구성으로부터, 예를 들면, 사용자가 음악을 듣는 경우 해당 음악의 진행, 즉, 주파수 변화에 따라 사용자의 전신에 다양한 자극이 인가되고, 사용자는 해당 자극에 반응하여 몸을 움직이는 것만으로 음악에 맞추어 춤을 추는 것과 같은 효과를 얻을 수 있으므로, 춤에 서툰 사용자에게도 음악에 맞추어 춤을 추는 즐거움을 제공할 수 있고, 춤 이외에도 다양한 분야에 적용하는 것에 의해 종합적인 복합 엔터테인먼트 기능을 구현할 수 있다.
따라서 상기한 바와 같이 하여 본 발명의 실시예에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법을 구현할 수 있으며, 그것에 의해, 본 발명에 따르면, 미리 구현된 전문가의 동작을 사용자가 그대로 따라하도록 하고, 이때, 사용자의 신체 각 부위에 착용 가능한 웨어러블 형태의 햅틱 디바이스를 이용하여, 모션캡쳐(motion capture)를 통해 사용자의 동작이나 자세의 정확도를 판단하고 전문가와의 차이에 따라 사용자의 관절이나 신체부위에 햅틱 피드백(haptic feedback)을 통해 각각 다른 자극을 부여하도록 구성되는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법이 도록 제공됨으로써, 전문가의 지도를 받지 않고도 비교적 간단한 구성 및 저렴한 비용으로 정확한 자세와 동작을 용이하게 학습할 수 있도록 하여 학습효과 및 효율을 높일 수 있다.
또한, 본 발명에 따르면, 상기한 바와 같이 모션캡쳐 및 햅틱 피드백을 통해 비교적 간단한 구성 및 저렴한 비용으로 정확한 자세와 동작을 용이하게 학습할 수 있도록 구성되는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법이 제공됨으로써, 예를 들면, 무용, 댄스, 피트니스, 트레이닝 등과 같은 예체능 분야 및 골프 등과 같은 각종 전문 스포츠 분야에 있어서, 일반 사용자가 전문가의 도움 없이 정확한 자세나 동작을 학습하기 어려울 뿐만 아니라, 전문가의 지도를 받기 위하여는 학습비용이 크게 증가하여 일반인이 쉽게 접하기 어려운 한계가 있었던 문제점을 해소할 수 있다.
이상, 상기한 바와 같은 본 발명의 실시예를 통하여 본 발명에 따른 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법의 상세한 내용에 대하여 설명하였으나, 본 발명은 상기한 실시예에 기재된 내용으로만 한정되는 것은 아니며, 따라서 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 설계상의 필요 및 기타 다양한 요인에 따라 여러 가지 수정, 변경, 결합 및 대체 등이 가능한 것임은 당연한 일이라 하겠다.
10. 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템
11. 데이터베이스부 12. 입력부
13. 출력부 14. 동작인식부
15. 햅틱장치부 16. 제어부
21. 동작판정부 22. 햅틱 피드백부
31. 햅틱 디바이스 32. 햅틱 디바이스
33. 햅틱 디바이스 34. 햅틱 디바이스
40. 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템
41. 사용자 단말기 42. 웨어러블 장치
43. 서버 50. 오디오 반응형 햅틱 시스템
51. 햅틱슈트부 52. 오디오 수신부
53. 오디오 분석부 54. 햅틱 피드백부
55. 제어부
11. 데이터베이스부 12. 입력부
13. 출력부 14. 동작인식부
15. 햅틱장치부 16. 제어부
21. 동작판정부 22. 햅틱 피드백부
31. 햅틱 디바이스 32. 햅틱 디바이스
33. 햅틱 디바이스 34. 햅틱 디바이스
40. 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템
41. 사용자 단말기 42. 웨어러블 장치
43. 서버 50. 오디오 반응형 햅틱 시스템
51. 햅틱슈트부 52. 오디오 수신부
53. 오디오 분석부 54. 햅틱 피드백부
55. 제어부
Claims (10)
- 모션캡쳐(motion capture)와 햅틱 피드백(haptic feedbak)을 이용한 자세교정 시스템에 있어서,
미리 정해진 자세교정 프로그램에 따라 전문가에 의해 수행된 각종 동작이나 자세를 사용자에게 제시하기 위한 영상 또는 이미지를 포함하는 각종 자세교정 컨텐츠 데이터를 포함하여 이루어지는 데이터베이스부;
사용자가 자신이 원하는 서비스를 요청하고 서비스 제공에 필요한 각종 정보를 입력하기 위한 입력수단을 포함하여 이루어지는 입력부;
상기 입력부를 통하여 입력된 사용자 정보에 근거하여, 상기 데이터베이스부에 저장된 데이터로부터 미리 정해진 설정에 따라 또는 사용자에 의해 선택된 자세교정 컨텐츠를 해당 사용자에게 제공하기 위한 디스플레이 및 스피커를 포함하는 출력수단을 포함하여 이루어지는 출력부;
모션캡쳐 기술을 이용하여, 상기 출력부를 통해 제공되는 자세교정 컨텐츠의 내용에 따라 사용자에 의해 수행되는 동작이나 자세를 인식하기 위해 사용자의 관절 및 신체부위에 각각 착용되는 복수의 모션센서를 포함하여 이루어지는 동작인식부;
사용자의 각 관절 및 신체부위에 자극을 부여하기 위해 사용자의 관절 및 신체부위의 미리 정해진 위치에 각각 부착되는 다수의 햅틱 디바이스(haptic device)를 포함하여 이루어지는 햅틱장치부; 및
상기 시스템의 전체적인 동작을 제어하고, 상기 동작인식부를 통해 인식된 사용자의 동작이나 자세를 전문가의 동작이나 자세와 비교하여 비교결과를 상기 출력부를 통해 표시하는 동시에, 정확도에 따라 상기 햅틱장치부의 각각의 햅틱 디바이스를 통해 햅틱 피드백을 제공하는 처리가 수행되도록 이루어지는 제어부를 포함하여 구성되는 것을 특징으로 하는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템.
- 제 1항에 있어서,
상기 데이터베이스부는,
전문가에 의해 수행된 자세교정 컨텐츠 데이터에 더하여, 각각의 컨텐츠에 제시된 동작 및 자세에 대하여 모션캡쳐를 통해 수집된 각 관절 및 신체부위에 대한 모션캡쳐 데이터를 더 포함하여 구성되는 것을 특징으로 하는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템.
- 제 1항에 있어서,
상기 입력부 및 상기 출력부는,
PC나 노트북을 포함하는 정보처리장치 또는 스마트폰이나 태블릿 PC를 포함하는 개인 휴대용 단말기 중 적어도 하나를 포함하여 이루어지는 사용자 단말기에 상기 데이터베이스부, 상기 동작인식부, 상기 햅틱 피드백부 및 상기 제어부와 연동되는 전용의 어플리케이션 프로그램을 설치하여 구성되는 것을 특징으로 하는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템.
- 제 3항에 있어서,
상기 데이터베이스부 및 상기 제어부는,
상기 사용자 단말기와 통신을 통해 연결되어 각종 데이터를 송수신하는 서버로 구성되는 것을 특징으로 하는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템.
- 제 1항에 있어서,
상기 동작인식부 및 상기 햅틱장치부는,
사용자의 각 관절 및 신체부위에 착용 가능하도록 형성되고 각각의 모션센서 및 햅틱 디바이스가 함께 설치되어 일체로 이루어지는 다수의 웨어러블 장치를 포함하여 구성되는 것을 특징으로 하는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템.
- 제 1항에 있어서,
상기 동작인식부 및 상기 햅틱장치부는,
사용자의 전신에 대하여 미리 정해진 위치에 각각의 모션센서 및 햅틱 디바이스가 각각 설치되어 있는 전신 햅틱슈트의 형태로 구성되는 것을 특징으로 하는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템.
- 제 1항에 있어서,
상기 제어부는,
상기 동작인식부를 통해 인식된 사용자의 동작이나 자세를 전문가의 동작이나 자세와 비교하여 미리 정해진 기준에 따라 정확도를 판정하고 판정결과를 상기 출력부를 통해 표시하는 처리가 수행되도록 이루어지는 동작판정부; 및
상기 동작판정부의 판정결과에 근거하여, 상기 햅틱장치부의 각각의 햅틱 디바이스를 통해 사용자의 관절 및 신체부위에 정확도에 따라 미리 설정된 서로 다른 자극을 부여하는 것에 의해 사용자에게 햅틱 피드백을 제공하는 처리가 수행되도록 이루어지는 햅틱 피드백부를 포함하여 구성되는 것을 특징으로 하는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템.
- 제 7항에 있어서,
상기 제어부는,
특정 부위에서 상기 동작판정부에 의해 판정된 정확도가 미리 정해진 기준값이나 기준범위를 만족하지 못하는 경우 해당 부위에 대한 교정이 필요한 것으로 판단하고,
교정이 필요한 것으로 판단되면 상기 햅틱장치부의 각각의 햅틱 디바이스를 통해 정확도에 근거하여 미리 정해진 기준에 따라 각 부위별로 미리 설정된 자극을 해당 부위에 인가하며,
이때, 정확도의 높고 낮음에 따라 자극의 강도를 조절하거나, 교정해야 할 내용에 따라 신체부위별로 각각 다른 자극을 인가하도록 하는 처리가 수행되도록 구성되는 것을 특징으로 하는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템.
- 제 8항에 있어서,
상기 햅틱장치부는,
사용자의 각 관절이나 신체부위마다 각각의 부위별로 미리 정해진 복수의 위치에 복수 개의 햅틱 디바이스가 각각 부착되도록 구성되고,
상기 햅틱 피드백부는,
상기 동작판정부의 판정결과에 근거하여, 교정이 필요한 위치 및 내용에 따라 해당 위치에 부착된 복수 개의 상기 햅틱 디바이스를 각각 별도로 제어하는 처리가 수행되도록 구성되는 것을 특징으로 하는 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템.
- 청구항 1항 내지 청구항 9항 중 어느 한 항에 기재된 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템을 이용한 자세교정방법에 있어서,
상기 자세교정 시스템의 입력부 및 출력부를 통하여 사용자 정보를 입력받고, 입력된 데이터 및 상기 자세교정 시스템의 데이터베이스부에 저장된 데이터에 근거하여 해당 사용자에게 자세교정 컨텐츠를 제시하는 처리가 수행되는 자세교정 컨텐츠 제공단계;
상기 자세교정 시스템의 동작인식부 및 제어부를 통하여, 상기 자세교정 컨텐츠 제공단계에서 제시된 컨텐츠의 내용과 사용자의 동작 및 자세를 비교하고 정확도를 판단하는 처리가 수행되는 정확도 판정단계; 및
상기 정확도 판정단계의 판정결과에 근거하여, 상기 제어부 및 상기 자세교정 시스템의 햅틱장치부를 통해 정확도에 따른 햅틱 피드백을 사용자에게 인가하는 처리가 수행되는 자세교정단계를 포함하여 구성되는 것을 특징으로 하는 자세교정방법.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210193921A KR20230103208A (ko) | 2021-12-31 | 2021-12-31 | 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210193921A KR20230103208A (ko) | 2021-12-31 | 2021-12-31 | 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20230103208A true KR20230103208A (ko) | 2023-07-07 |
Family
ID=87154734
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020210193921A KR20230103208A (ko) | 2021-12-31 | 2021-12-31 | 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20230103208A (ko) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101521025B1 (ko) | 2013-11-14 | 2015-05-19 | 조선대학교산학협력단 | 승마자의 3차원 모션분석기반 실시간 코칭시스템 |
| KR102123743B1 (ko) | 2018-11-20 | 2020-06-17 | 전자부품연구원 | 피트니스 자세교정을 위한 운동분석 방법 |
-
2021
- 2021-12-31 KR KR1020210193921A patent/KR20230103208A/ko not_active Application Discontinuation
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101521025B1 (ko) | 2013-11-14 | 2015-05-19 | 조선대학교산학협력단 | 승마자의 3차원 모션분석기반 실시간 코칭시스템 |
| KR102123743B1 (ko) | 2018-11-20 | 2020-06-17 | 전자부품연구원 | 피트니스 자세교정을 위한 운동분석 방법 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101970687B1 (ko) | 개인화 증강현실 기술을 이용한 피트니스 코칭 시스템 | |
| KR101687252B1 (ko) | 맞춤형 개인 트레이닝 관리 시스템 및 방법 | |
| US11134893B2 (en) | Limb movement gesture judgment method and device | |
| US9198622B2 (en) | Virtual avatar using biometric feedback | |
| KR20180103280A (ko) | 관절 사이의 거리 유사성을 토대로 자세인식을 수행하는 노인전용 운동안내 시스템 | |
| KR101909693B1 (ko) | 증강현실 기반의 가상 피트니스 트레이너가 제공되는 피트니스 시스템 | |
| CN111228752B (zh) | 用于自动配置传感器的方法、电子设备和记录介质 | |
| KR102049096B1 (ko) | 혼합 현실 기반의 운동 시스템 | |
| US11273341B2 (en) | Interactive visualization system for biomechanical assessment | |
| US10272293B2 (en) | Body motion analysis system, portable device and body motion analysis method | |
| KR101521025B1 (ko) | 승마자의 3차원 모션분석기반 실시간 코칭시스템 | |
| KR20170010157A (ko) | 인터랙티브 운동프로그램을 통한 사용자의 운동동작 유도 방법 및 그 장치 | |
| KR101950412B1 (ko) | 승마 시뮬레이터 및 승마 시뮬레이션 방법 | |
| KR102320960B1 (ko) | 사용자 신체 맞춤형 홈 트레이닝 동작 안내 및 교정 시스템 | |
| US20230116624A1 (en) | Methods and systems for assisted fitness | |
| US11983962B2 (en) | Information processing apparatus, and method | |
| JP6884306B1 (ja) | システム、方法、情報処理装置 | |
| KR102051004B1 (ko) | 최적화된 음향을 제공하는 혼합 현실 기반 운동 시스템 | |
| JP2023168557A (ja) | プログラム、方法、情報処理装置 | |
| KR20230103208A (ko) | 모션캡쳐와 햅틱 피드백을 이용한 자세교정 시스템 및 방법 | |
| CN110458076A (zh) | 一种基于计算机视觉的教学方法及系统 | |
| KR102652859B1 (ko) | 반응형 햅틱 피드백 시스템 및 이를 이용한 자세교정, 재활 및 운동치료 시스템 | |
| KR20230103209A (ko) | 모션캡쳐 및 햅틱 피드백을 이용한 자세교정, 재활 및 운동치료 시스템 및 방법 | |
| JP6811349B1 (ja) | 情報処理装置、方法、プログラム | |
| JP6741892B1 (ja) | 測定システム、方法、プログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal |