KR102351036B1 - Vr 시스템 탑승 장비 제어 장치 및 방법 - Google Patents

Vr 시스템 탑승 장비 제어 장치 및 방법 Download PDF

Info

Publication number
KR102351036B1
KR102351036B1 KR1020200015479A KR20200015479A KR102351036B1 KR 102351036 B1 KR102351036 B1 KR 102351036B1 KR 1020200015479 A KR1020200015479 A KR 1020200015479A KR 20200015479 A KR20200015479 A KR 20200015479A KR 102351036 B1 KR102351036 B1 KR 102351036B1
Authority
KR
South Korea
Prior art keywords
motion
movement
acceleration
vehicle
user
Prior art date
Application number
KR1020200015479A
Other languages
English (en)
Other versions
KR20210101459A (ko
Inventor
최윤화
김홍석
홍해종
송명성
Original Assignee
주식회사 스토익엔터테인먼트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 스토익엔터테인먼트 filed Critical 주식회사 스토익엔터테인먼트
Priority to KR1020200015479A priority Critical patent/KR102351036B1/ko
Publication of KR20210101459A publication Critical patent/KR20210101459A/ko
Application granted granted Critical
Publication of KR102351036B1 publication Critical patent/KR102351036B1/ko

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63GMERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G7/00Up-and-down hill tracks; Switchbacks
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80Special adaptations for executing a specific game genre or game mode
    • A63F13/803Driving vehicles or craft, e.g. cars, airplanes, ships, robots or tanks
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63GMERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G31/00Amusement arrangements
    • A63G31/16Amusement arrangements creating illusions of travel
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

VR 시스템 탑승 장비 제어 장치 및 방법이 개시된다. 개시된 장치는, VR 컨텐츠 내 가상 탑승체의 가속도 정보를 획득하는 가속도 획득부; 상기 가속도 정보 중 직선 가속도에 의해 현실 세계에서 작용하는 반작용 움직임을 반영하기 위한 역 움직임을 연산하는 역움직임 연산부; 상기 연산된 역움직임 및 상기 가속도 정보 중 회전 가속도로부터 획득되는 상기 가상 탑승체의 회전 움직임에 기초하여 VR 시스템의 탑승 장비 움직임을 제어하는 움직임 제어 정보를 생성하는 움직임 제어 정보 생성부; 상기 생성된 움직임 제어 정보에 기초하여 상기 탑승 장비를 구동시키는 탑승 장비 구동부를 포함한다. 개시된 장치에 의하면, VR 시스템에서 반작용에 따른 가속감을 사용자가 체감할 수 있도록 움직임이 제어될 수 있으며, VR 시스템에서 발생하는 현실과의 괴리감으로 인해 발생하는 어지럼증을 억제할 수 있는 장점이 있다.

Description

VR 시스템 탑승 장비 제어 장치 및 방법{Device and Method for Controlling Boarding Device of VR System}
본 발명은 VR 시스템 탑승 장비 제어 장치 및 방법에 관한 것으로서, 더욱 상세하게는 VR 시스템에서 VR 컨텐츠 내 가상 탑승체에 동기화되어 현실 세계에서 움직이는 VR 시스템 탑승 장비의 움직임을 제어하기 위한 장치 및 방법에 관한 것이다.
가상 현실(Virtual Reality: 이하 VR) 기술의 발전에 의해 VR 어트랙션 시장이 활성화됨에 따라 여러 형태의 사용자 탑승형 VR 탑승 장비가 개발되었다. 기존에는 사용자가 실제 탑승하는 탑승 장비가 고정된 위치에서 롤(Roll)과 피치(Pitch)의 2축 또는 롤과 피치 및 히브(heave)의 3축에 대한 제한적인 회전각을 제공하는 지상 고정형 탑승 장비가 가장 보편적으로 이용되었다. 지상 고정형 탑승 장비는 제한적인 회전각만을 제공하고 직선 운동을 제공하지 아니하므로, 지상 고정형 탑승 장비를 위한 VR 컨텐츠는 미리 지정된 시나리오의 경로를 따라 진행하도록 구성되었다.
따라서 VR 컨텐츠 내에서 사용자가 바라보는 영상의 방향과 가상 탑승체의 구동을 사전에 정확하게 연동시킬 수 있었다. 또한 사용자 자신의 머리 회전 등을 HMD(Head Mounted Display) 트래킹 등으로 측정하여 추가적으로 반영하기 용이하였다.
그러나, 제한적인 회전 움직임만 제공할 수 있는 VR 시스템 탑승 장비는 현실 세계에서 발생하는 가속감을 완전히 제공할 수는 없었다.
도 1은 VR 컨텐츠에서 롤러 코스터가 내려가는 상태일 경우 VR 시스템 탑승 장비의 상태를 나타낸 도면이다.
도 1에 도시된 바와 같이, VR 컨텐츠에서 롤러 코스터가 아래로 내려가는 경우, 롤러 코스터 자체는 지면을 향해 기울어져 있기 때문에 VR 시스템의 탑승 장비도 앞으로 기울어지게 된다.
그런데, 현실 세계에서는 지면을 항해 내려갈 때 반작용의 힘을 받으면서 가속감을 느끼게 되나, 고정형 VR 컨텐츠 탑승 장비는 이러한 반작용을 구현할 수 없으므로 현실과의 괴리감을 초래할 수 밖에 없으며, 현실과의 괴리감은 어지럼증을 유발하는 원인으로 작용하기도 하였다.
본 발명은 VR 시스템에서 반작용에 따른 가속감을 사용자가 체감할 수 있도록 움직임이 제어되는 VR 시스템 탑승 장비 제어 장치 및 방법을 제안한다.
또한, 본 발명은 VR 시스템에서 발생하는 현실과의 괴리감으로 인해 발생하는 어지럼증을 억제할 수 있는 VR 시스템 탑승 장비 제어 장치 및 방법을 제안한다.
상기 목적을 달성하기 위해, 본 발명의 일 측면에 따르면, VR 컨텐츠 내 가상 탑승체의 가속도 정보를 획득하는 가속도 획득부; 상기 가속도 정보 중 직선 가속도에 의해 현실 세계에서 작용하는 반작용 움직임을 반영하기 위한 역 움직임을 연산하는 역움직임 연산부; 상기 연산된 역움직임 및 상기 가속도 정보 중 회전 가속도로부터 획득되는 상기 가상 탑승체의 회전 움직임에 기초하여 VR 시스템의 탑승 장비 움직임을 제어하는 움직임 제어 정보를 생성하는 움직임 제어 정보 생성부; 상기 생성된 움직임 제어 정보에 기초하여 상기 탑승 장비를 구동시키는 탑승 장비 구동부를 포함하는 VR 시스템 탑승 장비 제어 장치가 제공된다.
상기 역 움직임 연산부는 상기 직선 가속도에 따른 반작용 움직임을 1차적으로 추정하고, 상기 반작용 움직임을 반영하기 위한 회전 움직임을 상기 역 움직임으로 연산한다.
상기 역움직임 연산부는 상기 반작용 움직임의 방향에 기초하여 회전 방향을 결정하고 상기 직선 가속도 및 상기 탑승 장비의 최대 회전 각도에 기초하여 회전 각도를 결정한다.
상기 움직임 제어 정보 생성부는 상기 역움직임 연산부에서 연산되는 회전 움직임과 상기 가상 탑승체의 회전 움직임을 합성하여 상기 움직임 제어 정보를 생성한다.
상기 탑승 장비 제어 장치는 상기 탑승 장비에 탑승한 사용자의 움직임을 감지하는 사용자 움직임 감지부를 더 포함하고 상기 감지된 사용자 움직임에 기초하여 상기 VR 컨텐츠의 시선 방향이 결정된다.
상기 사용자 움직임 감지부에서 사용자 움직임 감지를 위해 사용하는 카메라는 상기 탑승 장비의 움직임에 상응하여 움직이도록 상기 탑승 장비에 결합된다.
본 발명의 다른 측면에 따르면, VR 컨텐츠 내 가상 탑승체의 가속도 정보를 획득하는 단계(a); 상기 가속도 정보 중 직선 가속도에 의해 현실 세계에서 작용하는 반작용 움직임을 반영하기 위한 역 움직임을 연산하는 단계(b); 상기 연산된 역움직임 및 상기 가속도 정보 중 회전 가속도로부터 획득되는 상기 가상 탑승체의 회전 움직임에 기초하여 VR 시스템의 탑승 장비 움직임을 제어하는 움직임 제어 정보를 생성하는 단계(c); 상기 생성된 움직임 제어 정보에 기초하여 상기 탑승 장비를 구동시키는 단계(d)를 포함하는 VR 시스템 탑승 장비 제어 방법이 제공된다.
본 발명에 의하면, VR 시스템에서 반작용에 따른 가속감을 사용자가 체감할 수 있도록 움직임이 제어될 수 있으며, VR 시스템에서 발생하는 현실과의 괴리감으로 인해 발생하는 어지럼증을 억제할 수 있는 장점이 있다.
도 1은 VR 컨텐츠에서 롤러 코스터가 내려가는 상태일 경우 VR 시스템 탑승 장비의 상태를 나타낸 도면.
도 2는 실제 내리막길을 내려가는 환경에서 탑승 장비에 탑승한 사용자의 상태를 나타낸 도면.
도 3은 본 발명의 일 실시예에 따른 VR 시스템의 탑승 장비 제어 장치의 개략적인 구성을 도시한 블록도.
도 4는 본 발명의 일 실시예에 따른 VR 컨텐츠로부터 VR 컨텐츠 내 가상 탑승체의 가속도를 획득하는 방법을 나타낸 순서도.
도 5는 본 발명의 일 실시예에 따른 직선 가속도 반영에 따른 역 움직임을 연산하는 방법을 나타낸 순서도.
도 6은 본 발명의 일 실시예에 따른 가속도 반영에 따른 역 움직임의 일례를 나타낸 도면.
도 7은 본 발명의 일 실시예에 따른 카메라가 설치된 위치를 나타낸 도면.
도 8은 본 발명의 일 실시예에 따른 VR 컨텐츠의 탑승 장비 제어 방법의 전체적인 흐름을 도시한 순서도.
본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시예를 예시하는 첨부 도면 및 첨부 도면에 기재된 내용을 참조하여야만 한다.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시예를 설명함으로써, 본 발명을 상세히 설명한다. 그러나, 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며, 설명하는 실시예에 한정되는 것이 아니다. 그리고, 본 발명을 명확하게 설명하기 위하여 설명과 관계없는 부분은 생략되며, 도면의 동일한 참조부호는 동일한 부재임을 나타낸다.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 “포함”한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라, 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 “...부”, “...기”, “모듈”, “블록” 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
도 2는 실제 내리막길을 내려가는 환경에서 탑승 장비에 탑승한 사용자의 상태를 나타낸 도면이다.
도 2는 VR과 같은 가상 환경이 아닌 현실 환경에서 내리막길을 빠르게 내려가는 롤러코스터(탑승 장비)에 사람이 탑승하였을 경우 롤러 코스터는 지면에 대해 앞으로 기울어진 구조를 가지게 된다.
일반적인 VR 시스템은, 도 2에 도시된 롤러 코스터의 현실 구조와 동일하게 VR 탑승 장비가 지면에 대해 앞으로 기울어진 구조를 가지도록 VR 탑승 장비의 회전을 제어한다.
도 2에 도시된 현실의 롤러 코스터는 직선 움직임을 가지고 내려가기에 사용자는 롤러 코스터가 내려가는 방향의 반대 방향으로 힘을 받게 되며, 이러한 이유로 롤러 코스터는 기울어져 있지만 사람의 몸은 기울어져 있지 않고 앉아 있는 의자 등받이에 밀착되어 있는 것을 확인할 수 있다.
그러나, 도 1에 도시된 바와 같이, VR 시스템의 탑승 장비에 탑승한 사용자는 내리막길을 내려가는 직선 움직임을 경험하지 않기에 사용자의 몸이 의자 등받이에 밀착되어 있지 않고 사용자의 몸 역시 앞으로 기울어지게 된다.
배경 기술에서 설명한 바와 같이 이러한 사용자의 자세는 현실과는 괴리된 것이며 이로 인해 VR 시스템의 사용자는 VR을 통해 제공되는 현실감의 정도가 저하될 뿐만 아니라 현실과는 괴리된 움직임으로 인해 사용자는 정보의 혼란 및 어지럼증을 경험하게 된다.
이러한 모든 문제는 VR 시스템의 탑승 장비는 VR 컨텐츠의 회전 가속도에 따른 회전 움직임은 반영할 수 있으나, 직선 가속도에 따른 직선 움직임은 반영할 수 없다는 점에서 기인한다.
본 발명은 이런 직선 가속도에 따른 움직임을 VR 시스템의 탑승 장비에 탑승한 사용자가 체감할 수 있도록 하여 현실과의 괴뢰감을 최소화하고 어지럼증을 최소화할 수 있는 VR 시스템의 탑승 장비 제어 장치 및 방법을 제안하는 것이다.
도 3은 본 발명의 일 실시예에 따른 VR 시스템의 탑승 장비 제어 장치의 개략적인 구성을 도시한 블록도이다.
도 3을 참조하면, 본 발명의 일 실시예에 따른 탑승 장비 제어 장치는 가속도 획득부(300), 역움직임 연산부(310), 움직임 제어 정보 생성부(320), 탑승 장비 구동부(330) 및 사용자 움직임 감지부(340)를 포함한다.
가속도 획득부(300)는 VR 컨텐츠 내 가상 탑승체의 가속도를 획득한다. 가속도 획득부(300)는 VR 컨텐츠의 제어에 따라 움직이는 VR 컨텐츠 내의 가상의 가속도를 획득하는 것이다.
VR 컨텐츠 내에서 탑승하고 있는 가상 탑승체는 미리 설정된 프로세스 또는 사용자의 조작에 의해 계속적으로 움직이며, 이러한 움직임에 대한 가속도를 가속도 획득부(300)에서 획득하는 것이다.
VR 컨텐츠 내 가상 탑승체의 움직임은 회전 움직임을 유발하는 회전 가속도와 직선 움직임을 유발하는 직선 가속도로 구분되며, 가속도 획득부(300)는 회전 가속도와 직선 가속도를 구분하여 획득한다.
도 4는 본 발명의 일 실시예에 따른 VR 컨텐츠로부터 VR 컨텐츠 내 가상 탑승체의 가속도를 획득하는 방법을 나타낸 순서도이다.
우선 VR 컨텐츠의 API를 이용하여 인접하는 복수의 프레임에 대한 VR 컨텐츠 내 가상 탑승체 속도 정보를 획득한다(400).
복수의 프레임에 대한 속도 정보가 획득되면, 프레임의 속도 정보의 변화를 이용하여 VR 컨텐츠 내 가상 탑승체의 가속도를 연산한다(단계 402). 가속도는 속도 정보의 차이므로 프레임별 속도 정보의 차연산에 의해 가속도를 연산할 수 있을 것이다.
가상 탑승체의 가속도가 연산되면, 연산된 가속도로부터 직선 가속도와 회전 가속도를 분리한다(단계 404).
회전 가속도는 VR 시스템 탑승 장비의 회전 움직임 정보를 생성하는데 사용되며, 직선 움직임은 향후 설명할 역 움직임 정보를 생성하는데 사용된다.
한편, 도 4에서는 VR 컨텐츠의 각 프레임에서의 가상 탑승체 속도 정보를 분석하여 가속도 정보를 연산하는 경우에 대해 도시하였으나, VR 컨텐츠가 가속도 정보를 제공하는 API를 지원하는 경우 VR 컨텐츠로부터 직접 가상 탑승체의 가속도를 획득할 수도 있을 것이다.
역 움직임 연산부(310)는 가상 탑승체가 제공하지 못하는 직선 움직임을 사용자가 체감하도록 하기 위한 역움직임을 연산한다. 본 발명에서 역 움직임은 VR 컨텐츠의 직선 가속도가 사용자에게 가해질 때 사용자에게 발생하는 현실적으로 발생하는 움직임으로 정의한다.
예를 들어, 기차가 정지 상태에서 순간적으로 빠른 속도로 앞으로 나가는 경우 기차에 탄 사람은 기차의 이동 방향의 반대 방향으로 힘을 받아 뒤로 밀리게 된다. 이때, 뒤로 밀리는 반작용 움직임이 발생한다.
그러나, VR 시스템에서 사용하는 탑승 장비는 고정되어 있어 회전 움직임만을 제공할 수 있을 뿐 반작용 움직임을 직선 방향으로 제공할 수는 없기에 직선 움직임에 해당되는 반작용 움직임을 회전 움직임으로 제공하여야 하며, 반작용 움직임을 제공하기 위한 회전 움직임을 본 발명에서는 역 움직임으로 정의한다.
예를 들어, 반작용 움직임이 x 방향으로 이동하는 움직임일 경우 x 방향을 향해 회전하는 움직임이 이루어지도록 역 움직임을 연산하는 것이다.
역 움직임은 반작용 움직임에 작용하는 가속도의 크기와 VR 시스템 탑승 장비의 최대 회전 각도에 기초하여 결정된다. 또한, 반작용 움직임에 작용하는 가속도의 크기는 VR 컨텐츠 가상 탑승체의 직선 가속도의 크기에 의해 결정된다.
결국, 역 움직임을 위한 회전 각도의 크기는 최대 회전 각도(θmax)와 VR 컨텐츠의 직선 가속도에 의해 결정되며, 이는 다음의 수학식 1과 같이 표현될 수 있다.
Figure 112020013596011-pat00001
위 수학식에서 σ 는 0 ~ 1을 가지는 직선 가속도 계수이며, 예를 들어 (현재 가속도/최대 가속도)로 정의될 수 있을 것이다.
예를 들어, 현대 VR 컨텐츠의 가상 탑승체가 x 방향으로 최대 가속도로 움직임고 있고, 최대 회전 각도가 30도일 경우, 역 움직임은 -x 방향으로 30도 회전하도록 연산되는 것이다.
이러한 역 움직임은 궁극적으로는 회전 좌표계인 Rol 및 Putch 값으로 변환되도록 연산될 수 있을 것이다.
도 5는 본 발명의 일 실시예에 따른 직선 가속도 반영에 따른 역 움직임을 연산하는 방법을 나타낸 순서도이다.
도 5를 참조하여 본 발명의 역 움직임을 연산 방법을 정리하여 설명하면, 우선 획득된 직선 가속도를 이용하여 반작용 움직임 방향을 결정한다(단계 500).
반작용 움직임 방향이 결정되면, 직선 가속도의 크기 및 VR 시스템 탑승 장비의 회전 각도를 이용하여 역움직임을 위한 회전 각도를 연산한다(단계 502). 예를 들어, 위 수학식 1과 같이 역움직임의 회전 각도를 연산할 수 있을 것이나 이는 예시적인 것이며, 반작용 움직임 반영을 위한 회전 각도는 직선 가속도 크기에 기초하여 다양한 방식으로 설정될 수 있을 것이다.
반작용 움직임 방향을 회전 방향으로 설정하고, 연산된 회전 각도를 반영한 역 움직임 정보를 생성한다(단계 504).
움직임 제어 정보 생성부(320)는 가속도 획득부(300)에서 획득되는 VR 컨텐츠 가상 탑승체의 회전 가속도와 역움직임 연산부(310)에서 연산되는 역움직임을 합성하여 VR 시스템 탑승 장비의 움직임을 제어하기 위한 움직임 제어 정보를 생성한다.
회전 가속도에 따른 움직임과 역움직임은 모두 회전 움직임으로 두 개의 움직임 벡터를 합성하여 움직임 제어 정보를 생성할 수 있을 것이다.
탑승 장비 구동부(330)는 움직임 제어 정보 생성부(320)에서 생성된 움직임 제어 정보에 기초하여 탑승 장비를 구동하며, 두 개의 움직임을 모두 반영한 회전이 이루어지도록 탑승 장비를 구동시킨다.
도 6은 본 발명의 일 실시예에 따른 가속도 반영에 따른 역 움직임의 일례를 나타낸 도면이다.
도 6의 (a)는 도 1에 도시된 도면으로서, VR 컨텐츠의 롤러코스터(가상 탑승체)가 지면을 향해 내려가는 상태일 때 역움직임을 반영하지 않는 VR 시스템 탑승 장비의 상태를 나타낸 것이다.
이 경우, VR 컨텐츠의 가상 탑승체의 회전 움직임만이 반영되므로 탑승 장비는 앞으로 기울어져 있는 상태이다.
도 6의 (b)는 본 발명에 의한 역움직임이 반영된 상태로서 가상 탑승체가 하강하는 방향의 반대 방향으로 반작용 움직임이 발생하게 되고, 이를 회전 움직임인 역움직임으로 반영하여 오히려 VR 시스템의 탑승 장비가 뒤로 기울어진 상태가 되는 것을 확인할 수 있다.
도 6의 (b)와 같은 움직임으로 인해 VR 시스템 사용자는 앉아있는 의자 방향으로 밀착되고, 직선 가속도에 따른 반작용 움직임을 체감할 수 있게 되어 보다 현실감 있는 VR 컨텐츠 이용이 가능하고 현실과의 괴리감으로 인한 어지럼증 유발도 방지할 수 있게 된다.
사용자 움직임 감지부(340)는 사용자의 움직임을 감지하고 감지된 사용자의 움직임 정보를 피드백하는 기능을 한다.
사용자의 움직임은 두가지로 분류될 수 있다. 제1 움직임은 탑승 장비의 움직임에 의한 움직임이고, 제2 움직임과 탑승 장비와는 무관하게 사용자에 의한 움직임이다. 사용자에 의한 움직임은 사용자가 고개를 좌우로 돌리는 등 탑승 장비와는 무관하게 사용자가 HMD의 위치를 변경시키는 움직임이다.
VR 시스템은 사용자의 움직임을 반영하여 가상 세계를 바라보는 시점을 정하게 되며, 종래에는 사용자(HMD)의 움직임을 카메라를 통해 감지한 후 가상 세계를 바라보는 시점을 결정하였다.
종래에는 사용자(HMD)의 움직임을 감지하기 위해 카메라를 탑승 장비의 외부에 설치하여 탑승 장비에 의한 움직임과 사용자에 의한 움직임을 모두 감지한 후 감지된 움직임을 가상 세계 시점을 결정하는데 반영하였다.
그러나, 이와 같은 종래의 사용자 움직임 감지 방식은 본 발명과 같이 역 움직임이 반영될 경우에는 적용되기 어렵다. 예를 들어, 도 6의 (b)와 같은 역 움직임이 반영될 경우 사용자의 시야는 위를 향하게 되는데, 탑승 장비의 외부에서 사용자 움직임을 감지하게 될 경우 사용자의 시야는 위를 향하게 된다. 즉, 컨텐츠의 가상 탑승체는 아래 방향을 향해서 가는데 시선은 위로 향하는 문제가 발생하는 것이다.
본 발명에서는 이러한 문제를 방지하기 위해 사용자에 의한 움직임만을 감지하도록 하며 이에 움직임 감지를 위한 카메라를 탑승 장비에 고정시킨다.
도 7은 본 발명의 일 실시예에 따른 카메라가 설치된 위치를 나타낸 도면이다.
도 7에 도시된 바와 같이, 본 발명의 일 실시예에 따른 VR 시스템은 탑승장치에 카메라를 결합하고, 결합된 카메라를 통해 사용자의 움직임을 감지한다. 카메라는 탑승 장비에 결합되어 있으므로 탑승 장비와 함께 움직인다. 따라서, 탑승 장비의 움직임으로 인한 사용자의 움직임은 포착되지 아니하며 사용자에 의한 움직임만이 카메라에 포착된다.
다만, 탑승 장비로 인한 움직임도 반영되어야 하는데, 탑승 장비의 움직임은 VR 컨텐츠의 가상 탑승체의 움직임과 동기화되는 것이므로 가상 탑승체의 움직임과 카메라에 의해 감지되는 사용자에 의한 움직임을 조합하여 사용자의 시선을 결정한다.
역움직임은 탑승 장비에만 반영되는 것일 뿐 VR 컨텐츠의 가상 탑승체에는 반영되지 아니하므로 가상 탑승체의 움직임과 사용자에 의한 움직임을 통해 정확한 시선 방향을 결정하는 것이 가능하다.
도 8은 본 발명의 일 실시예에 따른 VR 컨텐츠의 탑승 장비 제어 방법의 전체적인 흐름을 도시한 순서도이다.
도 8을 참조하면, 우선 VR 컨텐츠로부터 제공되는 정보를 이용하여 VR 컨텐츠 가상 탑승체의 가속도를 획득한다(단계 800). 앞서 설명한 바와 같이, 프레임별 가상 탑승체의 속도 정보를 차감하여 가속도 정보를 획득할 수 있으며, 가속도 정보 획득을 위해 API가 이용될 수 있다. 회전 가속도와 직선 가속도는 독립적으로 획득될 수 있다.
가속도 정보가 획득되면, 가속도로 인해 현실 세계에서 발생하는 역움직임을 연산한다(802). 앞서 설명한 바와 같이, VR 시스템의 탑승 장비는 직선 움직임을 제공할 수 업거나 매우 제한적으로 제공할 수 밖에 없기 때문에 직선 가속도에 따른 직선 움직임에 의해 발생하는 반작용은 반영될 수 없다. 역움직임은 이러한 반작용 움직임은 회전 움직임으로 변환한 움직임이며, 앞서 설명한 바와 같이, 반작용의 방향과 반작용의 크기를 이용하여 역움직임의 회전 방향 및 회전 각도를 결정한다.
연산된 역 움직임 및 상기 획득된 회전 가속도에 따른 회전 움직임을 반영하여 탑승 장비를 제어하기 위함 움직임 제어 정보를 생성한다(단계 804).
움직임 제어 정보가 생성되면, 생성된 움직임 제어 정보에 기초하여 탑승 장비를 구동 시킨다(단계 806).
탑승 장비를 구동 시키면서 사용자의 움직임을 감지하며, 감지된 움직임에 따라 VR 컨텐츠의 시선 방향이 결정된다(단계 808). 앞서 설명한 바와 같이, 역움직임이 시선 방향에 영향을 주지 않도록 탑승 장비에 결합된 카메라를 이용하여 사용자의 움직임을 감지한다.
본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다.
따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 청구범위의 기술적 사상에 의해 정해져야 할 것이다.

Claims (13)

  1. VR 컨텐츠 내 가상 탑승체의 가속도 정보를 획득하는 가속도 획득부;
    상기 가속도 정보 중 직선 가속도에 의해 현실 세계에서 작용하는 반작용 움직임을 반영하기 위한 역 움직임을 연산하는 역움직임 연산부;
    상기 연산된 역움직임 및 상기 가속도 정보 중 회전 가속도로부터 획득되는 상기 가상 탑승체의 회전 움직임에 기초하여 VR 시스템의 탑승 장비 움직임을 제어하는 움직임 제어 정보를 생성하는 움직임 제어 정보 생성부;
    상기 생성된 움직임 제어 정보에 기초하여 상기 탑승 장비를 구동시키는 탑승 장비 구동부를 포함하되,
    상기 역 움직임 연산부는 상기 직선 가속도에 따른 반작용 움직임을 1차적으로 추정하고, 상기 반작용 움직임을 반영하기 위한 회전 움직임을 상기 역 움직임으로 연산하고,
    상기 역움직임 연산부는 상기 반작용 움직임의 방향에 기초하여 회전 방향을 결정하고 상기 직선 가속도 및 상기 탑승 장비의 최대 회전 각도에 기초하여 회전 각도를 결정하는 것을 특징으로 하는 VR 시스템 탑승 장비 제어 장치.

  2. 삭제
  3. 삭제
  4. 제1항에 있어서,
    상기 움직임 제어 정보 생성부는 상기 역움직임 연산부에서 연산되는 회전 움직임과 상기 가상 탑승체의 회전 움직임을 합성하여 상기 움직임 제어 정보를 생성하는 것을 특징으로 하는 VR 시스템 탑승 장비 제어 장치.
  5. 제1항에 있어서,
    상기 탑승 장비에 탑승한 사용자의 움직임을 감지하는 사용자 움직임 감지부를 더 포함하고 상기 감지된 사용자 움직임에 기초하여 상기 VR 컨텐츠의 시선 방향이 결정되는 것을 특징으로 하는 VR 시스템 탑승 장비 제어 장치.
  6. 제5항에 있어서,
    상기 사용자 움직임 감지부에서 사용자 움직임 감지를 위해 사용하는 카메라는 상기 탑승 장비의 움직임에 상응하여 움직이도록 상기 탑승 장비에 결합되는 것을 특징으로 하는 VR 시스템 탑승 장비 제어 장치.
  7. VR 컨텐츠 내 가상 탑승체의 가속도 정보를 획득하는 단계(a);
    상기 가속도 정보 중 직선 가속도에 의해 현실 세계에서 작용하는 반작용 움직임을 반영하기 위한 역 움직임을 연산하는 단계(b);
    상기 연산된 역움직임 및 상기 가속도 정보 중 회전 가속도로부터 획득되는 상기 가상 탑승체의 회전 움직임에 기초하여 VR 시스템의 탑승 장비 움직임을 제어하는 움직임 제어 정보를 생성하는 단계(c);
    상기 생성된 움직임 제어 정보에 기초하여 상기 탑승 장비를 구동시키는 단계(d)를 포함하되,
    상기 단계(b)는 상기 직선 가속도에 따른 반작용 움직임을 1차적으로 추정하고, 상기 반작용 움직임을 반영하기 위한 회전 움직임을 상기 역 움직임으로 연산하고,
    상기 단계(b)는 상기 반작용 움직임의 방향에 기초하여 회전 방향을 결정하고 상기 직선 가속도 및 상기 탑승 장비의 최대 회전 각도에 기초하여 회전 각도를 결정하는 것을 특징으로 하는 VR 시스템 탑승 장비 제어 방법.
  8. 삭제
  9. 삭제
  10. 제7항에 있어서,
    상기 단계(c)는 상기 단계(b)에서 연산되는 회전 움직임과 상기 가상 탑승체의 회전 움직임을 합성하여 상기 움직임 제어 정보를 생성하는 것을 특징으로 하는 VR 시스템 탑승 장비 제어 방법.
  11. 제7항에 있어서,
    상기 탑승 장비에 탑승한 사용자의 움직임을 감지하는 사용자 움직임 감지하는 단계(e)를 더 포함하고 상기 감지된 사용자 움직임에 기초하여 상기 VR 컨텐츠의 시선 방향이 결정되는 것을 특징으로 하는 VR 시스템 탑승 장비 제어 방법.
  12. 제11항에 있어서,
    상기 단계(e)에서 사용자 움직임 감지를 위해 사용하는 카메라는 상기 탑승 장비의 움직임에 상응하여 움직이도록 상기 탑승 장비에 결합되는 것을 특징으로 하는 VR 시스템 탑승 장비 제어 방법.




  13. 삭제
KR1020200015479A 2020-02-10 2020-02-10 Vr 시스템 탑승 장비 제어 장치 및 방법 KR102351036B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200015479A KR102351036B1 (ko) 2020-02-10 2020-02-10 Vr 시스템 탑승 장비 제어 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200015479A KR102351036B1 (ko) 2020-02-10 2020-02-10 Vr 시스템 탑승 장비 제어 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20210101459A KR20210101459A (ko) 2021-08-19
KR102351036B1 true KR102351036B1 (ko) 2022-01-14

Family

ID=77492439

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200015479A KR102351036B1 (ko) 2020-02-10 2020-02-10 Vr 시스템 탑승 장비 제어 장치 및 방법

Country Status (1)

Country Link
KR (1) KR102351036B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003288001A (ja) * 2002-03-27 2003-10-10 Yasuyoshi Tagawa 体感加速度模擬装置のための動揺装置の制御方法
KR101914141B1 (ko) * 2016-03-11 2018-12-28 주식회사 상화 가상현실 체험장치

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101094858B1 (ko) * 2008-05-26 2011-12-15 (주)다림시스템 실시간 가상 현실 스포츠 플랫폼 장치
KR20120117104A (ko) * 2011-04-14 2012-10-24 김세진 가상현실 러닝머신

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003288001A (ja) * 2002-03-27 2003-10-10 Yasuyoshi Tagawa 体感加速度模擬装置のための動揺装置の制御方法
KR101914141B1 (ko) * 2016-03-11 2018-12-28 주식회사 상화 가상현실 체험장치

Also Published As

Publication number Publication date
KR20210101459A (ko) 2021-08-19

Similar Documents

Publication Publication Date Title
US8963963B2 (en) Video-based image control system
US11681360B2 (en) System and method for a blended reality user interface and gesture control system
US20100201621A1 (en) Moving object detecting apparatus, moving object detecting method, pointing device, and storage medium
KR20140105809A (ko) 제스처 인식 방법 및 제스처 검출기
WO1999035633A2 (en) Human motion following computer mouse and game controller
JPH1118025A (ja) 画像呈示装置
KR101151054B1 (ko) 가상 현실 세계에서의 이동 체험 서비스 시스템 및 방법
JP2007062892A (ja) 情報表示装置および情報表示方法
KR101507014B1 (ko) 운송장치 시뮬레이션 시스템 및 그 제어방법
KR102351036B1 (ko) Vr 시스템 탑승 장비 제어 장치 및 방법
KR20190074471A (ko) 차량용 3차원 입체 영상의 제어 방법 및 장치
US6473068B2 (en) Apparatus and method for image display
US11694345B2 (en) Moving object tracking using object and scene trackers
KR102541593B1 (ko) Vr 시스템 탑승 장비 제어 장치 및 방법
JP6199038B2 (ja) 視線分析装置
JP7095593B2 (ja) 興味推定システム
JP7247784B2 (ja) 興味推定システム
JPH10255052A (ja) ジェスチャインタフェース装置
CN108446012B (zh) 虚拟现实移动画面显示方法及虚拟现实装置
CN109542225B (zh) 重定向虚拟实境空间系统及其方法
KR102542641B1 (ko) 핸드 트래킹을 이용한 재활 훈련 장치 및 작동 방법
KR101750064B1 (ko) 가상체험 시뮬레이션 장치 및 방법
JP7111655B2 (ja) 挙動報知システム、挙動報知装置、挙動報知方法、及び挙動報知制御プログラム
JP2000019953A (ja) 簡易全天画像表示装置
JP2021081333A (ja) 興味推定システム

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant