KR20200012561A - 가상현실 게임 구현 시스템 및 방법 - Google Patents

가상현실 게임 구현 시스템 및 방법 Download PDF

Info

Publication number
KR20200012561A
KR20200012561A KR1020180088007A KR20180088007A KR20200012561A KR 20200012561 A KR20200012561 A KR 20200012561A KR 1020180088007 A KR1020180088007 A KR 1020180088007A KR 20180088007 A KR20180088007 A KR 20180088007A KR 20200012561 A KR20200012561 A KR 20200012561A
Authority
KR
South Korea
Prior art keywords
virtual reality
user
virtual
environment
model
Prior art date
Application number
KR1020180088007A
Other languages
English (en)
Inventor
유철호
Original Assignee
주식회사 맘모식스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 맘모식스 filed Critical 주식회사 맘모식스
Priority to KR1020180088007A priority Critical patent/KR20200012561A/ko
Publication of KR20200012561A publication Critical patent/KR20200012561A/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/212—Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1081—Input via voice recognition
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/303—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device for displaying additional data, e.g. simulating a Head Up Display
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082—Virtual reality

Abstract

본 발명은 가상현실 게임 구현 시스템에 관한 것으로서, 사용자의 모션정보를 검출하기 위한 모션센서(111), 사용자에게 3D 기반의 가상 환경을 시각적으로 제공하기 위한 HMD(112), 3D 모델의 세부조작을 위해 사용자가 파지하는 형태의 컨트롤러(113)를 구비하여 가상환경 내 3D 모델을 가상환경 밖의 사용자의 움직임과 동기시키기 위해 사용자의 모션정보를 검출하거나, 가상환경을 위해 사용자가 착용 또는 파지하는 가상현실 사용자 장치(110)와; 가상현실 제공을 위한 프로그램이 설치된 컴퓨터 또는 유무선 네트워크를 통해 접속 가능한 서버를 구비하여 상기 가상현실 사용자 장치(110)와 연계하여 사용자에게 가상현실 환경을 제공하기 위한 가상현실 운용장치(120)를 포함하는 것을 특징으로 한다. 본 발명에 따르면, 모션센서, HMD 및 컨트롤러를 포함하는 가상현실 사용자 장치와 연계하여 사용자에게 가상현실 환경을 제공함으로써 가상현실에서 다양한 게임을 구현할 수 있다.

Description

가상현실 게임 구현 시스템 및 방법{SYSTEM AND METHOD FOR GAME IN VIRTUAL REALITY}
본 발명은 가상현실 게임 구현 시스템 및 방법에 관한 것으로서, 특히 인간-가상공간의 상호 작용 기술을 통해 가상현실에서 다양한 게임을 구현할 수 있는 가상현실 게임 구현 시스템 및 방법에 관한 것이다.
일반적으로 가상현실이란 실제로 체험하기 어려운 상황을 컴퓨터 시뮬레이션을 이용하여 만들어진 삼차원 가상 공간(Three dimension virtual environment) 안에서 인간의 오감을 통한 상호작용을 실현하여 현실 세계에서의 활동 또는 공간적 물리적 제약에 의해 직접 경험하지 못하는 상황을 직접 체험할 수 있는 것이다.
이와 관련하여 최근에는 가상현실을 이용한 게임이 상용화되었으며, 이러한 가상현실 기반 게임 환경에서는, 가상현실장비 등을 활용하여 사용자가 직접 3차원 그래픽 상황 속에 물리적으로 빠져들어 가는 듯한 시각과 청각, 그리고 신체적으로 체험하는 것과 같은 효과를 제공하여 실제로 경험하기 어려운 환경을 컴퓨터 그래픽을 통하여 경험할 수 있다.
종래 관련 분야 기술로서, 자이로드롭장치(Gyro Drop)에 연동된 HMD(Head-Mounted Display) 간의 영상 동기화를 통해 각 HMD 상에 가상현실이미지가 표시되도록 제어하되, 가상현실게임의 시나리오와 관련된 다양한 동작을 기반으로 각 HMD를 통한 제어 가능한 영역이 전환되도록 함으로써, 자이로드롭장치의 움직임을 통하여 공간의 제약을 최소화하면서도 다양한 동작이 접목된 가상현실게임을 하나의 가상공간 상에서 다수의 사용자가 공유하여 실시간 협동 플레이를 수행할 수 있는 가상현실게임제어장치가 제안되어 있다(특허문헌 1 참조).
또한, 게임자가 가상현실 게임을 할 때 조이스틱이나 다른 조종장치를 상하좌우 또는 임의의 방향으로 이동하기 위해 조작하면, 메인 제어부는 동작신호를 인터페이스부로 송신하며, 인터페이스부는 동작신호를 기계를 구동시키기 위한 신호로 변환시켜 모션 콘트롤부로 송신하며, 모션 콘트롤부는 수신된 변환 신호로부터 움직임 신호를 추출하여 H/W 제어부로 송신하며, H/W 제어부는 움직임 신호에 따라 구동모터를 동작시키며, 구동링크는 구동모터가 동작하여 발생시 키는 원운동의 회전운동을 직선운동으로 변환시켜 상부베이스와 하부베이스로 전달시켜서 게임기 본체를 게임자의 조작에 따라 상하좌우로 움직이는 것으로 게임자가 가상현실 게임을 실행중에 실제로 경험하는 듯한 효과를 낼 수 있는 가상현실 체감형 게임 시스템이 제안되어 있다(특허문헌 2 참조).
국내공개특허 10-2017-0140665 국내공개특허 10-2002-0088020
본 발명은 인간-가상공간의 상호 작용 기술을 통해 가상현실에서 다양한 게임을 구현하되 가상현실 세계에서 사용자를 대신하는 3D 모델의 생동감을 부여할 수 있을 뿐만 아니라 음성 채팅으로 대화를 할 때 단순히 소리만 출력하는 것이 아니라 3D 모델의 입모양에 움직임을 부여할 수 있고, 또한 보다 자연스러운 움직임을 연출할 수 있고, 사용자가 하드웨어 오류임을 즉시 인지하여 신속하게 대처할 수 있도록 하며, 저사양 가상현실 사용자 장치의 구동 성능을 향상시킬 수 있는 가상현실 게임 구현 시스템 및 방법을 제공하는데 그 목적이 있다.
상기와 같은 목적을 달성하기 위하여 본 발명에 따른 가상현실 게임 구현 시스템은, 사용자의 모션정보를 검출하기 위한 모션센서, 사용자에게 3D 기반의 가상 환경을 시각적으로 제공하기 위한 HMD, 3D 모델의 세부조작을 위해 사용자가 파지하는 형태의 컨트롤러를 구비하여 가상환경 내 3D 모델을 가상환경 밖의 사용자의 움직임과 동기시키기 위해 사용자의 모션정보를 검출하거나, 가상환경을 위해 사용자가 착용 또는 파지하는 가상현실 사용자 장치와; 가상현실 제공을 위한 프로그램이 설치된 컴퓨터 또는 유무선 네트워크를 통해 접속 가능한 서버를 구비하여 상기 가상현실 사용자 장치와 연계하여 사용자에게 가상현실 환경을 제공하기 위한 가상현실 운용장치를 포함하는 것을 특징으로 한다.
여기에서, 상기 가상현실 운용장치는, 사용자의 HMD에 있는 마이크를 통해 감지되는 소리 크기를 수치로 규정하고, 특정 수치 이상 시 3D 모델의 일부분에 반복 애니메이션을 지정할 수 있고, 또한 음성인식 기술로 감지되는 소리 내용을 파악하고, 파악된 단어에 대응되는 3D 모델 애니메이션을 지정할 수 있다.
또한, 상기 컨트롤러는 싱글 컨트롤러이고, 상기 가상현실 운용장치는, 싱글 컨트롤러 포지션과 연동되어 있는 3D 모델 한쪽 손의 움직임에 맞춰, 연동되어 있지 않은 다른쪽 손의 위치를 자동으로 연산하고 움직이게 하여 양쪽 손 모두가 움직이는 형태로 보일 수 있도록 모션 보정할 수 있다.
또한, 상기 가상현실 운용장치는, 상기 컨트롤러와의 연결이 끊길 때, 오픈 라이브러리를 활용하여 특정 값을 클라이언트상에 출력하고, 해당 값을 클라이언트가 받으면 사용자가 하드웨어 오류임을 인지할 수 있도록 사용자 인터페이스 출력 처리할 수 있다.
또한, 상기 가상현실 운용장치는, 게임 내 여러 객체로 산재하는 오브젝트를 메시 컴바인(하나로 묶음) 작업을 통해 드로우 콜(클라이언트 상오브젝트를 로드하기 위해 체크하는 절차)을 최소화할 수 있고, 또한 상기 가상현실 사용자 장치가 PC 기반 하이엔드 기기인 경우 추가적으로 라이트맵 작업을 진행하고, 상기 가상현실 사용자 장치가 모바일 기반 보급기 또는 독립형 기기인 경우 추가적으로 버텍스 단순화(Simplify) 작업과 라이트맵 작업을 진행할 수 있다.
한편, 상기와 같은 목적을 달성하기 위하여 본 발명에 따른 가상현실 게임 구현 방법은, 사용자의 모션정보를 검출하기 위한 모션센서, 사용자에게 3D 기반의 가상 환경을 시각적으로 제공하기 위한 HMD, 3D 모델의 세부조작을 위해 사용자가 파지하는 형태의 컨트롤러를 구비하여 가상환경 내 3D 모델을 가상환경 밖의 사용자의 움직임과 동기시키기 위해 사용자의 모션정보를 검출하거나, 가상환경을 위해 사용자가 착용 또는 파지하는 가상현실 사용자 장치와; 가상현실 제공을 위한 프로그램이 설치된 컴퓨터 또는 유무선 네트워크를 통해 접속 가능한 서버를 구비하여 상기 가상현실 사용자 장치와 연계하여 사용자에게 가상현실 환경을 제공하기 위한 가상현실 운용장치를 포함하는 시스템에서 가상현실 게임 구현 방법에 있어서, 상기 가상현실 운용장치는, 사용자의 HMD에 있는 마이크를 통해 감지되는 소리 크기를 수치로 규정하고, 특정 수치 이상 시 3D 모델의 일부분에 반복 애니메이션을 지정하고, 또한 음성인식 기술로 감지되는 소리 내용을 파악하고, 파악된 단어에 대응되는 3D 모델 애니메이션을 지정하거나, 또는 상기 컨트롤러(113)는 싱글 컨트롤러이고, 상기 가상현실 운용장치는, 싱글 컨트롤러 포지션과 연동되어 있는 3D 모델 한쪽 손의 움직임에 맞춰, 연동되어 있지 않은 다른쪽 손의 위치를 자동으로 연산하고 움직이게 하여 양쪽 손 모두가 움직이는 형태로 보일 수 있도록 모션 보정하거나, 또는 상기 가상현실 운용장치는, 상기 컨트롤러와의 연결이 끊길 때, 오픈 라이브러리를 활용하여 특정 값을 클라이언트상에 출력하고, 해당 값을 클라이언트가 받으면 사용자가 하드웨어 오류임을 인지할 수 있도록 사용자 인터페이스 출력 처리하거나, 또는 상기 가상현실 운용장치는, 게임 내 여러 객체로 산재하는 오브젝트를 메시 컴바인(하나로 묶음) 작업을 통해 드로우 콜(클라이언트 상오브젝트를 로드하기 위해 체크하는 절차)을 최소화하고, 또한 상기 가상현실 사용자 장치(110)가 PC 기반 하이엔드 기기인 경우 추가적으로 라이트맵 작업을 진행하고, 상기 가상현실 사용자 장치가 모바일 기반 보급기 또는 독립형 기기인 경우 추가적으로 버텍스 단순화(Simplify) 작업과 라이트맵 작업을 진행하는 것을 특징으로 한다.
본 발명에 따르면, 모션센서, HMD 및 컨트롤러를 포함하는 가상현실 사용자 장치와 연계하여 사용자에게 가상현실 환경을 제공함으로써 가상현실에서 다양한 게임을 구현할 수 있다.
특히, 사용자의 소리 크기 및 내용을 파악하여 3D 모델의 일부분에 반복 애니메이션을 지정하고 파악된 단어에 대응되는 3D 모델 애니메이션을 지정함으로써 가상현실 세계에서 사용자를 대신하는 3D 모델의 생동감을 부여하고, 음성 채팅으로 대화를 할 때 단순히 소리만 출력하는 것이 아니라 3D 모델의 입모양에 움직임을 부여할 수 있다.
또한, 싱글 컨트롤러인 경우 싱글 컨트롤러 포지션과 연동되는 3D 모델 한쪽 손의 움직임에 맞춰, 연동되어 있지 않은 다른쪽 손의 위치를 자동으로 연산하고 움직이게 하여 양쪽 손 모두가 움직이는 형태로 보일 수 있도록 모션 보정함으로써 보다 자연스러운 움직임을 연출할 수 있다.
또한, 가상현실 운용장치가 컨트롤러와의 연결이 끊길 때, 오픈 라이브러리를 활용하여 특정 값을 클라이언트상에 출력하고, 해당 값을 클라이언트가 받으면 사용자 인터페이스 출력 처리함으로써 사용자가 하드웨어 오류임을 즉시 인지하여 신속하게 대처할 수 있다.
또한, 게임 내 여러 객체로 산재하는 오브젝트를 메시 컴바인 작업을 통해 드로우 콜을 최소화함으로써 저사양 가상현실 사용자 장치의 구동 성능을 향상시킬 수 있다.
도 1은 본 발명에 따른 가상현실 게임 구현 시스템의 개념도.
도 2는 본 발명에 따른 음성 인식 연동 3D 모델 에니메이션 기술의 개념도.
도 3은 본 발명에 따른 3DOF 컨트롤 환경에서 3D 모델 모션 보정 기술의 개념도.
도 4는 본 발명에 따른 컨트롤러 미인식 자가 인식 기술의 개념도.
도 5는 본 발명에 따른 저사양 기기 구동 성능 향상을 위한 최적화 기술의 개념도.
이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
도 1은 본 발명에 따른 가상현실 게임 구현 시스템의 개념도, 도 2는 본 발명에 따른 음성 인식 연동 3D 모델 에니메이션 기술의 개념도, 도 3은 본 발명에 따른 3DOF 컨트롤 환경에서 3D 모델 모션 보정 기술의 개념도, 도 4는 본 발명에 따른 컨트롤러 미인식 자가 인식 기술의 개념도, 도 5는 본 발명에 따른 저사양 기기 구동 성능 향상을 위한 최적화 기술의 개념도이다.
본 발명에 따른 가상현실 게임 구현 시스템 및 방법은 인간-가상공간의 상호 작용 기술을 통해 가상현실에서 다양한 게임을 구현하되 가상현실 세계에서 사용자를 대신하는 3D 모델의 생동감을 부여할 수 있을 뿐만 아니라 음성 채팅으로 대화를 할 때 단순히 소리만 출력하는 것이 아니라 3D 모델의 입모양에 움직임을 부여할 수 있고, 또한 보다 자연스러운 움직임을 연출할 수 있고, 사용자가 하드웨어 오류임을 즉시 인지하여 신속하게 대처할 수 있도록 하며, 저사양 가상현실 사용자 장치의 구동 성능을 향상시킬 수 있도록 구성된 것을 그 기술적 요지한다.
도 1에 도시한 바와 같이, 본 발명에 따른 가상현실 게임 구현 시스템은, 크게 가상현실 사용자 장치(110) 및 통신망을 통해 상기 가상현실 사용자 장치(110)와 연동하여 가상현실 환경을 제공하는 가상현실 운용장치(120)를 포함하여 이루어진다.
상기 가상현실 사용자 장치(110)는 가상환경 내 3D 모델(아바타)을 가상환경 밖의 사용자(게임자, 플레이어)의 움직임과 동기시키기 위해 사용자의 모션정보를 검출하거나, 가상환경을 위해 사용자가 착용 또는 파지하는 장치이다.
구체적으로는, 사용자의 모션정보를 검출하기 위한 모션센서(111), 사용자에게 3D 기반의 가상 환경을 시각적으로 제공하기 위한 HMD(112:Head mounted Display), 3D 모델의 세부조작을 위해 사용자가 파지하는 형태의 컨트롤러(113) 등을 포함할 수 있다.
상기 가상현실 운용장치(120)는 상기 가상현실 사용자 장치(110)와 연계하여 사용자에게 가상현실 환경을 제공하기 위한 장치로서, 가상현실 제공을 위한 프로그램이 설치된 컴퓨터 또는 유무선 네트워크를 통해 접속 가능한 서버 등을 포함할 수 있다.
한편, 상기 가상현실 운용장치(120)는 다음과 같이 중요한 기술적 특징을 가질 수 있다.
첫번째로, 상기 가상현실 운용장치(120)는, 도 2에 도시한 바와 같이, 가상현실 세계에서 사용자를 대신하는 3D 모델(아바타)의 생동감을 부여하고, 음성 채팅으로 대화할 때 단순히 소리만 출력하는 것이 아니라 3D 모델의 입모양에 움직임 부여를 위해 사용자의 HMD(112)에 있는 마이크를 통해 감지되는 소리 크기를 수치로 규정하고, 특정 수치 이상일 때 3D 모델의 일부분에 반복 애니메이션을 지정할 수 있다.
즉, 사용자의 HMD(112)에 있는 마이크를 통해 소리를 감지하고 해당 크기를 수치로 규정(외부 라이브러리 사용)하고, 특정 수치 이상으로 소리의 크기가 커질 때 3D 모델의 일부분에 반복 애니메이션 지정하는 것이다. 종래 애니메이션은 입 모양의 텍스쳐에 모션을 지정하여 마치 만화에서 말하는 것처럼 보이게 한다.
또한, 음성인식 기술로 감지되는 소리 내용을 파악하고, 파악된 단어에 대응되는 3D 모델 애니메이션을 지정한다. 즉, 음성인식을 통해 3D 모델에 변화를 주는 기술을 기반으로 하는 것으로서 종래는 소리의 크기만 체크하지만, 음성인식 기술을 적용하여 소리의 내용을 파악하고 오픈 라이브러리를 활용하여 감지된 단어에 따라 각각의 3D 모델 애니메이션을 지정함으로써 영화같은 정확한 대사의 입모양을 표현하는 것이다.
결국, 음성을 인식해 3D 모델에 변화를 주는 기술인 것이다.
두번째로, 상기 컨트롤러(113)는 싱글 컨트롤러이고, 상기 가상현실 운용장치(120)는, 도 3에 도시한 바와 같이, 싱글 컨트롤러 포지션과 연동되어 있는 3D 모델 한쪽 손의 움직임에 맞춰, 연동되어 있지 않은 다른쪽 손의 위치를 자동으로 연산하고 움직이게 하여 양쪽 손 모두가 움직이는 형태로 보일 수 있도록 모션 보정할 수 있다.
즉, 3DOF(Degrees of Freedom, 자유도)는 싱글 컨트롤러로서 사용자의 HMD+컨트롤러 포지션값으로 3D 모델의 모습을 표현했을 때 한쪽 손만 움직일 수 있다는 단점이 존재하고, 보다 자연스러운 움직임을 위해 3D 모델 모션을 보정할 필요성이 있으므로, 싱글 컨트롤러 포지션과 연동되어 있는 한쪽 손의 움직임에 맞춰, 연동되어 있지 않은 다른쪽 손의 위치를 자동으로 연산, 움직이게 하여 양쪽 손 모두가 움직이는 형태로 보일 수 있도록 모션 보정하고, 연산 방식은 현재 대칭 형태로 지정, 가상 세계에서의 감정 표현 또는 일상적으로 많이 사용하는 박수, 만세, 팔 돌리기 등을 한쪽 손 만으로 표현할 수 있도록 하는 것이다.
결국, '움직이지 않는 손'에 임의의 모션 보정을 부여하여 자연스러운 움직임을 연출한 것이다.
참고적으로, 트래킹과 관련해 DOF란 공간 내 강체의 운동 요소를 가리킨다. 사물이 움직이는 기본 방향으로 이해되는데, 총 여섯 개의 DOF가 병진운동(Translational movements)과 회전운동(Rotational movements)으로 구분할 수 있으며, 병진운동에 포함되는 3DOF(앞/뒤, 위/아래, 왼쪽/오른쪽), 회전운동에 포함되는 3DOF(피치(Pitch), 요(Yaw), 롤(Roll)), 두 운동을 합치면 6DOF 가 얻어진다.
세번째로, 상기 가상현실 운용장치(120)는, 도 4에 도시한 바와 같이, 상기 컨트롤러(113)와의 연결이 끊길 때, 오픈 라이브러리를 활용하여 특정 값을 클라이언트상에 출력하고, 해당 값을 클라이언트가 받으면 사용자가 하드웨어 오류임을 인지할 수 있도록 사용자 인터페이스 출력 처리할 수 있다.
즉, 가상현실은 하드웨어 센서의 간섭/오류 등의 문제로 컨트롤러 연결이 끊기는 문제가 발생될 수 있고, 해당 현상이 발생하면 사용자는 소프트웨어상의 오류인지 아니면 하드웨어 문제인지 그 원인을 곧바로 인식할 수 없어 우왕좌왕 하는 사이 몰입도가 현저히 떨어지게 되므로, 오픈 라이브러리를 활용하여 컨트롤러(113)가 Disconnect 되었을 때 특정 값을 클라이언트상 출력하고, 해당 값을 클라이언트가 받으면 가상 공간 안의 사용자의 양쪽 손 텍스쳐를 특정 컬러 등으로 변경하여, 사용자가 즉시 ‘하드웨어 오류＇임을 인지하고 즉시 대처할 수 있도록 한 것이다.
부연하여, 컨트롤러 disconnect 시 라이브러리를 활용하여 알림’ 이라는 개념으로 접근할 수 있고, 단순히 손 텍스쳐를 변경하는 것 뿐만 아니라, 소리, 텍스트 출력 등으로 확장할 수도 있다.
네번째로, 상기 가상현실 운용장치(120)는, 도 5에 도시한 바와 같이, 게임 내 여러 객체로 산재하는 오브젝트를 메시 컴바인(하나로 묶음) 작업을 통해 드로우 콜(클라이언트 상오브젝트를 로드하기 위해 체크하는 절차)을 최소화하고, 또한 상기 가상현실 사용자 장치(110)가 PC 기반 하이엔드 기기인 경우 추가적으로 라이트맵 작업을 진행하고, 상기 가상현실 사용자 장치(110)가 모바일 기반 보급기 또는 독립형 기기인 경우 추가적으로 버텍스 단순화(Simplify) 작업과 라이트맵 작업을 진행할 수 있다.
즉, 가상현실 사용자 장치(110)는 PC 기반의 하이엔드 기기와 모바일 기반 보급기 또는 독립형 기기의 사양 차이가 크고, 라이브러리를 제외하더라도 PC 하이엔드 기기의 리소스를 그대로 사용하면 보급기 사양에서는 심각한 퍼포먼스 저하로 인해 멀미 등의 이슈가 발생할 수 있으므로, 게임 내 여러 객체로 산재하는 오브젝트를‘메시 컴바인(하나로 묶음)’하여 드로우 콜(클라이언트 상오브젝트를 로드하기 위해 체크하는 절차)을 최소화하고, PC 기반 하이엔드용 기기는 이상의 절차에서 라이트맵을 적용하여 클라이언트로 빌드하고, 모바일 클라이언트는 한번의 절차에서 버텍스 단순화(Simplify) 작업을 통해 최적화를 1단계 더 거치는 것이다.
상술한 바와 같이, 본 발명에 따르면, 가상현실 운용장치(120)가 모션센서(111), HMD(112) 및 컨트롤러(113)를 포함하는 가상현실 사용자 장치(110)와 연계하여 사용자에게 가상현실 환경을 제공함으로써 가상현실에서 다양한 게임을 구현할 수 있고, 특히 가상현실 세계에서 사용자를 대신하는 3D 모델의 생동감을 부여할 수 있을 뿐만 아니라 음성 채팅으로 대화를 할 때 단순히 소리만 출력하는 것이 아니라 3D 모델의 입모양에 움직임을 부여할 수 있고, 또한 보다 자연스러운 움직임을 연출할 수 있고, 사용자가 하드웨어 오류임을 즉시 인지하여 신속하게 대처할 수 있도록 하며, 저사양 가상현실 사용자 장치의 구동 성능을 향상시킬 수 있다.
한편, 본 발명에 따른 가상현실 게임 구현 시스템 및 방법을 한정된 실시예에 따라 설명하였지만, 본 발명의 범위는 특정 실시예에 한정되는 것은 아니며, 본 발명과 관련하여 통상의 지식을 가진자에게 자명한 범위내에서 여러 가지의 대안, 수정 및 변경하여 실시할 수 있다.
따라서, 본 발명에 개시된 실시예 및 첨부된 도면들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예 및 첨부된 도면에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
110 : 가상현실 사용자 장치 111 : 모션센서
112 : HMD 113 : 컨트롤러
120 : 가상현실 운용장치

Claims (13)

  1. 가상현실 게임 구현 시스템에 있어서,
    사용자의 모션정보를 검출하기 위한 모션센서(111), 사용자에게 3D 기반의 가상 환경을 시각적으로 제공하기 위한 HMD(112), 3D 모델의 세부조작을 위해 사용자가 파지하는 형태의 컨트롤러(113)를 구비하여 가상환경 내 3D 모델을 가상환경 밖의 사용자의 움직임과 동기시키기 위해 사용자의 모션정보를 검출하거나, 가상환경을 위해 사용자가 착용 또는 파지하는 가상현실 사용자 장치(110)와;
    가상현실 제공을 위한 프로그램이 설치된 컴퓨터 또는 유무선 네트워크를 통해 접속 가능한 서버를 구비하여 상기 가상현실 사용자 장치(110)와 연계하여 사용자에게 가상현실 환경을 제공하기 위한 가상현실 운용장치(120)를 포함하는 가상현실 게임 구현 시스템.
  2. 청구항 1에 있어서,
    상기 가상현실 운용장치(120)는,
    사용자의 HMD(112)에 있는 마이크를 통해 감지되는 소리 크기를 수치로 규정하고, 특정 수치 이상 시 3D 모델의 일부분에 반복 애니메이션을 지정하는 것을 특징으로 하는 가상현실 게임 구현 시스템.
  3. 청구항 2에 있어서,
    음성인식 기술로 감지되는 소리 내용을 파악하고, 파악된 단어에 대응되는 3D 모델 애니메이션을 지정하는 것을 특징으로 하는 가상현실 게임 구현 시스템.
  4. 청구항 1에 있어서,
    상기 컨트롤러(113)는 싱글 컨트롤러이고,
    상기 가상현실 운용장치(120)는,
    싱글 컨트롤러 포지션과 연동되어 있는 3D 모델 한쪽 손의 움직임에 맞춰, 연동되어 있지 않은 다른쪽 손의 위치를 자동으로 연산하고 움직이게 하여 양쪽 손 모두가 움직이는 형태로 보일 수 있도록 모션 보정하는 것을 특징으로 하는 가상현실 게임 구현 시스템.
  5. 청구항 1에 있어서,
    상기 가상현실 운용장치(120)는,
    상기 컨트롤러(113)와의 연결이 끊길 때, 오픈 라이브러리를 활용하여 특정 값을 클라이언트상에 출력하고, 해당 값을 클라이언트가 받으면 사용자가 하드웨어 오류임을 인지할 수 있도록 사용자 인터페이스 출력 처리하는 것을 특징으로 하는 가상현실 게임 구현 시스템.
  6. 청구항 1에 있어서,
    상기 가상현실 운용장치(120)는,
    게임 내 여러 객체로 산재하는 오브젝트를 메시 컴바인(하나로 묶음) 작업을 통해 드로우 콜(클라이언트 상오브젝트를 로드하기 위해 체크하는 절차)을 최소화하는 것을 특징으로 하는 가상현실 게임 구현 시스템.
  7. 청구항 6에 있어서,
    상기 가상현실 사용자 장치(110)가 PC 기반 하이엔드 기기인 경우 추가적으로 라이트맵 작업을 진행하고,
    상기 가상현실 사용자 장치(110)가 모바일 기반 보급기 또는 독립형 기기인 경우 추가적으로 버텍스 단순화(Simplify) 작업과 라이트맵 작업을 진행하는 것을 특징으로 하는 가상현실 게임 구현 시스템.
  8. 사용자의 모션정보를 검출하기 위한 모션센서(111), 사용자에게 3D 기반의 가상 환경을 시각적으로 제공하기 위한 HMD(112), 3D 모델의 세부조작을 위해 사용자가 파지하는 형태의 컨트롤러(113)를 구비하여 가상환경 내 3D 모델을 가상환경 밖의 사용자의 움직임과 동기시키기 위해 사용자의 모션정보를 검출하거나, 가상환경을 위해 사용자가 착용 또는 파지하는 가상현실 사용자 장치(110)와; 가상현실 제공을 위한 프로그램이 설치된 컴퓨터 또는 유무선 네트워크를 통해 접속 가능한 서버를 구비하여 상기 가상현실 사용자 장치(110)와 연계하여 사용자에게 가상현실 환경을 제공하기 위한 가상현실 운용장치(120)를 포함하는 시스템에서 가상현실 게임 구현 방법에 있어서,
    상기 가상현실 운용장치(120)는,
    사용자의 HMD(112)에 있는 마이크를 통해 감지되는 소리 크기를 수치로 규정하고, 특정 수치 이상 시 3D 모델의 일부분에 반복 애니메이션을 지정하는 가상현실 게임 구현 방법.
  9. 청구항 8에 있어서,
    음성인식 기술로 감지되는 소리 내용을 파악하고, 파악된 단어에 대응되는 3D 모델 애니메이션을 지정하는 것을 특징으로 하는 가상현실 게임 구현 방법.
  10. 사용자의 모션정보를 검출하기 위한 모션센서(111), 사용자에게 3D 기반의 가상 환경을 시각적으로 제공하기 위한 HMD(112), 3D 모델의 세부조작을 위해 사용자가 파지하는 형태의 컨트롤러(113)를 구비하여 가상환경 내 3D 모델을 가상환경 밖의 사용자의 움직임과 동기시키기 위해 사용자의 모션정보를 검출하거나, 가상환경을 위해 사용자가 착용 또는 파지하는 가상현실 사용자 장치(110)와; 가상현실 제공을 위한 프로그램이 설치된 컴퓨터 또는 유무선 네트워크를 통해 접속 가능한 서버를 구비하여 상기 가상현실 사용자 장치(110)와 연계하여 사용자에게 가상현실 환경을 제공하기 위한 가상현실 운용장치(120)를 포함하는 시스템에서 가상현실 게임 구현 방법에 있어서,
    상기 컨트롤러(113)는 싱글 컨트롤러이고,
    상기 가상현실 운용장치(120)는,
    싱글 컨트롤러 포지션과 연동되어 있는 3D 모델 한쪽 손의 움직임에 맞춰, 연동되어 있지 않은 다른쪽 손의 위치를 자동으로 연산하고 움직이게 하여 양쪽 손 모두가 움직이는 형태로 보일 수 있도록 모션 보정하는 가상현실 게임 구현 방법.
  11. 사용자의 모션정보를 검출하기 위한 모션센서(111), 사용자에게 3D 기반의 가상 환경을 시각적으로 제공하기 위한 HMD(112), 3D 모델의 세부조작을 위해 사용자가 파지하는 형태의 컨트롤러(113)를 구비하여 가상환경 내 3D 모델을 가상환경 밖의 사용자의 움직임과 동기시키기 위해 사용자의 모션정보를 검출하거나, 가상환경을 위해 사용자가 착용 또는 파지하는 가상현실 사용자 장치(110)와; 가상현실 제공을 위한 프로그램이 설치된 컴퓨터 또는 유무선 네트워크를 통해 접속 가능한 서버를 구비하여 상기 가상현실 사용자 장치(110)와 연계하여 사용자에게 가상현실 환경을 제공하기 위한 가상현실 운용장치(120)를 포함하는 시스템에서 가상현실 게임 구현 방법에 있어서,
    상기 가상현실 운용장치(120)는,
    상기 컨트롤러(113)와의 연결이 끊길 때, 오픈 라이브러리를 활용하여 특정 값을 클라이언트상에 출력하고, 해당 값을 클라이언트가 받으면 사용자가 하드웨어 오류임을 인지할 수 있도록 사용자 인터페이스 출력 처리하는 가상현실 게임 구현 방법.
  12. 사용자의 모션정보를 검출하기 위한 모션센서(111), 사용자에게 3D 기반의 가상 환경을 시각적으로 제공하기 위한 HMD(112), 3D 모델의 세부조작을 위해 사용자가 파지하는 형태의 컨트롤러(113)를 구비하여 가상환경 내 3D 모델을 가상환경 밖의 사용자의 움직임과 동기시키기 위해 사용자의 모션정보를 검출하거나, 가상환경을 위해 사용자가 착용 또는 파지하는 가상현실 사용자 장치(110)와; 가상현실 제공을 위한 프로그램이 설치된 컴퓨터 또는 유무선 네트워크를 통해 접속 가능한 서버를 구비하여 상기 가상현실 사용자 장치(110)와 연계하여 사용자에게 가상현실 환경을 제공하기 위한 가상현실 운용장치(120)를 포함하는 시스템에서 가상현실 게임 구현 방법에 있어서,
    상기 가상현실 운용장치(120)는,
    게임 내 여러 객체로 산재하는 오브젝트를 메시 컴바인(하나로 묶음) 작업을 통해 드로우 콜(클라이언트 상오브젝트를 로드하기 위해 체크하는 절차)을 최소화하는 가상현실 게임 구현 방법.
  13. 청구항 12에 있어서,
    상기 가상현실 사용자 장치(110)가 PC 기반 하이엔드 기기인 경우 추가적으로 라이트맵 작업을 진행하고,
    상기 가상현실 사용자 장치(110)가 모바일 기반 보급기 또는 독립형 기기인 경우 추가적으로 버텍스 단순화(Simplify) 작업과 라이트맵 작업을 진행하는 것을 특징으로 하는 가상현실 게임 구현 방법.
KR1020180088007A 2018-07-27 2018-07-27 가상현실 게임 구현 시스템 및 방법 KR20200012561A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180088007A KR20200012561A (ko) 2018-07-27 2018-07-27 가상현실 게임 구현 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180088007A KR20200012561A (ko) 2018-07-27 2018-07-27 가상현실 게임 구현 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR20200012561A true KR20200012561A (ko) 2020-02-05

Family

ID=69515163

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180088007A KR20200012561A (ko) 2018-07-27 2018-07-27 가상현실 게임 구현 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR20200012561A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220061905A (ko) * 2020-11-06 2022-05-13 주식회사 디캐릭 가상현실 환경에서의 선형 객체 데이터의 공유 시스템
KR20230090861A (ko) 2021-12-15 2023-06-22 주식회사 넥스텝스튜디오 사용자의 생체 정보를 활용한 vr 및 ar 게임 컨텐츠 평가 방법 및 장치

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020088020A (ko) 2001-05-16 2002-11-25 (주)아이엔비테크놀로지 가상현실 체감형 게임 시스템
KR20170140665A (ko) 2016-06-13 2017-12-21 주식회사 네비웍스 가상현실게임제어장치 및 그 동작 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020088020A (ko) 2001-05-16 2002-11-25 (주)아이엔비테크놀로지 가상현실 체감형 게임 시스템
KR20170140665A (ko) 2016-06-13 2017-12-21 주식회사 네비웍스 가상현실게임제어장치 및 그 동작 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220061905A (ko) * 2020-11-06 2022-05-13 주식회사 디캐릭 가상현실 환경에서의 선형 객체 데이터의 공유 시스템
KR20230090861A (ko) 2021-12-15 2023-06-22 주식회사 넥스텝스튜디오 사용자의 생체 정보를 활용한 vr 및 ar 게임 컨텐츠 평가 방법 및 장치

Similar Documents

Publication Publication Date Title
GB2556347B (en) Virtual Reality
JP7008730B2 (ja) 画像に挿入される画像コンテンツについての影生成
US20150070274A1 (en) Methods and systems for determining 6dof location and orientation of head-mounted display and associated user movements
US20090244064A1 (en) Program, information storage medium, and image generation system
CN106873767B (zh) 一种虚拟现实应用的运行控制方法和装置
US11765335B2 (en) Synthetic stereoscopic content capture
US11494990B2 (en) Hybrid placement of objects in an augmented reality environment
JP2011258160A (ja) プログラム、情報記憶媒体及び画像生成システム
JP2011258161A (ja) プログラム、情報記憶媒体及び画像生成システム
JP2010022646A (ja) プログラム、情報記憶媒体および画像生成システム
JP2013097473A (ja) ゲーム処理システム、ゲーム処理方法、ゲーム処理装置およびゲーム処理プログラム
JP7283388B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP2011258130A (ja) プログラム、情報記憶媒体及び画像生成システム
JP2011258159A (ja) プログラム、情報記憶媒体及び画像生成システム
JP2011258158A (ja) プログラム、情報記憶媒体及び画像生成システム
JP2019175323A (ja) シミュレーションシステム及びプログラム
JP2013094303A (ja) ゲーム処理システム、ゲーム処理方法、ゲーム処理装置およびゲーム処理プログラム
KR20200012561A (ko) 가상현실 게임 구현 시스템 및 방법
JP7089113B2 (ja) 境界設定装置、境界設定方法及びプログラム
KR20220015469A (ko) 텍스쳐 조작을 이용한 애니메이팅된 얼굴
CN112435316B (zh) 一种游戏中的防穿模方法、装置、电子设备及存储介质
JP2019175322A (ja) シミュレーションシステム及びプログラム
JP5213913B2 (ja) プログラム及び画像生成システム
JP5063022B2 (ja) プログラム、情報記憶媒体及び画像生成システム
JP2009247555A (ja) 画像生成システム、プログラム及び情報記憶媒体