KR20190063883A - System for providing augmented reality interactive game contents using a drones - Google Patents

System for providing augmented reality interactive game contents using a drones Download PDF

Info

Publication number
KR20190063883A
KR20190063883A KR1020170162995A KR20170162995A KR20190063883A KR 20190063883 A KR20190063883 A KR 20190063883A KR 1020170162995 A KR1020170162995 A KR 1020170162995A KR 20170162995 A KR20170162995 A KR 20170162995A KR 20190063883 A KR20190063883 A KR 20190063883A
Authority
KR
South Korea
Prior art keywords
server
fpv
game
drone
augmented reality
Prior art date
Application number
KR1020170162995A
Other languages
Korean (ko)
Other versions
KR102042232B1 (en
Inventor
이현종
Original Assignee
로보웍스(주)
로보링크 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 로보웍스(주), 로보링크 주식회사 filed Critical 로보웍스(주)
Priority to KR1020170162995A priority Critical patent/KR102042232B1/en
Publication of KR20190063883A publication Critical patent/KR20190063883A/en
Application granted granted Critical
Publication of KR102042232B1 publication Critical patent/KR102042232B1/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/803—Driving vehicles or craft, e.g. cars, airplanes, ships, robots or tanks
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64C—AEROPLANES; HELICOPTERS
    • B64C39/00—Aircraft not otherwise provided for
    • B64C39/02—Aircraft not otherwise provided for characterised by special use
    • B64C39/024—Aircraft not otherwise provided for characterised by special use of the remote controlled vehicle type, i.e. RPV
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENTS OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
    • B64D47/00—Equipment not otherwise provided for
    • B64D47/08—Arrangements of cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8017—Driving on land or water; Flying
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082—Virtual reality

Abstract

The present invention provides a system for providing augmented reality interactive game contents using a drone to allow a user to enjoy a game through own virtual reality output device. According to the present invention, the system for providing augmented reality interactive game contents using a drone comprises: a main server; a graphic server; a game server; an augmented reality (AR) server; and a virtual reality (VR) output device.

Description

드론을 이용한 증강현실 인터렉티브 게임 컨텐츠의 제공 시스템{System for providing augmented reality interactive game contents using a drones }[0001] The present invention relates to a system for providing augmented reality interactive game contents using a drone,

본 발명은 드론FPV(First-Person View)를 이용한 게임 콘텐츠의 제공 시스템에 관한 것으로서, 드론FPV에서 촬영된 1인칭 시점의 영상정보를 증강현실을 기술을 응용하여 게임 콘텐츠로 가공하고, 게임서버에서 제공하는 게임 환경을 통해 단수 또는 복수의 사용자가 자신의 가상현실 출력장치를 통해 게임을 즐길 수 있도록 구현한 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템에 관한 것이다. The present invention relates to a system for providing game contents using a drone FPV (First-Person View), in which a first-person viewpoint image photographed by a drone FPV is processed into game contents by applying augmented reality to game contents, And more particularly, to a system for providing augmented reality interactive game contents using a dron, which enables a single or a plurality of users to enjoy a game through their virtual reality output apparatus through a provided game environment.

또한, 외부카메라에서 획득한 영상정보를 이용하여 가상현실 출력장치를 통해 3인칭 시점의 게임 콘텐츠를 제공할 수 있는 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템에 관한 것이다. The present invention also relates to a system for providing augmented reality interactive game contents using a dron that can provide game contents at a third person through a virtual reality output apparatus using image information acquired from an external camera.

일반적으로 드론은 비행기능을 구비하고 있어 다양한 분야에서 적용되고 있다. 최근에는 드론을 이용한 수화물의 운송 및 다양한 감시역할을 하는 분야에서 두각을 나타내고 있다.Generally, drones are equipped with various flight functions and are applied in various fields. In recent years, it has been showing a great deal of attention in the field of carrying and monitoring various kinds of hydrides using drones.

이와 함께 놀이기구로써 이용되고 있으며, 이를 이용한 다양한 형태의 게임이 존재하게 된다. 그 예로, 드론의 비행속도를 겨루게 되는 스피드레이싱과 다양한 묘기를 보여주기 위한 프리스타일 게임이 존재한다.In addition, there are various types of games using them as a playground. For example, there are speed racing games that compete with the drones' flight speeds and freestyle games to show various tricks.

이와 같은 드론을 이용하여 수행해야 하는 다양한 게임의 경우 각각의 게임에 적용되어야 할 경기장은 게임마다 다르게 적용되어야 하기 때문에, 복합적인 게임을 진행하기 어려운 단점이 있다.In the case of various games to be performed using the drones, the stadiums to be applied to each game must be applied differently for each game, so that it is difficult to carry out a complex game.

이러한 드론의 게임 및 비행훈련을 위하여 대한민국 공개특허 제 10-2016-0131598호(소형 무인비행체 비행 연습및 경기시스템, 이하 '선행기술'이라 함. 2016년 11월 18일 공개)는 소형 무인비행체 비행 연습 및 경기 시스템에 관한 것으로, 보다 상세하게는 드론(Drone) 등의 소형 무인비행체를 실내외의 일정 공간 내에서 안전하고 유익하게 조종할 수 있는 연습장 및 경기장을 제공할 수 있어 공간활용을 극대화하면서 조종자로 하여금 취미 또는 문화 생활로서 즐길 수 있도록 함은 물론, 일반인이 사용자로부터 소정의 이용료를 받고 비행 연습 및 경기를 즐길 수 있도록 하는 상업 목적의 경기장 및 시스템을 제공할 수 있도록 함으로써 대중으로 하여금 소형 무인비행체의 조정을 쉽게 경험할 수 있도록 하고, 항공, 우주공학 등 비행과 관련된 전공 분야를 공부하는 학생들에게는 다양한 무인비행체의 조정 능력을 습득할 수 있도록 하여 공학적 창의성과 성취 의욕을 고취할 수 있도록 하기 위해, 일정 공간 내에서 장애물 코스를 이루도록 복수의 장애물이 설치된 비행경기장과; 설정된 순서에 따라 상기 복수의 장애물에 적어도 하나 이상 이착륙하며 정해진 장애물 코스를 통과하도록 참가자의 조종에의해 비행하는 무인비행체와; 상기 무인비행체가 출발지점으로부터 출발한 시간부터 상기 장애물 코스를 통과하는 코스 통과 시간 정보를 측정하는 타임측정수단을; 포함하는 기술을 제공하고 있다.For such drones' game and flight training, Korean Patent Laid-Open No. 10-2016-0131598 (Small Unmanned Aerial Vehicle Flight Practice and Competition System, hereinafter referred to as "Prior Art", published November 18, 2016) And more particularly to a practice field and a stadium where a small unmanned aerial vehicle such as a drone can be steered safely and advantageously in a certain indoor and outdoor space and a stadium can be provided, To provide a commercial venue and system that enables ordinary people to enjoy a flight practice and a game by receiving a predetermined fee from the user, as well as allowing the general public to enjoy a small unmanned aerial vehicle , And it is necessary to make the field of flight related to aviation, space engineering, etc. Flight stadium to ensure that by allowing students who can master the coordination of various unmanned air vehicle can inspire creativity and engineering achievement motivation, to fulfill an obstacle course within a certain space provided with a plurality of obstacles and; An unmanned aerial vehicle flying at least one of the plurality of obstacles in accordance with a set order so that at least one of the plurality of obstacles can be taken off and landed and pass through a predetermined obstacle course; Time measuring means for measuring course passing time information passing through the obstacle course from a time when the unmanned air vehicle starts from the starting point; And provides technology that includes.

그러나, 상기 선행기술의 경우에도, 단순히 복수개의 장애물을 연속으로 착지하고 각각의 장애물을 통과하는 정도의 기술만을 제공함으로써, 복합경기에 적용하기 어려운 문제가 있었으며, 관람자 및 관계자에게 종합적인 정보를 제공하는데 어려운 문제도 있었다.However, even in the case of the above-described prior art, there is a problem that it is difficult to apply to a complex game by merely providing a technique of simply landing a plurality of obstacles successively and passing through each obstacle, and providing comprehensive information to spectators and persons concerned There was also a difficult problem.

본 발명은 상기와 같은 문제점을 해소하기 위해 제안된 것으로, 드론FPV에서 촬영된 1인칭 시점의 영상정보를 증강현실을 기술을 응용하여 게임 콘텐츠로 가공하고, 게임서버에서 제공하는 게임 환경을 통해 단수 또는 복수의 사용자가 자신의 가상현실 출력장치를 통해 게임을 즐길 수 있도록 구현한 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템을 제공함에 그 목적이 있다.The present invention has been proposed in order to solve the above problems, and it is an object of the present invention to provide a game system which processes image information of first person viewpoint photographed by a drone FPV into game contents by applying augmented reality technology, And an object of the present invention is to provide a system for providing augmented reality interactive game contents using a dron which enables a plurality of users to enjoy a game through their virtual reality output device.

또한, 외부카메라에서 획득한 영상정보를 이용하여 가상현실 출력장치를 통해 3인칭 시점의 게임 콘텐츠를 제공할 수 있는 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템을 제공함에 다른 목적이 있다. It is another object of the present invention to provide a system for providing augmented reality interactive game contents using a dron which can provide game contents of a third person through a virtual reality output apparatus using image information acquired from an external camera.

또한, 본 발명은 드론FPV의 카메라가 특정지역에 설치된 마커(Marker)를 인식하는 방향에 따라 가상장애물의 형상이 변동되는 인터렉션 존(Interaction Zone)이 형성함으로써 보다 게임의 다양성을 구현할 수 있는 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템을 제공함에 또 다른 목적이 있다.Further, according to the present invention, an interaction zone in which the shape of a virtual obstacle is changed according to a direction in which a camera of a drone FPV recognizes a marker installed in a specific area is formed, thereby enabling a drone The present invention also provides a system for providing augmented reality interactive game contents.

본 발명에 의한 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템은 드론FPV의 카메라에서 촬영된 영상을 영상전송장치를 통해 무선으로 전송받는 메인서버와; 상기 영상전송장치에서 전달된 영상신호에 소정의 신호처리과정을 수행하는 그래픽서버와; 상기 그래픽서버에서 신호처리된 영상신호에 대응할 수 있도록 게임콘텐츠를 부가하는 게임서버와; 상기 그래픽서버와 게임서버의 영상신호를 융합하고 증강현실 기술을 부여하는 증강현실(AR; Augnented Reality)서버와; 상기 증강현실제어부의 출력신호를 무선으로 전달받아 이용자에게 가상현실게임을 제공하는 가상현실(VR; Virtual Reality) 출력장치를 포함하여 구성되는 것을 그 기술적 특징으로 한다. A system for providing augmented reality interactive game contents using a dragon according to the present invention comprises: a main server for wirelessly receiving an image photographed by a camera of a drone FPV through an image transmission device; A graphics server for performing a predetermined signal processing process on the video signal transmitted from the video transmission apparatus; A game server for adding game contents to correspond to a video signal processed by the graphics server; An Augmented Reality (AR) server that fuses video signals of the graphics server and the game server and gives augmented reality technology; And a virtual reality (VR) output device for wirelessly receiving the output signal of the augmented reality controller and providing a virtual reality game to a user.

본 발명은 단순히 드론FPV에서 촬영된 영상정보에 증강현실 기법을 적용하여 가상의 장애물을 구현함으로써 다채로운 드론FPV의 비행을 가능하게 하고, 복수의 사용자가 각각의 드론FPV를 운전하면서 게임룰에 따라 장애물경주, 배틀 등을 자신의 가상현실 출력장치를 통해 시각적으로 보면서 경쟁함으로써 보다 흥미로운 게임운영이 가능하게 된다.The present invention applies various augmented reality techniques to image information photographed by a drone FPV to realize a virtual obstacle so as to enable flight of various drone FPVs, Race, battle, etc., visually through their virtual reality output device, compete while watching more interesting games.

또한, 본 발명은 외부카메라에서 획득한 영상정보를 이용하여 가상현실 출력장치를 통해 3인칭 시점의 게임 콘텐츠를 구현할 수 있는 효과가 있다. In addition, the present invention has an effect of realizing game content of a third person view through a virtual reality output apparatus using image information acquired from an external camera.

또한, 본 발명은 특정한 위치에 가상의 장애물에 대한 위치정보와 크기정보와 형상정보를 포함하는 마커(Marker)를 설치하고, 드론FPV의 카메라가 마커를 인식하는 방향에 따라 가상장애물의 형상이 변동되는 인터렉션 존(Interaction Zone)이 형성함으로써 보다 게임의 다양성을 구현할 수 있는 효과가 있다. Further, according to the present invention, a marker including positional information, size information, and shape information of a virtual obstacle is provided at a specific position, and the shape of the virtual obstacle varies according to the direction in which the camera of the drone FPV recognizes the marker And an interaction zone in which a game is played.

도 1은 본 발명에 의한 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템의 블럭 구성도,
도 2는 본 발명에서 드론FPV에서 촬영된 영상을 증강현실 기법이 적용된 영상에 융합하여 가상현실 기법이 적용된 영상으로 출력하는 것을 개략적으로 나타낸 모식도,
도 3은 도 2에 의해 구현되는 가상현실 레이싱과 가상현실 배틀을 개략적으로 나타낸 예시도,
도 4는 본 발명의 드론FPV가 직하방의 마커를 인식하는 과정을 개략적으로 나타내는 모식도,
도 5는 본 발명의 드론FPV가 전방의 마커를 인식하는 과정을 개략적으로 나타내는 모식도,
도 6은 본 발명의 드론FPV가 특정 위치에 있는 마커로 진입하는 방향에 따라 인터렉션 존이 형성되는 과정을 개략적으로 나타내는 모식도.1 is a block diagram of a system for providing augmented reality interactive game contents using a drone according to the present invention;
FIG. 2 is a schematic view illustrating a method of fusing an image photographed by a drone FPV to an image to which an augmented reality technique is applied and outputting it as an image to which a virtual reality technique is applied;
FIG. 3 is a schematic view illustrating virtual reality racing and virtual reality battle implemented by FIG. 2,
FIG. 4 is a schematic diagram schematically illustrating a process of recognizing a marker in a direct downward direction by the drone FPV of the present invention;
5 is a schematic diagram schematically showing a process of recognizing a marker in front of the drone FPV of the present invention,
6 is a schematic view schematically illustrating a process of forming an interaction zone according to a direction in which a drone FPV of the present invention enters a marker at a specific position.

본 발명의 바람직한 실시 예를 첨부된 도면을 통해 상세히 설명한다.Preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.

본 발명의 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템은 도 1에 도시된 바와 같이, 단수 또는 복수의 드론FPV(200)(201) 이용자들이 게임을 즐길 수 있도록 제공된다. As shown in FIG. 1, a system for providing augmented reality interactive game contents using a dragon of the present invention is provided so that users of a single or multiple Drones FPV 200 (201) can enjoy a game.

이때, 카메라(210)와 상기 카메라(210)를 통해 촬영된 영상을 외부로 무선 전송하는 영상전송장치(22)가 구비된 드론FPV(First-Person View)(200), 상기 드론FPV(200)를 사용자가 무선으로 원격제어하는 드론 콘트롤러(100)에 대한 기술은 당업계의 공지기술이므로 이하 구체적인 설명은 생략한다. In this case, a dron FPV (First-Person View) 200 having a camera 210 and an image transmission device 22 for wirelessly transmitting an image photographed through the camera 210 to the outside, The dron controller 100 for remote control by the user via the radio is well known in the art, and thus a detailed description thereof will be omitted.

본 발명은 드론FPV(200)의 카메라(210)에서 촬영된 영상을 영상전송장치(220)를 통해 무선으로 전송받는 메인서버(300)와; 상기 영상전송장치(220)에서 전달된 영상신호에 소정의 신호처리과정을 수행하는 그래픽서버(310)와; 상기 그래픽서버(310)에서 신호처리된 영상신호에 대응할 수 있도록 게임콘텐츠를 부가하는 게임서버(320)와; 상기 그래픽서버(310)와 게임서버(320)의 영상신호를 융합하고 증강현실 기술을 부여하는 증강현실(AR; Augnented Reality)서버(330)와; 상기 증강현실서버(330)의 출력신호를 무선으로 전달받아 이용자에게 가상현실게임을 제공하는 가상현실(VR; Virtual Reality) 출력장치(400)를 포함하여 구성된다. The main server 300 receives an image photographed by the camera 210 of the drone FPV 200 wirelessly through the image transmission device 220; A graphics server 310 for performing a predetermined signal processing on the video signal transmitted from the video transmission apparatus 220; A game server 320 for adding game contents to the image signal processed by the graphic server 310; An Augmented Reality (AR) server 330 that fuses the video signals of the graphics server 310 and the game server 320 and gives augmented reality technology; And a virtual reality (VR) output device 400 receiving the output signal of the augmented reality server 330 wirelessly and providing the user with a virtual reality game.

상기 그래픽서버(310)는 상기 드론FPV(200)에서 촬영된 영상에서 노이즈신호를 제거하고, 영상합성을 위한 이미지 크기 및 픽셀 등을 조절하는 작업을 수행하게 된다. The graphic server 310 removes a noise signal from the image photographed by the drone FPV 200 and performs an operation of adjusting an image size and pixels for image synthesis.

또한, 상기 게임서버(320)는 사용자가 즐기고자 하는 게임의 종류(예를 들어, 장애물 경주, 격추 배틀 등)에 따라 다양한 게임 콘텐츠를 미리 저장하고 있으며, 게임의 시작단계에서 사용자가 미리 선택하도록 구현된다. 이때 추후 외부에서 새롭게 제작된 게임환경을 게임서버(310)에 추가할 수 있음은 물론이다. In addition, the game server 320 stores various game contents in advance according to the kind of game the user wants to enjoy (for example, an obstacle race, a shooting battle, etc.) . At this time, it is needless to say that a game environment newly produced from the outside may be added to the game server 310 later.

또한, 상기 증강현실서버(330)는 가상의 장애물을 구현하는 것으로서, 다양한 크기 및 형상의 3차원 영상으로 구현되어 상기 드론FPV(200)에서 전달된 영상과 융합되어 가상현실 출력장치(400)로 전달된다. The augmented reality server 330 implements a virtual obstacle, and is implemented as a three-dimensional image having various sizes and shapes, and is fused with the image delivered from the drone FPV 200 to be output to the virtual reality output device 400 .

상기 증강현실(augmented reality, 增强現實)이란, 사용자가 눈으로 보는 현실세계에 가상 물체를 겹쳐 보여주는 기술을 의미하는 것으로서, 현실세계에 실시간으로 부가정보를 갖는 가상세계를 합쳐 하나의 영상으로 보여주므로 혼합현실(Mixed Reality, MR)이라고도 한다. The augmented reality means a technique of superimposing a virtual object on the real world viewed by the user, and the virtual world having the additional information in real time in the real world is aggregated and displayed as one image It is also called Mixed Reality (MR).

현실세계를 가상세계로 보완해주는 개념인 증강현실은 컴퓨터 그래픽으로 만들어진 가상환경을 사용하지만 주역은 현실환경이다. 컴퓨터 그래픽은 현실환경에 필요한 정보를 추가 제공하는 역할을 한다. Augmented reality, a concept that complements the real world with a virtual world, uses a virtual environment created by computer graphics, but the protagonist is a real environment. Computer graphics serve to provide additional information needed for the real world.

따라서, 본 발명은 드론FPV(200)가 촬영한 영상을 현실환경으로 하고, 증강현실서버(310)에서 만들어진 가상환경을 겹치고(overlap), 가상현실 출력장치(400)로 제공하는 것이다. 본 발명에서는 상기 가상현실 출력장치(400)의 일 예로, 비디오방식과 광학방식 등으로 구현된 HMD(head mounted display)를 사용한다.Accordingly, the present invention makes the images photographed by the drone FPV 200 a real environment, overlaps the virtual environments created by the augmented reality server 310, and provides the virtual environments to the virtual reality output apparatus 400. In the present invention, an HMD (head mounted display) implemented by a video system and an optical system is used as an example of the virtual reality output apparatus 400. [

본 발명의 일 실시예로, 상기 증강현실서버(330)에서는 특정한 패턴으로 형성된 주행경로를 형성하고, 상기 그래픽서버(310)를 통해 전달되는 드론FPV(200)가 주행경로를 따라 비행하면, 상기 게임서버(320)에서는 일정한 룰에 따라 드론FPV(200)가 주행하는 상황에 따라 게임을 진행하며, 상기 게임의 진행상황은 드론FPV(200)의 운전자가 착용한 가상현실출력장치(400)에 전달하게 된다. According to an embodiment of the present invention, the augmented reality server 330 forms a driving route formed with a specific pattern, and when the drone FPV 200, which is transmitted through the graphic server 310, In the game server 320, the game progresses according to a certain condition that the drone FPV 200 runs, and the progress of the game is transmitted to the virtual reality output device 400 worn by the driver of the drone FPV 200 .

따라서, 하나의 드론FPV(200)에는 1인칭 시점의 영상을 구현하여, 마치 사용자가 직접 비행기를 몰고 있는 실시간의 느낌을 전달하게 된다. Accordingly, the first drone FPV 200 implements a first-person view image and delivers a real-time feeling as if the user is driving the plane directly.

본 발명의 다른 실시예로, 상기 증강현실서버(330)에서는 일정한 크기의 배틀 필드(Battle Field)를 형성하고, 상기 그래픽서버(310)를 통해 전달되는 복수 드론FPV(200)(201)의 비행상황에 따라 게임서버(310)에서 제공하는 일정한 룰(Rule)에 따라 게임을 진행하며, 상기 게임의 진행상황은 개별 드론FPV(200)(201)의 운전자가 착용한 각각의 가상현실출력장치(400)(401)에 전달되로고 구현할 수 있다. In another embodiment of the present invention, the augmented reality server 330 forms a battle field of a predetermined size, and the battle field of the auger FPV 200 (201), which is transmitted through the graphics server 310, The game progresses according to a certain rule provided by the game server 310 according to the situation and the progress of the game is controlled by each virtual reality output device worn by the driver of the individual drone FPV 200 400) 401 and can implement a logo.

또한, 상기 메인서버(300)에서는 미리 특정하게 셋팅된 위치의 주변을 촬영하는 복수의 외부카메라1 내지 외부카메라n로 이루어지는 외부 카메라(500)의 영상정보가 더 전달되어, 3인칭 시점으로 구현되는 영상정보를 가상현실출력장치(400)로 전달할 수도 있다. Also, in the main server 300, the image information of the external camera 500, which is composed of a plurality of external cameras 1 to n, which photographs the periphery of a specifically set position, is further transmitted to be implemented as a third- And may transmit the image information to the virtual reality output apparatus 400. [

한편, 본 발명은 드론FPV의 비행경로에 따라 보다 다채로운 게임운영이 가능하도록 도 4 내지 도 5 6에 도시된 바와 같은 마커(marker)를 도입하였다. Meanwhile, the present invention introduces a marker as shown in FIGS. 4 to 5 so that a more varied game operation can be performed according to the flight path of the drone FPV.

도 4는 본 발명의 드론FPV가 직하방의 마커를 인식하는 과정을 개략적으로 나타내는 모식도이고, 도 5는 본 발명의 드론FPV가 전방의 마커를 인식하는 과정을 개략적으로 나타내는 모식도이며, 도 6은 본 발명의 드론FPV가 특정 위치에 있는 마커로 진입하는 방향에 따라 인터렉션 존이 형성되는 과정을 개략적으로 나타내는 모식도이다. FIG. 4 is a schematic diagram showing a process of recognizing a marker in the direct downward direction by the drone FPV of the present invention, FIG. 5 is a schematic view schematically illustrating a process of recognizing a marker in front of the drone FPV of the present invention, FIG. 3 is a schematic view schematically illustrating a process of forming an interaction zone according to a direction in which a drone FPV of the present invention enters a marker at a specific position. FIG.

즉, 상기 드론FPV(200)가 비행하는 지역의 특정위치에는 복수의 마커(marker)(600)가 형성되고, 드론FPV(200)의 카메라(210)에서 상기 마커(600)가 인식되면, 상기 증강현실서버(330)에서는 마커(600)의 위치를 가상의 장애물로 인식하도록 구현한 것이다. That is, a plurality of markers 600 are formed at specific locations in the area where the drone FPV 200 is flying, and when the marker 600 is recognized by the camera 210 of the drone FPV 200, The augmented reality server 330 recognizes the position of the marker 600 as a virtual obstacle.

이때, 상기 마커(600)는 가상의 장애물에 대한 위치정보와 크기정보와 형상정보를 포함하며, 상기 마커(600)는 드론FPV(200)가 진입하는 방향에 따라 가상장애물의 형상이 변동되는 인터렉션 존(Interaction Zone)이 형성한다. The marker 600 includes positional information about a virtual obstacle, size information, and shape information, and the marker 600 may include an interaction that changes the shape of a virtual obstacle according to a direction in which the drone FPV 200 enters, The zone (Interaction Zone) is formed.

이때, 인터렉션 존이란, 마커의 전후좌우 일정 구역에 도달하면, 진입방향에 따라 가상장애물의 형상 또는 구조가 변경되어 비행궤적을 상이하게 조정해야 하는 것을 특정한 지역을 의미한다. In this case, the interaction zone means a specific area in which the shape or structure of the virtual obstacle is changed according to the entering direction and the flight trajectory must be adjusted differently when the marker reaches a certain area on the front, rear, left, and right sides of the marker.

따라서, 마커(600)의 갯수, 설치 위치와, 마커(600)에 포함된 가상장애물의 정보에 따라 동일한 게임 환경에서도 다채로운 비행게임이 가능하게 된다. Accordingly, various flying games can be performed in the same game environment according to the number of the markers 600, the installation position, and the information of the virtual obstacles included in the marker 600.

상기와 같은 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변경 실시가 가능할 것이다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention as defined in the appended claims. will be.

100, 101 : 드론 콘트롤러 200,201 : 드론FPV
210 : 카메라 220 : 영상전송장치
300 : 메인서버 310 : 그래픽서버
320 : 게임서버 330 : 증강현실(AR) 서버
400,401 : 가상현실(VR) 출력장치 500 : 외부카메라
600 : 마커100, 101: Drone controller 200, 201: Drone FPV
210: camera 220: video transmission device
300: main server 310: graphics server
320: game server 330: augmented reality (AR) server
400,401: Virtual reality (VR) output device 500: External camera
600: Marker

Claims (7)

카메라와 영상전송장치가 구비된 드론FPV(First-Person View)와, 상기 드론FPV를 무선으로 원격제어하는 드론 콘트롤러를 포함하는 게임 콘텐츠의 제공 시스템에 있어서,
드론FPV(200)의 카메라(210)에서 촬영된 영상을 영상전송장치(220)를 통해 무선으로 전송받는 메인서버(300)와;
상기 영상전송장치(220)에서 전달된 영상신호에 소정의 신호처리과정을 수행하는 그래픽서버(310)와;
상기 그래픽서버(310)에서 신호처리된 영상신호에 대응할 수 있도록 게임콘텐츠를 부가하는 게임서버(320)와
상기 그래픽서버(310)와 게임서버(320)의 영상신호를 융합하고 증강현실 기술을 부여하는 증강현실(AR; Augnented Reality)서버(330)와;
상기 증강현실서버(330)의 출력신호를 무선으로 전달받아 이용자에게 가상현실게임을 제공하는 가상현실(VR; Virtual Reality) 출력장치(400);
를 포함하여 구성되는 것을 특징으로 하는 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템.
1. A system for providing game contents including a first-person view (FPV) equipped with a camera and a video transmission device, and a dron controller for remotely controlling the dron FPV by radio,
A main server 300 for wirelessly receiving images photographed by the camera 210 of the drone FPV 200 through the image transmission device 220;
A graphics server 310 for performing a predetermined signal processing on the video signal transmitted from the video transmission apparatus 220;
A game server 320 for adding game contents to correspond to the video signal processed by the graphics server 310,
An Augmented Reality (AR) server 330 that fuses the video signals of the graphics server 310 and the game server 320 and gives augmented reality technology;
A virtual reality (VR) output device 400 receiving the output signal of the augmented reality server 330 wirelessly and providing the user with a virtual reality game;
Wherein the augmented reality interactive game contents providing system comprises a dragon-based augmented reality interactive game contents providing system.
제 1항에 있어서,
상기 메인서버(300)에서는 미리 특정하게 셋팅된 위치의 주변을 촬영하는 복수의 외부카메라1 내지 외부카메라n로 이루어지는 외부 카메라(500)의 영상정보가 더 전달되어,
3인칭 시점으로 구현되는 영상정보를 가상현실출력장치(400)로 전달하는 것을 특징으로 하는 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템.
The method according to claim 1,
The main server 300 further transmits image information of the external camera 500, which is composed of a plurality of external cameras 1 to n, which photographs the periphery of a specific set position in advance,
And transmits the image information to the virtual reality output apparatus (400) through a third person viewpoint.
제 1항에 있어서,
상기 증강현실서버(330)에서는 특정한 패턴으로 형성된 주행경로를 형성하고, 상기 그래픽서버(310)를 통해 전달되는 드론FPV(200)가 주행경로를 따라 비행하면, 상기 게임서버(320)에서는 일정한 룰에 따라 드론FPV(200)가 주행하는 상황에 따라 게임을 진행하며,
상기 게임의 진행상황은 드론FPV(200)의 운전자가 착용한 가상현실출력장치(400)에 전달되는 것을 특징으로 하는 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템.
The method according to claim 1,
The augmented reality server 330 forms a traveling route formed with a specific pattern and when the drones FPV 200 delivered through the graphic server 310 travel along the traveling route, The game progresses according to the situation in which the drone FPV 200 travels,
Wherein the progress of the game is transmitted to a virtual reality output device (400) worn by a driver of the drone FPV (200).
제 1항에 있어서,
상기 증강현실서버(330)에서는 일정한 크기의 배틀 필드(Battle Field)를 형성하고, 상기 그래픽서버(310)를 통해 전달되는 복수 드론FPV(200)(201)의 비행상황에 따라 게임서버(310)에서 제공하는 일정한 룰(Rule)에 따라 게임을 진행하며,
상기 게임의 진행상황은 개별 드론FPV(200)(201)의 운전자가 착용한 각각의 가상현실출력장치(400)(401)에 전달되는 것을 특징으로 하는 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공시스템.
The method according to claim 1,
The augmented reality server 330 forms a battle field of a predetermined size and the game server 310 forms a battle field according to the flying status of the plural drone FPV 200, The game is played according to a certain rule provided by the player,
The progress of the game is transmitted to each virtual reality output apparatus 400 401 worn by the driver of the individual drone FPV 200 (201) .
제 1항에 있어서,
상기 드론FPV(200)가 비행하는 지역의 특정위치에는 복수의 마커(marker)(600)가 형성되고, 드론FPV(200)의 카메라(210)에서 상기 마커(600)가 인식되면,
상기 증강현실서버(330)에서는 마커(600)의 위치를 가상의 장애물로 인식하도록 구현된 것을 특징으로 하는 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템.
The method according to claim 1,
A plurality of markers 600 are formed at specific locations in the area where the drone FPV 200 is flying and when the marker 600 is recognized by the camera 210 of the drone FPV 200,
Wherein the augmented reality server (330) is configured to recognize the position of the marker (600) as a virtual obstacle.
제 5항에 있어서,
상기 마커(600)는 가상의 장애물에 대한 위치정보와 크기정보와 형상정보를 포함하는 것을 특징으로 하는 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템.
6. The method of claim 5,
The marker (600) includes position information, size information, and shape information of a virtual obstacle.
제 5항 또는 제 6항에 있어서,
상기 마커(600)는 드론FPV(200)가 진입하는 방향에 따라 가상장애물의 형상이 변동되는 인터렉션 존(Interaction Zone)이 형성되는 것을 특징으로 하는 드론을 이용한 증강현실 인터렉티브 게임 콘텐츠의 제공 시스템.

The method according to claim 5 or 6,
Wherein the marker (600) is formed with an interaction zone in which a shape of a virtual obstacle varies according to a direction in which the drone FPV (200) enters.

KR1020170162995A 2017-11-30 2017-11-30 System for providing augmented reality interactive game contents using a drones KR102042232B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170162995A KR102042232B1 (en) 2017-11-30 2017-11-30 System for providing augmented reality interactive game contents using a drones

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170162995A KR102042232B1 (en) 2017-11-30 2017-11-30 System for providing augmented reality interactive game contents using a drones

Publications (2)

Publication Number Publication Date
KR20190063883A true KR20190063883A (en) 2019-06-10
KR102042232B1 KR102042232B1 (en) 2019-12-02

Family

ID=66848238

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170162995A KR102042232B1 (en) 2017-11-30 2017-11-30 System for providing augmented reality interactive game contents using a drones

Country Status (1)

Country Link
KR (1) KR102042232B1 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110478911A (en) * 2019-08-13 2019-11-22 苏州钛智智能科技有限公司 The unmanned method of intelligent game vehicle and intelligent vehicle, equipment based on machine learning
KR102148103B1 (en) 2019-11-06 2020-08-25 세종대학교산학협력단 Method and apparatus for generating mixed reality environment using a drone equipped with a stereo camera
WO2021066269A1 (en) * 2019-10-02 2021-04-08 케이시크 User game-associated self driving method and system
KR20220080528A (en) * 2020-12-07 2022-06-14 주식회사 더블베어스 Virtual reality drone simulator
KR20220080526A (en) * 2020-12-07 2022-06-14 주식회사 더블베어스 Virtual reality drone simulator
KR102419902B1 (en) * 2022-05-05 2022-07-14 박세영 Drone sports game system
CN111443723B (en) * 2020-04-07 2023-09-15 中国航空无线电电子研究所 Third visual angle view generation and display program of unmanned aerial vehicle
CN117389338A (en) * 2023-12-12 2024-01-12 天津云圣智能科技有限责任公司 Multi-view interaction method and device of unmanned aerial vehicle and storage medium

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002346240A (en) * 2001-05-29 2002-12-03 Taiyo Kogyo Kk Racing equipment for remote controlled toy vehicle
KR101505411B1 (en) * 2013-12-03 2015-03-25 주식회사 바이로봇 Battle Game Relay System using Flying Robot
KR101683147B1 (en) * 2016-03-29 2016-12-09 안지수 Apparatus using flight vehicle

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002346240A (en) * 2001-05-29 2002-12-03 Taiyo Kogyo Kk Racing equipment for remote controlled toy vehicle
KR101505411B1 (en) * 2013-12-03 2015-03-25 주식회사 바이로봇 Battle Game Relay System using Flying Robot
KR101683147B1 (en) * 2016-03-29 2016-12-09 안지수 Apparatus using flight vehicle

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
"Parrot AR Drone Augmented Reality Video Games Demo HD version HQ", 인터넷 유튜브 게시영상(2010.01.06.)* *
"증강현실(AR)과 드론(Drone)을 이용해 즐길 수 있는 EdgyBees의 앱 'Drone Prix' 엡손의 스마트 안경을 만나다.", 인터넷 네이버 블로그 게시글(2017.06.02.)* *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110478911A (en) * 2019-08-13 2019-11-22 苏州钛智智能科技有限公司 The unmanned method of intelligent game vehicle and intelligent vehicle, equipment based on machine learning
WO2021066269A1 (en) * 2019-10-02 2021-04-08 케이시크 User game-associated self driving method and system
KR102148103B1 (en) 2019-11-06 2020-08-25 세종대학교산학협력단 Method and apparatus for generating mixed reality environment using a drone equipped with a stereo camera
CN111443723B (en) * 2020-04-07 2023-09-15 中国航空无线电电子研究所 Third visual angle view generation and display program of unmanned aerial vehicle
KR20220080528A (en) * 2020-12-07 2022-06-14 주식회사 더블베어스 Virtual reality drone simulator
KR20220080526A (en) * 2020-12-07 2022-06-14 주식회사 더블베어스 Virtual reality drone simulator
KR102419902B1 (en) * 2022-05-05 2022-07-14 박세영 Drone sports game system
CN117389338A (en) * 2023-12-12 2024-01-12 天津云圣智能科技有限责任公司 Multi-view interaction method and device of unmanned aerial vehicle and storage medium
CN117389338B (en) * 2023-12-12 2024-03-08 天津云圣智能科技有限责任公司 Multi-view interaction method and device of unmanned aerial vehicle and storage medium

Also Published As

Publication number Publication date
KR102042232B1 (en) 2019-12-02

Similar Documents

Publication Publication Date Title
KR20190063883A (en) System for providing augmented reality interactive game contents using a drones
EP3592443B1 (en) Augmented ride system and method
US20100305724A1 (en) Vehicle competition implementation system
WO2016015393A1 (en) Electronic device, electronic system and control method
KR101131093B1 (en) Four-dimension based interactive airship simulation system using geographic information and method for the same
JPH06176131A (en) Picture synthesis device and virtual reality device using the same
US20190105572A1 (en) Drivable vehicle augmented reality game
US10580216B2 (en) System and method of simulating first-person control of remote-controlled vehicles
US20220351472A1 (en) Remote camera augmented reality system
JP3273038B2 (en) Virtual experience type game device
CN110248711A (en) The matching system and method for unmanned plane
JP2002224434A (en) Image composing device, virtual experience device, and image composing method
JP3273017B2 (en) Image synthesis device and virtual experience device using the same
JPH113437A (en) Image synthesizer and image synthesizing method
JP7423781B2 (en) VR amusement programs and equipment
JP5430262B2 (en) Integrated interface for remote control and video game
KR102502021B1 (en) Virtual reality drone simulator
TWI380843B (en) Remote control toys and electronic game integrated interface
JP2017099790A (en) Traveling object operation system
KR20220080526A (en) Virtual reality drone simulator
KR20220080528A (en) Virtual reality drone simulator
KR20220000165A (en) Method for broadcasting virtual reality game and virtual reality system for performing the same
JP3082156U (en) Simulated riding control radio control model
NZ561260A (en) Vehicle competition implementation system

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right