KR102021492B1 - 드론을 통한 실시간 영상 제공 시스템 및 방법 - Google Patents

드론을 통한 실시간 영상 제공 시스템 및 방법 Download PDF

Info

Publication number
KR102021492B1
KR102021492B1 KR1020180059933A KR20180059933A KR102021492B1 KR 102021492 B1 KR102021492 B1 KR 102021492B1 KR 1020180059933 A KR1020180059933 A KR 1020180059933A KR 20180059933 A KR20180059933 A KR 20180059933A KR 102021492 B1 KR102021492 B1 KR 102021492B1
Authority
KR
South Korea
Prior art keywords
image
information
real
time
drone
Prior art date
Application number
KR1020180059933A
Other languages
English (en)
Inventor
박경배
정수범
Original Assignee
(주)아라커뮤니케이션즈
엘에스웨어(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)아라커뮤니케이션즈, 엘에스웨어(주) filed Critical (주)아라커뮤니케이션즈
Priority to KR1020180059933A priority Critical patent/KR102021492B1/ko
Application granted granted Critical
Publication of KR102021492B1 publication Critical patent/KR102021492B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/438—Presentation of query results
    • G06F16/4387—Presentation of query results by the use of playlists
    • G06F16/4393—Multimedia presentations, e.g. slide shows, multimedia albums
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/438—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G06F16/738—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/7867—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title and artist information, manually generated time, location and usage information, user ratings
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video

Abstract

본 발명은 드론을 통한 실시간 영상 제공 시스템으로, 영상정보를 요청하여 수신하는 사용자 단말; 실시간으로 드론 촬영 영상과 실시간 위치 정보, 실시간 촬영정보를 이용하여 과거에 촬영된 대응되는 히스토리 영상을 추출하여 사용자 단말로 실시간 영상정보 및 히스토리 영상 정보를 동시에 제공하고 제공되는 영상의 특정 위치에 표출되는 증강현실 데이터를 매칭하여 제공하는 영상 서비스 서버; 상기 영상 서비스 서버로 사용자가 선택한 구간의 현재 촬영 영상 조회 요청에 대하여 실시간 영상 정보와 촬영 드론 위치, 고도, 진행방향, 속도, 드론 비행각도, 촬영각도를 포함하는 실시간 위치 정보와 실시간 촬영정보를 제공하는 드론 영상 제공부; 및 상기 영상 서비스 서버로 과거에 수집된 히스토리 영상 정보, 상기 히스토리 영상 정보에 관한 위치정보, 상기 히스토리 영상 정보에 관한 촬영정보 및 히스토리 영상 정보의 위치 정보 중 특정 위치에 대응하는 증강현실 데이터를 매칭하는 증강현실 매칭 정보를 제공하는 히스토리 영상 데이터베이스를 포함한다.

Description

드론을 통한 실시간 영상 제공 시스템 및 방법{System and method for providing real time image via drone}
본 발명은 드론을 통한 실시간 영상 제공 시스템 및 방법에 관한 것으로, 더욱 상세하게는 현재 촬영되고 있는 실시간 드론 영상과 같은 위치의 과거의 히스토리 영상을 동시에 사용자에게 제공하는 것으로, 드론 영상뿐만 아니라 영상의 특정 위치에 표출되는 증강현실 데이터를 영상별로 별도 작성 관리하고 영상 서비스를 제공하는 경우 영상에 매칭하여 제공함으로써 같은 위치의 과거 영상을 서비스하여 시간별 변화 등을 쉽게 파악할 수 있도록 드론을 통한 실시간 영상 제공 시스템 및 방법에 대한 것이다.
최근 드론(drone)은 탑재된 복수의 초소형 프로펠러(rotor)를 이용하여 기체 균형을 유지하고, 카메라 등을 탑재하여 주변 상황을 촬영할 수 있는 기능이 탑재되고 있다.
종래의 드론은 주로 무인 정찰, 전투 지원 등 군사 용도로 활용되었으나, 최근에는 물품 배달 등과 같은 상업적인 용도로도 활용되고 있는 실정이다.
그러나, 현재까지 드론의 용도는 단순 영상 획득에 치중되어 사용자가 드론을 통해 접할 수 있는 다양한 체험을 극히 한정적으로 제공하고 있으며, 이로 인해 무인 비행체의 활용 극대화가 여전히 이루어지지 못하고 있다.
드론 기술의 발전으로 관련 콘텐츠에 대한 사용자 관심이 급속히 커지고 있고 관광 분야에서도 관련 콘텐츠에 대한 수요가 커지고 있다.
특히, 드론을 활용한 실시간 영상 스트리밍을 제공하기 위해서는 크게 드론과 지상컨트롤 시스템간 통신, 지상컨트롤 시스템과 서버간 통신이 확보되어야만 실시간 영상 스트리밍이 가능하다.
또한, 관광지나 경치가 좋지만 쉽게 접근할 수 없거나 계절적으로 탐방하기 어려운 장면을 제공하여 주거나 실제 관광지에 가보지 않고도 미리 가상 체험을 할 수 있도록 다양한 컨텐츠가 요구되고 있다.
이를 해결하기 위한 종래 기술로서 국내등록특허 10-1569454에 의하면 관광객이 자유롭게 관광드론을 조종하면서 실제 관광지의 관광 코스를 촬영하고, 관광드론이 비행하면서 촬영하는 영상을 화면으로 제공받아 현실적 비행 체험이 가능하도록 하는 무인 비행체를 이용한 체험 관광 시스템 및 방법을 개시하고 있다.
그러나, 종래의 기술은 관광객이 직접 드론을 조종하며 카메라의 각도를 조절해야하므로 비행체가 오랜 시간 비행하기가 어렵고, 카메라의 각도조종이 어려울 뿐만 아니라 관광객이 비행체를 조종하기도 용이하지 않은 문제가 있었다.
또한, 실시간으로 촬영되고 있는 영상이 만족스럽지 못하거나 현재 위치나 계절에 따라 변화되는 영상을 비교하여 제공할 수 없는 문제점이 있다.
국내등록특허 제10-1569454호
본 발명은 전술한 바와 같은 종래의 문제점을 해결하고자 안출된 것으로서, 그의 목적은 현재 촬영되고 있는 실시간 드론 영상과 같은 위치의 과거의 히스토리 영상을 동시에 사용자에게 제공하는 것으로, 드론 영상뿐만 아니라 영상의 특정 위치에 표출되는 증강현실 데이터를 영상별로 별도 작성 관리하고 영상 서비스를 제공하는 경우 영상에 매칭하여 제공함으로써 같은 위치의 과거 영상을 서비스하여 시간별 변화 등을 쉽게 파악할 수 있도록 드론을 통한 실시간 영상 제공 시스템 및 방법을 제공하기 위한 것이다.
본 발명에 따른 드론을 통한 실시간 영상 제공 시스템은, 웹 또는 모바일 환경에서 서버에 접속하여 영상정보를 요청하여 수신하는 사용자 단말; 실시간으로 드론 촬영 영상과 실시간 위치 정보, 실시간 촬영정보를 이용하여 과거에 촬영된 대응되는 히스토리 영상을 추출하여 사용자 단말로 실시간 영상정보 및 히스토리 영상 정보를 동시에 제공하고 제공되는 영상의 특정 위치에 표출되는 증강현실 데이터를 매칭하여 제공하는 영상 서비스 서버; 상기 영상 서비스 서버로 사용자가 선택한 구간의 현재 촬영 영상 조회 요청에 대하여 실시간 영상 정보와 촬영 드론 위치, 고도, 진행방향, 속도, 드론 비행각도, 촬영각도를 포함하는 실시간 위치 정보와 실시간 촬영정보를 제공하는 드론 영상 제공부; 및 상기 영상 서비스 서버로 과거에 수집된 히스토리 영상 정보, 상기 히스토리 영상 정보에 관한 위치정보, 상기 히스토리 영상 정보에 관한 촬영정보 및 히스토리 영상 정보의 위치 정보 중 특정 위치에 대응하는 증강현실 데이터를 매칭하는 증강현실 매칭 정보를 제공하는 히스토리 영상 데이터베이스를 포함한다.
또한, 본 발명에 따른 드론을 통한 실시간 영상 제공 시스템에 있어서, 상기 영상 서비스 서버는 사용자 단말이 웹이나 모바일 환경에서 시스템에 접속하면 실시간으로 드론을 통해 촬영하고 있는 촬영 영상 정보와 상기 드론의 실시간 위치 정보, 실시간 촬영정보를 수집하는 실시간 정보 수집부; 사용자 단말이 웹이나 모바일 환경에서 시스템에 접속하면 실시간으로 드론을 통해 촬영하고 있는 촬영 영상 정보의 위치 정보와 동일한 특정 위치에 대하여 과거 다른 시점에 촬영된 히스토리 영상 정보와 상기 특정 위치에 해당하는 증강현실 매칭 데이터를 수집하여 관리하는 히스토리 영상 관리부; 및 상기 드론의 실시간 위치 정보, 실시간 촬영정보를 이용하여 정확한 위치, 고도 정보를 수집하고 해당 지역을 추출하여 그 지역에 해당하는 히스토리 영상 정보를 추출하여 실시간 영상 정보와 히스토리 영상 정보를 함께 제공하며 상기 영상 정보들에는 특정 위치에 대응하는 증강현실 데이터를 매칭하여 영상 컨텐츠를 제공하는 영상 서비스 관리부를 포함하는 것을 특징으로 하는 것이다.
또한, 본 발명에 따른 드론을 통한 실시간 영상 제공 시스템에 있어서, 상기 실시간 정보 수집부는 실시간으로 촬영하고 있는 드론의 GPS 모듈을 이용하여 정확한 위치, 고도 정보를 수집 처리하는 실시간 위치 정보 관리부; 실시간 영상 촬영 정보를 추출하기 위하여 촬영 드론의 비행 방향, 속도, 각도 및 카메라 촬영 각도 정보를 수집하여 저장하는 카메라 촬영 정보 관리부; 및 실시간으로 드론에 의하여 실제 촬영하고 있는 영상 데이터를 수집하여 저장하는 영상 데이터 수집 처리부를 포함하는 것을 특징으로 하는 것이다.
또한, 본 발명에 따른 드론을 통한 실시간 영상 제공 시스템에 있어서, 상기 히스토리 영상 관리부는 실시간으로 촬영하고 있는 드론의 GPS 위치, 촬영 정보를 통하여 특정 위치에 대응하는 해당 지역을 추출하는 영상 위치 정보 관리부; 드론의 GPS 위경도, 드론 진행속도, 진행 방향, 비행 고도, 비행각도, 카메라 촬영각도 정보를 기반으로 한 위치별 영상 정보를 저장하고 관리하는 위치별 영상 관리부; 시간별, 계절별 영상 정보를 히스토리 영상 정보로 관리하기 위한 시간별 영상 관리부; 및 히스토리 영상 정보마다 특정 위치에서 대하여 대응하는 텍스트, 아이콘 형태의 데이터를 추출하고 이를 결합하여 표시하기 위해 상기 히스토리 영상 정보별 특이 사항에 대한 데이터를 저장하고 관리하는 증강현실 영상 매칭 데이터 관리부를 포함하는 것을 특징으로 하는 것이다.
또한, 본 발명에 따른 드론을 통한 실시간 영상 제공 시스템에 있어서, 상기 영상 서비스 관리부는 실시간 촬영하는 드론의 경위도, 고도, 진행방향, 진행속도, 드론의 각도, 카메라 각도를 이용하여 실시간 촬영 영상의 위치 정보를 산출하는 영상 위치 산출부; 상기 영상 위치 산출부에 의해 추출된 위치 정보와 매칭되는 히스토리 영상 중 사용자 단말로부터 요청된 히스토리 영상을 추출하는 히스토리 영상 추출부; 실시간으로 촬영하고 있는 드론 촬영 영상을 사용자 단말로 제공하는 실시간 영상 서비스부; 상기 히스토리 영상 추출부에 의해 추출된 영상을 사용자 단말에 제공하며, 촬영 영상의 위치 정보에 해당하는 증강현실 매칭 데이터를 결합하여 사용자 단말로 제공하는 히스토리 영상 서비스부; 및 촬영 영상의 특정 위치에서 영상정보에 해당하는 텍스트, 아이콘 형태의 데이터를 추출하여 증강현실 매칭데이터를 표시하며 히스토리 영상 정보별로 특이 사항에 대한 수집된 데이터로 히스토리 증강현실 영상 정보에 매칭 처리하는 증강현실 매칭 데이터 처리부를 포함하는 것을 특징으로 하는 것이다.
또한, 본 발명에 따른 드론을 통한 실시간 영상 제공 시스템에 있어서, 상기 히스토리 영상 데이터베이스에는 영상정보를 등록하여 관리하며, 증강현실 매칭 정보를 등록하고 관리하기 위한 운영자 단말이 연결되는 것을 특징으로 하는 것이다.
한편, 본 발명에 따른 드론을 통한 실시간 영상 제공 방법은, 사용자 단말이 영상 서비스 서버에 접속하여 영상정보를 요청하는 단계; 영상 서비스 서버는 사용자의 선택 구간에 대한 실시간 촬영 영상, 관리 정보를 드론 영상 제공부에 요청하면 상기 드론 영상 제공부는 영상 서비스 서버로 사용자가 선택한 구간의 실시간 촬영 영상, 촬영 드론 위치, 고도, 진행방향, 속도, 드론 비행각도, 촬영 각도를 포함하는 실시간 위치 정보와 실시간 촬영정보를 제공하는 단계; 영상 서비스 서버는 히스토리 영상 데이터베이스로부터 히스토리 영상 정보, 증강현실 영상 매칭 데이터를 요청하여 수집하는 단계; 및 영상 서비스 서버는 실시간 영상의 특정 위치에 대한 해당 지역을 추출하여 그 지역에 해당하는 히스토리 영상 정보를 추출하여 실시간 영상 정보와 히스토리 영상 정보를 함께 제공하고 상기 영상정보들에 증강현실 데이터를 매칭하여 영상 컨텐츠를 사용자 단말로 제공하는 단계를 포함하는 것을 특징으로 하는 것이다.
본 발명은 현재 촬영되고 있는 실시간 드론 영상과 동일 위치의 과거의 히스토리 영상을 동시에 사용자에게 제공하여 시간적, 계절적 영상과 다양한 사용자 시점에서 촬영된 히스토리 영상을 전송하여 현재 위치나 계절에 따라 변화되는 영상을 비교하여 시간적, 시점별로 변화하는 관광 컨텐츠를 제공할 수 있다.
또한, 드론의 실시간 촬영영상과 관광정보를 자동으로 결합하여 생성하는 증가현실 관광 콘텐츠를 제공하여 현장 접근이 어려운 경우에도 웹 또는 모바일 환경을 통하여 관광 이미지를 제공할 수 있다.
도1은 본 발명에 따른 드론을 통한 실시간 영상 제공 시스템의 전체 구성 블록도이다.
도2는 도1에 도시된 드론을 통한 실시간 영상 제공 시스템의 상세 구성도이다.
도3은 본 발명에 따른 드론을 통한 실시간 영상 제공 방법의 흐름도이다.
도4는 본 발명에 따른 드론을 통한 실시간 영상 제공 시스템의 일실시예를 나타낸 도면이다.
이하, 첨부된 도면을 참조하면서 본 발명의 실시예에 따른 드론을 통한 실시간 영상 제공 시스템에 대해 상세히 설명하기로 한다.
도1은 본 발명에 따른 드론을 통한 실시간 영상 제공 시스템의 전체 구성 블록도이다.
도1을 참조하면, 본 발명의 실시예에 따른 드론을 통한 실시간 영상 제공 시스템은 사용자 단말(10), 영상 서비스 서버(100), 드론 영상 제공부(200), 히스토리 영상 데이터베이스(300), 운영자 단말(400)을 포함한다.
사용자 단말(10)은 웹 또는 모바일 환경에서 서버(100)에 접속하여 영상정보를 요청하여 수신한다.
영상 서비스 서버(100)는 실시간으로 드론 촬영 영상과 실시간 위치 정보, 실시간 촬영정보를 이용하여 과거에 촬영된 대응되는 히스토리 영상을 추출하여 사용자 단말로 실시간 영상정보 및 히스토리 영상 정보를 동시에 제공하고 제공되는 영상의 특정 위치에 표출되는 증강현실 데이터를 매칭하여 제공한다.
영상 서비스 서버(100)는 실시간으로 드론에 의해 촬영되는 영상 정보와 이에 대응되는 위치에서 과거 촬영된 히스토리 영상 정보를 사용자 단말(10)로 전달한다.
사용자 단말(10)이 영상 서비스 서버(100)에 웹이나 모바일 환경에서 접속하면 실시간으로 드론을 통해 촬영하고 있는 영상을 스트리밍을 통하여 사용자에게 제공하게 되고, 이때 실시간 촬영 영상뿐만 아니라 그 위치 정보에 해당하는 매칭 증강현실 데이터도 결합하여 사용자 단말(10)에 전송된다.
또한, 이와 동시에 실시간으로 드론을 통해 촬영하고 있는 같은 위치 정보의 다른 기간 촬영된 히스토리 영상을 스트리밍 서비스를 통하여 사용자 단말(10)에게 제공되고, 이때 히스토리 영상뿐만 아니라 그 위치 정보에 해당하는 매칭 증강현실 데이터도 결합하여 사용자 단말(10)에 전송된다.
드론 영상 제공부(200)는 실시간 드론 촬영 영상을 제공하기 위한 것으로서 상기 영상 서비스 서버(100)로 사용자가 선택한 구간의 현재 촬영 영상 조회 요청에 대하여 실시간 영상 정보와 촬영 드론 위치, 고도, 진행방향, 속도, 드론 비행각도, 촬영 각도를 포함하는 실시간 위치 정보와 실시간 촬영정보를 제공한다.
히스토리 영상 데이터베이스(300)는 상기 영상 서비스 서버(100)로 과거에 수집된 히스토리 영상 정보, 상기 히스토리 영상 정보에 관한 위치정보, 상기 히스토리 영상 정보에 관한 촬영정보 및 히스토리 영상 정보의 위치 정보 중 특정 위치에 대응하는 증강현실 데이터를 매칭하는 증강현실 매칭 정보를 제공한다.
상기 히스토리 영상 정보에는 영상 정보마다 해당하는 위경도, 고도 위치 정보를 등록하여 관리하고, 촬영 정보는 영상 정보마다 해당하는 드론의 비행속도, 진행방향, 비행각도, 카메라 각도를 저장하여 관리하며, 영상 매칭 정보에 의하여 특정 위치에 해당하는 텍스트나 아이콘 등 표출 정보를 관리한다.
또한, 상기 히스토리 영상 데이터베이스(300)에는 영상정보를 등록하여 관리하며, 증강현실 매칭 정보를 등록하고 관리하기 위한 운영자 단말(400)이 연결되어 서버와 시스템을 관리, 제어할 수 있도록 한다.
도2는 도1에 도시된 본 발명에 따른 드론을 통한 실시간 영상 제공 시스템의 상세 구성도이다.
도2를 참조하면, 드론을 통한 실시간 영상 제공 시스템의 영상 서비스 서버(100)는 실시간 영상 데이터를 관리하여 사용자 단말(10)로 제공하는 시스템으로서 실시간 정보 수집부(110), 히스토리 영상 관리부(120), 영상 서비스 관리부(130)을 포함한다.
실시간 정보 수집부(110)는 사용자 단말(10)이 웹이나 모바일 환경에서 서버에 접속하면 실시간으로 드론을 통해 촬영하고 있는 촬영 영상 정보와 상기 드론의 실시간 위치 정보, 실시간 촬영정보를 수집한다.
상기 실시간 정보 수집부(110)는 드론을 통해 실시간으로 촬영하고 있는 영상 데이터를 수집 관리하는 것으로, 영상 정보 외에 GPS 모듈을 이용한 위치 정보와 고도 정보, 드론의 본체 비행 방향, 속도 및 각도와 카메라 촬영 각도 등 영상 촬영 위치 산출을 위한 6가지 정보를 수집하여 관리한다.
히스토리 영상 관리부(120)는 사용자 단말(10)이 웹이나 모바일 환경에서 서버에 접속하면 실시간으로 드론을 통해 촬영하고 있는 촬영 영상 정보의 위치 정보와 동일한 특정 위치에 대하여 과거 다른 시점에 촬영된 히스토리 영상 정보와 상기 특정 위치에 해당하는 증강현실 매칭 데이터를 수집하여 관리한다.
영상 서비스 관리부(130)는 상기 드론의 실시간 위치 정보, 실시간 촬영정보를 이용하여 정확한 위치, 고도 정보를 수집하고 해당 지역을 추출하여 그 지역에 해당하는 히스토리 영상 정보를 추출하여 실시간 영상 정보와 히스토리 영상 정보를 함께 제공하며 상기 영상 정보들에는 특정 위치에 대응하는 증강현실 데이터를 매칭하여 영상 컨텐츠를 제공한다.
또한, 실시간 정보 수집부(110)는 실시간 위치 정보 관리부(111), 카메라 촬영 정보 관리부(112), 영상 데이터 수집 관리부(113)을 포함한다.
실시간 위치 정보 관리부(111)는 실시간으로 촬영하고 있는 드론의 GPS 모듈을 이용하여 정확한 위치, 고도 정보를 수집 처리하는 것으로서 드론의 경위도, 고도, 진행방향, 진행속도를 수집하여 저장한다.
카메라 촬영 정보 관리부(112)는 실시간 영상 촬영 정보를 추출하기 위하여 촬영 드론의 비행 방향, 속도, 각도 및 카메라 촬영 각도 정보를 수집하여 저장한다.
영상 데이터 수집 처리부(113)는 실시간으로 드론에 의하여 실제 촬영하고 있는 영상 데이터를 수집하여 저장한다.
한편, 히스토리 영상 관리부(120)는 영상 위치 정보 관리부(121), 위치별 영상 관리부(122), 시간별 영상 관리부(123), 증강현실 영상 매칭 데이터 관리부(124)를 포함한다.
영상 위치 정보 관리부(121)는 실시간으로 촬영하고 있는 드론의 GPS 위치, 촬영 정보를 통하여 특정 위치에 대응하는 해당 지역을 추출한다.
위치별 영상 관리부(122)는 드론의 GPS 위도, GPS 경도, 드론 진행속도, 진행 방향, 비행 고도, 비행각도, 카메라 촬영각도 정보를 기반으로 한 위치별 영상 정보를 저장하고 관리한다.
시간별 영상 관리부(123)는 시간별, 계절별 영상 정보를 히스토리 영상 정보로 관리하기 위한 것이다.
증강현실 영상 매칭 데이터 관리부(124)는 히스토리 영상 정보마다 특정 위치에서 대하여 대응하는 텍스트, 아이콘 형태의 데이터를 추출하고 이를 결합하여 표시하기 위해 상기 히스토리 영상 정보별 특이 사항에 대한 데이터를 저장하고 관리한다.
한편, 상기 영상 서비스 관리부(130)는 영상 위치 산출부(131), 히스토리 영상 추출부(132), 실시간 영상 서비스부(133), 히스토리 영상 서비스부(134), 증강현실 매칭 데이터 처리부(135)를 포함한다.
상기 영상 위치 산출부(131)은 실시간 촬영하는 드론의 경위도, 고도, 진행방향, 진행속도, 드론의 각도, 카메라 각도를 이용하여 실시간 촬영 영상의 위치 정보를 산출한다.
히스토리 영상 추출부(132)는 상기 영상 위치 산출부(131)에 의해 추출된 위치 정보와 매칭되는 히스토리 영상 중 사용자 단말(10)로부터 요청된 히스토리 영상을 추출한다.
상기 실시간 영상 서비스부(133)는 실시간으로 촬영하고 있는 드론 촬영 영상을 사용자 단말(10)로 제공한다.
실시간으로 촬영하고 있는 영상은 스트리밍 기술을 이용하여 사용자에게 제공할 수 있고, 이때 촬영 영상뿐만 아니라 그 위치 정보에 해당하는 매칭 증강현실 데이터도 결합하여 사용자에게 제공한다.
히스토리 영상 서비스부(134)는 상기 히스토리 영상 추출부(132)에 의해 추출된 영상을 사용자 단말(10)에 제공하며, 촬영 영상의 위치 정보에 해당하는 증강현실 매칭 데이터를 결합하여 사용자 단말(10)로 제공할 수 있다.
증강현실 매칭 데이터 처리부(135)는 촬영 영상의 특정 위치에서 영상정보에 해당하는 텍스트, 아이콘 형태의 데이터를 추출하여 증강현실 매칭데이터를 표시하여 위치를 설명할 수 있으며 히스토리 영상 정보별로 특이 사항에 대한 수집된 데이터로 히스토리 증강현실 영상 정보에 매칭 처리하여 영상 정보에 대응하는 위치에 대한 설명을 할 수 있게 된다.
도3은 본 발명에 따른 드론을 통한 실시간 영상 제공 방법의 흐름도이고, 도4는 본 발명에 따른 드론을 통한 실시간 영상 제공 시스템의 일실시예를 나타낸 도면이다.
도3, 도4를 참조하면, 드론을 통한 실시간 영상 제공 과정은 다음과 같이 진행된다.
먼저, 사용자 단말(10)이 영상 서비스 서버(100)에 접속하여 영상정보를 요청한다(S10).
다음으로, 영상 서비스 서버(100)는 사용자의 선택 구간에 대한 실시간 촬영 영상, 관리 정보를 드론 영상 제공부(200)에 요청하면 상기 드론 영상 제공부(200)는 영상 서비스 서버(100)로 사용자가 선택한 구간의 실시간 촬영 영상과 촬영 드론 위치, 고도, 진행방향, 속도, 드론 비행각도, 촬영 각도를 포함하는 실시간 위치 정보와 실시간 촬영정보를 제공한다(S20).
영상 서비스 서버(100)는 히스토리 영상 데이터베이스(300)로부터 히스토리 영상 정보, 증강현실 영상 매칭 데이터를 요청하여 수집한다(S30).
영상 서비스 서버(100)는 실시간 영상의 특정 위치에 대한 해당 지역을 추출하여 그 지역에 해당하는 히스토리 영상 정보를 추출하여 실시간 영상 정보와 히스토리 영상 정보를 함께 제공하고 상기 영상정보들에 증강현실 데이터를 매칭하여 영상 컨텐츠를 사용자 단말(10)로 전송한다(S40).
이상에서 본 발명은 기재된 구체적인 실시예에 대해서만 상세히 설명되었지만 본 발명의 기술사상 범위 내에서 다양한 변형 및 수정이 가능함은 당업자에게 있어서 명백한 것이며, 이러한 변형 및 수정이 첨부된 특허청구범위에 속함은 당연한 것이다.
10 :사용자 단말 100 : 영상 서비스 서버
110 : 실시간 정보 수집부 111 : 실시간 위치정보 관리부
112 : 카메라 촬영 정보 관리부 113 : 영상 데이터 수집처리부
120 : 히스토리 영상 관리부 121 : 영상 위치 정보 관리부
122 : 위치별 영상 관리부 123 : 시간별 영상 관리부
124 : 증강현실영상 매칭데이터 관리부 130 : 영상 서비스 관리부
131 : 영상 위치 산출부 132 : 히스토리 영상 추출부
133 : 실시간 영상 서비스부 134 : 히스토리 영상 서비스부
135 : 증강현실 매칭 데이터 처리부 200 : 드론 영상 제공부
163 : 주문정보 확인부 164 : 실시간 주문 관리부
165 : 내역 관리부 200 : 서버
300 : 히스토리 영상 데이터베이스 400 : 운영자 단말

Claims (7)

  1. 웹 또는 모바일 환경에서 서버에 접속하여 영상정보를 요청하여 수신하는 사용자 단말;
    실시간으로 드론 촬영 영상과 실시간 위치 정보, 실시간 촬영정보를 이용하여 과거에 촬영된 대응되는 히스토리 영상을 추출하여 사용자 단말로 실시간 영상정보 및 히스토리 영상 정보를 동시에 제공하고 제공되는 영상의 특정 위치에 표출되는 증강현실 데이터를 매칭하여 제공하는 영상 서비스 서버;
    상기 영상 서비스 서버로 사용자가 선택한 구간의 현재 촬영 영상 조회 요청에 대하여 실시간 영상 정보와 촬영 드론 위치, 고도, 진행방향, 속도, 드론 비행각도, 촬영각도를 포함하는 실시간 위치 정보와 실시간 촬영정보를 제공하는 드론 영상 제공부; 및
    상기 영상 서비스 서버로 과거에 수집된 히스토리 영상 정보, 상기 히스토리 영상 정보에 관한 위치정보, 상기 히스토리 영상 정보에 관한 촬영정보 및 히스토리 영상 정보의 위치 정보 중 특정 위치에 대응하는 증강현실 데이터를 매칭하는 증강현실 매칭 정보를 제공하는 히스토리 영상 데이터베이스를 포함하는 드론을 통한 실시간 영상 제공 시스템.
  2. 제 1 항에 있어서,
    상기 영상 서비스 서버는,
    사용자 단말이 웹이나 모바일 환경에서 서버에 접속하면 실시간으로 드론을 통해 촬영하고 있는 촬영 영상 정보와 상기 드론의 실시간 위치 정보, 실시간 촬영정보를 수집하는 실시간 정보 수집부;
    사용자 단말이 웹이나 모바일 환경에서 서버에 접속하면 실시간으로 드론을 통해 촬영하고 있는 촬영 영상 정보의 위치 정보와 동일한 특정 위치에 대하여 과거 다른 시점에 촬영된 히스토리 영상 정보와 상기 특정 위치에 해당하는 증강현실 매칭 데이터를 수집하여 관리하는 히스토리 영상 관리부; 및
    상기 드론의 실시간 위치 정보, 실시간 촬영정보를 이용하여 정확한 위치, 고도 정보를 수집하고 해당 지역을 추출하여 그 지역에 해당하는 히스토리 영상 정보를 추출하여 실시간 영상 정보와 히스토리 영상 정보를 함께 제공하며 상기 영상 정보들에는 특정 위치에 대응하는 증강현실 데이터를 매칭하여 영상 컨텐츠를 제공하는 영상 서비스 관리부를 포함하는 것을 특징으로 하는 드론을 통한 실시간 영상 제공 시스템.
  3. 제 2 항에 있어서,
    상기 실시간 정보 수집부는,
    실시간으로 촬영하고 있는 드론의 GPS 모듈을 이용하여 정확한 위치, 고도 정보를 수집 처리하는 실시간 위치 정보 관리부;
    실시간 영상 촬영 정보를 추출하기 위하여 촬영 드론의 비행 방향, 속도, 각도 및 카메라 촬영 각도 정보를 수집하여 저장하는 카메라 촬영 정보 관리부; 및
    실시간으로 드론에 의하여 실제 촬영하고 있는 영상 데이터를 수집하여 저장하는 영상 데이터 수집 처리부를 포함하는 것을 특징으로 하는 드론을 통한 실시간 영상 제공 시스템.
  4. 제 2 항에 있어서,
    상기 히스토리 영상 관리부는,
    실시간으로 촬영하고 있는 드론의 GPS 위치, 촬영 정보를 통하여 특정 위치에 대응하는 해당 지역을 추출하는 영상 위치 정보 관리부;
    드론의 GPS 위도, GPS 경도, 드론 진행속도, 진행 방향, 비행 고도, 비행각도, 카메라 촬영각도 정보를 기반으로 한 위치별 영상 정보를 저장하고 관리하는 위치별 영상 관리부;
    시간별, 계절별 영상 정보를 히스토리 영상 정보로 관리하기 위한 시간별 영상 관리부; 및
    히스토리 영상 정보마다 특정 위치에서 대하여 대응하는 텍스트, 아이콘 형태의 데이터를 추출하고 이를 결합하여 표시하기 위해 상기 히스토리 영상 정보별 특이 사항에 대한 데이터를 저장하고 관리하는 증강현실 영상 매칭 데이터 관리부를 포함하는 것을 특징으로 하는 드론을 통한 실시간 영상 제공 시스템.
  5. 제 2 항에 있어서,
    상기 영상 서비스 관리부는,
    실시간 촬영하는 드론의 경위도, 고도, 진행방향, 진행속도, 드론의 각도, 카메라 각도를 이용하여 실시간 촬영 영상의 위치 정보를 산출하는 영상 위치 산출부;
    상기 영상 위치 산출부에 의해 추출된 위치 정보와 매칭되는 히스토리 영상 중 사용자 단말로부터 요청된 히스토리 영상을 추출하는 히스토리 영상 추출부;
    실시간으로 촬영하고 있는 드론 촬영 영상을 사용자 단말로 제공하는 실시간 영상 서비스부;
    상기 히스토리 영상 추출부에 의해 추출된 영상을 사용자 단말에 제공하며, 촬영 영상의 위치 정보에 해당하는 증강현실 매칭 데이터를 결합하여 사용자 단말로 제공하는 히스토리 영상 서비스부; 및
    촬영 영상의 특정 위치에서 영상정보에 해당하는 텍스트, 아이콘 형태의 데이터를 추출하여 증강현실 매칭데이터를 표시하며 히스토리 영상 정보별로 특이 사항에 대한 수집된 데이터로 히스토리 증강현실 영상 정보에 매칭 처리하는 증강현실 매칭 데이터 처리부를 포함하는 것을 특징으로 하는 드론을 통한 실시간 영상 제공 시스템.
  6. 제 1 항에 있어서,
    상기 히스토리 영상 데이터베이스에는 영상정보를 등록하여 관리하며, 증강현실 매칭 정보를 등록하고 관리하기 위한 운영자 단말이 연결되는 것을 특징으로 하는 드론을 통한 실시간 영상 제공 시스템.
  7. 사용자 단말이 영상 서비스 서버에 접속하여 영상정보를 요청하는 단계;
    영상 서비스 서버는 사용자의 선택 구간에 대한 실시간 촬영 영상, 관리 정보를 드론 영상 제공부에 요청하면 상기 드론 영상 제공부는 영상 서비스 서버로 사용자가 선택한 구간의 실시간 촬영 영상과 촬영 드론 위치, 고도, 진행방향, 속도, 드론 비행각도, 촬영 각도를 포함하는 실시간 위치 정보와 실시간 촬영정보를 제공하는 단계;
    영상 서비스 서버는 히스토리 영상 데이터베이스로부터 히스토리 영상 정보, 증강현실 영상 매칭 데이터를 요청하여 수집하는 단계; 및
    영상 서비스 서버는 실시간 영상의 특정 위치에 대한 해당 지역을 추출하여 그 지역에 해당하는 히스토리 영상 정보를 추출하여 실시간 영상 정보와 히스토리 영상 정보를 함께 제공하고 상기 영상정보들에 증강현실 데이터를 매칭하여 영상 컨텐츠를 사용자 단말로 제공하는 단계를 포함하는 것을 특징으로 하는 드론을 통한 실시간 영상 제공 방법.
KR1020180059933A 2018-05-25 2018-05-25 드론을 통한 실시간 영상 제공 시스템 및 방법 KR102021492B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180059933A KR102021492B1 (ko) 2018-05-25 2018-05-25 드론을 통한 실시간 영상 제공 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180059933A KR102021492B1 (ko) 2018-05-25 2018-05-25 드론을 통한 실시간 영상 제공 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR102021492B1 true KR102021492B1 (ko) 2019-09-16

Family

ID=68067083

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180059933A KR102021492B1 (ko) 2018-05-25 2018-05-25 드론을 통한 실시간 영상 제공 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR102021492B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102420379B1 (ko) * 2021-09-14 2022-07-13 주식회사 오썸피아 기상 환경 기반의 메타버스 서비스 제공 방법
KR102420376B1 (ko) * 2021-05-14 2022-07-13 주식회사 오썸피아 고도별 드론데이터 활용 및 특정 고도에서 체험할수 있는 증강현실 서비스 제공 방법
KR102498572B1 (ko) * 2022-03-28 2023-02-15 (주)군집텍 드론을 활용한 증강현실 기반의 콘텐츠 제공 시스템 및 방법

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR200248581Y1 (ko) * 2001-03-21 2001-10-31 송인식 무인 탐방안내 지리정보 단말기
KR100868174B1 (ko) * 2006-11-02 2008-11-12 주식회사 케이티 맵 기반 동영상 분류 및 검색 시스템 그리고 그 방법.
KR101224734B1 (ko) * 2006-12-31 2013-01-21 주식회사 포스코아이씨티 위치기반 컨텐츠 서비스를 제공하기 위한 컨텐츠 서버 및 그 서비스 방법
KR20150077607A (ko) * 2013-12-27 2015-07-08 주식회사 윈드밸리 증강현실을 이용한 공룡 유적지 체험 서비스 제공 시스템 및 그 방법
US20150242767A1 (en) * 2014-02-26 2015-08-27 Achillefs Chatzinikos Aerial view, web-based trip planning techniques using geotagged video and images syncd to a map
KR101569454B1 (ko) 2015-05-26 2015-11-17 제주한라대학교산학협력단 무인 비행체를 이용한 비행 체험 시스템 및 방법
KR101606516B1 (ko) * 2015-03-31 2016-03-28 국민대학교산학협력단 무인항공영상을 이용한 수목생장조사 시스템 및 그 방법
US9910866B2 (en) * 2010-06-30 2018-03-06 Nokia Technologies Oy Methods, apparatuses and computer program products for automatically generating suggested information layers in augmented reality

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR200248581Y1 (ko) * 2001-03-21 2001-10-31 송인식 무인 탐방안내 지리정보 단말기
KR100868174B1 (ko) * 2006-11-02 2008-11-12 주식회사 케이티 맵 기반 동영상 분류 및 검색 시스템 그리고 그 방법.
KR101224734B1 (ko) * 2006-12-31 2013-01-21 주식회사 포스코아이씨티 위치기반 컨텐츠 서비스를 제공하기 위한 컨텐츠 서버 및 그 서비스 방법
US9910866B2 (en) * 2010-06-30 2018-03-06 Nokia Technologies Oy Methods, apparatuses and computer program products for automatically generating suggested information layers in augmented reality
KR20150077607A (ko) * 2013-12-27 2015-07-08 주식회사 윈드밸리 증강현실을 이용한 공룡 유적지 체험 서비스 제공 시스템 및 그 방법
US20150242767A1 (en) * 2014-02-26 2015-08-27 Achillefs Chatzinikos Aerial view, web-based trip planning techniques using geotagged video and images syncd to a map
KR101606516B1 (ko) * 2015-03-31 2016-03-28 국민대학교산학협력단 무인항공영상을 이용한 수목생장조사 시스템 및 그 방법
KR101569454B1 (ko) 2015-05-26 2015-11-17 제주한라대학교산학협력단 무인 비행체를 이용한 비행 체험 시스템 및 방법

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102420376B1 (ko) * 2021-05-14 2022-07-13 주식회사 오썸피아 고도별 드론데이터 활용 및 특정 고도에서 체험할수 있는 증강현실 서비스 제공 방법
KR102420379B1 (ko) * 2021-09-14 2022-07-13 주식회사 오썸피아 기상 환경 기반의 메타버스 서비스 제공 방법
KR102498572B1 (ko) * 2022-03-28 2023-02-15 (주)군집텍 드론을 활용한 증강현실 기반의 콘텐츠 제공 시스템 및 방법

Similar Documents

Publication Publication Date Title
US8331611B2 (en) Overlay information over video
KR102021492B1 (ko) 드론을 통한 실시간 영상 제공 시스템 및 방법
EP2625847B1 (en) Network-based real time registered augmented reality for mobile devices
US7359797B2 (en) System and method for displaying images in an online directory
JP6317532B2 (ja) 情報提供システム、情報提供方法、及びプログラム
US20130021475A1 (en) Systems and methods for sensor control
US20120293613A1 (en) System and method for capturing and editing panoramic images
US20070136259A1 (en) System and method for displaying information in response to a request
US20190356936A9 (en) System for georeferenced, geo-oriented realtime video streams
KR102014761B1 (ko) 공간객체 검색결과 정렬 방법, 시스템 및 컴퓨터 독취가능 저장장치
JP2018106696A (ja) 移動オブジェクトの仮想情報構築方法、移動オブジェクトの仮想情報検索方法及びアプリケーションシステム
US20090167786A1 (en) Methods and apparatus for associating image data
EP3299971A1 (en) Method and system for remote management of location-based spatial object
CN106603688A (zh) 访问增强现实用户上下文的方法
CN102831816B (zh) 一种提供实时场景地图的装置
CN106289180A (zh) 运动轨迹的计算方法及装置、终端
US20170244895A1 (en) System and method for automatic remote assembly of partially overlapping images
JP2018106692A (ja) 移動オブジェクト仮想情報遠隔管理方法及び移動オブジェクト仮想情報遠隔管理システム
JP3860945B2 (ja) 撮影指示装置、撮影指示方法及び記録媒体
KR102225116B1 (ko) 네트워크 드론 서비스 시스템 및 방법
CN108391048A (zh) 具有说明功能的数据生成方法及全景拍摄系统
CN108419052A (zh) 一种多台无人机全景成像方法
WO2020095541A1 (ja) 情報処理装置、情報処理方法及びプログラム
CN113329207B (zh) 基于飞行器拍摄的辅助追踪方法、系统和计算机存储介质
CN107909029A (zh) 一种真实场景虚拟化采集方法和电路

Legal Events

Date Code Title Description
GRNT Written decision to grant