KR20160141087A - 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법 - Google Patents

증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법 Download PDF

Info

Publication number
KR20160141087A
KR20160141087A KR1020150074356A KR20150074356A KR20160141087A KR 20160141087 A KR20160141087 A KR 20160141087A KR 1020150074356 A KR1020150074356 A KR 1020150074356A KR 20150074356 A KR20150074356 A KR 20150074356A KR 20160141087 A KR20160141087 A KR 20160141087A
Authority
KR
South Korea
Prior art keywords
portable terminal
image
content providing
panoramic image
augmented reality
Prior art date
Application number
KR1020150074356A
Other languages
English (en)
Inventor
전금수
Original Assignee
주식회사 윈드밸리
동신대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 윈드밸리, 동신대학교산학협력단 filed Critical 주식회사 윈드밸리
Priority to KR1020150074356A priority Critical patent/KR20160141087A/ko
Publication of KR20160141087A publication Critical patent/KR20160141087A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01—Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/02—Details of the space or ground control segments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N5/225—

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Economics (AREA)
  • Computer Hardware Design (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Processing Or Creating Images (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법에 관한 것으로, 본 발명은 촬영지에서 촬영된 영화, 드라마 및 광고 중 적어도 하나를 포함하는 동영상을 저장하는 컨텐츠 제공 서버 및 촬영지에서 파노라마 영상을 촬영하고, 상기 파노라마 영상의 특징점을 추출하고, 현재 위치 정보와 상기 파노라마 영상 및 상기 특징점 정보를 상기 컨텐츠 제공 서버에 통신망을 통해 제공하며, 상기 통신망을 통해 상기 컨텐츠 제공 서버에서 제공된 상기 동영상을 상기 파노라마 영상에 매치하여 증강현실로 표시할 수 있다.

Description

증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법{PROVIDING SYSTEM AND METHOD OF MOVING PICTURE CONTENTS FOR BASED ON AUGMENTED REALITY LOCATION OF MULTIMEDIA BROADCAST SCENE}
본 발명은 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법에 관한 것으로, 특히 증강현실 프로그램을 이용하여 휴대용 단말에서 영상 촬영시 위치 및 특정점 데이터 등을 매치하여 영상 촬영지의 동영상 컨텐츠를 사용자 단말로 제공할 수 있는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법에 관한 것이다.
최근 급속도로 이루어진 스마트폰 보급과 무선통신기술의 발달로 모바일 산업이 급속도로 발달하고 있다.
스마트폰은 데이터 통신을 통해 게임, SNS 등을 수행하는 어플리케이션이 탑재된다.
최근에는 스마트폰에 증강현실을 구현할 수 있는 어플리케이션이 개발되어 많이 사용되고 있다. 증강현실은 이미지나 배경에 이미지를 겹쳐서 하나의 영상으로 보여주는 기술이다.
그러나 종래 증강현실 기술은 사용자가 길거리를 촬영한 이미지에 상점의 정보들을 표시하는데 그치고 있다.(한국공개특허 10-2014-0140442호)
본 발명이 해결하고자 하는 과제는 관광지 또는 영화, 드라마, 광고 등의 촬영지에서 촬영한 동영상을 사용자 요청시 휴대용 단말에 제공하되, 휴대용 단말에서 촬영하는 파노라마 영상에 상기 동영상을 증강현실로 표시할 수 있는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법을 제공하는 데 있다.
상기 과제를 해결하기 위하여, 본 발명은 컨텐츠 제공 서버로부터 동영상을 수신하여 표시부에 증강현실로 표시하는 휴대용 단말을 구비하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템에 있어서, 상기 촬영지에서 촬영된 영화, 드라마 및 광고 중 적어도 하나를 포함하는 상기 동영상을 저장하는 컨텐츠 제공 서버; 및 촬영지에서 파노라마 영상을 촬영하고, 상기 파노라마 영상의 특징점을 추출하고, 현재 위치 정보와 상기 파노라마 영상 및 상기 특징점 정보를 상기 컨텐츠 제공 서버에 통신망을 통해 제공하며, 상기 통신망을 통해 상기 컨텐츠 제공 서버에서 제공된 상기 동영상을 상기 파노라마 영상에 매치하여 증강현실로 표시하는 휴대용 단말을 포함하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템을 제공할 수 있다.
상기 휴대용 단말은 상기 파노라마 영상을 촬영하는 카메라; 상기 현재 위치를 계측하는 GPS 모듈 및 지자기 센서; 상기 파노라마 영상과 상기 동영상을 표시하는 표시부; 및 상기 카메라에서 촬영된 파노라파 영상을 수신하여 상기 특징점을 추출하며, 상기 컨텐츠 서버에서 전송된 상기 멀티미디어 동영상을 상기 파노라마 영상에 매칭하여 상기 표시부에 제공하는 제어부를 포함할 수 있다.
상기 제어부는 상기 카메라에서 촬영된 상기 파노라마 영상, 상기 특징점 정보 및 상기 위치 정보를 상기 통신망에 전송하며, 상기 컨텐츠 서버에서 전송되는 상기 동영상을 수신하는 통신부를 더 포함할 수 있다.
상기 제어부는 상기 파노라마 영상에서 특징점에 대응되는 사각형의 영역을 설정하고, 상기 설정된 영역에 상기 동영상을 매칭할 수 있다.
상기 컨텐츠 제공 서버는 관리자 단말에서 상기 촬영지에서 촬영된 테스트 파노라마 영상을 통해 특징점을 추출하여 저장하며, 상기 휴대용 단말로부터 저장된 동영상 요청이 수신되면, 상기 휴대용 단말에서 전송된 상기 특징점 정보와 저장된 특징점을 대비하여 일치할 경우 저장된 멀티미디어 동영상을 상기 휴대용 단말로 전송할 수 있다.
상기 특징점은 상기 파노라마 영상에서 다리, 도로, 건물 중 어느 하나의 지형적 식별력이 있는 목표물일 수 있다.
또한, 상기 과제를 해결하기 위하여 본 발명은 컨텐츠 제공 서버로부터 촬영지에서 촬영된 영화, 드라마, 광고 중 적어도 하나의 멀티미디어를 휴대용 단말에 제공하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 방법에 있어서, (a) 상기 휴대용 단말에서 상기 촬영지의 파노라마 영상을 촬영하는 단계; (b) 상기 휴대용 단말에서 상기 파노라마 영상이 촬영되는 위치 정보를 검출하는 단계; (c) 상기 휴대용 단말에서 촬영된 파노라마 영상으로부터 특징점 정보를 추출하는 단계; (d) 상기 휴대용 단말에서 파노라마 영상, 특징점 정보 및 위치 정보를 상기 컨텐츠 제공 서버로 전송하는 단계; (e) 상기 컨텐츠 제공 서버에서 전송된 동영상을 수신하는 단계; (f) 상기 휴대용 단말의 파노라마 영상에 상기 컨텐츠 제공 서버에서 전송된 동영상을 매칭하는 단계; 및 (g) 상기 휴대용 단말에서 상기 동영상을 재생하는 단계를 포함하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 방법을 제공할 수 있다.
상기 단계 (d) 이후, 상기 컨텐츠 제공 서버는 미리 저장된 파노라마 영상의 특징점 정보와 상기 휴대용 단말로부터 수신된 특징점 정보를 비교하여, 비교결과 내부에 저장된 특징점 정보와 상기 휴대용 단말로부터 수신된 특징점 정보가 동일할 경우, 특징점 정보에 상응하는 동영상을 검색하는 단계를 더 포함할 수 있다.
상기 특징점 정보는 파노라마 영상에서 다리, 도로, 건물 중 어느 하나의 지형적 식별력이 있는 목표물일 수 있다.
본 발명은 촬영지에서 촬영한 동영상을 휴대용 단말에 증강현실로 표시하여 휴대용 단말 사용자에게 촬영지의 상세한 정보 및 촬영 영상을 제공하여 흥미를 유발할 수 있다.
도 1은 본 발명의 실시 예에 따른 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템을 도시한 시스템도.
도 2는 본 발명의 실시 예에 따른 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템의 휴대용 단말을 도시한 블록도.
도 3은 도 2에 도시된 제어부의 구성을 도시한 블록도.
도 4는 도 3에 도시된 동영상 매칭부를 설명하기 위한 도면.
도 5는 본 발명의 실시 예에 따른 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 방법을 도시한 흐름도.
이하, 도면을 참조한 본 발명의 설명은 특정한 실시 형태에 대해 한정되지 않으며, 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있다. 또한, 이하에서 설명하는 내용은 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
이하의 설명에서 제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용되는 용어로서, 그 자체에 의미가 한정되지 아니하며, 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
본 명세서 전체에 걸쳐 사용되는 동일한 참조번호는 동일한 구성요소를 나타낸다.
본 발명에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 또한, 이하에서 기재되는 "포함하다", "구비하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것으로 해석되어야 하며, 하나 또는 그 이상의 다른 특징들이나, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 본 발명의 실시 예를 첨부한 도 1 내지 도 5를 참조하여 상세히 설명하기로 한다.
도 1은 본 발명의 실시 예에 따른 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템을 도시한 시스템도이다.
도 1을 참조하면, 본 발명의 실시 예에 따른 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템는 휴대용 단말(10), 통신망(30) 및 컨텐츠 제공 서버(20)를 포함할 수 있다.
구체적으로, 휴대용 단말(10)은 어플리케이션이 구동되는 스마트폰 등의 스마트 기기를 포함할 수 있다. 휴대용 단말(10)은 증강현실을 실행하는 어플리케이션이 탑재되거나, 그 내부의 메모리에 증강현실을 수행하는 프로세서가 저장될 수 있다.
휴대용 단말(10)은 내장된 카메라를 이용하여 관광지, 드라마 촬영지 또는 영화 촬영지 등의 특정 위치를 촬영하고, 촬영된 영상의 특정점을 추출한다. 휴대용 단말(10)은 촬영된 영상과 특정점 정보를 위치정보와 함께 통신망(30)을 통해 컨텐츠 제공 서버(20)에 전송한다.
휴대용 단말(10)은 컨텐츠 제공 서버(20)에서 전송된 동영상을 디스플레이된 표시부에 증강하여 매칭한다. 이때, 휴대용 단말(10)은 특징점으로 추출된 부위에 동영상을 매치하여 재생할 수 있도록 한다.
휴대용 단말(10)은 배영 영상 트래킹을 지속적으로 수행하여 휴대용 단말(10)의 표시부에 나타난 영상 위치에 동영상을 매칭하며, 휴대용 단말(10)에서 촬영되는 영상이 바뀔 경우 동영상을 자동으로 멈추게 한다.
컨텐츠 제공 서버(20)는 영화, 드라마 등의 동영상 멀티미디어를 검색하여 저장할 수 있다. 컨텐츠 제공 서버(20)는 동영상 멀티미디어를 저장하는 별도의 데이터 베이스를 구비할 수 있다. 이때, 컨텐츠 제공 서버(20)는 관리자 단말에서 미리 촬영지에서 촬영된 파노라마 영상을 수신하고, 다리, 도로, 건물 등의 지형적 식별력이 있는 목표물을 특징점으로 설정하여 저장한다.
컨텐츠 제공 서버(20)는 휴대용 단말(10)로부터 전송된 파노라마 영상, 특징점 정보 및 위치정보를 수신하고, 수신된 특징점 정보와 저장된 특징점 정보를 비교하여 일치할 경우 멀티미디어 동영상을 검색한다. 컨텐츠 제공 서버(20)는 검색된 멀티미디어 동영상을 촬영지 정보와 함께 휴대용 단말(10)에 전송한다.
상기에서와 같이, 본 발명의 실시 예에 따른 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템은 관람객의 휴대용 단말(10)에서 전송된 파노라마 영상을 컨텐츠 제공 서버(20)에서 수신하고, 수신된 파노라마 영상에 상응하는 동영상을 검색하여 다시 휴대용 단말(10)에 제공한다. 휴대용 단말(10)에서 수신된 동영상은 휴대용 단말(10)의 표시부에 증강되어 표시되고, 영상이 재생된다. 이를 통해, 관람객은 촬영지의 영화, 드라마 등의 주요 장면을 실시간으로 제공받을 수 있다.
이하, 도 2 내지 도 4을 참조하여, 휴대용 단말에서 실행되는 프로세스를 설명하기로 한다.
도 2는 본 발명의 실시 예에 따른 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템의 휴대용 단말을 도시한 블록도이고, 도 3은 도 2에 도시된 제어부의 구성을 도시한 블록도이다.
도 2 및 도 3을 참조하면, 휴대용 단말(10)은 카메라(220), GPS 모듈(230), 지자기 센서(240), 조작부(210), 표시부(250), 저장부(260), 통신부(270) 및 제어부(100)를 포함할 수 있다.
구체적으로, 카메라(220)는 휴대용 단말(10)에 내장된 카메라로 사진 또는 동영상을 촬영할 수 있다. 카메라(220)는 사용자의 선택에 따라 파노라마 영상을 촬영할 수 있다. 카메라(220)는 촬영된 파노라마 영상을 제어부(100)에 전송한다.
GPS 모듈(230)은 휴대용 단말(10)의 현재 위치를 측정한다. GPS 모듈(230)은 카메라(220)에서 파노라마 영상이 촬영되는 동안 GPS 좌표를 측정한다.
지자기 센서(240)는 파노라마 영상이 촬영되는 동안 구동된다. 지자기 센서(240)는 휴대용 단말(10)의 위치를 보정하고, 방향을 탐색할 수 있다.
본 발명의 실시 예에 따르면, GPS 모듈(230) 및 지자기 센서(240)는 위도, 경도, 고도 및 경사에 대한 정보를 제어부(100)에 제공할 수 있다.
저장부(260)는 제어부(100)에서 사용되는 증강현시 프로세서를 저장할 수 있다.
표시부(250)는 통상의 LCD 또는 OLED 등의 디스플레이가 구비된다. 표시부(250)는 휴대용 단말(10)의 각종 어플리케이션을 아이콘으로 표시할 수 있으며, 시간, 베터리 잔량, 수신률 등의 일반적인 스마트폰의 기능들을 표시할 수 있다. 표시부(250)는 파노라마 영상을 표시할 수 있다. 이때, 표시부(250)는 전송된 멀티미디어 동영상을 표시할 수 있다.
조작부(210)는 표시부(250)에 터치센서에 의해 사용자가 조작할 수 있도록 구현된다.
통신부(270)는 통신망(30)과 접속하여 컨텐츠 제공 서버(20)에 정보를 전송하고, 컨텐츠 제공 서버(20)에서 전송되는 정보를 수신할 수 있다. 또한, 통신부(270)는 일반적인 음성 통신 또는 데이터 통신을 수행할 수 있다.
본 발명의 실시 예에 따른 휴대용 단말(10)은 증강현실 어플리케이션이 구동되면, 이에 상응하여 구동부들이 설정된 동작을 수행할 수 있다. 특히, 제어부(100)는 증강현실 기반 멀티미디어 동영상을 표시부(250)에 표시하도록 후술하는 기능들을 수행할 수 있다. 이를 위하여, 제어부(100)는 도 3에 도시된 바와 같이, 영상처리부(110), 위치 정보 검출부(120), 특징점 추출부(130), 동영상 매칭부(140) 및 동영상 재생부(150)를 포함할 수 있다. 이하, 제어부(100)이 설명에서는 증강현실 어플리케이션 구동될 경우 제어부(100)의 기능에 대해 설명하기로 한다.
제어부(100)는 GPS 모듈(230), 지자기 센서(240), 카메라(220), 조작부(210), 표시부(250) 저장부(260) 및 통신부(270)를 제어할 수 있다.
제어부(100)는 카메라(220)에서 입력되는 영상들을 코딩할 수 있다. 영상처리부(110)는 카메라(220)에서 촬영된 동영상 또는 파노라마 영상 등을 설정된 코덱에 맞도록 코딩할 수 있다.
제어부(100)는 영상처리부(110)에서 입력되는 파노라마 영상의 특징점을 추출할 수 있다. 도 3에 도시된 특징점 추출부(130)는 파노라마 영상에서 다리, 도로, 건물 중 어느 하나의 지형적 식별력이 있는 목표물을 추출하여 특징점으로 설정한다.
제어부(100)는 상기 파노라마 영상이 촬영되는 지점의 위치를 측정하기 위하여, 카메라(220)가 동작되면 GPS 모듈(230)과 지자기 센서(240)를 구동시킨다. 위치 정보 검출부(120)는 GPS 모듈(230)과 지자기 센서(240)에서 입력된 좌표 정보를 통해 파노라마 영상이 촬영된 위치를 검출한다. 이때, GPS 모듈(230)과 지자기 센서(240)에서 측정된 위치들을 조합하여 휴대용 단말(10)의 위치를 보정할 수 있다.
제어부(100)는 파노라마 영상, 특징점 정보 및 위치 정보를 통신부(270)에 전송하여 컨텐츠 제공 서버(20)에 전송하도록 한다.
동영상 매칭부(140)는 컨텐츠 제공 서버(20)에서 수신된 동영상을 파노라마 영상 내에 매칭되도록 영역을 설정할 수 있다. 이때, 동영상 매칭부(140)는 도 4에 도시된 사진과 같이, 특징점으로 추출된 4각의 영역에 동영상을 매칭하도록 영역을 설정한다.
동영상 재생부(150)는 매칭된 동영상을 설정 시간이 지난 후 자동으로 재생하도록 하거나, 조작부(210)에서 동영상 재생 요청이 수신되면 해당 동영상을 재생시킨다.
한편, 동영상 재생부(150)는 파노라마 영상이 특징점 위치를 벗어날 경우 해당 동영상의 재생을 중단할 수 있다. 예를 들면, 동영상 재생부(150)는 파노라마 영상에서 특징점이 사라진 경우 동영상 재생을 즉시 중단할 수 있다. 이는 다음 파노라마 영상에서 동영상을 매칭하여 재생하도록 하기 위함이다.
도 5는 본 발명의 실시 예에 따른 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 방법을 순차적으로 도시한 흐름도이다.
도 5를 참조하면, 본 발명의 실시 예에 따른 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 방법은 파노라마 영상 촬영 단계(S100), 위치 정보 검출 단계(S200), 특징점 추출 단계(S300), 파노라마 영상, 특징점 정보 및 위치 정보 전송 단계(S400), 동영상 수신 단계(S500), 동영상 매칭 단계(S600) 및 동영상 재생 단계(S700)를 포함할 수 있다.
먼저, 파노라마 영상 촬영 단계(S100)는 증강현실 어플리케이션이 구동되면 휴대용 단말(10)에서 파노라마 영상을 촬영하기 위한 카메라가 구동된다. 카메라(220)는 촬영된 파노라마 영상을 제어부(100)에 전송한다.
위치 정보 검출 단계(S200)는 파노라마 영상이 촬영되는 위치에서 휴대용 단말(10)의 위치 정보를 검출한다. 제어부(100)는 파노라마 영상이 촬영되거나, 증강현실 어플리케이션이 구동되면, 휴대용 단말(10)의 현재 위치를 검출하도록 GPS 모듈(230) 및 지자기 센서(240)를 구동시킨다.
특징점 추출 단계(S300)는 파노라마 영상에서 특징점을 추출한다. 이때, 특징점은 다리, 도로, 건물 등의 지형적 식별력을 갖는 특징점이 포함될 수 있다.
파노라마 영상, 위치 정보 및 특징점 정보 전송 단계(S400)는 통신부를 통해 파노라마 영상, 위치 정보 및 특징점 정보를 통신망을 이용하여 컨텐츠 제공 서버(20)에 전송한다.
동영상 정보 수신 단계(S500)는 컨텐츠 제공 서버(20)에서 전송되는 동영상을 통신부(270)를 통해 수신한다. 수신된 동영상은 동영상 매칭부(140)에 전달된다.
동영상 매칭 영역 설정 단계(S600)는 수신된 동영상을 파노라마 영상에 매칭한다. 이때, 동영상은 파노라마 영상의 특징점 영역의 4각형 영역을 설정하고, 설정된 영역에 상기 동영상을 매칭하여 표시한다.
동영상 재생 단계(S700)는 표시부(250)에 표시된 동영상을 설정된 시간 또는 사용자의 조작에 의해 재생한다.
이후, 동영상이 모두 재생되면 처음부터 다시 재생되거나, 대기상태가 된다.
한편, 파노라마 영상에서 특징점이 사라질 경우, 즉, 카메라(220)가 다른 영역을 촬영할 경우 재생되고 있는 동영상은 중지된다.
여기서, 컨텐츠 제공 서버(20)는 파노라마 영상, 위치 정보 및 특징점 정보를 수신하면, 그 내부에서 수신된 파노라마 영상의 특징점 정보와 미리 저장된 파노라마 영상의 특징점 정보를 비교한다. 비교결과 컨텐츠 제공 서버(20)는 동일한 특징점이 있을 경우 해당하는 촬영지에서 촬영된 동영상을 검색한다. 검색시 해당 특징점 정보를 포함하는 동영상이 있을 경우, 해당 동영상을 휴대용 단말(10)에 전송한다. 여기서, 컨텐츠 제공 서버(20) 내에 저장된 특징점 정보는 관리자 단말(미도시)에서 미리 촬영지에서 촬영한 파노라마 영상을 통해 추출된 특징점 정보이다.
한편, 컨텐츠 제공 서버(20)는 해당 동영상이 검색되지 않을 경우, 동영상 없음 메시지를 휴대용 단말(10)에 전송한다.
휴대용 단말(10)은 동영상 없음 메시지를 수신하면, 이를 표시부(250)에 표시한다.
상기와 같이, 본 발명의 실시 예에 따른 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법은 촬영지에서 촬영한 동영상을 휴대용 단말에 증강현실로 표시하여 휴대용 단말 사용자에게 촬영지의 상세한 정보 및 촬영 영상을 제공하여 흥미를 유발할 수 있다.
10: 휴대용 단말
20: 컨텐츠 제공 서버
30: 통신망
100: 제어부
110: 영상처리부
120: 위치 정보 검출부
130: 특징점 추출부
140: 동영상 매칭부
150: 동영상 재생부
210: 조작부
220: 카메라
230: GPS 모듈
240: 지자기 센서
250: 표시부
260: 저장부
270: 통신부

Claims (9)

  1. 컨텐츠 제공 서버로부터 동영상을 수신하여 표시부에 증강현실로 표시하는 휴대용 단말을 구비하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템에 있어서,
    상기 촬영지에서 촬영된 영화, 드라마 및 광고 중 적어도 하나를 포함하는 상기 동영상을 저장하는 컨텐츠 제공 서버; 및
    촬영지에서 파노라마 영상을 촬영하고, 상기 파노라마 영상의 특징점을 추출하고, 현재 위치 정보와 상기 파노라마 영상 및 상기 특징점 정보를 상기 컨텐츠 제공 서버에 통신망을 통해 제공하며, 상기 통신망을 통해 상기 컨텐츠 제공 서버에서 제공된 상기 동영상을 상기 파노라마 영상에 매치하여 증강현실로 표시하는 휴대용 단말을 포함하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템.
  2. 제 1 항에 있어서,
    상기 휴대용 단말은
    상기 파노라마 영상을 촬영하는 카메라;
    상기 현재 위치를 계측하는 GPS 모듈 및 지자기 센서;
    상기 파노라마 영상과 상기 동영상을 표시하는 표시부; 및
    상기 카메라에서 촬영된 파노라파 영상을 수신하여 상기 특징점을 추출하며, 상기 컨텐츠 서버에서 전송된 상기 멀티미디어 동영상을 상기 파노라마 영상에 매칭하여 상기 표시부에 제공하는 제어부를 포함하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템.
  3. 제 2 항에 있어서,
    상기 제어부는
    상기 카메라에서 촬영된 상기 파노라마 영상, 상기 특징점 정보 및 상기 위치 정보를 상기 통신망에 전송하며, 상기 컨텐츠 서버에서 전송되는 상기 동영상을 수신하는 통신부를 더 포함하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템.
  4. 제 2 항에 있어서,
    상기 제어부는
    상기 파노라마 영상에서 특징점에 대응되는 사각형의 영역을 설정하고, 상기 설정된 영역에 상기 동영상을 매칭하는 것을 특징으로 하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템.
  5. 제 1 항에 있어서,
    상기 컨텐츠 제공 서버는
    관리자 단말에서 상기 촬영지에서 촬영된 테스트 파노라마 영상을 통해 특징점을 추출하여 저장하며,
    상기 휴대용 단말로부터 저장된 동영상 요청이 수신되면, 상기 휴대용 단말에서 전송된 상기 특징점 정보와 저장된 특징점을 대비하여 일치할 경우 저장된 멀티미디어 동영상을 상기 휴대용 단말로 전송하는 것을 특징으로 하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템.
  6. 제 1 내지 제5 항 중 어느 한 항에 있어서,
    상기 특징점은
    상기 파노라마 영상에서 다리, 도로, 건물 중 어느 하나의 지형적 식별력이 있는 목표물인 것을 특징으로 하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템.
  7. 컨텐츠 제공 서버로부터 촬영지에서 촬영된 영화, 드라마, 광고 중 적어도 하나의 멀티미디어를 휴대용 단말에 제공하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 방법에 있어서,
    (a) 상기 휴대용 단말에서 상기 촬영지의 파노라마 영상을 촬영하는 단계;
    (b) 상기 휴대용 단말에서 상기 파노라마 영상이 촬영되는 위치 정보를 검출하는 단계;
    (c) 상기 휴대용 단말에서 촬영된 파노라마 영상으로부터 특징점 정보를 추출하는 단계;
    (d) 상기 휴대용 단말에서 파노라마 영상, 특징점 정보 및 위치 정보를 상기 컨텐츠 제공 서버로 전송하는 단계;
    (e) 상기 컨텐츠 제공 서버에서 전송된 동영상을 수신하는 단계;
    (f) 상기 휴대용 단말의 파노라마 영상에 상기 컨텐츠 제공 서버에서 전송된 동영상을 매칭하는 단계; 및
    (g) 상기 휴대용 단말에서 상기 동영상을 재생하는 단계를 포함하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 방법.
  8. 제 7 항에 있어서,
    상기 단계 (d) 이후,
    상기 컨텐츠 제공 서버는
    미리 저장된 파노라마 영상의 특징점 정보와 상기 휴대용 단말로부터 수신된 특징점 정보를 비교하여, 비교결과 내부에 저장된 특징점 정보와 상기 휴대용 단말로부터 수신된 특징점 정보가 동일할 경우, 특징점 정보에 상응하는 동영상을 검색하는 단계를 더 포함하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 방법.
  9. 제 7 항에 있어서,
    상기 특징점 정보는 파노라마 영상에서 다리, 도로, 건물 중 어느 하나의 지형적 식별력이 있는 목표물인 것을 특징으로 하는 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 방법.
KR1020150074356A 2015-05-27 2015-05-27 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법 KR20160141087A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150074356A KR20160141087A (ko) 2015-05-27 2015-05-27 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150074356A KR20160141087A (ko) 2015-05-27 2015-05-27 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR20160141087A true KR20160141087A (ko) 2016-12-08

Family

ID=57577006

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150074356A KR20160141087A (ko) 2015-05-27 2015-05-27 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR20160141087A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107864225A (zh) * 2017-12-21 2018-03-30 北京小米移动软件有限公司 基于ar的信息推送方法、装置及电子设备
KR20220064140A (ko) * 2020-11-11 2022-05-18 엔티콘 주식회사 증강현실 기반의 공연 콘텐츠 제공 방법 및 제공장치

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107864225A (zh) * 2017-12-21 2018-03-30 北京小米移动软件有限公司 基于ar的信息推送方法、装置及电子设备
KR20220064140A (ko) * 2020-11-11 2022-05-18 엔티콘 주식회사 증강현실 기반의 공연 콘텐츠 제공 방법 및 제공장치

Similar Documents

Publication Publication Date Title
US9721392B2 (en) Server, client terminal, system, and program for presenting landscapes
US9477687B2 (en) Mobile terminal and metadata setting method thereof
JP5255595B2 (ja) 端末位置特定システム、及び端末位置特定方法
US9699375B2 (en) Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system
CN108921894B (zh) 对象定位方法、装置、设备和计算机可读存储介质
TWI661723B (zh) 攜帶資訊機器及資訊取得系統
US9344841B2 (en) Mobile device and server exchanging information with mobile apparatus
US8174561B2 (en) Device, method and program for creating and displaying composite images generated from images related by capture position
US20110169947A1 (en) Image identification using trajectory-based location determination
WO2009145800A1 (en) Method and apparatus for viewing previously-recorded multimedia content from original perspective
WO2005124594A1 (en) Automatic, real-time, superimposed labeling of points and objects of interest within a view
KR20090019184A (ko) 전자지도에 포함된 이미지 파일을 이용한 이미지 재생장치, 이의 재생 방법 및 상기 방법을 실행하기 위한프로그램을 기록한 기록매체.
EP2887352A1 (en) Video editing
US7643060B2 (en) User guiding apparatus and an image capturing system, method and program for using same
JPH11122638A (ja) 画像処理装置および画像処理方法ならびに画像処理プログラムが記録されたコンピュータ読み取り可能な情報記録媒体
US9635234B2 (en) Server, client terminal, system, and program
KR20160087284A (ko) 영상 처리 장치, 영상 처리 장치가 수행하는 영상 저장 방법 및 영상 검색 방법
JP2010198104A (ja) 映像表示システム、携帯端末システム、携帯端末装置及びサーバ並びにその映像表示方法
KR20160141087A (ko) 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법
CN104871179A (zh) 用于图像捕捉和便于注解的方法和系统
KR20090132485A (ko) 지리정보 확인시스템의 제어방법 및 이동단말기
JP6591594B2 (ja) 情報提供システム、サーバ装置、及び情報提供方法
KR20110095443A (ko) 피사체 정보 제공 방법 및 시스템
KR20120069489A (ko) 화면 영상 내의 목표점 측정 장치 및 그 방법
KR101480300B1 (ko) 메인 스크린과 제2 스크린 간의 상대 위치를 이용한 인터랙티브 콘텐트 제공 시스템 및 그 방법