KR101867594B1 - 다수의 동영상을 이용한 타임랩스 영상 제작 시스템 및 방법 - Google Patents

다수의 동영상을 이용한 타임랩스 영상 제작 시스템 및 방법 Download PDF

Info

Publication number
KR101867594B1
KR101867594B1 KR1020170008371A KR20170008371A KR101867594B1 KR 101867594 B1 KR101867594 B1 KR 101867594B1 KR 1020170008371 A KR1020170008371 A KR 1020170008371A KR 20170008371 A KR20170008371 A KR 20170008371A KR 101867594 B1 KR101867594 B1 KR 101867594B1
Authority
KR
South Korea
Prior art keywords
time
image
lapse
moving
user terminal
Prior art date
Application number
KR1020170008371A
Other languages
English (en)
Inventor
배병민
Original Assignee
(주)글루버
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)글루버 filed Critical (주)글루버
Priority to KR1020170008371A priority Critical patent/KR101867594B1/ko
Application granted granted Critical
Publication of KR101867594B1 publication Critical patent/KR101867594B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • H04N5/232—

Abstract

다수의 동영상을 이용한 타임랩스 영상 제작 시스템 및 방법이 제공된다. 사용자 단말기는 객체에 대한 텍스트 쿼리 기반의 타임랩스 영상 제작을 요청하고, 타임랩스 영상 제작 서버는 요청받은 텍스트 쿼리에 매핑된 인덱스를 확인하고, 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 이용하여 타임랩스 영상을 제작하며, 다수의 동영상들은 서로 다른 위치 및 서로 다른 시간 중 적어도 하나에 따라 촬영된 동영상을 포함한다.

Description

다수의 동영상을 이용한 타임랩스 영상 제작 시스템 및 방법{Time-lapse image production apparatus and method using multiple moving pictures}
본 발명은 다수의 동영상을 이용한 타임랩스 영상 제작 시스템 및 방법에 관한 것으로서, 보다 상세하게는, 다른 장소에서 다른 시간에 촬영된 다수의 동영상들을 이용하여 타임랩스 영상을 제작할 수 있는 다수의 동영상을 이용한 타임랩스 영상 제작 시스템 및 방법에 관한 것이다.
타임랩스 영상이란 동영상 촬영 기법의 하나로 특정 지속 시간 동안 미리 지정해 둔 간격으로 영상을 한 프레임씩 촬영하여 한 순간의 동작처럼 재생되게 하는 특수 영상 기법이다. 타임랩스 영상 제작 방법은 고가의 장비를 통해 촬영을 한 후, 동영상 편집 프로그램을 통해 이루어진다.
이러한 타임랩스 영상은 시각적인 부분에 있어 사용자가 검색 정보를 획득하는 중요한 방법 중 하나로 사용된다. 예를 들어, 특정 랜드마크에 해당하는 시설물의 건설 착공부터 현재까지 변화하는 모습을 확인하고 싶을 경우 정지영상이나 동영상을 활용하는 경우가 많으며, 타임랩스 영상은 이를 보여주는데 좋은 방법 중 하나이다.
그러나, 기존의 타임랩스 영상은 특정 위치에서만 촬영된 영상을 이용하여 제작되는 경우가 대다수이며, 이는 위치기반의 이미지 검색 서비스에서도 마찬가지이다. 즉, 기존의 타임랩스 영상 제공 장치 또는 이미지 기반 검색 장치는 특정 위치에서 촬영된 영상만을 제공하므로, 다양한 위치와 방향에서 촬영된 랜드마크를 제공할 수 없다.
또한, 위치기반의 이미지 검색 서비스들은 대부분 다양한 시간에서 촬영된 이미지를 제공하지 않는다는 점에서 한계를 가지고 있다.
국내 공개특허 제 10-2014-0120971호(2014.09.12. 공개)
전술한 문제점을 해결하기 위하여 본 발명이 이루고자 하는 기술적 과제는, 동일한 위치에서 객체를 촬영한 동영상뿐만 아니라 다수의 위치에서 객체를 촬영한 동영상에서도 객체를 인식하고, 객체에 대한 타임랩스 영상 검색 요청 시 객체 부분의 영상 프레임 또는 동영상을 이용하여 타임랩스 영상을 제작할 수 있는 다수의 동영상을 이용한 타임랩스 영상 제작 시스템 및 방법을 제시하는 데 있다.
본 발명의 해결과제는 이상에서 언급된 것들에 한정되지 않으며, 언급되지 아니한 다른 해결과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
전술한 기술적 과제를 해결하기 위한 수단으로서, 본 발명의 실시 예에 따르면, 다수의 동영상을 이용한 타임랩스 영상 제작 시스템은, 객체에 대한 텍스트 쿼리 기반의 타임랩스 영상 제작을 요청하는 사용자 단말기; 상기 요청받은 텍스트 쿼리에 매핑된 인덱스를 확인하고, 상기 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 이용하여 타임랩스 영상을 제작하는 타임랩스 영상 제작 서버;를 포함하며, 상기 다수의 동영상들은 서로 다른 위치 및 서로 다른 시간 중 적어도 하나에 따라 촬영된 동영상을 포함한다.
타임랩스 영상 제작 서버는, 상기 사용자 단말기로부터 텍스트 쿼리 기반의 타임랩스 영상 제작 요청을 수신하는 서버 통신부; 상기 텍스트 쿼리에 매핑된 인덱스를 확인하고, 상기 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 DB로부터 검색하는 영상 검색부; 및 상기 검색된 동영상들 및 상기 동영상들의 프레임들 중 하나를 이용하여 타임랩스 영상을 제작하는 제작부;를 포함한다.
상기 제작부는, 상기 확인된 인덱스가 부여된 객체가 등장하는 프레임들을 상기 검색된 동영상들로부터 추출하는 영상 추출부; 상기 추출된 프레임들을 촬영 시간 및 촬영 위치를 기준으로 배열하는 영상 배열부; 및 상기 배열된 프레임들 중 일부를 지정된 시간 간격마다 추출하고, 상기 시간 간격마다 추출된 프레임들을 이용하여 타임랩스 영상을 제작하는 타임랩스 영상 제작부;를 포함한다.
상기 제작부는, 상기 확인된 인덱스가 부여된 객체가 등장하는 프레임들 중 대표 프레임을 상기 검색된 동영상들로부터 추출하는 영상 추출부; 상기 추출된 대표 프레임들을 촬영 시간 및 촬영 위치를 기준으로 배열하는 영상 배열부; 및 상기 배열된 대표 프레임들을 이용하여 타임랩스 영상을 제작하는 타임랩스 영상 제작부;를 포함한다.
상기 제작부는, 상기 영상 검색부에서 검색된 동영상들을 촬영 시간 및 촬영 위치를 기준으로 배열하는 영상 배열부; 및 상기 배열된 동영상들을 이용하여 타임랩스 영상을 제작하는 타임랩스 영상 제작부;를 포함한다.
상기 DB는, 서로 다른 시간 및 서로 다른 장소에서 촬영된 다수의 동영상들과, 상기 객체를 의미하는 하나 이상의 텍스트 쿼리와 상기 객체에 부여된 인덱스를 매핑한 제1매핑테이블과, 상기 다수의 동영상들에 등장하는 동일한 객체에 동일하게 부여된 인덱스, 상기 동일한 객체가 등장하는 프레임들(이하, '동일 객체 프레임들'이라 함)의 속성정보, 상기 동일 객체 프레임들 중 대표 프레임의 속성정보 및 해당하는 동영상의 파일명을 매핑한 제2매핑테이블을 저장한다.
상기 영상 검색부는, 상기 수신된 텍스트 쿼리에 매핑된 인덱스를 상기 제1매핑테이블에서 확인하고, 상기 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 상기 제2매핑테이블을 이용하여 상기 DB에서 검색한다.
상기 사용자 단말기는, 동영상 촬영 기간 및 동영상 촬영 위치에 대한 범위를 지정하여 상기 타임랩스 영상 제작을 요청한다.
상기 사용자 단말기는 월단위로 상기 동영상 촬영 기간을 지정하고, 상기 객체의 위치를 중심으로 반경 n미터 이내에서 m미터 간격으로 동영상 촬영 위치를 지정한다.
상기 사용자 단말기로부터 실시간 동영상의 업로딩 요청이 수신되면, 상기 사용자 단말기로부터 지정된 위치에서 설정된 반경 이내에 존재하는 외부 사용자 단말기들에게 상기 실시간 동영상의 업로딩 요청을 전달하는 업로딩 요청 서버;를 더 포함하며, 상기 외부 사용자 단말기들로부터 상기 실시간 동영상이 업로딩되면, 상기 타임랩스 영상 제작 서버는 상기 업로딩된 실시간 동영상을 이용하여 상기 제작된 타임랩스 영상을 편집한다.
상기 사용자 단말기는, 상기 실시간 동영상을 촬영할 특정 날짜 및 시간과, 특정 장소 요청이 가능하며, 상기 업로딩 요청 서버는, 상기 특정 날짜 및 시간에 상기 특정 장소 부근에 위치하는 외부 사용자 단말기들에게 상기 실시간 동영상의 업로딩을 요청한다.
상기 타임랩스 영상 제작 서버는, 상기 업로딩 요청 서버로부터 제공받은 실시간 동영상을 상기 사용자 단말기로 전달하고, 상기 사용자 단말기로부터 상기 실시간 동영상의 사용이 결정되면, 상기 결정된 실시간 동영상을 이용하여 상기 제작된 타임랩스 영상을 편집한다.
상기 사용자 단말기는, 사용자로부터 상기 실시간 동영상 중 상기 제작된 타임랩스 영상에 추가하고자 하는 프레임을 적어도 하나 선택받아, 상기 선택된 적어도 하나의 프레임의 정보를 상기 타임랩스 영상 제작 서버로 전달하며, 상기 타임랩스 영상 제작 서버는 상기 선택된 적어도 하나의 프레임을 이용하여 상기 제작된 타임랩스 영상을 편집한다.
한편, 본 발명의 다른 실시 예에 따르면, 다수의 동영상을 이용한 타임랩스 영상 제작 방법은, (A) 사용자 단말기가 객체에 대한 텍스트 쿼리 기반의 타임랩스 영상 제작을 요청하는 단계; 및 (B) 타임랩스 영상 제작 서버에서, 상기 요청받은 텍스트 쿼리에 매핑된 인덱스를 확인하고, 상기 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 이용하여 타임랩스 영상을 제작하는 단계;를 포함하며, 상기 (B) 단계에서 검색된 상기 다수의 동영상들은 서로 다른 위치 및 서로 다른 시간 중 적어도 하나의 조건에 따라 촬영된 동영상을 포함한다.
상기 (B) 단계는, (B1) 상기 타임랩스 영상 제작 서버가 상기 사용자 단말기로부터 텍스트 쿼리 기반의 타임랩스 영상 제작 요청을 수신하는 단계; (B2) 상기 텍스트 쿼리에 매핑된 인덱스를 확인하고, 상기 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 DB로부터 검색하는 단계; 및 (B3) 상기 검색된 동영상들 및 상기 동영상들의 프레임들 중 하나를 이용하여 타임랩스 영상을 제작하는 단계;를 포함한다.
상기 (B3) 단계는, 상기 확인된 인덱스가 부여된 객체가 등장하는 프레임들, 상기 프레임들 중 동영상마다 설정된 대표 프레임들 및 상기 객체가 등장하는 동영상들 중 하나를 추출하는 단계; 및 상기 추출된 하나를 촬영 시간 및 촬영 위치 중 적어도 하나를 기준으로 배열하여 타임랩스 영상을 제작하는 단계;를 포함한다.
(C) 상기 사용자 단말기로부터 실시간 동영상의 업로딩 요청이 수신되는 단계; (D) 업로딩 요청 서버가, 상기 사용자 단말기에서 지정된 위치로부터 설정된 반경 이내에 존재하는 외부 사용자 단말기들에게 상기 실시간 동영상의 업로딩 요청을 전달하는 단계; 및 (E) 상기 외부 사용자 단말기들로부터 상기 실시간 동영상이 업로딩되면, 상기 타임랩스 영상 제작 서버가 상기 업로딩된 실시간 동영상을 이용하여 상기 (B) 단계에서 제작된 타임랩스 영상을 편집하는 단계;를 더 포함한다.
상기 (C) 단계에서, 상기 사용자 단말기는, 상기 실시간 동영상을 촬영할 특정 날짜 및 시간과, 특정 장소를 지정하여 업로딩을 요청하며, 상기 (D) 단계에서, 상기 업로딩 요청 서버는, 상기 특정 날짜 및 시간에 상기 특정 장소 부근에 위치하는 외부 사용자 단말기들에게 상기 실시간 동영상의 업로딩을 요청한다.
상기 (E) 단계는, (E1) 상기 타임랩스 영상 제작 서버가 상기 업로딩 요청 서버로부터 제공받은 실시간 동영상을 상기 사용자 단말기로 전달하는 단계; (E2) 상기 사용자 단말기로부터 상기 실시간 동영상 중 원하는 프레임이 선택되면, 상기 선택된 프레임을 이용하여 상기 (B) 단계에서 제작된 타임랩스 영상을 편집하는 단계;를 포함한다.
본 발명에 따르면, 동일한 위치에서 객체를 촬영한 동영상뿐만 아니라 다수의 위치에서 객체를 촬영한 동영상에서도 객체를 인식하고, 객체에 대한 타임랩스 영상 검색 요청 시 객체 부분의 영상 프레임 또는 동영상을 이용하여 타임랩스 영상을 제작함으로써 다양한 위치 또는 다양한 시간에서 촬영된 정지 영상 또는 동영상을 이용한 타임랩스 영상을 제공할 수 있다.
본 발명의 효과는 이상에서 언급된 것들에 한정되지 않으며, 언급되지 아니한 다른 효과들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 실시 예에 의한 다수의 동영상을 이용한 타임랩스 영상 제작 시스템을 도시한 도면,
도 2는 본 발명의 실시 예에 따른 사용자 단말기에 표시되는 타임랩스 영상 제작 요청 화면의 일 예를 보여주는 도면,
도 3은 본 발명의 실시 예에 따른 타임랩스 영상 제작 서버를 도시한 블록도,
도 4는 DB에 저장된 제1매핑테이블의 일 예를 도시한 도면,
도 5는 제2매핑테이블의 일 예를 도시한 도면,
도 6은 DB에 저장된 동영상들 중 특정 객체에 대한 인덱스가 매핑된 프레임이 서로 다른 복수의 위치에서 검색되는 일 예를 보여주는 도면,
도 7은 본 발명의 실시 예에 따른 업로딩 요청 서버를 도시한 블록도, 그리고,
도 8 및 도 9는 본 발명의 실시 예에 따른 다수의 동영상을 이용한 타임랩스 영상 제작 시스템의 타임랩스 영상 제작 방법을 설명하기 위한 흐름도이다.
이상의 본 발명의 목적들, 다른 목적들, 특징들 및 이점들은 첨부된 도면과 관련된 이하의 바람직한 실시 예들을 통해서 쉽게 이해될 것이다. 그러나 본 발명은 여기서 설명되는 실시 예들에 한정되지 않고 다른 형태로 구체화될 수도 있다.
또한, 어떤 엘리먼트(또는 구성요소)가 구현됨에 있어서 특별한 언급이 없다면, 그 엘리먼트(또는 구성요소)는 소프트웨어 또는 하드웨어 어떤 형태로도 구현될 수 있으며, 프로그램 상에서 동작가능한 것으로 이해되어야 할 것이다.
또한, 본 명세서에서 DB라 함은, 각각의 DB에 대응되는 정보를 저장하는 소프트웨어 및 하드웨어의 기능적 구조적 결합을 의미할 수 있다. DB는 적어도 하나의 테이블로 구현될 수도 있으며, 상기 DB에 저장된 정보를 검색, 저장, 및 관리하기 위한 별도의 DBMS(Database Management System)를 더 포함할 수도 있다. 또한, 링크드 리스트(linked-list), 트리(Tree), 관계형 DB의 형태 등 다양한 방식으로 구현될 수 있으며, 상기 DB에 대응되는 정보를 저장할 수 있는 모든 데이터 저장매체 및 데이터 구조를 포함한다.
이하, 본 발명에서 실시하고자 하는 구체적인 기술내용에 대해 첨부도면을 참조하여 상세하게 설명하기로 한다.
도 1에 도시된 다수의 동영상을 이용한 타임랩스 영상 제작 시스템의 각각의 구성은 기능 및 논리적으로 분리될 수 있음을 나타내는 것이며, 반드시 각각의 구성이 별도의 물리적 장치로 구분되거나 별도의 코드로 작성됨을 의미하는 것은 아닐 수도 있다. 또한, 상기 다수의 동영상을 이용한 타임랩스 영상 제작 시스템은 소정의 데이터 프로세싱 장치에 설치되어 본 발명의 기술적 사상을 구현할 수 있다.
도 1은 본 발명의 실시 예에 의한 다수의 동영상을 이용한 타임랩스 영상 제작 시스템을 도시한 도면이다.
도 1을 참조하면, 본 발명의 실시 예에 의한 다수의 동영상을 이용한 타임랩스 영상 제작 시스템은 사용자 단말기(100), 타임랩스 영상 제작 서버(200), 업로딩 요청 서버(300) 및 외부 사용자 단말기들(410~430)을 포함한다.
사용자 단말기(100)와 외부 사용자 단말기들(410~430)은 타임랩스 영상 제작과 관련된 타임랩스 어플리케이션을 설치하여, 타임랩스 영상 제작 서버(200)에게 타임랩스 영상 제작을 요청하고, 업로딩 요청 서버(300)에게 실시간 동영상의 업로딩 요청을 전송한다.
사용자 단말기(100)는 타임랩스 어플리케이션에서 제공하는 화면(100a)을 통해 객체에 대한 텍스트 쿼리 기반의 타임랩스 영상 제작을 요청한다. 텍스트 쿼리는 물리적인 객체를 기반으로 한 쿼리이며, 이는 특정 위치 정보와 같이 검색이 가능한 쿼리이다. 또한, 텍스트 쿼리는 위치 정보를 기반으로 지도상에서 지정할 수 있는 쿼리도 포함한다.
타임랩스 영상 제작 요청시, 사용자 단말기(100)는 타임랩스 영상에 사용할 동영상의 촬영 기간 및 촬영 위치에 대한 검색 범위를 사용자로부터 지정받아 타임랩스 영상 제작을 요청한다.
도 2는 본 발명의 실시 예에 따른 사용자 단말기(100)에 표시되는 타임랩스 영상 제작 요청 화면(100a)의 일 예를 보여주는 도면이다.
도 2를 참조하면, 타임랩스 영상 제작 요청 화면(100a)은 검색어 지정 영역(10), 날짜 지정 영역(20), 위치 지정 영역(30) 및 우선순위 지정 영역(40)을 포함한다. 사용자는 타임랩스 영상 제작 요청 화면(100a)의 각 영역(10~40)을 통해 타임랩스 영상 제작을 위한 조건을 설정한다.
검색어 지정 영역(10)의 경우, 사용자는 타임랩스 영상을 제작할 대상, 즉, 객체를 검색어 영역(11)에 텍스트 형태로 입력하거나, 지도로 가기(12)를 선택하여 지도상에서 원하는 객체가 위치하는 장소를 지정한다.
예를 들어, 에펠탑이라는 객체를 메인으로 하는 타임랩스 영상을 원하는 경우, 사용자는 검색어 영역(11)에 '에펠탑'을 입력한다. 또는, 지도로 가기(12)를 선택하면, 타임랩스 어플리케이션은 지도를 화면에 표시하며, 사용자는 원하는 객체가 실제로 위치하는 지점을 지도에서 선택한다.
타임랩스 어플리케이션은 검색어 영역(11)에 입력된 검색어 또는 지도에서 선택된 위치를 해당하는 텍스트 쿼리로 변환한다.
날짜 지정 영역(20)의 경우, 사용자는 검색 기간 영역(21)에 타임랩스 영상에 사용할 동영상이 촬영된 날짜(즉, 동영상 촬영 기간)를 지정한다. 날짜, 즉, 동영상 촬영 기간은 월(月) 단위로 지정되거나 일(日) 단위로 지정될 수 있다. 예를 들어, 사용자가 검색 기간 영역(21)에 2015년 1월부터 2016년 12월까지를 검색 기간으로 입력하면, 타임랩스 영상 제작 서버(200)는 2015년 1월부터 2016년 12월 사이에 촬영된 동영상들 중 검색 조건에 부합하는 동영상들을 검색한다.
위치 지정 영역(30)의 경우, 사용자는 객체의 실제 위치를 중심으로 반경 최대 n미터 이내에서 m미터 간격으로 객체를 촬영한 동영상 촬영 위치를 지정할 수 있다. 예를 들어, '반경 500m'를 선택하면, 타임랩스 영상 제작 서버(200)는 객체를 중심으로 반경 500m 이내에서 객체를 촬영한 다수의 동영상들 중 검색 조건에 부합하는 동영상들을 검색한다.
사용자가 '지도에서 직접 지정'을 선택하면, 타임랩스 어플리케이션은 객체를 포함한 주변 지도를 표시하고, 사용자는 표시된 지도에서 하나 이상의 촬영 위치를 직접 선택하거나, 지도를 참조하여 촬영 반경을 입력한다.
촬영 반경은 객체를 중심으로 한 반경을 의미한다. 예를 들어, 최대 n미터는 500m이고, m미터 간격은 10m인 경우, 사용자는 10m 단위로 촬영 위치(또는 촬영 반경)를 지정할 수 있다.
우선순위 지정 영역(40)의 경우, 타임랩스 영상 제작 서버(200)에서 다수의 동영상들이 검색된 경우, 사용자는 이를 촬영 시간을 우선으로 하여 제작할지 또는 촬영 위치를 우선으로 하여 제작할지 지정한다.
사용자가 우선순위 지정 영역(40)에서 촬영 시간을 선택하는 경우, 타임랩스 영상 제작 서버(200)는 객체를 포함하되 도 2를 통해 지정된 조건에 부합하는 영상들을 촬영된 순서대로 배열하여 타임랩스 영상을 제작한다.
또한, 사용자가 촬영 위치를 선택하는 경우, 타임랩스 어플리케이션은 우선순위를 지정받기 위한 객체 중심의 지도를 표시하고, 사용자는 지도상에서 원하는 위치를 하나 이상 정하거나, 또는 하나의 위치를 지정한 후 시계방향(또는 반시계방향)으로 이동하면서 제작하도록 요청할 수도 있다. 사용자가 지도상에서 원하는 위치를 두 개 이상 정한 경우, 타임랩스 영상 제작 서버(200)는 먼저 지정된 위치에서 추출된 다수의 동영상(또는 프레임들)을 촬영 시간 순서로 배열하고, 다음 위치에서 추출된 다수의 동영상(또는 프레임들)을 촬영 시간 순서로 배열한다.
이와 같이 도 2의 타임랩스 영상 제작 요청 화면(100a)을 통해 지정된 조건들은 타임랩스 영상 제작 서버(200)로 전송된다.
다시 도 1을 참조하면, 타임랩스 영상 제작 서버(200)는 서로 다른 시간 또는 서로 다른 장소에서 촬영된 다수의 동영상들을 이용하여 타임랩스 영상을 제작한다. 타임랩스 영상 제작 서버(200)는 사용자 단말기(100)로부터 요청받은 텍스트 쿼리에 매핑된 인덱스를 확인하고, 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 이용하여 타임랩스 영상을 제작한다.
한편, 타임랩스 영상 제작 서버(200)에서 제작된 타임랩스 영상에 객체의 현재 모습에 대한 영상을 추가하고 싶은 경우, 사용자는 타임랩스 어플리케이션을 통해 실시간 동영상을 이용한 타임랩스 영상의 편집을 요청할 수 있다. 이하에서는 이러한 요청을 '실시간 동영상의 업로딩 요청'이라 한다.
이를 위해, 사용자 단말기(100)는 실시간 동영상의 업로딩 요청을 업로딩 요청 서버(300)에게 전달한다. 업로딩 요청 서버(300)는 사용자 단말기(100)에서 지정된 위치로부터 설정된 반경 이내에 존재하는 외부 사용자 단말기들(410~430)에게 실시간 동영상의 업로딩 요청을 전달한다.
외부 사용자 단말기들(410~430)로부터 실시간 동영상이 업로딩되면, 업로딩 요청 서버(300)는 실시간 동영상들을 프레임 단위의 객체 별로 인덱싱한 후 타임랩스 영상 제작 서버(200)로 전달한다.
타임랩스 영상 제작 서버(200)는 업로딩 요청 서버(300)로부터 업로딩된 실시간 동영상들 중 적어도 하나를 이용하여, 이전에 제작된 타임랩스 영상을 편집한다.
이하에서는 도 3 내지 도 5를 참조하여 타임랩스 영상 제작 서버(200)와 업로딩 요청 서버(300)를 자세히 설명한다.
도 3은 본 발명의 실시 예에 따른 타임랩스 영상 제작 서버(200)를 도시한 블록도이다.
도 3을 참조하면, 타임랩스 영상 제작 서버(200)는 서버 통신부(210), 데이터베이스(DB: Database)(220), 영상 검색부(230), 제작부(240) 및 서버 제어부(250)를 포함한다.
서버 통신부(210)는 사용자 단말기(100)로부터 텍스트 쿼리 기반의 타임랩스 영상 제작 요청을 수신한다. 타임랩스 영상 제작 요청은 도 2를 참조하여 사용자가 지정한 다수의 조건을 포함한다.
DB(220)는 특정 랜드마크나 특정 객체를 포함하는 다수의 동영상들을 각 동영상의 촬영 날짜 및 촬영 장소와 함께 저장한다. 다수의 동영상들은 예를 들어, SNS(Social Network Service)를 통해 공유가능한 동영상들이며, 동일한 객체에 대해서도 서로 다른 시간 및 서로 다른 장소에서 촬영된 동영상들을 포함한다.
또한, DB(220)는 제1매핑테이블과 제2매핑테이블을 저장하며, 이는 새로운 동영상이 DB(220)에 저장되고, 각 동영상에 포함된 객체에 대해 인덱싱이 완료되면 업데이트된다.
도 4는 제1매핑테이블의 일 예를 도시한 도면, 도 5는 제2매핑테이블의 일 예를 도시한 도면이다.
도 4를 참조하면, 제1매핑테이블은 객체를 의미하는 하나 이상의 텍스트 쿼리와 객체에 부여된 인덱스를 매핑한 테이블이다. 텍스트 쿼리는 사용자 단말기(100)에서 입력가능한 검색어들을 의미하는 것으로서, '에펠탑', 'Eiffel Tower'로 입력되거나 지도에서 에펠탑이 선택되는 경우, 모두 동일한 인덱스 'A1'이 부여된다.
도 5를 참조하면, 제2매핑테이블은 다수의 동영상들에 등장하는 동일한 객체에 동일하게 부여된 인덱스, 다수의 동영상들에서 동일한 객체가 등장하는 프레임들(이하, '동일 객체 프레임들'이라 함)의 정보, 동일 객체 프레임들 중 대표 프레임의 정보 및 이에 해당하는 동영상의 파일명을 매핑한 테이블이다.
도 5에서, '프레임 정보'는 객체가 등장한 프레임들의 위치를 의미하는 식별정보와, 프레임들이 촬영된 시간과 촬영된 위치 정보를 포함하는 속성정보를 포함한다. 대표 프레임은 객체가 등장하는 프레임들 중 객체를 가장 정확히 표현한 것으로 판별된 프레임으로서 인덱싱 단계에서 서버(200) 관리자에 의해 또는 인덱싱 프로그램에 의해 지정된다. 예를 들어, 'f1'은 'aa.mp4'라는 동영상 파일 중 첫번째 프레임을 의미하며, 에펠탑은 프레임 f10~f20까지 등장한다. 프레임 f10~f20 중 대표 프레임은 12번째 프레임인 f12로 지정되어 있다.
한편, 각 동영상의 프레임마다 등장하는 객체를 확인하고, 동일한 객체에 동일한 인덱스를 부여하는 인덱싱 방법은 주지된 다양한 알고리즘들 중 하나를 이용할 수 있으며, 새로운 동영상이 업로딩될 때마다 수행되고, 이로써 제1매핑테이블과 제2매핑테이블도 업데이트된다.
다시 도 3을 참조하면, 영상 검색부(230)는 사용자 단말기(100)로부터 요청받은 텍스트 쿼리에 매핑된 인덱스를 제1매핑테이블에서 확인하고, 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 제2매핑테이블을 이용하여 DB(220)에서 검색한다.
도 6은 DB(220)에 저장된 동영상들 중 특정 객체에 대한 인덱스가 매핑된 프레임이 서로 다른 복수의 위치에서 검색되는 일 예를 보여주는 도면이다.
도 6을 참조하면, DB(220)는 복수의 위치에서 촬영된 동영상 속 객체를 인덱스 별로 저장하고, 영상 검색부(230)는 동일한 인덱스가 부여된 프레임(즉, 동일한 객체를 촬영한 프레임)을 서로 다른 위치와 서로 다른 시간에 촬영된 동영상 내에서 검색함을 알 수 있다.
그리고, 영상 검색부(230)는 검색된 다수의 동영상들 중 사용자 단말기(100)에서 지정된 촬영 위치(또는 촬영 반경 내)에서 검색 기간 동안 촬영된 동영상의 파일명(또는 파일명을 포함하는 식별정보) 리스트를 제작부(240)에게 전달한다.
제작부(240)는 영상 검색부(230)에서 검색된 동영상들 및 동영상들의 프레임들 중 하나를 이용하여 타임랩스 영상을 제작한다. 제작부(240)는 제1모드 내지 제3모드 중 하나로 타임랩스 영상을 제작하며, 모드는 사용자 단말기(100)의 사용자 어플리케이션을 통해 사용자가 선택한다.
이를 위하여, 제작부(240)는 영상 추출부(242), 영상 배열부(244) 및 타임랩스 영상 제작부(246)를 포함한다.
먼저, 각 동영상 중 동일한 객체를 포함하는 프레임들을 이용하여 타임랩스 영상을 제작하는 제1모드에 대해 설명한다.
제1모드로 동작하는 경우, 영상 추출부(242)는 확인된 인덱스가 부여된 객체가 등장하는 프레임들을, 검색된 다수의 동영상들로부터 추출한다. 자세히 설명하면, 영상 추출부(242)는 영상 검색부(230)로부터 전달받은 리스트로부터 동영상들을 확인하고, 확인된 각 파일명에 매핑된 인덱스들 중 텍스트 쿼리에 해당하는 인덱스가 매핑된 프레임들을 제2매핑테이블에서 확인한다. 그리고, 영상 추출부(242)는 확인된 프레임들의 식별정보를 이용하여 각 동영상으로부터 해당하는 프레임들을 추출한다.
영상 배열부(244)는 각 동영상 별로 추출된 프레임들을 프레임 정보를 이용하여 촬영 시간 및 촬영 위치 중 설정된 우선순위를 기준으로 배열한다.
타임랩스 영상 제작부(246)는 우선순위에 따라 배열된 프레임들을 이용하여 타임랩스 영상을 제작한다. 예를 들어, 타임랩스 영상 제작부(246)는 배열된 프레임들 중 일부를 지정된 시간 간격마다 추출하고, 시간 간격마다 추출된 프레임들을 이용하여 타임랩스 영상을 제작한다. 타임랩스 영상 제작부(246)는 각 프레임마다 프레임 정보를 추가기재한다.
다음, 각 동영상 별로 동일한 객체를 포함하는 프레임들 중 대표 프레임을 이용하여 타임랩스 영상을 제작하는 제2모드에 대해 설명한다.
영상 추출부(242)는 확인된 인덱스가 부여된 객체가 등장하는 프레임들 중 대표 프레임을 제2매핑테이블에서 확인하고, 확인된 대표 프레임들을 영상 검색부(230)에서 검색된 동영상마다 하나씩 추출한다.
영상 배열부(244)는 각 동영상 별로 추출된 대표 프레임들을 촬영 시간 및 촬영 위치 중 설정된 우선순위를 기준으로 배열한다.
타임랩스 영상 제작부(246)는 배열된 대표 프레임들을 이용하여 타임랩스 영상을 제작한다.
다음, 동일한 객체를 촬영한 다수의 동영상들 모두를 이용하여 타임랩스 영상을 제작하는 제3모드에 대해 설명한다.
영상 배열부(244)는 영상 검색부(230)에서 검색된 다수의 동영상들을 촬영 시간 및 촬영 위치 중 설정된 우선순위를 기준으로 배열한다. 예를 들어, 영상 배열부(244)는 검색된 다수의 동영상들의 촬영 시작 시간을 기준으로 배열하거나, 각 동영상에서 객체가 처음 등장하는 시간을 기준으로 동영상들을 배열한다.
타임랩스 영상 제작부(246)는 배열된 동영상들을 이용하여 타임랩스 영상을 제작한다.
상술한 제1 내지 제3모드에는 포함되지 않았으나, 제작부(220)는 각 동영상마다 객체가 처음 등장하는 프레임부터 마지막으로 등장하는 프레임까지 그 사이에 있는 프레임들을 이용하여 타임랩스 영상을 제작할 수도 있다. 즉, 본 발명의 실시 예에 따르면 다른 시간에 다른 장소에서 촬영한 동영상들을 다양한 검색 조건에 따라 추출 및 배열하여 타임랩스 영상을 제작하는 것이 가능하다.
한편, 영상 검색부(230)는 사용자 단말기(100)에서 지정된 촬영 위치와는 다를지라도, 동일한 인덱스가 부여된 객체를 촬영한 동영상들 모두에 대한 리스트를 제작부(240)로 전달할 수도 있다. 영상 추출부(242)는 리스트를 참조하여 텍스트 쿼리 기반의 인덱스가 등장하는 시점부터 퇴장하는 시점까지의 프레임들을 제1매핑테이블과 제2매핑테이블을 이용하여 각 동영상에서 추출한다. 영상 배열부(244)는 추출된 프레임들을 우선순위에 입각하여 배열하되, 사용자 단말기(100)에서 사용자로부터 지정받은 촬영 위치(또는 촬영 반경)에 속하는 프레임들만을 제2매핑테이블로부터 확인하고, 이를 이용하여 배열할 수도 있다.
서버 제어부(250)는 서버 통신부(210), DB(220), 영상 검색부(230) 및 제작부(240)와 통신가능하게 연결되어 전반적인 동작을 제어 및/또는 관리한다.
서버 제어부(250)는 SNS를 통해 공유가 가능한 신규 동영상이 업로딩되면, 신규 동영상을 프레임 단위로 분석하여 등장하는 객체를 확인하고, 확인된 객체마다 기존의 인덱스 또는 새로운 인덱스를 부여하고, 이를 이용하여 제1매핑테이블과 제2매핑테이블을 업데이트한다.
또한, 서버 제어부(250)는 사용자 단말기(100)로부터 텍스트 쿼리 기반의 타임랩스 영상 제작 요청이 수신되면, 텍스트 쿼리에 해당하는 인덱스를 확인하고, 확인된 인덱스가 부여된 객체를 촬영한 동영상들을 이용하여 타임랩스 영상을 제작하도록 영상 검색부(230) 및 제작부(240)를 제어한다.
또한, 서버 제어부(250)는 제작된 타임랩스 영상을 사용자 단말기(100)로 전송하여 컨펌을 받도록 한다.
사용자 단말기(100)가 타임랩스 영상을 타임랩스 영상 제작 서버(200)로부터 수신하면, 타임랩스 어플리케이션은 타임랩스 영상을 재생한다. 이 때, 타임랩스 어플리케이션은 지도를 타임랩스 영상과 함께 표시하고, 타임랩스 영상의 프레임마다 기재된 프레임 정보로부터 각 프레임의 촬영 시간과 촬영 위치를 확인하고, 확인된 정보를 지도상에 표시할 수 있다. 이로써, 사용자는 단순히 제작된 타임랩스 영상을 확인하는 것뿐만 아니라, 타임랩스 영상을 이루는 프레임들(또는 동영상들)이 언제 어디서 촬영된 것인지 확인할 수 있다.
한편, 타임랩스 영상 제작 서버(200)로부터 제공받은 타임랩스 영상에 대해 실시간 동영상의 업로딩을 요청하고자 하는 경우, 사용자는 실시간 동영상을 촬영할 특정 날짜 및 시간과, 특정 장소를 검색어로 직접 입력하거나 지도상 위치 정보를 이용하여 추가로 요청할 수 있다. 사용자 단말기(100)는 실시간 동영상의 촬영 시간과 촬영 장소에 대한 정보와 함께 실시간 동영상의 업로딩 요청을 업로딩 요청 서버(300)로 전송한다.
도 7은 본 발명의 실시 예에 따른 업로딩 요청 서버(300)를 도시한 블록도이다.
도 7을 참조하면, 업로딩 요청 서버(300)는 업로딩 통신부(310), 요청 조건 저장부(320), 단말기 선택부(330), 동영상 선별부(340), 인덱싱부(350) 및 업로딩 제어부(360)를 포함한다.
업로딩 통신부(310)는 사용자 단말기(100)로부터 실시간 동영상의 업로딩 요청을 수신한다.
요청 조건 저장부(320)는 사용자가 사용자 단말기(100)에서 지정한 실시간 동영상의 촬영 조건, 즉, 촬영할 특정 날짜 및 시간과 특정 장소에 대한 정보를 저장한다.
단말기 선택부(330)는 현재 시간과 사용자가 지정한 특정 날짜 및 시간의 차이가 사전에 설정된 차이값에 도달하면, 특정 장소 부근에 위치하는 외부 사용자 단말기들(410~430)을 통신을 통해 확인한다.
예를 들어, 사용자가 세종대왕 동상이라는 객체로부터 반경 100m를 특정 장소로 지정한 경우, 단말기 선택부(330)는 세종대왕 동상으로부터 반경 100m에 위치하는 외부 사용자 단말기들을 확인하고, 이 중 설정된 개수의 외부 사용자 단말기들(410~430)을 선택한다. 또는, 단말기 선택부(330)는 사용자가 지정한 객체로부터 반경 100m를 기준으로 다시 반경 50m 이내에 위치하고 있는 외부 사용자 단말기들 중 하나 이상을 선택할 수도 있다. 이러한 선택 기준은 다양한 옵션 중 하나에 해당하므로 특정 수치에 한정되지 않는다.
그리고, 업로딩 통신부(310)는 단말기 선택부(330)에서 선택된 외부 사용자 단말기들(즉, 타 사용자들)(410~430)에게 객체를 촬영한 후 실시간 동영상으로 업로딩해 줄 것을 요청하고, 이를 승낙한 외부 사용자 단말기들(410~430)로부터 실시간 동영상을 업로딩받는다.
동영상 선별부(340)는 외부 사용자 단말기들(410~430)로부터 업로딩된 실시간 동영상들 중 사용자 요청에 가장 부합하다고 판단되는 실시간 동영상들을 선별한다.
인덱싱부(350)는 선별된 실시간 동영상들만을 또는 업로딩된 모든 실시간 동영상들을 분석하여 객체를 포함하는 프레임마다 인덱싱 작업을 수행한다.
그리고, 업로딩 통신부(310)는 선별된 실시간 동영상들을 포함하는 모든 실시간 동영상들과, 인덱싱 작업 결과를 타임랩스 제작 서버(200)로 전송한다.
타임랩스 제작 서버(200)는 사용자 단말기(100)에게 선별된 실시간 동영상들을 전송한다. 사용자는 타임랩스 어플리케이션에 의해 사용자 단말기(100)에서 재생되는 실시간 동영상들을 확인하고, 이전에 제작된 타임랩스 영상에 추가할 실시간 동영상을 하나 이상 결정한다.
이 때, 사용자는 편집에 사용하기로 결정한 하나 이상의 실시간 동영상 중 이미 제작된 타임랩스 영상에 추가하고자 하는 프레임을 적어도 하나 선택할 수도 있다.
제작부(240)는 사용자가 결정한 하나 이상의 실시간 동영상을 이용하여, 제1 내지 제3모드 중 하나에 따라 이전에 제작된 타임랩스 영상을 편집한다. 사용자가 직접 프레임을 선택한 경우, 제작부(240)는 선택된 프레임을 이용하여 타임랩스 영상을 편집할 수도 있음은 물론이다. 타임랩스 영상을 실시간 동영상을 이용하여 편집하는 서비스도 제1매핑테이블 및 제2매핑테이블을 이용하며, 이는 위에서 자세히 기재하였으므로 상세한 설명은 생략한다.
또한, 사용자 단말기(100)는 과거의 동영상에 대한 실시간 업로딩을 업로딩 요청 서버(300)에게 요청할 수도 있다. 예를 들어, 이전에 제작된 타임랩스 영상이 2015년 1월부터 2016년 12월까지 매월 단위로 업로드된 롯데 타워를 촬영한 영상으로 제작되었으며, 이 중 2016년 3월에 촬영된 영상이 없는 경우, 사용자는 업로딩 요청 서버(300)에게 2016년 3월에 롯데 타워를 촬영한 영상을 요청할 수도 있다. 이러한 경우, 업로딩 요청 서버(300)는 회원가입자들에게 이에 해당하는 영상의 업로딩을 요청하고, 업로딩되면, 타임랩스 영상 제작 서버(200)는 사용자의 요청에 의해 이전에 제작된 타임랩스 영상을 편집할 수 있다.
도 8 및 도 9는 본 발명의 실시 예에 따른 다수의 동영상을 이용한 타임랩스 영상 제작 시스템의 타임랩스 영상 제작 방법을 설명하기 위한 흐름도이다.
도 8 및 도 9의 타임랩스 영상 제작 방법을 위한 타임랩스 영상 제작 시스템은 도 1 내지 도 6을 참조하여 설명한 시스템일 수 있다. 따라서, 도 8 및 도 9의 타임랩스 영상 제작 방법의 구체적인 설명은 생략한다.
먼저, 도 8을 참조하면, 사용자 단말기(100)는 타임랩스 어플리케이션에서 제공하는 도 2와 같은 화면(100a)을 통해 타임랩스 영상 제작을 위한 조건을 설정한다(S810). 타임랩스 영상 제작을 위한 조건은 검색어 입력, 촬영 날짜와 시간 지정, 촬영 위치 지정 및 우선순위 지정과 제1 내지 제3모드 중 하나에 대한 선택정보 등을 포함한다.
사용자 단말기(100)는 사용자로부터 입력받은 검색어 또는 지도에서 선택받은 위치를 텍스트 쿼리로 변환하고, S810단계에서 설정된 조건과 함께 타임랩스 영상 제작 서버(200)로 전송하여 타임랩스 영상의 제작을 요청한다(S820).
타임랩스 영상 제작 서버(200)는 수신된 텍스트 쿼리에 매핑된 인덱스를 제1매핑테이블에서 확인한다(S830).
그리고, 타임랩스 영상 제작 서버(200)는 확인된 인덱스가 부여된 객체를 촬영한 동영상들을 제2매핑테이블에서 검색하고, S810단계에서 지정된 촬영 위치 또는 검색 기간에 해당하는 동영상을 검색하여 리스트를 작성한다(S840).
타임랩스 영상 제작 서버(200)는 S840단계에서 검색된 다수의 동영상들 또는 다수의 동영상들 별로 객체가 포함된 프레임들 또는 다수의 동영상들 별로 대표프레임을 DB에서 추출한다(S850). S850단계에서 동영상 또는 프레임은 S810단계에서 사용자가 지정한 제1 모드 내지 제3모드에 따라 적응적으로 추출된다.
타임랩스 영상 제작 서버(200)는 S850단계에서 추출된 다수의 동영상들 또는 다수의 프레임들 또는 다수의 대표 프레임들을 사용자가 지정한 우선순위에 기초하여 배열한다(S860).
타임랩스 영상 제작 서버(200)는 S890단계에서 배열된 동영상들 또는 프레임들 또는 대표 프레임들을 이용하여 타임랩스 영상을 제작하고(S870), 제작된 타임랩스 영상을 사용자 단말기(100)로 전송한다(S880).
도 9는 본 발명의 실시 예에 따른 타임랩스 영상 제작 방법 중 업로딩 요청에 의한 타임랩스 영상 편집을 설명하기 위한 흐름도이다.
도 9를 참조하면, 사용자 단말기(100)는 S880단계에서 전송받은 타임랩스 영상을 재생 및 표시한다(S905).
사용자는 재생중인 타임랩스 영상에 대한 실시간 동영상 업로딩을 요청할 수 있다. 이를 위해, 사용자는 실시간 동영상을 촬영할 특정 날짜 및 시간과, 특정 장소를 지정하여 업로딩 요청 조건, 즉, 실시간 동영상의 촬영 조건을 설정한다(S910).
사용자 단말기(100)는 S910단계에서 설정된 업로딩 요청 조건을 업로딩 요청 서버(300)로 전송하여 실시간 동영상 업로딩을 요청한다(S915).
업로딩 요청 서버(300)는 수신된 업로딩 요청 조건을 저장한다(S920).
업로딩 요청 서버(300)는 현재 시간과 사용자가 지정한 특정 날짜 및 시간의 차이가 사전에 설정된 차이값에 도달하면, 특정 장소 부근에 위치하는 외부 사용자 단말기들(410~430)을 선택한다(S925).
업로딩 요청 서버(300)는 선택된 외부 사용자 단말기들(410~430)에게 객체를 촬영한 실시간 동영상을 업로딩해 줄 것을 요청한다(S930).
업로딩 요청 서버(300)는 실시간 동영상 업로딩 요청을 승낙한 외부 사용자 단말기들(410~430)로부터 실시간 동영상이 업로딩되면, 각 프레임의 객체 별로 인덱싱 작업을 수행한다(S935).
그리고, 업로딩 요청 서버(300)는 S935단계에서 업로딩된 모든 실시간 동영상들 중 사용자 단말기(100)로 전송할 하나 이상의 실시간 동영상들을 선별한다(S940).
업로딩 요청 서버(300)는 선별된 하나 이상의 실시간 동영상의 정보와, 업로딩된 모든 실시간 동영상들과, 인덱싱 결과를 타임랩스 영상 제작 서버(200)로 전송한다(S945).
타임랩스 영상 제작 서버(200)는 수신된 모든 실시간 동영상들을 DB에 저장하고, 인덱싱 결과를 이용하여 제1매핑테이블과 제2매핑테이블을 업데이트한다(S950).
그리고, 타임랩스 영상 제작 서버(200)는 S940단계에서 선별된 하나 이상의 실시간 동영상을 사용자 단말기(100)로 전송한다(S955).
사용자 단말기(100)는 S955단계에서 수신한 하나 이상의 실시간 동영상을 표시하고, 사용자로부터 타임랩스 영상 편집에 사용할 실시간 동영상을 하나 이상 결정받는다(S960). S960단계에서, 사용자는 실시간 동영상 중 실제로 사용할 프레임들 또는 대표 프레임을 결정할 수도 있다.
사용자 단말기(100)는 S960단계에서 결정된 실시간 동영상의 정보 또는 실제로 사용할 프레임에 대한 정보를 타임랩스 영상 제작 서버(200)로 전송한다(S965).
타임랩스 영상 제작 서버(200)는 S965단계에서 수신한 정보를 이용하여 S870단계에서 제작된 타임랩스 영상을 편집한다(S970). S970단계에서, 타임랩스 영상 제작 서버(200)는 S810단계에서 설정된 우선순위를 참조하여 타임랩스 영상을 편집할 수 있다.
한편 본 발명에 따른 다수의 동영상을 이용한 타임랩스 영상 제작 시스템의 타임랩스 영상 제작 방법을 구현하기 위하여 상기 다수의 동영상을 이용한 타임랩스 영상 제작 시스템을 제어하는 컴퓨터 상에서 수행되는 컴퓨터 판독 가능한 기록매체에 저장된 프로그램을 함께 제공한다.
100: 사용자 단말기 200: 타임랩스 영상 제작 서버
300: 업로딩 요청 서버 410~430: 외부 사용자 단말기들

Claims (18)

  1. 객체에 대한 텍스트 쿼리 기반의 타임랩스 영상 제작을 요청하고, 제작된 타임랩스 영상을 지도와 함께 표시하되, 상기 타임랩스 영상의 프레임마다 기재된 프레임 정보로부터 각 프레임의 촬영 위치를 확인하고, 상기 확인된 촬영 위치를 상기 지도에 표시하는 사용자 단말기;
    상기 요청받은 텍스트 쿼리에 매핑된 인덱스를 확인하고, 상기 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 이용하여 타임랩스 영상을 제작하고, 상기 제작된 타임랩스 영상을 상기 사용자 단말기로 제공하는 타임랩스 영상 제작 서버;를 포함하며,
    상기 타임랩스 영상 제작 서버는,
    서로 다른 시간 및 서로 다른 장소에서 촬영된 다수의 동영상들과, 상기 객체를 의미하는 하나 이상의 텍스트 쿼리와 상기 객체에 부여된 인덱스를 매핑한 제1매핑테이블과, 상기 다수의 동영상들에 등장하는 동일한 객체에 동일하게 부여된 인덱스, 상기 다수의 동영상들 각각에 대해 상기 동일한 객체가 등장하는 프레임들(이하, '동일 객체 프레임들'이라 함)의 속성정보, 상기 동일 객체 프레임들 중 대표 프레임의 속성정보 및 해당하는 동영상의 파일명을 매핑한 제2매핑테이블을 저장하는 DB;
    상기 사용자 단말기로부터 텍스트 쿼리 기반의 타임랩스 영상 제작 요청을 수신하는 서버 통신부;
    상기 텍스트 쿼리에 매핑된 인덱스를 확인하고, 상기 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 DB로부터 검색하는 영상 검색부;
    상기 검색된 동영상들 및 상기 동영상들의 프레임들 중 하나를 이용하여 타임랩스 영상을 제작하는 제작부; 및
    신규 동영상이 업로딩되면, 상기 신규 동영상의 프레임마다 등장하는 객체를 확인하고, 상기 확인된 객체가 상기 제2매핑테이블의 객체와 동일하면 동일한 인덱스를 부여하고, 상기 확인된 객체가 상기 제2매핑테이블에 미존재하면 새로운 인덱스를 부여한 후 상기 제1매핑테이블과 제2매핑테이블을 업데이트하는 서버 제어부;를 포함하며,
    상기 DB에 저장되는 다수의 동영상들은 특정 랜드마크 및/또는 특정 객체를 포함하고, SNS(Social Network Service)를 통해 공유가능하며, 동일한 객체에 대해서도 서로 다른 시간 및 서로 다른 장소에서 촬영된 동영상들을 포함하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 시스템.
  2. 삭제
  3. 제1항에 있어서,
    상기 제작부는,
    상기 확인된 인덱스가 부여된 객체가 등장하는 프레임들을 상기 검색된 동영상들로부터 추출하는 영상 추출부;
    상기 추출된 프레임들을 촬영 시간 및 촬영 위치를 기준으로 배열하는 영상 배열부; 및
    상기 배열된 프레임들 중 일부를 지정된 시간 간격마다 추출하고, 상기 시간 간격마다 추출된 프레임들을 이용하여 타임랩스 영상을 제작하는 타임랩스 영상 제작부;를 포함하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 시스템.
  4. 제1항에 있어서,
    상기 제작부는,
    상기 확인된 인덱스가 부여된 객체가 등장하는 프레임들 중 대표 프레임을 상기 검색된 동영상들로부터 추출하는 영상 추출부;
    상기 추출된 대표 프레임들을 촬영 시간 및 촬영 위치를 기준으로 배열하는 영상 배열부; 및
    상기 배열된 대표 프레임들을 이용하여 타임랩스 영상을 제작하는 타임랩스 영상 제작부;를 포함하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 시스템.
  5. 제1항에 있어서,
    상기 제작부는,
    상기 영상 검색부에서 검색된 동영상들을 촬영 시간 및 촬영 위치를 기준으로 배열하는 영상 배열부; 및
    상기 배열된 동영상들을 이용하여 타임랩스 영상을 제작하는 타임랩스 영상 제작부;를 포함하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 시스템.
  6. 삭제
  7. 제1항에 있어서,
    상기 영상 검색부는,
    상기 수신된 텍스트 쿼리에 매핑된 인덱스를 상기 제1매핑테이블에서 확인하고, 상기 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 상기 제2매핑테이블을 이용하여 상기 DB에서 검색하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 시스템.
  8. 제1항에 있어서,
    상기 사용자 단말기로부터 실시간 동영상의 업로딩 요청이 수신되면, 상기 사용자 단말기로부터 지정된 위치에서 설정된 반경 이내에 존재하는 외부 사용자 단말기들에게 상기 실시간 동영상의 업로딩 요청을 전달하는 업로딩 요청 서버;를 더 포함하며,
    상기 외부 사용자 단말기들로부터 상기 실시간 동영상이 업로딩되면, 상기 타임랩스 영상 제작 서버는 상기 업로딩된 실시간 동영상을 이용하여 상기 제작된 타임랩스 영상을 편집하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 시스템.
  9. 제8항에 있어서,
    상기 사용자 단말기는,
    상기 실시간 동영상을 촬영할 특정 날짜 및 시간과, 특정 장소 요청이 가능하며,
    상기 업로딩 요청 서버는,
    상기 특정 날짜 및 시간에 상기 특정 장소 부근에 위치하는 외부 사용자 단말기들에게 상기 실시간 동영상의 업로딩을 요청하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 시스템.
  10. 제1항에 있어서,
    상기 사용자 단말기는,
    동영상 촬영 기간 및 동영상 촬영 위치에 대한 검색 범위를 지정하여 상기 타임랩스 영상 제작을 요청하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 시스템.
  11. 제1항에 있어서,
    상기 사용자 단말기는,
    타임랩스 영상 제작 요청 화면에서 객체에 대한 검색어를 텍스트 형태로 입력받거나 지도상에서 상기 객체가 위치하는 장소를 선택받아 상기 텍스트 쿼리로 변환하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 시스템.
  12. (A) 사용자 단말기가 객체에 대한 텍스트 쿼리 기반의 타임랩스 영상 제작을 요청하는 단계;
    (B) 타임랩스 영상 제작 서버에서, 상기 요청받은 텍스트 쿼리에 매핑된 인덱스를 확인하고, 상기 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 이용하여 타임랩스 영상을 제작하고, 상기 제작된 타임랩스 영상을 상기 사용자 단말기로 제공하는 단계; 및
    (C) 상기 사용자 단말기가 상기 타임랩스 영상을 지도와 함께 표시하되, 상기 타임랩스 영상의 프레임마다 기재된 프레임 정보로부터 각 프레임의 촬영 위치를 확인하고, 상기 확인된 촬영 위치를 상기 지도에 표시하는 단계;를 포함하고,
    상기 (B) 단계는,
    (B1) 상기 타임랩스 영상 제작 서버가 상기 사용자 단말기로부터 텍스트 쿼리 기반의 타임랩스 영상 제작 요청을 수신하는 단계;
    (B2) 상기 텍스트 쿼리에 매핑된 인덱스를 확인하고, 상기 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 DB로부터 검색하는 단계;
    (B3) 상기 검색된 동영상들 및 상기 동영상들의 프레임들 중 하나를 이용하여 타임랩스 영상을 제작하는 단계; 및
    (B4) 상기 제작된 타임랩스 영상을 상기 사용자 단말기로 제공하는 단계;를 포함하고,
    상기 DB는 서로 다른 시간 및 서로 다른 장소에서 촬영된 다수의 동영상들과, 상기 객체를 의미하는 하나 이상의 텍스트 쿼리와 상기 객체에 부여된 인덱스를 매핑한 제1매핑테이블과, 상기 다수의 동영상들에 등장하는 동일한 객체에 동일하게 부여된 인덱스, 상기 다수의 동영상들 각각에 대해 상기 동일한 객체가 등장하는 프레임들(이하, '동일 객체 프레임들'이라 함)의 속성정보, 상기 동일 객체 프레임들 중 대표 프레임의 속성정보 및 해당하는 동영상의 파일명을 매핑한 제2매핑테이블을 저장하고,
    상기 DB에 저장되는 다수의 동영상들은 특정 랜드마크 및/또는 특정 객체를 포함하고, SNS(Social Network Service)를 통해 공유가능하며, 동일한 객체에 대해서도 서로 다른 시간 및 서로 다른 장소에서 촬영된 동영상들을 포함하며,
    상기 타임랩스 영상 제작 서버는 신규 동영상이 업로딩되면, 상기 신규 동영상의 프레임마다 등장하는 객체를 확인하고, 상기 확인된 객체가 상기 제2매핑테이블의 객체와 동일하면 동일한 인덱스를 부여하고, 상기 확인된 객체가 상기 제2매핑테이블에 미존재하면 새로운 인덱스를 부여한 후 상기 제1매핑테이블과 제2매핑테이블을 업데이트하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 방법.
  13. 삭제
  14. 제12항에 있어서,
    상기 (B3) 단계는,
    상기 확인된 인덱스가 부여된 객체가 등장하는 프레임들, 상기 프레임들 중 동영상마다 설정된 대표 프레임들 및 상기 객체가 등장하는 동영상들 중 하나를 추출하는 단계; 및
    상기 추출된 하나를 촬영 시간 및 촬영 위치 중 적어도 하나를 기준으로 배열하여 타임랩스 영상을 제작하는 단계;를 포함하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 방법.
  15. 삭제
  16. 제12항에 있어서,
    상기 (B2) 단계는,
    상기 수신된 텍스트 쿼리에 매핑된 인덱스를 상기 제1매핑테이블에서 확인하고, 상기 확인된 인덱스가 부여된 객체를 촬영한 다수의 동영상들을 상기 제2매핑테이블을 이용하여 상기 DB에서 검색하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 방법.
  17. 제12항에 있어서,
    (D) 상기 사용자 단말기로부터 실시간 동영상의 업로딩 요청이 수신되는 단계;
    (E) 업로딩 요청 서버가, 상기 사용자 단말기에서 지정된 위치로부터 설정된 반경 이내에 존재하는 외부 사용자 단말기들에게 상기 실시간 동영상의 업로딩 요청을 전달하는 단계; 및
    (E) 상기 외부 사용자 단말기들로부터 상기 실시간 동영상이 업로딩되면, 상기 타임랩스 영상 제작 서버가 상기 업로딩된 실시간 동영상을 이용하여 상기 (B) 단계에서 제작된 타임랩스 영상을 편집하는 단계;를 더 포함하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 방법.
  18. 제17항에 있어서,
    상기 (D) 단계에서,
    상기 사용자 단말기는, 상기 실시간 동영상을 촬영할 특정 날짜 및 시간과, 특정 장소를 지정하여 업로딩을 요청하며,
    상기 (E) 단계에서,
    상기 업로딩 요청 서버는, 상기 특정 날짜 및 시간에 상기 특정 장소 부근에 위치하는 외부 사용자 단말기들에게 상기 실시간 동영상의 업로딩을 요청하는 것을 특징으로 하는 다수의 동영상을 이용한 타임랩스 영상 제작 방법.
KR1020170008371A 2017-01-18 2017-01-18 다수의 동영상을 이용한 타임랩스 영상 제작 시스템 및 방법 KR101867594B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170008371A KR101867594B1 (ko) 2017-01-18 2017-01-18 다수의 동영상을 이용한 타임랩스 영상 제작 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170008371A KR101867594B1 (ko) 2017-01-18 2017-01-18 다수의 동영상을 이용한 타임랩스 영상 제작 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR101867594B1 true KR101867594B1 (ko) 2018-06-15

Family

ID=62628718

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170008371A KR101867594B1 (ko) 2017-01-18 2017-01-18 다수의 동영상을 이용한 타임랩스 영상 제작 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR101867594B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021066254A1 (ko) * 2019-10-04 2021-04-08 주식회사 비지트 파노라믹 영상 컨텐츠 제작 시스템 및 방법
KR20210040758A (ko) * 2019-10-04 2021-04-14 주식회사 비지트 파노라믹 영상 컨텐츠 제작 시스템 및 방법
WO2023075188A1 (ko) * 2021-10-28 2023-05-04 세종대학교산학협력단 숏폼 콘텐츠를 위한 객체 기반 다중 미디어 구성 방법 및 이를 이용하는 장치
US11871114B2 (en) 2019-10-04 2024-01-09 Visit Inc. System and method for producing panoramic image content

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110068587A (ko) * 2009-12-16 2011-06-22 인하대학교 산학협력단 위치 정보를 포함하는 영상을 대상으로 한 내용기반 검색 서비스 방법
KR20140098959A (ko) * 2013-01-31 2014-08-11 한국전자통신연구원 증거 영상 생성 장치 및 방법
KR20140120971A (ko) 2013-04-03 2014-10-15 에스케이플래닛 주식회사 광고서비스시스템 및 그 방법, 그리고 이에 적용되는 장치
KR20150053162A (ko) * 2013-11-07 2015-05-15 삼성테크윈 주식회사 검색 시스템 및 영상 검색 방법
KR20150090999A (ko) * 2014-01-30 2015-08-07 가시오게산키 가부시키가이샤 타임 랩스 동영상을 생성하는 화상 처리 장치, 화상 처리 방법 및 기록 매체

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110068587A (ko) * 2009-12-16 2011-06-22 인하대학교 산학협력단 위치 정보를 포함하는 영상을 대상으로 한 내용기반 검색 서비스 방법
KR20140098959A (ko) * 2013-01-31 2014-08-11 한국전자통신연구원 증거 영상 생성 장치 및 방법
KR20140120971A (ko) 2013-04-03 2014-10-15 에스케이플래닛 주식회사 광고서비스시스템 및 그 방법, 그리고 이에 적용되는 장치
KR20150053162A (ko) * 2013-11-07 2015-05-15 삼성테크윈 주식회사 검색 시스템 및 영상 검색 방법
KR20150090999A (ko) * 2014-01-30 2015-08-07 가시오게산키 가부시키가이샤 타임 랩스 동영상을 생성하는 화상 처리 장치, 화상 처리 방법 및 기록 매체

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021066254A1 (ko) * 2019-10-04 2021-04-08 주식회사 비지트 파노라믹 영상 컨텐츠 제작 시스템 및 방법
KR20210040758A (ko) * 2019-10-04 2021-04-14 주식회사 비지트 파노라믹 영상 컨텐츠 제작 시스템 및 방법
KR102272757B1 (ko) * 2019-10-04 2021-07-05 주식회사 비지트 파노라믹 영상 컨텐츠 제작 시스템 및 방법
US11871114B2 (en) 2019-10-04 2024-01-09 Visit Inc. System and method for producing panoramic image content
WO2023075188A1 (ko) * 2021-10-28 2023-05-04 세종대학교산학협력단 숏폼 콘텐츠를 위한 객체 기반 다중 미디어 구성 방법 및 이를 이용하는 장치

Similar Documents

Publication Publication Date Title
US10096341B2 (en) Media identifier generation for camera-captured media
KR101867594B1 (ko) 다수의 동영상을 이용한 타임랩스 영상 제작 시스템 및 방법
US9619489B2 (en) View of a physical space augmented with social media content originating from a geo-location of the physical space
JP4810420B2 (ja) 画像処理装置及び画像処理方法、サーバ及びその制御方法、プログラム並びに記憶媒体
KR20130085942A (ko) 정보 처리 장치, 정보 처리 시스템, 및 프로그램
CN105159958A (zh) 一种基于移动终端的图片信息处理的方法及系统
JP5072464B2 (ja) 画像提供装置、画像提供方法、画像提供プログラムおよびそのプログラムを記録したコンピュータ読み取り可能な記録媒体
KR101038940B1 (ko) 촬영영상에서 추출된 촬영객체를 이용한 영상정보 관리 시스템 및 그 방법
JP2019016862A (ja) 情報処理装置、情報処理システム、情報処理装置の制御方法及びプログラム
CN105979403A (zh) 一种自动选择视频资源的标识版本的方法及装置
US10885095B2 (en) Personalized criteria-based media organization
JP2007318688A (ja) 映像情報交換方法、サーバ装置、及びクライアント装置
JP2022500802A (ja) 領域ベースのメタデータ索引付けを用いる画像管理
KR20000040270A (ko) 전자지도상에서의 사용자 레이어 관리 장치 및 그 방법
JP2007310610A (ja) 衛星画像処理システム
JP5999232B2 (ja) ファイル管理装置、ファイル管理システム、制御方法、プログラム
JP7389955B2 (ja) 情報処理装置、情報処理方法及びプログラム
CN109523941B (zh) 基于云识别技术的室内伴随导游方法及装置
JP2012244343A (ja) マルチ映像再生装置及びマルチ映像再生方法
US11605054B2 (en) System and method for recognizing environment and/or location using object identification techniques
KR102027297B1 (ko) 장면 기반 동영상 네비게이션 장치
KR102445296B1 (ko) 드론 영상 관리 시스템
CN110708574B (zh) 用于发布信息的方法和设备
CN109246389A (zh) 一种关联监控点的方法和设备
WO2021152837A1 (ja) 情報処理装置、情報処理方法及び記録媒体

Legal Events

Date Code Title Description
GRNT Written decision to grant