KR101934799B1 - 파노라마 영상을 이용하여 새로운 컨텐츠를 생성하는 방법 및 시스템 - Google Patents

Abstract

파노라마 영상을 이용하여 새로운 컨텐츠를 생성하는 방법 및 시스템이 개시된다. 영상 컨텐츠 생성 방법은, 파노라마 형태로 제작된 제1 영상 컨텐츠를 화면 상에 출력하는 단계; 및 상기 제1 영상 컨텐츠에서 적어도 일부의 파노라마 영상을 캡쳐함으로써 파노라마 형태의 제2 영상 컨텐츠를 생성하는 단계를 포함할 수 있다.

Description

파노라마 영상을 이용하여 새로운 컨텐츠를 생성하는 방법 및 시스템{METHOD AND SYSTEM FOR GENERATING CONTENT USING PANORAMIC IMAGE}

아래의 설명은 파노라마 영상을 생성하기 위한 기술에 관한 것이다.

VR(virtual reality, 가상 현실)에 대한 관심이 높아짐에 따라 VR 컨텐츠에 대한 관심 또한 높아지고 있다. 예컨대, 한국공개특허공보 제10-2002-0078141호(공개일 2002년 10월 18일)에는 다수의 비디오 카메라를 이용하여 오브젝트 동영상을 획득하고 이를 네트워크 및 로컬을 통해 실시간으로 뷰어를 통해 디스플레이 할 수 있도록 하는 동영상 가상현실 이미지 제작시스템 및 방법이 개시되어 있다.

최근 사용자가 직접 360도로 사진이나 동영상을 촬영할 수 있는 카메라 디바이스가 나오고 있다. 360도 카메라의 주요 기능은 360도의 화각을 촬영할 수 있는 여러 개의 렌즈로 동시 촬영하여 해당 사진/영상을 스티칭 하여 출력하는 것이며, 이러한 360도 카메라는 주로 여행, 이벤트 등의 특정 시공간을 생생하게 포착하고 재현하는데 주로 사용된다.

그러나, 360도 카메라는 현재 보편적으로 보급되지 않은 상태이며, 캡쳐 디바이스인 360도 카메라는 물론 여러 소스에서 획득한 영상을 스티칭할 수 있는 소프트웨어 또한 고가에 유료로 판매되고 있어 일반 사용자가 사용하기 쉽지 않다.

반면, 거리의 실사 사진을 파노라마 형태로 제공하는 거리뷰(street view) 서비스에는 이미 다양한 지역의 거리 사진이 360도 파노라마로 제공되고 있다. 현재 거리뷰는 대부분 길 찾기의 보조 수단으로 사용되고 있으며, 단순 탐색이나 열람의 대상으로 사용되고 있다.

거리뷰의 데이터는 단순 정보뿐만 아니라, 유명한 여행지와 명소, 랜드마크, 자연 경관과 다양한 POI 사진들이 포함되어 있어 사용자에게 가상 여행의 체험을 제공할 수 있다. 거리뷰 촬영 특성상 촬영 시점의 재미있는 이벤트 또는 계절이나 시간의 흐름에 따른 해당 지역의 변화 등 다양한 정보가 담겨 있으며, 이러한 점 때문에 거리뷰를 이용하여 고향, 모교 등 개인적인 추억이 담긴 지역을 찾는 사용자들도 다수 존재한다.

그러나, 사용자는 거리뷰 서비스를 통해 특정 지역을 탐색한 후 해당 지역의 생생한 모습을 남겨두고 싶지만, 현재 별도의 캡쳐나 저장 방법이 제공되고 있지 않아 매번 해당 지역을 탐색 후 열람해야 하는 등 불편한 방식이 사용되고 있다.

기 확보된 파노라마 영상을 이용하여 새로운 영상 컨텐츠를 생성할 수 있는 방법 및 시스템을 제공한다.

파노라마 형태로 제작된 영상 컨텐츠에서 사용자가 원하는 지점에 대해 해당 컨텐츠를 캡쳐하고 가공할 수 있는 방법 및 시스템을 제공한다.

컴퓨터로 구현되는 영상 컨텐츠 생성 시스템이 수행하는 영상 컨텐츠 생성 방법에 있어서, 파노라마 형태로 제작된 제1 영상 컨텐츠를 화면 상에 출력하는 단계; 및 상기 제1 영상 컨텐츠에서 적어도 일부의 파노라마 영상을 캡쳐함으로써 파노라마 형태의 제2 영상 컨텐츠를 생성하는 단계를 포함하고, 상기 출력하는 단계는, 상기 제1 영상 컨텐츠를 이용하여 VR(Virtual Reality) 탐사 환경을 제공하고, 상기 생성하는 단계는, 상기 VR 탐사 환경에서 사용자가 원하는 지점으로서 상기 제1 영상 컨텐츠에서 선택된 지점 각각을 중심점으로 하여 상기 중심점을 기준으로 해당 컨텐츠를 360도로 캡쳐하여 상기 제2 영상 컨텐츠를 360도 파노라마 영상으로 생성하는 것을 특징으로 하는 영상 컨텐츠 생성 방법을 제공한다.

일 측면에 따르면, 상기 생성하는 단계는, 상기 제1 영상 컨텐츠에서 선택된 구간에 대한 히스토리를 저장하여 동영상 포맷의 제2 영상 컨텐츠를 생성할 수 있다.

다른 측면에 따르면, 상기 생성하는 단계는, 상기 제1 영상 컨텐츠에서 선택된 지점의 로테이션에 대한 히스토리를 저장하여 동영상 포맷의 제2 영상 컨텐츠를 생성할 수 있다.

또 다른 측면에 따르면, 상기 영상 컨텐츠 생성 방법은, 상기 제2 영상 컨텐츠에 다른 영상을 합성하는 단계를 더 포함할 수 있다.

또 다른 측면에 따르면, 상기 영상 컨텐츠 생성 방법은, 상기 제2 영상 컨텐츠에 필터 효과를 적용하거나 그래픽 요소를 추가하는 단계를 더 포함할 수 있다.

또 다른 측면에 따르면, 상기 영상 컨텐츠 생성 방법은, 상기 제2 영상 컨텐츠에 위치 정보, 시간 정보, 날씨 정보, 사용자 정보 중 적어도 하나의 메타 정보를 태깅하는 단계를 더 포함할 수 있다.

또 다른 측면에 따르면, 상기 영상 컨텐츠 생성 방법은, 상기 제2 영상 컨텐츠를 타인과 공유하는 단계를 더 포함할 수 있다.

또 다른 측면에 따르면, 상기 공유하는 단계는, 영상을 파노라마 형태로 렌더링 하는 뷰어를 제공하는 서비스를 통해 상기 제2 영상 컨텐츠를 공유할 수 있다.

상기 영상 컨텐츠 생성 방법을 컴퓨터에 실행시키기 위한 프로그램이 기록되어 있는 것을 특징으로 하는 비-일시적인 컴퓨터 판독 가능한 기록 매체를 제공한다.

컴퓨터로 구현되는 영상 컨텐츠 생성 시스템에 있어서, 파노라마 형태로 제작된 제1 영상 컨텐츠를 화면 상에 출력하도록 상기 영상 컨텐츠 생성 시스템을 제어하는 영상 출력 제어부; 및 상기 제1 영상 컨텐츠에서 적어도 일부의 파노라마 영상을 캡쳐함으로써 파노라마 형태의 제2 영상 컨텐츠를 생성하는 컨텐츠 생성부를 포함하고, 상기 영상 출력 제어부는, 상기 제1 영상 컨텐츠를 이용하여 VR 탐사 환경을 제공하고, 상기 컨텐츠 생성부는, 상기 VR 탐사 환경에서 사용자가 원하는 지점으로서 상기 제1 영상 컨텐츠에서 선택된 지점 각각을 중심점으로 하여 상기 중심점을 기준으로 해당 컨텐츠를 360도로 캡쳐하여 상기 제2 영상 컨텐츠를 360도 파노라마 영상으로 생성하는 것을 특징으로 하는 영상 컨텐츠 생성 시스템을 제공한다.

본 발명의 실시예들에 따르면, 기 확보된 파노라마 영상을 이용하여 새로운 영상 컨텐츠를 생성할 수 있다.

본 발명의 실시예들에 따르면, 파노라마 형태로 제작된 영상 컨텐츠에서 사용자가 원하는 지점에 대해 해당 컨텐츠를 캡쳐하여 가공함으로써 가상의 360도 포토그래피나 영상 촬영이 가능하며 이를 통해 별도의 360도 카메라나 관련 소프트웨어 없이도 파노라마 영상을 생성할 수 있다.

본 발명의 실시예들에 따르면, 파노라마 영상 기반의 가상 탐사 환경에서 사용자가 원하는 장면들을 중심으로 정지영상이나 동영상의 형식으로 새로운 파노라마 영상을 생성하여 이를 UGC(user generated content)로서 유통하거나 공유할 수 있다.

도 1은 본 발명의 일 실시예에 있어서 컴퓨터 시스템의 내부 구성의 일례를 설명하기 위한 블록도이다.
도 2는 본 발명의 일 실시예에 따른 컴퓨터 시스템의 프로세서가 포함할 수 있는 구성요소의 예를 도시한 도면이다.
도 3은 본 발명의 일 실시예에 따른 컴퓨터 시스템이 수행할 수 있는 영상 컨텐츠 생성 방법의 예를 도시한 순서도이다.
도 4는 본 발명의 일 실시예에 있어서 영상 컨텐츠 생성 과정의 예시를 도시한 것이다.
도 5 내지 도 6은 본 발명의 일 실시예에 있어서 영상 컨텐츠 생성을 위한 사용자 인터페이스 화면의 예시를 도시한 것이다.
도 7 내지 도 8은 본 발명의 일 실시예에 있어서 영상 컨텐츠 편집 화면의 예시를 도시한 것이다.

이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.

본 발명의 실시예들은 정지영상이나 동영상 등의 영상 컨텐츠를 생성하기 위한 기술에 관한 것으로, 더욱 상세하게는 기 확보된 파노라마 영상을 이용하여 새로운 파노라마 영상을 생성할 수 있는 방법 및 시스템에 관한 것이다.

본 명세서에서 구체적으로 개시되는 것들을 포함하는 실시예들은 전용 디바이스 없이 파노라마 영상의 생성을 달성할 수 있고 이를 통해 비용 절감, 효율성, 편의성, 다양성 등의 측면에 있어서 상당한 장점들을 달성한다.

본 명세서에서 파노라마 영상은 3D 영상, 다시점 영상(예컨대, 360도 영상 등), VR 영상 등을 포함하며, 방송 서비스, 거리뷰 서비스, VR 환경 등에서 제공되는 파노라마 형태의 모든 영상 컨텐츠를 포괄하여 의미할 수 있다.

도 1은 본 발명의 일 실시예에 있어서 컴퓨터 시스템의 내부 구성의 일례를 설명하기 위한 블록도이다. 예를 들어, 본 발명의 실시예들에 따른 영상 컨텐츠 생성 시스템이 도 1의 컴퓨터 시스템(100)을 통해 구현될 수 있다. 도 1에 도시한 바와 같이, 컴퓨터 시스템(100)은 영상 컨텐츠 생성 방법을 실행하기 위한 구성요소로서 프로세서(110), 메모리(120), 영구 저장 장치(130), 버스(140), 입출력 인터페이스(150) 및 네트워크 인터페이스(160)를 포함할 수 있다.

프로세서(110)는 명령어들의 시퀀스를 처리할 수 있는 임의의 장치를 포함하거나 그의 일부일 수 있다. 프로세서(110)는 예를 들어 컴퓨터 프로세서, 이동 장치 또는 다른 전자 장치 내의 프로세서 및/또는 디지털 프로세서를 포함할 수 있다. 프로세서(110)는 예를 들어, 서버 컴퓨팅 디바이스, 서버 컴퓨터, 일련의 서버 컴퓨터들, 서버 팜, 클라우드 컴퓨터, 컨텐츠 플랫폼, 이동 컴퓨팅 장치, 스마트폰, 태블릿, 셋톱 박스, 미디어 플레이어 등에 포함될 수 있다. 프로세서(110)는 버스(140)를 통해 메모리(120)에 접속될 수 있다.

메모리(120)는 컴퓨터 시스템(100)에 의해 사용되거나 그에 의해 출력되는 정보를 저장하기 위한 휘발성 메모리, 영구, 가상 또는 기타 메모리를 포함할 수 있다. 메모리(120)는 예를 들어 랜덤 액세스 메모리(RAM: random access memory) 및/또는 동적 RAM(DRAM: dynamic RAM)을 포함할 수 있다. 메모리(120)는 컴퓨터 시스템(100)의 상태 정보와 같은 임의의 정보를 저장하는 데 사용될 수 있다. 메모리(120)는 예를 들어 영상 컨텐츠 생성을 위한 명령어들을 포함하는 컴퓨터 시스템(100)의 명령어들을 저장하는 데에도 사용될 수 있다. 컴퓨터 시스템(100)은 필요에 따라 또는 적절한 경우에 하나 이상의 프로세서(110)를 포함할 수 있다.

버스(140)는 컴퓨터 시스템(100)의 다양한 컴포넌트들 사이의 상호작용을 가능하게 하는 통신 기반 구조를 포함할 수 있다. 버스(140)는 컴퓨터 시스템(100)의 컴포넌트들 사이에, 예를 들어 프로세서(110)와 메모리(120) 사이에 데이터를 운반할 수 있다. 버스(140)는 컴퓨터 시스템(100)의 컴포넌트들 간의 무선 및/또는 유선 통신 매체를 포함할 수 있으며, 병렬, 직렬 또는 다른 토폴로지 배열들을 포함할 수 있다.

영구 저장 장치(130)는 (예를 들어, 메모리(120)에 비해) 소정의 연장된 기간 동안 데이터를 저장하기 위해 컴퓨터 시스템(100)에 의해 사용되는 바와 같은 메모리 또는 다른 영구 저장 장치와 같은 컴포넌트들을 포함할 수 있다. 영구 저장 장치(130)는 컴퓨터 시스템(100) 내의 프로세서(110)에 의해 사용되는 바와 같은 비휘발성 메인 메모리를 포함할 수 있다. 영구 저장 장치(130)는 예를 들어 플래시 메모리, 하드 디스크, 광 디스크 또는 다른 컴퓨터 판독 가능 매체를 포함할 수 있다.

입출력 인터페이스(150)는 키보드, 마우스, 음성 명령 입력, 디스플레이 또는 다른 입력 또는 출력 장치에 대한 인터페이스들을 포함할 수 있다. 구성 명령들 및/또는 영상 컨텐츠 생성과 관련된 입력이 입출력 인터페이스(150)를 통해 수신될 수 있다.

네트워크 인터페이스(160)는 근거리 네트워크 또는 인터넷과 같은 네트워크들에 대한 하나 이상의 인터페이스를 포함할 수 있다. 네트워크 인터페이스(160)는 유선 또는 무선 접속들에 대한 인터페이스들을 포함할 수 있다. 구성 명령들은 네트워크 인터페이스(160)를 통해 수신될 수 있다. 그리고, 영상 컨텐츠들은 네트워크 인터페이스(160)를 통해 수신 또는 송신될 수 있으며, 예를 들어 기 확보된 파노라마 영상은 다른 컴퓨터 시스템으로부터 네트워크 인터페이스(160)를 통해 수신되거나, 새로운 영상 컨텐츠로 생성된 파노라마 영상은 네트워크 인터페이스(160)를 통해 다른 컴퓨터 시스템으로 송신될 수 있다.

또한, 다른 실시예들에서 컴퓨터 시스템(100)은 도 1의 구성요소들보다 더 많은 구성요소들을 포함할 수도 있다. 그러나, 대부분의 종래기술적 구성요소들을 명확하게 도시할 필요성은 없다. 예를 들어, 컴퓨터 시스템(100)은 상술한 입출력 인터페이스(150)와 연결되는 입출력 장치들 중 적어도 일부를 포함하도록 구현되거나 또는 트랜시버(transceiver), GPS(Global Positioning System) 모듈, 카메라, 각종 센서, 데이터베이스 등과 같은 다른 구성요소들을 더 포함할 수도 있다. 보다 구체적인 예로, 컴퓨터 시스템(100)이 스마트폰과 같은 모바일 기기의 형태로 구현되는 경우, 일반적으로 스마트폰이 포함하고 있는 가속도 센서나 자이로 센서, 카메라, 각종 물리적인 버튼, 터치패널을 이용한 버튼, 입출력 포트, 진동을 위한 진동기 등의 다양한 구성요소들이 컴퓨터 시스템(100)에 더 포함되도록 구현될 수 있다.

도 2는 본 발명의 일 실시예에 따른 컴퓨터 시스템의 프로세서가 포함할 수 있는 구성요소의 예를 도시한 도면이고, 도 3은 본 발명의 일 실시예에 따른 컴퓨터 시스템이 수행할 수 있는 영상 컨텐츠 생성 방법의 예를 도시한 순서도이다.

도 2에 도시된 바와 같이, 프로세서(110)는 영상 출력 제어부(210), 컨텐츠 생성부(220), 컨텐츠 편집부(230), 및 컨텐츠 관리부(240)를 포함할 수 있다. 이러한 프로세서(110)의 구성요소들은 적어도 하나의 프로그램 코드에 의해 제공되는 제어 명령에 따라 프로세서(110)에 의해 수행되는 서로 다른 기능들(different functions)의 표현들일 수 있다. 예를 들어, 프로세서(110)가 영상 컨텐츠를 출력하도록 컴퓨터 시스템(100)을 제어하기 위해 동작하는 기능적 표현으로서 영상 출력 제어부(210)가 사용될 수 있다. 프로세서(110) 및 프로세서(110)의 구성요소들은 도 3의 영상 컨텐츠 생성 방법이 포함하는 단계들(S310 내지 S350)을 수행할 수 있다. 예를 들어, 프로세서(110) 및 프로세서(110)의 구성요소들은 메모리(120)가 포함하는 운영체제의 코드와 상술한 적어도 하나의 프로그램 코드에 따른 명령(instruction)을 실행하도록 구현될 수 있다. 여기서, 적어도 하나의 프로그램 코드는 영상 컨텐츠 생성 방법을 처리하기 위해 구현된 프로그램의 코드에 대응될 수 있다.

영상 컨텐츠 생성 방법은 도시된 순서대로 발생하지 않을 수 있으며, 단계들 중 일부가 생략되거나 추가의 과정이 더 포함될 수 있다.

단계(S310)에서 프로세서(110)는 영상 컨텐츠 생성 방법을 위한 프로그램 파일에 저장된 프로그램 코드를 메모리(120)에 로딩할 수 있다. 예를 들어, 영상 컨텐츠 생성 방법을 위한 프로그램 파일은 도 1을 통해 설명한 영구 저장 장치(130)에 저장되어 있을 수 있고, 프로세서(110)는 버스를 통해 영구 저장 장치(130)에 저장된 프로그램 파일로부터 프로그램 코드가 메모리(120)에 로딩되도록 컴퓨터 시스템(110)을 제어할 수 있다.

이때, 프로세서(110) 및 프로세서(110)가 포함하는 영상 출력 제어부(210), 컨텐츠 생성부(220), 컨텐츠 편집부(230), 및 컨텐츠 관리부(240) 각각은 메모리(120)에 로딩된 프로그램 코드 중 대응하는 부분의 명령을 실행하여 이후 단계들(S320 내지 S350)을 실행하기 위한 프로세서(110)의 서로 다른 기능적 표현들일 수 있다. 단계들(S320 내지 S350)의 실행을 위해, 프로세서(110) 및 프로세서(110)의 구성요소들은 직접 제어 명령에 따른 연산을 처리하거나 또는 컴퓨터 시스템(100)을 제어할 수 있다.

단계(S320)에서 영상 출력 제어부(210)는 파노라마 형태로 제작된 제1 영상 컨텐츠를 컴퓨터 시스템(100)의 화면 상에 출력하도록 컴퓨터 시스템(100)을 제어할 수 있다. 영상 출력 제어부(210)는 방송 서비스, 거리뷰 서비스, VR 환경 등을 통해 제공되는 파노라마 영상을 화면 상에 출력하도록 컴퓨터 시스템(100)을 제어할 수 있다. 제1 영상 컨텐츠는 파노라마 형태의 모든 영상 컨텐츠를 의미할 수 있으며, 기 확보된 파노라마 영상으로, 예를 들어 3D 영상, 다시점 영상(예컨대, 360도 영상 등), VR 영상 등을 포함할 수 있다. 일례로, 컴퓨터 시스템(100)은 지도 서비스에서 거리뷰를 제공하는 컴퓨터 시스템과 동일하며, 지도의 추천, 검색, 내비게이션 등을 통해 거리뷰 영상, 즉 파노라마 영상의 출력이 이루어질 수 있다. 이때, 영상 출력 제어부(210)는 거리뷰의 지점을 연속적으로 혹은 비연속적으로 이동해가면서 해당 지점의 영상을 파노라마 형태로 출력함으로써 파노라마 영상 기반의 가상 탐사 환경을 제공할 수 있다. 다른 예로, 영상 출력 제어부(210)는 제1 영상 컨텐츠를 VR 컨텐츠로 렌더링 하여 화면 상에 표출할 수 있으며, 예를 들어 거리뷰를 이용하여 VR 컨텐츠를 생성할 수 있고 이러한 VR 컨텐츠를 VR 배경 환경으로 제공할 수 잇다.

영상 출력 제어부(210)는 영상 컨텐츠의 조작이나 생성을 위해 필요한 사용자 인터페이스(UI: user interface)를 화면 상에 출력하도록 컴퓨터 시스템(100)을 제어할 수 있다. 일례로, 영상 출력 제어부(210)는 제1 영상 컨텐츠가 출력되는 화면 또는 제1 영상 컨텐츠를 이용한 VR 컨텐츠가 출력되는 화면 상에 새로운 영상 컨텐츠의 생성과 관련된 사용자 명령을 입력하기 위한 메뉴들로 구성된 사용자 인터페이스를 출력할 수 있다. 예를 들어, 영상 출력 제어부(210)는 거리뷰나 거리뷰를 이용한 VR 컨텐츠를 이용하는 중에 해당 화면 상에 새로운 영상 컨텐츠를 생성하기 위한 UI/UX를 제공할 수 있다. 다른 예로, 영상 출력 제어부(210)는 새로운 영상 컨텐츠가 생성되는 과정이나 생성이 완료된 이후 해당 컨텐츠의 편집, 관리, 공유 등과 관련된 사용자 명령을 입력하기 위한 메뉴들로 구성된 사용자 인터페이스를 화면 상에 출력하도록 컴퓨터 시스템(100)을 제어할 수 있다.

단계(S330)에서 컨텐츠 생성부(220)는 제1 영상 컨텐츠에서 하나의 지점 또는 적어도 둘 이상의 지점에 대해 해당 컨텐츠를 캡쳐함으로써 제1 영상 컨텐츠로부터 제2 영상 컨텐츠를 생성할 수 있다. 컨텐츠 생성부(220)는 제1 영상 컨텐츠가 출력되는 과정에서 하나의 지점 또는 적어도 둘 이상의 지점에 대한 선택이 입력되면 해당 지점을 기준으로 파노라마 형태의 정지영상이나 동영상을 획득할 수 있다. 예를 들어, 컨텐츠 생성부(220)는 거리뷰에서 사용자가 선택한 중심점을 기준으로 거리뷰의 360도 정지영상이나 동영상을 획득할 수 있다. 다시 말해, 컨텐츠 생성부(220)는 사용자가 탐사한 제1 영상 컨텐츠 중 적어도 일부를 캡쳐하여 새로운 360도 UGC를 만들 수 있으며, 이때 360도 파노라마 영상 이외에도 풀프레임 사진으로 캡쳐하는 것 또한 가능하다. 다른 예로, 컨텐츠 생성부(220)는 제1 영상 컨텐츠를 이용한 VR 탐사 환경에서 해당 VR 컨텐츠의 적어도 일부 구간을 캡쳐함으로써 제2 영상 컨텐츠를 생성할 수 있다. 다시 말해, 컴퓨터 시스템(100)은 거리뷰와 같은 제1 영상 컨텐츠를 활용하여 VR 영상을 제공할 수 있고, 이러한 VR 영상을 활용하는 중에 사용자가 원하는 구간을 지정하여 제2 영상 컨텐츠를 생성할 수 있다. VR 컨텐츠는 비전 기반 컨텐츠와 그래픽 기반 컨텐츠로 나눌 수 있다. 거리뷰와 같은 실사의 영상뿐만 아니라, HMD(head mounted display)나 웹 뷰어(web viewer)를 통해서 구현되는 CG(computer graphics) 등과 같이 그래픽으로 렌더링 된 공간에 대해 360도 파노라마 컨텐츠로 재생산 하는 것 또한 가능하다. 즉, 기 확보된 비전 중심의 컨텐츠는 물론 그래픽 기반 컨텐츠를 활용하여 별도의 디바이스나 비용 발생 없이 사용자가 원하는 지점에 대한 360도 컨텐츠를 생성할 수 있다.

단계(S340)에서 컨텐츠 편집부(230)는 제2 영상 컨텐츠에 적어도 하나의 편집 요소를 적용할 수 있다. 일례로, 컨텐츠 편집부(230)는 제2 영상 컨텐츠에 다른 영상을 합성할 수 있다. 예를 들어, 컨텐츠 편집부(230)는 제2 영상 컨텐츠가 생성되는 과정에서 카메라 앱을 통해 촬영된 영상, 혹은 메모리(120)나 연동 가능한 다른 컴퓨터 시스템에 저장된 영상 등을 제2 영상 컨텐츠와 실시간으로 합성할 수 있다. 다른 예로, 컨텐츠 편집부(230)는 제2 영상 컨텐츠에 다양한 그래픽 요소를 적용 또는 추가할 수 있다. 예를 들어, 컨텐츠 편집부(230)는 다양한 필터 효과를 제2 영상 컨텐츠에 적용할 수 있으며, 메시지나 폰트, 비주얼 그래픽 등을 제2 영상 컨텐츠에 추가할 수 있다. 또 다른 예로, 컨텐츠 편집부(230)는 제2 영상 컨텐츠에 관련 정보를 태깅할 수 있다. 예를 들어, 컨텐츠 편집부(230)는 제2 영상 컨텐츠에 대해 사용자의 커스텀 메시지나 체크인(방문) 기록을 남길 수 있으며, 제2 영상 컨텐츠의 생성과 관련하여 위치 정보, 시간 정보, 날씨 정보, 사용자 정보 등 기타 메타 정보를 자동 태깅할 수 있다.

단계(S350)에서 컨텐츠 관리부(240)는 제1 영상 컨텐츠로부터 생성된 제2 영상 컨텐츠를 사용자와 관련하여 관리 및 공유할 수 있다. 컨텐츠 관리부(240)는 제2 영상 컨텐츠의 생성이 완료되면 제2 영상 컨텐츠를 사용자와 연결하여 저장할 수 있고 다양한 매체(예컨대, 지도, SNS, 클라우드, 메신저, 메일, 메시지 등)를 통해 제2 영상 컨텐츠를 공유할 수 있다. 예를 들어, 컨텐츠 관리부(240)는 제2 영상 컨텐츠의 해당 지점에 대한 거리뷰를 이용하는 다른 사용자에게 사용자에 의해 생성된 제2 영상 컨텐츠를 노출함으로써 거리뷰를 이용한 장소 기반의 소셜 커뮤니케이션을 가능하게 할 수 있다.

따라서, 본 발명은 기 확보된 360도 컨텐츠를 사용자에게 제공하여 사용자가 원하는 장소나 포인트에 대해 해당 컨텐츠를 360도로 캡쳐하여 가공함으로써 별도의 360도 카메라나 관련 소프트웨어 없이도 기존 360도 컨텐츠로부터 새로운 360도 정지영상이나 동영상을 생성할 수 있다.

이하에서는 거리뷰를 이용하여 제2 영상 컨텐츠를 생성하는 구체적인 실시예를 설명하기로 한다.

도 4는 본 발명의 일 실시예에 있어서 영상 컨텐츠 생성 과정의 예시를 도시한 것이다.

제2 영상 컨텐츠는 정지영상 포맷과 동영상 포맷 중 어느 하나의 포맷으로 생성될 수 있다.

일례로, 컨텐츠 생성부(220)는 거리뷰에서 사용자에 의해 선택된 일 지점을 기준으로 해당 컨텐츠를 360도로 캡쳐하여 360도 정지영상으로 저장할 수 있다(S401). 360도 정지영상은 파노라마 형태로 스태틱한 일반 사진과 달리 360도의 화각으로 돌려볼 수 있다는 특징이 있다.

거리뷰 영상은 촬영자의 이동 동선에 따라 촬영된 연속된 사진의 컬렉션이다. 거리뷰 영상에서 여러 지점 간에 이동하는 연속된 360도 영상을 연속적으로 캡쳐하여 동영상 포맷으로 저장할 수 있다. 이때, 사용자는 2가지 방식으로 동영상을 생성할 수 있다.

동영상 포맷의 영상 컨텐츠를 생성하는 한가지 방식으로, 컨텐츠 생성부(220)는 거리뷰의 이동 동선에 대응되는 구간에 대해 히스토리를 저장하여 360도 동영상으로 저장할 수 있다(S402). 거리뷰에서 사용자가 이동할 구간을 선택하고 선택된 구간의 히스토리를 저장함으로써 동영상 포맷의 영상 컨텐츠를 생성할 수 있다.

다른 한가지 방식으로, 컨텐츠 생성부(220)는 거리뷰에서 특정 지점의 로테이션에 대해 히스토리를 저장하여 360도 동영상으로 저장할 수 있다(S403). 거리뷰에서 사용자가 특정 지점의 화면을 로테이션하고 이러한 로테이션의 히스토리를 저장함으로써 동영상 포맷의 영상 컨텐츠를 생성할 수 있다.

동영상 포맷의 영상 컨텐츠를 생성하기 위해 사용자가 직접 거리뷰를 조작하여 이동 구간을 설정할 경우 사용자 조작 딜레이 등은 무시하고 균일한 속도로 저장할 수 있으며, 이때 이동 속도는 사용자가 직접 설정 가능하다.

이와 같이, 컴퓨터 시스템(100)은 파노라마 형태의 영상 컨텐츠를 이용하여 일련의 과정을 통해 사용자가 원하는 정지영상/동영상을 캡쳐하면 사용자가 설정한 조건에 맞추어 360 정지영상/동영상 파일을 생성할 수 있다. 이렇게 생성된 정지영상/동영상은 360도 파노라마 형태로 렌더링할 수 있는 뷰어를 제공하는 모든 서비스에서 공유할 수 있으며, 자체 거리뷰 로깅 시스템을 제공하여 사용자가 생성한 정지영상/동영상을 아카이빙(archiving)하고 사용자의 거리뷰 탐색 기록을 분석/가공하여 서비스로 제공할 수 있다. 물론, 사용자가 생성한 정지영상/동영상을 다양한 디바이스(예컨대, HMD 등)를 통해 VR의 배경 환경으로 제공하는 것 또한 가능하다.

그리고, 제2 영상 컨텐츠로 생성된 파일에 해당 위치를 자동 지오 태깅할 수 있으며, 컨텐츠 생성 날짜와 시간, 사용자 정보 등 기타 메타 정보 또한 자동 태깅할 수 있다. 구간을 캡쳐하는 동영상의 경우 해당 이동 구간을 지도 상의 이동 경로로 표시하는 것도 가능하다. 태깅 정보는 사용자에 의해 캡쳐된 정지영상/동영상과 함께 사용자 개인의 기록은 물론, 타인과의 공유에서 유용하게 사용될 수 있다.

도 5 내지 도 6은 본 발명의 일 실시예에 있어서 영상 컨텐츠 생성을 위한 사용자 인터페이스 화면의 예시를 도시한 것이다.

일반적인 거리뷰 서비스에서는 거리의 실사 사진을 360도 파노라마 형태로 제공하고 있다. 도 5에 도시한 바와 같이, 지역의 거리 사진이 360도 파노라마로 제공되는 거리뷰 화면(500) 상에 제2 영상 컨텐츠의 생성을 위해 필요한 사용자 인터페이스가 노출될 수 있으며, 예를 들어 정지영상 포맷의 영상 컨텐츠를 생성하기 위한 사진 촬영 메뉴(501)와, 동영상 포맷의 영상 컨텐츠를 생성하기 위한 동영상 촬영 메뉴(502) 등이 노출될 수 있다.

사용자가 거리뷰 화면(500) 상의 거리뷰에서 원하는 지점이나 구간을 선택한 후 사진 촬영 메뉴(501)를 이용하여 선택 지점에 대한 영상 컨텐츠의 생성을 요청하거나, 동영상 촬영 메뉴(502)를 이용하여 선택 구간에 대한 영상 컨텐츠의 생성을 요청할 수 있다. 거리뷰 영상은 일반 사진과 달리 360도로 돌려 볼 수 있다는 특징이 있으므로 사용자가 직접 거리뷰 화면(500) 상에서 전체 장면의 상/하/좌/우 중심점을 선택할 수 있으며, 컴퓨터 시스템(100)에서는 사용자의 컨텐츠 생성 요청을 받아 사용자가 선택한 중심점을 기준으로 거리뷰의 360도 정지영상 또는 360도 동영상을 획득할 수 있다.

거리뷰를 이용하여 제2 영상 컨텐츠가 생성되면, 즉 거리뷰에서 360도 정지영상 또는 360도 동영상이 캡쳐되면 도 6에 도시한 바와 같이 캡쳐 영상을 확인하기 위한 캡쳐 화면(600)으로 전환될 수 있다.

캡쳐 화면(600)에는 거리뷰의 탐사 위치를 이동하기 위한 위치 이동 메뉴(603), 거리뷰의 중심점을 상/하/좌/우로 이동하기 위한 지점 이동 메뉴(604), 화면 로테이션을 위한 로테이션 메뉴(605), 제2 영상 컨텐츠(즉, 캡쳐 영상)를 공유하기 위한 공유 메뉴(606) 등이 포함될 수 있다.

더 나아가, 캡쳐 화면(600)에는 실시간 편집 및 합성 등을 위한 도구들이 더 포함될 수 있다. 사용자는 필터와 합성 기능 등을 이용하여 제2 영상 컨텐츠를 원하는 스타일로 보정하거나 다양한 사진/그래픽 요소를 추가할 수 있다. 카메라 앱을 이용하여 현재 사용자의 모습과 해당 장소의 이미지를 실시간 합성하는 것 또한 가능하다. 일례로, 다양한 필터 효과를 적용하여 제2 영상 컨텐츠의 톤과 스타일 등을 선택할 수 있다. 다른 예로, 컴퓨터 시스템(100)에서 제공되는 다양한 그래픽 요소(예컨대, 폰트, 비주얼 그래픽 등) 또는 사용자 사진을 제2 영상 컨텐츠에 오버레이하여 촬영할 수 있다. 또한, 제2 영상 컨텐츠의 해당 장소에 자신의 커스텀 메시지나 체크인(방문) 기록을 남길 수 있다. 이러한 그래픽/메시지 요소는 가상의 거리뷰를 탐사하면서 해당 장소에 사용자만의 족적/흔적을 남겨 해당 장소에 직접 가 있는 듯한 경험을 제공할 수 있으며, 나아가 해당 장소를 방문한 다른 사용자에게 노출하여 거리뷰를 이용한 장소 기반의 소셜 커뮤니케이션을 지원할 수 있다. 또 다른 예로, 컴퓨터 시스템의 카메라로 촬영된 영상을 제2 영상 컨텐츠에 실시간으로 오버레이할 수 있으며, 제2 영상 컨텐츠의 해당 장소에서 실시간 인증샷을 촬영하는 효과를 줄 수 있다.

예를 들어, 도 7에 도시한 바와 같이 사용자는 캡쳐 화면(700)에서 컴퓨터 시스템(100)에 저장된 사진이나 카메라의 촬영 사진 등 다른 영상(710)을 불러와 해당 영상(710)을 제2 영상 컨텐츠에 실시간으로 합성할 수 있다. 다른 예로, 도 8에 도시한 바와 같이 사용자는 캡쳐 화면(800)에서 직접 메시지(810)를 작성하여 해당 메시지(810)를 제2 영상 컨텐츠에 합성하거나 혹은 제2 영상 컨텐츠에 대한 태깅 정보로 추가할 수 있다.

이처럼 본 발명의 실시예들에 따르면, 파노라마 형태로 제작된 영상 컨텐츠에서 사용자가 원하는 지점에 대해 해당 컨텐츠를 캡쳐하여 가공함으로써 가상의 360도 포토그래피나 영상 촬영이 가능하며 이를 통해 별도의 360도 카메라나 관련 소프트웨어 없이도 파노라마 영상을 생성할 수 있다. 그리고, 본 발명의 실시예들에 따르면, 파노라마 영상 기반의 가상 탐사 환경에서 사용자가 원하는 장면들을 중심으로 정지영상이나 동영상의 형식으로 새로운 파노라마 영상을 생성하여 이를 UGC로서 유통하거나 공유할 수 있다.

이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 어플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치에 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

Claims (10)

1. 컴퓨터로 구현되는 영상 컨텐츠 생성 시스템이 수행하는 영상 컨텐츠 생성 방법에 있어서,
   파노라마 형태로 제작된 제1 영상 컨텐츠를 화면 상에 출력하는 단계; 및
   상기 제1 영상 컨텐츠에서 적어도 일부의 파노라마 영상을 캡쳐함으로써 파노라마 형태의 제2 영상 컨텐츠를 생성하는 단계
   를 포함하고,
   상기 출력하는 단계는,
   상기 제1 영상 컨텐츠를 이용하여 VR(Virtual Reality) 탐사 환경을 제공하고,
   상기 생성하는 단계는,
   상기 VR 탐사 환경에서 사용자가 원하는 지점으로서 상기 제1 영상 컨텐츠에서 선택된 지점 각각을 중심점으로 하여 상기 중심점을 기준으로 해당 컨텐츠를 360도로 캡쳐하여 상기 제2 영상 컨텐츠를 360도 파노라마 영상으로 생성하고,
   상기 제1 영상 컨텐츠에서 선택된 이동 구간에 대한 히스토리를 저장하여 동영상 포맷의 제2 영상 컨텐츠를 생성하고,
   상기 영상 컨텐츠 생성 방법은,
   영상을 파노라마 형태로 렌더링 하는 뷰어를 제공하는 서비스를 통해 상기 제2 영상 컨텐츠를 제공하는 단계
   를 더 포함하고,
   상기 제2 영상 컨텐츠를 제공하는 단계는,
   상기 동영상 포맷으로 생성된 상기 제2 영상 컨텐츠의 경우 상기 이동 구간을 지도 상의 이동 경로로 표시하는 것
   을 특징으로 하는 영상 컨텐츠 생성 방법.
2. 삭제
3. 제1항에 있어서,
   상기 생성하는 단계는,
   상기 제1 영상 컨텐츠에서 선택된 지점의 로테이션에 대한 히스토리를 저장하여 동영상 포맷의 제2 영상 컨텐츠를 생성하는 것
   을 특징으로 하는 영상 컨텐츠 생성 방법.
4. 제1항에 있어서,
   상기 영상 컨텐츠 생성 방법은,
   상기 제2 영상 컨텐츠에 다른 영상을 합성하는 단계
   를 더 포함하는 영상 컨텐츠 생성 방법.
5. 제1항에 있어서,
   상기 영상 컨텐츠 생성 방법은,
   상기 제2 영상 컨텐츠에 필터 효과를 적용하거나 그래픽 요소를 추가하는 단계
   를 더 포함하는 영상 컨텐츠 생성 방법.
6. 제1항에 있어서,
   상기 영상 컨텐츠 생성 방법은,
   상기 제2 영상 컨텐츠에 위치 정보, 시간 정보, 날씨 정보, 사용자 정보 중 적어도 하나의 메타 정보를 태깅하는 단계
   를 더 포함하는 영상 컨텐츠 생성 방법.
7. 제1항에 있어서,
   상기 영상 컨텐츠 생성 방법은,
   상기 제2 영상 컨텐츠를 타인과 공유하는 단계
   를 더 포함하는 영상 컨텐츠 생성 방법.
8. 제7항에 있어서,
   상기 공유하는 단계는,
   영상을 파노라마 형태로 렌더링 하는 뷰어를 제공하는 서비스를 통해 상기 제2 영상 컨텐츠를 공유하는 것
   을 특징으로 하는 영상 컨텐츠 생성 방법.
9. 제1항, 제3항 내지 제8항 중 어느 한 항의 영상 컨텐츠 생성 방법을 컴퓨터에 실행시키기 위한 프로그램이 기록되어 있는 것을 특징으로 하는 비-일시적인 컴퓨터 판독 가능한 기록 매체.
10. 컴퓨터로 구현되는 영상 컨텐츠 생성 시스템에 있어서,
    파노라마 형태로 제작된 제1 영상 컨텐츠를 화면 상에 출력하도록 상기 영상 컨텐츠 생성 시스템을 제어하는 영상 출력 제어부; 및
    상기 제1 영상 컨텐츠에서 적어도 일부의 파노라마 영상을 캡쳐함으로써 파노라마 형태의 제2 영상 컨텐츠를 생성하는 컨텐츠 생성부
    를 포함하고,
    상기 영상 출력 제어부는,
    상기 제1 영상 컨텐츠를 이용하여 VR 탐사 환경을 제공하고,
    상기 컨텐츠 생성부는,
    상기 VR 탐사 환경에서 사용자가 원하는 지점으로서 상기 제1 영상 컨텐츠에서 선택된 지점 각각을 중심점으로 하여 상기 중심점을 기준으로 해당 컨텐츠를 360도로 캡쳐하여 상기 제2 영상 컨텐츠를 360도 파노라마 영상으로 생성하고,
    상기 제1 영상 컨텐츠에서 선택된 이동 구간에 대한 히스토리를 저장하여 동영상 포맷의 제2 영상 컨텐츠를 생성하고,
    상기 영상 컨텐츠 생성 시스템은,
    영상을 파노라마 형태로 렌더링 하는 뷰어를 제공하는 서비스를 통해 상기 제2 영상 컨텐츠를 제공하는 컨텐츠 관리부
    를 더 포함하고,
    상기 컨텐츠 관리부는,
    상기 동영상 포맷으로 생성된 상기 제2 영상 컨텐츠의 경우 상기 이동 구간을 지도 상의 이동 경로로 표시하는 것
    을 특징으로 하는 영상 컨텐츠 생성 시스템.

Images