KR101717014B1 - 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법 - Google Patents

비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법 Download PDF

Info

Publication number
KR101717014B1
KR101717014B1 KR1020160048882A KR20160048882A KR101717014B1 KR 101717014 B1 KR101717014 B1 KR 101717014B1 KR 1020160048882 A KR1020160048882 A KR 1020160048882A KR 20160048882 A KR20160048882 A KR 20160048882A KR 101717014 B1 KR101717014 B1 KR 101717014B1
Authority
KR
South Korea
Prior art keywords
video
sequence
video sequence
original
original video
Prior art date
Application number
KR1020160048882A
Other languages
English (en)
Inventor
천솔지
Original Assignee
(주)노바빈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)노바빈 filed Critical (주)노바빈
Priority to KR1020160048882A priority Critical patent/KR101717014B1/ko
Application granted granted Critical
Publication of KR101717014B1 publication Critical patent/KR101717014B1/ko
Priority to PCT/KR2017/003062 priority patent/WO2017164640A1/en
Priority to US16/087,167 priority patent/US11438510B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2625—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H04N21/8113—Monomedia components thereof involving special audio data, e.g. different tracks for different languages comprising music, e.g. song in MP3 format
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268—Signal distribution or switching

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

본 발명에 따른 비디오 컨텐츠 자동 편집 시스템은, 사용자 입력을 수신하는 입력 인터페이스 모듈; 상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈; 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및 상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 것을 특징으로 한다.

Description

비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법{Server for editing video contents automatically and method thereof}
본 발명은 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법에 관한 것으로, 비디오 시퀀스 분할 및 분할된 비디오 시퀀스 재배치를 통해 새로운 재배치 비디오 컨텐츠를 자동으로 생성할 수 있는 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법에 관한 것이다.
이미지 센서 및 이미지 프로세싱 기술의 발전에 따라 개인이 휴대하는 스마트폰의 카메라 기능이 개선되어 사용자는 이를 이용하여 고화질의 비디오 컨텐츠를 촬영할 수 있다. 그러나, 사용자 촬영 비디오 컨텐츠의 영상 자체 품질은 높아졌지만, 여전히 전문 촬영 기술 및 전문 편집 기술을 보유하지 못한 사용자는 고품질의 비디오 컨텐츠의 생산이 어렵다.
전문가에 의해 촬영 및 편집된 비디오 컨텐츠는 안정적인 카메라 워크를 통해 높은 영상 품질을 확보하고, 불필요한 부분을 편집을 통해 제거함으로써 감상자의 몰입도를 높일 수 있으며, 복수의 카메라에 의한 영상을 동기화하여 교차 편집함으로써 비디오 컨텐츠의 역동성을 높일 수 있다. 이에 반해 일반 사용자가 촬영한 비디오 컨텐츠는 단조로운 카메라 앵글이 지속되어 비디오 컨텐츠의 역동성이 매우 떨어지며, 불필요한 부분의 제거 또는 교차편집 등의 편집 작업을 거치지 않기 때문에 비디오 컨텐츠에 대한 감상자의 몰입도를 유지하기 어려운 문제가 있다.
일반 사용자가 촬영한 비디오 컨텐츠들은 낮은 품질로 인해 촬영자 본인 및 제삼자인 감상자들의 흥미를 불러일으키기 어려워, 결국 스마트폰 등의 저장장치의 저장용량만 차지하고 잊혀지거나 저장용량 확보를 위해 저장장치에서 삭제된다.
한편, 사용자들이 비디오 컨텐츠를 비교적 용이하게 편집하게 하는 프로그램 및 애플리케이션들이 개발되어 상용화되었으나, 자신의 비디오 컨텐츠를 편집하는 사용자는 여전히 소수에 불과하고, 전문 편집 장비를 보유하지 않은 일반 사용자들이 스마트폰에서 제공하는 터치스크린과 같은 제한적인 사용자 인터페이스를 통해 비디오 컨텐츠의 편집구간을 설정하고, 그 편집위치를 설정하는 일은 여전히 복잡하고 불편한 문제가 있다.
삼성전자의 미국 등록특허 제9,058,841호 “Method and system for editing video sequences”는 풍선 이미지 또는 촛불 이미지와 같은 장식적인 객체를 임의의 위치에 랜덤하게 부가하는 자동 편집 방법을 개시한다. 이러한 방법에 따르면 사용자가 직접 장식적인 객체를 부가하는 편집 작업 없이 비디오 컨텐츠에 해당 요소들이 랜덤하게 부가되어 비디오 컨텐츠의 의외성 및 역동성을 다소 개선하는 효과가 있다. 그러나, 이는 비디오 컨텐츠의 비디오 시퀀스 자체의 이동 또는 삭제에 의한 편집이 아닌 부가적이고 장식적인 요소의 프레임 삽입에 불과하여 근본적으로 지루하게 촬영된 비디오 컨텐츠의 속성을 바꾸기에는 여전히 부족하다.
NEC corporation의 미국 등록특허 제8,315,507호 “Video generation device, video generation method, and video generation program”은 원본 비디오 컨텐츠에 등장하는 객체가 화면에 출연하는 시간을 기반으로 실제 등장률을 계산하여 설정된 등장률에 따라 신규 비디오 컨텐츠를 생성하는 방법을 개시한다. 이러한 방법에 따르면 등장률이라는 일정한 규칙에 따라 신규 비디오 컨텐츠를 자동으로 편집하는 효과를 제공한다. 그러나, 일반 사용자들이 촬영한 비디오 컨텐츠는 영화 또는 드라마처럼 많은 인물이 출연하는 경우가 드물고 수 초 내지 수십 분 정도의 짧은 재생시간 동안 동일한 객체(인물 또는 경치 등)만 등장하는 경우가 많다. 따라서 대부분의 사용자 촬영 비디오 컨텐츠에서 등장률에 따른 편집은 그 적용자체가 불가능하거나 무의미하다는 문제가 있다.
Sony corporation의 미국 등록특허 제7,904,813호 “Method for editing video information and editing device”및 미국 등록특허 제7,627,823호 “Video information editing method and editing device”는 영화 등의 원본 비디오 컨텐츠에서 각 씬(scene)들의 의미적 평가 정보를 추출하여 적절한 프리뷰 영상을 자동으로 생성하는 방법을 개시한다. 이러한 방법에 따르면 자동화된 편집을 통해 시간적으로 압축된 편집 비디오 컨텐츠를 얻을 수 있는 효과가 있다. 그러나, 일반 사용자들이 촬영한 비디오 컨텐츠는 씬(scene)의 구분이 없을 뿐 아니라 내용상의 급격한 변화가 부족하여 의미적 평가 정보를 얻는 것이 어렵다는 문제가 있다.
미국 등록특허 제9,058,841호 미국 등록특허 제8,315,507호 미국 등록특허 제7,904,813호 미국 등록특허 제7,627,823호
상기의 문제를 해결하기 위해, 본 발명에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 자동으로 원본 비디오 컨텐츠를 복수의 원본 비디오 시퀀스로 구분하고 서브셋 비디오 시퀀스를 랜덤하게 재배치함으로써, 사용자의 추가적인 입력을 요하지 않는 자동화된 편집구간의 설정 및 자동화된 비디오 시퀀스의 이동지점 설정을 통해 비디오 컨텐츠 편집의 사용자 편의성을 개선하고, 사용자가 의도하지 못한 재배치 비디오 컨텐츠를 생성함으로써 자동 편집된 비디오 컨텐츠의 역동성 및 의외성을 제고하는 것을 목적으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 복수의 원본 비디오 컨텐츠들을 이용하여 단일의 재배치 비디오 컨텐츠를 생성함으로써 사용자의 비디오 컨텐츠 재사용 동기를 부여하고, 자동 편집된 비디오 컨텐츠의 역동성 및 의외성을 더욱 제고하는 것을 목적으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 랜덤하게 자동 편집된 재배치 비디오 컨텐츠가 생성된 이후 사용자의 선택에 따라 원본 비디오 컨텐츠를 이용하여 용이하게 2차 재배치 비디오 컨텐츠를 생성함으로써 사용자의 비디오 컨텐츠 재사용 동기를 부여하고, 자동 편집된 비디오 컨텐츠의 역동성 및 의외성을 더욱 제고하는 것을 목적으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 랜덤하게 자동 편집된 재배치 비디오 컨텐츠가 생성된 이후 사용자의 선택에 따라 재배치 비디오 컨텐츠를 새로운 원본 비디오 컨텐츠로서 다시 랜덤하게 자동 편집함으로써 사용자의 비디오 컨텐츠 재사용 동기를 부여하고, 자동 편집된 비디오 컨텐츠의 역동성 및 의외성을 더욱 제고하는 것을 목적으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 터치센서에 대한 터치 시간, 터치 압력 또는 움직임 센서에 대한 흔들림 시간, 흔들림 세기와 같은 사용자의 선택에 따라 랜덤한 편집의 정도를 조정하게 함으로써 사용자의 다양한 의도에 적응적으로 부합하는 자동 편집된 비디오 컨텐츠를 제공하는 것을 목적으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 설정된 목표 재생시간 또는 설정된 배경음악의 연주시간에 부합하도록 재배치 비디오 컨텐츠를 생성함으로써 자동 편집된 비디오 컨텐츠의 영상품질을 개선하여 사용자의 몰입도를 증가시키고, 자동 편집된 비디오 컨텐츠의 역동성을 제고하는 것을 목적으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 카메라의 이동 또는 회전시 촬영된 불필요한 부분을 자동으로 제거함으로써 자동 편집된 비디오 컨텐츠의 영상품질을 개선하여 사용자의 몰입도를 증가시키고, 비디오 컨텐츠의 역동성을 제고하는 것을 목적으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 원본 비디오 시퀀스 또는 서브셋 비디오 시퀀스에 랜덤하게 압축재생, 연장재생, 역재생을 적용함으로써 자동 편집된 비디오 컨텐츠의 역동성 및 의외성을 제고하는 것을 목적으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 원본 비디오 컨텐츠와 동일한 시간대에 촬영된 추가 비디오 컨텐츠를 자동으로 교차 편집함으로써 전문 영상물과 같은 카메라 전환효과를 자동 편집된 비디오 컨텐츠에 부가여 영상품질을 높이는 것을 목적으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 원본 비디오 컨텐츠와 동일한 장소에서 촬영된 다른 비디오 컨텐츠 또는 사진 등을 자료화면 시퀀스로서 재배치 비디오 컨텐츠에 자동으로 삽입함으로써 자동 편집된 비디오 컨텐츠의 영상품질을 높이는 것을 목적으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 편집된 서브셋 비디오 시퀀스에 화면 전환 효과를 자동으로 적용함으로써 자동 편집된 비디오 컨텐츠의 영상품질을 높이는 것을 목적으로 한다.
상기의 목적을 달성하기 위해 본 발명에 따른 비디오 컨텐츠 자동 편집 시스템은, 사용자 입력을 수신하는 입력 인터페이스 모듈; 상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈; 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및 상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템은, 상기 프레임별 이미지 분석을 수행하여 상기 프레임에 포함되는 촬영 객체를 검출하는 프레임 이미지 처리 모듈;을 더 포함하고, 상기 비디오 시퀀스 설정 모듈은, 상기 프레임 이미지 처리 모듈의 의해 검출된 상기 촬영 객체를 기준으로 연속적인 프레임들을 하나의 상기 원본 비디오 시퀀스로 정의하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템에 있어서, 비디오 컨텐츠 자동 편집 시스템은, 카메라 이동 중 촬영된 프레임들 또는 카메라 회전 중 촬영된 프레임들인 카메라 조정 프레임들을 검출하는 프레임 이미지 처리 모듈;을 더 포함하고, 상기 비디오 시퀀스 설정 모듈은, 상기 프레임 이미지 처리 모듈에 의해 검출된 상기 카메라 조정 프레임들을 기준으로 연속적인 프레임들을 하나의 상기 원본 비디오 시퀀스로 정의하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템에 있어서, 상기 비디오 시퀀스 설정 모듈은, 랜덤한 수의 연속적인 프레임들의 집합을 하나의 상기 원본 비디오 시퀀스로 정의하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템에 있어서, 상기 비디오 시퀀스 설정 모듈은, 실질적으로 동일한 수의 연속적인 프레임들의 집합으로 상기 원본 비디오 시퀀스들을 정의하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템은, 상기 프레임별 이미지 분석을 수행하는 프레임 이미지 처리 모듈;을 더 포함하고, 상기 비디오 시퀀스 설정 모듈은, 상기 프레임 이미지 처리 모듈에 의해 검출된 촬영 객체를 기준으로 연속적인 프레임들을 하나의 상기 원본 비디오 시퀀스로 정의하는 제 1 시퀀스 설정 방법, 상기 프레임 이미지 처리 모듈에 의해 검출된 카메라 조정 프레임들을 기준으로 연속적인 프레임들을 하나의 상기 원본 비디오 시퀀스로 정의하는 제 2 시퀀스 설정 방법, 랜덤한 수의 연속적인 프레임들의 집합을 하나의 상기 원본 비디오 시퀀스로 정의하는 제 3 시퀀스 설정 방법, 실질적으로 동일한 수의 연속적인 프레임들의 집합으로 상기 원본 비디오 시퀀스들을 정의하는 제 4 시퀀스 설정 방법 또는 그 조합들 중 어느 하나의 방법을 사용하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템에 있어서, 상기 비디오 시퀀스 설정 모듈은, 복수의 상기 원본 비디오 컨텐츠들을 상기 제 1 원본 비디오 시퀀스 내지 상기 제 n 원본 비디오 시퀀스로 구분하고, 상기 비디오 시퀀스 재배치 모듈은, 단일의 상기 재배치 비디오 컨텐츠를 생성하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템에 있어서, 상기 비디오 시퀀스 재배치 모듈은, 상기 재배치 비디오 컨텐츠의 생성 이후 상기 입력 인터페이스 모듈로부터 추가 재배치 활성화 입력의 수신에 따라 상기 서브셋 비디오 시퀀스를 다시 랜덤하게 재배치하여 2차 재배치 비디오 컨텐츠를 생성하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템에 있어서, 상기 비디오 시퀀스 설정 모듈은, 상기 재배치 비디오 컨텐츠의 생성 이후 상기 입력 인터페이스 모듈로부터 비디오 추가 편집 활성화 입력의 수신에 따라 상기 재배치 비디오 컨텐츠를 새로운 원본 비디오 컨텐츠로서 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스로 구분하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템에 있어서, 상기 입력 인터페이스 모듈은, 디스플레이에 대한 사용자의 터치를 상기 비디오 편집 활성화 입력으로 인식하는 터치 센싱부;를 포함하고, 상기 비디오 시퀀스 설정 모듈은, 상기 사용자의 터치 시간의 증감 또는 터치 압력의 증감에 따라 상기 연속적인 프레임들의 집합에 포함되는 프레임 수를 변경하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템에 있어서, 상기 입력 인터페이스 모듈은, 디바이스 흔들림을 감지하여 상기 비디오 편집 활성화 입력으로 인식하는 움직임 센싱부;를 포함하고, 상기 비디오 시퀀스 설정 모듈은, 상기 디바이스 흔들림 시간의 증감 또는 흔들림 세기의 증감에 따라 상기 연속적인 프레임들의 집합에 포함되는 프레임 수를 변경하는 것을 특징으로 한다.
본 발명의 실시예에 따른 상기 비디오 컨텐츠 자동 편집 시스템은, 상기 재배치 비디오 컨텐츠의 재생시간이 목표 재생시간에 부합하도록 프레임들 중 일부를 제거하는 비디오 프레임 제거 모듈을 더 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템은, 상기 재배치 비디오 컨텐츠의 목표 재생시간을 설정하는 재생시간 설정 모듈; 및 상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 상기 원본 비디오 컨텐츠의 각 프레임을 분석하여 연속 프레임들 간의 코릴레이션인 프레임 코릴레이션을 연산하는 프레임 이미지 처리 모듈;을 더 포함하고, 상기 비디오 프레임 제거 모듈은, 상기 목표 재생시간에 부합하도록 제 k 원본 비디오 시퀀스 또는 상기 서브셋 비디오 시퀀스 중 프레임 코릴레이션이 제 1 설정치 이상인 프레임들을 제거하는 것을 특징으로 한다.
본 발명의 실시예에 따른 상기 비디오 컨텐츠 자동 편집 시스템은, 상기 재배치 비디오 컨텐츠의 오디오 트랙에 포함될 배경음악의 재생시간을 상기 목표 재생시간으로 적용하는 것을 특징으로 한다.
본 발명의 실시예에 따른 상기 비디오 컨텐츠 자동 편집 시스템은, 상기 재배치 비디오 컨텐츠의 오디오 트랙에 포함될 배경음악을 설정하는 배경음악 설정 모듈; 및 상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 상기 원본 비디오 컨텐츠의 각 프레임을 분석하여 연속 프레임들 간의 코릴레이션인 프레임 코릴레이션을 연산하는 프레임 이미지 처리 모듈;을 더 포함하고, 상기 비디오 프레임 제거 모듈은, 상기 배경음악의 연주시간에 부합하도록 제 k 원본 비디오 시퀀스 또는 상기 서브셋 비디오 시퀀스 중 프레임 코릴레이션이 제 1 설정치 이상인 프레임들을 제거하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템은, 카메라 이동 중 촬영된 프레임들 또는 카메라 회전 중 촬영된 카메라 조정 프레임들을 검출하는 프레임 이미지 처리 모듈;을 더 포함하고, 제 k 원본 비디오 시퀀스 또는 상기 서브셋 비디오 시퀀스 중 상기 프레임 이미지 처리 모듈의 연산 결과 카메라 이동 중 촬영된 비디오 프레임 또는 카메라 회전 중 촬영된 프레임인 카메라 조정 프레임을 제거하는 비디오 프레임 제거 모듈;을 더 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템은, 상기 원본 비디오 시퀀스들 또는 상기 서브셋 비디오 시퀀스 중 적어도 어느 하나에 압축 재생하는 방법, 연장 재생하는 방법, 또는 역 재생하는 방법 중 적어도 하나의 방법을 랜덤하게 적용하는 재생모드 변경 모듈;을 더 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템은, 상기 원본 비디오 컨텐츠가 촬영된 시간대와 실질적으로 동일한 시간대에 다른 카메라 장치에 의해 촬영된 추가 비디오 컨텐츠를 로딩하여 상기 추가 비디오 컨텐츠의 적어도 일부의 추가 비디오 시퀀스를 추출하는 추가 비디오 시퀀스 추출 모듈; 및 상기 추가 비디오 시퀀스를 상기 추가 비디오 시퀀스가 촬영된 시간대에 선행 또는 후행하는 상기 원본 비디오 시퀀스 중 적어도 어느 하나와 교체하거나 상기 추가 비디오 시퀀스가 촬영된 시간대에 인접하게 선행 또는 인접하게 후행하는 상기 원본 비디오 시퀀스의 일부 프레임들과 교체하는 추가 비디오 시퀀스 삽입 모듈;을 더 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템에 있어서, 상기 추가 비디오 시퀀스 삽입 모듈은, 상기 원본 비디오 시퀀스에 포함된 제 1 오디오 신호 및 상기 추가 비디오 시퀀스에 포함된 제 2 오디오 신호를 비교하여 상기 추가 비디오 시퀀스를 교체하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템에 있어서, 상기 추가 비디오 시퀀스 삽입 모듈은, 상기 원본 비디오 시퀀스에 포함된 제 1 촬영시간 정보 및 상기 추가 비디오 시퀀스에 포함된 제 2 촬영시간 정보를 비교하여 상기 추가 비디오 시퀀스를 교체하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템은, 상기 원본 비디오 컨텐츠가 촬영된 장소에 해당하는 자료화면 비디오 시퀀스를 입력받는 자료화면 입력 모듈; 및 상기 재배치 비디오 컨텐츠에 상기 자료화면 비디오 시퀀스를 삽입하는 자료화면 삽입 모듈;을 더 포함하여 구성되는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템은, 재배치된 상기 서브셋 비디오 시퀀스의 시작지점 또는 종료지점 중 적어도 하나에 화면 전환 효과를 적용하는 화면 전환 효과 모듈을 더 포함하는 것을 특징으로 한다.
본 발명에 따른 비디오 컨텐츠 자동 편집 방법은, 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 편집 활성화 입력을 수신받아 원본 비디오 컨텐츠를 로딩하는 제 1 단계; 상기 비디오 컨텐츠 자동 편집 시스템이, 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 제 2 단계; 상기 비디오 컨텐츠 자동 편집 시스템이, 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 상기 원본 비디오 시퀀스들 및/또는 상기 서브셋 비디오 시퀀스들의 배치 순서에 대한 정보인 시퀀스 배치 정보를 생성하는 제 3 단계; 및 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 시퀀스 배치 정보에 따른 재배치 비디오 컨텐츠 또는 상기 시퀀스 배치 정보를 저장하는 제 4 단계;를 포함하여 구성되는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법에 있어서, 상기 제 2 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 프레임별 이미지 분석을 수행하여 상기 프레임에 포함되는 촬영 객체를 검출하는 제 1 부단계; 및 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 제 1 부단계에 의해 검출된 상기 촬영 객체를 기준으로 연속적인 프레임들을 하나의 상기 원본 비디오 시퀀스로 정의하는 제 2 부단계;를 더 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법에 있어서, 상기 제 2 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 카메라 이동 중 촬영된 프레임들 또는 카메라 회전 중 촬영된 프레임들인 카메라 조정 프레임들을 검출하는 제 3 부단계; 및 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 제 3 부단계에 의해 검출된 상기 카메라 조정 프레임들을 기준으로 연속적인 프레임들을 하나의 상기 원본 비디오 시퀀스로 정의하는 제 4 부단계;를 더 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법에 있어서, 상기 제 2 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 랜덤한 수의 연속적인 프레임들의 집합을 하나의 상기 원본 비디오 시퀀스로 정의하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법에 있어서, 상기 제 2 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 실질적으로 동일한 수의 연속적인 프레임들의 집합으로 상기 원본 비디오 시퀀스들을 정의하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법에 있어서, 상기 제 1 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이 복수의 상기 원본 비디오 컨텐츠들을 로딩하고, 상기 제 2 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이 복수의 상기 원본 비디오 컨텐츠들을 상기 제 1 원본 비디오 시퀀스 내지 상기 제 n 원본 비디오 시퀀스로 구분하고, 상기 제 3 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이 단일의 상기 재배치 비디오 컨텐츠를 생성하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법은, 상기 제 4 단계 이후에, 상기 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 추가 재배치 활성화 입력을 수신받아 상기 서브셋 비디오 시퀀스를 다시 랜덤하게 재배치하여 2차 재배치 비디오 컨텐츠를 생성하는 제 5 단계;를 더 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법은, 상기 제 4 단계 이후에, 상기 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 추가 편집 활성화 입력을 수신받아 상기 재배치 비디오 컨텐츠에 대해 상기 제 2 단계 내지 제 4 단계를 수행하는 제 6 단계;를 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법에 있어서, 상기 제 1 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 디스플레이에 대한 사용자의 터치를 상기 비디오 편집 활성화 입력으로 수신받고, 상기 제 2 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 사용자의 터치 시간의 증감 또는 터치 압력의 증감에 따라 상기 연속적인 프레임들의 집합에 포함되는 프레임 수를 변경하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법에 있어서, 상기 제 1 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이 디바이스의 흔들림을 상기 비디오 편집 활성화 입력으로 수신 받고, 상기 제 2 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 디바이스 흔들림 시간의 증감 또는 흔들림 세기의 증감에 따라 상기 연속적인 프레임들의 집합에 포함되는 프레임 수를 변경하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법은, 상기 제 1 단계 이후에, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 재배치 비디오 컨텐츠의 목표 재생시간을 설정하는 제 7 단계; 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 비디오 편집 활성화 입력의 수신에 따라 상기 원본 비디오 컨텐츠의 각 프레임을 분석하여 연속 프레임들 간의 코릴레이션인 프레임 코릴레이션을 연산하는 제 8 단계; 및 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 목표 재생시간에 부합하도록 제 k 원본 비디오 시퀀스 또는 상기 서브셋 비디오 시퀀스 중 프레임 코릴레이션이 제 1 설정치 이상인 프레임들을 제거하는 제 9 단계;를 더 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법은, 상기 제 1 단계 이후에, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 재배치 비디오 컨텐츠의 오디오 트랙에 포함될 배경음악을 설정하는 제 10 단계; 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 비디오 편집 활성화 입력의 수신에 따라 상기 원본 비디오 컨텐츠의 각 프레임을 분석하여 연속 프레임들 간의 코릴레이션인 프레임 코릴레이션을 연산하는 제 11 단계; 및 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 배경음악의 연주시간에 부합하도록 제 k 원본 비디오 시퀀스 또는 상기 서브셋 비디오 시퀀스 중 프레임 코릴레이션이 제 1 설정치 이상인 프레임들을 제거하는 제 12 단계;를 더 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법에 있어서, 상기 제 3 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 원본 비디오 시퀀스들 또는 상기 서브셋 비디오 시퀀스 중 적어도 어느 하나에 압축 재생하는 방법, 연장 재생하는 방법, 또는 역 재생하는 방법 중 적어도 하나의 방법을 랜덤하게 적용하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법은, 상기 제 2 단계 이후에, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 원본 비디오 컨텐츠가 촬영된 시간대와 실질적으로 동일한 시간대에 다른 카메라 장치에 의해 촬영된 추가 비디오 컨텐츠를 로딩하는 제 13 단계; 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 추가 비디오 컨텐츠의 적어도 일부의 추가 비디오 시퀀스를 추출하는 제 14 단계; 및 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 추가 비디오 시퀀스를 상기 추가 비디오 시퀀스가 촬영된 시간대에 선행 또는 후행하는 상기 원본 비디오 시퀀스 중 적어도 어느 하나와 교체하거나 상기 추가 비디오 시퀀스가 촬영된 시간대에 인접하게 선행 또는 인접하게 후행하는 상기 원본 비디오 시퀀스의 일부 프레임들과 교체하는 제 15 단계;를 더 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법에 있어서, 상기 제 15 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이 상기 원본 비디오 시퀀스에 포함된 제 1 오디오 신호 및 상기 추가 비디오 시퀀스에 포함된 제 2 오디오 신호를 비교하여 상기 추가 비디오 시퀀스를 교체하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법에 있어서, 상기 제 15 단계는, 상기 원본 비디오 시퀀스에 포함된 제 1 촬영시간 정보 및 상기 추가 비디오 시퀀스에 포함된 제 2 촬영시간 정보를 비교하여 상기 추가 비디오 시퀀스를 교체하는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법은, 상기 제 2 단계 이후에, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 원본 비디오 컨텐츠가 촬영된 장소에 해당하는 자료화면 비디오 시퀀스를 로딩하는 제 16 단계; 및 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 원본 비디오 컨텐츠에 상기 자료화면 비디오 시퀀스를 삽입하는 제 17 단계;를 더 포함하여 구성되는 것을 특징으로 한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법에 있어서, 상기 제 3 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이 상기 재배치된 상기 서브셋 비디오 시퀀스의 시작지점 또는 종료지점 중 적어도 하나에 화면 전환 효과를 적용하는 것을 특징으로 한다.
상기의 구성에 따라, 본 발명에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 자동으로 원본 비디오 컨텐츠를 복수의 원본 비디오 시퀀스로 구분하고 서브셋 비디오 시퀀스를 랜덤하게 재배치함으로써, 사용자의 추가적인 입력을 요하지 않는 자동화된 편집구간의 설정 및 편집된 비디오 시퀀의 이동지점 설정을 통해 비디오 컨텐츠 편집의 사용자 편의성을 개선하고, 사용자가 의도하지 않은 재배치 비디오 컨텐츠를 생성함으로써 자동 편집된 비디오 컨텐츠의 역동성 및 의외성을 제고하는 효과를 제공한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 복수의 원본 비디오 컨텐츠들을 이용하여 단일의 재배치 비디오 컨텐츠(content_video_shuffled)를 생성함으로써 사용자의 비디오 컨텐츠 재사용 동기를 부여하고, 자동 편집된 비디오 컨텐츠의 역동성 및 의외성을 더욱 제고하는 효과를 제공한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 랜덤하게 자동 편집된 재배치 비디오 컨텐츠가 생성된 이후 사용자의 선택에 따라 원본 비디오 컨텐츠를 이용하여 용이하게 2차 재배치 비디오 컨텐츠를 생성함으로써 사용자의 비디오 컨텐츠 재사용 동기를 부여하고, 자동 편집된 비디오 컨텐츠의 역동성 및 의외성을 더욱 제고하는 효과를 제공한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 랜덤하게 자동 편집된 재배치 비디오 컨텐츠가 생성된 이후 사용자의 선택에 따라 재배치 비디오 컨텐츠를 새로운 원본 비디오 컨텐츠로서 다시 랜덤하게 자동 편집함으로써 사용자의 비디오 컨텐츠 재사용 동기를 부여하고, 자동 편집된 비디오 컨텐츠의 역동성 및 의외성을 더욱 제고하는 효과를 제공한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 터치센서에 대한 터치 시간, 터치 압력 또는 움직임 센서에 대한 흔들림 시간, 흔들림 세기와 같은 사용자의 선택에 따라 랜덤한 편집의 정도를 조정하게 함으로써 사용자의 다양한 의도에 적응적으로 부합하는 자동 편집된 비디오 컨텐츠를 제공하는 효과를 제공한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 설정된 목표 재생시간 또는 설정된 배경음악의 연주시간에 부합하도록 재배치 비디오 컨텐츠를 생성함으로써 자동 편집된 비디오 컨텐츠의 영상품질을 개선하여 사용자의 몰입도를 증가시키고, 자동 편집된 비디오 컨텐츠의 역동성을 제고하는 효과를 제공한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 카메라의 이동 또는 회전시 촬영된 불필요한 부분을 자동으로 제거함으로써 자동 편집된 비디오 컨텐츠의 영상품질을 개선하여 사용자의 몰입도를 증가시키고, 비디오 컨텐츠의 역동성을 제고하는 효과를 제공한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 원본 비디오 시퀀스 또는 서브셋 비디오 시퀀스에 랜덤하게 압축재생, 연장재생, 역재생을 적용함으로써 자동 편집된 비디오 컨텐츠의 역동성 및 의외성을 제고하는 효과를 제공한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 원본 비디오 컨텐츠와 동일한 시간대에 촬영된 추가 비디오 컨텐츠를 자동으로 교차 편집함으로써 전문 영상물과 같은 카메라 전환효과를 자동 편집된 비디오 컨텐츠에 부가여 영상품질을 높이는 효과를 제공한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 원본 비디오 컨텐츠와 동일한 장소에서 촬영된 다른 비디오 컨텐츠 또는 사진 등을 자료화면 시퀀스로서 재배치 비디오 컨텐츠에 자동으로 삽입함으로써 자동 편집된 비디오 컨텐츠의 영상품질을 높이는 효과를 제공한다.
본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법은, 편집된 서브셋 비디오 시퀀스에 화면 전환 효과를 자동으로 적용함으로써 자동 편집된 비디오 컨텐츠의 영상품질을 높이는 효과를 제공한다.
도 1은 본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템을 도시하는 구성도.
도 2는 본 발명의 다른 실시예에 따른 재배치 비디오 컨텐츠의 생성례를 도시하는 비디오 컨텐츠 예시도.
도 3은 본 발명의 다른 실시예에 따른 재배치 비디오 컨텐츠의 생성례를 도시하는 비디오 컨텐츠 예시도.
도 4는 본 발명의 다른 실시예에 따른 복수의 원본 비디오 컨텐츠를 이용한 재배치 비디오 컨텐츠의 생성례를 도시하는 비디오 컨텐츠 예시도.
도 5는 본 발명의 다른 실시예에 따른 추가 비디오 컨텐츠를 이용한 재배치 비디오 컨텐츠의 생성례를 도시하는 비디오 컨텐츠 예시도.
도 6은 본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법을 도시하는 흐름도.
도 7은 본 발명의 다른 실시예에 따른 목표 재생시간 설정에 따른 정적 프레임의 제거방법을 도시하는 흐름도.
도 8은 본 발명의 다른 실시예에 따른 배경음악 설정에 따른 정적 프레임의 제거방법을 도시하는 흐름도.
도 9는 본 발명의 다른 실시예에 따른 추가 비디오 컨텐츠를 이용한 재배치 비디오 컨텐츠의 생성방법을 도시하는 흐름도.
도 10은 본 발명의 다른 실시예에 따른 자료화면을 이용한 재배치 비디오 컨텐츠의 생성방법을 도시하는 흐름도.
본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해석되어서는 안되며, 발명자는 자신의 발명을 최선의 방법으로 설명하기 위해 용와와 개념을 정의할 수 있는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야 한다.
따라서, 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 바람직한 일 실시예에 해당하며, 본 발명의 기술적 사상을 모두 대변하는 것이 아니므로 해당 구성은 본 발명의 출원시점에서 이를 대체할 다양한 균등물과 변형예가 있을 수 있다.
명세서 전반에서 어떠한 부분이 어떤 구성요소를 “포함”한다는 기재는, 이에 대한 특별한 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라, 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한 명세서에 기재된 “..모듈”, “..부”, “..시스템” 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있으며, 하나의 장치 또는 각각 다른 장치에 포함될 수 있다.
이하에서는 도면을 참조하여 본 발명에 따른 비디오 컨텐츠 자동 편집 시스템(100)을 설명한다. 도 1은 본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 시스템을 도시하는 구성도이다. 도 1에 도시된 바와 같이 본 발명에 따른 비디오 컨텐츠 자동 편집 시스템(100)은 입력 인터페이스 모듈(110), 비디오 시퀀스 설정 모듈(130), 비디오 시퀀스 재배치 모듈(140) 및 재배치 비디오 컨텐츠 저장 모듈(150)을 포함하여 구성된다.
각 구성요소들은 본 발명에 따른 비디오 컨텐츠 자동 편집 시스템(100)의 동작을 명료히 설명하기 위해 기능적으로 구분된 것이다. 따라서 각각의 모듈은 물리적으로 구분되는 단일의 구성요소로 반드시 구분되어야 하는 것은 아니고, 예컨대 프로그램의 일부를 구성하는 컴퓨터 명령어들의 집합의 형태로 구현될 수 있으며 프로그램의 실행에 따라 연산처리 장치에 의해 해당 모듈의 기능이 발현될 수 있다.
또한 본 발명에 따른 비디오 컨텐츠 자동 편집 시스템(100)의 모든 구성요소들은 예컨대 스마트폰 또는 사용자 컴퓨터와 같은 단일의 정보처리 단말기에 의해 실행되는 프로그램/애플리케이션으로 구현될 수도 있고, 일부 구성요소들은 클라이언트 단말기에 구현되고 다른 일부 구성요소들은 클라이언트 단말기와 통신망으로 연결되는 서버 컴퓨터에 구현되는 서버-클라이언트 서비스 형태로 구현될 수도 있으며, 분산형 서버 시스템의 각 서버에 구성요소들이 분산되어 구현될 수도 있다. 또는 반도체 프로세서를 구성하는 논리회로들의 집합으로 구성요소들을 구현할 수도 있다.
입력 인터페이스 모듈(110)은 사용자 입력을 수신하는 기능을 수행한다. 입력 인터페이스 모듈(110)은 사용자의 다양한 입력을 입력받기 위한 휴먼 인터페이스 장치로 구현될 수 있다. 예컨대 사용자의 키 스트로크를 입력 데이터로 변환하는 키보드 또는 키패드, 사용자의 화면 터치유무, 터치압력, 터치시간, 터치패턴 등을 입력 데이터로 변환하는 터치 패드 또는 터치 스크린, 사용자의 동작을 입력 데이터로 변환하는 카메라, 단말기의 공간적 움직임을 입력 데이터로 변화하는 동작감지 센서, 사용자의 음성을 입력 데이터로 변환하는 마이크, 사용자의 클릭 등을 입력 데이터로 변환하는 마우스 등을 입력 인터페이스 모듈(110)로서 예시할 수 있다.
입력 인터페이스 모듈(110)은 편집할 원본 비디오 컨텐츠(content_video_original)의 선택을 사용자로부터 입력받는 기능과 원본 비디오 컨텐츠(content_video_original)에 대한 편집을 요청하는 비디오 편집 활성화 입력(input_activation_edit)을 사용자로부터 입력받는 기능 등을 수행한다.
비디오 편집 활성화 입력(input_activation_edit)은 예컨대 사용자가 사용자 단말기에서 본 발명에 따른 비디오 컨텐츠 자동 편집 시스템(100)이 구현된 애플리케이션을 구동하고, 사용자가 애플리케이션을 통해 저장장치에서 편집할 원본 비디오 컨텐츠(content_video_original)를 불러오거나 통신망을 통해 클라우드 드라이버에 접속하여 원본 비디오 컨텐츠(content_video_original)를 다운로드하면 애플리케이션이 바로 비디오 편집 활성화 입력(input_activation_edit)을 발생시키는 방법으로 구현할 수 있다.
다른 방법으로는, 사용자가 애플리케이션을 통해 원본 비디오 컨텐츠(content_video_original)를 선택하고 사용자가 입력 인터페이스 모듈(110)을 통해 비디오 컨텐츠 편집 활성화에 할당된 객체를 선택하면 애플리케이션이 비디오 편집 활성화 입력(input_activation_edit)을 발생시키는 방법으로 구현할 수 있다.
다른 방법으로는, 사용자가 웹브라우저를 통해 본 발명에 따른 비디오 컨텐츠 편집 시스템(100)이 구현된 웹페이지에 접속하고, 사용자가 웹페이지를 통해 웹서버가 제공하는 원본 비디오 컨텐츠(content_video_original)를 선택하는 경우 웹서버가 바로 비디오 편집 활성화 입력(input_activation_edit)을 발생시키는 방법으로 구현할 수 있다.
다른 방법으로는, 사용자가 웹페이지를 통해 원본 비디오 컨텐츠(content_video_original)를 선택하고 사용자가 입력 인터페이스 모듈(110)을 통해 비디오 컨텐츠 편집 활성화에 할당된 객체를 선택하면 웹서버가 비디오 편집 활성화 입력(input_activation_edit)을 발생시키는 방법으로 구현할 수 있다.
비디오 시퀀스 설정 모듈(130)은 입력 인터페이스 모듈(110)로부터 비디오 편집 활성화 입력(input_activation_edit)의 수신에 따라 원본 프레임의 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스(sequence_video_original)로 정의하여 원본 비디오 컨텐츠(content_video_original)를 제 1 원본 비디오 시퀀스(sequence_video_original_1st) 내지 제 n 원본 비디오 시퀀스(sequence_video_original_nth)(n은 2 이상의 정수)로 구분하는 기능을 수행한다. 즉, 비디오 시퀀스 설정 모듈(130)은 연속적으로 구성되는 원본 비디오 컨텐츠(content_video_original)를 여러 개의 원본 비디오 시퀀스(sequence_video_original)들로 분할하는 기능을 수행한다.
이때 비디오 시퀀스 설정 모듈(130)은 원본 비디오 컨텐츠(content_video_original)를 여러 가지 기준에 의해 원본 비디오 시퀀스(sequence_video_original)들로 분할할 수 있다. 첫 번째는 촬영 객체들을 기준으로 분할하는 것이고, 두 번째는 카메라의 이동 또는 회전을 검출하여 이를 기준으로 분할하는 것이고, 세 번째는 랜덤한 간격으로 분할하는 것이고, 네 번째는 실질적으로 균일한 수의 프레임들로 균등 분할하는 것이다.
먼저, 촬영 객체들을 기준으로 분할하는 실시예에 따르면, 비디오 컨텐츠 자동 편집 시스템(100)은 프레임별 이미지 분석을 수행하여 프레임에 포함되는 촬영 객체를 검출하는 프레임 이미지 처리 모듈(120)을 더 포함하여 구성된다. 예컨대 도 2의 실시예의 경우 프레임 이미지 처리 모듈(120)은 원본 비디오 시퀀스(sequence_video_original)의 이미지 분석을 통해 프레임 1(frame 1) 내지 3(frame 3)은 한 명의 사람을 촬영 객체로 인식하고, 프레임 4(frame 4) 내지 프레임 6(frame 6)은 두 명의 사람을 촬영 객체로 인식하고, 프레임 7(frame 7) 내지 프레임 9(frame 9)는 한 대의 자동차를 촬영 객체로 인식한다. 다음으로, 비디오 시퀀스 설정 모듈(130)은, 프레임 이미지 처리 모듈(120)의 의해 검출된 촬영 객체를 기준으로 연속적인 프레임들을 하나의 원본 비디오 시퀀스로 정의하도록 구성한다.
이러한 실시예에 따르면, 프레임 이미지 처리 모듈(120)이 원본 비디오 컨텐츠(content_video_original)을 촬영 객체 별로 분할하여 원본 비디오 시퀀스(sequence_video_original)들로 구분함으로써 자동으로 장면(scene) 검출하여 비디오 컨텐츠 편집 이후에도 일정한 비디오의 맥락을 유지하는 효과를 제공한다.
다음으로, 카메라 이동 또는 회전을 검출하여 이를 기준으로 분할하는 실시예에 따르면, 비디오 컨텐츠 자동 편집 시스템(100)은 카메라 이동 중 촬영된 프레임들 또는 카메라 회전 중 촬영된 프레임들인 카메라 조정 프레임(frame_moving)들을 검출하는 프레임 이미지 처리 모듈(120)을 더 포함하고, 비디오 시퀀스 설정 모듈(130)은 프레임 이미지 처리 모듈(120)에 의해 검출된 카메라 조정 프레임(frame_moving)들을 기준으로 연속적인 프레임들을 하나의 원본 비디오 시퀀스(sequence_video_original)로 정의한다.
이때 프레임 이미지 처리 모듈(120)은 비디오 컨텐츠에서 동작 정보를 검출하는 알려진 기법 예컨대 차영상 분석(analysis of difference image), 블럭 정합 알고리즘(block matching algorithm), 광류기반 분석(optical flow analysis) 등을 적용하여 카메라 이동 중 촬영된 프레임들 또는 카메라 회전 중 촬영된 프레임들을 검출할 수 있다. 이러한 실시예에 따르면 장면의 전환을 카메라 조정 프레임 검출을 통해 자동으로 검출하여 비디오 컨텐츠 편집 이후에도 특히 카메라 전환에 의한 장면전환이 있는 원본 비디오 컨텐츠(content_video_original)에 있어서 일정한 비디오의 맥락을 유지하는 효과를 제공한다.
다음으로, 랜덤한 간격으로 분할하는 실시예에 따르면, 비디오 시퀀스 설정 모듈(130)은 랜덤한 수의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스(sequence_video_original)로 정의한다.
이러한 실시예에 따르면, 원본 비디오 시퀀스(sequence_video_original)들은 각각 다른 프레임 수를 갖게 되어 비디오 컨텐츠 편집 이후에 편집된 재배치 비디오 컨텐츠(content_video_shuffled)의 역동성 및 의외성이 높아지고 별도의 프레임 이미지 처리 모듈(130)을 요하지 않아 시스템 구성이 간단해지는 효과가 있다.
다음으로, 실질적으로 균일한 수의 프레임들로 균등 분할하는 실시예에 따르면, 비디오 시퀀스 설정 모듈(130)은 실질적으로 동일한 수의 연속적인 프레임들의 집합으로 원본 비디오 시퀀스(sequence_video_original)들을 정의한다.
이때 프레임들이 균일하게 나누어지지 않는 경우가 있을 수 있기 때문에 특정 원본 비디오 시퀀스(sequence_video_original)는 다른 원본 비디오 시퀀스(sequence_video_original)에 비해 다소 적거나 다소 많은 수의 프레임들로 구성될 수 있다.
이러한 실시예에 따르면, 별도의 프레임 이미지 처리 모듈(130)을 요하지 않아 시스템 구성이 간단해지는 효과가 있다.
한편, 상기의 여러 가지 원본 비디오 시퀀스(sequence_video_original) 분할방법들은 반드시 택일적으로 적용되야 하는 것은 아니고, 여러 방법이 중첩적으로 사용되거나 랜덤하게 선택되도록 구성할 수 있다. 예컨대 프레임 이미지 처리 모듈(120)이 10분 길이의 원본 비디오 컨텐츠(content_video_original)에서 두 종류의 촬영 객체를 각각 전반부 5분 및 후반부 5분에서 인식하는 경우, 하나의 원본 비디오 시퀀스(sequence_video_original)의 길이가 너무 길기 때문에 전반부 5분을 다시 랜덤하게 또는 균등하게 분할하고, 후반부 5분을 다시 랜덤하게 또는 균등하게 분할 할 수 있다.
다른 예로는 프레임 이미지 처리 모듈(130)이 10분 길이의 원본 비디오 컨텐츠(content_video_original)에서 한 종류의 촬영 객체만을 인식한 경우, 프레임 이미지 처리 모듈(120)은 다음으로 카메라 조정 프레임(frame_moving)의 유무를 검출하고, 카메라 조정 프레임(frame_moving)으로도 충분한 원본 비디오 시퀀스(sequence_video_original) 분할이 되지 않는 경우 랜덤 분할 또는 균등 분할을 통해 원본 비디오 컨텐츠(content_video_original)를 복수의 원본 비디오 시퀀스(sequence_video_original)들로 분할할 수 있다.
비디오 시퀀스 재배치 모듈(140)은 적어도 제 k 원본 비디오 시퀀스(sequence_video_original_kth)(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스(subset_sequence_video)가 제 k+1 원본 비디오 시퀀스(sequence_video_original_k+1th)(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스(sequence_video_original_k-1th)에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠(content_video_shuffled)를 생성하는 기능을 수행한다.
통상의 비디오 컨텐츠 편집에 있어서 사용자는 편집할 편집 프레임들을 선택하여 선행 또는 후행하는 프레임에 삽입하거나 삭제한다. 그런데 숙련된 편집기술을 보유하지 않은 일반 사용자는 비디오 컨텐츠 편집작업에 많은 시간이 소요된다. 또한 전문 편집장비가 아닌 스마트폰과 같은 터치 인터페이스를 통해서 사용자가 편집구간을 정밀하게 선택하는 것은 더욱 어려운 문제가 있다. 그리고 단일의 카메라로 촬영된 비디오 컨텐츠는 시간 순서대로 촬영되기 때문에 동일한 프레임들이 지루하게 연속되는 것이 일반적이다.
그런데, 비디오 시퀀스 설정 모듈(130)이 구분한 원본 비디오 시퀀스(sequence_video_original)[원본 비디오 시퀀스(sequence_video_original)의 전체를 서브셋 비디오 시퀀스(subset_sequence_video)로 설정하는 경우] 또는 원본 비디오 시퀀스(sequence_video_original)의 일부 구간인 서브셋 비디오 시퀀스(subset_sequence_video)를 비디오 시퀀스 재배치 모듈(140)이 자동으로 편집구간으로 설정하기 때문에 사용자로부터 편집구간의 선택을 입력받을 필요가 없는 효과를 제공한다. 또한 편집구간으로 선택된 원본 비디오 시퀀스(sequence_video_original) 또는 서브셋 비디오 시퀀스(subset_sequence_video)를 랜덤하게 임의의 프레임으로 재배치하기 때문에 사용자로부터 편집구간이 이동될 지점의 선택을 입력받을 필요가 없는 효과를 제공한다. 마지막으로, 사용자가 촬영한 원본 비디오 컨텐츠(content_video_original)와 비교하여 화면전환이 많고 시간 순서에 따르지 않는 의외성이 부가된 재배치 비디오 컨텐츠(content_video_shuffled)를 얻을 수 있는 효과를 제공한다.
한편 비디오 시퀀스 재배치 모듈(140)은 임의의 제 k 원본 비디오 시퀀스(sequence_video_original_kth)로서 n 개의 원본 비디오 시퀀스(sequence_video_original)들 중 반드시 한 개만 선택해야 하는 것은 아니고, 복수 개의 원본 비디오 시퀀스(sequence_video_original)들을 선택하여 랜덤하게 재배치함으로써 재배치 비디오 컨텐츠(content_video_shuffled)의 의외성 및 역동성을 높일 수 있다.
또한 비디오 시퀀스 재배치 모듈(140)은 제 k 원본 비디오 시퀀스(sequence_video_original_kth)의 전체를 서브셋 비디오 시퀀스(subset_sequence_video)로 선택할 수 있지만, 그 일부만을 서브셋 비디오 시퀀스(subset_sequence_video)로 선택함할 수 있다. 따라서, 유사한 프레임들의 집합으로 구성되는 단일의 원본 비디오 시퀀스(sequence_video_original)를 여러 개의 서브셋 비디오 시퀀스(subset_sequence_video)들로 선택함으로써 재배치 비디오 컨텐츠(content_video_shuffled)의 의외성 및 역동성을 보다 높일 수 있다.
비디오 시퀀스 재배치 모듈(140)이 원본 비디오 시퀀스(sequence_video_original)의 일부를 서브셋 비디오 시퀀스(subset_sequence_video)로 선택할 때 각 선택되는 구간의 프레임 수는 랜덤하게 선택할 수도 있고, 미리 설정된 프레임 수로 선택할 수도 있다. 실시예에 따라서 단일의 원본 비디오 시퀀스(sequence_video_original)를 구성하는 복수의 서브셋 비디오 시퀀스(subset_sequence_video)들은 동일한 프레임 수를 가질 수도 있고, 서로 다른 프레임 수를 가질 수도 있다.
서브셋 비디오 시퀀스(subset_sequence_video)는 예컨대 연산처리장치의 난수 발생에 의해 임의의 원본 비디오 시퀀스(sequence_video_original)에 선행 또는 후행하도록 구성할 수 있다. 또한 서브셋 비디오 시퀀스(subset_sequence_video)가 재배치될 다른 원본 비디오 시퀀스(sequence_video_original) 역시 서브셋 비디오 시퀀스(subset_sequence_video)로 분할될 수 있기 때문에 재배치되는 서브셋 비디오 시퀀스(subset_sequence_video)는 다른 원본 비디오 시퀀스(sequence_video_original)의 중간에 삽입되는 형태로 재배치될 수도 있다.
그런데, 재배치 비디오 컨텐츠(content_video_shuffled)의 재배치된 서브셋 비디오 시퀀스(subset_sequence_video)의 시작지점 및 종료지점에서 화면의 갑작스런 전환이 발생한다. 이 경우 산출물에 해당하는 재배치 비디오 컨텐츠(content_video_shuffled)의 영상품질을 떨어뜨리는 문제가 있다. 이를 해결하기 위해, 비디오 컨텐츠 자동 편집 시스템(100)은 재배치된 서브셋 비디오 시퀀스(subset_sequence_video)의 시작지점 또는 종료지점 중 적어도 하나에 화면 전환 효과를 적용하는 화면 전환 효과 모듈(149)을 더 포함하는 것이 바람직하다. 화면 전환 효과는 자연스러운 장면변화를 이끌어내기 위한 것으로 페이드-인, 페이드-아웃, 화면 넘기기 애니메이션 효과 등을 예시할 수 있다.
서브셋 비디오 시퀀스(subset_sequence_video)는 랜덤하게 재배치되는 것이 원칙이지만 실시예에 따라서는 추가적인 규칙이 적용될 수 있다. 예컨대 제 3 원본 비디오 시퀀스(sequence_video_origina_3rd)의 제 1 서브셋 비디오 시퀀스(subset_sequence_video)가 랜덤하게 재배치되고 난 후 제 3 원본 비디오 시퀀스(sequence_video_original_3rd)의 제 2 서브셋 비디오 시퀀스(subset_sequence_video_2th)가 랜덤하게 재배치되었는데 제 1 서브셋 비디오 시퀀스(subset_sequence_video_1st)와 제 2 서브셋 비디오 시퀀스(subset_sequence_video_2nd)가 우연히 다시 결합하거나 너무 인접하는 경우가 발생할 수 있다. 이 경우 재배치 비디오 컨텐츠(content_video_shuffled)의 의외성 및 역동성이 저감된다. 이를 방지하기 위해 동일한 원본 비디오 시퀀스(sequence_video_original)를 구성하는 복수의 서브셋 비디오 시퀀스(subset_sequence_video)는 랜덤하게 배치되되 예컨대 최소 300 프레임 이상 서로 이격되는 규칙 등을 부가하는 것이 바람직하다.
실시예에 따라서는 비디오 시퀀스 재배치 모듈(140)이 비디오 시퀀스를 재배치할 때 사용자 단말기의 디스플레이를 통해 예컨대 각 비디오 시퀀스의 프레임 중 어느 하나를 썸네일로 구성하고, 원본 비디오 컨텐츠(content_video_original)의 순서에 따라 배열된 썸네일들이 흔들리면서 랜덤 조합된 재배치 비디오 컨텐츠(content_video_shuffled)의 순서에 따라 재배열되는 애니매이션을 시각적으로 사용자에게 출력하도록 구성할 수도 있다.
재배치 비디오 컨텐츠 저장 모듈(150)은 재배치 비디오 컨텐츠(content_video_shuffled) 또는 재배치 비디오 컨텐츠(content_video_shuffled)의 원본 비디오 시퀀스(sequence_video_original)들 및 서브셋 비디오 시퀀스(subset_sequence_video)의 배치 순서에 대한 정보인 시퀀스 배치 정보(info_arrange_sequences)를 저장하는 기능을 수행한다. 예컨대 재배치 비디오 컨텐츠 저장 모듈(150)은 재배치 비디오 컨텐츠(content_video_shuffled)를 단일의 동영상 파일로 인코딩하여 재배치 비디오 컨텐츠(content_video_shuffled)의 동영상 파일을 저장할 수 있다. 재배치 비디오 컨텐츠 저장 모듈(150)은 하드드라이버, 플래쉬 메모리, SSD와 같이 재사용 가능하게 데이터를 저장하는 데이터 저장 매체일 수도 있고, RAM(Random Access Memory)과 같이 일시적으로 데이터를 저장하는 버퍼 메모리일 수도 있다.
한편 재배치 비디오 컨텐츠(content_video_shuffled)의 동영상 파일을 저장하면 예컨대 서로 유사한 동영상 파일인 원본 비디오 컨텐츠(content_video_original)의 동영상 파일과 재배치 비디오 컨텐츠(content_video_shuffled)의 동영상 파일이 모두 저장되기 때문에 저장용량이 제한적인 스마트폰 등의 모바일 단말기에서 활용이 어려운 문제가 있다. 이러한 문제를 해결하는 방법으로는, 원본 비디오 파일을 모바일 단말기의 저장장치에서 삭제하거나, 재배치 비디오 컨텐츠(content_video_shuffled)를 통신망을 통해 웹서버에 저장할 수 있다. 또 다른 방법으로는 비디오 시퀀스 재배치 모듈(140)이 원본 비디오 컨텐츠(content_video_original)의 메타정보로서 예컨대 원본 비디오 시퀀스(sequence_video_original)들 및 서브셋 비디오 시퀀스(subset_sequence_video)의 식별 정보, 시작시간 정보, 종료시간 정보, 원본 비디오 시퀀스(sequence_video_original)들 및 서브셋 비디오 시퀀스(subset_sequence_video)의 배치 순서를 저장하고, 재배치 비디오 컨텐츠(content_video_shuffled) 자체는 저장하지 않음으로써 저장공간의 점유를 최소화할 수 있다.
사용자 단말기에 재배치 비디오 컨텐츠 저장 모듈(150)이 구현된 실시예에 있어서, 재배치 비디오 컨텐츠 저장 모듈(150)에 저장된 재배치 비디오 컨텐츠(content_video_shuffled)는 자동 편집의 완료 또는 사용자의 재생요청에 의해 로딩되어 사용자 단말기를 통해 사용자에게 제공될 수 있다. 서버-클라이언트 시스템으로서 사용자 단말기와 통신망을 통해 연결되는 서버에 재배치 비디오 컨텐츠 저장 모듈(150)이 구현된 실시예에 있어서, 재배치 비디오 컨텐츠 저장 모듈(150)에 저장된 재배치 비디오 컨텐츠(content_video_shuffled)는 자동 편집의 완료 또는 사용자의 재생요청에 의해 통신망을 통해 스트리밍 방식 또는 다운로드 방식 등으로 사용자 단말기에 제공되도록 구성할 수 있다.
사용자 단말기에 재배치 비디오 컨텐츠 저장 모듈(150)이 구현된 실시예에 있어서, 재배치 비디오 컨텐츠 저장 모듈(150)에 저장된 시퀀스 배치 정보(info_arrange_sequences)는 자동 편집의 완료 또는 사용자의 재생요청에 의해 로딩되어 원본 비디오 컨텐츠(content_video_original)의 원본 비디오 시퀀스(sequence_video_original)들 또는 서브셋 비디오 시퀀스(subset_sequence_video)들을 시퀀스 배치 정보(info_arrange_sequences)에 따라 실시간 재배치하여 재배치 비디오 컨텐츠(content_video_shuffled)를 사용자에게 제공할 수 있다. 서버-클라이언트 시스템으로서 사용자 단말기와 통신망을 통해 연결되는 서버에 재배치 비디오 컨텐츠 저장 모듈(150)이 구현된 실시예에 있어서, 재배치 비디오 컨텐츠 저장 모듈(150)에 저장된 시퀀스 배치 정보(info_arrange_sequences)는 자동편집의 완료 또는 사용자의 재생요청에 의해 로딩되어 원본 비디오 컨텐츠(content_video_original)의 원본 비디오 시퀀스(sequence_video_original)들 또는 서브셋 비디오 시퀀스(subset_sequence_video)들을 시퀀스 배치 정보(info_arrange_sequences)에 따라 실시간 재배치하여 통신망을 통해 스트리밍 방식 또는 다운로드 방식으로 재배치 비디오 컨텐츠(content_video_shuffled)를 사용자에게 제공할 수 있다.
이하에서는 도 2의 실시예를 통해 각 구성요소의 기능을 보다 상세히 설명한다. 도 2는 본 발명의 다른 실시예에 따른 재배치 비디오 컨텐츠(content_video_sheffled)의 생성예를 도시하는 비디오 컨텐츠 예시도이다. 도 2에 도시된 바와 같이, 원본 비디오 컨텐츠(content_video_original)는 프레임 1(frame 1) 내지 프레임 9(frame 9)로 구성되고, 프레임 1(frame 1) 내지 프레임 3(frame 3)에서는 한 명의 사람이 촬영되었고, 프레임 4(frame 4) 내지 프레임 6(frame 6)에서는 두 명의 사람들이 촬영되었고, 프레임 7(frame 7) 내지 프레임 9(frame 9)에서는 자동차가 촬영되었다.
사용자가 본 발명에 따른 비디오 컨텐츠 자동 편집 시스템(100)이 구현된 애플리케이션을 구동하고 원본 비디오 컨텐츠(content_video_original)를 선택하여 터치스크린 등의 입력 인터페이스 모듈(110)을 비디오 편집 활성화 입력(input_activation_edit)을 입력하면, 비디오 시퀀스 설정 모듈(130)은 프레임 1(frame 1) 내지 프레임 3(frame 3)을 제 1 원본 비디오 시퀀스(sequence_video_original_1st), 프레임 4(frame 4) 내지 프레임 6(frame 6)을 제 2 원본 비디오 시퀀스(sequence_video_original_2nd), 프레임 7(frame 7) 내지 프레임 9(frame 9)를 제 3 원본 비디오 시퀀스(sequence_video_original_3rd)로 묶고, 연속 프레임인 프레임 3(frame 3) 및 프레임 4(frame 4), 프레임 6(frame 6) 및 프레임 7(frame 7)은 별개의 원본 비디오 시퀀스(sequence_video_original)로 구분한다. 이때 비디오 시퀀스 설정 모듈(130)은 전술한 바와 같이 프레임 이미지 처리 모듈(120)을 통한 촬영객체 또는 카메라 조정 프레임(frame_moving)일 수 있으며, 다른 방법으로는 랜덤한 수의 프레임 구분 또는 균일한 수의 프레임 구분을 통해 원본 비디오 시퀀스(sequence_video_original)를 구분할 수 있다.
다음으로, 비디오 시퀀스 재배치 모듈(140)은 제 2 원본 비디오 시퀀스(sequence_video_original_2nd)를 제 3 원본 비디오 시퀀스(sequence_video_original_3rd)의 이후에 재배치한다. 비디오 시퀀스 재배치 모듈(140)의 비디오 시퀀스 재배치는 랜덤하게 이루어진다. 이 경우는 비디오 시퀀스 재배치 모듈(140)은 제 2 원본 비디오 시퀀스(sequence_video_original_2nd)의 전체 프레임을 서브셋 비디오 시퀀스(subset_sequence_video)로 정의한 것이다.
마지막으로, 재배치 비디오 컨텐츠 저장 모듈(150)은 제 1 원본 비디오 시퀀스(sequence_video_original), 제 3 원본 비디오 시퀀스(sequence_video_original_3rd), 제 2 원본 비디오 시퀀스(sequence_video_original_2nd)의 순서로 재배치된 재배치 비디오 컨텐츠(content_video_shuffled) 또는 시퀀스 배치 정보(info_arrange_sequences)를 저장한다.
도 2에 도시된 바와 같이 재배치 비디오 컨텐츠(content_video_shuffled)는 연속되는 장면의 중간에 다른 장면이 삽입되기 때문에 역동적인 영상으로 변경되고, 사용자의 의도적인 편집행위 없이 재배치 비디오 컨텐츠(content_video_shuffled)가 생성되기 때문에 컨텐츠의 의외성이 부가되는 효과를 제공한다.
도 3은 본 발명의 다른 실시예에 따른 재배치 비디오 컨텐츠의 생성례를 도시하는 비디오 컨텐츠 예시도이다. 도 3에 도시된 바와 같이, 원본 비디오 컨텐츠(content_video_original)의 프레임 구성 및 비디오 시퀀스 설정 모듈(130)에 의한 시퀀스 구분은 도 2의 실시예와 동일하므로 중복된 설명은 생략한다.
비디오 시퀀스 재배치 모듈(140)은 제 3 원본 비디오 시퀀스(sequence_video_original_3rd)의 프레임 7(frame 7)을 제 1 서브셋 비디오 시퀀스(subset_sequence_video_1st)로, 제 3 원본 비디오 시퀀스(sequence_video_original_3rd)의 프레임 8(frame 8) 및 프레임 9(frame 9)를 제 2 서브셋 비디오 시퀀스(subset_sequence_video_2nd)로 구분한다. 비디오 시퀀스 재배치 모듈(140)은 제 1 서브셋 비디오 시퀀스(subset_sequence_video_1st)를 제 1 원본 비디오 시퀀스(sequence_video_original_1st)의 선행하도록 재배치하고, 제 2 서브셋 비디오 시퀀스(subset_sequence_video_2nd)를 제 1 원본 비디오 시퀀스(sequence_video_original_1st)와 제 2 원본 비디오 시퀀스(sequence_video_original_2nd) 사이에 재배치한다. 비디오 시퀀스 재배치 모듈(140)의 비디오 시퀀스 재배치는 랜덤하게 이루어진다.
마지막으로, 재배치 비디오 컨텐츠 저장 모듈(150)은 제 1 서브셋 비디오 시퀀스(subset_sequence_video_1st), 제 1 원본 비디오 시퀀스(sequence_video_original_1st), 제 2 서브셋 비디오 시퀀스(subset_sequence_video_2nd), 제 2 원본 비디오 시퀀스(sequence_video_original_2nd)의 순서로 재배치된 재배치 비디오 컨텐츠(content_video_shuffled) 또는 시퀀스 배치 정보(info_arrange_sequences)를 저장한다.
도 3에 도시된 바와 같이 재배치 비디오 컨텐츠(content_video_shuffled)는 단일의 원본 비디오 시퀀스(sequence_video_original)를 복수의 서브셋 비디오 시퀀스(subset_sequence_video)들로 분할하여 각각 분산배치하기 때문에 도 2의 실시예보다 더욱 역동적인 영상으로 변경되고, 재배치 비디오 컨텐츠(content_video_shuffled)의 의외성 역시 도 2의 실시예보다 증가하는 효과를 제공한다.
한편, 도 2 및 도 3에서는 단일의 원본 비디오 컨텐츠(content_video_original)의 비디오 시퀀스들을 재배치하는 경우를 설명하였지만 복수의 원본 비디오 컨텐츠(content_video_original)들의 비디오 시퀀스들을 교차하여 재배치하면 재배치 비디오 컨텐츠(content_video_shuffled)의 역동성 및 의외성이 더욱 증가한다.
이를 위해, 비디오 시퀀스 설정 모듈(130)은 복수의 원본 비디오 컨텐츠(content_video_original)들을 제 1 원본 비디오 시퀀스(sequence_video_original_1st) 내지 제 n 원본 비디오 시퀀스(sequence_video_original_nth)로 구분하고, 비디오 시퀀스 재배치 모듈(140)은, 단일의 재배치 비디오 컨텐츠(content_video_shuffled)를 생성하도록 구성한다. 즉, 복수의 원본 비디오 컨텐츠(content_video_original)를 자동 편집하는 실시예에 있어서 각 원본 비디오 컨텐츠(content_video_original)별로 원본 비디오 시퀀스(sequence_video_original)들을 구분한 후 이러한 원본 비디오 시퀀스(sequence_video_original)들을 모두 랜덤하게 재배치하여 단일의 재배치 비디오 컨텐츠(content_video_shuffled)를 생성한다.
이때 복수의 원본 비디오 컨텐츠(content_video_original)들이 서로 프레임 종횡비가 다른 경우 비디오 컨텐츠 자동 편집 시스템(100)은 이를 균일하게 자동으로 조정하는 것이 바람직하다.
도 4는 본 발명의 다른 실시예에 따른 복수의 원본 비디오 컨텐츠(content_video_original)를 이용한 재배치 비디오 컨텐츠(content_video_shuffled)의 생성예를 도시하는 비디오 컨텐츠 예시도이다. 도 4에 도시된 바와 같이, 제 1 원본 비디오 컨텐츠(content_video_original_1st)는 프레임 1-1(frame 1-1) 내지 프레임 1-6(frame 1-6)으로 구성되고, 제 2 원본 비디오 컨텐츠(content_video_original_2nd)는 프레임 2-1(frame 2-1) 내지 프레임 2-3(frame 2-3)으로 구성된다. 프레임 1-1(frame 1-1) 내지 프레임 1-3(frame 1-3)에서는 한 명의 사람이 촬영되었고, 프레임 1-4(frame 1-4) 내지 프레임 1-6(frame 1-6)에서는 두 명의 사람들이 촬영되었고, 프레임 2-1(frame 2-1) 내지 프레임 2-3(frame 2-3)에서는 집이 촬영되었다.
사용자가 본 발명에 따른 비디오 컨텐츠 자동 편집 시스템(100)이 구현된 애플리케이션을 구동하고 복수의 원본 비디오 컨텐츠(content_video_original)들을 선택하여 터치스크린 등의 입력 인터페이스 모듈(110)을 비디오 편집 활성화 입력(input_activation_edit)을 입력하면, 비디오 시퀀스 설정 모듈(130)은 프레임 1-1(frame 1-1) 내지 프레임 1-3(frame 1-3)을 제 1 원본 비디오 시퀀스(sequence_video_original_1st), 프레임 1-4(frame 1-4) 내지 프레임 1-6(frame 1-6)을 제 2 원본 비디오 시퀀스(sequence_video_original_2nd), 프레임 2-1(frame 2-1) 내지 프레임 2-3(frame 2-3)을 제 3 원본 비디오 시퀀스(sequence_video_original_3rd)로 묶고, 연속 프레임인 프레임 1-3(frame 1-3) 및 프레임 1-4(frame 1-4), 프레임 1-6(frame 1-6) 및 프레임 2-1(frame 2-1)은 별개의 원본 비디오 시퀀스(sequence_video_original)로 구분한다. 이때 비디오 시퀀스 설정 모듈(130)은 전술한 바와 같이 프레임 이미지 처리 모듈(120)을 통한 촬영객체 또는 카메라 조정 프레임일 수 있으며, 다른 방법으로는 랜덤한 수의 프레임 구분 또는 균일한 수의 프레임 구분을 통해 원본 비디오 시퀀스(sequence_video_original)를 구분할 수 있다.
다음으로, 비디오 시퀀스 재배치 모듈(140)은 제 2 원본 비디오 시퀀스(sequence_video_original_2nd)를 제 3 원본 비디오 시퀀스(sequence_video_original_3rd) 이후로 재배치한다. 비디오 시퀀스 재배치 모듈(140)의 비디오 시퀀스 재배치는 랜덤하게 이루어진다. 이 경우는 비디오 시퀀스 재배치 모듈(140)은 제 2 원본 비디오 시퀀스(sequence_video_original_2nd)의 전체 프레임을 서브셋 비디오 시퀀스(subset_sequence_video)로 정의한 것이다.
마지막으로, 재배치 비디오 컨텐츠 저장 모듈(150)은 제 1 원본 비디오 시퀀스(sequence_video_original_1st), 제 3 원본 비디오 시퀀스(sequence_video_original_3rd), 제 2 원본 비디오 시퀀스(sequence_video_original_2nd)의 순서로 재배치된 재배치 비디오 컨텐츠(content_video_shuffled) 또는 시퀀스 배치 정보(info_arrange_sequences)를 저장한다.
한편 랜덤하게 자동 편집된 재배치 비디오 컨텐츠(content_video_shuffled) 시청 후 사용자가 또 다른 재배치 비디오 컨텐츠(content_video_shuffled)를 요청하는 경우, 첫 번째로는 원본 비디오 시퀀스(sequence_video_original)를 다시 랜덤하게 재배치하여 2차 재배치 비디오 컨텐츠(content_video_shuffled_2nd)를 생성할 수 있고, 두 번째로는 재배치 비디오 컨텐츠(content_video_shuffled)를 다시 랜덤하게 자동 편집하도록 구성할 수 있다.
먼저, 재배치 비디오 컨텐츠(content_video_shuffled) 생성 후 사용자의 요청에 따라 원본 비디오 시퀀스(sequence_video_original)를 다시 랜덤하게 재배치하여 2차 재배치 비디오 컨텐츠(content_video_shuffled_2nd)를 생성하는 실시예를 설명한다.
이를 위해 비디오 시퀀스 재배치 모듈(140)은 재배치 비디오 컨텐츠(content_video_shuffled)의 생성 이후 입력 인터페이스 모듈(110)로부터 추가 재배치 활성화 입력(input_activation_shuffled_renewal)의 수신에 따라 원본 비디오 시퀀스(sequence_video_origingal) 및/또는 서브셋 비디오 시퀀스(subset_sequence_video)를 다시 랜덤하게 재배치하여 2차 재배치 비디오 컨텐츠(content_video_shuffled_2nd)를 생성하도록 구성한다.
예컨대 사용자는 사용자 단말기에서 재배치 비디오 컨텐츠(content_video_shuffled)를 플레이하여 확인하는 중 또는 확인한 후 사용자 단말기를 흔들거나 추가 재배치 활성화 입력(input_activation_shuffled_renewal) 객체를 선택하는 방법을 이용하여 비디오 컨텐츠 자동 편집 시스템(100)은 재배치 비디오 컨텐츠(content_video_original)에 대해 다르게 랜덤하게 편집된 2차 재배치 비디오 컨텐츠(content_video_shuffled_2nd)를 생성할 수 있다.
실시예에 따라서는 비디오 시퀀스 설정 모듈(130)이 처음 재배치 비디오 컨텐츠(content_video_shuffled)에 비해 2차 재배치 비디오 컨텐츠(content_video_shuffled_2nd)에 보다 많은 변화가 발생하도록 구성할 수 있다.
다음으로, 재배치 비디오 컨텐츠(content_video_shuffled) 생성 후 사용자의 요청에 따라 재배치 비디오 컨텐츠(content_video_shuffled)를 자동 편집하여 다른 재배치 비디오 컨텐츠(content_video_shuffled)를 만드는 실시예를 설명한다.
이를 위해 비디오 시퀀스 설정 모듈(130)은 재배치 비디오 컨텐츠(content_video_shuffled)의 생성 이후 입력 인터페이스 모듈(110)로부터 비디오 추가 편집 활성화 입력(input_activation_iteration)의 수신에 따라 재배치 비디오 컨텐츠(content_video_shuffled)를 새로운 원본 비디오 컨텐츠(content_video_original)로서 비디오 시퀀스 설정 모듈(130), 비디오 시퀀스 재배치 모듈(140) 및 재배치 비디오 컨텐츠 저장 모듈(150)은 전술한 기능을 동일하게 수행함으로써 2중으로 자동 편집된 2차 재배치 비디오 컨텐츠(content_video_shuffled_2nd)를 얻을 수 있다.
한편, 사용자의 선택에 따라 원본 비디오 시퀀스(sequence_video_original)를 구성하는 프레임 수를 변경하도록 구성하는 것이 바람직하다. 이러한 실시예에 따르면 역동적인 재배치 비디오 컨텐츠(content_video_shuffled)를 원하는 사용자에게는 보다 적은 수의 프레임 수로 구성되도록 원본 비디오 시퀀스(content_video_original)를 분할하고, 원본 비디오 컨텐츠의 맥락을 유지하고자 하는 사용자에게는 보다 많은 수의 프레임 수로 구성되도록 원본 비디오 시퀀스(content_video_original)를 분할하도록 한다.
이를 위해, 입력 인터페이스 모듈(110)은 디스플레이에 대한 사용자의 터치를 비디오 편집 활성화 입력(input_activation_edit)으로 인식하는 터치 센싱부를 포함한다. 이때 터치 센싱부는 사용자의 터치 입력 시간 및/또는 터치 입력 압력을 구분하여 인식할 수 있는 것이 바람직하다.
비디오 시퀀스 설정 모듈(130)은 사용자의 터치 시간의 증감 또는 터치 압력의 증감에 따라 연속적인 프레임들의 집합에 포함되는 프레임 수를 변경하도록 구성한다.
이러한 실시예에 따르면 사용자는 원본 비디오 컨텐츠(content_video_original)를 선택하고, 예컨대 사용자가 터치스크린 상에서 비디오 편집 활성화 입력(input_activation_edit) 객체를 터치하는 시간을 증가시키면 재배치 비디오 컨텐츠(content_video_shuffled)의 변화율을 증가시키거나 감소시킬 수 있다. 또는 터치압력을 구분하는 터치스크린에 있어서 사용자가 터치스크린 상에서 비디오 편집 활성화 입력(input_activation_edit) 객체를 터치하는 압력을 증가시키면 재배치 비디오 컨텐츠(content_video_shuffled)의 변화율을 증가시키거나 감소시킬 수 있다.
다른 실시예로는 입력 인터페이스 모듈(110)은 디바이스 흔들림을 감지하여 비디오 편집 활성화 입력(input_activation_edit)으로 인식하는 움직임 센싱부를 포함하고, 비디오 시퀀스 재배치 모듈(140)은 디바이스 흔들림 시간의 증감 또는 흔들림 세기의 증감에 따라 연속적인 프레임들의 집합에 포함되는 프레임 수를 변경하도록 구성한다.
이러한 실시예에 따르면 사용자는 원본 비디오 시퀀스(sequence_video_original)를 선택하고, 예컨대 사용자가 움직임 센싱부가 포함된 스마트폰을 흔드는 시간을 증가시키면 재배치 비디오 컨텐츠(content_video_shuffled)의 변화율을 증가시키거나 감소시킬 수 있다. 또는 예컨대 사용자가 움직임 센싱부가 포함된 스마트폰을 흔드는 세기를 증가시키면 재배치 비디오 컨텐츠(content_video_shuffled)의 변화율을 증가시키거나 감소시킬 수 있다.
한편, 일반 사용자가 촬영한 비디오 컨텐츠에는 예컨대 불필요하게 정적인 장면이 지속되거나 화면의 흔들림, 초점이탈을 야기하는 카메라의 이동, 회전 등으로 비디오 컨텐츠의 가치를 떨어뜨리고 감상을 지루하게 하는 요소가 다수 포함될 수 있다. 본 발명의 바람직한 실시예에 따르면 정적인 장면으로만 촬영된 원본 비디오 시퀀스(sequence_video_original) 전체 또는 원본 비디오 시퀀스(sequence_video_original) 중 정적인 프레임들 또는 카메라 이동 또는 회전에 의해 발생된 프레임들을 자동으로 제거할 수 있다.
정적인 장면으로만 구성된 원본 비디오 시퀀스(sequence_video_original) 전체를 자동으로 제거하기 위해, 비디오 컨텐츠 자동 편집 시스템(100)은 연속하는 원본 비디오 시퀀스(sequence_video_original)들 간의 코릴레이션인 시퀀스 코릴레이션(correlation_sequence)이 설정치 이상인 원본 비디오 시퀀스(sequence_video_original)들 중 적어도 어느 하나를 제거하는 비디오 시퀀스 제거 모듈(142)을 더 포함하는 것이 바람직하다.
시퀀스 코릴레이션(correlation_sequence)은 연속하는 시퀀스들간의 상관관계를 연산하기 위한 코릴레이션으로 예컨대 원본 비디오 시퀀스(sequence_video_original)를 구성하는 모든 프레임들에 대한 통계적인 이미지 특성치를 사용한 상관도이거나 선행하는 원본 비디오 시퀀스(sequence_video_original)의 최종 프레임과 연속으로 후행하는 원본 비디오 시퀀스(sequence_video_original)의 최초 프레임 간의 이미지 특성치를 사용한 상관도이거나 그 둘의 조합으로 구현할 수 있다.
이러한 실시예에 따르면 재배치 비디오 컨텐츠(content_video_shuffled)의 전체 재생시간을 단축하고, 불필요하게 지속되는 정적인 구간을 제거하여 재배치 비디오 컨텐츠(content_video_shuffled)에 대한 사용자의 몰입도를 증가할 수 있는 효과가 있다.
그런데, 비디오 편집의 결과물은 불필요하고 반복적인 부분이 제거되기 때문에 원본 비디오 보다 짧은 재생시간을 갖는 것이 일반적이다. 이때 재배치 비디오 컨텐츠(content_video_shuffled)의 재생시간을 예컨대 1분 30초와 같은 사용자가 설정한 설정시간에 맞추고 싶거나 재배치 비디오 컨텐츠(content_video_shuffled)에 삽입하고자 하는 배경음악의 연주시간에 부합하도록 불필요한 부분을 제거하는 것이 바람직하다.
사용자의 설정시간에 부합하는 재생시간을 갖는 재배치 비디오 컨텐츠(content_video_shuffled)를 생성하기 위해, 비디오 컨텐츠 자동 편집 시스템(100)은 재배치 비디오 컨텐츠(content_video_shuffled)의 목표 재생시간을 설정하는 재생시간 설정 모듈(134), 입력 인터페이스 모듈(110)로부터 비디오 편집 활성화 입력(input_activation_edit)의 수신에 따라 원본 비디오 컨텐츠(content_video_original)의 각 프레임을 분석하여 연속 프레임들 간의 코릴레이션인 프레임 코릴레이션(correlation_frame)을 연산하는 프레임 이미지 처리 모듈(120) 및 목표 재생시간에 부합하도록 제 k 원본 비디오 시퀀스(sequence_video_original_kth) 또는 서브셋 비디오 시퀀스(subset_sequence_video) 중 프레임 코릴레이션이 제 1 설정치 이상인 프레임들을 제거하는 비디오 프레임 제거 모듈(132)을 포함하도록 구성할 수 있다.
배경음악의 연주시간에 부합하는 재배치 비디오 컨텐츠(content_video_shuffled)의 오디오 트랙에 포함될 배경음악을 설정하는 배경음악 설정 모듈(136), 입력 인터페이스 모듈(110)로부터 비디오 편집 활성화 입력(input_activation_edit)의 수신에 따라 원본 비디오 컨텐츠(content_video_original)의 각 프레임을 분석하여 연속 프레임들 간의 코릴레이션인 프레임 코릴레이션(correlation_frame)을 연산하는 프레임 이미지 처리 모듈(120) 및 배경음악의 연주시간에 부합하도록 제 k 원본 비디오 시퀀스(sequence_video_original_kth) 또는 서브셋 비디오 시퀀스(subset_sequence_video) 중 프레임 코릴레이션이 제 1 설정치 이상인 프레임들을 제거하는 비디오 프레임 제거 모듈(132)을 포함하도록 구성할 수 있다.
비디오 프로세싱을 통해 프레임 코릴레이션(correlation_frame)을 연산하는 방법은 비디오 프로세싱 분야에서 다양하게 개발된 바 있다. 예컨대 연속 프레임에서 대응하는 화소의 세기를 비교하여 그 변화율을 통해 프레임 코릴레이션(correlation_frame)을 검출하는 방법, 연속 프레임을 각각 다수의 블럭으로 분할한 후 블럭 간 코릴레이션을 계산하는 방법, 화소의 세기 또는 색상을 히스토그램으로 표현하여 히스토그램 차이로 프레임 코릴레이션(correlation_frame)을 계산하는 방법, 화소 순환 알고리즘(Pixel Rotation Algorithm) 또는 블럭 매칭 알고리즘(Block Matching Algorithm)을 통해 연속하는 프레임 상의 객체의 움직임을 추정하는 방법 등을 예시할 수 있다.
본 발명에서 프레임 코릴레이션(correlation_frame)을 연산하는 방법은 특별히 제한되지 않으며 이미지 프로세싱 분야에서 알려진 방법을 사용하여 프레임 이미지 처리 모듈(120)을 구현할 수 있다.
비디오 프레임 제거 모듈(132)은 상대적인 변화가 적은 프레임들은 제거하고, 상대적인 변화가 많은 프레임은 존치시킨다. 제 1 설정치는 제거될 프레임의 프레임 코릴레이션(correlation_frame)의 하한선이다. 프레임 코릴레이션(correlation_frame)이 제 1 설정치 보다 높으면 연속 프레임들 간 유사성이 높은 것으로 판단하여 해당 프레임들을 제거하고. 반대로 프레임 코릴레이션(correlation_frame)이 제 1 설정치 보다 낮으면 연속 프레임들 간 유사성이 낮은 것으로 판단하여 해당 프레임들을 존치한다.
그런데 비디오 컨텐츠가 풍경 같은 정적인 피사체를 촬영한 경우에는 프레임 코릴레이션(correlation_frame)은 통계적으로 높게 나타나고, 반대로 비디오 컨텐츠가 운동경기 같은 동적인 피사체를 촬영한 경우에는 프레임 코릴레이션(correlation_frame)은 통계적으로 낮게 나타난다. 따라서 실시예에 따라서는 제 1 설정치는 원본 비디오 컨텐츠(content_video_original)의 종류에 따라 적응적으로 변경되도록 구성할 수 있다. 예컨대 프레임 이미지 처리 모듈(120)은 프레임 코릴레이션(correlation_frame)의 평균값을 더 연산하고, 비디오 시퀀스 설정 모듈(130)은 높은 프레임 코릴레이션(correlation_frame) 평균값을 갖는 원본 비디오 컨텐츠(content_video_original)에 대해서는 높은 제 1 설정치를 설정하고, 반대로 낮은 프레임 코릴레이션(correlation_frame) 평균값을 갖는 원본 비디오 컨텐츠(content_video_original)에 대해서는 낮은 제 1 설정치를 설정함으로써 원본 비디오 컨텐츠(content_video_original)의 속성에 따라 제 1 설정치를 적응적으로 조정하는 것이 바람직하다.
단일의 원본 비디오 컨텐츠(content_video_original)에서 정적인 촬영 구간과 동적인 촬영 구간이 공존하는 경우에는 높은 프레임 코릴레이션(correlation_frame) 평균값을 갖는 구간에서는 높게 조정된 제 1 설정치를 설정하고, 낮은 프레임 코릴레이션(correlation_frame) 평균값을 갖는 구간에서는 낮게 조정된 제 1 설정치를 적용하도록 비디오 프레임 제거 모듈(132)을 구현할 수도 있다.
카메라 이동 중 또는 카메라 회전 중 촬영된 프레임들을 자동으로 제거하기 위해, 비디오 컨텐츠 자동 편집 시스템(100)은 제 k 원본 비디오 시퀀스(sequence_video_original_kth) 또는 서브셋 비디오 시퀀스(subset_sequence_video) 중 프레임 이미지 처리 모듈(120)의 연산 결과 카메라 이동 중 촬영된 비디오 프레임 또는 카메라 회전 중 촬영된 프레임인 카메라 조정 프레임(frame_moving)을 제거하는 비디오 프레임 제거 모듈(132)을 더 포함하도록 구성할 수 있다.
이때 프레임 이미지 처리 모듈(120)은 비디오 컨텐츠에서 동작 정보를 검출하는 알려진 기법 예컨대 차영상 분석(analysis of difference image), 블럭 정합 알고리즘(block matching algorithm), 광류기반 분석(optical flow analysis) 등을 적용하여 카메라 이동 중 촬영된 프레임들 또는 카메라 회전 중 촬영된 프레임들을 검출할 수 있다.
이러한 실시예에 따르면 재배치 비디오 컨텐츠(content_video_shuffled)의 전체 재생시간을 단축하고, 불필요한 카메라 조정 구간을 제거하여 재배치 비디오 컨텐츠(content_video_shuffled)에 대한 사용자의 몰입도를 증가할 수 있는 효과가 있다.
한편, 재배치 비디오 컨텐츠(content_video_shuffled)의 일부 구간에서 빨리 재생, 천천히 재생, 또는 역 재생을 함으로써 컨텐츠의 역동성 및 의외성을 높일 수 있다. 이를 위해 비디오 컨텐츠 자동 편집 시스템(100)은, 원본 비디오 시퀀스(sequence_video_original)들 또는 서브셋 비디오 시퀀스(subset_sequence_video) 중 적어도 어느 하나에 압축 재생하는 방법, 연장 재생하는 방법, 또는 역 재생하는 방법 중 적어도 하나의 방법을 랜덤하게 적용하는 재생모드 변경 모듈(148)을 더 포함하는 것이 바람직하다.
한편, 동일한 장면을 복수의 카메라를 통해 촬영하여 교차 편집하는 경우 영화 또는 TV 드라마와 같은 고품질 영상으로 인식된다. 비디오 촬영 기능이 포함된 스마트폰의 보급으로 인해 예컨대 공연장과 같은 곳에서 복수의 사용자들이 서로 다른 각도 및 화각으로 동일한 피사체에 대한 비디오 촬영을 하는 경우가 있다. 이 때 이러한 각각의 비디오 컨텐츠들을 동기화하여 결합하면 다중 카메라 편집을 한 것과 동일한 효과를 제공할 수 있다. 본 발명의 실시예에 따르면 복수의 원본 비디오 컨텐츠(content_video_original)를 자동으로 교차 편집함으로써 재배치 비디오 컨텐츠(content_video_shuffled)의 영상 품질을 향상시킬 수 있다.
이를 위해, 비디오 컨텐츠 자동 편집 시스템(100)은 원본 비디오 컨텐츠(content_video_original)가 촬영된 시간대와 실질적으로 동일한 시간대에 다른 카메라 장치에 의해 촬영된 추가 비디오 컨텐츠(content_video_additional)를 로딩하여 추가 비디오 컨텐츠(content_video_additional)의 적어도 일부의 추가 비디오 시퀀스(sequence_video_additional)를 추출하는 추가 비디오 시퀀스 추출 모듈(122) 및 추가 비디오 시퀀스(sequence_video_additional)를 추가 비디오 시퀀스(sequence_video_additional)가 촬영된 시간대에 선행 또는 후행하는 원본 비디오 시퀀스(sequence_video_original) 중 적어도 어느 하나와 교체하거나 추가 비디오 시퀀스(sequence_video_additional)가 촬영된 시간대에 인접하게 선행 또는 인접하게 후행하는 원본 비디오 시퀀스(sequence_video_original)의 일부 프레임들과 교체하는 추가 비디오 시퀀스 삽입 모듈(144)을 더 포함하여 구성된다.
이러한 실시예에 있어서, 추가 비디오 컨텐츠(content_video_additional)의 개수는 특별히 제한되지 않으며 단일의 추가 비디오 컨텐츠(content_video_additional) 또는 복수의 추가 비디오 컨텐츠(content_video_additional)들일 수 있다. 또한 단일의 추가 비디오 컨텐츠(content_video_additional)에서 추출되는 추가 비디오 시퀀스(sequence_video_additional)의 개수는 특별히 제한되지 않으며 단일의 추가 비디오 시퀀스(sequence_video_additional)가 추출되거나 복수의 추가 비디오 시퀀스(sequence_video_additional)가 추출될 수 있다. 추출되는 비디오 시퀀스의 시작지점과 종료지점은 랜덤하게 선택되거나 미리 설정된 규칙에 의해 자동적으로 추출될 수 있다. 예컨대 프레임 이미지 처리 모듈(120)의 원본 이미지 컨텐츠에 대한 이미지 프로세싱을 통해 주요객체로 분류할 수 있는 인물, 장소, 건물 등이 포함된 프레임들을 검출하고, 주요객체가 포함된 프레임들의 50% 되는 지점부터 100% 되는 지점까지의 구간을 동기화된 추가 비디오 컨텐츠(content_video_additional)의 추가 비디오 컨텐츠(content_video_additional)로 추출할 수 있다.
이때 추가 비디오 시퀀스(sequence_video_additional)가 삽입된 구간은 원본 비디오 컨텐츠(content_video_original)와 연속성을 갖도록 보여지는 것이 바람직하기 때문에 비디오 시퀀스 재배치 모듈(140)은 추가 비디오 시퀀스(sequence_video_additional)가 삽입된 구간에서 일정 범위의 영역에 대해서는 재배치를 하지 않도록 하는 것이 보다 바람직하다.
이러한 실시예에 있어서, 원본 비디오 컨텐츠(content_video_original)와 추가 비디오 컨텐츠(content_video_additional)간의 동기화가 필요하다. 이를 위해 추가 비디오 시퀀스 삽입 모듈(144)은 원본 비디오 시퀀스(sequence_video_original)에 포함된 제 1 오디오 신호 및 추가 비디오 시퀀스(sequence_video_additional)에 포함된 제 2 오디오 신호를 비교하여 추가 비디오 시퀀스(sequence_video_additional)를 교체하도록 구성하거나, 추가 비디오 시퀀스 삽입 모듈(144)은 원본 비디오 시퀀스(sequence_video_original)에 포함된 제 1 촬영시간 정보 및 추가 비디오 시퀀스(sequence_video_additional)에 포함된 제 2 촬영시간 정보를 비교하여 추가 비디오 시퀀스(sequence_video_additional)를 교체하도록 하는 것이 바람직하다.
실시예에 따라서 추가 비디오 시퀀스 삽입 모듈(144)의 추가 비디오 시퀀스(sequence_video_additional) 삽입은 비디오 시퀀스 설정 모듈(130)의 원본 비디오 시퀀스(sequence_video_original) 설정 전 또는 설정 후이거나 비디오 시퀀스 재배치 모듈(140)의 서브셋 비디오 시퀀스(subset_sequence_video)의 재배치 전 또는 재배치 후에 이루어질 수 있다.
원본 비디오 컨텐츠(content_video_original)와 추가 비디오 컨텐츠(content_video_additional)가 프레임 종횡비가 다른 경우 비디오 컨텐츠 자동 편집 시스템(100)은 이를 균일하게 자동으로 조정하는 것이 바람직하다.
이하에서는, 도 5를 참고하여 추가 비디오 시퀀스(sequence_video_additional)의 삽입을 상세히 설명한다. 도 5는 본 발명의 다른 실시예에 따른 추가 비디오 컨텐츠를 이용한 재배치 비디오 컨텐츠의 생성례를 도시하는 비디오 컨텐츠 예시도이다. 도 5에 도시된 바와 같이, 먼저 사용자는 예컨대 본 발명에 따른 비디오 컨텐츠 자동 편집 시스템(100)이 구현된 애플리케이션을 구동한다. 다음으로, 유사한 시간에 유사한 장소에서 촬영된 2 개의 동영상을 각각 원본 비디오 컨텐츠(content_video_original) 및 추가 비디오 컨텐츠(content_video_additional)로 선택한다. 이때 실시예에 따라서는 비디오 컨텐츠 자동 편집 시스템(100)이 사용자 단말기의 저장장치 또는 웹브라우징을 통해 원본 비디오 컨텐츠(content_video_original)의 메타 데이터에 포함된 촬영시간 정보, GPS 정보와 같은 촬영지역 정보를 참조하여 유사 시간 및 유사 장소에서 촬영된 비디오 컨텐츠를 자동으로 검색하여 이를 추가 비디오 컨텐츠(content_video_additional)로 선택하도록 구현할 수 있다.
이때 원본 비디오 컨텐츠(content_video_original)는 두 명의 인물이 프레임에 들어오도록 멀리서 촬영되었고, 추가 비디오 컨텐츠(content_video_additional)는 한 명의 인물만 프레임에 들어오도록 가까이서 촬영되었다. 비디오 시퀀스 설정 모듈(130)은 프레임 1-1(frame 1-1) 내지 프레임 1-5(frame 1-5)를 제 1 원본 비디오 시퀀스(sequence_video_original_1st)로 설정한다. 추가 비디오 시퀀스 추출 모듈(122)은 원본 비디오 컨텐츠(content_video_original)의 프레임 1-3(frame 1-3) 및 프레임 1-4(frame 1-4)이 촬영된 시간에 해당하는 추가 비디오 컨텐츠(content_video_additional)의 프레임 2-3(frame 2-3) 및 프레임 2-4(frame 2-4)를 추가 비디오 시퀀스(sequence_video_additional)로서 추출한다.
추가 비디오 시퀀스 삽입 모듈(144)은 이렇게 추출된 추가 비디오 시퀀스(sequence_video_additional)의 프레임들로 동기화된 지점의 원본 비디오 시퀀스(sequence_video_original)의 프레임들을 교체하고, 재배치 비디오 컨텐츠(content_video_shuffled)는 프레임 1-1, 프레임 1-2, 프레임 2-3, 프레임 2-4, 프레임 1-5의 순서로 구성된다. 이를 통해 2 명이 촬영된 단순한 구성의 원본 비디오 컨텐츠(content_video_original)를 추가 비디오 컨텐츠(content_video_additional)를 통해 2명이 촬영된 영상에서 1명이 클로즈 업된 영상으로 변환되고 다시 2명이 촬영된 영상으로 구성되는 재배치 비디오 컨텐츠(content_video_shuffled)로 자동 편집할 수 있다.
에펠탑, 자유의 여신상과 같은 유명한 장소로 인식될 수 있는 지역에서 촬영된 비디오 컨텐츠의 경우 전문가에 의해 촬영된 해당 장소의 비디오 또는 사진을 추가함으로써 비디오 컨텐츠의 영상품질을 향상시키는 것이 바람직하다. 예컨대 에펠탑 앞에서 일반인이 촬영한 비디오 컨텐츠는 촬영장소의 한계로 인해 제한적인 모습만 프레임에 담을 수 있다. 이때 전문가에 의해 항공 촬영된 에펠탑의 비디오 컨텐츠 또는 사진이 해당 비디오 컨텐츠에 추가되면 영상품질이 향상된다.
이를 위해 비디오 컨텐츠 자동 편집 시스템(100)은 원본 비디오 컨텐츠(content_video_original)가 촬영된 장소에 해당하는 자료화면 비디오 시퀀스(sequence_video_external)를 입력받는 자료화면 입력 모듈(124) 및 재배치 비디오 컨텐츠(content_video_shuffled)에 자료화면 비디오 시퀀스(sequence_video_external)를 삽입하는 자료화면 삽입 모듈(146)을 더 포함할 수 있다. 자료화면 입력 모듈(124)은 사용자가 선택한 사진 또는 비디오 컨텐츠를 자료화면 비디오 시퀀스(sequence_video_external)로서 입력받을 수도 있고, 원본 비디오 컨텐츠(content_video_original)의 메타정보를 통해 확인한 촬영장소 정보를 통해 해당 장소에 관한 비디오 컨텐츠를 통신망을 통해 검색하여 자동으로 자료화면 비디오 시퀀스(sequence_video_external)로서 입력할 수도 있다.
이하에서는, 도 6 내지 도 10을 참조하여 본 발명에 따른 비디오 컨텐츠 자동 편집 방법을 설명한다.
도 6은 본 발명의 실시예에 따른 비디오 컨텐츠 자동 편집 방법을 도시하는 흐름도이다. 먼저, 도 6에 도시된 바와 같이 비디오 컨텐츠 자동 편집 시스템(100)이 사용자로부터 비디오 편집 활성화 입력(input_activation_edit)을 수신받아 원본 비디오 컨텐츠(content_video_original)를 로딩하는 제 1 단계(s10)를 수행한다. 이러한 동작은 단일의 정보 단말기에서 구현된 실시예에서는 사용자가 정보 단말기에서 자동 편집 애플리케이션을 구동하고, 자동 편집 애플리케이션을 통해 정보 단말기의 저장수단에서 자동 편집의 대상이 되는 원본 비디오 컨텐츠(content_video_original)를 선택하고, “자동 편집” 메뉴를 선택하는 방법으로 이루어질 수 있고, 서버-클라이언트 시스템에서 구현된 실시예에서는 사용자가 정보 단말기의 웹브라우저를 통해 자동 편집 서비스 웹사이트에 접속하여 원본 비디오 컨텐츠(content_video_original)를 선택한 후 “자동 편집” 메뉴를 선택하는 방법 등 으로 이루어질 수 있다.
다음으로, 비디오 컨텐츠 자동 편집 시스템(100)이 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스(sequence_video_original)로 정의하여 원본 비디오 컨텐츠(content_video_original)를 제 1 원본 비디오 시퀀스(sequence_video_original_1st) 내지 제 n 원본 비디오 시퀀스(sequence_video_original_nth)(n은 2 이상의 정수)로 구분하는 제 2 단계(s20)를 수행한다.
이때 비디오 컨텐츠 자동 편집 시스템(100)은 여러 가지 기준에 의해 원본 비디오 시퀀스(sequence_video_original)들로 분할할 수 있다, 첫 번째는 촬영 객체들을 기준으로 분할하는 것이고, 두 번째는 카메라의 이동 또는 회전을 검출하여 이를 기준으로 분할하는 것이고, 세 번째는 랜덤한 간격으로 분할하는 것이고, 네 번째는 실질적으로 균일한 수의 프레임들로 균등 분할하는 것이다.
먼저, 촬영 객체들을 기준으로 분할하는 실시예에 따르면, 제 2 단계에 있어서(s20), 비디오 컨텐츠 자동 편집 시스템(100)이 프레임별 이미지 분석을 수행하여 프레임에 포함되는 촬영 객체를 검출하는 제 1 부단계(s21)를 수행한다. 다음으로, 비디오 컨텐츠 자동 편집 시스템(100)이 제 1 부단계(s21)에 의해 검출된 촬영 객체를 기준으로 연속적인 프레임들을 하나의 원본 비디오 시퀀스(sequence_video_original)로 정의하는 제 2 부단계(s22)를 더 수행한다.
이러한 실시예에 따르면, 비디오 컨텐츠 자동 편집 시스템(100)이 원본 비디오 컨텐츠(content_video_original)를 촬영 객체 별로 분할하여 원본 비디오 시퀀스(sequence_video_original)들로 구분함으로써 자동으로 장면(scene) 검출하여 비디오 컨텐츠 편집 이후에도 일정한 비디오의 맥락을 유지하는 효과를 제공한다.
다음으로, 카메라 이동 또는 회전을 검출하여 이를 기준으로 분할하는 실시예에 따르면, 제 2 단계에 있어서(s20), 비디오 컨텐츠 자동 편집 시스템(100)이 카메라 이동 중 촬영된 프레임들 또는 카메라 회전 중 촬영된 카메라 조정 프레임(frame_moving)들을 검출하는 제 3 부단계(S23)를 수행한다. 다음으로, 비디오 컨텐츠 자동 편집 시스템(100)이, 제 3 부단계(S23)에 의해 검출된 카메라 조정 프레임(frame_moving)들을 기준으로 연속적인 프레임들을 하나의 원본 비디오 시퀀스(sequence_video_origingal)로 정의하는 제 4 부단계(s24)를 수행한다.
이때 프레임 이미지 처리 모듈(120)은 비디오 컨텐츠에서 동작 정보를 검출하는 알려진 기법 예컨대 차영상 분석(analysis of difference image), 블럭 정합 알고리즘(block matching algorithm), 광류기반 분석(optical flow analysis) 등을 적용하여 카메라 이동 중 촬영된 프레임들 또는 카메라 회전 중 촬영된 프레임들을 검출할 수 있다.
이러한 실시예에 따르면 장면의 전환을 카메라 조정 프레임 검출을 통해 자동으로 검출하여 비디오 컨텐츠 편집 이후에도 특히 카메라 전환에 의한 장면전환이 있는 원본 비디오 컨텐츠(content_video_original)에 있어서 일정한 비디오의 맥락을 유지하는 효과를 제공한다.
다음으로, 랜덤한 간격으로 분할하는 실시예에 따르면, 제 2 단계(s20)는 비디오 컨텐츠 자동 편집 시스템(100)이 랜덤한 수의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스(content_video_original)로 정의하도록 구성한다(s25).
이러한 실시예에 따르면, 원본 비디오 시퀀스(sequence_video_original)들은 각각 다른 프레임 수를 갖게 되어 비디오 컨텐츠 편집 이후에 편집된 재배치 비디오 컨텐츠(content_video_shuffled)의 역동성 및 의외성이 높아지고 별도의 프레임 이미지 처리 모듈(130)을 요하지 않아 시스템 구성이 간단해지는 효과가 있다.
다음으로, 실질적으로 균일한 수의 프레임들로 균등 분할하는 실시예에 따르면, 제 2 단계(s20)는, 비디오 컨텐츠 자동 편집 시스템(100)이 실질적으로 동일한 수의 연속적인 프레임들의 집합으로 원본 비디오 시퀀스(sequence_video_original)들을 정의하도록 구성한다(s26).
이때 프레임들이 균일하게 나누어지지 않는 경우가 있을 수 있기 때문에 특정 원본 비디오 시퀀스(sequence_video_original)는 다른 원본 비디오 시퀀스(sequence_video_original)에 비해 다소 적거나 다소 많은 수의 프레임들로 구성될 수 있다.
이러한 실시예에 따르면, 별도의 프레임 이미지 처리 모듈(130)을 요하지 않아 시스템 구성이 간단해지는 효과가 있다.
한편, 상기의 여러 가지 원본 비디오 시퀀스(sequence_video_original) 분할방법들은 반드시 택일적으로 적용되야 하는 것은 아니고, 여러 방법이 중복적으로 사용되거나 랜덤하게 선택하여 적용되도록 구성할 수 있다.
다음으로, 비디오 컨텐츠 자동 편집 시스템(100)이 적어도 제 k 원본 비디오 시퀀스(sequence_video_original_kth)(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스(subset_sequence_video)가 제 k+1 원본 비디오 시퀀스(sequence_video_original_k+1th)(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스(sequence_video_original_k-1th)에 선행하도록 랜덤하게 재배치하여 원본 비디오 시퀀스(sequence_video_original)들 및/또는 서브셋 비디오 시퀀스(subset_sequence_video)의 배치 순서에 대한 정보인 시퀀스 배치 정보(info_arrange_sequences)를 생성하는 제 3 단계(s30)를 수행한다.
서브셋 비디오 시퀀스(subset_sequence_video)의 프레임 개수는 원본 비디오 시퀀스(sequence_video_original)의 프레임 개수와 같거나 적게 설정되며, 서브셋 비디오 시퀀스(subset_sequence_video)의 프레임 개수는 비디오 컨텐츠 자동 편집 시스템(100)에 의해 랜덤하게 적용될 수 있다.
단일의 원본 비디오 시퀀스(sequence_video_original)에서 단일의 서브셋 비디오 시퀀스(subset_sequence_video)가 선택될 수도 있고, 복수의 서브셋 비디오 시퀀스(subset_sequence_video)들이 선택될 수 있으며, 선택되는 서브셋 비디오 시퀀스(subset_sequence_video)의 개수는 비디오 컨텐츠 자동 편집 시스템(100)에 의해 랜덤하게 선택될 수 있다.
비디오 컨텐츠 자동 편집 시스템(100)은 단일의 원본 비디오 시퀀스(sequence_video_original)에 대해서만 재배치를 적용할 수도 있고, 복수의 원본 비디오 시퀀스(sequence_video_original)들에 대해서 재배치를 적용할 수 있다. 재배치가 적용되는 원본 비디오 시퀀스(sequence_video_original)의 개수는 비디오 컨텐츠 자동 편집 시스템(100)에 의해 랜덤하게 선택될 수 있다.
서브셋 비디오 시퀀스(subset_sequence_video)가 재배치되는 위치는 비디오 컨텐츠 자동 편집 시스템(100)에 의해 랜덤하게 선택된다. 하지만 생성되는 재배치 비디오 컨텐츠(content_video_shuffled)의 의외성 및 역동성을 제고하기 위해 추가적인 규칙이 적용될 수 있다. 예컨대 단일의 원본 비디오 시퀀스(sequence_video_original)에서 선택된 복수의 서브셋 비디오 시퀀스(subset_sequence_video)들은 최소 300 프레임 이상 서로 이격되는 규칙 등이 부가될 수 있다.
한편, 재배치되는 서브셋 비디오 시퀀스(subset_sequence_video)가 기본 원본 비디오 시퀀스(sequence_video_original)들과 자연스럽게 연결되도록 페이드-인, 페이드-아웃, 화면 넘기기 애니메이션 등의 화면 전환 효과가 자동으로 적용되는 것이 바람직하다. 이를 위해 제 3 단계(s30)는 비디오 컨텐츠 자동 편집 시스템(100)이 재배치된 서브셋 비디오 시퀀스(subset_sequence_video)의 시작지점 또는 종료지점 중 적어도 하나에 화면 전환 효과를 적용하도록 구성할 수 있다.
시퀀스 배치 정보(info_arrange_sequences)는 예컨대 원본 비디오 시퀀스(sequence_video_original)들 및 서브셋 비디오 시퀀스(subset_sequence_video)의 식별 정보, 시작시간 정보, 종료시간 정보, 비디오 시퀀스들 및 서브셋 비디오 시퀀스(subset_sequence_video)의 배치 순서를 포함하여 구성될 수 있다.
마지막으로, 비디오 컨텐츠 자동 편집 시스템(100)이 시퀀스 배치 정보(info_arrange_sequences)에 따른 재배치 비디오 컨텐츠(content_video_shuffled) 또는 시퀀스 배치 정보(info_arrange_sequences)를 저장하는 제 4 단계(s40)를 수행한다.
재배치 비디오 컨텐츠(content_video_shuffled)를 저장하는 경우와 비교하여 시퀀스 배치 정보(info_arrange_sequences)만 저장하는 경우 저장공간의 점유를 최소화할 수 있는 효과가 있다.
복수의 원본 비디오 컨텐츠(content_video_original)들을 사용하여 비디오 시퀀스들을 교차하여 재배치하면 단일의 원본 비디오 컨텐츠(content_video_original)를 사용한 경우 보다 재배치 비디오 컨텐츠(content_video_shuffled)의 역동성 및 의외성이 더욱 증가한다. 이를 위해 제 1 단계(s10)는, 비디오 컨텐츠 자동 편집 시스템(100)이 복수의 원본 비디오 컨텐츠(content_video_original)들을 로딩한다. 제 2 단계(s20)는, 비디오 컨텐츠 자동 편집 시스템(100)이 복수의 원본 비디오 컨텐츠(content_video_original)들을 제 1 원본 비디오 시퀀스(sequence_video_original_1st) 내지 제 n 원본 비디오 시퀀스(sequence_video_original_nth)로 구분한다. 제 3 단계(s30)는, 비디오 컨텐츠 자동 편집 시스템(100)이 단일의 재배치 비디오 컨텐츠(content_video_shuffled)를 생성한다.
한편 랜덤하게 자동 편집된 재배치 비디오 컨텐츠(content_video_shuffled) 시청 후, 사용자가 다르게 재편집된 재배치 비디오 컨텐츠(content_video_shuffled)를 요청하는 경우, 첫 번째로는 원본 비디오 시퀀스(sequence_video_original)를 다시 랜덤하게 재편집하여 2차 재배치 비디오 컨텐츠(content_video_shuffled_2nd)를 생성할 수 있고, 두 번째로는 재배치 비디오 컨텐츠(content_video_shuffled)를 다시 랜덤하게 자동 편집하도록 구성할 수 있다.
원본 비디오 컨텐츠(content_video_original)를 다시 랜덤하게 자동 편집하기 위해, 제 4 단계(s40) 이후에, 비디오 컨텐츠 자동 편집 시스템(100)이, 사용자로부터 추가 재배치 활성화 입력(input_activation_shuffled_renewal)을 수신받아(s50) 서브셋 비디오 시퀀스(subset_sequence_video)를 다시 랜덤하게 재배치하여 2차 재배치 비디오 컨텐츠(content_video_shuffled_2nd)를 생성하는 제 5 단계를 수행한다.
재배치 비디오 컨텐츠(content_video_shuffled)를 다시 랜덤하게 자동 편집하기 위해, 제 4 단계(s40) 이후에, 비디오 컨텐츠 자동 편집 시스템(100)이, 사용자로부터 비디오 추가 편집 활성화 입력(input_activation_edit_iteration)을 수신받아(s61) 재배치 비디오 컨텐츠(content_video_shuffled)를 새로운 원본 비디오 컨텐츠(content_video_original)로서 로딩하여(s62) 재배치 비디오 컨텐츠(content_video_shuffled)에 대해 제 2 단계(s20) 내지 제 4 단계(s40)를 수행하는 제 6 단계를 수행한다.
한편, 사용자의 선택에 따라 랜덤으로 자동 편집되는 원본 비디오 시퀀스(sequence_video_original)의 개수를 조정하는 것이 바람직하다. 사용자의 선택에 따라 원본 비디오 컨텐츠(content_video_original)에 적은 변화만 적용하거나 반대로 많은 변화를 적용하도록 구성할 수 있다.
사용자의 터치 스크린의 터치 시간의 증감 또는 터치 압력의 증감에 따라 변화율을 증감하는 실시예의 경우, 제 1 단계(s10)는 비디오 컨텐츠 자동 편집 시스템(100)이 디스플레이에 대한 사용자의 터치를 비디오 편집 활성화 입력(input_activation_edit)으로 수신받고, 제 2 단계는(s20) 사용자의 터치 시간의 증감 또는 터치 압력의 증감에 따라 비디오 컨텐츠 자동 편집 시스템(100)이 연속적인 프레임들의 집합에 포함되는 프레임 수를 변경하도록 구성한다.
디바이스 흔들림 시간의 증감 또는 세기의 증감에 따라 변화율을 증감하는 실시예의 경우, 제 1 단계(s10)는 비디오 컨텐츠 자동 편집 시스템(100)이 디바이스의 흔들림을 비디오 편집 활성화 입력(input_activation_edit)으로 수신받고, 제 2 단계(s20)는 디바이스 흔들림 시간의 증감 또는 흔들림 세기의 증감에 따라 비디오 컨텐츠 자동 편집 시스템(100)이 연속적인 프레임들의 집합에 포함되는 프레임 수를 변경하도록 구성한다.
한편, 재배치 비디오 컨텐츠(content_video_shuffled)가 사용자의 의도와는 달리 너무 길거나, 반대로 너무 짧아지는 문제가 발생할 수 있다. 따라서 목표 재생시간을 설정하거나 배경음악의 연주시간에 맞도록 자동으로 재배치 비디오 컨텐츠(content_video_shuffled)를 생성하는 것이 바람직하다.
도 7은 본 발명의 다른 실시예에 따른 목표 재생시간 설정에 따른 정적 프레임의 제거방법을 도시하는 흐름도이다. 목표 재생시간에 부합하는 재생길이를 갖는 재배치 비디오 컨텐츠(content_video_shuffled)의 생성을 위해 도 7에 도시된 바와 같이 제 1 단계(s10) 이후에 비디오 컨텐츠 자동 편집 시스템(100)이 재배치 비디오 컨텐츠(content_video_shuffled)의 목표 재생시간을 설정하는 제 7 단계(s110)를 수행한다. 다음으로, 비디오 컨텐츠 자동 편집 시스템(100)이 비디오 편집 활성화 입력(input_activation_edit)의 수신에 따라 원본 비디오 컨텐츠(content_video_original)의 각 프레임을 분석하여 연속 프레임들 간의 코릴레이션인 프레임 코릴레이션(correlation_frame)을 연산하는 제 8 단계(s112)를 수행한다. 다음으로, 비디오 컨텐츠 자동 편집 시스템(100)이 목표 재생시간에 부합하도록 제 k 원본 비디오 시퀀스(sequence_video_original_kth) 또는 서브셋 비디오 시퀀스(subset_video_sequence) 중 프레임 코릴레이션(correlation_frame)이 제 1 설정치 이상인 프레임들을 제거하는 제 9 단계(s113, s114)를 수행한다.
목표 재생시간에 부합하도록 하기 위해서는 비교적 높은 제 1 설정치를 처음에 설정하고, 점진적으로 제 1 설정치를 낮추는 방법(s115, s117)을 통해 재배치 비디오 컨텐츠(content_video_shuffled)의 재생시간을 조절할 수 있다.
도 8은 본 발명의 다른 실시예에 따른 배경음악 설정에 따른 정적 프레임의 제거방법을 도시하는 흐름도이다. 배경음악의 연주시간에 부합하는 재생길이를 갖는 재배치 비디오 컨텐츠(content_video_shuffled)의 생성을 위해 도 8에 도시된 바와 같이 제 1 단계(s10) 이후에 비디오 컨텐츠 자동 편집 시스템(100)이 재배치 비디오 컨텐츠(content_video_shuffled)의 오디오 트랙에 포함될 배경음악을 설정하는 제 10 단계(s111)를 수행한다. 다음으로, 비디오 컨텐츠 자동 편집 시스템(100)이 비디오 편집 활성화 입력(input_activation_edit)의 수신에 따라 원본 비디오 컨텐츠(content_video_original)의 각 프레임을 분석하여 연속 프레임들 간의 코릴레이션인 프레임 코릴레이션(correlation_frame)을 연산하는 제 8 단계(s112)를 수행한다. 다음으로, 비디오 컨텐츠 자동 편집 시스템(100)이 배경음악의 연주시간에 부합하도록 제 k 원본 비디오 시퀀스(sequence_video_original_kth) 또는 서브셋 비디오 시퀀스(subset_video_sequence) 중 프레임 코릴레이션이 제 1 설정치 이상인 프레임들을 제거하는 제 9 단계(s113, s114)를 수행한다.
배경음악의 연주시간에 부합하도록 하기 위해서는 비교적 높은 제 1 설정치를 처음에 설정하고, 점진적으로 제 1 설정치를 낮추는 방법(s116, s117)을 통해 재배치 비디오 컨텐츠(content_video_shuffled)의 재생시간을 조절할 수 있다.
한편, 카메라 이동 또는 카메라 회전 중에 촬영된 영상은 화면의 흔들림, 초점이탈이 발생하여 비디오 컨텐츠의 영상품질을 저하시키기 때문에 이러한 영상부분을 자동으로 제거하는 것이 바람직하다.
재배치 비디오 컨텐츠(content_video_shuffled)의 일부 구간에서 빨리 재생, 천천히 재생, 또는 역 재생을 함으로써 컨텐츠의 역동성 및 의외성을 높일 수 있다. 이를 위해 제 3 단계(s30)는, 비디오 컨텐츠 자동 편집 시스템(100)이 원본 비디오 시퀀스(sequence_video_original)들 또는 서브셋 비디오 시퀀스(subset_sequence_video) 중 적어도 어느 하나에 압축 재생하는 방법, 연장 재생하는 방법, 또는 역 재생하는 방법 중 적어도 하나의 방법을 랜덤하게 적용하도록 구성하는 것을 더 포함할 수 있다.
도 9는 본 발명의 다른 실시예에 따른 추가 비디오 컨텐츠(content_video_additional)를 이용한 재배치 비디오 컨텐츠(content_video_shuffled)의 생성방법을 도시하는 흐름도이다. 도 9에 도시된 바와 같이, 동일한 장면을 촬영한 복수의 비디오 컨텐츠들을 교차 편집함으로써 영상품질을 높일 수 있다. 이를 위해 제 1 단계(s10) 이후에, 비디오 컨텐츠 자동 편집 시스템(100)이 원본 비디오 컨텐츠(content_video_original)가 촬영된 시간대와 실질적으로 동일한 시간대에 다른 카메라 장치에 의해 촬영된 추가 비디오 컨텐츠(content_video_additional)를 로딩하는 제 13 단계(s130)를 수행한다. 제 2 단계(s20)와 제 13 단계(s130)는 실질적으로 동시에 이루어질 수 있다. 다음으로, 비디오 컨텐츠 자동 편집 시스템(100)이 추가 비디오 컨텐츠(content_video_additional)의 적어도 일부의 추가 비디오 시퀀스(sequence_video_additional)를 추출하는 제 14 단계(s140)를 수행한다. 다음으로, 비디오 컨텐츠 자동 편집 시스템(100)이 추가 비디오 시퀀스(sequence_video_additional)를 추가 비디오 시퀀스(sequence_video_additional)가 촬영된 시간대에 선행 또는 후행하는 원본 비디오 시퀀스(sequence_video_original) 중 적어도 어느 하나와 교체하거나 추가 비디오 시퀀스(sequence_video_additional)가 촬영된 시간대에 인접하게 선행 또는 인접하게 후행하는 원본 비디오 시퀀스(sequence_video_original)의 일부 프레임들과 교체하는 제 15 단계(s150)을 더 수행한다.
이때 추가 비디오 시퀀스(sequence_video_additional)가 삽입된 구간은 원본 비디오 컨텐츠(content_video_original)와 연속성을 갖도록 보여지는 것이 바람직하기 때문에 비디오 컨텐츠 자동 편집 시스템(100)은 추가 비디오 시퀀스(sequence_video_additional)가 삽입된 구간에서 일정 범위의 영역에 대해서는 재배치를 하지 않도록 하는 것이 보다 바람직하다.
이러한 실시예에 있어서, 원본 비디오 컨텐츠(content_video_original)와 추가 비디오 컨텐츠(content_video_additional)간의 동기화가 필요하다. 이를 위해 제 15 단계(s150)는, 비디오 컨텐츠 자동 편집 시스템(100)이 원본 비디오 시퀀스(sequence_video_original)에 포함된 제 1 오디오 신호 및 추가 비디오 시퀀스(sequence_video_additional)에 포함된 제 2 오디오 신호를 비교하여 추가 비디오 시퀀스(sequence_video_additional)를 교체하도록 구성하거나, 원본 비디오 시퀀스(sequence_video_original)에 포함된 제 1 촬영시간 정보 및 추가 비디오 시퀀스(sequence_video_additional)에 포함된 제 2 촬영시간 정보를 비교하여 추가 비디오 시퀀스(sequence_video_additional)를 교체하도록 구성한다.
원본 비디오 컨텐츠(content_video_original)와 추가 비디오 컨텐츠(content_video_additional)가 프레임 종횡비가 다른 경우 비디오 컨텐츠 자동 편집 시스템(100)은 이를 균일하게 자동으로 조정하는 것이 바람직하다.
도 10은 본 발명의 다른 실시예에 따른 원본 비디오 컨텐츠(content_video_original)에 자료화면 비디오 컨텐츠를 추가하여 재배치 비디오 컨텐츠(content_video_shuffled)를 생성하는 방법을 도시하는 흐름도이다. 사용자가 촬영한 원본 비디오 컨텐츠(content_video_original)에 전문가가 촬영한 자료화면 비디오 컨텐츠를 더 추가함으로써 재배치 비디오 컨텐츠(content_video_shuffled)의 영상품질을 제고할 수 있다. 이를 위해 도 10에 도시된 바와 같이 제 1 단계(s10) 이후에, 비디오 컨텐츠 자동 편집 시스템(100)이 원본 비디오 컨텐츠(content_video_original)가 촬영된 장소에 해당하는 자료화면 비디오 시퀀스(sequence_video_external)를 로딩하는 제 16 단계(s160)를 수행한다. 이때 사용자가 선택한 사진 또는 비디오 컨텐츠를 자료화면 비디오 시퀀스(sequence_video_external)로서 입력받을 수도 있고, 원본 비디오 컨텐츠(content_video_original)의 메타정보를 통해 확인한 촬영장소 정보를 통해 해당 장소에 관한 비디오 컨텐츠를 통신망을 통해 검색하여 자동으로 자료화면 비디오 시퀀스(sequence_video_external)로서 입력할 수도 있다.
다음으로, 비디오 컨텐츠 자동 편집 시스템(100)이 재배치 비디오 컨텐츠(content_video_shuffled)에 자료화면 비디오 시퀀스(sequence_video_external)를 삽입하는 제 17 단계(s170)를 수행하여, 자료화면 비디오 시퀀스(sequence_video_external)가 삽입된 재배치 비디오 컨텐츠(content_video_shuffled)를 생성한다.
본 발명은 이상에서 설명한 바와 같이 바람직한 실시예를 설명하고 있는 것으로, 상기의 실시예에 본 발명은 한정되지 않으며 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다향한 변경과 수정이 가능하다.
100 : 비디오 컨텐츠 자동 편집 시스템
110 : 입력 인터페이스 모듈 120 : 프레임 이미지 처리 모듈
122 : 추가 비디오 시퀀스 추출 모듈
124 : 자료화면 입력 모듈 130 : 비디오 시퀀스 설정 모듈
132 : 비디오 프레임 제거 모듈 134 : 재생시간 설정 모듈
136 : 배경음악 설정 모듈 140 : 비디오 시퀀스 재배치 모듈
142 : 비디오 시퀀스 제거 모듈 144 : 추가 비디오 시퀀스 삽입 모듈
146 : 자료화면 삽입 모듈 148 : 재생모드 변경 모듈
149 : 화면 전환 효과 모듈 150 : 재배치 비디오 컨텐츠 저장 모듈

Claims (40)

  1. 삭제
  2. 사용자 입력을 수신하는 입력 인터페이스 모듈;
    상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈;
    적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및
    상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 비디오 컨텐츠 자동 편집 시스템에 있어서,
    상기 비디오 컨텐츠 자동 편집 시스템은, 상기 프레임들 별 이미지 분석을 수행하여 상기 프레임에 포함되는 촬영 객체를 검출하는 프레임 이미지 처리 모듈;을 더 포함하고,
    상기 비디오 시퀀스 설정 모듈은, 상기 프레임 이미지 처리 모듈의 의해 검출된 상기 촬영 객체를 기준으로 연속적인 프레임들을 하나의 상기 원본 비디오 시퀀스로 정의하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  3. 사용자 입력을 수신하는 입력 인터페이스 모듈;
    상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈;
    적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및
    상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 비디오 컨텐츠 자동 편집 시스템에 있어서,
    상기 비디오 컨텐츠 자동 편집 시스템은, 카메라 이동 중 촬영된 프레임들 또는 카메라 회전 중 촬영된 프레임들인 카메라 조정 프레임들을 검출하는 프레임 이미지 처리 모듈;을 더 포함하고,
    상기 비디오 시퀀스 설정 모듈은, 상기 프레임 이미지 처리 모듈에 의해 검출된 상기 카메라 조정 프레임들을 기준으로 연속적인 프레임들을 하나의 상기 원본 비디오 시퀀스로 정의하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  4. 삭제
  5. 삭제
  6. 사용자 입력을 수신하는 입력 인터페이스 모듈;
    상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈;
    적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및
    상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 비디오 컨텐츠 자동 편집 시스템에 있어서,
    상기 비디오 컨텐츠 자동 편집 시스템은, 상기 프레임들 별 이미지 분석을 수행하는 프레임 이미지 처리 모듈;을 더 포함하고,
    상기 비디오 시퀀스 설정 모듈은, 상기 프레임 이미지 처리 모듈에 의해 검출된 촬영 객체를 기준으로 연속적인 프레임들을 하나의 상기 원본 비디오 시퀀스로 정의하는 제 1 시퀀스 설정 방법, 상기 프레임 이미지 처리 모듈에 의해 검출된 카메라 조정 프레임들을 기준으로 연속적인 프레임들을 하나의 상기 원본 비디오 시퀀스로 정의하는 제 2 시퀀스 설정 방법, 랜덤한 수의 연속적인 프레임들의 집합을 하나의 상기 원본 비디오 시퀀스로 정의하는 제 3 시퀀스 설정 방법, 실질적으로 동일한 수의 연속적인 프레임들의 집합으로 상기 원본 비디오 시퀀스들을 정의하는 제 4 시퀀스 설정 방법 또는 그 조합들 중 어느 하나의 방법을 사용하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  7. 삭제
  8. 사용자 입력을 수신하는 입력 인터페이스 모듈;
    상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈;
    적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및
    상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 비디오 컨텐츠 자동 편집 시스템에 있어서,
    상기 비디오 시퀀스 재배치 모듈은, 상기 재배치 비디오 컨텐츠의 생성 이후 상기 입력 인터페이스 모듈로부터 추가 재배치 활성화 입력의 수신에 따라 상기 서브셋 비디오 시퀀스를 다시 랜덤하게 재배치하여 2차 재배치 비디오 컨텐츠를 생성하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  9. 사용자 입력을 수신하는 입력 인터페이스 모듈;
    상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈;
    적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및
    상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 비디오 컨텐츠 자동 편집 시스템에 있어서,
    상기 비디오 시퀀스 설정 모듈은, 상기 재배치 비디오 컨텐츠의 생성 이후 상기 입력 인터페이스 모듈로부터 비디오 추가 편집 활성화 입력의 수신에 따라 상기 재배치 비디오 컨텐츠를 새로운 원본 비디오 컨텐츠로서 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스로 구분하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  10. 사용자 입력을 수신하는 입력 인터페이스 모듈;
    상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈;
    적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및
    상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 비디오 컨텐츠 자동 편집 시스템에 있어서,
    상기 입력 인터페이스 모듈은, 디스플레이에 대한 사용자의 터치를 상기 비디오 편집 활성화 입력으로 인식하는 터치 센싱부;를 포함하고,
    상기 비디오 시퀀스 설정 모듈은, 상기 사용자의 터치 시간의 증감 또는 터치 압력의 증감에 따라 상기 연속적인 프레임들의 집합에 포함되는 프레임 수를 변경하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  11. 사용자 입력을 수신하는 입력 인터페이스 모듈;
    상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈;
    적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및
    상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 비디오 컨텐츠 자동 편집 시스템에 있어서,
    상기 입력 인터페이스 모듈은, 디바이스 흔들림을 감지하여 상기 비디오 편집 활성화 입력으로 인식하는 움직임 센싱부;를 포함하고,
    상기 비디오 시퀀스 설정 모듈은, 상기 디바이스 흔들림 시간의 증감 또는 흔들림 세기의 증감에 따라 상기 연속적인 프레임들의 집합에 포함되는 프레임 수를 변경하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  12. 사용자 입력을 수신하는 입력 인터페이스 모듈;
    상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈;
    적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및
    상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 비디오 컨텐츠 자동 편집 시스템에 있어서,
    상기 비디오 컨텐츠 자동 편집 시스템은, 상기 재배치 비디오 컨텐츠의 재생시간이 목표 재생시간에 부합하도록 프레임들 중 일부를 제거하는 비디오 프레임 제거 모듈을 더 포함하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  13. 제 12 항에 있어서,
    상기 비디오 컨텐츠 자동 편집 시스템은, 상기 재배치 비디오 컨텐츠의 목표 재생시간을 설정하는 재생시간 설정 모듈; 및 상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 상기 원본 비디오 컨텐츠의 각 프레임을 분석하여 연속 프레임들 간의 코릴레이션인 프레임 코릴레이션을 연산하는 프레임 이미지 처리 모듈;을 더 포함하고,
    상기 비디오 프레임 제거 모듈은, 상기 목표 재생시간에 부합하도록 제 k 원본 비디오 시퀀스 또는 상기 서브셋 비디오 시퀀스 중 프레임 코릴레이션이 제 1 설정치 이상인 프레임들을 제거하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  14. 제 12 항에 있어서, 상기 비디오 컨텐츠 자동 편집 시스템은,
    상기 재배치 비디오 컨텐츠의 오디오 트랙에 포함될 배경음악의 재생시간을 상기 목표 재생시간으로 적용하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  15. 제 14 항에 있어서,
    상기 비디오 컨텐츠 자동 편집 시스템은, 상기 재배치 비디오 컨텐츠의 오디오 트랙에 포함될 배경음악을 설정하는 배경음악 설정 모듈; 및 상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 상기 원본 비디오 컨텐츠의 각 프레임을 분석하여 연속 프레임들 간의 코릴레이션인 프레임 코릴레이션을 연산하는 프레임 이미지 처리 모듈;을 더 포함하고,
    상기 비디오 프레임 제거 모듈은, 상기 배경음악의 연주시간에 부합하도록 제 k 원본 비디오 시퀀스 또는 상기 서브셋 비디오 시퀀스 중 프레임 코릴레이션이 제 1 설정치 이상인 프레임들을 제거하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  16. 사용자 입력을 수신하는 입력 인터페이스 모듈;
    상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈;
    적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및
    상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 비디오 컨텐츠 자동 편집 시스템에 있어서,
    비디오 컨텐츠 자동 편집 시스템은, 카메라 이동 중 촬영된 프레임들 또는 카메라 회전 중 촬영된 카메라 조정 프레임들을 검출하는 프레임 이미지 처리 모듈; 및 제 k 원본 비디오 시퀀스 또는 상기 서브셋 비디오 시퀀스 중 상기 프레임 이미지 처리 모듈의 연산 결과 카메라 이동 중 촬영된 비디오 프레임 또는 카메라 회전 중 촬영된 프레임인 카메라 조정 프레임을 제거하는 비디오 프레임 제거 모듈;을 더 포함하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  17. 사용자 입력을 수신하는 입력 인터페이스 모듈;
    상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈;
    적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및
    상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 비디오 컨텐츠 자동 편집 시스템에 있어서,
    상기 비디오 컨텐츠 자동 편집 시스템은, 상기 원본 비디오 시퀀스들 또는 상기 서브셋 비디오 시퀀스 중 적어도 어느 하나에 압축 재생하는 방법, 연장 재생하는 방법, 또는 역 재생하는 방법 중 적어도 하나의 방법을 랜덤하게 적용하는 재생모드 변경 모듈;을 더 포함하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  18. 사용자 입력을 수신하는 입력 인터페이스 모듈;
    상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈;
    적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및
    상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 비디오 컨텐츠 자동 편집 시스템에 있어서,
    상기 비디오 컨텐츠 자동 편집 시스템은, 상기 원본 비디오 컨텐츠가 촬영된 시간대와 실질적으로 동일한 시간대에 다른 카메라 장치에 의해 촬영된 추가 비디오 컨텐츠를 로딩하여 상기 추가 비디오 컨텐츠의 적어도 일부의 추가 비디오 시퀀스를 추출하는 추가 비디오 시퀀스 추출 모듈; 및 상기 추가 비디오 시퀀스를 상기 추가 비디오 시퀀스가 촬영된 시간대에 선행 또는 후행하는 상기 원본 비디오 시퀀스 중 적어도 어느 하나와 교체하거나 상기 추가 비디오 시퀀스가 촬영된 시간대에 인접하게 선행 또는 인접하게 후행하는 상기 원본 비디오 시퀀스의 일부 프레임들과 교체하는 추가 비디오 시퀀스 삽입 모듈;을 더 포함하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  19. 제 18 항에 있어서, 상기 추가 비디오 시퀀스 삽입 모듈은,
    상기 원본 비디오 시퀀스에 포함된 제 1 오디오 신호 및 상기 추가 비디오 시퀀스에 포함된 제 2 오디오 신호를 비교하여 상기 추가 비디오 시퀀스를 교체하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  20. 제 18 항에 있어서, 상기 추가 비디오 시퀀스 삽입 모듈은,
    상기 원본 비디오 시퀀스에 포함된 제 1 촬영시간 정보 및 상기 추가 비디오 시퀀스에 포함된 제 2 촬영시간 정보를 비교하여 상기 추가 비디오 시퀀스를 교체하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  21. 사용자 입력을 수신하는 입력 인터페이스 모듈;
    상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈;
    적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및
    상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 비디오 컨텐츠 자동 편집 시스템에 있어서,
    상기 비디오 컨텐츠 자동 편집 시스템은, 상기 원본 비디오 컨텐츠가 촬영된 장소에 해당하는 자료화면 비디오 시퀀스를 입력받는 자료화면 입력 모듈; 및 상기 재배치 비디오 컨텐츠에 상기 자료화면 비디오 시퀀스를 삽입하는 자료화면 삽입 모듈;을 더 포함하여 구성되는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  22. 사용자 입력을 수신하는 입력 인터페이스 모듈;
    상기 입력 인터페이스 모듈로부터 비디오 편집 활성화 입력의 수신에 따라 원본 비디오 컨텐츠의 연속적인 프레임들의 집합을 하나의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 비디오 시퀀스 설정 모듈;
    적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 재배치 비디오 컨텐츠를 생성하는 비디오 시퀀스 재배치 모듈; 및
    상기 재배치 비디오 컨텐츠 또는 상기 재배치 비디오 컨텐츠의 상기 비디오 시퀀스들 및 상기 서브셋 비디오 시퀀스의 배치 순서에 대한 정보인 시퀀스 배치 정보를 저장하는 재배치 비디오 컨텐츠 저장 모듈;을 포함하여 구성되는 비디오 컨텐츠 자동 편집 시스템에 있어서,
    상기 비디오 컨텐츠 자동 편집 시스템은, 재배치된 상기 서브셋 비디오 시퀀스의 시작지점 또는 종료지점 중 적어도 하나에 화면 전환 효과를 적용하는 화면 전환 효과 모듈;을 더 포함하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 시스템.
  23. 삭제
  24. 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 편집 활성화 입력을 수신받아 원본 비디오 컨텐츠를 로딩하는 제 1 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 제 2 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 상기 원본 비디오 시퀀스들 및/또는 상기 서브셋 비디오 시퀀스들의 배치 순서에 대한 정보인 시퀀스 배치 정보를 생성하는 제 3 단계; 및
    상기 비디오 컨텐츠 자동 편집 시스템이, 상기 시퀀스 배치 정보에 따른 재배치 비디오 컨텐츠 또는 상기 시퀀스 배치 정보를 저장하는 제 4 단계;를 포함하여 구성되는 비디오 컨텐츠 자동 편집 방법에 있어서,
    상기 제 2 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 프레임들 별 이미지 분석을 수행하여 상기 프레임에 포함되는 촬영 객체를 검출하는 제 1 부단계; 및 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 제 1 부단계에 의해 검출된 상기 촬영 객체를 기준으로 연속적인 프레임들을 하나의 상기 원본 비디오 시퀀스로 정의하는 제 2 부단계;를 더 포함하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
  25. 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 편집 활성화 입력을 수신받아 원본 비디오 컨텐츠를 로딩하는 제 1 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 제 2 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 상기 원본 비디오 시퀀스들 및/또는 상기 서브셋 비디오 시퀀스들의 배치 순서에 대한 정보인 시퀀스 배치 정보를 생성하는 제 3 단계; 및
    상기 비디오 컨텐츠 자동 편집 시스템이, 상기 시퀀스 배치 정보에 따른 재배치 비디오 컨텐츠 또는 상기 시퀀스 배치 정보를 저장하는 제 4 단계;를 포함하여 구성되는 비디오 컨텐츠 자동 편집 방법에 있어서,
    상기 제 2 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 카메라 이동 중 촬영된 프레임들 또는 카메라 회전 중 촬영된 프레임들인 카메라 조정 프레임들을 검출하는 제 3 부단계; 및 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 제 3 부단계에 의해 검출된 상기 카메라 조정 프레임들을 기준으로 연속적인 프레임들을 하나의 상기 원본 비디오 시퀀스로 정의하는 제 4 부단계;를 더 포함하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
  26. 삭제
  27. 삭제
  28. 삭제
  29. 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 편집 활성화 입력을 수신받아 원본 비디오 컨텐츠를 로딩하는 제 1 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 제 2 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 상기 원본 비디오 시퀀스들 및/또는 상기 서브셋 비디오 시퀀스들의 배치 순서에 대한 정보인 시퀀스 배치 정보를 생성하는 제 3 단계; 및
    상기 비디오 컨텐츠 자동 편집 시스템이, 상기 시퀀스 배치 정보에 따른 재배치 비디오 컨텐츠 또는 상기 시퀀스 배치 정보를 저장하는 제 4 단계;를 포함하여 구성되는 비디오 컨텐츠 자동 편집 방법에 있어서,
    상기 비디오 컨텐츠 자동 편집 방법은, 상기 제 4 단계 이후에, 상기 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 추가 재배치 활성화 입력을 수신받아 상기 서브셋 비디오 시퀀스를 다시 랜덤하게 재배치하여 2차 재배치 비디오 컨텐츠를 생성하는 제 5 단계;를 더 포함하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
  30. 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 편집 활성화 입력을 수신받아 원본 비디오 컨텐츠를 로딩하는 제 1 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 제 2 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 상기 원본 비디오 시퀀스들 및/또는 상기 서브셋 비디오 시퀀스들의 배치 순서에 대한 정보인 시퀀스 배치 정보를 생성하는 제 3 단계; 및
    상기 비디오 컨텐츠 자동 편집 시스템이, 상기 시퀀스 배치 정보에 따른 재배치 비디오 컨텐츠 또는 상기 시퀀스 배치 정보를 저장하는 제 4 단계;를 포함하여 구성되는 비디오 컨텐츠 자동 편집 방법에 있어서,
    상기 비디오 컨텐츠 자동 편집 방법은, 상기 제 4 단계 이후에, 상기 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 추가 편집 활성화 입력을 수신받아 상기 재배치 비디오 컨텐츠에 대해 상기 제 2 단계 내지 제 4 단계를 수행하는 제 6 단계;를 포함하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
  31. 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 편집 활성화 입력을 수신받아 원본 비디오 컨텐츠를 로딩하는 제 1 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 제 2 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 상기 원본 비디오 시퀀스들 및/또는 상기 서브셋 비디오 시퀀스들의 배치 순서에 대한 정보인 시퀀스 배치 정보를 생성하는 제 3 단계; 및
    상기 비디오 컨텐츠 자동 편집 시스템이, 상기 시퀀스 배치 정보에 따른 재배치 비디오 컨텐츠 또는 상기 시퀀스 배치 정보를 저장하는 제 4 단계;를 포함하여 구성되는 비디오 컨텐츠 자동 편집 방법에 있어서,
    상기 제 1 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 디스플레이에 대한 사용자의 터치를 상기 비디오 편집 활성화 입력으로 수신받고,
    상기 제 2 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 사용자의 터치 시간의 증감 또는 터치 압력의 증감에 따라 상기 연속적인 프레임들의 집합에 포함되는 프레임 수를 변경하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
  32. 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 편집 활성화 입력을 수신받아 원본 비디오 컨텐츠를 로딩하는 제 1 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 제 2 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 상기 원본 비디오 시퀀스들 및/또는 상기 서브셋 비디오 시퀀스들의 배치 순서에 대한 정보인 시퀀스 배치 정보를 생성하는 제 3 단계; 및
    상기 비디오 컨텐츠 자동 편집 시스템이, 상기 시퀀스 배치 정보에 따른 재배치 비디오 컨텐츠 또는 상기 시퀀스 배치 정보를 저장하는 제 4 단계;를 포함하여 구성되는 비디오 컨텐츠 자동 편집 방법에 있어서,
    상기 제 1 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이 디바이스의 흔들림을 상기 비디오 편집 활성화 입력으로 수신 받고,
    상기 제 2 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 디바이스 흔들림 시간의 증감 또는 흔들림 세기의 증감에 따라 상기 연속적인 프레임들의 집합에 포함되는 프레임 수를 변경하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
  33. 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 편집 활성화 입력을 수신받아 원본 비디오 컨텐츠를 로딩하는 제 1 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 제 2 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 상기 원본 비디오 시퀀스들 및/또는 상기 서브셋 비디오 시퀀스들의 배치 순서에 대한 정보인 시퀀스 배치 정보를 생성하는 제 3 단계; 및
    상기 비디오 컨텐츠 자동 편집 시스템이, 상기 시퀀스 배치 정보에 따른 재배치 비디오 컨텐츠 또는 상기 시퀀스 배치 정보를 저장하는 제 4 단계;를 포함하여 구성되는 비디오 컨텐츠 자동 편집 방법에 있어서,
    상기 비디오 컨텐츠 자동 편집 방법은, 상기 제 1 단계 이후에, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 재배치 비디오 컨텐츠의 목표 재생시간을 설정하는 제 7 단계; 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 비디오 편집 활성화 입력의 수신에 따라 상기 원본 비디오 컨텐츠의 각 프레임을 분석하여 연속 프레임들 간의 코릴레이션인 프레임 코릴레이션을 연산하는 제 8 단계; 및 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 목표 재생시간에 부합하도록 제 k 원본 비디오 시퀀스 또는 상기 서브셋 비디오 시퀀스 중 프레임 코릴레이션이 제 1 설정치 이상인 프레임들을 제거하는 제 9 단계;를 더 포함하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
  34. 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 편집 활성화 입력을 수신받아 원본 비디오 컨텐츠를 로딩하는 제 1 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 제 2 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 상기 원본 비디오 시퀀스들 및/또는 상기 서브셋 비디오 시퀀스들의 배치 순서에 대한 정보인 시퀀스 배치 정보를 생성하는 제 3 단계; 및
    상기 비디오 컨텐츠 자동 편집 시스템이, 상기 시퀀스 배치 정보에 따른 재배치 비디오 컨텐츠 또는 상기 시퀀스 배치 정보를 저장하는 제 4 단계;를 포함하여 구성되는 비디오 컨텐츠 자동 편집 방법에 있어서,
    상기 비디오 컨텐츠 자동 편집 방법은, 상기 제 1 단계 이후에, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 재배치 비디오 컨텐츠의 오디오 트랙에 포함될 배경음악을 설정하는 제 10 단계; 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 비디오 편집 활성화 입력의 수신에 따라 상기 원본 비디오 컨텐츠의 각 프레임을 분석하여 연속 프레임들 간의 코릴레이션인 프레임 코릴레이션을 연산하는 제 11 단계; 및 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 배경음악의 연주시간에 부합하도록 제 k 원본 비디오 시퀀스 또는 상기 서브셋 비디오 시퀀스 중 프레임 코릴레이션이 제 1 설정치 이상인 프레임들을 제거하는 제 12 단계;를 더 포함하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
  35. 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 편집 활성화 입력을 수신받아 원본 비디오 컨텐츠를 로딩하는 제 1 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 제 2 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 상기 원본 비디오 시퀀스들 및/또는 상기 서브셋 비디오 시퀀스들의 배치 순서에 대한 정보인 시퀀스 배치 정보를 생성하는 제 3 단계; 및
    상기 비디오 컨텐츠 자동 편집 시스템이, 상기 시퀀스 배치 정보에 따른 재배치 비디오 컨텐츠 또는 상기 시퀀스 배치 정보를 저장하는 제 4 단계;를 포함하여 구성되는 비디오 컨텐츠 자동 편집 방법에 있어서,
    상기 제 3 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 원본 비디오 시퀀스들 또는 상기 서브셋 비디오 시퀀스 중 적어도 어느 하나에 압축 재생하는 방법, 연장 재생하는 방법, 또는 역 재생하는 방법 중 적어도 하나의 방법을 랜덤하게 적용하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
  36. 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 편집 활성화 입력을 수신받아 원본 비디오 컨텐츠를 로딩하는 제 1 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 제 2 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 상기 원본 비디오 시퀀스들 및/또는 상기 서브셋 비디오 시퀀스들의 배치 순서에 대한 정보인 시퀀스 배치 정보를 생성하는 제 3 단계; 및
    상기 비디오 컨텐츠 자동 편집 시스템이, 상기 시퀀스 배치 정보에 따른 재배치 비디오 컨텐츠 또는 상기 시퀀스 배치 정보를 저장하는 제 4 단계;를 포함하여 구성되는 비디오 컨텐츠 자동 편집 방법에 있어서,
    상기 비디오 컨텐츠 자동 편집 방법은, 상기 제 2 단계 이후에, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 원본 비디오 컨텐츠가 촬영된 시간대와 실질적으로 동일한 시간대에 다른 카메라 장치에 의해 촬영된 추가 비디오 컨텐츠를 로딩하는 제 13 단계; 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 추가 비디오 컨텐츠의 적어도 일부의 추가 비디오 시퀀스를 추출하는 제 14 단계; 및 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 추가 비디오 시퀀스를 상기 추가 비디오 시퀀스가 촬영된 시간대에 선행 또는 후행하는 상기 원본 비디오 시퀀스 중 적어도 어느 하나와 교체하거나 상기 추가 비디오 시퀀스가 촬영된 시간대에 인접하게 선행 또는 인접하게 후행하는 상기 원본 비디오 시퀀스의 일부 프레임들과 교체하는 제 15 단계;를 더 포함하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
  37. 제 36 항에 있어서, 상기 제 15 단계는,
    상기 비디오 컨텐츠 자동 편집 시스템이 상기 원본 비디오 시퀀스에 포함된 제 1 오디오 신호 및 상기 추가 비디오 시퀀스에 포함된 제 2 오디오 신호를 비교하여 상기 추가 비디오 시퀀스를 교체하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
  38. 제 36 항에 있어서, 상기 제 15 단계는,
    상기 원본 비디오 시퀀스에 포함된 제 1 촬영시간 정보 및 상기 추가 비디오 시퀀스에 포함된 제 2 촬영시간 정보를 비교하여 상기 추가 비디오 시퀀스를 교체하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
  39. 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 편집 활성화 입력을 수신받아 원본 비디오 컨텐츠를 로딩하는 제 1 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 제 2 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 상기 원본 비디오 시퀀스들 및/또는 상기 서브셋 비디오 시퀀스들의 배치 순서에 대한 정보인 시퀀스 배치 정보를 생성하는 제 3 단계; 및
    상기 비디오 컨텐츠 자동 편집 시스템이, 상기 시퀀스 배치 정보에 따른 재배치 비디오 컨텐츠 또는 상기 시퀀스 배치 정보를 저장하는 제 4 단계;를 포함하여 구성되는 비디오 컨텐츠 자동 편집 방법에 있어서,
    상기 비디오 컨텐츠 자동 편집 방법은, 상기 제 2 단계 이후에, 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 원본 비디오 컨텐츠가 촬영된 장소에 해당하는 자료화면 비디오 시퀀스를 로딩하는 제 16 단계; 및 상기 비디오 컨텐츠 자동 편집 시스템이, 상기 원본 비디오 컨텐츠에 상기 자료화면 비디오 시퀀스를 삽입하는 제 17 단계;를 더 포함하여 구성되는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
  40. 비디오 컨텐츠 자동 편집 시스템이, 사용자로부터 비디오 편집 활성화 입력을 수신받아 원본 비디오 컨텐츠를 로딩하는 제 1 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 연속적인 프레임들의 집합을 단일의 원본 비디오 시퀀스로 정의하여 상기 원본 비디오 컨텐츠를 제 1 원본 비디오 시퀀스 내지 제 n 원본 비디오 시퀀스(n은 2 이상의 정수)로 구분하는 제 2 단계;
    상기 비디오 컨텐츠 자동 편집 시스템이, 적어도 제 k 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)의 적어도 일부로 구성되는 서브셋 비디오 시퀀스가 제 k+1 원본 비디오 시퀀스(k는 1 이상 n-1 이하의 정수)에 후행하거나 제 k-1 원본 비디오 시퀀스에 선행하도록 랜덤하게 재배치하여 상기 원본 비디오 시퀀스들 및/또는 상기 서브셋 비디오 시퀀스들의 배치 순서에 대한 정보인 시퀀스 배치 정보를 생성하는 제 3 단계; 및
    상기 비디오 컨텐츠 자동 편집 시스템이, 상기 시퀀스 배치 정보에 따른 재배치 비디오 컨텐츠 또는 상기 시퀀스 배치 정보를 저장하는 제 4 단계;를 포함하여 구성되는 비디오 컨텐츠 자동 편집 방법에 있어서,
    상기 제 3 단계는, 상기 비디오 컨텐츠 자동 편집 시스템이 상기 재배치된 상기 서브셋 비디오 시퀀스의 시작지점 또는 종료지점 중 적어도 하나에 화면 전환 효과를 적용하는 것을 특징으로 하는 비디오 컨텐츠 자동 편집 방법.
KR1020160048882A 2016-03-22 2016-04-21 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법 KR101717014B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020160048882A KR101717014B1 (ko) 2016-04-21 2016-04-21 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법
PCT/KR2017/003062 WO2017164640A1 (en) 2016-03-22 2017-03-22 System and method for editing video contents automatically technical field
US16/087,167 US11438510B2 (en) 2016-03-22 2017-03-22 System and method for editing video contents automatically technical field

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160048882A KR101717014B1 (ko) 2016-04-21 2016-04-21 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020170029575A Division KR101751863B1 (ko) 2017-03-08 2017-03-08 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법

Publications (1)

Publication Number Publication Date
KR101717014B1 true KR101717014B1 (ko) 2017-03-15

Family

ID=58402977

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160048882A KR101717014B1 (ko) 2016-03-22 2016-04-21 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법

Country Status (1)

Country Link
KR (1) KR101717014B1 (ko)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002232839A (ja) * 2001-01-20 2002-08-16 Samsung Electronics Co Ltd ビデオシーケンスのラベルオブジェクト映像生成装置及びその方法
KR20050003690A (ko) * 2003-07-04 2005-01-12 주식회사 엠투그래픽스 동영상의 자동편집장치와 그 방법 및 동영상자동편집방법이 저장된 기록매체
US7627823B2 (en) 1998-12-28 2009-12-01 Sony Corporation Video information editing method and editing device
US8315507B2 (en) 2006-01-05 2012-11-20 Nec Corporation Video generation device, video generation method, and video generation program
US20150131973A1 (en) * 2013-11-11 2015-05-14 Magisto Ltd. Method and system for automatic generation of clips from a plurality of images based on an inter-objects relationship score
US9058841B2 (en) 2010-07-15 2015-06-16 Samsung Electronics Co., Ltd. Method and system for editing video sequences

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7627823B2 (en) 1998-12-28 2009-12-01 Sony Corporation Video information editing method and editing device
US7904813B1 (en) 1998-12-28 2011-03-08 Sony Corporation Method for editing video information and editing device
JP2002232839A (ja) * 2001-01-20 2002-08-16 Samsung Electronics Co Ltd ビデオシーケンスのラベルオブジェクト映像生成装置及びその方法
KR20050003690A (ko) * 2003-07-04 2005-01-12 주식회사 엠투그래픽스 동영상의 자동편집장치와 그 방법 및 동영상자동편집방법이 저장된 기록매체
US8315507B2 (en) 2006-01-05 2012-11-20 Nec Corporation Video generation device, video generation method, and video generation program
US9058841B2 (en) 2010-07-15 2015-06-16 Samsung Electronics Co., Ltd. Method and system for editing video sequences
US20150131973A1 (en) * 2013-11-11 2015-05-14 Magisto Ltd. Method and system for automatic generation of clips from a plurality of images based on an inter-objects relationship score

Similar Documents

Publication Publication Date Title
US11438510B2 (en) System and method for editing video contents automatically technical field
KR101396409B1 (ko) 동영상 촬영장치 및 그 방법
KR100564893B1 (ko) 프레임정보 기술방법 및 그 장치, 프레임정보 생성방법 및 그 장치, 특수재생방법 및 그 장치, 특수재생 제어정보 생성장치 및 컴퓨터 독출가능한 기록매체
JP5877895B2 (ja) 所定の人間を含むビデオサマリー
US8665345B2 (en) Video summary including a feature of interest
EP4195658A1 (en) Video processing method and electronic device
US8004594B2 (en) Apparatus, method, and program for controlling display of moving and still images
JP4253139B2 (ja) フレーム情報記述方法、フレーム情報生成装置及び方法、映像再生装置及び方法並びに記録媒体
JP5886839B2 (ja) 情報処理装置、情報処理方法、プログラム、記憶媒体及び集積回路
JP2012070283A (ja) 映像処理装置、方法、及び映像処理システム
RU2008136457A (ru) Просмотр видео с использованием уменьшенного изображения
KR101812103B1 (ko) 썸네일이미지 설정방법 및 설정프로그램
KR20160098949A (ko) 동영상 생성 방법, 장치 및 컴퓨터 프로그램
US20120301113A1 (en) Picture editing apparatus and picture editing method
JP2017538331A (ja) ビデオキャプチャの処理方法、システム及び装置
JP2006140559A (ja) 画像再生装置及び画像再生方法
JP2019516331A (ja) 再生の最適化方法及び装置
KR20090131220A (ko) 영상 장치 및 그 제어 방법
US20120251081A1 (en) Image editing device, image editing method, and program
JP2008131617A (ja) 映像処理装置
KR101828601B1 (ko) 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법
KR100860510B1 (ko) 모바일 장치에서 시각 효과가 삽입된 슬라이드 쇼의 생성방법
KR102361811B1 (ko) 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법
KR101751863B1 (ko) 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법
KR101827985B1 (ko) 비디오 컨텐츠 자동 편집 시스템 및 자동 편집 방법

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20200305

Year of fee payment: 4